KR101791222B1 - Portable electric device for providing mouse function and operating method thereof - Google Patents

Portable electric device for providing mouse function and operating method thereof Download PDF

Info

Publication number
KR101791222B1
KR101791222B1 KR1020110079713A KR20110079713A KR101791222B1 KR 101791222 B1 KR101791222 B1 KR 101791222B1 KR 1020110079713 A KR1020110079713 A KR 1020110079713A KR 20110079713 A KR20110079713 A KR 20110079713A KR 101791222 B1 KR101791222 B1 KR 101791222B1
Authority
KR
South Korea
Prior art keywords
display device
touch screen
output image
external display
mouse
Prior art date
Application number
KR1020110079713A
Other languages
Korean (ko)
Other versions
KR20130017339A (en
Inventor
오충록
Original Assignee
오충록
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 오충록 filed Critical 오충록
Priority to KR1020110079713A priority Critical patent/KR101791222B1/en
Publication of KR20130017339A publication Critical patent/KR20130017339A/en
Application granted granted Critical
Publication of KR101791222B1 publication Critical patent/KR101791222B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03543—Mice or pucks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547—Touch pads, in which fingers can move on a surface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1407—General aspects irrespective of display type, e.g. determination of decimal point position, display with fixed or driving decimal point, suppression of non-significant zeros

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)

Abstract

마우스 기능 제공 휴대 전자기기 및 그 운용 방법이 개시된다. 본 발명의 일측면에 따른 터치스크린을 구비한 전자기기는 터치스크린에 출력되는 출력영상을 연결된 외부표시장치로 전송하기 위한 데이터통신부; 및 출력영상이 외부표시장치로 전송되면, 출력영상 상에 마우스포인터를 출력시키고, 터치스크린을 마우스 패드 모드로 전환하여 터치스크린으로의 사용자 입력에 따라 마우스포인터의 움직임 및 클릭 입력을 제어하는 제어부를 포함한다. A portable electronic device having a mouse function and a method of operating the same are disclosed. An electronic apparatus having a touch screen according to an aspect of the present invention includes a data communication unit for transmitting an output image output to a touch screen to a connected external display device; And a control unit for outputting a mouse pointer on the output image when the output image is transmitted to the external display device and switching the touch screen to the mouse pad mode to control movement and click input of the mouse pointer according to user input to the touch screen .

Description

마우스 기능 제공 휴대 전자기기 및 그 운용 방법{Portable electric device for providing mouse function and operating method thereof}[0001] The present invention relates to a portable electronic device and a method for operating the same,

본 발명은 휴대 전자기기의 마우스 기능에 관한 것으로서, 좀 더 상세하게는 연결된 외부표시장치로 영상을 전송할 때 마우스 기능을 수행하는 휴대 전자기기 및 그 방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a mouse function of a portable electronic device, and more particularly, to a portable electronic device performing a mouse function when transmitting an image to a connected external display device and a method thereof.

최근에는 통화 기능뿐 아니라, 다양한 응용프로그램을 설치하여 이용할 수 있는 스마트폰(smart-phone) 및 태블릿PC(예를 들어, 아이패드, 갤럭시 탭 등) 등의 휴대 전자기기가 널리 보급되고 있는 추세이다.Portable electronic devices such as a smart phone and a tablet PC (for example, an iPad, a Galaxy Tab, etc.) which can install and use various application programs in addition to a call function have been widely used recently .

상기한 휴대 전자기기의 가장 큰 장점은 기존의 데스크탑 컴퓨터 또는 노트북과 같은 랩탑 컴퓨터에 비해 컴퓨팅 기기로서 작은 크기를 가져 휴대성이 좋다는 것이다. 하지만 이러한 장점으로 인한 제약으로는 작은 크기의 디스플레이 수단(일반적으로 터치스크린이 이용됨)을 갖는다는 것이다.The major advantage of the portable electronic device described above is that it is small in size as a computing device compared to a conventional desktop computer or a laptop computer such as a notebook computer, and thus is portable. However, a limitation due to this advantage is that it has a small-sized display means (generally a touch screen is used).

즉, 많은 사용자들이 전화 기능뿐 아니라, 인터넷 기능 등을 주로 이용하고 있는데, 웹 페이지(webpage) 검색 또는 문서 열람의 경우 작은 터치스크린으로 인해 불편을 겪게 된다.That is, many users mainly use Internet functions as well as telephone functions. In the case of a web page search or a document reading, a small touch screen suffers inconvenience.

따라서, 본 발명은 상술한 문제점을 해결하기 위해 안출된 것으로서, 영상 정보를 TV, 모니터 등의 외부표시장치로 전송하여 보다 큰 화면으로 휴대 전자기기를 이용하고자 할 때, 휴대 전자기기를 마우스 장치로 이용할 수 있도록 하는 마우스 기능 제공 휴대 전자기기 및 그 운용 방법을 제공하기 위한 것이다.SUMMARY OF THE INVENTION [0008] Accordingly, the present invention has been made to solve the above-mentioned problems occurring in the prior art, and it is an object of the present invention to provide a portable electronic device, And to provide a portable electronic device and a method of operating the portable electronic device.

본 발명의 다른 목적들은 이하에 서술되는 바람직한 실시예를 통하여 보다 명확해질 것이다.Other objects of the present invention will become more apparent through the following preferred embodiments.

본 발명의 일 측면에 따르면, 터치스크린을 구비한 전자기기에 있어서, 터치스크린에 출력되는 출력영상을 연결된 외부표시장치로 전송하기 위한 데이터통신부; 및 상기 출력영상이 상기 외부표시장치로 전송되면, 상기 출력영상 상에 마우스포인터를 출력시키고, 상기 터치스크린을 마우스 패드 모드로 전환하여 상기 터치스크린으로의 사용자 입력에 따라 상기 마우스포인터의 움직임 및 클릭 입력을 제어하는 제어부를 포함하는 마우스 기능 제공 휴대 전자기기가 제공된다.According to an aspect of the present invention, there is provided an electronic device having a touch screen, comprising: a data communication unit for transmitting an output image output to a touch screen to an external display device; And outputting a mouse pointer on the output image when the output image is transmitted to the external display device, switching the touch screen to a mouse pad mode, and moving and clicking the mouse pointer according to a user input to the touch screen There is provided a portable electronic apparatus provided with a mouse function including a control unit for controlling input.

그리고, 터치스크린; 본체의 움직임을 감지하는 센서부; 외부표시장치가 연결되면, 상기 터치스크린에 출력되는 출력영상을 상기 외부표시장치로 전송하기 위한 데이터통신부; 및 상기 출력영상이 상기 외부표시장치로 전송되면, 상기 터치스크린를 마우스 클릭을 위한 사용자 인터페이스 화면이 표시되는 마우스 입력 모드로 전환하여, 상기 센서부에 의한 감지정보에 따라 움직임이 제어되고 상기 사용자 인터페이스 화면으로의 입력에 따라 클릭이 제어되는 마우스포인터를 상기 출력영상 상에 출력하는 제어부를 포함하는 마우스 기능 제공 휴대 전자기기가 제공된다.And, touch screen; A sensor unit for sensing movement of the main body; A data communication unit for transmitting an output image to the external display device when the external display device is connected; And controlling the operation of the touch screen in accordance with the sensing information by the sensor unit when the output image is transmitted to the external display device and switching the touch screen to a mouse input mode in which a user interface screen for mouse click is displayed, And a control unit for outputting a mouse pointer whose click is controlled according to the input of the mouse pointer on the output image.

여기서, 상기 센서부는 상기 본체가 기울어지거나 움직인 거리 및 방향을 측정하기 위한 센서를 포함하되, 상기 제어부는 상기 센서부에 의해 측정된 값을 이용하여 상기 마우스포인터의 이동 방향과 움직임 거리를 결정할 수 있다.Here, the sensor unit may include a sensor for measuring a distance and a direction in which the main body is tilted or moved, and the controller may determine a movement direction and a movement distance of the mouse pointer using a value measured by the sensor unit have.

또한, 상기 센서부는 외부 영상을 촬영하기 위한 카메라부를 포함하되, 상기 제어부는 상기 외부 영상을 분석하여 상기 마우스포인터의 움직임을 결정할 수 있다.Also, the sensor unit may include a camera unit for capturing an external image, and the controller may determine the movement of the mouse pointer by analyzing the external image.

또한, 상기 제어부는 미리 설정된 마우스 기능 프로그램이 실행된 경우에만, 상기 출력영상에 상기 마우스포인터를 출력할 수 있다.Also, the control unit may output the mouse pointer to the output image only when a preset mouse function program is executed.

또한, 상기 터치스크린은 상기 출력영상을 표시하다가 상기 외부표시장치가 연결되면, 상기 출력영상의 표시를 중단할 수 있다.
Also, the touch screen displays the output image, and when the external display device is connected, the display of the output image may be stopped.

본 발명의 다른 측면에 따르면, 터치스크린을 구비한 휴대 전자기기에서의 마우스 기능 제공 방법에 있어서, 외부표시장치로의 출력영상 전달 명령이 입력되면, 연결된 상기 외부표시장치로 터치스크린을 통해 출력되는 출력영상의 전송을 시작하는 단계; 상기 출력영상 상에 마우스포인터를 출력시키고, 상기 터치스크린을 마우스 입력 모드로 전환하는 단계; 및 상기 터치스크린으로의 입력정보에 따라 상기 마우스포인터의 움직임 또는 클릭 입력을 처리하는 단계를 포함하는 휴대 전자기기의 마우스 기능 제공 방법 및 그 방법을 실행하는 프로그램이 기록된 기록매체가 제공된다.According to another aspect of the present invention, there is provided a method of providing a mouse function in a portable electronic device having a touch screen, comprising the steps of: when an output image transfer command to an external display device is input, Starting transmission of an output image; Outputting a mouse pointer on the output image and switching the touch screen to a mouse input mode; And processing a movement or a click input of the mouse pointer according to input information to the touch screen, and a recording medium on which a program for executing the method is recorded.

여기서, 상기 출력영상을 상기 외부표시장치로 전송하는 단계는, 상기 외부표시장치의 해상도를 인식하는 단계; 및 상기 해상도에 적합한 사이즈로 상기 출력영상을 변환하는 단계를 포함할 수 있거나, 또는 상기 외부표시장치의 디스플레이 규격을 인식하는 단계; 및 상기 디스플레이 규격에 상응하는 출력모드로 출력영상을 변환하는 단계를 포함할 수 있다.The step of transmitting the output image to the external display device may include: recognizing a resolution of the external display device; And converting the output image to a size suitable for the resolution, or recognizing a display specification of the external display device; And converting the output image into an output mode corresponding to the display standard.

본 발명에 따르면, 터치스크린에 표시되던 화면을 보다 큰 사이즈의 외부표시장치로 전송하고, 터치스크린을 마우스 기능을 위한 사용자 인터페이스로서 이용함으로써, 사용자에게는 보다 넓은 화면을 이용함과 동시에 입력의 편의성을 제공할 수 있다.According to the present invention, a screen displayed on a touch screen is transmitted to an external display device of a larger size, and a touch screen is used as a user interface for a mouse function, so that a user can use a wider screen and provide convenience of input can do.

도 1은 본 발명의 일 실시예에 따른 마우스 기능 제공 휴대 전자기기의 운용에 대한 개념을 도시한 예시도.
도 2는 본 발명의 일 실시예에 따른 마우스 기능 제공 휴대 전자기기의 구성을 도시한 블록도.
도 3 및 도 4는 본 발명의 각 실시예에 따른 터치스크린의 마우스 기능 모드에 의한 사용자 인터페이스 화면을 도시한 예시도들.
도 5는 본 발명의 일 실시예에 따른 마우스 모드 실행 과정을 도시한 흐름도.
도 6은 본 발명의 일 실시예에 따른 휴대 전자기기의 마우스 모드 실행 시의 외부표시장치에 표시되는 출력영상을 도시한 예시도.BRIEF DESCRIPTION OF THE DRAWINGS FIG. 1 is a diagram illustrating a concept of operation of a portable electronic device provided with a mouse function according to an embodiment of the present invention; FIG.
2 is a block diagram showing the configuration of a portable electronic device provided with a mouse function according to an embodiment of the present invention;
FIG. 3 and FIG. 4 are views illustrating a user interface screen according to a mouse function mode of a touch screen according to each embodiment of the present invention. FIG.
5 is a flowchart illustrating a mouse mode execution process according to an exemplary embodiment of the present invention.
6 is an exemplary view showing an output image displayed on an external display device when the portable electronic device is in the mouse mode according to an embodiment of the present invention;

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.While the invention is susceptible to various modifications and alternative forms, specific embodiments thereof are shown by way of example in the drawings and will herein be described in detail. It should be understood, however, that the invention is not intended to be limited to the particular embodiments, but includes all modifications, equivalents, and alternatives falling within the spirit and scope of the invention.

이하, 첨부한 도면들을 참조하여 본 발명에 따른 실시예들을 상세히 설명하기로 하며, 첨부 도면을 참조하여 설명함에 있어 도면 부호에 상관없이 동일하거나 대응하는 구성 요소는 동일한 참조번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Reference will now be made in detail to embodiments of the present invention, examples of which are illustrated in the accompanying drawings, wherein like reference numerals refer to the like elements throughout the specification and claims. The description will be omitted.

도 1은 본 발명의 일 실시예에 따른 마우스 기능 제공 휴대 전자기기의 운용에 대한 개념을 도시한 예시도이고, 도 2는 본 발명의 일 실시예에 따른 마우스 기능 제공 휴대 전자기기의 구성을 도시한 블록도이고, 도 3 및 도 4는 본 발명의 각 실시예에 따른 터치스크린의 마우스 기능 모드에 의한 사용자 인터페이스 화면을 도시한 예시도들이다.FIG. 1 is a diagram illustrating a concept of operation of a portable electronic device providing a mouse function according to an embodiment of the present invention. FIG. 2 is a block diagram illustrating a configuration of a portable electronic device providing a mouse function according to an embodiment of the present invention. FIG. 3 and FIG. 4 illustrate user interface screens according to the mouse function mode of the touch screen according to each embodiment of the present invention.

도 1을 참조하면, 본 실시예에 따른 휴대 전자기기(10)는 스마트폰, PDA 등과 같이 터치스크린을 구비한 전자장치이며, 도면과 같이 무선 또는 유선으로 연결된 TV, 모니터와 같은 외부표시장치(30)로 데이터를 전송할 수 있다.Referring to FIG. 1, the portable electronic device 10 according to the present embodiment is an electronic device having a touch screen such as a smart phone, a PDA, and the like. The portable electronic device 10 may be an external display device such as a TV or a monitor 30).

특히, 본 실시예에 따른 휴대 전자기기(10)는 외부표시장치(30)가 연결되면, 터치스크린에 출력되던 출력영상을 연결된 외부표시장치(30)로 전송하고, 해당 출력영상에는 마우스포인터(40, mouse pointer)가 함께 출력되며, 해당 마우스포인터(40)를 제어하기 위한 사용자 인터페이스 화면이 터치스크린에 표시될 수 있다.In particular, when the external display device 30 is connected, the portable electronic device 10 according to the present embodiment transmits an output image output to the touch screen to the connected external display device 30, and a mouse pointer 40 and a mouse pointer) are output together, and a user interface screen for controlling the mouse pointer 40 may be displayed on the touch screen.

일 실시예에 따른 도 3을 먼저 참조하면, 휴대 전자기기(10)는 연결된 외부표시장치(30)로 출력영상을 전송하면, 터치스크린을 마우스 패드(pad) 모드로 전환하여, 도면에 도시된 바와 같은 사용자 인터페이스 화면을 출력한다. 사용자 인터페이스 화면에는 마우스포인터(40)를 움직이기 위한 터치패드(330)와 클릭(click) 입력을 위한 좌클릭 버튼(310)과 우클릭 버튼(320)이 표시된다. 따라서, 사용자는 터치스크린의 터치패드(330) 부분을 슬라이딩 방식(즉 터치한 상태로 움직이는 방식)으로 터치하면 마우스포인트(40)를 상하좌우로 이동시킬 수 있으며, 좌클릭 버튼(310)과 우클릭 버튼(320)을 터치함으로써 마우스 클릭 입력을 수행할 수 있게 된다.Referring to FIG. 3 according to an embodiment, when the portable electronic device 10 transmits an output image to the connected external display device 30, the portable electronic device 10 converts the touch screen into a mouse pad mode, And outputs a user interface screen such as a bar. A touch pad 330 for moving the mouse pointer 40 and a left click button 310 and a right click button 320 for clicking input are displayed on the user interface screen. Accordingly, the user can move the mouse point 40 up, down, left, and right by touching the touch pad 330 of the touch screen in a sliding manner (i.e., moving in a touched state) The user can touch the button 320 to perform mouse click input.

다른 실시예에 따른 도 4를 참조하면, 사용자 인터페이스 화면으로는 마우스포인터(40)의 클릭 입력을 위한 좌클릭 버튼(410)과 우클릭 버튼(420)이 일측에 표시되고, 마우스포인터(40)의 움직임은 휴대 전자기기(10) 본체의 움직임에 상응하도록 처리될 수 있다. 다시 말해, 본체의 움직임을 자이로 센서 및/또는 가속도 센서 등의 센서를 이용하여 감지하고, 감지된 본체의 움직임에 따라 마우스포인터(40)의 움직임을 처리하는 것이다.4, a left-click button 410 and a right-click button 420 for clicking input of the mouse pointer 40 are displayed on one side of the user interface screen, The movement can be processed to correspond to the movement of the main body of the portable electronic device 10. In other words, the movement of the main body is detected by using a sensor such as a gyro sensor and / or an acceleration sensor, and the movement of the mouse pointer 40 is processed according to the movement of the main body detected.

따라서, 본 실시예에 따르면, 사용자는 휴대 전자기기(10)를 파지한 상태로 상하좌우로 움직여 마우스포인터(40)의 움직임을 제어할 수 있으며, 터치스크린(210)에 표시되는 좌클릭 버튼과 우클릭 버튼을 이용하여 클릭 입력을 수행할 수 있다.Therefore, according to the present embodiment, the user can control the movement of the mouse pointer 40 by moving the portable electronic device 10 in the up, down, left, and right directions while gripping the portable electronic device 10, The click input can be performed using the right-click button.

도 3 및 도 4를 참조하여 설명한 바와 같이, 사용자는 휴대 전자기기(10)의 화면에 표시되던 영상을 외부의 TV, 모니터와 같은 외부표시장치(30)로 전송하여 시청하면서, 휴대 전자기기(10)를 마우스 기기로 활용할 수 있어, 보다 큰 화면을 이용하면서 동시에 휴대 전자기기(10)를 마우스로 이용할 수 있다.3 and 4, the user transmits the image displayed on the screen of the portable electronic device 10 to the external display device 30 such as an external TV or monitor, while watching the portable electronic device 10 10 can be used as a mouse device, so that the portable electronic device 10 can be used as a mouse while using a larger screen.

이하, 도 2를 참조하여 휴대 전자기기(10)의 구성에 대해 설명하기로 한다.Hereinafter, the configuration of the portable electronic device 10 will be described with reference to FIG.

도 2를 참조하면, 본 실시예에 따른 휴대 전자기기(10)는 터치스크린(210), 데이터통신부(220), 버퍼부(230), 제어부(240) 및 센서부(250)를 포함하며, 제어부(240)는 그 기능에 따라 영상 처리부(242), 프로그램 운용부(244) 및 마우스 기능처리부(246)를 포함할 수 있다.2, the portable electronic device 10 according to the present embodiment includes a touch screen 210, a data communication unit 220, a buffer unit 230, a control unit 240, and a sensor unit 250, The control unit 240 may include an image processing unit 242, a program operation unit 244, and a mouse function processing unit 246 according to the functions thereof.

터치스크린(210)은 현재에도 많은 기종의 전자기기에 탑재되고 있는 실정이므로, 그 기능에 대한 상세한 설명은 생략하기로 한다.Since the touch screen 210 is currently mounted on many kinds of electronic apparatuses, a detailed description of its function will be omitted.

데이터통신부(220)는 무선 근거리통신 기능 또는 유선케이블을 이용한 방식으로 외부의 디스플레이 수단을 구비한 TV, 모니터와 같은 외부표시장치(30)로 데이터를 전송하기 위한 것이다. 즉, 데이터통신부(220)를 통해 휴대 전자기기(10)는 영상 데이터를 외부표시장치(30)로 전송할 수 있으며, 외부표시장치(30)는 수신된 영상 데이터를 구비한 디스플레이수단을 통해 출력한다.The data communication unit 220 is for transmitting data to an external display device 30 such as a TV or a monitor equipped with external display means in a wireless local area communication function or using a wire cable. That is, the portable electronic device 10 can transmit the image data to the external display device 30 through the data communication unit 220, and the external display device 30 outputs the image data through the display means having the received image data .

버퍼부(230)는 터치스크린(210)을 통해 출력되는 영상 데이터를 버퍼링(buffering)하기 위한 것이며, 또는 연결된 외부표시장치(30)로 전송될 데이터를 버퍼링한다.The buffer unit 230 buffers image data output through the touch screen 210 or buffers data to be transmitted to the external display device 30 connected thereto.

버퍼부(230)의 제1 버퍼(232)는 터치스크린(210)을 통해 출력되는 영상 데이터가 버퍼링되고, 제2 버퍼(234)는 외부표시장치(30)로 전송될 데이터가 버퍼링된다. 물론 이는 하나의 실시예일뿐이며, 다른 실시예에 따르면, 터치스크린(210)으로 출력되는 영상이 제1 버퍼(232)에 버퍼링되다가, 외부표시장치(30)가 연결되면 제1 버퍼(232)에는 외부표시장치(30)로 전성될 영상데이터가 버퍼링되고, 터치스크린(210)으로 출력되는 마우스 기능 모드에 따른 사용자 인터페이스를 위한 영상데이터가 제2 버퍼(234)로 버퍼링될 수 있다. 즉, 버퍼부(230)는 두 개의 버퍼를 구비하여, 외부표시장치(30)로 전송할 영상 데이터와 터치스크린(210)으로 출력될 영상데이터를 각각 버퍼링할 수 있다. 물론 이도 하나의 실시예일뿐이며, 더 많은 버퍼가 이용될 수도 있음은 당연하다.The first buffer 232 of the buffer unit 230 buffers image data output through the touch screen 210 and the second buffer 234 buffers data to be transmitted to the external display device 30. According to another embodiment of the present invention, an image output from the touch screen 210 is buffered in the first buffer 232, and when the external display device 30 is connected to the first buffer 232, The image data to be transmitted to the external display device 30 is buffered and the image data for the user interface according to the mouse function mode output to the touch screen 210 may be buffered in the second buffer 234. [ That is, the buffer unit 230 includes two buffers, and can buffer the image data to be transmitted to the external display device 30 and the image data to be output to the touch screen 210, respectively. Of course, this is only one embodiment, and it is natural that more buffers may be used.

센서부(250)는 휴대 전자기기(10) 본체의 움직임을 센싱하기 위한 것으로, 예를 들어 자이로 센서인 경우 본체의 기울어짐을 센싱할 수 있으며, 가속도 센서인 경우 본체의 움직임 및 움직인 정도를 센싱할 수 있다. 센서부(250)의 센싱정보에 기반하여, 본체의 움직임에 따라 마우스포인터(40)의 움직임이 제어되는 것이다. 예를 들어, 본체의 기울어짐이 센싱되는 경우, 기울어진 방향과 기울어진 정도에 의해, 마우스포인터(40)의 움직임 방향과 움직임 정도가 결정될 수 있을 것이며, 가속도 센서의 경우 본체의 움직임 정도에 따라 마우스포인터(40)의 움직임 정도가 결정될 것이다. 이러한 자이로 센서 및 가속도 센서뿐 아니라 본체의 움직임을 인식할 수 있는 모든 센서가 동일하게 적용될 수 있으며, 각 센서의 조합으로 보다 정확한 본체의 움직임에 따른 방향 및 세기가 측정될 수 있을 것이다. 한가지 예를 더 들자면, 센서부(250)는 카메라로 구현될 수 있으며, 이 경우 휴대 전자기기(10)는 외부 영상을 분석하여 본체의 움직임 및 움직인 방향과 움직인 정도를 인식할 수 있다. 쉬운 예를 들자면, 0.1초 간격으로 촬영된 이전 영상과 현재 영상을 비교하여, 영상 내의 임의의 물체가 위치한 지점의 변화와 서로간의 거리를 이용하여, 움직인 방향과 움직임 정도를 인식할 수 있을 것이다. 이미지 분석 기술은 당업자에게는 자명할 것이므로, 더욱 상세한 설명은 생략하기로 한다.The sensor unit 250 senses the movement of the main body of the portable electronic device 10. For example, in the case of a gyro sensor, the sensor unit 250 can sense the inclination of the main body. In the case of the acceleration sensor, can do. The movement of the mouse pointer 40 is controlled in accordance with the movement of the main body based on the sensing information of the sensor unit 250. For example, when the tilting of the main body is sensed, the direction and degree of movement of the mouse pointer 40 may be determined by the tilted direction and the degree of tilting. In the case of the acceleration sensor, The degree of movement of the mouse pointer 40 will be determined. The gyro sensor and the acceleration sensor as well as all the sensors capable of recognizing the motion of the main body can be applied equally, and the direction and intensity according to the movement of the main body can be more accurately measured by the combination of the respective sensors. As one example, the sensor unit 250 may be implemented by a camera. In this case, the portable electronic device 10 can analyze the external image and recognize the movement of the main body and the moving direction and the degree of movement. As an easy example, the previous image captured at 0.1 second intervals may be compared with the current image, and the moving direction and the degree of movement may be recognized by using the distance between the location of an arbitrary object in the image and the distance between them . Since the image analysis technique will be obvious to those skilled in the art, a more detailed description will be omitted.

따라서 사용자는 휴대 전자기기(10)를 일반적으로 이용하는 컴퓨터의 마우스 기기처럼 사용하여 외부표시장치(30)를 통해 출력되는 영상에 표시되는 마우스포인터(40)의 움직임을 조절할 수 있다.Accordingly, the user can control the movement of the mouse pointer 40 displayed on the image output through the external display device 30 by using the portable electronic device 10 as a mouse device of a general computer.

제어부(240)는 예를 들어 임의의 프로그램을 실행하거나, 디스플레이 수단에 출력되는 영상을 처리하는 등 휴대 전자기기(10)의 전반적인 기능을 제어하기 위한 것이다. 특히, 제어부(240)는 버퍼부(230)를 통해 외부표시장치(30)로 마우스포인터(40)가 포함된 출력영상을 전송하며 터치스크린(210)에는 마우스 모드에 따른 사용자인터페이스 화면을 표시하도록 하며, 터치스크린(210)에 입력된 입력정보에 상응하는 제어신호를 생성하여 마우스포인터(40)의 움직임 또는 클릭입력을 처리한다.The control unit 240 is for controlling the overall function of the portable electronic device 10, for example, executing an arbitrary program or processing an image output to the display means. In particular, the control unit 240 transmits an output image including the mouse pointer 40 to the external display device 30 through the buffer unit 230 and displays a user interface screen according to the mouse mode on the touch screen 210 And generates a control signal corresponding to the input information input to the touch screen 210 to process the movement or click input of the mouse pointer 40.

제어부(240)의 프로그램 운용부(244)는 실행중인 프로그램을 제어하도록 기능하는데, 예를 들어 웹 브라우저 프로그램이 구동된 경우, 해당 프로그램의 실행을 처리하는 것으로 예를 들어 프로세서의 기능을 수행하기 위한 것이다.The program operation unit 244 of the control unit 240 functions to control a program being executed. For example, when a web browser program is activated, the program operation unit 244 processes the execution of the program. For example, will be.

영상 처리부(242)는 외부표시장치(30) 또는 터치스크린(210)을 통해 출력될 출력영상을 처리하는 것으로, 예를 들어 이미지프로세서로 구현될 수 있으며, 프로그램 운용부(244)에 의해 실행되는 내용에 따른 영상을 생성하여 버퍼부(230)를 통해 외부표시장치(30) 또는 터치스크린(210)으로 출력한다.The image processing unit 242 processes an output image to be output through the external display device 30 or the touch screen 210 and may be implemented as an image processor and is executed by the program operation unit 244. [ And outputs the generated image to the external display device 30 or the touch screen 210 through the buffer unit 230. [

마우스 기능처리부(246)는 터치스크린(210)의 마우스 모드의 실행에 따라 터치스크린(210) 또는 센서부(250)를 통해 입력된 정보에 상응하는 마우스포인터(40)의 제어신호를 생성하여 프로그램 운용부(244)로 해당 제어신호를 전달한다.The mouse function processing unit 246 generates a control signal of the mouse pointer 40 corresponding to the information inputted through the touch screen 210 or the sensor unit 250 according to the execution of the mouse mode of the touch screen 210, And transmits the corresponding control signal to the operation unit 244.

프로그램 운용부(244)는 수신된 제어신호를 이용하여 마우스포인터(40)의 움직임 또는 클릭 입력을 처리하고, 처리된 내용에 따른 영상이 영상 처리부(242)에 의해 처리되어 외부표시장치(30)로 전달된다.
The program operation unit 244 processes the movement or click input of the mouse pointer 40 using the received control signal, and the image corresponding to the processed content is processed by the image processing unit 242, Lt; / RTI >

이하에서는 휴대 전자기기에서의 마우스 모드 기능 실행 과정에 대해 설명하기로 한다.Hereinafter, the process of executing the mouse mode function in the portable electronic device will be described.

도 5는 본 발명의 일 실시예에 따른 마우스 모드 실행 과정을 도시한 흐름도이고, 도 6은 본 발명의 일 실시예에 따른 휴대 전자기기의 마우스 모드 실행 시의 외부표시장치에 표시되는 출력영상을 도시한 예시도이다.FIG. 5 is a flowchart illustrating a mouse mode execution process according to an exemplary embodiment of the present invention. FIG. 6 illustrates an output image displayed on an external display device when a mouse mode of a portable electronic device according to an exemplary embodiment of the present invention is performed. Fig.

먼저 도 5를 참조하면, 휴대 전자기기(10)는 외부표시장치(30)로의 영상 출력 명령이 입력되면(S510), 유선 또는 무선으로 연결된 외부표시장치(30)로부터 디스플레이 정보(예를 들어, 해상도, 디스플레이 사이즈 등)를 취득한다(S520).5, the portable electronic device 10 receives a video output command to the external display device 30 from the external display device 30 connected by wire or wirelessly (S510) Resolution, display size, etc.) (S520).

휴대 전자기기(10)는 터치스크린을 통해 출력되던 출력영상을 외부표시장치(30)로 전송하기 이전에, 상기한 디스플레이 정보에 상응하도록 상기 출력영상을 변환한다(S530). 쉬운 예를 들자면, 터치스크린의 해상도가 800*1200 이고, 외부표시장치(30)의 해상도가 1680*1050인 경우, 외부표시장치(30)의 해상도에 적합하도록 출력영상을 변환할 수 있다. 또한 다른 예를 들자면, 도 6을 참조하면, 터치스크린상(210)에는 20개의 아이콘(600)만이 보여지는 출력영상이 출력된 것에 비해, 사이즈가 보다 큰 디스플레이 수단을 갖는 외부표시장치(30)로 전송되는 출력영상에는 50개의 아이콘(600)이 보이도록 할 수도 있다. 즉, 외부표시장치(30)로 출력영상을 전송할 때는, 터치스크린(210)에 출력하던 출력영상과는 다른 버전의 영상이 생성될 수 있는 것이다.The portable electronic device 10 converts the output image corresponding to the display information before transmitting the output image through the touch screen to the external display device 30 in operation S530. As an easy example, if the resolution of the touch screen is 800 * 1200 and the resolution of the external display device 30 is 1680 * 1050, the output image can be converted to fit the resolution of the external display device 30. 6, an output image showing only 20 icons 600 is displayed on the touch screen 210, whereas the external display device 30 having a display unit having a larger size, 50 icons 600 may be displayed on the output image transmitted to the display device. That is, when transmitting an output image to the external display device 30, a version image different from the output image output to the touch screen 210 can be generated.

다시 도 5를 참조하면, 휴대 전자기기(10)는 출력영상에 대한 외부표시장치(30)로의 전송을 시작하며(540), 마우스 모드를 실행하여 터치스크린(210)에는 마우스 모드에 따른 사용자인터페이스 화면을 표시하며, 출력영상에는 마우스포인터(40)를 대응시킨다(S550). 여기서, 본 실시예에서는 터치스크린(210)에는 출력영상이 출력되지 않고, 마우스 입력을 위한 사용자 인터페이스 화면만이 표시되는 것을 예로 들었으나, 다른 실시예에 따르면, 외부표시장치(30)로 전송되는 출력영상이 터치스크린(210)에도 출력될 수 있으며, 해당 출력영상 상(上)에 상기한 사용자 인터페이스 화면이 덧붙여진 방식으로 출력될 수도 있다.5, the portable electronic device 10 starts to transmit the output image to the external display device 30 (540), and executes the mouse mode so that the touch screen 210 displays a user interface And associates the mouse pointer 40 with the output image (S550). Here, in the present exemplary embodiment, an output image is not outputted to the touch screen 210 but only a user interface screen for inputting a mouse is displayed. However, according to another embodiment, An output image may be output to the touch screen 210, and the user interface screen may be displayed on the output image in a superimposed manner.

그리고, 상기한 마우스 모드의 실행은 미리 설정된 특정 프로그램(이하 마우스 기능 설정 프로그램)에 대해서만 수행될 수도 있다. 즉, 휴대 전자기기(10)는 외부표시장치(30)가 연결되면, 현재 실행중인 응용프로그램이 마우스 기능 설정 프로그램인 경우에만 상기한 실시예들과 같은 마우스 모드 기능을 수행한다. 예를 들어, 웹 브라우저 또는 문서뷰어 프로그램들이 마우스 설정 프로그램으로 설정될 수 있다. The execution of the mouse mode may be performed only for a predetermined program (hereinafter referred to as a mouse function setting program). That is, when the external display device 30 is connected, the portable electronic device 10 performs the same mouse mode function as the above embodiments only when the currently executing application program is the mouse function setting program. For example, a web browser or document viewer programs may be configured as a mouse configuration program.

그리고, 외부표시장치(30)의 연결이 해제되면, 물론 외부표시장치(30)로의 출력영상의 출력뿐 아니리 마우스 입력을 위한 터치스크린(20)으로의 사용자인터페이스 화면에 대한 출력은 중단되며, 터치스크린(210)에는 실행중인 프로그램에 따른 영상이 출력될 수 있을 것이다.
When the external display device 30 is disconnected, the output of the output image to the external display device 30 as well as the output of the user interface screen to the touch screen 20 for mouse input is interrupted, The screen 210 may output an image according to the program being executed.

삭제delete

또한, 상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야에서 통상의 지식을 가진 자라면 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention as defined in the appended claims. It will be understood that various modifications and changes may be made.

10 : 휴대 전자기기
30 : 외부표시장치
40 : 마우스포인터10: Portable electronic devices
30: External display
40: Mouse Pointer

Claims (10)

터치스크린을 구비한 전자기기에 있어서,
출력영상을 버퍼링하는 제1 버퍼;
상기 제1 버퍼의 데이터를 연결된 외부표시장치로 전송하기 위한 데이터통신부;
터치스크린으로 출력하기 위한 마우스 기능 모드에 따른 사용자 인터페이스를 위한 영상데이터를 버퍼링하기 위한 제2 버퍼; 및
상기 터치스크린으로 상기 제1 버퍼의 출력영상을 출력하다가 상기 외부표시장치가 연결되면, 상기 제1 버퍼의 출력영상 상에 마우스포인터가 출력되는 영상데이터가 상기 데이터통신부에 의해 상기 외부표시장치로 전송되도록 하며, 상기 터치스크린에 표시되는 상기 사용자 인터페이스에 대응하는 사용자 입력에 따라 상기 마우스포인터의 움직임 및 클릭 입력을 제어하는 제어부를 포함하는 마우스 기능 제공 휴대 전자기기.
In an electronic device having a touch screen,
A first buffer for buffering an output image;
A data communication unit for transmitting data of the first buffer to a connected external display device;
A second buffer for buffering image data for a user interface according to a mouse function mode for outputting to a touch screen; And
When the external display device is connected while outputting the output image of the first buffer with the touch screen, the image data in which the mouse pointer is output on the output image of the first buffer is transmitted to the external display device by the data communication unit And controls a movement and a click input of the mouse pointer according to a user input corresponding to the user interface displayed on the touch screen.
청구항 1에 있어서,
본체의 움직임을 감지하는 센서부를 더 포함하되,
상기 제어부는 상기 센서부에 의한 감지정보를 상기 마우스포인터의 움직임의 제어에 이용하는 것을 특징으로 하는 마우스 기능 제공 휴대 전자기기.
The method according to claim 1,
And a sensor unit for sensing movement of the main body,
Wherein the control unit uses the sensing information by the sensor unit to control the movement of the mouse pointer.
청구항 2에 있어서,
상기 센서부는 상기 본체가 기울어지거나 움직인 거리 및 방향을 측정하기 위한 센서를 포함하되, 상기 제어부는 상기 센서부에 의해 측정된 값을 이용하여 상기 마우스포인터의 이동 방향과 움직임 거리를 결정하는 것을 특징으로 하는 마우스 기능 제공 휴대 전자기기.
The method of claim 2,
The sensor unit includes a sensor for measuring the distance and direction in which the main body is tilted or moved, and the controller determines a movement direction and a movement distance of the mouse pointer by using a value measured by the sensor unit Provides a mouse function as a portable electronic device.
청구항 2에 있어서,
상기 센서부는 외부 영상을 촬영하기 위한 카메라부를 포함하되, 상기 제어부는 상기 외부 영상을 분석하여 상기 마우스포인터의 움직임을 결정하는 것을 특징으로 하는 마우스 기능 제공 휴대 전자기기.
The method of claim 2,
Wherein the sensor unit includes a camera unit for capturing an external image, wherein the controller analyzes the external image to determine the movement of the mouse pointer.
청구항 1에 있어서,
상기 제어부는 미리 설정된 마우스 기능 프로그램이 실행된 경우에만, 상기 출력영상에 상기 마우스포인터를 출력하는 것을 특징으로 하는 마우스 기능 제공 휴대 전자기기.
The method according to claim 1,
Wherein the control unit outputs the mouse pointer to the output image only when a preset mouse function program is executed.
삭제delete 터치스크린을 구비한 휴대 전자기기에서의 마우스 기능 제공 방법에 있어서,
외부표시장치로의 출력영상 전달 명령이 입력되면, 연결된 상기 외부표시장치로 터치스크린을 통해 출력되던 출력영상의 전송을 제1 버퍼를 이용하여 시작하는 단계;
상기 출력영상 상에 마우스포인터를 출력시키고, 제2 버퍼를 이용하여 상기 터치스크린에 마우스 기능 모드에 따른 사용자 인터페이스 화면을 표시하는 단계; 및
상기 사용자 인터페이스 화면에 대응하는 사용자 입력에 따라 상기 마우스포인터의 움직임 또는 클릭 입력을 처리하는 단계를 포함하는 휴대 전자기기의 마우스 기능 제공 방법.
A method of providing a mouse function in a portable electronic device having a touch screen,
Starting transmission of an output image through the touch screen to the connected external display device using a first buffer when an output image transfer command to the external display device is input;
Outputting a mouse pointer on the output image and displaying a user interface screen according to a mouse function mode on the touch screen using a second buffer; And
And processing movement or click input of the mouse pointer according to a user input corresponding to the user interface screen.
청구항 7에 있어서, 상기 출력영상을 상기 외부표시장치로 전송하는 단계는,
상기 외부표시장치의 해상도를 인식하는 단계; 및
상기 해상도에 적합한 사이즈로 상기 출력영상을 변환하는 단계를 포함하는 것을 특징으로 하는 휴대 전자기기의 마우스 기능 제공 방법.
The method as claimed in claim 7, wherein the step of transmitting the output image to the external display device comprises:
Recognizing a resolution of the external display device; And
And converting the output image into a size suitable for the resolution.
청구항 7에 있어서, 상기 출력영상을 상기 외부표시장치로 전송하는 단계는,
상기 외부표시장치의 디스플레이 규격을 인식하는 단계; 및
상기 디스플레이 규격에 상응하는 출력모드로 출력영상을 변환하는 단계를 포함하는 것을 특징으로 하는 휴대 전자기기의 마우스 기능 제공 방법.
The method as claimed in claim 7, wherein the step of transmitting the output image to the external display device comprises:
Recognizing a display standard of the external display device; And
And converting the output image into an output mode corresponding to the display standard.
삭제delete
KR1020110079713A 2011-08-10 2011-08-10 Portable electric device for providing mouse function and operating method thereof KR101791222B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110079713A KR101791222B1 (en) 2011-08-10 2011-08-10 Portable electric device for providing mouse function and operating method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110079713A KR101791222B1 (en) 2011-08-10 2011-08-10 Portable electric device for providing mouse function and operating method thereof

Publications (2)

Publication Number Publication Date
KR20130017339A KR20130017339A (en) 2013-02-20
KR101791222B1 true KR101791222B1 (en) 2017-10-30

Family

ID=47896512

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110079713A KR101791222B1 (en) 2011-08-10 2011-08-10 Portable electric device for providing mouse function and operating method thereof

Country Status (1)

Country Link
KR (1) KR101791222B1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016072635A1 (en) 2014-11-03 2016-05-12 Samsung Electronics Co., Ltd. User terminal device and method for control thereof and system for providing contents
KR101723271B1 (en) * 2014-12-16 2017-04-04 인하대학교 산학협력단 Mobile terminal, method for operating mobile terminal and recording medium

Also Published As

Publication number Publication date
KR20130017339A (en) 2013-02-20

Similar Documents

Publication Publication Date Title
US9043502B1 (en) Portable computing device as control mechanism
US9075462B2 (en) Finger-specific input on touchscreen devices
US8363026B2 (en) Information processor, information processing method, and computer program product
WO2020134744A1 (en) Icon moving method and mobile terminal
WO2019024898A1 (en) File transfer display control method and apparatus, and corresponding terminal
US8836653B1 (en) Extending host device functionality using a mobile device
US20130106700A1 (en) Electronic apparatus and input method
KR101194883B1 (en) system for controling non-contact screen and method for controling non-contact screen in the system
US20170199662A1 (en) Touch operation method and apparatus for terminal
EP2609488A2 (en) Touch sensing apparatus and method
WO2019184947A1 (en) Image viewing method and mobile terminal
TW201113804A (en) Using motion detection to process pan and zoom functions on mobile computing devices
US20110157015A1 (en) Method of generating multi-touch signal, dongle for generating multi-touch signal, and related control system
KR20120119440A (en) Method for recognizing user's gesture in a electronic device
KR102229812B1 (en) Inputting apparatus and method of computer by using smart terminal having electronic pen
CN108108113B (en) Webpage switching method and device
US20130111327A1 (en) Electronic apparatus and display control method
KR101791222B1 (en) Portable electric device for providing mouse function and operating method thereof
US20140035816A1 (en) Portable apparatus
US20130100169A1 (en) Input device and method for zooming an object using the input device
CN108829306B (en) Information processing method and mobile terminal
KR20130124889A (en) A method for controlling a display apparatus using a camera device and mobile device, display apparatus, and system thereof
CN111221460A (en) Content scrolling display method and electronic equipment
US20160173564A1 (en) Handheld device for controlling computer and method of controlling computer
KR101265296B1 (en) Apparatus and Method for Recognizing User Input using Camera

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant