KR20070037773A - Apparatus and method for inputting user command in display device - Google Patents

Apparatus and method for inputting user command in display device Download PDF

Info

Publication number
KR20070037773A
KR20070037773A KR1020050092766A KR20050092766A KR20070037773A KR 20070037773 A KR20070037773 A KR 20070037773A KR 1020050092766 A KR1020050092766 A KR 1020050092766A KR 20050092766 A KR20050092766 A KR 20050092766A KR 20070037773 A KR20070037773 A KR 20070037773A
Authority
KR
South Korea
Prior art keywords
pointer
screen
coordinates
unit
zoom
Prior art date
Application number
KR1020050092766A
Other languages
Korean (ko)
Inventor
김도집
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020050092766A priority Critical patent/KR20070037773A/en
Publication of KR20070037773A publication Critical patent/KR20070037773A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)

Abstract

본 발명은 사용자 명령을 입력하기 위한 터치 스크린 방식의 사용자 인터페이스부, 상기 사용자 인터페이스부로부터 공간상의 일정 거리에서 포인터가 감지되는지를 판단하는 포인터 감지부, 상기 포인터 감지부에서 포인터가 감지되면, 상기 포인터의 줌인/줌아웃에 따른 위치와 좌표를 구하는 위치 정보 측정부, 상기 위치 정보 측정부에서 측정된 결과에 따라 상기 포인터의 좌표를 기준으로 일정 영역을 줌인/줌 아웃이 실행되도록 제어하는 제어부로 구성된 것으로서, 휴대 장치와 같이 크기 제약을 갖는 장치에서 공간상의 거리와 좌표를 이용하여 입력을 처리하여 디스플레이를 위한 공간을 더 확보할 수 있으며 별도의 포인터 장치 없이 손가락으로 쉽고 정확하게 원하는 지점을 포인트하고 입력을 처리할 수 있다. The present invention provides a touch screen user interface for inputting a user command, a pointer detector for determining whether a pointer is detected at a predetermined distance in space from the user interface, and when the pointer is detected by the pointer detector, the pointer A position information measuring unit for obtaining a position and coordinates according to the zoom in / zoom out of the control unit, and a control unit for controlling to perform a zoom in / zoom out a predetermined area based on the coordinates of the pointer in accordance with the result measured by the position information measuring unit In a device with a size constraint, such as a mobile device, the input can be processed using spatial distances and coordinates to secure more space for the display. can do.

표시기기, 터치 스크린, 센서 Display, touch screen, sensor

Description

표시기기에서 사용자 명령 입력 장치 및 방법{Apparatus and Method for inputting user command in display device}Apparatus and Method for inputting user command in display device}

도 1은 본 발명의 바람직한 일 실시 예에 따른 터치 스크린이 구비된 이동단말기에서 사용자 명령을 입력하기 위한 장치를 나타낸 도면. 1 is a view showing an apparatus for inputting a user command in a mobile terminal equipped with a touch screen according to an embodiment of the present invention.

도 2는 본 발명에 따른 공간상의 거리와 좌표를 이용하여 화면 확대/축소 기능을 갖는 입력 방식을 가진 이동단말기의 구성을 개략적으로 나타낸 블럭도.Figure 2 is a block diagram schematically showing the configuration of a mobile terminal having an input method having a screen enlargement / reduction function using a spatial distance and coordinates in accordance with the present invention.

도 3은 본 발명에 따른 터치 스크린이 구비된 이동 단말기에서 사용자 명령을 입력하는 방법을 나타낸 흐름도.3 is a flowchart illustrating a method for inputting a user command in a mobile terminal equipped with a touch screen according to the present invention.

도 4a는 본 발명에 따른 줌인을 나타낸 도면.4a shows a zoom in according to the invention;

도 4b는 본 발명에 따른 줌 아웃을 나타낸 도면.4b illustrates a zoom out in accordance with the present invention.

도 5는 본 발명의 바람직한 다른 실시예에 따른 터치 스크린이 구비된 이동단말기에서 사용자 명령을 입력하기 위한 장치를 나타낸 도면. 5 is a view showing an apparatus for inputting a user command in a mobile terminal equipped with a touch screen according to another embodiment of the present invention.

도 6은 본 발명에 따른 공간상의 거리와 좌표를 이용하여 화면 확대/축소 기능을 갖는 입력 방식을 가진 이동단말기의 구성을 개략적으로 나타낸 블럭도.FIG. 6 is a block diagram schematically illustrating a configuration of a mobile terminal having an input method having a screen enlargement / reduction function using spatial distances and coordinates according to the present invention. FIG.

도 7은 본 발명에 따른 터치 스크린이 구비된 이동 단말기에서 사용자 명령을 입력하는 방법을 나타낸 흐름도.7 is a flowchart illustrating a method for inputting a user command in a mobile terminal with a touch screen according to the present invention.

<도면의 주요 부분에 대한 부호의 설명><Explanation of symbols for the main parts of the drawings>

200 : 센서 210, 610 : 위치 정보 측정부200: sensor 210, 610: location information measuring unit

220, 620 : 제어부 230, 630 : 사용자 인터페이스부220, 620: control unit 230, 630: user interface unit

240, 640 : 저장부 600 : 카메라240, 640: storage 600: camera

본 발명은 휴대장치의 소형 표시 기기에서 사용자 명령의 정확한 입력을 처리할 수 있는 표시기기에서 사용자 명령 입력 장치 및 방법에 관한 것이다. The present invention relates to a user command input device and method in a display device capable of processing accurate input of a user command in a small display device of a portable device.

근래에 들어서 디스플레이 장치는 더욱 복잡한 기능이 추가되고 있는 추세이다.In recent years, display devices have been adding more complicated functions.

휴대 장치에서는 입력 장치로 키패드나 소형 키보드 또는 터치 스크린을 사용한다. 그러나 휴대 장치는 휴대하기 간편해야 하는 점이 중요하기에 일정 크기 이상으로 장치를 만들수 없기에 입력 장치 또한 그 크기 제약에서 벗어날 수 없다.Portable devices use keypads, small keyboards, or touch screens as input devices. However, since portable devices need to be easy to carry, input devices can not be freed from their size constraints because they cannot be made more than a certain size.

또한, 멀티미디어 기능이 중요시되면서 보고 듣는 것이 이슈가 되고 있다. 이에 따라 휴대 장치에서 디스플레이 장치의 크기가 커지면서 상대적으로 입력 장치가 차지하는 공간이 더욱 제약을 받고 있다. 키패드나 소형 키보드 등은 디스플레이 장치 외에 추가 공간을 필요로 하는 것으로 점점 제약이 심화되고 있다.In addition, as multimedia functions become more important, viewing and listening become an issue. Accordingly, as the size of the display device increases in the portable device, the space occupied by the input device is relatively limited. Keypads and small keyboards require more space in addition to display devices, and are increasingly limited.

이에 대한 대안으로 터치 스크린이 이용되고 있다. As an alternative, a touch screen is used.

통상적으로 터치 스크린은 화면상에 디스플레이되는 아이콘을 손가락이나 스타일러스 펜 등을 사용하여 접촉함으로써 사용자가 단말기에 명령이나 정보를 입력할 수 있는 인터페이스를 제공한다. In general, the touch screen provides an interface that allows a user to input a command or information to the terminal by touching an icon displayed on the screen using a finger or a stylus pen.

즉, 터치 스크린에 미리 나타낸 문자나 그림 정보를 손으로 접촉하면 접촉한 화면의 위치에 따라 사용자가 선택한 사항이 무엇인지를 파악하고 이에 대응하는 명령을 처리하도록 하여 사용자와 텔레비전의 신호 체계를 간편히 할 수 있는 것으로 터치 스크린은 크게 해당 부분에 입력되는 압력을 이용하는 것과 정전기를 이용하는 것으로 구분된다.In other words, when a character or picture information previously displayed on the touch screen is touched by hand, the user may select a user's choice according to the position of the touched screen and process a corresponding command to simplify the signal system between the user and the television. The touch screen is classified into using the pressure input to the corresponding part and using the static electricity.

한편 최근에는 이동단말기들이 점점 소형화되고 경량화되는 추세에 따라 터치 스크린의 크기 또한 그만큼 소형화되고 경량화될 수밖에 없었다. 따라서, PDA와 같은 이동단말기는 별도의 키보드를 구비할 필요없이 터치 스크린상을 이용하여 사용자 인터페이스를 제공하며 경우에 따라 스타일러스 펜을 이용한다.On the other hand, as mobile terminals become smaller and lighter in recent years, the size of touch screens has to be reduced in size and weight. Therefore, a mobile terminal such as a PDA provides a user interface using a touch screen without having to have a separate keyboard and optionally uses a stylus pen.

그러나 상기와 같이 이동단말기에 터치 스크린을 이용하는 경우에는 작은 영역에서 손가락을 포인터로 이용하여 정확한 입력 포인트를 지정하기가 어렵다. 이에 따라 별도의 입력 포인터를 제공하는 경우가 많은데, 이 역시 작은 화면상에서 포인터를 이용하여 입력하는 것은 쉽지가 않다.However, when the touch screen is used in the mobile terminal as described above, it is difficult to designate an accurate input point using a finger as a pointer in a small area. Accordingly, in many cases, a separate input pointer is provided, which is also difficult to input using a pointer on a small screen.

또한, 터치 스크린을 이용하는 것은 스크린상에 특정 위치와의 접촉이 있어야하는 점과 형상 및 색을 구별하여 입력을 받지 못하는 단점을 가지고 있다.In addition, the use of the touch screen has a disadvantage in that it cannot receive an input by distinguishing a shape and a color from a point where a contact with a specific position on the screen is required.

따라서, 본 발명의 목적은 휴대장치의 소형 디스플레이 장치에서 정확한 입력을 처리할 수 있는 표시기기에서 사용자 명령 입력 장치 및 방법을 제공할 수 있다. Accordingly, it is an object of the present invention to provide a user command input device and method in a display device capable of processing accurate input in a small display device of a portable device.

본 발명의 다른 목적은 화면의 확대/축소 기능을 이용하여 정확한 입력 지점을 결정할 수 있고, 입력 장치로 키패드, 키보드 등을 필요로 하지 않아도 되는 표시기기에서 사용자 명령 입력 장치 및 방법을 제공할 수 있다. Another object of the present invention can provide a user command input device and method in a display device that can determine the correct input point using the screen zoom function, and does not require a keypad, keyboard, etc. as an input device. .

본 발명의 또 다른 목적은 입력 장치를 위한 추가적인 공간을 필요로 하지 않고 디스플레이 영역을 크게 잡을 수 있는 표시기기에서 사용자 명령 입력 장치 및 방법을 제공할 수 있다. It is still another object of the present invention to provide a user command input device and method in a display device capable of largely enlarging a display area without requiring additional space for the input device.

본 발명의 또 다른 목적은 손가락을 포인터로 이용하여 쉽게 포인트 할 수 있고, 화면상의 직접 터치 방식이 아니므로 화면의 스크래치 및 오염을 막을 수 있는 표시기기에서 사용자 명령 입력 장치 및 방법을 제공할 수 있다. Still another object of the present invention is to provide a user command input device and method in a display device that can be easily pointed by using a finger as a pointer and is not a direct touch method on the screen to prevent scratching and contamination of the screen. .

상기 목적들을 달성하기 위하여 본 발명의 일 측면에 따르면, 사용자 명령을 입력하기 위한 터치 스크린 방식의 사용자 인터페이스부, 상기 사용자 인터페이스부로부터 공간상의 일정 거리에서 포인터가 감지되는지를 판단하는 포인터 감지부, 상기 포인터 감지부에서 포인터가 감지되면, 상기 포인터의 줌인/줌아웃에 따른 위치와 좌표를 구하는 위치 정보 측정부, 상기 위치 정보 측정부에서 측정된 결과에 따라 상기 포인터의 좌표를 기준으로 일정 영역을 줌인/줌 아웃이 실행되도록 제어하는 제어부를 포함하는 것을 특징으로 하는 표시기기에서 사용자 명령 입력 장치가 제공된다.According to an aspect of the present invention to achieve the above object, a touch screen type user interface unit for inputting a user command, a pointer detector for determining whether a pointer is detected at a certain distance in space from the user interface unit, When the pointer is detected by the pointer detection unit, a position information measuring unit obtaining a position and coordinates according to the zooming in / out of the pointer, and zooming in / off a predetermined area based on the coordinates of the pointer according to the result measured by the position information measuring unit. A user command input device is provided in a display device comprising a control unit for controlling zoom out to be executed.

상기 사용자 인터페이스부는 영상 신호가 출력되는 표시부이고, 상기 포인터 감지부는 적외선 센서 또는 카메라이다. The user interface unit is a display unit for outputting an image signal, and the pointer detection unit is an infrared sensor or a camera.

상기 포인터 감지부가 적외선 센서이면, 상기 사용자 인터페이스부가 있는 앞면에 3개가 설치되고, 카메라이면, 상기 사용자 인터페이스부가 있는 앞면에 2개가 설치된다. If the pointer detection unit is an infrared sensor, three are installed on the front surface of the user interface unit, and if the camera is a camera, two are installed on the front surface of the user interface unit.

상기 제어부는 상기 위치 정보 측정부에서 측정된 포인터의 거리가 상기 사용자 인터페이스부와 가까워지면, 줌인으로 판단하여 상기 포인터 좌표의 일정 영역을 확대하여 전체 화면이 되도록 디스플레이하고, 상기 측정된 포인터의 거리가 상기 사용자 인터페이스부와 멀어지면, 줌아웃으로 판단하여 상기 포인터 좌표의 일정 영역을 원래의 화면이 되도록 축소하여 디스플레이되도록 한다. When the distance of the pointer measured by the location information measuring unit is close to the user interface unit, the controller determines to zoom in and displays a predetermined area of the pointer coordinates so as to display the entire screen, and the measured distance of the pointer If it is far from the user interface, it is determined to zoom out so that a predetermined area of the pointer coordinates is reduced to be displayed on the original screen.

본 발명의 다른 측면에 따르면, 포인터가 감지되면, 상기 포인터의 움직임에 따른 화면상의 거리와 좌표를 측정하여 줌인/줌 아웃인지를 판단하고, 상기 판단결과 상기 포인터가 줌인이면, 상기 포인터를 기준으로 일정 영역을 확대하여 전체 화면이 되도록 디스플레이하는 표시기기에서 사용자 명령 입력 방법이 제공된다. According to another aspect of the present invention, when the pointer is detected, it is determined whether the zoom-in / zoom-out by measuring the distance and coordinates on the screen according to the movement of the pointer, and if the pointer is zoomed in as a result of the determination, based on the pointer A method of inputting a user command is provided in a display device in which a predetermined area is enlarged to display a full screen.

이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 바람직한 일 실시 예에 따른 터치 스크린이 구비된 이동단말기에서 사용자 명령을 입력하기 위한 장치를 나타낸 도면이다. 1 is a diagram illustrating an apparatus for inputting a user command in a mobile terminal having a touch screen according to an exemplary embodiment of the present invention.

도 1을 참조하면, 이동 단말기(100)의 터치 스크린(230)이 있는 앞부분에 3개의 적외선 센서(200a 200b, 200c)가 부착되어 있다. 즉, 상기 터치 스크린(230) 상단에 제1 적외선 센서(200a), 하단에 제2 적외선 센서(200b)와 제3 적외선 센서(200c)가 부착되어 있다.Referring to FIG. 1, three infrared sensors 200a 200b and 200c are attached to the front part of the touch screen 230 of the mobile terminal 100. That is, the first infrared sensor 200a is attached to the top of the touch screen 230, and the second infrared sensor 200b and the third infrared sensor 200c are attached to the bottom of the touch screen 230.

상기 적외선 센서(200a 200b, 200c)는 포인터(예를 들면, 손가락 등임)의 줌인/줌아웃을 감지한다. 즉, 상기 적외선 센서(200a 200b, 200c)는 포인터가 일정 거리에 놓이게 되면, 상기 포인터를 감지하게 된다. The infrared sensors 200a 200b and 200c detect zoom in / out of a pointer (for example, a finger). That is, the infrared sensors 200a 200b and 200c detect the pointer when the pointer is placed at a predetermined distance.

그러면, 상기 이동단말기(100)는 화면에서부터 상기 포인터까지의 거리를 측정하여 상기 포인터가 화면상에 가까워지는지(줌인) 멀어지는지(줌아웃)의 여부를 판단한다. Then, the mobile terminal 100 determines the distance from the screen to the pointer to determine whether the pointer is close (zoom in) or far (zoom out) on the screen.

또한, 상기 이동단말기(100)는 상기 3개의 적외선 센서(200a 200b, 200c)에서 감지된 결과를 이용하여 상기 포인터의 좌표를 구한다. In addition, the mobile terminal 100 obtains coordinates of the pointer using the results detected by the three infrared sensors 200a 200b and 200c.

그런 다음 상기 이동단말기(100)는 상기 포인터의 줌인/줌아웃 여부에 따라 상기 구해진 포인터 좌표의 일정 영역을 확대/축소시킨다. 즉, 상기 이동단말기(100)는 상기 포인터가 화면에 가까워지면(줌인), 상기 구해진 포인터 좌표의 일정 영역을 확대하여 전체 화면이 되도록 한다. Then, the mobile terminal 100 enlarges / reduces a predetermined area of the obtained pointer coordinates according to whether the pointer is zoomed in or out. That is, when the pointer approaches the screen (zoom in), the mobile terminal 100 enlarges a predetermined area of the obtained pointer coordinates so as to become a full screen.

상기와 같이 포인터가 화면에 가까워질수록 포인터가 위치하는 영역이 확대되므로 사용자는 손가락을 이용하더라도 소형 디스플레이 장치에서 정확한 지점을 포인트할 수 있다. As the pointer approaches the screen as described above, the area where the pointer is located is enlarged, so that the user may point an accurate point in the small display device even by using a finger.

또한, 상기 이동단말기(100)는 포인터가 화면에서 멀어지면(줌아웃), 상기 구해진 포인터 좌표의 일정 영역을 원래대로 축소하여 원래의 전체 화면이 디스플레이되도록 한다. In addition, when the pointer moves away from the screen (zoom out), the mobile terminal 100 reduces the predetermined area of the obtained pointer coordinates to the original so that the original full screen is displayed.

상기와 같은 역할을 수행하는 이동단말기(100)에 대하여 도 2를 참조하여 상세히 설명하기로 한다. The mobile terminal 100 performing the above role will be described in detail with reference to FIG. 2.

도 2는 본 발명에 따른 공간상의 거리와 좌표를 이용하여 화면 확대/축소 기능을 갖는 입력 방식을 가진 이동단말기의 구성을 개략적으로 나타낸 블럭도이다.2 is a block diagram schematically illustrating a configuration of a mobile terminal having an input method having a screen enlargement / reduction function using spatial distances and coordinates according to the present invention.

도 2를 참조하면, 공간상의 좌표와 거리를 이용하여 화면 확대/축소 기능을 갖는 입력 방식을 가진 이동단말기는 센서부(200), 위치 정보 측정부(210), 제어부(220), 사용자 인터페이스부(230), 저장부(240)를 포함한다.Referring to FIG. 2, a mobile terminal having an input method having a screen enlargement / reduction function using spatial coordinates and distances may include a sensor unit 200, a location information measuring unit 210, a control unit 220, and a user interface unit. 230, the storage unit 240.

상기 센서부(200)는 상기 사용자 인터페이스부(230)를 통하여 포인터가 감지되는지를 판단하는 것으로서, 단말기의 앞면에 3개가 부착된다. 여기서, 상기 센서부는 적외선 센서일 수 있다. The sensor unit 200 determines whether a pointer is detected through the user interface unit 230, and three sensors are attached to the front of the terminal. Here, the sensor unit may be an infrared sensor.

상기 센서부(200)는 포인터의 감지 정보를 상기 위치 정보 측정부(210)에 전송한다.The sensor unit 200 transmits detection information of a pointer to the location information measuring unit 210.

상기 위치 정보 측정부(210)는 상기 센서부(200)로부터 전송된 포인터 감지 정보를 이용하여 상기 포인터의 공간상의 거리와 좌표를 구한다. 즉, 상기 위치 정보 측정부(210)는 제1 센서(200a), 제2 센서(200b), 제3 센서(200c)에서 각각 감지된 포인터 정보를 이용하여 공간상의 거리와 좌표를 구한다.The location information measuring unit 210 obtains the spatial distance and coordinates of the pointer using the pointer detection information transmitted from the sensor unit 200. That is, the position information measuring unit 210 obtains the distance and coordinates in space using pointer information detected by the first sensor 200a, the second sensor 200b, and the third sensor 200c, respectively.

상기 제어부(220)는 단말기 동작의 전체를 제어한다.The controller 220 controls the entire operation of the terminal.

상기 제어부(220)는 상기 위치 정보 측정부(210)에서 측정된 포인터의 위치가 화면상에서 거리가 가까워질수록 상기 위치 정보 측정부(210)에서 측정된 포인터 좌표를 기준으로 일정 영역이 화면 전체에 디스플레이되도록 확대한다.As the location of the pointer measured by the location information measuring unit 210 is closer to the distance on the screen, the controller 220 displays a predetermined area on the entire screen based on the pointer coordinates measured by the location information measuring unit 210. Zoom in to display.

또한, 상기 제어부(220)는 상기 위치 정보 측정부(210)에서 측정된 포인터의 위치가 화면상에서 거리가 멀어지면, 상기 위치 정보 측정부(210)에서 측정된 포인터 좌표를 기준으로 일정 영역이 원래의 화면이 되도록 축소시킨다.In addition, when the location of the pointer measured by the location information measuring unit 210 is far from the screen, the controller 220 may have a predetermined area based on the pointer coordinates measured by the location information measuring unit 210. Zoom out so that the screen appears.

또한, 상기 제어부(220)는 포인터의 빠르게 움직임의 여부를 이용하여 포인터가 단순히 움직이는 경우와 클릭을 구분한다. 이는 화면의 확대/축소를 의미하는 것이 아니라, 한번/두번/세번과 같이 앞뒤로 빠르게 움직이는 경우 이는 드래그/클릭/더블클릭 등과 같이 정의한다. 따라서, 드래그/클릭/더블클릭은 공간상의 어느 지점에서든 입력을 처리할 수 있다.In addition, the controller 220 distinguishes a click from a case where the pointer is simply moved by using the fast movement of the pointer. This does not mean that the screen is enlarged or reduced, but when moving quickly back and forth, such as once / two / three times, this is defined as drag / click / double click. Thus, drag / click / double click can process input at any point in space.

상기 사용자 인터페이스부(230)는 사용자 명령을 입력받는 것으로서, 여기서는 터치 스크린과 같은 표시부일 수 있다. The user interface 230 receives a user command and may be a display unit such as a touch screen.

상기 저장부(240)는 단말기의 동작 제어시 필요한 다수의 프로그램과 정보가 저장되어 있다. 따라서, 상기 저장부(240)에는 터치 스크린상에서 포인터의 움직임을 추적하도록 하는 소프트웨어가 프로그램화되어 저장되어 있다. The storage unit 240 stores a plurality of programs and information necessary for controlling the operation of the terminal. Therefore, the storage unit 240 is programmed and stored in the software to track the movement of the pointer on the touch screen.

이하 상기와 같이 구성된 단말기가 화면 확대/축소 기능을 이용하여 사용자 명령을 입력받는 방법에 대하여 설명하기로 한다. Hereinafter, a method in which a terminal configured as described above receives a user command using a screen zooming / reducing function will be described.

도 3은 본 발명에 따른 터치 스크린이 구비된 이동 단말기에서 사용자 명령 을 입력하는 방법을 나타낸 흐름도, 도 4a는 본 발명에 따른 줌인을 나타낸 도면, 도 4b는 본 발명에 따른 줌 아웃을 나타낸 도면이다.3 is a flowchart illustrating a method of inputting a user command in a mobile terminal having a touch screen according to the present invention, FIG. 4A illustrates a zoom in according to the present invention, and FIG. 4B illustrates a zoom out according to the present invention. .

도 3을 참조하면, 이동단말기는 터치 스크린상에서 적외선 센서를 통해 포인터가 감지되면(S300), 상기 적외선 센서에서 각각 감지된 포인터 정보를 이용하여 포인터의 공간상의 거리와 좌표를 구한다(S302). Referring to FIG. 3, when the pointer is detected through the infrared sensor on the touch screen (S300), the mobile terminal obtains the spatial distance and coordinates of the pointer using the pointer information detected by the infrared sensor (S302).

즉, 상기 이동단말기는 사용자가 터치 스크린에 터치하기 전의 미리 정해진 일정 거리에서 포인터가 감지되는지를 판단한다. 상기 판단결과 미리 정해진 일정 거리에서 포인터가 감지되면, 상기 이동단말기는 상기 포인터의 공간상 거리를 구하여 상기 거리가 화면상에 가까워지는지 아니면 멀어지는지를 판단함과 동시에 상기 포인터의 좌표를 구한다. That is, the mobile terminal determines whether the pointer is detected at a predetermined distance before the user touches the touch screen. When the pointer is detected at a predetermined distance as a result of the determination, the mobile terminal obtains the spatial distance of the pointer, determines whether the distance is closer or farther away from the screen, and simultaneously obtains the coordinates of the pointer.

단계 302의 수행 후, 상기 이동단말기는 상기 포인터가 화면에 가까워지는지의 여부를 판단한다(S304). 즉, 상기 이동단말기는 상기 구해진 공간상의 거리가 화면에 점점 가까워지는지를 판단한다.After performing step 302, the mobile terminal determines whether the pointer is close to the screen (S304). That is, the mobile terminal determines whether the obtained spatial distance is getting closer to the screen.

단계 304의 판단결과 상기 포인터가 화면에 가까워지면, 상기 이동단말기는 상기 측정된 포인터의 좌표를 기준으로 일정 영역을 확대하여 도 4a와 같이 디스플레이한다(S306). When the pointer is close to the screen as a result of the determination in step 304, the mobile terminal enlarges a predetermined area based on the measured coordinates of the pointer and displays it as shown in FIG. 4A (S306).

도 4a를 참조하면, 포인터가 감지된 일정 영역(A)이 전체 화면(A')으로 확대되어 디스플레이된다. 사용자는 확대된 상태로 디스플레이된 화면(A')을 이용하여 원하는 명령을 정확히 입력할 수 있다. 즉, 상기 이동단말기는 상기 사용자가 정확한 입력 지점을 결정할 때까지 화면을 확대할 수 있으므로 상기 사용자는 정확한 입력 지점을 결정할 수 있다.Referring to FIG. 4A, a predetermined area A in which a pointer is detected is enlarged and displayed on the entire screen A '. The user can accurately input a desired command using the screen A 'displayed in an enlarged state. That is, the mobile terminal can enlarge the screen until the user determines the correct input point, so the user can determine the correct input point.

만약, 단계 304의 판단결과 상기 포인터가 화면에 가까워지지 않고, 멀어지면(S308), 상기 이동단말기는 상기 측정된 포인터의 좌표를 기준으로 일정 영역을 원래의 화면크기로 축소하여 도 4b와 같이 디스플레이한다(S310). If the pointer is not close to the screen as a result of the determination of step 304, the mobile terminal is reduced to the original screen size based on the coordinates of the measured pointer and is displayed as shown in FIG. 4B. (S310).

도 4b를 참조하면, 상기 이동단말기는 포인터가 화면에서 멀어짐이 감지되면, 전체 화면으로 확대된 영역(B)을 원래의 화면(B')으로 축소하여 디스플레이한다. Referring to FIG. 4B, when the pointer is detected to move away from the screen, the mobile terminal reduces and displays the area B enlarged to the entire screen to the original screen B '.

도 5는 본 발명의 바람직한 다른 실시예에 따른 터치 스크린이 구비된 이동단말기에서 사용자 명령을 입력하기 위한 장치를 나타낸 도면이다. 5 is a diagram illustrating an apparatus for inputting a user command in a mobile terminal having a touch screen according to another exemplary embodiment of the present invention.

도 5를 참조하면, 이동 단말기(500)의 터치 스크린이 있는 앞부분에 2개의 카메라(600a, 600b)가 부착되어 있다. 즉, 상기 터치 스크린 상단에 제1 카메라(600a), 제2 카메라(600b)가 부착되어 있다.Referring to FIG. 5, two cameras 600a and 600b are attached to a front portion of the mobile terminal 500. That is, the first camera 600a and the second camera 600b are attached to the top of the touch screen.

상기 이동단말기(500)는 상기 2개의 카메라(600a, 600b)를 이용하여 각각 카메라에서 들어오는 영상의 차이를 이용하여 모션을 캡쳐하고, 그것을 이용하여 포인터의 공간상의 거리와 좌표를 구한다. The mobile terminal 500 uses the two cameras 600a and 600b to capture motion using the difference between the images coming from the cameras, and uses the same to obtain the spatial distance and coordinates of the pointer.

그런다음 상기 이동단말기(500)는 상기 구해진 포인터의 좌표를 기준으로 줌인/줌아웃 기능을 수행하도록 한다. Then, the mobile terminal 500 performs a zoom in / zoom out function based on the obtained coordinates of the pointer.

즉, 상기 이동단말기(500)는 화면에서부터 상기 포인터까지의 거리를 측정하여 상기 포인터가 화면상에 가까워지는지(줌인) 멀어지는지(줌아웃)의 여부를 판단한다. That is, the mobile terminal 500 measures the distance from the screen to the pointer to determine whether the pointer is close (zoom in) or far (zoom out) on the screen.

그런 다음 상기 이동단말기(500)는 상기 포인터의 줌인/줌아웃 여부에 따라 상기 구해진 포인터 좌표의 일정 영역을 확대/축소시킨다. 즉, 상기 이동단말기(500)는 상기 포인터가 화면에 가까워지면(줌인), 상기 구해진 포인터 좌표의 일정 영역을 확대하여 전체 화면이 되도록 한다. Then, the mobile terminal 500 enlarges / reduces a predetermined area of the obtained pointer coordinates according to whether the pointer is zoomed in or out. That is, when the pointer approaches the screen (zoom in), the mobile terminal 500 enlarges a predetermined area of the obtained pointer coordinates so as to become a full screen.

상기와 같이 포인터가 화면에 가까워질수록 포인터가 위치하는 영역이 확대되므로 사용자는 손가락을 이용하더라도 소형 디스플레이 장치에서 정확한 지점을 포인트할 수 있다. As the pointer approaches the screen as described above, the area where the pointer is located is enlarged, so that the user may point an accurate point in the small display device even by using a finger.

또한, 상기 이동단말기(500)는 포인터가 화면에서 멀어지면(줌아웃), 상기 구해진 포인터 좌표의 일정 영역을 원래대로 축소하여 원래의 전체 화면이 디스플레이되도록 한다. In addition, when the pointer moves away from the screen (zoom out), the mobile terminal 500 reduces the predetermined area of the obtained pointer coordinates to the original so that the original full screen is displayed.

상기와 같은 역할을 수행하는 이동단말기(500)에 대하여 도 6을 참조하여 상세히 설명하기로 한다. A mobile terminal 500 performing the above role will be described in detail with reference to FIG. 6.

도 6은 본 발명에 따른 공간상의 거리와 좌표를 이용하여 화면 확대/축소 기능을 갖는 입력 방식을 가진 이동단말기의 구성을 개략적으로 나타낸 블럭도이다.6 is a block diagram schematically illustrating a configuration of a mobile terminal having an input method having a screen enlargement / reduction function using spatial distances and coordinates according to the present invention.

도 6을 참조하면, 공간상의 좌표와 거리를 이용하여 화면 확대/축소 기능을갖는 입력 방식을 가진 이동단말기는 카메라부(600), 위치 정보 측정부(610), 제어부(620), 사용자 인터페이스부(630), 저장부(640)를 포함한다.Referring to FIG. 6, a mobile terminal having an input method having a screen enlargement / reduction function using spatial coordinates and distances may include a camera unit 600, a location information measuring unit 610, a control unit 620, and a user interface unit. 630, a storage unit 640.

상기 카메라부(600)는 상기 사용자 인터페이스부(630)를 통하여 포인터가 감지되는지를 판단하는 것으로서, 단말기의 앞면에 2개가 부착된다. The camera unit 600 determines whether a pointer is detected through the user interface unit 630, and two camera units 600 are attached to the front of the terminal.

상기 카메라부(600)는 촬영된 영상을 상기 위치 정보 측정부(610)에 전송한 다. The camera unit 600 transmits the captured image to the position information measuring unit 610.

상기 위치 정보 측정부(610)는 상기 카메라부(600)에서 촬영된 영상을 이용하여 상기 포인터의 공간상의 거리와 좌표를 구한다. The location information measuring unit 610 obtains a spatial distance and coordinates of the pointer using the image photographed by the camera unit 600.

즉, 상기 위치 정보 측정부(610)는 제1 및 제2 카메라(600) 사이를 삼각형의 밑변으로 하고, 피사체에서 제1 카메라(600a) 및 제2 카메라(600b)에 이르는 광선의 입사각을 측정하여 피사체와 양 카메라 사이의 거리를 삼각 측량법으로 측정한다. That is, the position information measuring unit 610 measures the angle of incidence of light rays from the subject to the first camera 600a and the second camera 600b with the first side of the triangle between the first and second cameras 600. The distance between the subject and both cameras is measured by triangulation.

파사체에서 제1 및 제2 카메라(600a, 600b)에 이르는 입사각은 동일한 크기로 조절하여 제1 및 제2 카메라(600a, 600b)의 영상이 일치되도록 하여 그때의 입사각과 밑변을 이용하여 카메라와 피사체 사이의 거리와 좌표를 측정한다. The angles of incidence from the projectile to the first and second cameras 600a and 600b are adjusted to the same size so that the images of the first and second cameras 600a and 600b match so that the camera and the subject are used by using the incident angles and bases at that time. Measure the distance and coordinates between.

또 다른 방법은 단말기에 고정 설치된 제1 카메라(600a) 및 회전 가능하게 설치된 제2 카메라(600b) 사이의 거리를 기준 거리로 설정하고, 피사체, 제1 카메라(600a), 제2 카메라(600b)로 형성되는 고정된 입사각을 고정각도로 정하고, 측정하고자 하는 피사체의 제1 및 제2 카메라 영상을 제2 카메라(600b)의 입사각을 조절하여 일치시켜서 피사체, 제2 카메라(600b), 제1 카메라(600a)가 형성하는 각도를 측정각도로 정하고, 측정 각도, 기준 거리 및 고정 각도를 이용하여 삼각 측량법으로 피사체와 단말기 사이의 거리를 측정한다.Another method is to set the distance between the first camera 600a fixedly installed in the terminal and the second camera 600b rotatably set as a reference distance, and the subject, the first camera 600a, and the second camera 600b. The fixed angle of incidence is defined as a fixed angle, and the first and second camera images of the object to be measured are matched by adjusting the angle of incidence of the second camera 600b to match the subject, the second camera 600b, and the first camera. The angle formed by 600a is determined as a measurement angle, and the distance between the subject and the terminal is measured by triangulation using a measurement angle, a reference distance, and a fixed angle.

삼각 측량법은 삼각형의 한 변과 2개의 꼭지각을 알거나 두 개의 변과 그 사이 꼭지각을 알면 나머지 변들과 각들을 알아낼 수 이는 기하학적 공식을 이용하여 거리를 측정하는 것이다. 이러한 측정 방법에 관한 상세한 설명은 공지된 것이므로 생략하기로 한다. In triangulation, knowing one side and two vertices of a triangle, or knowing two sides and the vertex angle between them, can determine the remaining sides and angles. This is done by measuring the distance using a geometric formula. Detailed description of such a measuring method is well known and will be omitted.

상기 제어부(620), 사용자 인터페이스부(630), 저장부(640)는 도 2에 설명된 기능과 같으므로 그 설명은 생략하기로 한다.Since the controller 620, the user interface 630, and the storage 640 are the same as the functions described with reference to FIG. 2, description thereof will be omitted.

도 7은 본 발명에 따른 터치 스크린이 구비된 이동 단말기에서 사용자 명령을 입력하는 방법을 나타낸 흐름도이다.7 is a flowchart illustrating a method for inputting a user command in a mobile terminal equipped with a touch screen according to the present invention.

도 7을 참조하면, 이동단말기는 터치 스크린상에서 카메라를 통해 포인터가 감지되면(S700), 각 카메라에서 들어오는 영상의 차이를 이용하여 포인터의 공간상의 거리와 좌표를 구한다(S702). 즉, 상기 카메라는 포인터가 감지되면, 그 포인터를 찍어서 위치 정보 측정부에 전송한다. 그러면, 위치 정보 측정부는 각 카메라에서 측정된 영상의 차이를 이용하여 모션을 캡쳐하고, 그 결과를 이용하여 포인터의 공간상 거리와 좌표를 구한다. Referring to FIG. 7, when a pointer is detected through a camera on a touch screen (S700), the mobile terminal obtains a spatial distance and coordinates of the pointer using a difference between images received from each camera (S702). That is, when the pointer is detected, the camera takes the pointer and transmits the pointer to the location information measuring unit. Then, the location information measuring unit captures the motion by using the difference between the images measured by each camera, and uses the result to obtain the spatial distance and coordinates of the pointer.

단계 702의 수행후, 상기 이동단말기는 상기 포인터가 화면에 가까워지는지를 판단한다(S704).After performing step 702, the mobile terminal determines whether the pointer is close to the screen (S704).

단계 704의 판단결과 상기 포인터가 화면에 가까워지면, 상기 이동단말기는 상기 측정된 포인터의 좌표를 기준으로 일정 영역을 확대하여 도 4a와 같이 디스플레이한다(S706). When the pointer is close to the screen as a result of the determination of step 704, the mobile terminal enlarges a predetermined area based on the measured coordinates of the pointer and displays the same as shown in FIG. 4A (S706).

만약, 단계 704의 판단결과 상기 포인터가 화면에 가까워지지 않고, 멀어지면(S708), 상기 이동단말기는 상기 측정된 포인터를 기준으로 일정 영역을 원 화면으로 축소하여 도 4b와 같이 디스플레이한다(S710).If the pointer is not close to the screen as a result of the determination of step 704, the mobile terminal reduces the predetermined area to the original screen based on the measured pointer and displays the screen as shown in FIG. 4B (S710). .

휴대 장치와 같이 크기 제약을 받는 장치에서 공간상의 거리와 좌표를 이용 하여 입력을 처리하여 디스플레이를 위한 공간을 더 확보할 수 있으며 별도의 포인터 장치 없이 손가락으로 쉽고 정확하게 원하는 지점을 포인트하고 입력을 처리할 수 있다. In a device that is size-constrained, such as a mobile device, the input can be processed using spatial distances and coordinates to make more room for the display. Can be.

본 발명은 상기 실시예에 한정되지 않으며, 많은 변형이 본 발명의 사상 내에서 당 분야에서 통상의 지식을 가진 자에 의하여 가능함은 물론이다.The present invention is not limited to the above embodiments, and many variations are possible by those skilled in the art within the spirit of the present invention.

상술한 바와 같이 본 발명에 따르면, 휴대 장치와 같이 크기 제약을 갖는 장치에서 공간상의 거리와 좌표를 이용하여 입력을 처리하여 디스플레이를 위한 공간을 더 확보할 수 있으며 별도의 포인터 장치 없이 손가락으로 쉽고 정확하게 원하는 지점을 포인트하고 입력을 처리할 수 있는 표시기기에서 사용자 명령 입력 장치 및 방법을 제공할 수 있다. As described above, according to the present invention, in a device having a size constraint, such as a portable device, an input may be processed using a distance and coordinates in a space to further secure a space for a display. A display device capable of pointing a desired point and processing an input may provide a user command input device and method.

Claims (8)

사용자 명령을 입력하기 위한 터치 스크린 방식의 사용자 인터페이스부;A touch screen user interface unit for inputting a user command; 상기 사용자 인터페이스부로부터 공간상의 일정 거리에서 포인터가 감지되는지를 판단하는 포인터 감지부;A pointer detector to determine whether a pointer is detected at a predetermined distance in space from the user interface; 상기 포인터 감지부에서 포인터가 감지되면, 상기 포인터의 줌인/줌아웃에 따른 위치와 좌표를 구하는 위치 정보 측정부;및A position information measuring unit for obtaining a position and coordinates according to the zoom-in / zoom-out of the pointer when the pointer is detected by the pointer detecting unit; and 상기 위치 정보 측정부에서 측정된 결과에 따라 상기 포인터의 좌표를 기준으로 일정 영역을 줌인/줌 아웃이 실행되도록 제어하는 제어부A control unit which controls to zoom in / out a predetermined area based on the coordinates of the pointer according to the result measured by the location information measuring unit 를 포함하는 것을 특징으로 하는 표시기기에서 사용자 명령 입력 장치.User command input device in the display device comprising a. 제1항에 있어서, The method of claim 1, 상기 사용자 인터페이스부는 영상 신호가 출력되는 표시부인 것을 특징으로 하는 표시기기에서 사용자 명령 입력 장치.And the user interface unit is a display unit to which an image signal is output. 제1항에 있어서, The method of claim 1, 상기 포인터 감지부는 적외선 센서 또는 카메라인 것을 특징으로 하는 표시기기에서 사용자 명령 입력 장치.The pointer detection unit is a user command input device in the display device, characterized in that the infrared sensor or camera. 제3항에 있어서, The method of claim 3, 상기 포인터 감지부가 적외선 센서이면, 상기 사용자 인터페이스부가 있는 앞면에 3개가 설치되는 것을 특징으로 하는 표시기기에서 사용자 명령 입력 장치.If the pointer detection unit is an infrared sensor, the user command input device in the display device, characterized in that three are installed on the front surface with the user interface. 제3항에 있어서, The method of claim 3, 상기 포인터 감지부가 카메라이면, 상기 사용자 인터페이스부가 있는 앞면에 2개가 설치되는 것을 특징으로 하는 표시기기에서 사용자 명령 입력 장치.If the pointer detection unit is a camera, the user command input device in the display device, characterized in that two are installed on the front surface with the user interface. 제1항에 있어서,The method of claim 1, 상기 제어부는 상기 위치 정보 측정부에서 측정된 포인터의 거리가 상기 사용자 인터페이스부와 가까워지면, 줌인으로 판단하여 상기 포인터 좌표의 일정 영역을 확대하여 전체 화면이 되도록 디스플레이하고, 상기 측정된 포인터의 거리가 상기 사용자 인터페이스부와 멀어지면, 줌아웃으로 판단하여 상기 포인터 좌표의 일정 영역을 원래의 화면이 되도록 축소하여 디스플레이되도록 하는 것을 특징으로 하는 표시기기에서 사용자 명령 입력 장치.When the distance of the pointer measured by the location information measuring unit is close to the user interface unit, the controller determines to zoom in and displays a predetermined area of the pointer coordinates so as to display the entire screen, and the measured distance of the pointer The user command input apparatus of the display apparatus, when the distance from the user interface unit is determined, the zoom-out determines the predetermined area of the pointer coordinates to be displayed as the original screen. 센서를 통해 포인터가 감지되면, 상기 포인터의 움직임에 따른 화면상의 거리와 좌표를 측정하여 줌인/줌 아웃인지를 판단하는 단계;Determining whether the camera is zoomed in or out by measuring a distance and coordinates on the screen according to the movement of the pointer when the pointer is detected through a sensor; 상기 판단결과 상기 포인터가 줌인이면, 상기 포인터를 기준으로 일정 영역을 확대하여 전체 화면이 되도록 디스플레이하는 단계If the pointer is zoomed in, determining that the predetermined area is enlarged based on the pointer to display the entire screen; 를 포함하는 것을 특징으로 하는 표시기기에서 사용자 명령 입력 방법.User command input method in a display device comprising a. 제7항에 있어서, The method of claim 7, wherein 상기 판단결과 상기 포인터가 줌 아웃이면, 상기 포인터를 기준으로 일정 영역을 축소하여 원래의 화면이 되도록 디스플레이하는 것을 특징으로 하는 표시기기에서 사용자 명령 입력 방법.And if the pointer is zoomed out, displaying the original screen by reducing a predetermined area based on the pointer to display the original screen.
KR1020050092766A 2005-10-04 2005-10-04 Apparatus and method for inputting user command in display device KR20070037773A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020050092766A KR20070037773A (en) 2005-10-04 2005-10-04 Apparatus and method for inputting user command in display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050092766A KR20070037773A (en) 2005-10-04 2005-10-04 Apparatus and method for inputting user command in display device

Publications (1)

Publication Number Publication Date
KR20070037773A true KR20070037773A (en) 2007-04-09

Family

ID=38159358

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050092766A KR20070037773A (en) 2005-10-04 2005-10-04 Apparatus and method for inputting user command in display device

Country Status (1)

Country Link
KR (1) KR20070037773A (en)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009038264A1 (en) * 2007-09-17 2009-03-26 Samsung Electronics Co., Ltd. Method for inputting user command using user's motion and multimedia apparatus thereof
WO2009038276A1 (en) * 2007-09-17 2009-03-26 Samsung Electronics Co., Ltd. Method for providing gui and multimedia device using the same
KR100948290B1 (en) * 2008-08-29 2010-03-17 주식회사 코원시스템 Multimedia replaying apparatus and screen displaying method thereof
KR100968205B1 (en) * 2008-05-07 2010-07-06 전자부품연구원 Apparatus and Method for Space Touch Sensing and Screen Apparatus sensing Infrared Camera
KR100983051B1 (en) * 2008-05-07 2010-09-17 전자부품연구원 Apparatus and Method for Space Touch Sensing and Screen Apparatus using Depth Sensor
WO2011011009A1 (en) * 2009-07-23 2011-01-27 Hewlett-Packard Development Company, L.P. Display with an optical sensor
KR101019254B1 (en) * 2008-12-24 2011-03-04 전자부품연구원 apparatus having function of space projection and space touch and the controlling method thereof
KR101469129B1 (en) * 2013-06-27 2014-12-04 주식회사 루멘스 USB hub having noncontact operating apparatus with recognition of gesture
KR101469186B1 (en) * 2013-06-27 2014-12-09 주식회사 루멘스 Mouse having noncontact operating apparatus with recognition of gesture
KR101467766B1 (en) * 2008-03-21 2014-12-10 엘지전자 주식회사 Mobile terminal and screen displaying method thereof
KR101471816B1 (en) * 2013-06-27 2014-12-10 주식회사 루멘스 Noncontact operating apparatus with recognition of gesture
KR101481557B1 (en) * 2008-03-26 2015-01-13 엘지전자 주식회사 Terminal and method for controlling the same
KR101504148B1 (en) * 2013-07-12 2015-03-19 주식회사 루멘스 Non-contact operating apparatus
US9052808B2 (en) 2008-03-21 2015-06-09 Lg Electronics Inc. Mobile terminal and screen displaying method thereof
US9274681B2 (en) 2008-03-26 2016-03-01 Lg Electronics Inc. Terminal and method of controlling the same
US9274547B2 (en) 2009-07-23 2016-03-01 Hewlett-Packard Development Compamy, L.P. Display with an optical sensor

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009038276A1 (en) * 2007-09-17 2009-03-26 Samsung Electronics Co., Ltd. Method for providing gui and multimedia device using the same
WO2009038264A1 (en) * 2007-09-17 2009-03-26 Samsung Electronics Co., Ltd. Method for inputting user command using user's motion and multimedia apparatus thereof
US8839106B2 (en) 2007-09-17 2014-09-16 Samsung Electronics Co., Ltd. Method for providing GUI and multimedia device using the same
US9760204B2 (en) 2008-03-21 2017-09-12 Lg Electronics Inc. Mobile terminal and screen displaying method thereof
US9052808B2 (en) 2008-03-21 2015-06-09 Lg Electronics Inc. Mobile terminal and screen displaying method thereof
KR101467766B1 (en) * 2008-03-21 2014-12-10 엘지전자 주식회사 Mobile terminal and screen displaying method thereof
KR101481557B1 (en) * 2008-03-26 2015-01-13 엘지전자 주식회사 Terminal and method for controlling the same
US9274681B2 (en) 2008-03-26 2016-03-01 Lg Electronics Inc. Terminal and method of controlling the same
KR100968205B1 (en) * 2008-05-07 2010-07-06 전자부품연구원 Apparatus and Method for Space Touch Sensing and Screen Apparatus sensing Infrared Camera
KR100983051B1 (en) * 2008-05-07 2010-09-17 전자부품연구원 Apparatus and Method for Space Touch Sensing and Screen Apparatus using Depth Sensor
KR100948290B1 (en) * 2008-08-29 2010-03-17 주식회사 코원시스템 Multimedia replaying apparatus and screen displaying method thereof
KR101019254B1 (en) * 2008-12-24 2011-03-04 전자부품연구원 apparatus having function of space projection and space touch and the controlling method thereof
WO2011011009A1 (en) * 2009-07-23 2011-01-27 Hewlett-Packard Development Company, L.P. Display with an optical sensor
GB2484232B (en) * 2009-07-23 2015-10-28 Hewlett Packard Development Co Display with an optical sensor
US9176628B2 (en) 2009-07-23 2015-11-03 Hewlett-Packard Development Company, L.P. Display with an optical sensor
US9274547B2 (en) 2009-07-23 2016-03-01 Hewlett-Packard Development Compamy, L.P. Display with an optical sensor
GB2484232A (en) * 2009-07-23 2012-04-04 Hewlett Packard Development Co Display with an optical sensor
KR101471816B1 (en) * 2013-06-27 2014-12-10 주식회사 루멘스 Noncontact operating apparatus with recognition of gesture
KR101469186B1 (en) * 2013-06-27 2014-12-09 주식회사 루멘스 Mouse having noncontact operating apparatus with recognition of gesture
KR101469129B1 (en) * 2013-06-27 2014-12-04 주식회사 루멘스 USB hub having noncontact operating apparatus with recognition of gesture
KR101504148B1 (en) * 2013-07-12 2015-03-19 주식회사 루멘스 Non-contact operating apparatus

Similar Documents

Publication Publication Date Title
KR20070037773A (en) Apparatus and method for inputting user command in display device
US8441441B2 (en) User interface for mobile devices
US8723988B2 (en) Using a touch sensitive display to control magnification and capture of digital images by an electronic device
EP2624116B1 (en) Display zoom controlled by proximity detection
US9544556B2 (en) Projection control apparatus and projection control method
US20170083741A1 (en) Method and device for generating instruction
US20120105351A1 (en) Touch Pad Operable with Multi-Objects and Method of Operating same
US20100328351A1 (en) User interface
US20090207138A1 (en) Selecting a layout
US20130088429A1 (en) Apparatus and method for recognizing user input
US10268277B2 (en) Gesture based manipulation of three-dimensional images
US20120019460A1 (en) Input method and input apparatus
EP2402844B1 (en) Electronic devices including interactive displays and related methods and computer program products
WO2008054185A1 (en) Method of moving/enlarging/reducing a virtual screen by movement of display device and hand helded information equipment using the same
JP2012238293A (en) Input device
KR101571096B1 (en) User Adaptive Interface Providing System and Method
KR101890140B1 (en) A method for controlling a display apparatus using a camera device and mobile device, display apparatus, and system thereof
KR20100136289A (en) A display controlling method for a mobile terminal
US9235338B1 (en) Pan and zoom gesture detection in a multiple touch display
JP2018018308A (en) Information processing device and control method and computer program therefor
JP5167881B2 (en) Distance measuring device and program thereof
KR20080092184A (en) Projector with virtual input interface and method of inputting data with virtual input interface
CN111373732A (en) Information processing apparatus, information processing method, and information processing system
KR101165388B1 (en) Method for controlling screen using different kind of input devices and terminal unit thereof
TWI460649B (en) System and method for providing zoom function for visual objects displayed on screen

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application