KR101360631B1 - Touch detect system, touch detect method, remote control system and remote control method for remote control of display device based on direction of touch gesture - Google Patents

Touch detect system, touch detect method, remote control system and remote control method for remote control of display device based on direction of touch gesture Download PDF

Info

Publication number
KR101360631B1
KR101360631B1 KR1020120024908A KR20120024908A KR101360631B1 KR 101360631 B1 KR101360631 B1 KR 101360631B1 KR 1020120024908 A KR1020120024908 A KR 1020120024908A KR 20120024908 A KR20120024908 A KR 20120024908A KR 101360631 B1 KR101360631 B1 KR 101360631B1
Authority
KR
South Korea
Prior art keywords
touch
gesture
touch gesture
coordinates
user interface
Prior art date
Application number
KR1020120024908A
Other languages
Korean (ko)
Other versions
KR20130103905A (en
Inventor
김재정
김상태
이호원
Original Assignee
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술원 filed Critical 한국과학기술원
Priority to KR1020120024908A priority Critical patent/KR101360631B1/en
Publication of KR20130103905A publication Critical patent/KR20130103905A/en
Application granted granted Critical
Publication of KR101360631B1 publication Critical patent/KR101360631B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Selective Calling Equipment (AREA)

Abstract

터치 제스처의 방향에 기초하여 디스플레이 기기를 원격제어 하기 위한 터치 감지 시스템 및 방법 그리고 원격제어 시스템 및 방법이 제공된다. 터치 감지 시스템은, 터치 제스처에 따른 복수의 터치 좌표들을 감지하는 터치 감지부, 복수의 터치 좌표들을 이용하여 측정되는 터치 제스처의 방향을 결정하는 방향 결정부 및 결정된 방향에 따라 기설정된 명령 이벤트를 확인하여 원격기기로 전송하는 정보 전송부를 포함하고, 원격기기에서 명령 이벤트에 기초하여 방향에 따른 화면의 위치에 사용자 인터페이스가 표시된다.Provided are a touch sensing system and method and a remote control system and method for remotely controlling a display device based on the direction of a touch gesture. The touch sensing system may include a touch sensing unit sensing a plurality of touch coordinates according to a touch gesture, a direction determining unit determining a direction of a touch gesture measured using the plurality of touch coordinates, and confirming a preset command event according to the determined direction. And an information transmitter for transmitting to the remote device, and the user interface is displayed on the screen according to the direction based on the command event in the remote device.

Description

터치 제스처의 방향에 기초하여 디스플레이 기기를 원격제어 하기 위한 터치 감지 시스템 및 방법 그리고 원격제어 시스템 및 방법{TOUCH DETECT SYSTEM, TOUCH DETECT METHOD, REMOTE CONTROL SYSTEM AND REMOTE CONTROL METHOD FOR REMOTE CONTROL OF DISPLAY DEVICE BASED ON DIRECTION OF TOUCH GESTURE}TOUCH DETECT SYSTEM, TOUCH DETECT METHOD, REMOTE CONTROL SYSTEM AND REMOTE CONTROL METHOD FOR REMOTE CONTROL OF DISPLAY DEVICE BASED ON DIRECTION OF TOUCH GESTURE}

본 발명의 실시예들은 터치 제스처의 방향에 기초하여 디스플레이 기기를 원격제어 하기 위한 터치 감지 시스템 및 방법 그리고 원격제어 시스템 및 방법에 관한 것이다.Embodiments of the present invention relate to a touch sensing system and method and a remote control system and method for remotely controlling a display device based on a direction of a touch gesture.

전자 기기의 종류가 다양해지면서, 전자 기기를 소형화하면서 표시 화면을 대형화할 수 있는 다양한 기술이 제안되고 있다. 전자 기기의 소형화에 따라 접촉 입력 기기를 통해 사용자의 입력을 인식하는 전자 기기가 늘어나고 있으며, 특히 표시 화면에 입력 기능을 탑재한 터치스크린 패널은 휴대용 전자 기기를 포함한 다양한 기기에 적용되고 있다.Various kinds of electronic devices have been proposed, and various technologies have been proposed that can miniaturize electronic devices and enlarge the display screen. 2. Description of the Related Art Electronic apparatuses that recognize a user's input through a contact input apparatus have been increasing in size due to miniaturization of electronic apparatuses. In particular, a touch screen panel having an input function on a display screen has been applied to various apparatuses including portable electronic apparatuses.

터치스크린 패널은 동작 방식에 따라 저항막 방식, 정전용량 방식, 초음파 방식, 적외선 방식 등으로 구분할 수 있는데, 정전용량 방식은 얇은 두께의 터치스크린 패널을 제조할 수 있으며, 내구성이 높고 멀티 터치가 가능하여 다양한 전자 기기에 널리 사용되고 있다.The touch screen panel can be classified into resistive type, capacitive type, ultrasonic type, and infrared type depending on the operation type. Capacitive type can manufacture a thin thickness touch screen panel, and is durable and multi-touchable And is widely used in various electronic devices.

정전용량 방식의 터치스크린 패널은 투명 기판 상에 소정의 형상으로 패터닝되는 투명 전극을 부착하고, 투명전극은 투명 기판 상에 배치되는 연결 패드와 전기적으로 연결된다. 연결 패드는 제어 모듈과 연결되고, 접촉에 따라 투명 전극에서 발생하는 커패시턴스 변화가 제어 모듈로 전달되어 접촉 위치 등을 판단할 수 있다. 그러나 연결 패드와 투명 전극을 전기적으로 연결하기 위해 소정의 배선을 투명 기판에 배치함으로써, 배선이 배치되어 화상을 실제로 표시할 수 없는 베젤(bezel) 영역이 증가함에 따라 유효 표시 영역의 사이즈가 감소할 수 있다. 하지만, 이러한 베젤 영역도 터치스크린-구비 사용자 단말의 일 측의 구성요소인 만큼 이를 효율적으로 활용하는 기술이 필요하다.The capacitive touch screen panel is provided with a transparent electrode patterned on a transparent substrate in a predetermined shape, and the transparent electrode is electrically connected to a connection pad disposed on the transparent substrate. The connection pad is connected to the control module, and a capacitance change generated in the transparent electrode due to the contact is transmitted to the control module to determine the contact position and the like. However, by arranging the predetermined wiring on the transparent substrate so as to electrically connect the connection pad and the transparent electrode, the size of the effective display area decreases as the bezel area where the wiring is disposed and the image can not be actually displayed increases . However, since such a bezel area is also a component of one side of a touch screen-equipped user terminal, there is a need for a technique for efficiently utilizing this bezel area.

본 명세서에서는 베젤 영역을 활용하여 보다 효과적으로 디스플레이 기기를 원격제어할 수 있는 시스템 및 방법이 제공된다.In this specification, a system and a method are provided that can more effectively utilize a bezel area to remotely control a display device.

베젤(bezel) 영역으로부터 시작되는 터치 드래깅 제스처를 감지하고, 감지된 터치 드래깅 제스처에 의해 해당 터치 드래깅 제스처가 지나간 변(edge)에 따라 기설정된 명령 이벤트를 원격기기로 전송하여 원격기기에서 명령 이벤트에 따른 동작이 수행되도록 원격제어할 수 있는 터치 감지 시스템 및 방법을 제공한다.Detecting a touch dragging gesture originating from a bezel area and transmitting a predetermined command event to a remote device according to a detected edge of the touch dragging gesture by the sensed touch dragging gesture, The present invention provides a touch sensing system and method capable of remotely controlling an operation to be performed in accordance with a user's operation.

터치 드래깅 제스처를 통해 원격기기에서 하나의 동작이 수행된 후, 터치 드래깅 제스처와 연결된 터치 드래깅 제스처를 통해 원격기기에서 상기 하나의 동작과 연결된 동작이 수행되도록 원격제어할 수 있는 터치 감지 시스템 및 방법을 제공한다.A touch sensing system and method capable of remotely controlling an operation associated with the one operation at a remote device through a touch dragging gesture associated with the touch dragging gesture after one operation is performed at a remote device via a touch dragging gesture to provide.

터치 드래깅 제스처가 종료되어 터치가 해제(release)되는 경우, 원격기기에서 선택된 기능이 실행되도록 원격제어할 수 있는 터치 감지 시스템 및 방법을 제공한다.A touch sensing system and method are provided that can remotely control a selected function on a remote device to be executed when the touch dragging gesture is terminated and the touch is released.

터치 드래깅 제스처가 베젤 영역으로부터 시작되지 않더라도 터치 드래깅 제스처의 방향을 이용하여 원격기기를 원격제어할 수 있는 터치 감지 시스템 및 방법을 제공한다.There is provided a touch sensing system and method for remotely controlling a remote device using a direction of a touch dragging gesture even if the touch dragging gesture does not start from a bezel area.

원격기기의 좌표계와 일정 비율로 매칭된 좌표계를 이용한 절대좌표를 통해 원격기기를 원격제어할 수 있는 터치 감지 시스템 및 방법을 제공한다.Provided is a touch sensing system and method capable of remotely controlling a remote device through absolute coordinates using a coordinate system matched to a coordinate system of a remote device at a predetermined ratio.

터치 감지 기기 또는 원격서버로부터 수신된 신호에 기초하여 사용자 인터페이스의 표시, 사용자 인터페이스에 따른 기능의 선택 및 선택된 기능의 실행이 원격제어될 수 있는 원격제어 시스템 및 방법을 제공된다.There is provided a remote control system and method in which an indication of a user interface, a selection of a function according to a user interface, and an execution of a selected function can be remotely controlled based on a signal received from a touch-sensitive device or a remote server.

터치 제스처에 따른 복수의 터치 좌표들을 감지하는 터치 감지부, 복수의 터치 좌표들을 이용하여 측정되는 터치 제스처의 방향을 결정하는 방향 결정부 및 결정된 방향에 따라 기설정된 명령 이벤트를 확인하여 원격기기로 전송하는 정보 전송부를 포함하고, 원격기기에서 명령 이벤트에 기초하여 방향에 따른 화면의 위치에 사용자 인터페이스가 표시되는 것을 특징으로 하는 터치 감지 시스템이 제공된다.A touch sensor for detecting a plurality of touch coordinates according to the touch gesture, a direction determiner for determining the direction of the touch gesture measured using the plurality of touch coordinates and the predetermined command event according to the determined direction to send to the remote device The touch sensing system includes an information transmitting unit, and a user interface is displayed at a position of a screen according to a direction based on a command event in a remote device.

일측에 따르면, 정보 전송부는, 터치 제스처와 연속된 터치 제스처가 감지되는 경우, 연속된 터치 제스처에 따른 명령 이벤트를 원격기기로 더 전송할 수 있다. 이때, 원격기기에서 더 전송된 명령 이벤트에 따라 표시된 사용자 인터페이스의 기능들 중 적어도 하나의 기능이 선택될 수 있다.According to one side, when the touch gesture and the continuous touch gesture is detected, the information transmitter may further transmit a command event according to the continuous touch gesture to the remote device. At this time, at least one of the functions of the displayed user interface may be selected according to the command event further transmitted from the remote device.

다른 측면에 따르면, 연속된 터치 제스처는, 터치 제스처가 발생한 후, 터치가 해제(release)되지 않은 상태에서 일정 시간 간격을 두고 발생하는 터치 제스처를 포함할 수 있다.According to another aspect, the continuous touch gesture may include a touch gesture that is generated at a predetermined time interval after the touch gesture has occurred, in a state in which the touch is not released.

또 다른 측면에 따르면, 연속된 터치 제스처가 발생한 이후에 터치가 해제되는 경우, 선택된 적어도 하나의 기능이 원격기기에서 실행될 수 있다.According to another aspect, when the touch is released after the continuous touch gesture occurs, the at least one selected function may be executed at the remote device.

터치 제스처에 따른 복수의 터치 좌표들을 감지하는 터치 감지부 및 복수의 터치 좌표들을 전송하는 좌표 전송부를 포함하고, 원격기기에서 터치 제스처의 방향에 따른 화면의 위치에 사용자 인터페이스가 표시되는 것을 특징으로 하는 터치 감지 시스템 이 제공된다.And a touch sensor for detecting a plurality of touch coordinates according to the touch gesture and a coordinate transmitter for transmitting the plurality of touch coordinates, wherein the user interface is displayed at a position of the screen according to the direction of the touch gesture on the remote device. A touch sensing system is provided.

일측에 따르면, 좌표 전송부는, 복수의 터치 좌표들을 원격기기로 전송할 수 있다. 이때, 원격기기에서 복수의 터치 좌표들에 기초하여 터치 제스처의 방향이 검출될 수 있다.According to one aspect, the coordinate transfer unit may transmit a plurality of touch coordinates to a remote device. In this case, the direction of the touch gesture may be detected based on the plurality of touch coordinates at the remote device.

다른 측면에 따르면, 좌표 전송부는, 복수의 터치 좌표들을 원격서버로 전송할 수 있다. 이때, 원격서버에서 복수의 터치 좌표들에 기초하여 터치 제스처의 방향을 검출하고, 검출된 방향에 따라 기설정된 명령 이벤트를 원격기기로 전송할 수 있다. 이 경우, 원격기기에서 명령 이벤트에 따라 방향에 따른 화면의 위치에 사용자 이벤트가 표시될 수 있다.According to another aspect, the coordinate transfer unit may transmit a plurality of touch coordinates to a remote server. In this case, the remote server may detect the direction of the touch gesture based on the plurality of touch coordinates, and transmit a preset command event to the remote device according to the detected direction. In this case, the user event may be displayed at the position of the screen according to the direction according to the command event in the remote device.

터치 감지 기기로부터 복수의 터치 좌표들을 수신하는 좌표 수신부, 복수의 터치 좌표들에 기초하여 터치 제스처의 방향을 결정하는 방향 결정부 및 결정된 방향에 따라 결정되는 화면의 위치에 사용자 인터페이스를 표시하는 동작 처리부를 포함하는 원격제어 시스템 이 제공된다.A coordinate receiver configured to receive a plurality of touch coordinates from a touch sensing device, a direction determiner that determines a direction of a touch gesture based on the plurality of touch coordinates, and an operation processor that displays a user interface at a location of a screen determined according to the determined direction Provided is a remote control system comprising a.

명령 이벤트를 수신하는 명령 이벤트 수신부 및 명령 이벤트에 따라 화면에 사용자 인터페이스를 표시하는 동작 처리부를 포함하고, 명령 이벤트는, 터치 감지 기기에서 감지된 복수의 터치 좌표들에 기초하여 결정되는 터치 제스처의 방향에 따라 터치 감지 기기 또는 복수의 터치 좌표들을 터치 감지 기기로부터 전달받은 원격서버에서 확인 또는 생성되고, 사용자 인터페이스는, 터치 제스처의 방향에 따라 결정되는 화면의 위치에 표시되는 것을 특징으로 하는 원격제어 시스템이 제공된다.A command event receiver for receiving a command event and an operation processor for displaying a user interface on a screen according to the command event, wherein the command event is a direction of a touch gesture determined based on a plurality of touch coordinates detected by the touch sensing device. The touch sensing device or a plurality of touch coordinates are confirmed or generated in the remote server received from the touch sensing device, and the user interface is displayed on the position of the screen determined according to the direction of the touch gesture. This is provided.

터치 제스처에 따른 복수의 터치 좌표들을 감지하는 단계, 복수의 터치 좌표들을 이용하여 측정되는 터치 제스처의 방향을 결정하는 단계 및 결정된 방향에 따라 기설정된 명령 이벤트를 확인하여 원격기기로 전송하는 단계를 포함하고, 원격기기에서 명령 이벤트에 기초하여 방향에 따른 화면의 위치에 사용자 인터페이스가 표시되는 것을 특징으로 하는 터치 감지 방법이 제공된다.Detecting a plurality of touch coordinates according to a touch gesture, determining a direction of a touch gesture measured using the plurality of touch coordinates, and checking and transmitting a predetermined command event according to the determined direction to a remote device; In addition, a touch sensing method is provided, wherein a user interface is displayed at a position of a screen according to a direction based on a command event in a remote device.

터치 제스처에 따른 복수의 터치 좌표들을 감지하는 단계 및 복수의 터치 좌표들을 전송하는 단계를 포함하고, 원격기기에서 터치 제스처의 방향에 따른 화면의 위치에 사용자 인터페이스가 표시되는 것을 특징으로 하는 터치 감지 방법이 제공된다.Detecting a plurality of touch coordinates according to the touch gesture and transmitting a plurality of touch coordinates, wherein the user interface is displayed at a position of the screen according to the direction of the touch gesture on the remote device. This is provided.

터치 감지 기기로부터 복수의 터치 좌표들을 수신하는 단계, 복수의 터치 좌표들에 기초하여 터치 제스처의 방향을 결정하는 단계 및 결정된 방향에 따라 결정되는 화면의 위치에 사용자 인터페이스를 표시하는 단계를 포함하는 원격제어 방법이 제공된다.Receiving a plurality of touch coordinates from a touch sensing device, determining a direction of a touch gesture based on the plurality of touch coordinates, and displaying a user interface at a location of a screen determined according to the determined direction A control method is provided.

명령 이벤트를 수신하는 단계 및 명령 이벤트에 따라 화면에 사용자 인터페이스를 표시하는 단계를 포함하고, 명령 이벤트는, 터치 감지 기기에서 감지된 복수의 터치 좌표들에 기초하여 결정되는 터치 제스처의 방향에 따라 터치 감지 기기 또는 복수의 터치 좌표들을 터치 감지 기기로부터 전달받은 원격서버에서 확인 또는 생성되고, 사용자 인터페이스는, 터치 제스처의 방향에 따라 결정되는 화면의 위치에 표시되는 것을 특징으로 하는 원격제어 방법이 제공된다.Receiving a command event and displaying a user interface on the screen according to the command event, wherein the command event is touched according to a direction of a touch gesture determined based on a plurality of touch coordinates detected by the touch sensing device. There is provided a remote control method characterized in that the sensing device or a plurality of touch coordinates are confirmed or generated in the remote server received from the touch sensing device, and the user interface is displayed at the position of the screen determined according to the direction of the touch gesture. .

베젤 영역으로부터 시작되는 터치 드래깅 제스처를 감지하고, 감지된 터치 드래깅 제스처에 의해 해당 터치 드래깅 제스처가 지나간 변(edge)에 따라 기설정된 명령 이벤트를 원격기기로 전송하여 원격기기에서 명령 이벤트에 따른 동작이 수행되도록 원격제어할 수 있다.The touch dragging gesture detects the touch dragging gesture starting from the bezel area and transmits a predetermined command event to the remote device according to the edge of the touch dragging gesture by the detected touch dragging gesture, Remote control can be performed.

터치 드래깅 제스처를 통해 원격기기에서 하나의 동작이 수행된 후, 터치 드래깅 제스처와 연결된 터치 드래깅 제스처를 통해 원격기기에서 상기 하나의 동작과 연결된 동작이 수행되도록 원격제어할 수 있다.After one operation is performed at the remote device via the touch dragging gesture, the remote device may be remotely controlled to perform the operation associated with the one operation at the remote device through the touch dragging gesture associated with the touch dragging gesture.

터치 드래깅 제스처가 종료되어 터치가 해제(release)되는 경우, 원격기기에서 선택된 기능이 실행되도록 원격제어할 수 있다.When the touch dragging gesture is terminated and the touch is released, remote control can be performed to execute the selected function on the remote device.

터치 드래깅 제스처가 베젤 영역으로부터 시작되지 않더라도 터치 드래깅 제스처의 방향을 이용하여 원격기기를 원격제어할 수 있다.Even if the touch dragging gesture does not start from the bezel area, the direction of the touch dragging gesture can be used to remotely control the remote device.

원격기기의 좌표계와 일정 비율로 매칭된 좌표계를 이용한 절대좌표를 통해 원격기기를 원격제어할 수 있다.The remote device can be remotely controlled through the absolute coordinates using the coordinate system matched to the coordinate system of the remote device at a certain ratio.

터치 감지 기기 또는 원격서버로부터 수신된 신호에 기초하여 사용자 인터페이스의 표시, 사용자 인터페이스에 따른 기능의 선택 및 선택된 기능의 실행이 원격제어될 수 있다.The display of the user interface, the selection of the function according to the user interface, and the execution of the selected function can be remotely controlled based on the signal received from the touch-sensitive device or the remote server.

도 1 내지 도 4는 본 발명의 일실시예에 있어서, 터치 감지 기기를 이용하여 디스플레이 기기를 원격제어함에 있어서, 터치 드래깅 제스처에 따라 디스플레이 기기에서 사용자 인터페이스가 표시되는 다양한 방법 나타낸 도면들이다.
도 5는 본 발명의 일실시예에 있어서, 사용자 인터페이스의 기능을 선택 및 실행하기 위한 방법의 일례를 도시한 도면이다.
도 6은 본 발명의 일실시예에 있어서, 베젤 영역에서 터치가 시작된 드래깅 제스처를 설명하기 위한 예시 도면이다.
도 7은 본 발명의 일실시예에 있어서, 터치 영역에서 발생하는 드래깅 제스처를 통해 디스플레이 기기를 원격제어하는 방법의 일례를 나타낸 도면이다.
도 8은 본 발명의 일실시예에 있어서, 터치 영역에서 발생하는 드래깅 제스처를 통해 디스플레이 기기를 원격제어하는 방법의 다른 예를 나타낸 도면이다.
도 9는 본 발명의 일실시예에 있어서, 터치 감지 기기, 원격기기 및 원격서버를 나타낸 도면이다.
도 10은 본 발명의 일실시예에 있어서, 터치 감지 시스템의 내부 구성을 설명하기 위한 블록도이다.
도 11은 본 발명의 일실시예에 있어서, 터치 감지 방법을 도시한 흐름도이다.
도 12는 본 발명의 다른 실시예에 있어서, 터치 감지 시스템의 내부 구성을 설명하기 위한 블록도이다.
도 13은 본 발명의 다른 실시예에 있어서, 터치 감지 방법을 도시한 흐름도이다.
도 14는 본 발명의 일실시예에 있어서, 원격제어 시스템의 내부 구성을 설명하기 위한 블록도이다.
도 15는 본 발명의 일실시예에 있어서, 원격제어 방법을 도시한 흐름도이다.
도 16은 본 발명의 다른 실시예에 있어서, 원격제어 시스템의 내부 구성을 설명하기 위한 블록도이다.
도 17은 본 발명의 다른 실시예에 있어서, 원격제어 방법을 도시한 흐름도이다.1 to 4 are diagrams illustrating various methods of displaying a user interface in a display device according to a touch dragging gesture in remotely controlling a display device using a touch sensing device according to an exemplary embodiment of the present invention.
5 is a diagram illustrating an example of a method for selecting and executing functions of a user interface in an embodiment of the present invention.
FIG. 6 is an exemplary view for explaining a dragging gesture in which a touch is started in a bezel region, according to an embodiment of the present invention. FIG.
7 is a diagram illustrating an example of a method of remotely controlling a display device through a dragging gesture generated in a touch area in an embodiment of the present invention.
FIG. 8 is a diagram illustrating another example of a method for remotely controlling a display device through a dragging gesture generated in a touch area in an embodiment of the present invention.
9 is a diagram illustrating a touch sensing device, a remote device, and a remote server according to an exemplary embodiment of the present invention.
10 is a block diagram illustrating an internal configuration of a touch sensing system according to an embodiment of the present invention.
11 is a flowchart illustrating a touch sensing method according to an exemplary embodiment of the present invention.
12 is a block diagram illustrating an internal configuration of a touch sensing system according to another embodiment of the present invention.
13 is a flowchart illustrating a touch sensing method according to another embodiment of the present invention.
14 is a block diagram for explaining an internal configuration of a remote control system in an embodiment of the present invention.
15 is a flowchart showing a remote control method in an embodiment of the present invention.
16 is a block diagram for explaining an internal configuration of a remote control system in another embodiment of the present invention.
17 is a flowchart showing a remote control method in another embodiment of the present invention.

이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1 내지 도 4는 본 발명의 일실시예에 있어서, 터치 감지 기기를 이용하여 디스플레이 기기를 원격제어함에 있어서, 터치 드래깅 제스처에 따라 디스플레이 기기에서 사용자 인터페이스가 표시되는 다양한 방법 나타낸 도면들이다. 도 1 내지 도 4 각각은 터치 감지 기기(110)와 디스플레이 기기(120)를 도시하고 있다.1 to 4 are diagrams illustrating various methods of displaying a user interface in a display device according to a touch dragging gesture in remotely controlling a display device using a touch sensing device according to an exemplary embodiment of the present invention. Each of FIGS. 1 to 4 shows the touch-sensing device 110 and the display device 120.

터치 감지 기기(110)는 터치 스크린이나 터치 패드와 같이 사용자의 터치를 감지하여 좌표를 얻을 수 있는 기기로서 터치 영역(111)과 터치 영역 주변에 형성된 비터치 영역인 베젤(bezel) 영역을 포함할 수 있다. 이러한 터치 감지 기기(110)는 일례로, 스마트폰이나 스마트패드와 같은 기기를 포함할 수 있다.The touch sensing device 110 includes a touch area 111 and a bezel area, which is a non-touch area formed around the touch area, such as a touch screen or a touch pad, . The touch sensing device 110 may include a device such as a smart phone or a smart pad.

디스플레이 기기(120)는 사용자 인터페이스를 표시하는 기기로, 터치 감지 기기(110)에서 얻어진 좌표에 기초한 원격제어에 따라 사용자 인터페이스의 위치를 다양하게 변경하여 표시할 수 있다. 또한, 디스플레이 기기(120)는 터치 감지 기기(110)에서 얻어진 좌표에 기초한 원격제어에 따라 사용자 인터페이스가 포함하는 복수의 기능 중 적어도 하나의 기능을 선택 및 실행할 수도 있다.The display device 120 is a device for displaying a user interface. The display device 120 may display variously changed positions of the user interface according to remote control based on the coordinates obtained by the touch sensing device 110. In addition, the display device 120 may select and execute at least one function among a plurality of functions included in the user interface according to the remote control based on the coordinates obtained by the touch sensing device 110. [

우선, 도 1에서 제1 점선 화살표(130)는 베젤 영역(112)의 좌측으로부터 터치 영역(111)에 걸쳐 발생하는 제1 드래깅 제스처를 나타내고 있다. 이때, 제1 드래깅 제스처를 통해 디스플레이 기기(120)가 화면 좌측에 사용자 인터페이스(140)를 표시하도록 원격제어될 수 있다. 일례로, 터치 감지 기기(110)는 제1 드래깅 제스처가 감지되는 경우, 제1 드래깅 제스처에 따라 기설정된 명령 이벤트를 디스플레이 기기(120)로 전송할 수 있고, 디스플레이 기기(120)는 수신한 명령 이벤트에 따라 사용자 인터페이스(140)를 화면 좌측에 표시할 수 있다.1, a first dotted arrow 130 indicates a first dragging gesture that occurs from the left side of the bezel area 112 to the touch area 111. [ At this time, the first dragging gesture allows the display device 120 to be remotely controlled to display the user interface 140 on the left side of the screen. In one example, when the first dragging gesture is detected, the touch sensing device 110 may transmit a predetermined command event to the display device 120 according to the first dragging gesture, and the display device 120 may display the received command event The user interface 140 may be displayed on the left side of the screen.

또한, 도 2에서 제2 점선 화살표(210)는 베젤 영역(112)의 우측으로부터 터치 영역(111)에 걸쳐 발생하는 제2 드래깅 제스처를 나타내고 있다. 이때, 제2 드래깅 제스처를 통해 디스플레이 기기(120)가 화면 우측에 사용자 인터페이스(140)를 표시하도록 원격제어될 수 있다. 일례로, 터치 감지 기기(110)는 제2 드래깅 제스처가 감지되는 경우, 제2 드래깅 제스처에 따라 기설정된 명령 이벤트를 디스플레이 기기(120)로 전송할 수 있고, 디스플레이 기기(120)는 수신한 명령 이벤트에 따라 사용자 인터페이스(140)를 화면 우측에 표시할 수 있다.2, a second dotted arrow 210 indicates a second dragging gesture that occurs from the right side of the bezel area 112 to the touch area 111. As shown in FIG. At this time, the second dragging gesture allows the display device 120 to be remotely controlled to display the user interface 140 on the right side of the screen. In one example, when the second dragging gesture is detected, the touch sensing device 110 may transmit a predetermined command event to the display device 120 according to the second dragging gesture, and the display device 120 may display the received command event The user interface 140 may be displayed on the right side of the screen.

또한, 도 3에서 제3 점선 화살표(310)는 베젤 영역(112)의 우측하단으로부터 터치 영역(111)에 걸쳐 발생하는 제3 드래깅 제스처를 나타내고 있다. 이때, 제3 드래깅 제스처를 통해 디스플레이 기기(120)가 화면 우측하단에 사용자 인터페이스(140)를 표시하도록 원격제어될 수 있다. 일례로, 터치 감지 기기(110)는 제3 드래깅 제스처가 감지되는 경우, 제3 드래깅 제스처에 따라 기설정된 명령 이벤트를 디스플레이 기기(120)로 전송할 수 있고, 디스플레이 기기(120)는 수신한 명령 이벤트에 따라 사용자 인터페이스(140)를 화면 우측하단에 표시할 수 있다.3, a third dotted arrow 310 indicates a third dragging gesture that occurs from the lower right side of the bezel area 112 over the touch area 111. [ At this time, the third dragging gesture allows the display device 120 to be remotely controlled to display the user interface 140 at the lower right of the screen. In one example, when the third dragging gesture is detected, the touch sensing device 110 may transmit a predetermined command event to the display device 120 according to the third dragging gesture, and the display device 120 may display the received command event The user interface 140 may be displayed on the lower right of the screen.

또한, 도 4에서 제4 점선 화살표(410)는 베젤 영역(112)의 좌측상단으로부터 터치 영역(111)에 걸쳐 발생하는 제4 드래깅 제스처를 나타내고 있다. 이때, 제4 드래깅 제스처를 통해 디스플레이 기기(120)가 화면 좌측상단에 사용자 인터페이스(140)를 표시하도록 원격제어될 수 있다. 일례로, 터치 감지 기기(110)는 제4 드래깅 제스처가 감지되는 경우, 제4 드래깅 제스처에 따라 기설정된 명령 이벤트를 디스플레이 기기(120)로 전송할 수 있고, 디스플레이 기기(120)는 수신한 명령 이벤트에 따라 사용자 인터페이스(140)를 화면 좌측상단에 표시할 수 있다.4, a fourth dotted arrow 410 indicates a fourth dragging gesture that occurs from the upper left side of the bezel area 112 to the touch area 111. As shown in FIG. At this time, the fourth dragging gesture allows the display device 120 to be remotely controlled to display the user interface 140 at the upper left of the screen. In one example, when the fourth dragging gesture is detected, the touch sensing device 110 may transmit a predetermined command event to the display device 120 according to the fourth dragging gesture, and the display device 120 may display the received command event The user interface 140 may be displayed at the upper left corner of the screen.

즉, 도 1 내지 도 4는 베젤 영역(112)에서 터치 영역(111)에 걸쳐 발생하는 드래깅 제스처의 변(edge)에 상응하는 디스플레이 기기(120)의 화면 위치에 사용자 인터페이스(140)가 표시되는 모습을 나타내고 있다. 1 to 4 show the user interface 140 at the screen position of the display device 120 corresponding to the edge of the dragging gesture generated from the bezel area 112 to the touch area 111 .

도 5는 본 발명의 일실시예에 있어서, 사용자 인터페이스의 기능을 선택 및 실행하기 위한 방법의 일례를 도시한 도면이다. 도 5는 도 1에서 베젤 영역(112)의 좌측으로부터 터치 영역(111)에 걸쳐 발생하는 제1 드래깅 제스처 이후에 연속된 드래깅 제스처가 발생하는 경우, 연속된 드래깅 제스처에 기초하여 사용자 인터페이스(140)의 기능들 중 특정 기능이 선택될 수 있음을 나타내고 있다.5 is a diagram illustrating an example of a method for selecting and executing functions of a user interface in an embodiment of the present invention. Figure 5 illustrates a user interface 140 based on a continuous dragging gesture when a continuous dragging gesture occurs after the first dragging gesture that occurs from the left side of the bezel region 112 in Figure 1 to the touch region 111. [ A specific function can be selected.

즉, 제5 점선 화살표(510)은 제1 드래깅 제스처가 입력된 후 터치가 해제(release)되지 않은 상태에서 연속적으로 발생한 연속된 드래깅 제스처를 나타내고 있다.That is, the fifth dotted arrow 510 indicates a continuous dragging gesture continuously generated in a state where the touch is not released after the first dragging gesture is input.

이때, 디스플레이 기기(120)에서는 화살표(520)에서 나타난 바와 같이, 연속된 드래깅 제스처에 기초하여 이동된 거리에 해당하는 사용자 인터페이스(140)의 특정 기능(530)이 선택될 수 있다. 특정 기능(530)이 선택되는 경우, 해당 특정 기능(530)은 하이라이팅 등을 통해 다른 기능들과 구별되어 화면에 표시될 수도 있다. 이때, 터치 감지 기기(110)에서 터치가 해제되면, 선택된 특정 기능이 실행될 수 있다.At this time, in the display device 120, the specific function 530 of the user interface 140 corresponding to the moved distance may be selected based on the continuous dragging gesture, as indicated by an arrow 520. When the specific function 530 is selected, the specific function 530 may be displayed on the screen separately from other functions through highlighting or the like. At this time, when the touch is released in the touch sensing device 110, the selected specific function can be executed.

만약, 도 3 또는 도 4에서와 같이 사용자 인터페이스의 기능들이 좌우로 배치된 경우에도, 연속된 드래깅 제스처가 좌측 또는 우측으로 발생됨에 따라 디스플레이 기기(120)가 사용자 인터페이스의 특정 기능을 선택하는 것이 가능해진다.If the functions of the user interface are arranged on the left and right as in FIG. 3 or FIG. 4, the continuous dragging gesture is generated to the left or right, so that the display device 120 can select a specific function of the user interface It becomes.

도 1 내지도 도 5에서는 터치 감지 기기(110)의 베젤 영역(112)을 활용하는 방법을 설명하였다. 그러나, 베젤 영역(112)은 상술한 바와 같이 터치 영역(111) 주변에 형성된 비터치 영역으로서, 이후 도 6에서는 최초 터치 영역이 베젤 영역(112)인지를 어떻게 확인할 수 있는지에 대해 설명한다.1 to 5, a method of utilizing the bezel area 112 of the touch sensing device 110 has been described. However, the bezel region 112 is a non-touch region formed around the touch region 111 as described above, and then, in FIG. 6, how the first touch region can be identified as the bezel region 112 will be described.

도 6은 본 발명의 일실시예에 있어서, 베젤 영역에서 터치가 시작된 드래깅 제스처를 설명하기 위한 예시 도면이다. 도 6은 터치 영역(111)과 베젤 영역(112)을 포함하는 터치 감지 기기(110)를 도시하고 있고, 제1 좌표(610), 제2 좌표(620) 및 제3 좌표(630)는 터치 감지 기기(110)에 드래깅 제스처를 통해 발생한 터치들 중 일부의 터치들을 나타내고 있다. 이때, 이미 설명한 바와 같이, 베젤 영역(112)은 비터치 영역이기 때문에 터치 감지 기기(110)가 제1 좌표(610)를 인식하기 어렵다. 이에 본 실시예에 따른 터치 감지 기기(110)는 드래깅 제스처에 따라 감지된 복수의 터치 좌표들 중 적어도 일부의 좌표(도 6에서는 제2 좌표(620)와 제3 좌표(630))를 이용하여 최초 터치 영역이 베젤 영역(112)인 경우에도 드래깅 제스처의 최초 터치 좌표를 보정할 수 있다.FIG. 6 is an exemplary view for explaining a dragging gesture in which a touch is started in a bezel region, according to an embodiment of the present invention. FIG. 6 shows the touch sensing device 110 including the touch area 111 and the bezel area 112. The first coordinate 610, the second coordinate 620 and the third coordinate 630 are touch Some of the touches generated through the dragging gesture are displayed on the sensing device 110. At this time, as described above, since the bezel area 112 is a non-touch area, it is difficult for the touch sensing device 110 to recognize the first coordinate 610. Accordingly, the touch sensing device 110 according to the present embodiment uses at least some of the plurality of touch coordinates sensed according to the dragging gesture (the second coordinate 620 and the third coordinate 630 in FIG. 6) The initial touch coordinates of the dragging gesture can be corrected even when the initial touch area is the bezel area 112. [

우선, 제1 좌표(610)는 시간 'tb'에 터치된 제1 터치 좌표(Xb, Yb)를, 제2 좌표(620)는 시간 't0'에 터치 감지 기기(110)에서 감지한 제2 터치 좌표(X0, Y0)를, 제3 좌표는 시간 't1'에 터치 감지 기기(110)에서 감지한 제3 터치 좌표(X1, Y1)을 각각 나타낼 수 있다.First, the first coordinate 610 touches the first touch coordinates Xb, Yb touched at the time 'tb', and the second coordinate 620 touches the second touch point at the time 't0' The touch coordinates (X0, Y0) and the third coordinate may represent the third touch coordinates (X1, Y1) sensed by the touch sensing device 110 at time "t1".

이때, 터치 감지 기기(110)는 제2 터치 좌표(X0, Y0)에서 제3 터치 좌표(X1, Y1)로 이어지는 벡터를 이용하여 해당 드래깅 제스처의 초기 터치 좌표를 제2 터치 좌표(X0, Y0)에서 제1 터치 좌표(Xb, Yb)로 보정할 수 있다. 이때, 초기 터치 좌표의 보정은 하기 수학식 1을 이용하여 수행될 수 있다.At this time, the touch sensing device 110 uses the vector extending from the second touch coordinates (X0, Y0) to the third touch coordinates (X1, Y1) to set the initial touch coordinates of the corresponding dragging gesture as the second touch coordinates ) To the first touch coordinates (Xb, Yb). At this time, the correction of the initial touch coordinates can be performed using the following equation (1).

Figure 112012019650547-pat00001
Figure 112012019650547-pat00001

여기서, k는 변수로, 기설정된 상수 값이 대입될 수 있다.Here, k is a variable, and a predetermined constant value can be substituted.

이때, 수학식 1에 의해 산출된 제1 터치 좌표(Xb, Yb)가 터치 영역(111) 내의 좌표 값이 아닌 경우, 제2 터치 좌표(X0, Y0)가 터치 영역(111)과 인접한 베젤 영역(112)에서 연장된 드래깅 제스처 중에 일어나는 터치임이 확인될 수 있고, 아울러 해당 드래깅 제스처가 베젤 영역(112)에서 시작됨이 확인될 수 있다.If the first touch coordinates (Xb, Yb) calculated by Equation (1) are not the coordinate values in the touch area 111, the second touch coordinates (X0, Y0) It can be confirmed that the touch occurs during the dragging gesture extending from the bezel area 112 and that the dragging gesture starts from the bezel area 112. [

즉, 수학식 1을 이용하여 터치 감지 기기(110)는 시간 't0'에서의 제2 터치 좌표(X0, Y0)와 시간 't1'에서의 제3 터치 좌표(X1, Y1) 사이의 벡터를 기준으로 그 이전 시간인 'tb' 시간에서의 제1 터치 좌표(Xb, Yb)를 연산할 수 있다. 이후 'tb' 시간에서 연산된 제1 터치 좌표 (Xb, Yb)가 터치스크린이나 터치패드의 터치 화면에서 논리적으로 베젤 영역(112)에 속하는 경우, 연산된 제1 터치 좌표(Xb, Yb)는 베젤 영역(112)에서의 터치 좌표로 결정될 수 있다. 하지만, 상술한 수학식 1에 의하여 연산된 제1 터치 좌표(Xb, Yb)는 실제 터치 감지 기기(110)의 특성에 따라서 실제 베젤 영역(112)의 경계와 다른 값으로 인식될 가능성이 있다.That is, the touch sensing device 110 calculates the vector between the second touch coordinates (X0, Y0) at time 't0' and the third touch coordinates (X1, Y1) at time 't1' The first touch coordinates (Xb, Yb) at the previous time 'tb' can be calculated. If the first touch coordinates (Xb, Yb) calculated at the time tb belong to the bezel area 112 logically in the touch screen of the touch screen or the touch pad, the calculated first touch coordinates (Xb, Yb) May be determined as the touch coordinates in the bezel area 112. [ However, the first touch coordinates (Xb, Yb) calculated by the above-described Equation (1) may be recognized as different values from the boundaries of the actual bezel areas 112 depending on the characteristics of the actual touch sensing device 110.

따라서, 터치 감지 기기(110)는 이러한 격차를 줄이기 위해 시간 't0', 't1'와 변수 'k' 값 그리고 논리적인 베젤 경계(실제 물리적인 경계 좌표와 다를 수 있음)의 선택적 보정(calibration) 작업을 통해 베젤 영역(112)에서의 터치 인식의 정확도를 높일 수도 있다. 예를 들면, 너무 빠른 드래깅에 의하여 고정된 시간 동안 검출된 터치 좌표들간의 차이가 큰 경우, 상술한 식에 의하여 연산된 제1 터치 좌표(Xb, Yb)는 논리적인 베젤 영역(112)을 벗어날 수 있다. 이 경우, 'k'의 값을 조절함으로써 연산된 제1 터치 좌표(Xb, Yb)가 터치스크린의 논리적인 베젤 영역 내에 속하게 할 수 있으며, 그 결과 베젤 영역(112)에서의 터치 좌표가 연산될 수 있다. 상술한 방식과 동일한 방식으로 베젤 영역 외부로 연장되는 드래깅 제스처에 의한 베젤 터치 좌표가 연산될 수도 있다. 또한 시간의 범위와 논리적인 베젤 영역의 크기를 함께 또는 단독으로 각각 조절함으로써, 각 기기에 적합한 최적의 베젤 터치를 연산할 수 있다.Accordingly, the touch sensing device 110 may perform selective calibration of the time 't0', 't1', and the variable 'k' value and the logical bezel boundary (which may differ from the actual physical boundary coordinates) The accuracy of the touch recognition in the bezel area 112 can be increased through the operation. For example, if the difference between the touch coordinates detected during the fixed time by the fast dragging is large, the first touch coordinates (Xb, Yb) computed by the above-described formula may be shifted out of the logical bezel area 112 . In this case, the first touch coordinates (Xb, Yb) calculated by adjusting the value of 'k' can be included in the logical bezel area of the touch screen, and as a result, the touch coordinates in the bezel area 112 are calculated . The bezel touch coordinates by the dragging gesture extending outside the bezel area may be calculated in the same manner as the above-described manner. Also, by controlling the range of time and the size of the logical bezel area together or independently, it is possible to calculate an optimum bezel touch suitable for each device.

도 1 내지 도 6에서는 디스플레이 기기(120)를 원격제어하는 일례를 설명하였으나, 본 발명의 실시예들에서는 IPTV(Internet Protocol Television)나 스마트 TV, PC(Personal Computer) 또는 스마트폰 등과 같이 컴퓨팅 능력과, 네트워크를 통해 터치 감지 기기(110) 또는 이후 설명될 원격서버와 통신하기 위한 통신 모듈을 포함하는 원격기기를 원격제어할 수도 있다. 이 경우, 단순히 사용자 인터페이스를 표시하고, 기능을 선택 및 실행하는 것이 아니라, 터치 감지 기기(120)에서 얻어지는 좌표에 기초하여 원격기기에서 다양한 명령이 수행될 수 있다. 이는 이후 설명될 도 7 및 도 8에도 동일하게 적용될 수 있다.1 to 6 illustrate an example in which the display device 120 is remotely controlled. However, in the embodiments of the present invention, it is possible to perform a remote control of the display device 120 with the computing capability such as IPTV (Internet Protocol Television), smart TV, PC , A remote device including a communication module for communicating with the touch sensing device 110 via a network or a remote server to be described later. In this case, various commands can be performed on the remote device based on the coordinates obtained from the touch sensing device 120, rather than merely displaying the user interface and selecting and executing the functions. This can be equally applied to Figs. 7 and 8 to be described later.

또한, 도 1 내지 도 6을 통해서는 베젤 영역(112)에서 터치 영역(111)으로 이어지는 드래깅 제스처를 통해 원격기기에 다양한 명령을 내려 원격기기를 원격제어할 수 있음을 설명하였으나, 이는 하나의 실시예일뿐, 드래깅 제스처가 꼭 바젤 영역(112)으로부터 터치 영역(111)으로 이어질 필요는 없다.1 through 6, various commands are given to the remote device through the dragging gesture from the bezel area 112 to the touch area 111 to remotely control the remote device. However, The dragging gesture need not necessarily lead from the basel area 112 to the touch area 111. [

도 7은 본 발명의 일실시예에 있어서, 터치 영역에서 발생하는 드래깅 제스처를 통해 디스플레이 기기를 원격제어하는 방법의 일례를 나타낸 도면이다. 도 7은 터치 감지 기기(710)와 디스플레이 기기(720)를 나타내고 있다.7 is a diagram illustrating an example of a method of remotely controlling a display device through a dragging gesture generated in a touch area in an embodiment of the present invention. 7 shows the touch-sensing device 710 and the display device 720. FIG.

우선, 도 7에서 제1 점선 화살표(711)는 터치 영역에서 발생하는 드래깅 제스처를 나타내고 있다. 이때, 드래깅 제스처의 방향에 기초하여 디스플레이 기기(720)의 화면에 사용자 인터페이스(721)가 표시될 수 있다. 예를 들어, 도 7에서는 좌측에서 우측으로의 방향을 갖는 드래깅 제스처에 따라 디스플레이 기기(720)의 화면 좌측에서 사용자 인터페이스(721)가 표시되는 모습을 나타내고 있다. 만약, 드래깅 제스처가 우측에서 좌측으로의 방향을 갖는 경우, 사용자 인터페이스(721)는 디스플레이 기기(720)의 화면 우측에서 사용자 인터페이스(721)가 표시될 수 있다. 이때, 사용자 인터페이스(721)는 화면 좌측 또는 화면 우측에서 드래깅 제스처의 방향에 따라 날아오는 효과가 적용될 수도 있다.First, in FIG. 7, a first dotted line arrow 711 indicates a dragging gesture generated in the touch area. At this time, the user interface 721 may be displayed on the screen of the display device 720 based on the direction of the dragging gesture. For example, in FIG. 7, a user interface 721 is displayed on the left side of the screen of the display device 720 according to a dragging gesture having a direction from left to right. If the dragging gesture has a direction from right to left, the user interface 721 may be displayed on the right side of the screen of the display device 720. At this time, the user interface 721 may be applied to the left side of the screen or the right side of the screen according to the direction of the dragging gesture.

제2 점선 화살표(712)는 제1 점선 화살표(711)에 따른 드래깅 제스처가 입력된 후 터치가 해제(release)되지 않은 상태에서 연속적으로 발생한 연속된 다른 드래깅 제스처를 나타내고 있다. 즉, 사용자 인터페이스(721)가 표시된 후, 터치가 해제되지 않은 상태에서 위쪽으로 드래깅 제스처가 입력되면, 디스플레이 기기(720)에서는 제1 화살표(722)에서 나타난 바와 같이, 연속된 드래깅 제스처에 기초하여 이동된 거리에 해당하는 사용자 인터페이스(721)의 특정 기능(723)이 선택될 수 있다. 특정 기능(723)이 선택되는 경우, 해당 특정 기능(723)은 하이라이팅 등을 통해 다른 기능들과 구별되어 화면에 표시될 수도 있다. 이때, 터치 감지 기기(710)에서 터치가 해제되면, 선택된 특정 기능(723)이 실행될 수 있다.A second dashed arrow 712 represents another continuous dragging gesture that occurs continuously in a state where the touch is not released after the dragging gesture according to the first dashed arrow 711 is input. That is, after the user interface 721 is displayed, if the dragging gesture is input upward without the touch being released, the display device 720 displays the first dragging gesture based on the continuous dragging gesture, as indicated by the first arrow 722 The specific function 723 of the user interface 721 corresponding to the moved distance can be selected. When the specific function 723 is selected, the specific function 723 may be distinguished from other functions through highlighting and displayed on the screen. At this time, when the touch is released from the touch sensing device 710, the selected specific function 723 can be executed.

제3 점선 화살표(713)는 제1 점선 화살표(711)에 따른 드래깅 제스처가 입력된 후 터치가 해제(release)되지 않은 상태에서 연속적으로 발생한 연속된 또 다른 드래깅 제스처를 나타내고 있다. 즉, 사용자 인터페이스(721)가 표시된 후, 터치가 해제되지 않은 상태에서 아래쪽으로 드래깅 제스처가 입력되면, 디스플레이 기기(720)에서는 제2 화살표(724)에서 나타난 바와 같이, 연속된 드래깅 제스처에 기초하여 이동된 거리에 해당하는 사용자 인터페이스(721)의 특정 기능(725)이 선택될 수 있다. 특정 기능(725)이 선택되는 경우, 해당 특정 기능(725)은 하이라이팅 등을 통해 다른 기능들과 구별되어 화면에 표시될 수도 있다. 이때, 터치 감지 기기(710)에서 터치가 해제되면, 선택된 특정 기능(725)이 실행될 수 있다.A third dashed arrow 713 represents another continuous dragging gesture that occurs continuously in a state where the touch is not released after the dragging gesture according to the first dotted arrow 711 is input. That is, after the user interface 721 is displayed, if the dragging gesture is input downward with the touch unlocked, the display device 720 displays, based on the continuous dragging gesture, as indicated by the second arrow 724 The specific function 725 of the user interface 721 corresponding to the moved distance can be selected. When the specific function 725 is selected, the specific function 725 may be displayed on the screen separately from other functions through highlighting or the like. At this time, when the touch is released in the touch sensing device 710, the selected specific function 725 can be executed.

도 8은 본 발명의 일실시예에 있어서, 터치 영역에서 발생하는 드래깅 제스처를 통해 디스플레이 기기를 원격제어하는 방법의 다른 예를 나타낸 도면이다. 도 7의 터치 감지 기기(710)와 디스플레이 기기(720)에서는 터치 감지 기기(710)에서 발생하는 드래깅 제스처의 상대적인 방향에 따라 디스플레이 기기(720)를 원격제어하는 방법을 설명하였다. 반면, 도 8에서는 터치 감지 기기(810)의 좌표계와 디스플레이 기기(820)의 좌표계를 매칭한 절대 좌표 기반의 원격제어 방법을 설명한다.FIG. 8 is a diagram illustrating another example of a method for remotely controlling a display device through a dragging gesture generated in a touch area in an embodiment of the present invention. The method of remotely controlling the display device 720 according to the relative direction of the dragging gesture generated in the touch sensing device 710 in the touch sensing device 710 and the display device 720 of FIG. 7 has been described. On the other hand, in FIG. 8, an absolute coordinate-based remote control method in which the coordinate system of the touch sensing device 810 and the coordinate system of the display device 820 are matched will be described.

제1 점선 화살표(811)는 터치 영역에서 발생하는 드래깅 제스처를 나타내고 있다. 이때, 터치 감지 기기(810)의 좌표계와 디스플레이 기기(820)의 좌표계는 일정 비율로 서로 매칭되어 있을 수 있다. 즉, 터치 감지 기기(810)에서 발생한 드래깅 제스처에 따른 복수의 터치 좌표들이 디스플레이 기기(820)에도 일정 비율 조정된 후 그대로 반영될 수 있고, 디스플레이 기기(820)에서 일정 비율이 조정된 길이만큼의 이벤트가 발생될 수 있다.A first dotted arrow 811 indicates a dragging gesture generated in the touch area. At this time, the coordinate system of the touch sensing device 810 and the coordinate system of the display device 820 may be matched with each other at a certain ratio. That is, a plurality of touch coordinates according to the dragging gesture generated by the touch sensing device 810 may be reflected to the display device 820 as it is, and may be reflected as it is by the display device 820, An event may be generated.

일례로, 제2 점선 화살표(813)는 제1 점선 화살표(711)에 따른 드래깅 제스처가 입력된 후 터치가 해제(release)되지 않은 상태에서 연속적으로 발생한 연속된 다른 드래깅 제스처를 나타내고 있다. 이때, 디스플레이 기기(820)는 연속된 다른 드래깅 제스처의 위치 및 길이를 일정 비율로 조정하여 화살표(824)만큼 떨어진 위치의 특정 기능(825)을 선택할 수 있다. 이때, 터치 감지 기기(810)에서 터치가 해제되면, 선택된 특정 기능(825)이 실행될 수 있다.As an example, the second dashed arrow 813 represents another continuous dragging gesture that occurs successively in a state where the touch is not released after the dragging gesture according to the first dashed arrow 711 is input. At this time, the display device 820 can select a specific function 825 at a position separated by an arrow 824 by adjusting a position and a length of another continuous dragging gesture at a predetermined ratio. At this time, when the touch is released in the touch sensing device 810, the selected specific function 825 can be executed.

도 1 내지 도 8에서는 터치 감지 기기에서 발생하는 제스처에 기초하여 어떤 방법으로 원격기기가 제어할 수 있는가를 설명하기 위한 실시예들을 설명하였다. 이후 도 9에서는 터치 감지 기기에서 감지한 복수의 터치 좌표들을 통해 어떻게 원격기기로 원격제어를 위한 명령이 전달될 수 있는가를 설명한다.1 to 8 illustrate embodiments for explaining how a remote device can control a gesture generated in a touch sensing device. 9, how a command for remote control can be transmitted to a remote device through a plurality of touch coordinates detected by the touch sensing device will be described.

도 9는 본 발명의 일실시예에 있어서, 터치 감지 기기, 원격기기 및 원격서버를 나타낸 도면이다. 도 9는 터치 감지 기기(910), 원격기기(920) 및 원격서버(930)를 각각 나타내고 있다.9 is a diagram illustrating a touch sensing device, a remote device, and a remote server according to an exemplary embodiment of the present invention. 9 shows touch sensing device 910, remote device 920, and remote server 930, respectively.

일례로, 터치 감지 기기(910)는 복수의 터치 좌표들을 감지하고, 감지된 복수의 터치 좌표들에 기초하여 기설정된 명령 이벤트를 확인 또는 생성하여 원격기기(920)로 전송할 수 있다. 이때, 원격기기(920)는 단순히 명령 이벤트에 따라 기설정된 동작을 수행할 수 있다. 즉, 도 9에서 제1 화살표 '명령 이벤트'(940)는 터치 감지 기기(910)에서 원격기기(920)로 직접 제어 신호를 전송하는 경우의 일례를 나타낼 수 있다.For example, the touch sensing device 910 may sense a plurality of touch coordinates, and may check or generate predetermined command events based on the plurality of sensed touch coordinates and transmit them to the remote device 920. At this time, the remote device 920 can perform a predetermined operation simply according to the command event. That is, the first arrow 'command event' 940 in FIG. 9 shows an example of a case where the touch sensing device 910 directly transmits a control signal to the remote device 920.

다른 예로, 터치 감지 기기(910)는 감지되는 터치 좌표들을 실시간으로 원격기기(920)로 전송할 수 있다. 이때, 원격기기(920)는 수신되는 터치 좌표들에 기초하여 수행해야 할 동작을 확인할 수 있고, 확인된 동작을 수행할 수 있다. 즉, 도 9에서 제2 화살표 '터치 좌표'(950)는 터치 감지 기기(910)가 단순히 감지한 터치 좌표를 원격기기(920)로 전송하고, 원격기기(920)가 수신되는 터치 좌표들을 분석하여 수행해야 할 동작을 결정하는 경우의 일례를 나타낼 수 있다.As another example, the touch sensing device 910 may transmit sensed touch coordinates to the remote device 920 in real time. At this time, the remote device 920 can confirm the operation to be performed based on the received touch coordinates, and can perform the confirmed operation. 9, the second arrow 'touch coordinates' 950 transmits the touch coordinates simply sensed by the touch sensing device 910 to the remote device 920, and analyzes the touch coordinates received by the remote device 920 And determines an operation to be performed.

또 다른 예로, 터치 감지 기기(910)는 감지되는 터치 좌표들을 실시간으로 원격서버(930)로 전송하고, 원격서버(930)가 수신되는 터치 좌표들을 분석하여 원격기기(920)에서 수행될 동작에 따른 명령 이벤트를 확인 또는 생성할 수 있다. 이때, 원격서버(930)는 원격기기(920)로 확인 또는 생성된 명령 이벤트를 전송할 수 있고, 원격기기(920)는 수신된 명령 이벤트에 따라 기설정된 동작을 수행할 수 있다. 즉, 도 9에서 제3 화살표 '터치 좌표'(960)는 터치 감지 기기(910)가 단순히 감지한 터치 좌표를 원격서버(930)로 전송하는 경우의 일례를 나타낼 수 있고, 제4 화살표 '명령 이벤트'(970)는 원격서버(930)가 원격기기(920)로 명령 이벤트를 전송하는 경우의 일례를 나타낼 수 있다.As another example, the touch sensing device 910 may transmit sensed touch coordinates to the remote server 930 in real time, analyze the touch coordinates received by the remote server 930, Or a command event associated with the command event. At this time, the remote server 930 may transmit the confirmed or generated command event to the remote device 920, and the remote device 920 may perform the predetermined operation according to the received command event. In other words, the third arrow 'touch coordinates' 960 in FIG. 9 may represent an example of transmitting the touch coordinates detected by the touch sensing device 910 to the remote server 930, and the fourth arrow' Event '970 may illustrate an example of when the remote server 930 sends a command event to the remote device 920.

도 1 내지 도 9에서는 터치 제스처 중 드래깅 제스처에 대해서만 설명하였으나, 다양한 터치 제스처가 동일하게 이용될 수 있다. 예를 들어, 드래깅 제스처의 방향을 이용하는 경우, 기설정된 기간 이내에 순차적으로 터치되어 입력되는 두 터치 좌표를 이용하여 특정 방향이 설정될 수도 있다. 다른 예로, 첫 번째 드래그 제스처 이후에 멀티 터치 제스처를 이용하여 설정되는 영역에 기초하여, 사용자 인터페이스의 기능들 중 복수개의 기능들을 선택할 수도 있다. 즉, 다양한 터치 제스처가 원격기기에 대한 원격제어를 위해 이용될 수 있다.In FIGS. 1 to 9, only the dragging gesture is described in the touch gesture, but various touch gestures can be equally used. For example, when the direction of the dragging gesture is used, a specific direction may be set using two touch coordinates sequentially input within a predetermined period. As another example, based on the area set using the multi-touch gesture after the first drag gesture, a plurality of functions among the functions of the user interface may be selected. That is, various touch gestures may be used for remote control of the remote device.

도 10은 본 발명의 일실시예에 있어서, 터치 감지 시스템의 내부 구성을 설명하기 위한 블록도이다. 본 실시예에 따른 터치 감지 시스템(1000)은 터치 제스처의 방향에 기초한 명령 이벤트를 원격기기인 디스플레이 기기로 전송하는 터치 감지 기기에 대응될 수 있다. 이러한 터치 감지 시스템(1000)은 도 10에 도시된 바와 같이 터치 감지부(1010), 방향 결정부(1020) 및 정보 전송부(1030)를 포함할 수 있다.10 is a block diagram illustrating an internal configuration of a touch sensing system according to an embodiment of the present invention. The touch sensing system 1000 according to the present exemplary embodiment may correspond to a touch sensing device that transmits a command event based on a direction of a touch gesture to a display device which is a remote device. The touch sensing system 1000 may include a touch sensing unit 1010, a direction determining unit 1020, and an information transmitting unit 1030 as shown in FIG. 10.

터치 감지부(1010)는 터치 제스처에 따른 복수의 터치 좌표들을 감지한다. 터치스크린이나 터치패드와 같이 터치를 감지하는 기기에서 사용자의 터치에 따라 해당 터치 좌표를 감지하는 방법은 이미 잘 알려져 있기에 구체적인 설명은 생략한다.The touch sensing unit 1010 senses a plurality of touch coordinates according to the touch gesture. A method of detecting a touch coordinate according to a user's touch in a device for sensing a touch, such as a touch screen or a touch pad, is already well known, so a detailed description thereof will be omitted.

방향 결정부(1020)는 복수의 터치 좌표들을 이용하여 측정되는 터치 제스처의 방향을 결정한다. 이때, 터치 제스처의 방향은 도 7 및 도 8을 통해 설명한 바와 같이 원격기기에서 사용자 인터페이스가 표시되는 위치에 대응될 수 있다.The direction determiner 1020 determines the direction of the touch gesture measured using the plurality of touch coordinates. In this case, the direction of the touch gesture may correspond to the position where the user interface is displayed on the remote device as described with reference to FIGS. 7 and 8.

정보 전송부(1030)는 결정된 방향에 따라 기설정된 명령 이벤트를 확인하여 원격기기로 전송한다. 이때, 원격기기에서 명령 이벤트에 기초하여 방향에 따른 화면의 위치에 사용자 인터페이스가 표시된다.The information transmitter 1030 checks a predetermined command event according to the determined direction and transmits it to the remote device. At this time, the user interface is displayed at the position of the screen according to the direction based on the command event in the remote device.

또한, 정보 전송부(1030)는 터치 제스처와 연속된 터치 제스처가 감지되는 경우, 연속된 터치 제스처에 따른 명령 이벤트를 원격기기로 더 전송할 수 있다. 여기서, 연속된 터치 제스처는 초기 터치 좌표가 베젤 영역인 터치 제스처의 터치가 해제(release)되지 않은 상태에서 일정 시간 간격을 두고 발생하는 다른 터치 제스처를 의미할 수 있다. 이 경우, 원격기기에서 더 전송된 명령 이벤트에 따라 표시된 사용자 인터페이스의 기능들 중 적어도 하나의 기능이 선택될 수 있다. 이때, 연속된 터치 제스처가 발생한 이후에 터치가 해제되는 경우, 선택된 적어도 하나의 기능이 원격기기에서 실행될 수 있다.In addition, when the touch gesture and the continuous touch gesture are detected, the information transmitter 1030 may further transmit a command event according to the continuous touch gesture to the remote device. Here, the continuous touch gesture may refer to another touch gesture occurring at a predetermined time interval in a state where the initial touch coordinates are not released from the touch of the touch gesture region, which is the bezel region. In this case, at least one of the functions of the displayed user interface may be selected according to the command event further transmitted from the remote device. At this time, if the touch is released after a continuous touch gesture occurs, at least one selected function may be executed on the remote device.

이때, 복수의 터치 좌표들을 감지하는데 이용된 좌표계와 원격기기의 화면에 이용되는 좌표계가 서로 일정 비율로 매칭될 수도 있다. 이 경우, 원격기기에서 복수의 터치 좌표들을 일정 비율에 기초하여 원격기기의 화면에 이용되는 좌표계로 매핑하여 터치 제스처의 방향이 검출될 수 있다. 이 경우, 명령 이벤트는 단순히 감지된 복수의 터치 좌표들에 대한 정보를 포함할 수도 있다.In this case, the coordinate system used to detect the plurality of touch coordinates and the coordinate system used for the screen of the remote device may be matched with each other at a predetermined ratio. In this case, the direction of the touch gesture may be detected by mapping the plurality of touch coordinates in the remote device to a coordinate system used on the screen of the remote device based on a predetermined ratio. In this case, the command event may simply include information on the plurality of detected touch coordinates.

도 11은 본 발명의 일실시예에 있어서, 터치 감지 방법을 도시한 흐름도이다. 본 실시예에 따른 터치 감지 방법은 도 10을 통해 설명한 터치 감지 시스템(1000)에 의해 수행될 수 있다.11 is a flowchart illustrating a touch sensing method according to an exemplary embodiment of the present invention. The touch sensing method according to the present embodiment can be performed by the touch sensing system 1000 described with reference to FIG.

단계(1110)에서 터치 감지 시스템(1000)은 터치 제스처에 따른 복수의 터치 좌표들을 감지한다. 터치스크린이나 터치패드와 같이 터치를 감지하는 기기에서 사용자의 터치에 따라 해당 터치 좌표를 감지하는 방법은 이미 잘 알려져 있기에 구체적인 설명은 생략한다.In step 1110, the touch sensing system 1000 senses a plurality of touch coordinates according to the touch gesture. A method of detecting a touch coordinate according to a user's touch in a device for sensing a touch, such as a touch screen or a touch pad, is already well known, so a detailed description thereof will be omitted.

단계(1120)에서 터치 감지 시스템(1000)은 복수의 터치 좌표들을 이용하여 측정되는 터치 제스처의 방향을 결정한다. 이때, 터치 제스처의 방향은 도 7 및 도 8을 통해 설명한 바와 같이 원격기기에서 사용자 인터페이스가 표시되는 위치에 대응될 수 있다.In operation 1120, the touch sensing system 1000 determines the direction of the touch gesture measured using the plurality of touch coordinates. In this case, the direction of the touch gesture may correspond to the position where the user interface is displayed on the remote device as described with reference to FIGS. 7 and 8.

단계(1130)에서 터치 감지 시스템(1000)은 결정된 방향에 따라 기설정된 명령 이벤트를 확인하여 원격기기로 전송한다. 이때, 원격기기에서 명령 이벤트에 기초하여 방향에 따른 화면의 위치에 사용자 인터페이스가 표시된다.In operation 1130, the touch sensing system 1000 checks a predetermined command event according to the determined direction and transmits the preset command event to the remote device. At this time, the user interface is displayed at the position of the screen according to the direction based on the command event in the remote device.

또한, 터치 감지 시스템(1000)은 터치 제스처와 연속된 터치 제스처가 감지되는 경우, 연속된 터치 제스처에 따른 명령 이벤트를 원격기기로 더 전송할 수 있다. 여기서, 연속된 터치 제스처는 초기 터치 좌표가 베젤 영역인 터치 제스처의 터치가 해제(release)되지 않은 상태에서 일정 시간 간격을 두고 발생하는 다른 터치 제스처를 의미할 수 있다. 이 경우, 원격기기에서 더 전송된 명령 이벤트에 따라 표시된 사용자 인터페이스의 기능들 중 적어도 하나의 기능이 선택될 수 있다. 이때, 연속된 터치 제스처가 발생한 이후에 터치가 해제되는 경우, 선택된 적어도 하나의 기능이 원격기기에서 실행될 수 있다.In addition, when the touch gesture and the continuous touch gesture are detected, the touch sensing system 1000 may further transmit a command event according to the continuous touch gesture to the remote device. Here, the continuous touch gesture may refer to another touch gesture occurring at a predetermined time interval in a state where the initial touch coordinates are not released from the touch of the touch gesture region, which is the bezel region. In this case, at least one of the functions of the displayed user interface may be selected according to the command event further transmitted from the remote device. At this time, if the touch is released after a continuous touch gesture occurs, at least one selected function may be executed on the remote device.

이때, 복수의 터치 좌표들을 감지하는데 이용된 좌표계와 원격기기의 화면에 이용되는 좌표계가 서로 일정 비율로 매칭될 수도 있다. 이 경우, 원격기기에서 복수의 터치 좌표들을 일정 비율에 기초하여 원격기기의 화면에 이용되는 좌표계로 매핑하여 터치 제스처의 방향이 검출될 수 있다. 이 경우, 명령 이벤트는 단순히 감지된 복수의 터치 좌표들에 대한 정보를 포함할 수도 있다.In this case, the coordinate system used to detect the plurality of touch coordinates and the coordinate system used for the screen of the remote device may be matched with each other at a predetermined ratio. In this case, the direction of the touch gesture may be detected by mapping the plurality of touch coordinates in the remote device to a coordinate system used on the screen of the remote device based on a predetermined ratio. In this case, the command event may simply include information on the plurality of detected touch coordinates.

도 12는 본 발명의 다른 실시예에 있어서, 터치 감지 시스템의 내부 구성을 설명하기 위한 블록도이다. 본 실시예에 따른 터치 감지 시스템(1200)은 단순히 감지된 복수의 터치 좌표들을 원격기기인 디스플레이 기기나 원격서버로 전송하는 터치 감지 기기일 수 있다. 이때, 원격기기나 원격서버에서 복수의 터치 좌표에 기초하여 검출되는 터치 제스처의 방향에 따라 사용자 인터페이스가 화면의 특정 부분에 표시될 수 있다. 이러한 터치 감지 시스템(1200)은 도 12에 도시된 바와 같이 터치 감지부(1210) 및 좌표 전송부(1220)를 포함한다.12 is a block diagram illustrating an internal configuration of a touch sensing system according to another embodiment of the present invention. The touch sensing system 1200 according to the present exemplary embodiment may be a touch sensing device that simply transmits a plurality of detected touch coordinates to a display device or a remote server. In this case, the user interface may be displayed on a specific portion of the screen according to the direction of the touch gesture detected based on the plurality of touch coordinates at the remote device or the remote server. The touch sensing system 1200 includes a touch sensing unit 1210 and a coordinate transmitting unit 1220 as shown in FIG.

터치 감지부(1210)는 터치 제스처에 따른 복수의 터치 좌표들을 감지한다. 터치스크린이나 터치패드와 같이 터치를 감지하는 기기에서 사용자의 터치에 따라 해당 터치 좌표를 감지하는 방법은 이미 잘 알려져 있기에 구체적인 설명은 생략한다.The touch sensing unit 1210 senses a plurality of touch coordinates according to the touch gesture. A method of detecting a touch coordinate according to a user's touch in a device for sensing a touch, such as a touch screen or a touch pad, is already well known, so a detailed description thereof will be omitted.

좌표 전송부(1220)는 복수의 터치 좌표들을 전송한다. 이때, 원격기기에서 터치 제스처의 방향에 따른 화면의 위치에 사용자 인터페이스가 표시된다.The coordinate transmitting unit 1220 transmits a plurality of touch coordinates. At this time, the user interface is displayed at the position of the screen according to the direction of the touch gesture on the remote device.

이때, 좌표 전송부(1220)는 일실시예로, 복수의 터치 좌표들을 원격기기로 전송할 수 있고, 다른 실시예로, 복수의 터치 좌표들을 원격서버로 전송할 수 있다.In this case, the coordinate transmitting unit 1220 may transmit a plurality of touch coordinates to a remote device, and in another embodiment, may transmit a plurality of touch coordinates to a remote server.

우선, 좌표 전송부(1220)가 원격기기로 복수의 터치 좌표들을 전송한 경우, 원격기기에서 복수의 터치 좌표들에 기초하여 터치 제스처의 방향이 검출될 수 있다. 즉, 원격기기에서 전송된 복수의 터치 좌표들에 기초하여 터치 제스처의 방향을 검출하고, 검출된 방향에 따라 기설정된 화면의 위치에 사용자 인터페이스를 표시할 수 있다.First, when the coordinate transmitter 1220 transmits a plurality of touch coordinates to the remote device, the direction of the touch gesture may be detected based on the plurality of touch coordinates at the remote device. That is, the direction of the touch gesture may be detected based on the plurality of touch coordinates transmitted from the remote device, and the user interface may be displayed at a position of a preset screen according to the detected direction.

또한, 좌표 전송부(1220)가 원격서버로 복수의 터치 좌표들을 전송한 경우, 원격서버에서 복수의 터치 좌표들에 기초하여 터치 제스처의 방향이 검출될 수 있다. 이 경우, 원격서버는 검출된 방향에 따라 기설정된 명령 이벤트를 원격기기로 전송할 수 있고, 원격기기에서 명령 이벤트에 따라 상기 방향에 따른 화면의 위치에 사용자 이벤트가 표시될 수 있다.In addition, when the coordinate transmitter 1220 transmits the plurality of touch coordinates to the remote server, the direction of the touch gesture may be detected based on the plurality of touch coordinates at the remote server. In this case, the remote server may transmit a predetermined command event according to the detected direction to the remote device, and the user event may be displayed at a location of the screen according to the direction according to the command event at the remote device.

이때, 터치 제스처와 연속된 터치 제스처가 감지되는 경우, 연속된 터치 제스처의 방향에 기초하여 원격기기에서 상기 표시된 사용자 인터페이스의 기능들 중 적어도 하나의 기능이 선택될 수 있다. 또한, 연속된 터치 제스처가 발생한 이후에 터치가 해제되는 경우, 선택된 적어도 하나의 기능이 원격기기에서 실행될 수 있다.In this case, when a touch gesture and a continuous touch gesture are detected, at least one of the functions of the displayed user interface may be selected at the remote device based on the direction of the continuous touch gesture. In addition, when the touch is released after the continuous touch gesture occurs, the at least one selected function may be executed at the remote device.

또한, 복수의 터치 좌표들을 감지하는데 이용된 좌표계와 원격기기의 화면에 이용되는 좌표계가 서로 일정 비율로 매칭될 수도 있다. 이 경우, 원격기기에서 복수의 터치 좌표들을 일정 비율에 기초하여 원격기기의 화면에 이용되는 좌표계로 매핑하여 터치 제스처의 방향이 검출될 수 있다. 이 경우, 명령 이벤트는 단순히 감지된 복수의 터치 좌표들에 대한 정보를 포함할 수도 있다.In addition, the coordinate system used to detect the plurality of touch coordinates and the coordinate system used for the screen of the remote device may be matched with each other at a predetermined ratio. In this case, the direction of the touch gesture may be detected by mapping the plurality of touch coordinates in the remote device to a coordinate system used on the screen of the remote device based on a predetermined ratio. In this case, the command event may simply include information on the plurality of detected touch coordinates.

도 13은 본 발명의 다른 실시예에 있어서, 터치 감지 방법을 도시한 흐름도이다. 본 실시예에 따른 터치 감지 방법은 도 12를 통해 설명한 터치 감지 시스템(1200)에 의해 수행될 수 있다.13 is a flowchart illustrating a touch sensing method according to another embodiment of the present invention. The touch sensing method according to the present embodiment can be performed by the touch sensing system 1200 described with reference to FIG.

단계(1310)에서 터치 감지 시스템(1200)은 터치 제스처에 따른 복수의 터치 좌표들을 감지한다. 터치스크린이나 터치패드와 같이 터치를 감지하는 기기에서 사용자의 터치에 따라 해당 터치 좌표를 감지하는 방법은 이미 잘 알려져 있기에 구체적인 설명은 생략한다.In step 1310, the touch sensing system 1200 senses a plurality of touch coordinates according to the touch gesture. A method of detecting a touch coordinate according to a user's touch in a device for sensing a touch, such as a touch screen or a touch pad, is already well known, so a detailed description thereof will be omitted.

단계(1320)에서 터치 감지 시스템(1200)은 복수의 터치 좌표들을 전송한다. 이때, 원격기기에서 터치 제스처의 방향에 따른 화면의 위치에 사용자 인터페이스가 표시된다.In step 1320, the touch sensing system 1200 transmits a plurality of touch coordinates. At this time, the user interface is displayed at the position of the screen according to the direction of the touch gesture on the remote device.

이때, 터치 감지 시스템(1200)은 일실시예로, 복수의 터치 좌표들을 원격기기로 전송할 수 있고, 다른 실시예로, 복수의 터치 좌표들을 원격서버로 전송할 수 있다.At this time, the touch sensing system 1200 may, in one embodiment, transmit a plurality of touch coordinates to a remote device, and in another embodiment, transmit a plurality of touch coordinates to a remote server.

우선, 터치 감지 시스템(1200)이 원격기기로 복수의 터치 좌표들을 전송한 경우, 원격기기에서 복수의 터치 좌표들에 기초하여 터치 제스처의 방향이 검출될 수 있다. 즉, 원격기기에서 전송된 복수의 터치 좌표들에 기초하여 터치 제스처의 방향을 검출하고, 검출된 방향에 따라 기설정된 화면의 위치에 사용자 인터페이스를 표시할 수 있다.First, when the touch sensing system 1200 transmits a plurality of touch coordinates to the remote device, the direction of the touch gesture may be detected based on the plurality of touch coordinates at the remote device. That is, the direction of the touch gesture may be detected based on the plurality of touch coordinates transmitted from the remote device, and the user interface may be displayed at a position of a preset screen according to the detected direction.

또한, 터치 감지 시스템(1200)이 원격서버로 복수의 터치 좌표들을 전송한 경우, 원격서버에서 복수의 터치 좌표들에 기초하여 터치 제스처의 방향이 검출될 수 있다. 이 경우, 원격서버는 검출된 방향에 따라 기설정된 명령 이벤트를 원격기기로 전송할 수 있고, 원격기기에서 명령 이벤트에 따라 상기 방향에 따른 화면의 위치에 사용자 이벤트가 표시될 수 있다.In addition, when the touch sensing system 1200 transmits a plurality of touch coordinates to the remote server, the direction of the touch gesture may be detected based on the plurality of touch coordinates at the remote server. In this case, the remote server may transmit a predetermined command event according to the detected direction to the remote device, and the user event may be displayed at a location of the screen according to the direction according to the command event at the remote device.

이때, 터치 제스처와 연속된 터치 제스처가 감지되는 경우, 연속된 터치 제스처의 방향에 기초하여 원격기기에서 상기 표시된 사용자 인터페이스의 기능들 중 적어도 하나의 기능이 선택될 수 있다. 또한, 연속된 터치 제스처가 발생한 이후에 터치가 해제되는 경우, 선택된 적어도 하나의 기능이 원격기기에서 실행될 수 있다.In this case, when a touch gesture and a continuous touch gesture are detected, at least one of the functions of the displayed user interface may be selected at the remote device based on the direction of the continuous touch gesture. In addition, when the touch is released after the continuous touch gesture occurs, the at least one selected function may be executed at the remote device.

또한, 복수의 터치 좌표들을 감지하는데 이용된 좌표계와 원격기기의 화면에 이용되는 좌표계가 서로 일정 비율로 매칭될 수도 있다. 이 경우, 원격기기에서 복수의 터치 좌표들을 일정 비율에 기초하여 원격기기의 화면에 이용되는 좌표계로 매핑하여 터치 제스처의 방향이 검출될 수 있다. 이 경우, 명령 이벤트는 단순히 감지된 복수의 터치 좌표들에 대한 정보를 포함할 수도 있다.In addition, the coordinate system used to detect the plurality of touch coordinates and the coordinate system used for the screen of the remote device may be matched with each other at a predetermined ratio. In this case, the direction of the touch gesture may be detected by mapping the plurality of touch coordinates in the remote device to a coordinate system used on the screen of the remote device based on a predetermined ratio. In this case, the command event may simply include information on the plurality of detected touch coordinates.

도 14는 본 발명의 일실시예에 있어서, 원격제어 시스템의 내부 구성을 설명하기 위한 블록도이다. 본 실시예에 따른 원격제어 시스템(1400)은 터치 감지 기기에서 감지된 복수의 터치 좌표들을 통해 터치 제스처의 방향을 결정하고, 결정된 방향에 따라 사용자 인터페이스를 화면의 대응하는 위치에 표시하는 기기에 대응될 수 있다. 이러한 원격제어 시스템(1400)은 도 14에 도시된 바와 같이 좌표 수신부(1410), 방향 결정부(1420) 및 동작 처리부(1430)를 포함할 수 있다.14 is a block diagram for explaining an internal configuration of a remote control system in an embodiment of the present invention. The remote control system 1400 according to the present exemplary embodiment may determine a direction of a touch gesture through a plurality of touch coordinates detected by the touch sensing device, and correspond to a device displaying a user interface at a corresponding position on the screen according to the determined direction. Can be. As illustrated in FIG. 14, the remote control system 1400 may include a coordinate receiver 1410, a direction determiner 1420, and an operation processor 1430.

좌표 수신부(1410)는 터치 감지 기기로부터 복수의 터치 좌표들을 수신한다. 즉, 터치 감지 기기는 터치 제스처에 따른 복수의 터치 좌표들을 감지할 수 있고, 감지된 복수의 터치 좌표들을 원격제어 시스템(1400)으로 실시간으로 전송할 수 있다. 이때, 좌표 수신부(1410)는 터치 감지 기기로부터 실시간으로 수신되는 터치 좌표들을 수신할 수 있다.The coordinate receiving unit 1410 receives a plurality of touch coordinates from the touch sensing device. That is, the touch sensing device may detect a plurality of touch coordinates according to a touch gesture, and transmit the detected plurality of touch coordinates to the remote control system 1400 in real time. In this case, the coordinate receiver 1410 may receive touch coordinates received in real time from the touch sensing device.

방향 결정부(1420)는 복수의 터치 좌표들을 이용하여 측정되는 터치 제스처의 방향을 결정한다. 이때, 터치 제스처의 방향은 도 7 및 도 8을 통해 설명한 바와 같이 원격기기에서 사용자 인터페이스가 표시되는 위치에 대응될 수 있다.The direction determiner 1420 determines the direction of the touch gesture measured using the plurality of touch coordinates. In this case, the direction of the touch gesture may correspond to the position where the user interface is displayed on the remote device as described with reference to FIGS. 7 and 8.

동작 처리부(1430)는 결정된 방향에 따라 결정되는 화면의 위치에 사용자 인터페이스 표시한다. 또한, 방향 결정부(1420)는 복수의 터치 좌표들에 기초하여 상기 터치 제스처와 연속된 다른 터치 제스처가 감지되는 경우, 상기 연속된 다른 터치 제스처의 방향을 더 결정할 수 있다. 이 경우, 동작 처리부(1430)는 연속된 다른 터치 제스처의 방향에 기초하여 상기 표시된 사용자 인터페이스의 기능들 중 적어도 하나의 기능이 선택할 수 있다. 여기서, 연속된 터치 제스처는, 상기 터치 제스처가 발생한 후, 터치가 해제(release)되지 않은 상태에서 일정 시간 간격을 두고 발생하는 터치 제스처를 포함할 수 있다. 이때, 동작 처리부(1430)는 연속된 터치 제스처가 발생한 이후에 터치가 해제되는 경우, 상기 선택된 적어도 하나의 기능을 실행할 수 있다.The operation processor 1430 displays the user interface at the position of the screen determined according to the determined direction. In addition, the direction determiner 1420 may further determine the direction of the other continuous touch gesture based on a plurality of touch coordinates when the other touch gesture consecutive to the touch gesture is detected. In this case, the operation processor 1430 may select at least one of the functions of the displayed user interface based on the direction of another continuous touch gesture. Here, the continuous touch gesture may include a touch gesture generated at a predetermined time interval in a state in which the touch is not released after the touch gesture occurs. In this case, when the touch is released after the continuous touch gesture occurs, the operation processor 1430 may execute the at least one selected function.

필요에 따라, 원격제어 시스템(1400)에서 이용되는 좌표계와 터치 감지 기기에서 이용되는 좌표계가 서로 일정 비율로 매칭될 수 있다. 이때, 터치 감지 기기에서 감지된 복수의 터치 좌표들과 터치 감지 기기 또는 원격서버에서 보정된 초기 터치 좌표가 원격제어 시스템(1400)의 좌표계로 매핑되어 원격제어 시스템(1400)이 터치 감지 기기와 동일한 터치 제스처를 감지할 수도 있다. 이 경우, 명령 이벤트는 단순히 감지된 복수의 터치 좌표들과 보정된 초기 터치 좌표에 대한 정보를 포함할 수도 있다.If necessary, the coordinate system used in the remote control system 1400 and the coordinate system used in the touch sensing apparatus can be matched with each other at a predetermined ratio. At this time, the plurality of touch coordinates detected by the touch sensing device and the initial touch coordinates corrected by the touch sensing device or the remote server are mapped to the coordinate system of the remote control system 1400, so that the remote control system 1400 is identical to the touch sensing device You can also detect touch gestures. In this case, the command event may simply include information about the plurality of touch coordinates detected and the corrected initial touch coordinates.

도 15는 본 발명의 일실시예에 있어서, 원격제어 방법을 도시한 흐름도이다. 본 실시예에 따른 원격제어 방법은 도 14를 통해 설명한 원격제어 시스템(1400)에 의해 수행될 수 있다.15 is a flowchart showing a remote control method in an embodiment of the present invention. The remote control method according to the present embodiment can be performed by the remote control system 1400 described with reference to Fig.

단계(1510)에서 원격제어 시스템(1400)은 터치 감지 기기로부터 복수의 터치 좌표들을 수신한다. 즉, 터치 감지 기기는 터치 제스처에 따른 복수의 터치 좌표들을 감지할 수 있고, 감지된 복수의 터치 좌표들을 원격제어 시스템(1400)으로 실시간으로 전송할 수 있다. 이때, 원격제어 시스템(1400)은 터치 감지 기기로부터 실시간으로 수신되는 터치 좌표들을 수신할 수 있다.In operation 1510, the remote control system 1400 receives a plurality of touch coordinates from the touch sensing device. That is, the touch sensing device may detect a plurality of touch coordinates according to the touch gesture, and transmit the plurality of detected touch coordinates to the remote control system 1400 in real time. In this case, the remote control system 1400 may receive touch coordinates received in real time from the touch sensing device.

단계(1520)에서 원격제어 시스템(1400)은 복수의 터치 좌표들을 이용하여 측정되는 터치 제스처의 방향을 결정한다. 이때, 터치 제스처의 방향은 도 7 및 도 8을 통해 설명한 바와 같이 원격기기에서 사용자 인터페이스가 표시되는 위치에 대응될 수 있다.In operation 1520, the remote control system 1400 determines a direction of the touch gesture measured using the plurality of touch coordinates. In this case, the direction of the touch gesture may correspond to the position where the user interface is displayed on the remote device as described with reference to FIGS. 7 and 8.

단계(1530)에서 원격제어 시스템(1400)은 결정된 방향에 따라 결정되는 화면의 위치에 사용자 인터페이스 표시한다. 또한, 원격제어 시스템(1400)은 복수의 터치 좌표들에 기초하여 상기 터치 제스처와 연속된 다른 터치 제스처가 감지되는 경우, 상기 연속된 다른 터치 제스처의 방향을 더 결정할 수 있다. 이 경우, 원격제어 시스템(1400)은 연속된 다른 터치 제스처의 방향에 기초하여 상기 표시된 사용자 인터페이스의 기능들 중 적어도 하나의 기능이 선택할 수 있다. 여기서, 연속된 터치 제스처는, 상기 터치 제스처가 발생한 후, 터치가 해제(release)되지 않은 상태에서 일정 시간 간격을 두고 발생하는 터치 제스처를 포함할 수 있다. 이때, 원격제어 시스템(1400)은 연속된 터치 제스처가 발생한 이후에 터치가 해제되는 경우, 상기 선택된 적어도 하나의 기능을 실행할 수 있다.In operation 1530, the remote control system 1400 displays a user interface at a location of a screen determined according to the determined direction. In addition, the remote control system 1400 may further determine the direction of the other continuous touch gesture based on the plurality of touch coordinates when the other touch gesture is continuous with the touch gesture. In this case, the remote control system 1400 may select at least one of the functions of the displayed user interface based on the direction of another consecutive touch gesture. Here, the continuous touch gesture may include a touch gesture generated at a predetermined time interval in a state in which the touch is not released after the touch gesture occurs. In this case, when the touch is released after the continuous touch gesture occurs, the remote control system 1400 may execute the at least one selected function.

필요에 따라, 원격제어 시스템(1400)에서 이용되는 좌표계와 터치 감지 기기에서 이용되는 좌표계가 서로 일정 비율로 매칭될 수 있다. 이때, 터치 감지 기기에서 감지된 복수의 터치 좌표들과 터치 감지 기기 또는 원격서버에서 보정된 초기 터치 좌표가 원격제어 시스템(1400)의 좌표계로 매핑되어 원격제어 시스템(1400)이 터치 감지 기기와 동일한 터치 제스처를 감지할 수도 있다. 이 경우, 명령 이벤트는 단순히 감지된 복수의 터치 좌표들에 대한 정보를 포함할 수도 있다.If necessary, the coordinate system used in the remote control system 1400 and the coordinate system used in the touch sensing apparatus can be matched with each other at a predetermined ratio. At this time, the plurality of touch coordinates detected by the touch sensing device and the initial touch coordinates corrected by the touch sensing device or the remote server are mapped to the coordinate system of the remote control system 1400, so that the remote control system 1400 is identical to the touch sensing device You can also detect touch gestures. In this case, the command event may simply include information on the plurality of detected touch coordinates.

도 16은 본 발명의 다른 실시예에 있어서, 원격제어 시스템의 내부 구성을 설명하기 위한 블록도이다. 본 실시예에 따른 원격제어 시스템(1600)은 터치 감지 기기에서 감지된 터치 제스처의 방향에 따라 사용자 인터페이스를 화면의 대응하는 위치에 표시하는 기기일 수 있다. 이러한 원격제어 시스템(1600)은 도 16에 도시된 바와 같이 명령 이벤트 수신부(1610) 및 동작 처리부(1620)를 포함할 수 있다.16 is a block diagram for explaining an internal configuration of a remote control system in another embodiment of the present invention. The remote control system 1600 according to the present exemplary embodiment may be a device that displays a user interface at a corresponding position on a screen according to a direction of a touch gesture detected by the touch sensing device. The remote control system 1600 may include a command event receiver 1610 and an operation processor 1620 as shown in FIG. 16.

명령 이벤트 수신부(1610)는 명령 이벤트를 수신한다. 이때, 명령 이벤트는 터치 감지 기기 또는 원격서버를 통해 수신될 수 있다. 이러한, 명령 이벤트는, 터치 감지 기기에서 감지된 복수의 터치 좌표들에 기초하여 결정되는 터치 제스처의 방향에 따라 터치 감지 기기 또는 복수의 터치 좌표들을 터치 감지 기기로부터 전달받은 원격서버에서 확인 또는 생성될 수 있다. The command event receiver 1610 receives a command event. At this time, the command event may be received through the touch sensing device or the remote server. The command event may be confirmed or generated at the touch sensing device or a remote server received from the touch sensing device according to the direction of the touch gesture determined based on the plurality of touch coordinates detected by the touch sensing device. Can be.

동작 처리부(1620)는 명령 이벤트에 따라 화면에 사용자 인터페이스를 표시한다. 이때, 사용자 인터페이스는, 터치 제스처의 방향에 따라 결정되는 화면의 위치에 표시될 수 있다. 터치 제스처의 방향에 따라 결정되는 화면의 위치에 사용자 인터페이스를 표시하는 방법에 대해서는 도 7 및 도 8을 통해 이미 설명한 바 있다.The operation processor 1620 displays the user interface on the screen according to the command event. In this case, the user interface may be displayed at a position of the screen determined according to the direction of the touch gesture. A method of displaying a user interface at a position of a screen determined according to a direction of a touch gesture has been described above with reference to FIGS. 7 and 8.

이때, 명령 이벤트 수신부(1610)는 상기 터치 제스처와 연속된 다른 터치 제스처에 따른 명령 이벤트를 더 수신할 수 있다. 이 경우, 동작 처리부(1620)는 더 수신된 명령 이벤트에 따라 상기 사용자 인터페이스의 기능들 중 적어도 하나의 기능을 선택할 수 있다. 만약, 상기 다른 터치 제스처가 발생한 후, 터치 감지 기기에서 터치가 해제되면, 동작 처리부(1620)는 선택된 적어도 하나의 기능을 실행할 수 있다.In this case, the command event receiver 1610 may further receive a command event according to another touch gesture consecutive to the touch gesture. In this case, the operation processor 1620 may select at least one of the functions of the user interface according to the received command event. If the touch is released from the touch sensing device after the other touch gesture occurs, the operation processor 1620 may execute at least one selected function.

필요에 따라, 원격제어 시스템(1600)에서 이용되는 좌표계와 터치 감지 기기에서 이용되는 좌표계가 서로 일정 비율로 매칭될 수 있다. 이때, 터치 감지 기기에서 감지된 복수의 터치 좌표들과 터치 감지 기기 또는 원격서버에서 보정된 초기 터치 좌표가 원격제어 시스템(1600)의 좌표계로 매핑되어 원격제어 시스템(1600)이 터치 감지 기기와 동일한 터치 제스처를 감지할 수도 있다. 이 경우, 명령 이벤트는 단순히 감지된 복수의 터치 좌표들에 대한 정보를 포함할 수도 있다.If necessary, the coordinate system used in the remote control system 1600 and the coordinate system used in the touch sensing apparatus can be matched at a predetermined ratio. At this time, the plurality of touch coordinates detected by the touch sensing device and the initial touch coordinates corrected by the touch sensing device or the remote server are mapped to the coordinate system of the remote control system 1600, so that the remote control system 1600 is identical to the touch sensing device You can also detect touch gestures. In this case, the command event may simply include information on the plurality of detected touch coordinates.

도 17은 본 발명의 다른 실시예에 있어서, 원격제어 방법을 도시한 흐름도이다. 본 실시예에 따른 원격제어 방법은 도 16을 통해 설명한 원격제어 시스템(1600)에 의해 수행될 수 있다.17 is a flowchart showing a remote control method in another embodiment of the present invention. The remote control method according to the present embodiment can be performed by the remote control system 1600 described with reference to FIG.

단계(1710)에서 원격제어 시스템(1600)은 명령 이벤트를 수신한다. 이때, 명령 이벤트는 터치 감지 기기 또는 원격서버를 통해 수신될 수 있다. 이러한, 명령 이벤트는, 터치 감지 기기에서 감지된 복수의 터치 좌표들에 기초하여 결정되는 터치 제스처의 방향에 따라 터치 감지 기기 또는 복수의 터치 좌표들을 터치 감지 기기로부터 전달받은 원격서버에서 확인 또는 생성될 수 있다. In step 1710, the remote control system 1600 receives a command event. At this time, the command event may be received through the touch sensing device or the remote server. The command event may be confirmed or generated at the touch sensing device or a remote server received from the touch sensing device according to the direction of the touch gesture determined based on the plurality of touch coordinates detected by the touch sensing device. Can be.

단계(1720)에서 원격제어 시스템(1600)은 명령 이벤트에 따라 화면에 사용자 인터페이스를 표시한다. 이때, 사용자 인터페이스는, 터치 제스처의 방향에 따라 결정되는 화면의 위치에 표시될 수 있다. 터치 제스처의 방향에 따라 결정되는 화면의 위치에 사용자 인터페이스를 표시하는 방법에 대해서는 도 7 및 도 8을 통해 이미 설명한 바 있다.In operation 1720, the remote control system 1600 displays a user interface on the screen according to the command event. In this case, the user interface may be displayed at a position of the screen determined according to the direction of the touch gesture. A method of displaying a user interface at a position of a screen determined according to a direction of a touch gesture has been described above with reference to FIGS. 7 and 8.

이때, 원격제어 시스템(1600)은 상기 터치 제스처와 연속된 다른 터치 제스처에 따른 명령 이벤트를 더 수신할 수 있다. 이 경우, 원격제어 시스템(1600)은 더 수신된 명령 이벤트에 따라 상기 사용자 인터페이스의 기능들 중 적어도 하나의 기능을 선택할 수 있다. 만약, 상기 다른 터치 제스처가 발생한 후, 터치 감지 기기에서 터치가 해제되면, 원격제어 시스템(1600)은 선택된 적어도 하나의 기능을 실행할 수 있다.In this case, the remote control system 1600 may further receive a command event according to another touch gesture consecutive to the touch gesture. In this case, the remote control system 1600 may select at least one of the functions of the user interface according to the received command event. If the touch is released from the touch sensing device after the other touch gesture occurs, the remote control system 1600 may execute at least one selected function.

필요에 따라, 원격제어 시스템(1600)에서 이용되는 좌표계와 터치 감지 기기에서 이용되는 좌표계가 서로 일정 비율로 매칭될 수 있다. 이때, 터치 감지 기기에서 감지된 복수의 터치 좌표들과 터치 감지 기기 또는 원격서버에서 보정된 초기 터치 좌표가 원격제어 시스템(1600)의 좌표계로 매핑되어 원격제어 시스템(1600)이 터치 감지 기기와 동일한 터치 제스처를 감지할 수도 있다. 이 경우, 명령 이벤트는 단순히 감지된 복수의 터치 좌표들에 대한 정보를 포함할 수도 있다.If necessary, the coordinate system used in the remote control system 1600 and the coordinate system used in the touch sensing apparatus can be matched at a predetermined ratio. At this time, the plurality of touch coordinates detected by the touch sensing device and the initial touch coordinates corrected by the touch sensing device or the remote server are mapped to the coordinate system of the remote control system 1600, so that the remote control system 1600 is identical to the touch sensing device You can also detect touch gestures. In this case, the command event may simply include information on the plurality of detected touch coordinates.

이와 같이, 본 발명의 실시예들에 따르면, 베젤 영역으로부터 시작되는 터치 드래깅 제스처를 감지하고, 감지된 터치 드래깅 제스처에 의해 해당 터치 드래깅 제스처가 지나간 변(edge)에 따라 기설정된 명령 이벤트를 원격기기로 전송하여 원격기기에서 명령 이벤트에 따른 동작이 수행되도록 원격제어할 수 있고, 터치 드래깅 제스처를 통해 원격기기에서 하나의 동작이 수행된 후, 터치 드래깅 제스처와 연결된 터치 드래깅 제스처를 통해 원격기기에서 상기 하나의 동작과 연결된 동작이 수행되도록 원격제어할 수 있다. 또한, 터치 드래깅 제스처가 종료되어 터치가 해제(release)되는 경우, 원격기기에서 선택된 기능이 실행되도록 원격제어할 수 있다.Thus, according to embodiments of the present invention, a touch dragging gesture starting from a bezel area is sensed, and a pre-determined command event is displayed on the remote device by the sensed touch dragging gesture according to the edge of the touch dragging gesture. A remote drag-and-drop gesture may be transmitted to the remote device to remotely control the remote device to perform an operation according to a command event, and after a single operation is performed at the remote device through the touch dragging gesture, It is possible to remotely control the operation associated with one operation to be performed. In addition, when the touch dragging gesture is terminated and the touch is released, remote control can be performed so that the selected function is executed on the remote device.

이에 더해, 터치 드래깅 제스처가 베젤 영역으로부터 시작되지 않더라도 터치 드래깅 제스처의 방향을 이용하여 원격기기를 원격제어할 수 있고, 원격기기의 좌표계와 일정 비율로 매칭된 좌표계를 이용한 절대좌표를 통해 원격기기를 원격제어할 수 있다.In addition, even if the touch dragging gesture does not start from the bezel area, the remote device can be remotely controlled using the direction of the touch dragging gesture, and the remote device can be controlled through absolute coordinates using a coordinate system matched with the coordinate system of the remote device Remote control is possible.

즉, 터치 감지 기기 또는 원격서버로부터 수신된 신호에 기초하여 사용자 인터페이스의 표시, 사용자 인터페이스에 따른 기능의 선택 및 선택된 기능의 실행이 원격제어될 수 있다.That is, the display of the user interface, the selection of the function according to the user interface, and the execution of the selected function can be remotely controlled based on the signal received from the touch-sensitive device or the remote server.

본 발명의 실시 예에 따른 방법들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.The methods according to embodiments of the present invention may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions recorded on the medium may be those specially designed and constructed for the present invention or may be available to those skilled in the art of computer software.

이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.As described above, the present invention has been described by way of limited embodiments and drawings, but the present invention is not limited to the above embodiments, and those skilled in the art to which the present invention pertains various modifications and variations from such descriptions. This is possible.

그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined by the equivalents of the claims, as well as the claims.

110, 710, 810, 910: 터치 감지 기기
120, 720, 820, 920: 디스플레이 기기
920: 원격기기
930: 원격서버110, 710, 810, 910: Touch sensing device
120, 720, 820, 920: display device
920: Remote device
930: remote server

Claims (20)

터치 제스처에 따른 복수의 터치 좌표들을 감지하는 터치 감지부;
상기 복수의 터치 좌표들을 이용하여 측정되는 상기 터치 제스처의 방향을 결정하는 방향 결정부; 및
상기 결정된 방향에 따라 기설정된 명령 이벤트를 확인하여 원격기기로 전송하는 정보 전송부
를 포함하고,
상기 원격기기에서 상기 명령 이벤트에 기초하여 상기 방향에 따른 화면의 위치에 사용자 인터페이스가 표시되고,
상기 정보 전송부는,
상기 터치 제스처와 연속된 터치 제스처가 감지되는 경우, 상기 연속된 터치 제스처에 따른 명령 이벤트를 상기 원격기기로 더 전송하고,
상기 원격기기에서 상기 더 전송된 명령 이벤트에 따라 상기 표시된 사용자 인터페이스의 기능들 중 적어도 하나의 기능이 선택되는
것을 특징으로 하는 터치 감지 시스템.A touch sensing unit for sensing a plurality of touch coordinates according to a touch gesture;
A direction determiner configured to determine a direction of the touch gesture measured using the plurality of touch coordinates; And
An information transmitter for checking a predetermined command event according to the determined direction and transmitting it to a remote device
Lt; / RTI >
A user interface is displayed at a position of a screen according to the direction based on the command event in the remote device,
Wherein,
When the touch gesture and the continuous touch gesture are detected, the command event according to the continuous touch gesture is further transmitted to the remote device,
At least one of the functions of the displayed user interface is selected according to the command event further transmitted from the remote device;
Touch sensing system, characterized in that. 삭제delete 제1항에 있어서,
상기 연속된 터치 제스처는, 상기 터치 제스처가 발생한 후, 터치가 해제(release)되지 않은 상태에서 일정 시간 간격을 두고 발생하는 터치 제스처를 포함하는 것을 특징으로 하는 터치 감지 시스템.The method of claim 1,
The continuous touch gesture may include a touch gesture generated after a touch gesture occurs at a predetermined time interval in a state where the touch is not released. 제1항에 있어서,
상기 연속된 터치 제스처가 발생한 이후에 터치가 해제되는 경우, 상기 선택된 적어도 하나의 기능이 상기 원격기기에서 실행되는 것을 특징으로 하는 터치 감지 시스템.The method of claim 1,
And when the touch is released after the continuous touch gesture occurs, the at least one selected function is executed at the remote device. 삭제delete 터치 제스처에 따른 복수의 터치 좌표들을 감지하는 터치 감지부; 및
상기 복수의 터치 좌표들을 전송하는 좌표 전송부
를 포함하고,
원격기기에서 상기 터치 제스처의 방향에 따른 화면의 위치에 사용자 인터페이스가 표시되고,
상기 좌표 전송부는,
상기 복수의 터치 좌표들을 상기 원격기기로 전송하고,
상기 원격기기에서 상기 복수의 터치 좌표들에 기초하여 상기 터치 제스처의 방향이 검출되는 것을 특징으로 하는 터치 감지 시스템.A touch sensing unit for sensing a plurality of touch coordinates according to a touch gesture; And
Coordinate transmitter for transmitting the plurality of touch coordinates
Lt; / RTI >
In the remote device, the user interface is displayed at the position of the screen according to the direction of the touch gesture,
The coordinate transmission unit,
Transmitting the plurality of touch coordinates to the remote device,
And a direction of the touch gesture is detected based on the plurality of touch coordinates at the remote device. 터치 제스처에 따른 복수의 터치 좌표들을 감지하는 터치 감지부; 및
상기 복수의 터치 좌표들을 전송하는 좌표 전송부
를 포함하고,
원격기기에서 상기 터치 제스처의 방향에 따른 화면의 위치에 사용자 인터페이스가 표시되고,
상기 좌표 전송부는,
상기 복수의 터치 좌표들을 원격서버로 전송하고,
상기 원격서버에서 상기 복수의 터치 좌표들에 기초하여 상기 터치 제스처의 방향을 검출하고, 상기 검출된 방향에 따라 기설정된 명령 이벤트를 상기 원격기기로 전송하며,
상기 원격기기에서 상기 명령 이벤트에 따라 상기 방향에 따른 화면의 위치에 상기 사용자 이벤트가 표시되는 것을 특징으로 하는 터치 감지 시스템.A touch sensing unit for sensing a plurality of touch coordinates according to a touch gesture; And
Coordinate transmitter for transmitting the plurality of touch coordinates
Lt; / RTI >
In the remote device, the user interface is displayed at the position of the screen according to the direction of the touch gesture,
The coordinate transmission unit,
Transmitting the plurality of touch coordinates to a remote server,
The remote server detects the direction of the touch gesture based on the plurality of touch coordinates, and transmits a preset command event to the remote device according to the detected direction.
And the user event is displayed at a position of a screen according to the direction according to the command event in the remote device. 터치 제스처에 따른 복수의 터치 좌표들을 감지하는 터치 감지부; 및
상기 복수의 터치 좌표들을 전송하는 좌표 전송부
를 포함하고,
원격기기에서 상기 터치 제스처의 방향에 따른 화면의 위치에 사용자 인터페이스가 표시되고,
상기 터치 제스처와 연속된 터치 제스처가 감지되는 경우, 상기 연속된 터치 제스처의 방향에 기초하여 상기 원격기기에서 상기 표시된 사용자 인터페이스의 기능들 중 적어도 하나의 기능이 선택되는 것을 특징으로 하는 터치 감지 시스템.A touch sensing unit for sensing a plurality of touch coordinates according to a touch gesture; And
Coordinate transmitter for transmitting the plurality of touch coordinates
Lt; / RTI >
In the remote device, the user interface is displayed at the position of the screen according to the direction of the touch gesture,
And when the touch gesture and the continuous touch gesture are detected, at least one of the functions of the displayed user interface is selected at the remote device based on the direction of the continuous touch gesture. 제8항에 있어서,
상기 연속된 터치 제스처가 발생한 이후에 터치가 해제되는 경우, 상기 선택된 적어도 하나의 기능이 상기 원격기기에서 실행되는 것을 특징으로 하는 터치 감지 시스템.9. The method of claim 8,
And when the touch is released after the continuous touch gesture occurs, the at least one selected function is executed at the remote device. 제1항, 제3항, 제4항, 및 제6항 내지 제9항 중 어느 한 항에 있어서,
상기 복수의 터치 좌표들을 감지하는데 이용된 좌표계와 상기 원격기기의 화면에 이용되는 좌표계가 서로 일정 비율로 매칭되고,
상기 원격기기에서 상기 복수의 터치 좌표들을 상기 일정 비율에 기초하여 상기 원격기기의 화면에 이용되는 좌표계로 매핑하여 상기 터치 제스처의 방향이 검출되는 것을 특징으로 하는 터치 감지 시스템.The method according to any one of claims 1, 3, 4, and 6 to 9,
The coordinate system used to detect the plurality of touch coordinates and the coordinate system used for the screen of the remote device are matched with each other at a predetermined ratio,
And a direction of the touch gesture is detected by mapping the plurality of touch coordinates in the remote device to a coordinate system used on the screen of the remote device based on the predetermined ratio. 터치 감지 기기로부터 복수의 터치 좌표들을 수신하는 좌표 수신부;
상기 복수의 터치 좌표들에 기초하여 터치 제스처의 방향을 결정하는 방향 결정부; 및
상기 결정된 방향에 따라 결정되는 화면의 위치에 사용자 인터페이스를 표시하는 사용자 인터페이스를 표시하는 동작 처리부
를 포함하고,
상기 방향 결정부는,
상기 복수의 터치 좌표들에 기초하여 상기 터치 제스처와 연속된 다른 터치 제스처가 감지되는 경우, 상기 연속된 다른 터치 제스처의 방향을 더 결정하고,
상기 동작 처리부는,
상기 연속된 다른 터치 제스처의 방향에 기초하여 상기 표시된 사용자 인터페이스의 기능들 중 적어도 하나의 기능이 선택하는
것을 특징으로 하는 원격제어 시스템.A coordinate receiver for receiving a plurality of touch coordinates from the touch sensing device;
A direction determiner configured to determine a direction of a touch gesture based on the plurality of touch coordinates; And
An operation processor for displaying a user interface displaying a user interface at a position of a screen determined according to the determined direction;
Lt; / RTI >
The direction determining unit,
If another touch gesture consecutive to the touch gesture is detected based on the plurality of touch coordinates, further determine a direction of the continuous other touch gesture,
The operation processing unit,
At least one of the functions of the displayed user interface selects based on the direction of the other continuous touch gesture
Remote control system, characterized in that. 삭제delete 제11항에 있어서,
상기 연속된 터치 제스처는, 상기 터치 제스처가 발생한 후, 터치가 해제(release)되지 않은 상태에서 일정 시간 간격을 두고 발생하는 터치 제스처를 포함하는 것을 특징으로 하는 원격제어 시스템.12. The method of claim 11,
The continuous touch gesture may include a touch gesture generated after a touch gesture occurs at a predetermined time interval in a state where the touch is not released. 제11항에 있어서,
상기 동작 처리부는,
상기 연속된 터치 제스처가 발생한 이후에 터치가 해제되는 경우, 상기 선택된 적어도 하나의 기능을 실행하는 것을 특징으로 하는 터치 감지 시스템.12. The method of claim 11,
The operation processing unit,
And when the touch is released after the continuous touch gesture occurs, executing the at least one selected function. 명령 이벤트를 수신하는 명령 이벤트 수신부; 및
상기 명령 이벤트에 따라 화면에 사용자 인터페이스를 표시하는 동작 처리부
를 포함하고,
상기 명령 이벤트는, 터치 감지 기기에서 감지된 복수의 터치 좌표들에 기초하여 결정되는 터치 제스처의 방향에 따라 상기 터치 감지 기기 또는 상기 복수의 터치 좌표들을 상기 터치 감지 기기로부터 전달받은 원격서버에서 확인 또는 생성되고,
상기 사용자 인터페이스는, 상기 터치 제스처의 방향에 따라 결정되는 화면의 위치에 표시되고,
상기 명령 이벤트 수신부는,
상기 터치 제스처와 연속된 다른 터치 제스처에 따른 명령 이벤트를 더 수신하고,
상기 동작 처리부는,
상기 더 수신된 명령 이벤트에 따라 상기 사용자 인터페이스의 기능들 중 적어도 하나의 기능을 선택하는
것을 특징으로 하는 원격제어 시스템.A command event receiver configured to receive a command event; And
An operation processor for displaying a user interface on a screen according to the command event
Lt; / RTI >
The command event may be confirmed by the touch sensing device or the remote server received from the touch sensing device according to the direction of the touch gesture determined based on the plurality of touch coordinates detected by the touch sensing device. Generated,
The user interface is displayed at the position of the screen determined according to the direction of the touch gesture,
Wherein the command event receiver comprises:
Further receiving a command event according to another touch gesture consecutive to the touch gesture,
The operation processing unit,
Selecting at least one of the functions of the user interface according to the further received command event
Remote control system, characterized in that. 삭제delete 터치 제스처에 따른 복수의 터치 좌표들을 감지하는 단계;
상기 복수의 터치 좌표들을 이용하여 측정되는 상기 터치 제스처의 방향을 결정하는 단계;
상기 결정된 방향에 따라 기설정된 명령 이벤트를 확인하여 원격기기로 전송하는 단계;
상기 터치 제스처와 연속된 터치 제스처가 감지되는 경우, 상기 연속된 터치 제스처에 따른 명령 이벤트를 상기 원격기기로 더 전송하는 단계; 및
상기 원격기기에서 상기 더 전송된 명령 이벤트에 따라 상기 표시된 사용자 인터페이스의 기능들 중 적어도 하나의 기능이 선택되는 단계
를 포함하고,
상기 원격기기에서 상기 명령 이벤트에 기초하여 상기 방향에 따른 화면의 위치에 사용자 인터페이스가 표시되는 것을 특징으로 하는 터치 감지 방법.Sensing a plurality of touch coordinates according to a touch gesture;
Determining a direction of the touch gesture measured using the plurality of touch coordinates;
Confirming a predetermined command event according to the determined direction and transmitting the same to the remote device;
If the touch gesture and the continuous touch gesture are detected, transmitting a command event according to the continuous touch gesture to the remote device; And
Selecting at least one of the functions of the displayed user interface according to the further transmitted command event at the remote device;
Lt; / RTI >
And a user interface is displayed at a position of a screen according to the direction based on the command event in the remote device. 터치 제스처에 따른 복수의 터치 좌표들을 감지하는 단계; 및
상기 복수의 터치 좌표들을 원격기기로 전송하는 단계
를 포함하고,
상기 원격기기에서 상기 터치 제스처의 방향에 따른 화면의 위치에 사용자 인터페이스가 표시되고,
상기 원격기기에서 상기 복수의 터치 좌표들에 기초하여 상기 터치 제스처의 방향이 검출되는
것을 특징으로 하는 터치 감지 방법.Sensing a plurality of touch coordinates according to a touch gesture; And
Transmitting the plurality of touch coordinates to a remote device
Lt; / RTI >
The user interface is displayed at the position of the screen according to the direction of the touch gesture on the remote device,
The direction of the touch gesture is detected based on the plurality of touch coordinates at the remote device.
Touch sensing method, characterized in that. 터치 감지 기기로부터 복수의 터치 좌표들을 수신하는 단계;
상기 복수의 터치 좌표들에 기초하여 터치 제스처의 방향을 결정하는 단계; 및
상기 결정된 방향에 따라 결정되는 화면의 위치에 사용자 인터페이스를 표시하는 단계
를 포함하고,
상기 복수의 터치 좌표들에 기초하여 터치 제스처의 방향을 결정하는 단계는,
상기 복수의 터치 좌표들에 기초하여 상기 터치 제스처와 연속된 다른 터치 제스처가 감지되는 경우, 상기 연속된 다른 터치 제스처의 방향을 더 결정하는 단계
를 포함하고,
상기 결정된 방향에 따라 결정되는 화면의 위치에 사용자 인터페이스를 표시하는 단계는,
상기 연속된 다른 터치 제스처의 방향에 기초하여 상기 표시된 사용자 인터페이스의 기능들 중 적어도 하나의 기능을 선택하는 단계
를 포함하는 원격제어 방법.Receiving a plurality of touch coordinates from a touch-sensitive device;
Determining a direction of a touch gesture based on the plurality of touch coordinates; And
Displaying a user interface at a location of a screen determined according to the determined direction;
Lt; / RTI >
Determining the direction of the touch gesture based on the plurality of touch coordinates,
Further determining a direction of the other continuous touch gesture based on the plurality of touch coordinates, when another touch gesture consecutive to the touch gesture is detected
Lt; / RTI >
The step of displaying the user interface at the position of the screen determined according to the determined direction,
Selecting at least one of the functions of the displayed user interface based on the direction of the other continuous touch gesture
Lt; / RTI > 명령 이벤트를 수신하는 단계; 및
상기 명령 이벤트에 따라 화면에 사용자 인터페이스를 표시하는 단계
를 포함하고,
상기 명령 이벤트는, 터치 감지 기기에서 감지된 복수의 터치 좌표들에 기초하여 결정되는 터치 제스처의 방향에 따라 상기 터치 감지 기기 또는 상기 복수의 터치 좌표들을 상기 터치 감지 기기로부터 전달받은 원격서버에서 확인 또는 생성되고,
상기 사용자 인터페이스는, 상기 터치 제스처의 방향에 따라 결정되는 화면의 위치에 표시되고,
상기 명령 이벤트를 수신하는 단계는,
상기 터치 제스처와 연속된 다른 터치 제스처에 따른 명령 이벤트를 더 수신하는 단계
를 포함하고,
상기 명령 이벤트에 따라 화면에 사용자 인터페이스를 표시하는 단계는,
상기 더 수신된 명령 이벤트에 따라 상기 사용자 인터페이스의 기능들 중 적어도 하나의 기능을 선택하는 단계
를 포함하는 원격제어 방법.Receiving a command event; And
Displaying a user interface on a screen according to the command event;
Lt; / RTI >
The command event may be confirmed by the touch sensing device or the remote server received from the touch sensing device according to the direction of the touch gesture determined based on the plurality of touch coordinates detected by the touch sensing device. Generated,
The user interface is displayed at the position of the screen determined according to the direction of the touch gesture,
Receiving the command event,
Receiving a command event according to another touch gesture consecutive to the touch gesture
Lt; / RTI >
Displaying the user interface on the screen according to the command event,
Selecting at least one of the functions of the user interface according to the further received command event.
Lt; / RTI >
KR1020120024908A 2012-03-12 2012-03-12 Touch detect system, touch detect method, remote control system and remote control method for remote control of display device based on direction of touch gesture KR101360631B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120024908A KR101360631B1 (en) 2012-03-12 2012-03-12 Touch detect system, touch detect method, remote control system and remote control method for remote control of display device based on direction of touch gesture

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120024908A KR101360631B1 (en) 2012-03-12 2012-03-12 Touch detect system, touch detect method, remote control system and remote control method for remote control of display device based on direction of touch gesture

Publications (2)

Publication Number Publication Date
KR20130103905A KR20130103905A (en) 2013-09-25
KR101360631B1 true KR101360631B1 (en) 2014-02-11

Family

ID=49452842

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120024908A KR101360631B1 (en) 2012-03-12 2012-03-12 Touch detect system, touch detect method, remote control system and remote control method for remote control of display device based on direction of touch gesture

Country Status (1)

Country Link
KR (1) KR101360631B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9977543B2 (en) 2014-02-27 2018-05-22 Samsung Display Co., Ltd. Apparatus and method for detecting surface shear force on a display device

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102161677B1 (en) 2014-01-03 2020-10-05 삼성전자주식회사 Remote control device and controlling method thereof

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110107069A (en) * 2010-03-24 2011-09-30 글로벌테크링크(주) Method for controlling touch-sensing devices, and touch-sensing devices using the same
KR20110119407A (en) * 2010-04-27 2011-11-02 엘지전자 주식회사 Mobile terminal and control method thereof
KR20120019268A (en) * 2010-08-25 2012-03-06 주식회사 케이티 Gesture command method and terminal using bezel of touch screen

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110107069A (en) * 2010-03-24 2011-09-30 글로벌테크링크(주) Method for controlling touch-sensing devices, and touch-sensing devices using the same
KR20110119407A (en) * 2010-04-27 2011-11-02 엘지전자 주식회사 Mobile terminal and control method thereof
KR20120019268A (en) * 2010-08-25 2012-03-06 주식회사 케이티 Gesture command method and terminal using bezel of touch screen

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9977543B2 (en) 2014-02-27 2018-05-22 Samsung Display Co., Ltd. Apparatus and method for detecting surface shear force on a display device

Also Published As

Publication number Publication date
KR20130103905A (en) 2013-09-25

Similar Documents

Publication Publication Date Title
US9720587B2 (en) User interface device enabling input motions by finger touch in different modes, and method and program for recognizing input motion
US10001880B2 (en) Electronic apparatus which determines effectiveness of a touch coordinate based on an amount of bend
US9448714B2 (en) Touch and non touch based interaction of a user with a device
US20140237401A1 (en) Interpretation of a gesture on a touch sensing device
US20140375577A1 (en) Method of identifying edge swipe gesture and method of opening window control bar using the identifying method
KR20120113511A (en) Display apparatus and method for displaying object thereof
EP3007441A1 (en) Interactive displaying method, control method and system for achieving displaying of a holographic image
US20160196034A1 (en) Touchscreen Control Method and Terminal Device
US10956030B2 (en) Multi-touch based drawing input method and apparatus
KR20190090260A (en) Method for providing fingerprint recognition, electronic apparatus and storage medium
EP2693313A2 (en) Electronic pen input recognition apparatus and method using capacitive-type touch screen panel (tsp)
KR20120023405A (en) Method and apparatus for providing user interface
EP2579142B1 (en) Mobile device and method of remotely controlling a controlled device
US10283075B2 (en) Electronic apparatus which effects touch coordinate based on proximity and strain
KR101393733B1 (en) Touch screen control method using bezel area
KR101333211B1 (en) Method for controlling touch screen using bezel
KR101360631B1 (en) Touch detect system, touch detect method, remote control system and remote control method for remote control of display device based on direction of touch gesture
TWI569183B (en) Touch sensing method and touch sensing apparatus and touch sensing keyboard
CN107980116B (en) Floating touch sensing method, floating touch sensing system and floating touch electronic equipment
CN102455806A (en) Method for operating terminal with touch screen and terminal
KR101392673B1 (en) Touch detect system, touch detect method, remote control system and remote control method for remote control of remote device based on touch gesture using bezel area
KR101986660B1 (en) Device for curved display with touch sensor
CN108459818A (en) The method and apparatus for controlling unlocking screen
US9244608B2 (en) Method and system for gesture identification
KR101404931B1 (en) Method for controlling touch screen using bezel

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170125

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee