KR20190028961A - Gesture recognition based touch display apparatus - Google Patents

Gesture recognition based touch display apparatus Download PDF

Info

Publication number
KR20190028961A
KR20190028961A KR1020170115921A KR20170115921A KR20190028961A KR 20190028961 A KR20190028961 A KR 20190028961A KR 1020170115921 A KR1020170115921 A KR 1020170115921A KR 20170115921 A KR20170115921 A KR 20170115921A KR 20190028961 A KR20190028961 A KR 20190028961A
Authority
KR
South Korea
Prior art keywords
touch
panel
touch panel
board
control
Prior art date
Application number
KR1020170115921A
Other languages
Korean (ko)
Other versions
KR102026615B1 (en
Inventor
맹성열
오세훈
임재욱
강석훈
주진황
박경남
Original Assignee
주식회사 엣지아이앤디
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엣지아이앤디 filed Critical 주식회사 엣지아이앤디
Priority to KR1020170115921A priority Critical patent/KR102026615B1/en
Publication of KR20190028961A publication Critical patent/KR20190028961A/en
Application granted granted Critical
Publication of KR102026615B1 publication Critical patent/KR102026615B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Abstract

The present invention relates to a touch display apparatus based on gesture recognition performing a control operation of a touch panel according to a change in touch inputted to a touch panel. The touch display apparatus may comprise: a touch panel; and a touch board performing a control operation of the touch panel by sensing first touch defined by a dragging operation with a specific length related to specific touch and a pause for a specific time and sensing a second touch defined by a change related to a part of touch constituting the first touch when the specific touch of the touch panel is received. Therefore, the touch display apparatus based on gesture recognition may select a control target without touch termination in the middle of inputting touch.

Description

제스처 인식 기반의 터치 디스플레이 장치{GESTURE RECOGNITION BASED TOUCH DISPLAY APPARATUS}BACKGROUND OF THE INVENTION 1. Field of the Invention [0001] The present invention relates to a gesture recognition based touch display device,

본 발명은 제스처 인식 기반의 터치 디스플레이 기술에 관한 것으로, 보다 상세하게는, 터치 패널에 입력된 터치의 변화에 따라 터치 패널의 제어 동작을 수행하는 제스처 인식 기반의 터치 디스플레이 장치에 관한 것이다.The present invention relates to a gesture recognition-based touch display device, and more particularly, to a gesture recognition-based touch display device that performs a control operation of a touch panel according to a change of a touch input to the touch panel.

터치 디스플레이 장치는 터치 패널로부터 수신한 터치 신호들을 처리하기 위한 터치보드를 포함할 수 있다. 터치보드는 터치 신호를 입력으로 하여 터치의 정확성을 높이기 위한 다양한 처리를 수행할 수 있다. 제스처 인식 알고리즘은 터치 패널을 통해 수신된 터치 입력이 특정 패턴을 가진 경우 해당 패턴에 대응되는 제스처를 인식할 수 있다.The touch display apparatus may include a touch board for processing touch signals received from the touch panel. The touch board can perform various processes to increase the accuracy of the touch by inputting the touch signal. The gesture recognition algorithm can recognize a gesture corresponding to the pattern when the touch input received through the touch panel has a specific pattern.

한국 등록특허공보 제10-1413649(2014.05.15)호는 다수의 사용자를 위한 터치 테이블 탑 디스플레이장치에 관한 것으로, 더욱 상세하게는 3인 이상이 손으로 터치 또는 도구를 사용하여 터치에 반응하고 가상공간에서가 아닌 실제 디스플레이 보드 위에서 직접적으로 인터랙션하여 오락장에서 할 수 있는 게임을 가정이나 사무실에서도 할 수 있게 제공할 뿐만 아니라 교육, 과학, 의료, 국방의 컨텐츠를 쉽고 재미있게 배울 수 있도록 하는 게임, 실용게임, 비즈니스 게임을 공간에 제한 없이 제공할 수 있다.Korean Patent Registration No. 10-1413649 (Apr. 25, 2015) discloses a touch-table top display device for a plurality of users, and more particularly, to a touch- In addition to providing games that can be played in the entertainment area directly at the home or office by interacting directly on the actual display board instead of in the space, games and practical games , The business game can be provided in an unlimited space.

한국 공개특허공보 제10-2015-0153246(2015.11.02)호는 멀티 터치 패턴을 이용한 유저 인터페이스 메뉴 디스플레이 장치 및 방법에 관한 것으로, 더욱 상세하게는 디스플레이부, 디스플레이부 상의 터치 입력을 인식하는 터치 인식부 및 터치 인식부가 복수개의 터치 입력을 인식하는 경우 복수개의 터치 입력이 미리 정해진 멀티 터치 패턴을 만족하는지 판단하는 제어부를 포함한다.Korean Patent Laid-Open Publication No. 10-2015-0153246 (May 2015.11.02) relates to an apparatus and method for displaying a menu of a user interface using a multi-touch pattern, and more particularly, And a control unit for determining whether the plurality of touch inputs satisfy a predetermined multi-touch pattern when the touch recognition unit recognizes a plurality of touch inputs.

1. 한국 등록특허공보 제10-1413649(2014.05.15)호1. Korean Patent Registration No. 10-1413649 (Apr. 2015) 2. 한국 공개특허공보 제10-2015-0153246(2015.11.02)호2. Korean Patent Publication No. 10-2015-0153246 (Nov.

본 발명의 일 실시예는 터치 패널에 입력된 터치의 변화에 따라 터치 패널의 제어 동작을 수행하는 제스처 인식 기반의 터치 디스플레이 장치를 제공하고자 한다.An embodiment of the present invention is to provide a gesture recognition-based touch display device that performs a control operation of a touch panel according to a change of a touch input to the touch panel.

본 발명의 일 실시예는 터치를 입력하는 중간에 터치 종료 없이도 터치 제어 대상을 선택할 수 있는 제스처 인식 기반의 터치 디스플레이 장치를 제공하고자 한다.An embodiment of the present invention is to provide a gesture recognition-based touch display device capable of selecting a touch control target without touch termination in the middle of inputting a touch.

실시예들 중에서, 제스처 인식 기반의 터치 디스플레이 장치는 터치 패널 및 상기 터치 패널의 특정 터치가 수신되면 상기 특정 터치에 관해 특정 길이의 드래깅 동작과 특정 시간 동안의 멈춤으로 정의되는 제1터치를 감지하고 상기 제1 터치를 구성하는 일부의 터치에 관한 변화로 정의되는 제2 터치를 감지하여 상기 터치 패널의 제어 동작을 수행하는 터치 보드를 포함한다.Among the embodiments, the gesture recognition-based touch display device senses a first touch defined by a dragging operation of a specific length and a pause for a specific time with respect to the specific touch when a specific touch of the touch panel and the touch panel is received And a touch board which performs a control operation of the touch panel by sensing a second touch defined as a change with respect to a touch constituting the first touch.

상기 터치 보드는 상기 터치 패널의 일부 영역을 포함하는 특정 영역에서의 터치를 상기 특정 터치로 수신할 수 있다.The touch board can receive a touch in a specific area including a part of the touch panel by the specific touch.

상기 터치 보드는 상기 터치 패널에 터치 패널 제어 진입 컨트롤을 제공하여 상기 제2 터치를 기초로 상기 터치 패널의 제어 동작을 수행할 수 있다.The touch panel may provide touch panel control access control to the touch panel to perform a control operation of the touch panel based on the second touch.

상기 터치 보드는 상기 특정 터치에 관해 상기 드래깅 동작과 상기 멈춤이 시계열적인 연속성을 가지고 있는 경우에 상기 터치 패널에 상기 터치 패널 제어 진입 컨트롤을 제공할 수 있다.The touch board can provide the touch panel control entry control to the touch panel when the dragging operation and the stop have a time series continuity with respect to the specific touch.

상기 터치 보드는 상기 제1 터치의 터치 개수, 터치 이동속도, 터치 면적 및 터치멈춤 시간 중 적어도 하나의 변화를 제2 터치로 감지할 수 있다.The touch board may sense a change in at least one of a touch number of the first touch, a touch movement speed, a touch area, and a touch stop time with a second touch.

상기 터치 보드는 상기 제1 터치의 터치 개수, 터치 이동속도, 터치 면적 및 터치멈춤 시간 중 적어도 하나의 시계열적으로 연속된 변화 패턴을 제2 터치로 감지할 수 있다.The touch board may sense at least one of the number of touches of the first touch, the touch movement speed, the touch area, and the touch stop time with a second touch in a time series.

상기 터치 보드는 상기 제2 터치에 따라 제어 대상을 결정하고, 상기 터치 패널로부터의 터치를 상기 제어 대상으로만 전달할 수 있다.The touch board may determine an object to be controlled according to the second touch, and may transmit a touch from the touch panel only to the object to be controlled.

상기 터치 보드는 상기 제1 터치가 감지된 이후 특정 시간 이내에 제2 터치가 감지된 경우에만 제어 대상을 결정할 수 있다.The touch board can determine the object to be controlled only when the second touch is detected within a predetermined time after the first touch is sensed.

개시된 기술은 다음의 효과를 가질 수 있다. 다만, 특정 실시예가 다음의 효과를 전부 포함하여야 한다거나 다음의 효과만을 포함하여야 한다는 의미는 아니므로, 개시된 기술의 권리범위는 이에 의하여 제한되는 것으로 이해되어서는 아니 될 것이다.The disclosed technique may have the following effects. It is to be understood, however, that the scope of the disclosed technology is not to be construed as limited thereby, as it is not meant to imply that a particular embodiment should include all of the following effects or only the following effects.

본 발명의 일 실시예에 따른 제스처 인식 기반의 터치 디스플레이 장치는 터치 패널에 입력된 터치의 변화에 따라 터치 패널의 제어 동작을 수행할 수 있다.The gesture recognition-based touch display device according to an embodiment of the present invention can perform a control operation of the touch panel according to a change of a touch input to the touch panel.

본 발명의 일 실시예에 따른 제스처 인식 기반의 터치 디스플레이 장치는 터치를 입력하는 중간에 터치 종료 없이도 터치 제어 대상을 선택할 수 있다.The gesture recognition-based touch display device according to an embodiment of the present invention can select a touch control object without touch ending in the middle of inputting a touch.

도 1은 본 발명의 일 실시예에 따른 제스처 인식 기반의 터치 디스플레이 장치를 설명하는 도면이다.
도 2는 도 1에 있는 터치 보드를 설명하는 도면이다.
도 3은 본 발명의 일 실시예에 따른 제스처 인식 기반의 터치 디스플레이 장치에서 수행되는 터치 패널의 제어 동작 과정을 설명하는 순서도이다.
도 4는 본 발명의 일 실시예에 따른 제스처 인식 기반의 터치 디스플레이 장치에서 수행되는 다중 컨트롤 동작을 설명하는 예시도이다.1 is a view for explaining a gesture recognition based touch display apparatus according to an embodiment of the present invention.
FIG. 2 is a view for explaining the touch board shown in FIG. 1. FIG.
3 is a flowchart illustrating a control operation of a touch panel performed in a gesture recognition-based touch display apparatus according to an exemplary embodiment of the present invention.
FIG. 4 is a diagram illustrating an example of multiple control operations performed in a gesture recognition-based touch display device according to an exemplary embodiment of the present invention.

본 발명에 관한 설명은 구조적 내지 기능적 설명을 위한 실시예에 불과하므로, 본 발명의 권리범위는 본문에 설명된 실시예에 의하여 제한되는 것으로 해석되어서는 아니 된다. 즉, 실시예는 다양한 변경이 가능하고 여러 가지 형태를 가질 수 있으므로 본 발명의 권리범위는 기술적 사상을 실현할 수 있는 균등물들을 포함하는 것으로 이해되어야 한다. 또한, 본 발명에서 제시된 목적 또는 효과는 특정 실시예가 이를 전부 포함하여야 한다거나 그러한 효과만을 포함하여야 한다는 의미는 아니므로, 본 발명의 권리범위는 이에 의하여 제한되는 것으로 이해되어서는 아니 될 것이다.The description of the present invention is merely an example for structural or functional explanation, and the scope of the present invention should not be construed as being limited by the embodiments described in the text. That is, the embodiments are to be construed as being variously embodied and having various forms, so that the scope of the present invention should be understood to include equivalents capable of realizing technical ideas. Also, the purpose or effect of the present invention should not be construed as limiting the scope of the present invention, since it does not mean that a specific embodiment should include all or only such effect.

한편, 본 출원에서 서술되는 용어의 의미는 다음과 같이 이해되어야 할 것이다.Meanwhile, the meaning of the terms described in the present application should be understood as follows.

"제1", "제2" 등의 용어는 하나의 구성요소를 다른 구성요소로부터 구별하기 위한 것으로, 이들 용어들에 의해 권리범위가 한정되어서는 아니 된다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.The terms "first "," second ", and the like are intended to distinguish one element from another, and the scope of the right should not be limited by these terms. For example, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component.

어떤 구성요소가 다른 구성요소에 "연결되어"있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결될 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어"있다고 언급된 때에는 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 한편, 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.It is to be understood that when an element is referred to as being "connected" to another element, it may be directly connected to the other element, but there may be other elements in between. On the other hand, when an element is referred to as being "directly connected" to another element, it should be understood that there are no other elements in between. On the other hand, other expressions that describe the relationship between components, such as "between" and "between" or "neighboring to" and "directly adjacent to" should be interpreted as well.

단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함하는 것으로 이해되어야 하고, "포함하다"또는 "가지다" 등의 용어는 실시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.It is to be understood that the singular " include " or "have" are to be construed as including the stated feature, number, step, operation, It is to be understood that the combination is intended to specify that it does not preclude the presence or addition of one or more other features, integers, steps, operations, elements, components, or combinations thereof.

각 단계들에 있어 식별부호(예를 들어, a, b, c 등)는 설명의 편의를 위하여 사용되는 것으로 식별부호는 각 단계들의 순서를 설명하는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 일어날 수 있다. 즉, 각 단계들은 명기된 순서와 동일하게 일어날 수도 있고 실질적으로 동시에 수행될 수도 있으며 반대의 순서대로 수행될 수도 있다.In each step, the identification code (e.g., a, b, c, etc.) is used for convenience of explanation, the identification code does not describe the order of each step, Unless otherwise stated, it may occur differently from the stated order. That is, each step may occur in the same order as described, may be performed substantially concurrently, or may be performed in reverse order.

본 발명은 컴퓨터가 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현될 수 있고, 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있다.The present invention can be embodied as computer-readable code on a computer-readable recording medium, and the computer-readable recording medium includes all kinds of recording devices for storing data that can be read by a computer system . Examples of the computer-readable recording medium include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage, and the like.

여기서 사용되는 모든 용어들은 다르게 정의되지 않는 한, 본 발명이 속하는 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한 이상적이거나 과도하게 형식적인 의미를 지니는 것으로 해석될 수 없다.All terms used herein have the same meaning as commonly understood by one of ordinary skill in the art to which this invention belongs, unless otherwise defined. Commonly used predefined terms should be interpreted to be consistent with the meanings in the context of the related art and can not be interpreted as having ideal or overly formal meaning unless explicitly defined in the present application.

도 1은 본 발명의 일 실시예에 따른 제스처 인식 기반의 터치 디스플레이 장치를 설명하는 도면이다.1 is a view for explaining a gesture recognition based touch display apparatus according to an embodiment of the present invention.

도 1을 참조하면, 제스처 인식 기반의 터치 디스플레이 장치(100)(이하, 터치 디스플레이 장치라 한다.)는 터치 패널(110), 터치 보드(130) 및 디스플레이부(150)를 포함한다.1, the gesture recognition-based touch display device 100 includes a touch panel 110, a touch board 130, and a display unit 150.

터치 패널(110)은 터치를 감지하기 위한 것으로 CRT나 LCD 등과 결합하여 문장이나 그림 등이 표시되어 있는 장소를 직접 누름으로써 기기를 제어할 수 있는 투명한 패널에 해당한다. 터치 패널(110)은 적외선을 사용한 광학식, 투명 도전막의 접점을 사용하는 투명전극식, 정전용량의 변화를 검출하는 정전용량식 및 패널 주변에 배치한 압력센서에 대한 힘의 배분으로부터 위치를 감지하는 방식 등을 포함할 수 있다.The touch panel 110 corresponds to a transparent panel capable of controlling a device by directly pressing a place where a sentence or a picture is displayed by combining with a CRT or an LCD to detect a touch. The touch panel 110 is a transparent electrode type using an optical or transparent conductive film using infrared rays, a capacitive type detecting a change in capacitance, and a pressure sensor for detecting a position from a distribution of force to a pressure sensor disposed around the panel Method, and the like.

터치 패널(110)은 터치가 입력되면 터치데이터를 수신하여 터치 보드(130)에 전송할 수 있다. 터치 패널(110)은 터치데이터를 수신하는 컨트롤 보드를 포함하여 구현될 수 있고, 컨트롤 보드와 독립적으로 구현될 수 있으며 터치 보드(130)와 연결되어 터치데이터를 송수신할 수 있다.The touch panel 110 receives touch data and transmits the touch data to the touch board 130. The touch panel 110 may include a control board for receiving touch data, may be implemented independently of the control board, and may be connected to the touch board 130 to transmit and receive touch data.

터치 보드(130)는 터치 패널(110)로부터 수신한 터치데이터를 처리하여 가공된 결과를 OS나 디스플레이 장치로 송신하는 장치에 해당할 수 있다. 터치 보드(130)는 터치 패널(110)로부터 수신한 터치데이터를 이용하여 보간 알고리즘에 의한 데이터 보간을 수행하거나 또는 연결된 OS의 종류에 따라 터치데이터를 가공하여 전송할 수 있다.The touch board 130 may correspond to a device that processes touch data received from the touch panel 110 and transmits the processed result to an OS or a display device. The touch board 130 may interpolate data using an interpolation algorithm using the touch data received from the touch panel 110, or may process the touch data according to the type of the connected OS.

터치 보드(130)는 전원 관리 유닛(PMU, Power Management Unit), 마이크로 컨트롤러 유닛(MCU, Micro Controller Unit)를 포함하여 구현될 수 있고, 독립적으로 구현될 수 있으며, 독립적으로 구현되는 경우 터치 센서 모듈, 로직 모듈 및 DSP(Digital Signal Processor)를 포함할 수 있다.The touch board 130 may be implemented by including a power management unit (PMU), a microcontroller unit (MCU), and the like. The touch board 130 may be implemented independently, , A logic module, and a digital signal processor (DSP).

디스플레이부(150)는 CRT 및 LCD 등을 포함하는 디스플레이 장치로 구현될 수 있고, 터치 패널(110)을 포함하여 구현될 수 있다. 일 실시예에서, 디스플레이부(150)는 볼륨 장치를 더 포함하여 구현될 수 있다. 디스플레이부(150)는 터치 보드(130)와 연결되어 데이터를 송수신할 수 있다.The display unit 150 may be implemented as a display device including a CRT, an LCD, or the like, and may include a touch panel 110. In one embodiment, the display unit 150 may be implemented further including a volume device. The display unit 150 is connected to the touch board 130 to transmit and receive data.

도 2는 도 1에 있는 터치 보드를 설명하는 도면이다.FIG. 2 is a view for explaining the touch board shown in FIG. 1. FIG.

도 2를 참조하면, 터치 보드(130)는 터치 수신부(210), 제1 터치 감지부(230), 제2 터치 감지부(250), 제어 동작부(270) 및 제어부(290)를 포함할 수 있다.2, the touch board 130 includes a touch receiving unit 210, a first touch sensing unit 230, a second touch sensing unit 250, a control operation unit 270, and a control unit 290 .

터치 수신부(210)는 터치 패널(110)로부터 터치데이터를 수신할 수 있다. 여기에서, 터치데이터는 터치 패널(110) 상에서 터치가 입력된 지점의 좌표데이터 및 터치가 입력된 시점데이터 등을 포함할 수 있고, 반드시 이에 한정되지 않고, 터치 처리와 관련하여 필요한 다양한 형태의 데이터를 포함할 수 있다.The touch receiving unit 210 can receive touch data from the touch panel 110. [ Here, the touch data may include coordinate data of a point at which a touch is input on the touch panel 110, point-in-time data in which a touch is input, and the like, and the present invention is not limited thereto. Various types of data . ≪ / RTI >

일 실시예에서, 터치 수신부(210)는 터치 패널(110)로부터 특정 터치를 수신할 수 있다. 특정 터치는 적어도 하나의 터치를 포함할 수 있고, 복수의 시계열적으로 연속된 터치들을 포함할 수 있다. 터치 수신부(210)는 터치 패널(110)로부터 특정 터치에 관한 터치데이터를 수신할 수 있다.In one embodiment, the touch receiving unit 210 may receive a specific touch from the touch panel 110. [ A particular touch may include at least one touch, and may include a plurality of time series contiguous touches. The touch receiving unit 210 can receive touch data relating to a specific touch from the touch panel 110. [

일 실시예에서, 터치 수신부(210)는 터치 패널(110)의 일부 영역을 포함하는 특정 영역에서의 터치를 특정 터치로 수신할 수 있다. 예를 들어, 터치 수신부(210)는 터치 패널(110)을 패널의 중심 위치를 기준으로 양분하여 왼쪽과 오른쪽 또는 위쪽과 아래쪽 부분패널로 나눈 경우 오른쪽 또는 위쪽 부분패널에서의 터치만을 특정 터치로 수신할 수 있다. 터치 수신부(210)는 왼쪽 또는 아래쪽 부분패널에서의 터치에 대해 유효한 터치가 발생하지 않은 것으로 처리할 수 있다.In one embodiment, the touch receiving unit 210 can receive a touch in a specific area including a partial area of the touch panel 110 with a specific touch. For example, when the touch panel 110 is divided into left and right or upper and lower partial panels by dividing the touch panel 110 based on the center position of the panel, only the touches on the right or upper partial panel are received can do. The touch receiving unit 210 can treat the touch in the left or lower partial panel as not having generated a valid touch.

일 실시예에서, 터치 수신부(210)는 터치 패널(110) 상에서 복수의 연속된 터치가 터치 패널(110)의 특정 영역으로부터 특정 영역 밖으로 이동하는 경우 유효한 터치가 발생하지 않은 것으로 처리할 수 있다. 다른 실시예에서는, 터치 수신부(210)는 터치 패널(110) 상에서 복수의 연속된 터치가 터치 패널(110)의 특정 영역으로부터 특정 영역 밖으로 이동하는 경우 복수의 연속된 터치의 이동경로와 특정 영역의 경계가 만나는 지점까지의 터치만을 유효한 터치로 처리할 수 있다.In one embodiment, when the plurality of consecutive touches on the touch panel 110 move out of a specific area of the touch panel 110, the touch receiving unit 210 may treat the touch as not having a valid touch. In another embodiment, when a plurality of consecutive taps on the touch panel 110 are moved out of a specific area of the touch panel 110, Only the touch up to the point where the boundary meets can be processed with a valid touch.

제1 터치 감지부(230)는 터치 수신부(210)에 의해 수신된 터치데이터를 기초로 제1 터치를 감지할 수 있다. 여기에서, 제1 터치는 특정 길이의 드래깅 동작과 특정 시간 동안의 멈춤 동작을 포함하는 터치에 해당할 수 있다. 제1 터치는, 반드시 이에 한정되지 않고, 다른 터치들과 구분할 수 있는 독립적인 터치들 및 이들의 결합으로 구성될 수 있다.The first touch sensing unit 230 may sense the first touch based on the touch data received by the touch receiving unit 210. [ Here, the first touch may correspond to a touch including a drag operation of a certain length and a stop operation for a specific time. The first touch is not necessarily limited to this, and may be composed of independent touches that can be distinguished from other touches and a combination thereof.

보다 구체적으로, 제1 터치는 사전에 정의된 특정 터치 패턴에 해당할 수 있다. 예를 들어, 제1 터치는 5개의 손가락 터치가 시작된 후 5개의 손가락 터치가 제1 터치지점에서 제2 터치지점으로 상하 또는 좌우 방향으로 수평 이동하면서 드래깅하는 동작과 특정 시간 동안의 멈춤 동작을 포함하는 터치로 정의될 수 있다. 제1 터치 감지부(230)는 5개의 손가락 터치가 아닌 경우 또는 드래깅 동작 이후 멈춤 동작 없이 터치가 종료되는 경우를 포함하여 미리 정의된 특정 터치 패턴에 해당되지 않는 터치는 제1 터치로 감지할 수 없다.More specifically, the first touch may correspond to a predefined specific touch pattern. For example, the first touch includes an operation of dragging while the five-finger touch moves from the first touch point to the second touch point horizontally or vertically, and a stopping operation for a specific time after the five-finger touch is started As shown in Fig. The first touch sensing unit 230 can detect a touch that does not correspond to a specific touch pattern defined in advance including a case where the touch is terminated without a five-finger touch or a stop operation after the dragging operation none.

제2 터치 감지부(250)는 터치 수신부(210)에 의해 수신된 터치데이터를 기초로 제2 터치를 감지할 수 있다. 여기에서, 제2 터치는 제1 터치를 구성하는 일부의 터치가 변화된 경우에 해당할 수 있다. 제2 터치는, 반드시 이에 한정되지 않고, 제1 터치에서 터치가 종료되지 않은 상태에서 터치를 구성하는 일부의 터치가 변화된 경우를 포함할 수 있다.The second touch sensing unit 250 may sense the second touch based on the touch data received by the touch receiving unit 210. [ Here, the second touch may correspond to a case where a part of the touches constituting the first touch is changed. The second touch is not necessarily limited to this, and may include a case where a part of the touches constituting the touch is changed in a state in which the touch is not terminated in the first touch.

예를 들어, 제1 터치가 5개의 터치로 이루어진 경우 제2 터치는 5개의 터치 중 1개의 터치가 종료되어 4개의 터치로 변화된 경우에 해당할 수 있다. 제1 터치가 좌에서 우로 이동하는 터치인 경우 제2 터치는 터치의 이동방향이 수평방향에서 수직방향으로 변화하는 경우에 해당할 수 있다. 제1 터치에서 제2 터치로의 변화는 터치가 계속되고 있는 중간에 터치의 일부만이 변화하는 경우를 의미할 수 있다.For example, when the first touch is made up of five touches, the second touch may correspond to a case where one of the five touches is ended and changed into four touches. If the first touch is a touch moving from left to right, the second touch may correspond to a case where the movement direction of the touch changes from a horizontal direction to a vertical direction. The change from the first touch to the second touch may mean a case where only a part of the touch changes in the middle of the touch.

일 실시예에서, 제2 터치 감지부(250)는 제1 터치의 터치 개수, 터치 이동속도, 터치 면적 및 터치멈춤 시간 중 적어도 하나의 변화를 제2 터치로 감지할 수 있다.In an embodiment, the second touch sensing unit 250 may sense a change in at least one of a touch number of the first touch, a touch movement speed, a touch area, and a touch stop time with a second touch.

예를 들어, 제2 터치는 제1 터치가 계속되는 중간에 터치의 개수가 증가하거나 감소하는 경우에 해당할 수 있다. 제2 터치는 제1 터치가 계속되는 중간에 터치의 이동속도가 증가하거나 감소하는 경우에 해당할 수 있다. 제2 터치는 제1 터치가 계속되는 중간에 터치의 터치면적이 증가하거나 감소하는 경우에 해당할 수 있다. 제2 터치는 제1 터치가 계속되는 중간에 터치의 멈춤시간이 증가하거나 감소하는 경우에 해당할 수 있다. 제2 터치는 제1 터치가 계속되는 중간에 터치의 개수, 이동속도, 면적 및 멈춤 시간 중 적어도 하나의 변화를 포함할 수 있다.For example, the second touch may correspond to a case where the number of touches increases or decreases while the first touch continues. The second touch may correspond to a case where the movement speed of the touch increases or decreases in the middle of the first touch. The second touch may correspond to a case where the touch area of the touch increases or decreases in the middle of the first touch. The second touch may correspond to a case where the stopping time of the touch increases or decreases in the middle of continuing the first touch. The second touch may include a change in at least one of the number of touches, the movement speed, the area, and the stop time in the middle of continuing the first touch.

일 실시예에서, 제2 터치 감지부(250)는 제1 터치의 터치 개수, 터치 이동속도, 터치 면적 및 터치멈춤 시간 중 적어도 하나의 시계열적으로 연속된 변화를 제2 터치로 감지할 수 있다. 보다 구체적으로, 제2 터치는 제1 터치가 계속되는 중간에 터치의 개수가 변하고, 터치의 개수가 변한 다음에 터치의 면적, 이동속도, 멈춤시간이 시계열적으로 연속하여 변하는 경우를 포함할 수 있다.In one embodiment, the second touch sensing unit 250 may sense at least one of the number of touches of the first touch, the touch movement speed, the touch area, and the touch stop time in a time series, as a second touch . More specifically, the second touch may include a case where the number of touches changes while the first touch continues, the area of the touch, the movement speed, and the stop time change continuously in a time series after the number of touches changes .

제2 터치 감지부(250)는 제1 터치의 개수, 이동속도, 면적 및 멈춤 시간 중 적어도 하나가 동시에 변하는 경우를 제2 터치로 감지할 수 있고, 시계열적 순서에 따라 하나씩 변하는 경우를 제2 터치로 감지할 수 있다.The second touch sensing unit 250 can sense at least one of the number of first touches, the movement speed, the area, and the stop time at the same time with the second touch, Touch can be detected.

터치 보드(130)는 제1 터치 및 제2 터치를 터치 패턴 정보로서 미리 설정하여 저장할 수 있다. 제1 터치 감지부(230)는 터치 보드(130)에 미리 설정된 제1 터치 정보를 기초로 제1 터치를 감지할 수 있다. 제2 터치 감지부(250)는 터치 보드(130)에 미리 설정된 제2 터치 정보를 기초로 제1 터치의 변화를 감지하여 제2 터치를 감지할 수 있다.The touch board 130 may preset and store the first touch and the second touch as the touch pattern information. The first touch sensing unit 230 may sense the first touch based on the first touch information previously set on the touch board 130. [ The second touch sensing unit 250 may sense the second touch by sensing the change of the first touch based on the second touch information set in the touch board 130 in advance.

제어 동작부(270)는 제2 터치 감지부(250)에 의해 제2 터치가 감지된 경우 터치 패널(110)의 제어 동작을 수행할 수 있다. 여기에서, 제어 동작은 터치 패널(110)의 동작을 제어하는 것을 포함할 수 있고, 터치 패널(110)이 포함되어 구현된 디스플레이부(150)의 동작을 제어하는 것을 포함할 수 있다.The control operation unit 270 may perform a control operation of the touch panel 110 when the second touch is sensed by the second touch sensing unit 250. [ Here, the control operation may include controlling the operation of the touch panel 110, and may include controlling the operation of the display unit 150 implemented by including the touch panel 110.

예를 들어, 터치 패널(110)의 제어 동작은 터치 패널(110) 또는 디스플레이부(150)의 밝기 및 명암 등의 특성을 조절하는 것을 포함할 수 있고, 터치 패널(110)이 포함된 디스플레이부(150)가 볼륨 장치(미도시)를 포함하여 구현된 경우 볼륨을 조절하는 것을 포함할 수 있다. For example, the control operation of the touch panel 110 may include adjusting the brightness, contrast, and other characteristics of the touch panel 110 or the display unit 150, And adjusting the volume if the controller 150 is implemented including a volume device (not shown).

터치 패널(110)의 제어 동작은 터치 패널(110)을 통해 입력한 터치데이터를 최종적으로 전달할 대상을 선택하는 것을 포함할 수 있다. 터치 보드(130)는 터치데이터를 가공 및 처리하여 디스플레이 장치 또는 OS로 전달할 수 있다.The control operation of the touch panel 110 may include selecting an object to which the touch data input through the touch panel 110 is to be finally transmitted. The touch board 130 may process and process the touch data and transmit it to the display device or the OS.

일 실시예에서, 제어 동작부(270)는 제2 터치에 따라 제어 대상을 결정하고, 터치 패널(110)로부터의 터치데이터를 제어 대상으로만 전달할 수 있다. 보다 구체적으로, 제어 동작부(270)는 제2 터치 감지부(250)에 의해 감지된 제2 터치에 따라 제어 대상이 결정되면, 제어가 종료될 때까지 터치데이터를 제어 대상으로만 전달하여 제어 대상에 대한 제어 동작을 수행할 수 있다.In one embodiment, the control operation unit 270 may determine an object to be controlled according to the second touch, and may transmit the touch data from the touch panel 110 only to a control object. More specifically, when the control object is determined according to the second touch sensed by the second touch sensing unit 250, the control operation unit 270 transmits the touch data only to the control object until the control is terminated, It is possible to perform a control operation on the object.

일 실시예에서, 동작 제어부(270)는 제1 터치가 감지된 이후 특정 시간 이내에 제2 터치가 감지된 경우에만 제어 대상을 결정할 수 있다. 제1 터치가 감지된 경우라도 일정 시간 이내에 제2 터치에 해당하는 터치가 감지되지 않는 경우에는 터치 보드(130)는 제1 터치에 대한 감지를 초기화시킬 수 있다.In one embodiment, the operation control unit 270 can determine the control target only when the second touch is detected within a specific time after the first touch is detected. If a touch corresponding to the second touch is not detected within a predetermined time even when the first touch is detected, the touch board 130 can initialize the detection of the first touch.

예를 들어, 터치 패널(110) 상에서 터치에 관해 특정 방향으로의 드래깅 동작과 일정 시간 동안의 멈춤이 있으면 제1 터치 감지부(230)는 제1 터치를 감지할 수 있다. 제1 터치 감지부(230)에 의해 제1 터치가 감지된 이후 일정 시간동안 제1 터치에 관해 변화가 없거나 제1 터치가 종료되면 터치 보드(130)는 제1 터치에 대한 감지 상태를 초기화할 수 있다. 터치 보드(130)에 의해 제1 터치에 대한 감지 상태가 초기화되면 제1 터치가 계속 되고 있더라도 제2 터치 감지부(250)는 제2 터치를 감지할 수 없는 상태가 된다.For example, when there is a dragging operation in a specific direction and a pause for a predetermined time on the touch panel 110, the first touch sensing unit 230 can sense the first touch. If there is no change in the first touch or a first touch is terminated for a predetermined time after the first touch is sensed by the first touch sensing unit 230, the touch board 130 initializes the sensing state for the first touch . If the sensing state of the first touch is initialized by the touch board 130, the second touch sensing unit 250 can not detect the second touch even though the first touch continues.

제어부(290)는 터치 보드(130)의 전체적인 동작을 제어하고, 터치 수신부(210), 제1 터치 감지부(230), 제2 터치 감지부(250) 및 제어 동작부(270) 간의 제어 흐름 또는 데이터 흐름을 관리할 수 있다.The control unit 290 controls the overall operation of the touch board 130 and controls the operation of the touch panel 130 based on the control flow between the touch receiving unit 210, the first touch sensing unit 230, the second touch sensing unit 250, Or manage data flow.

도 3은 본 발명의 일 실시예에 따른 제스처 인식 기반의 터치 디스플레이 장치에서 수행되는 터치 패널의 제어 동작 과정을 설명하는 순서도이다.3 is a flowchart illustrating a control operation of a touch panel performed in a gesture recognition-based touch display apparatus according to an exemplary embodiment of the present invention.

도 3을 참조하면, 터치 보드(130)는 터치 수신부(210)를 통해 터치 패널(110)로부터 터치데이터를 수신할 수 있다(단계 S310). 터치 보드(130)는 제1 터치 감지부(230)를 통해 터치에 관한 특정 길이의 드래깅 동작과 특정 시간 동안의 멈춤으로 정의되는 제1 터치를 감지할 수 있다(단계 S330).Referring to FIG. 3, the touch board 130 may receive touch data from the touch panel 110 through the touch receiving unit 210 (step S310). The touch board 130 can sense a dragging operation of a specific length and a first touch defined as a pause for a specific time through the first touch sensing unit 230 (step S330).

일 실시예에서, 제1 터치 감지부(230)는 터치 수신부(210)에 의해 수신된 터치데이터를 기초로 특정 길이의 드래깅 동작과 특정 시간 동안의 멈춤 동작을 포함하는 제1 터치를 감지할 수 있다.In one embodiment, the first touch sensing unit 230 can sense a first touch including a dragging operation of a specific length and a stopping operation for a specific time based on the touch data received by the touch receiving unit 210 have.

일 실시예에서, 제1 터치 감지부(230)는 터치 수신부(210)에 의해 수신된 터치데이터를 기초로 특정 길이의 드래깅 동작과 다음 수학식1에 의해 산출된 특정 시간 동안의 멈춤 동작이 시계열적으로 연속된 경우를 제1 터치로서 감지할 수 있다.In one embodiment, the first touch sensing unit 230 determines whether the dragging operation of a specific length and the stopping operation for a specific time calculated by the following Equation 1 are based on the touch data received by the touch receiving unit 210 And the case where the thermal continuity is sensed as the first touch.

[수학식1][Equation 1]

Figure pat00001
Figure pat00001

여기에서, S는 터치멈춤 동작이 지속된 특정 시간을, k는 비례 계수를, δ는 터치 패널의 반응 계수를, Δn/Δt는 터치 입력률을, L은 터치 지속시간을 의미한다.Here, S denotes a specific time at which the touch-stop operation is continued, k denotes a proportional coefficient,? Denotes a reaction coefficient of the touch panel,? N /? T denotes a touch input rate, and L denotes a touch duration.

제1 터치 감지부(230)에 의해 제1 터치로 감지되기 위해 필요한 터치멈춤 동작의 지속시간(S)은 제1 터치 감지부(230)에 의해 자동으로 산출될 수 있다. 터치멈춤 동작의 지속시간(S)은 터치 패널(110)의 반응 계수(δ)의 제곱에 비례할 수 있다. 터치 패널(110)의 반응 속도가 느린 경우에는 의도하지 않더라도 반응 시간에 의한 지연으로 인해 일정 시간 멈춤동작으로 인식될 가능성이 존재하므로 제1 터치 감지에 필요한 멈춤동작 지속시간을 증가시켜 명확한 의도를 가진 터치만을 제1 터치로 감지할 수 있다.The duration S of the touch stop operation required for the first touch sensing unit 230 to be sensed as the first touch may be automatically calculated by the first touch sensing unit 230. [ The duration S of the touch-stop operation may be proportional to the square of the response coefficient? Of the touch panel 110. [ If the reaction speed of the touch panel 110 is slow, there is a possibility that the touch panel 110 may be recognized as a stopping operation for a predetermined time due to the delay due to the reaction time. If the reaction speed of the touch panel 110 is slow, Only the touch can be detected by the first touch.

터치멈춤 동작의 지속시간(S)은 터치 입력률(Δn/Δt)에 비례할 수 있다. 특정 시간(Δt )동안 터치 입력수(Δn)가 많으면 다음 터치가 입력될 확률이 높으므로 터치멈춤 동작의 지속시간(S)을 증가시켜 명확한 의도를 가진 터치만을 제1 터치로 감지할 수 있다.The duration S of the touch-stop operation may be proportional to the touch input rate? N /? T. If the number of touch inputs? N is large during a specific time? T, the probability that the next touch will be inputted is high, so that the duration S of the touch stop operation can be increased so that only the touch with a clear intention can be detected with the first touch.

터치멈춤 동작의 지속시간(S)은 터치 지속시간에 비례할 수 있다. 터치가 최초 시작된 시점부터 오래 지속된 경우일수록 다음 터치도 계속해서 입력될 확률이 높으므로 터치멈춤 동작의 지속시간(S)을 증가시켜 명확한 의도를 가진 터치만을 제1 터치로 감지할 수 있다.The duration (S) of the touch-stop operation can be proportional to the duration of the touch. Since the probability that the next touch will continue to be input is higher as the touch is first started, the duration S of the touch-stop operation is increased so that only the touch having a clear intention can be detected with the first touch.

일 실시예에서, 터치 보드(130)는 터치 패널(110)에 터치 패널 제어 진입 컨트롤을 제공하여 제2 터치를 기초로 터치 패널(110)의 제어 동작을 수행할 수 있다. 여기에서, 터치 패널 제어 진입 컨트롤은 디스플레이 장치에 표시되는 터치 메뉴에 해당할 수 있다. 제1 터치 감지부(230)에 의해 제1 터치가 감지되면 터치 보드(130)는 디스플레이부(150)를 통해 제어 대상를 선택할 수 있는 메뉴를 표시할 수 있다.In one embodiment, the touch board 130 may provide touch panel control entry control to the touch panel 110 to perform a control operation of the touch panel 110 based on the second touch. Here, the touch panel control entry control may correspond to a touch menu displayed on the display device. When the first touch is sensed by the first touch sensing unit 230, the touch board 130 may display a menu through which the control object can be selected through the display unit 150. [

터치 메뉴는 제1 터치가 계속되는 중간에 특정 터치 패턴을 입력하여 제2 터치를 감지하도록 함으로써 원하는 메뉴가 실행되도록 하는 터치 매뉴얼을 포함할 수 있다. 터치 매뉴얼은 특정 터치가 입력되면 해당 터치와 연관된 메뉴가 실행될 수 있다는 내용을 담고 있는 터치 메뉴에 해당할 수 있다.The touch menu may include a touch manual for causing a desired menu to be executed by allowing a specific touch pattern to be inputted in the middle of the first touch to detect the second touch. The touch manual may correspond to a touch menu that indicates that a menu associated with the touch can be executed when a specific touch is input.

일 실시예에서, 터치 보드(130)는 제1 터치에 관해 드래깅 동작과 멈춤이 시계열적인 연속성을 가지고 있는 경우에 터치 패널(110)에 터치 패널 제어 진입 컨트롤을 제공할 수 있다. 보다 구체적으로, 터치 보드(130)는 제1 터치에 관한 드래깅 동작과 멈춤 동작이 특정 시간 간격을 두고 입력되는 것이 아니라 드래깅 동작 다음에 곧바로 멈춤 동작이 이어지는 경우에만 터치 패널(110)에 터치 패널 제어 진입 컨트롤을 제공할 수 있다.In one embodiment, the touch board 130 may provide touch panel control access control to the touch panel 110 when the dragging operation and the pause on the first touch have a time series continuity. More specifically, the touch board 130 does not input a dragging operation and a stopping operation with respect to the first touch at a specific time interval, but only when the touch panel 110 receives a touch panel control You can provide entry control.

터치 보드(130)는 제2 터치 감지부(250)를 통해 제1 터치를 구성하는 일부의 터치에 관한 변화로 정의되는 제2 터치를 감지할 수 있다(단계 S350). 제2 터치는 제1 터치가 입력되는 중간에 제1 터치를 구성하는 일부의 터치가 변화하는 경우에 해당하므로, 제2 터치 감지부(250)는 제1 터치가 종료된 이후에는 제2 터치를 감지할 수 없다.The touch board 130 may sense a second touch defined as a change with respect to a part of the touches constituting the first touch through the second touch sensing unit 250 (step S350). Since the second touch corresponds to a case where a part of the touches constituting the first touch is changed in the middle of inputting the first touch, the second touch sensing unit 250 receives the second touch after the first touch ends I can not detect it.

터치 보드(130)는 동작 제어부(270)를 통해 터치 패널(110)의 제어 동작을 수행할 수 있다(단계 S370). 일 실시예에서, 터치 보드(130)는 동작 제어부(270)를 통해 제어 대상으로 결정된 장치로만 터치데이터를 전달함으로써 제어 동작을 수행할 수 있다.The touch board 130 may perform a control operation of the touch panel 110 through the operation control unit 270 (step S370). In one embodiment, the touch board 130 may perform a control operation by transmitting touch data only to a device determined as an object of control through the operation control unit 270. [

일 실시예에서, 동작 제어부(270)는 제1 터치가 감지된 이후 특정 시간 이내에 제2 터치가 감지된 경우에만 제어 대상을 결정할 수 있다. 제1 터치가 감지된 경우라도 일정 시간 이내에 제2 터치에 해당하는 터치가 감지되지 않는 경우에는 터치 보드(130)는 제1 터치에 대한 감지를 초기화시킬 수 있다.In one embodiment, the operation control unit 270 can determine the control target only when the second touch is detected within a specific time after the first touch is detected. If a touch corresponding to the second touch is not detected within a predetermined time even when the first touch is detected, the touch board 130 can initialize the detection of the first touch.

일 실시예에서, 동작 제어부(270)는 제1 터치가 감지된 이후 다음 수학식2을 통해 산출된 특정 시간 이내에 제2 터치가 감지된 경우에만 제어 대상을 결정할 수 있다.In one embodiment, the operation control unit 270 can determine an object to be controlled only when a second touch is detected within a specific time calculated through the following Equation 2 after the first touch is sensed.

[수학식2]&Quot; (2) "

Figure pat00002
Figure pat00002

여기에서, T는 특정 시간을, k는 계수를, N은 터치 개수를, F는 터치 압력을, L은 터치가 지속된 시간을, W는 터치 패널의 면적을 의미한다. Here, T denotes a specific time, k denotes a coefficient, N denotes the number of touches, F denotes a touch pressure, L denotes a time duration of the touch, and W denotes an area of the touch panel.

특정 시간은 터치 패널의 면적의 ln값에 반비례할 수 있다. 특정 시간은 터치 개수, 터치 압력 및 터치 지속시간에 비례할 수 있다. 터치 압력은 터치 패널에 가해지는 힘의 세기를 의미하고, 터치 지속시간은 터치가 시작된 시점부터 터치가 계속되어 경과된 시간을 의미한다. 터치 패널의 면적이 넓을수록 터치 패널에 사용되는 전력량이 증가하므로 제2 터치를 감지하기 위해 대기하는 시간은 짧아질 수 있다. 터치 패널의 면적이 넓으면 별도의 터치가 발생할 확률도 높기 때문에 제2 터치를 감지하기 위한 대기시간은 짧아질 수 있다. 터치 지속시간이 길수록 다음 터치가 발생하거나 변화될 확률이 높으므로 제2 터치를 감지하기 위해 대기하는 시간은 길어질 수 있다.The specific time may be inversely proportional to the ln value of the area of the touch panel. The specific time may be proportional to the number of touches, the touch pressure, and the duration of the touch. The touch pressure refers to the strength of the force applied to the touch panel, and the touch duration refers to the elapsed time since the touch was started. As the area of the touch panel increases, the amount of power used in the touch panel increases, so that the waiting time for sensing the second touch can be shortened. If the area of the touch panel is wide, the probability of occurrence of another touch is high, so that the waiting time for sensing the second touch can be shortened. The longer the duration of the touch duration is, the higher the probability that the next touch will be generated or changed, so that the waiting time for sensing the second touch may become longer.

터치 디스플레이 장치(100)는 터치를 입력받을 경우 터치 패널(110)의 특정 영역을 통해서만 터치를 입력받을 수 있다. 터치 디스플레이 장치(100)는 5개의 손가락 터치에 관한 특정 방향으로의 드래그 동작이 입력된 경우 터치 보드(130)를 통해 OS에 터치데이터를 전달하지 않고, 디스플레이 장치에 터치데이터를 전달할 수 있다. 디스플레이 장치는 터치 패널 제어 진입 컨트롤을 통해 미리 정해진 패턴의 터치를 입력하도록 표시할 수 있고, 해당 패턴의 터치가 입력되면 디스플레이 장치와 관련된 컨트롤을 할 수 있다. 예를 들어, 디스플레이 장치와 관련된 컨트롤은 볼륨 조절, 밝기 조절, 입력 선택 등에 해당할 수 있다.The touch display device 100 can receive a touch only through a specific area of the touch panel 110 when a touch is input. The touch display device 100 can transmit the touch data to the display device without transmitting the touch data to the OS through the touch board 130 when the drag operation in the specific direction with respect to the five finger touches is input. The display device can display a touch of a predetermined pattern through the touch panel control entry control, and can control the display device when the touch of the corresponding pattern is inputted. For example, the controls associated with the display device may correspond to volume control, brightness control, input selection, and the like.

도 4는 본 발명의 일 실시예에 따른 제스처 인식 기반의 터치 디스플레이 장치에서 수행되는 다중 컨트롤 동작을 설명하는 예시도이다.FIG. 4 is a diagram illustrating an example of multiple control operations performed in a gesture recognition-based touch display device according to an exemplary embodiment of the present invention.

도 4를 참조하면, 터치 패널(110)을 통해 터치가 입력되고 제1 터치 감지부(230)에 의해 제1 터치(410)가 감지되면 터치보드(130)는 터치 패널 제어 진입 컨트롤을 제공할 수 있다. 디스플레이 장치(430)는 터치보드(130)로부터 터치 패널 제어 진입 컨트롤을 전달받아 화면에 표시할 수 있다. 일 실시예에서, 터치보드(130)는 터치컨트롤러(420)의 동작을 수행할 수 있고, 터치컨트롤러(420)를 포함하여 구현될 수 있다.4, when a touch is input through the touch panel 110 and the first touch 410 is sensed by the first touch sensing unit 230, the touch board 130 provides touch panel control access control . The display device 430 receives the touch panel control entry control from the touch board 130 and displays it on the screen. In one embodiment, the touch board 130 may perform operations of the touch controller 420 and may include a touch controller 420.

터치 수신부(110)는 터치 패널 제어 진입 컨트롤과 연관된 제1 터치의 변화를 수신할 수 있고, 제2 터치 감지부(250)에 의해 제2 터치(441 및 442)가 감지되면 터치보드(130)는 제2 터치(441 및 442)에 따라 터치데이터를 전달할 대상을 결정할 수 있다. 제2 터치(441)가 디스플레이 장치 컨트롤과 연관된 경우 터치보드(130)는 터치데이터를 디스플레이 장치로만 전달할 수 있다(450). 제2 터치(442)가 OS와 연관된 경우 터치보드(130)는 터치데이터를 OS로만 전달할 수 있다(460).The touch receiving unit 110 may receive a change of the first touch associated with the touch panel control entry control and if the second touch 441 and 442 are sensed by the second touch sensing unit 250, Can determine an object to which the touch data is to be transmitted according to the second touches 441 and 442. If the second touch 441 is associated with the display device control, the touch board 130 may transmit the touch data only to the display device (450). If the second touch 442 is associated with the OS, the touch board 130 may transmit the touch data only to the OS (460).

상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the present invention as defined by the following claims It can be understood that

100: 터치 디스플레이 장치
110 : 터치 패널 130: 터치 보드
150 : 디스플레이부
410 : 제 1 터치
441 : 제 2 터치의 일 실시예 442 : 제2 터치의 다른 실시예100: Touch display device
110: touch panel 130: touch board
150:
410: first touch
441: an embodiment of the second touch 442: another embodiment of the second touch

Claims (8)

터치 패널; 및
상기 터치 패널의 특정 터치가 수신되면 상기 특정 터치에 관해 특정 길이의 드래깅 동작과 특정 시간 동안의 멈춤으로 정의되는 제1 터치를 감지하고 상기 제1 터치를 구성하는 일부의 터치에 관한 변화로 정의되는 제2 터치를 감지하여 상기 터치 패널의 제어 동작을 수행하는 터치 보드를 포함하는 제스처 인식 기반의 터치 디스플레이 장치.
Touch panel; And
When a specific touch of the touch panel is received, a first touch defined by a dragging operation of a specific length and a pause for a specific time with respect to the specific touch is detected and is defined as a change relating to a part of the touchs constituting the first touch And a touch panel for sensing a second touch to perform a control operation of the touch panel.
제1항에 있어서, 상기 터치 보드는
상기 터치 패널의 일부 영역을 포함하는 특정 영역에서의 터치를 상기 특정 터치로 수신하는 것을 특징으로 하는 제스처 인식 기반의 터치 디스플레이 장치.
The touch panel of claim 1, wherein the touch board
Wherein the gesture-recognition-based touch display device receives a touch in a specific area including a partial area of the touch panel by the specific touch.
제1항에 있어서, 상기 터치 보드는
상기 터치 패널에 터치 패널 제어 진입 컨트롤을 제공하여 상기 제2 터치를 기초로 상기 터치 패널의 제어 동작을 수행하는 것을 특징으로 하는 제스처 인식 기반의 터치 디스플레이 장치.
The touch panel of claim 1, wherein the touch board
Wherein the controller controls the touch panel based on the second touch by providing touch panel control access control to the touch panel.
제3항에 있어서, 상기 터치 보드는
상기 특정 터치에 관해 상기 드래깅 동작과 상기 멈춤이 시계열적인 연속성을 가지고 있는 경우에 상기 터치 패널에 상기 터치 패널 제어 진입 컨트롤을 제공하는 것을 특징으로 하는 제스처 인식 기반의 터치 디스플레이 장치.
4. The touch screen device according to claim 3,
Wherein the touch panel control unit provides the touch panel control entry control to the touch panel when the dragging operation and the stop have a time series continuity with respect to the specific touch.
제1항에 있어서, 상기 터치 보드는
상기 제1 터치의 터치 개수, 터치 이동속도, 터치 면적 및 터치멈춤 시간 중 적어도 하나의 변화를 제2 터치로 감지하는 것을 특징으로 하는 제스처 인식 기반의 터치 디스플레이 장치.
The touch panel of claim 1, wherein the touch board
Wherein the second touch detects a change in at least one of a touch number of the first touch, a touch movement speed, a touch area, and a touch stop time.
제1항에 있어서, 상기 터치 보드는
상기 제1 터치의 터치 개수, 터치 이동속도, 터치 면적 및 터치멈춤 시간 중 적어도 하나의 시계열적으로 연속된 변화 패턴을 제2 터치로 감지하는 것을 특징으로 하는 제스처 인식 기반의 터치 디스플레이 장치.
The touch panel of claim 1, wherein the touch board
Wherein the second touch detects at least one of a number of touches of the first touch, a touch movement speed, a touch area, and a touch stop time in a time series continuous manner.
제1항에 있어서, 상기 터치 보드는
상기 제2 터치에 따라 제어 대상을 결정하고, 상기 터치 패널로부터의 터치를 상기 제어 대상으로만 전달하는 것을 특징으로 하는 제스처 인식 기반의 터치 디스플레이 장치.
The touch panel of claim 1, wherein the touch board
Wherein the control object is determined according to the second touch, and the touch from the touch panel is transmitted only to the control object.
제7항에 있어서, 상기 터치 보드는
상기 제1 터치가 감지된 이후 특정 시간 이내에 제2 터치가 감지된 경우에만 제어 대상을 결정하는 것을 특징으로 하는 제스처 인식 기반의 터치 디스플레이 장치.

The touch panel of claim 7, wherein the touch board
Wherein the control object is determined only when a second touch is detected within a predetermined time after the first touch is sensed.

KR1020170115921A 2017-09-11 2017-09-11 Gesture recognition based touch display apparatus KR102026615B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170115921A KR102026615B1 (en) 2017-09-11 2017-09-11 Gesture recognition based touch display apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170115921A KR102026615B1 (en) 2017-09-11 2017-09-11 Gesture recognition based touch display apparatus

Publications (2)

Publication Number Publication Date
KR20190028961A true KR20190028961A (en) 2019-03-20
KR102026615B1 KR102026615B1 (en) 2019-09-30

Family

ID=66036236

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170115921A KR102026615B1 (en) 2017-09-11 2017-09-11 Gesture recognition based touch display apparatus

Country Status (1)

Country Link
KR (1) KR102026615B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113946225A (en) * 2021-12-20 2022-01-18 深圳市心流科技有限公司 Gesture locking method, intelligent bionic hand, terminal and storage medium

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR0153246B1 (en) 1989-11-09 1998-10-15 가와노 다께히꼬 Sterilization food comprise contact isothiocyanate esters
KR20100127081A (en) * 2009-05-25 2010-12-03 엘지전자 주식회사 Function execution method and apparatus thereof
KR101413649B1 (en) 2012-11-07 2014-07-09 (주)아바비젼 Touch table top display apparatus for multi-user
KR20150045614A (en) * 2013-10-21 2015-04-29 엘지전자 주식회사 Method for controlling display og mobile terminal
KR101707444B1 (en) * 2015-10-13 2017-02-16 이재혁 Contents sending method on messanger
KR20170050997A (en) * 2015-11-02 2017-05-11 에스케이텔레콤 주식회사 Apparatus and method for displaying user interface menu using multi touch pattern
KR20170055715A (en) * 2015-11-12 2017-05-22 엘지전자 주식회사 Mobile terminal and method for controlling the same

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR0153246B1 (en) 1989-11-09 1998-10-15 가와노 다께히꼬 Sterilization food comprise contact isothiocyanate esters
KR20100127081A (en) * 2009-05-25 2010-12-03 엘지전자 주식회사 Function execution method and apparatus thereof
KR101413649B1 (en) 2012-11-07 2014-07-09 (주)아바비젼 Touch table top display apparatus for multi-user
KR20150045614A (en) * 2013-10-21 2015-04-29 엘지전자 주식회사 Method for controlling display og mobile terminal
KR101707444B1 (en) * 2015-10-13 2017-02-16 이재혁 Contents sending method on messanger
KR20170050997A (en) * 2015-11-02 2017-05-11 에스케이텔레콤 주식회사 Apparatus and method for displaying user interface menu using multi touch pattern
KR20170055715A (en) * 2015-11-12 2017-05-22 엘지전자 주식회사 Mobile terminal and method for controlling the same

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113946225A (en) * 2021-12-20 2022-01-18 深圳市心流科技有限公司 Gesture locking method, intelligent bionic hand, terminal and storage medium

Also Published As

Publication number Publication date
KR102026615B1 (en) 2019-09-30

Similar Documents

Publication Publication Date Title
US20230289023A1 (en) Method and apparatus for displaying application
CN107193479B (en) Information processing method, device, electronic equipment and storage medium
JP5730667B2 (en) Method for dual-screen user gesture and dual-screen device
JP6333568B2 (en) Proximity motion recognition device using sensor and method using the device
US9146672B2 (en) Multidirectional swipe key for virtual keyboard
KR101705872B1 (en) Method for selecting area on a screen in a mobile device and apparatus therefore
US9524097B2 (en) Touchscreen gestures for selecting a graphical object
EP3385824B1 (en) Mobile device and operation method control available for using touch and drag
US8836649B2 (en) Information processing apparatus, information processing method, and program
CN102902469B (en) Gesture identification method and touch-control system
US9753547B2 (en) Interactive displaying method, control method and system for achieving displaying of a holographic image
US20090066659A1 (en) Computer system with touch screen and separate display screen
US20120174044A1 (en) Information processing apparatus, information processing method, and computer program
KR20160005013A (en) Delay warp gaze interaction
CN102693060B (en) Method and apparatus for controlling switching of terminal state, and terminal
WO2015012789A1 (en) Multi-region touchpad
EP2754009A2 (en) Multi-cell selection using touch input
WO2015035595A1 (en) Multi-touch virtual mouse
WO2021253970A1 (en) Application switching method and device, storage medium, and terminal
WO2017139141A1 (en) Scroll mode for touch/pointing control
US20190339858A1 (en) Method and apparatus for adjusting virtual key of mobile terminal
CN104137556A (en) Control method and apparatus of electronic device using control device
WO2018218392A1 (en) Touch operation processing method and touch keyboard
KR101436585B1 (en) Method for providing user interface using one point touch, and apparatus therefor
KR20190028961A (en) Gesture recognition based touch display apparatus

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant