KR101148027B1 - Multi touch sensing apparatus and system and multi touch sensing method for the same - Google Patents

Multi touch sensing apparatus and system and multi touch sensing method for the same Download PDF

Info

Publication number
KR101148027B1
KR101148027B1 KR1020110007537A KR20110007537A KR101148027B1 KR 101148027 B1 KR101148027 B1 KR 101148027B1 KR 1020110007537 A KR1020110007537 A KR 1020110007537A KR 20110007537 A KR20110007537 A KR 20110007537A KR 101148027 B1 KR101148027 B1 KR 101148027B1
Authority
KR
South Korea
Prior art keywords
display unit
light
contact
light distribution
distribution pattern
Prior art date
Application number
KR1020110007537A
Other languages
Korean (ko)
Inventor
한탁돈
박제희
서종훈
김동철
최지혜
Original Assignee
연세대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 연세대학교 산학협력단 filed Critical 연세대학교 산학협력단
Priority to KR1020110007537A priority Critical patent/KR101148027B1/en
Application granted granted Critical
Publication of KR101148027B1 publication Critical patent/KR101148027B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04166—Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04103—Manufacturing, i.e. details related to manufacturing processes specially suited for touch sensitive devices

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)

Abstract

PURPOSE: A multi-touch sensing device, a system thereof, and a multi-touch sensing method for the same are provided to efficiently sense multi-touch at low cost by recognizing contact based on variation of a light distribution pattern. CONSTITUTION: A light irradiating unit(130) irradiates light on a display unit. The light irradiating unit forms a light distribution pattern and progresses light inside the display unit. A touch sensing unit(140) recognizes the variation of the light distribution pattern due to contact of an object about the display unit.

Description

멀티터치 센싱장치와 시스템 및 이를 위한 멀티터치 센싱방법 {Multi touch sensing apparatus and system and multi touch sensing method for the same}Multi-touch sensing apparatus and system and multi-touch sensing method for same {Multi touch sensing apparatus and system and multi touch sensing method for the same}

본 발명은 센싱에 관한 것으로, 보다 상세하게는, 터치기능을 갖춘 휴대폰 등 터치기능을 갖춘 각 종 인터페이스에서의 센싱 방안에 관한 것이다.The present invention relates to sensing, and more particularly, to a sensing scheme in various interfaces having a touch function, such as a mobile phone having a touch function.

멀티 터치 센싱(multi-touch sensing)기법은 많은 어플리케이션(application)들에 적용되고 있다. 랩탑(laptop)이나 데스크톱(desktop) 컴퓨터와 같은 개인용 컴퓨팅 디바이스, 휴대용 터치 스크린, 의료 장비, 키오스크(kiosk) 등 그와 같은 어플리케이션의 구현 례들은 수 없이 많다.Multi-touch sensing techniques have been applied to many applications. There are numerous examples of such applications, such as personal computing devices such as laptop or desktop computers, portable touch screens, medical equipment, kiosks, and the like.

현재의 멀티 터치 센싱 기법은 널리 알려진 바와 같이, capacitive 기법이나 resistive 기법을 이용한다. 이와 같은 기법들에 기반을 둔 터치 스크린은 비싸며 제작이 어렵다는 문제점을 갖는다. Current multi-touch sensing techniques use capacitive or resistive techniques, as is well known. Touch screens based on such techniques are expensive and difficult to manufacture.

본 발명의 적어도 일 실시예가 이루고자 하는 기술적 과제는, 인터페이스에 가해지는 하나의 접촉 혹은 그 인터페이스에 동시에 가해지는 복수의 접촉, 소위 멀티 터치(multi-touch)를 저비용으로 정확히 효율적으로 감지 및 인식할 수 있도록 하는 멀티 터치 센싱 장치를 제공하는데 있다.The technical problem to be achieved by at least one embodiment of the present invention is to accurately detect and recognize a single contact applied to an interface or a plurality of contacts simultaneously applied to the interface, so-called multi-touch, at low cost and efficiently. It is to provide a multi-touch sensing device.

본 발명의 적어도 일 실시예가 이루고자 하는 다른 기술적 과제는, 인터페이스에 가해지는 하나의 접촉 혹은 그 인터페이스에 동시에 가해지는 복수의 접촉, 소위 멀티 터치(multi-touch)를 저비용으로 정확히 효율적으로 감지 및 인식할 수 있도록 하는 멀티 터치 센싱 방법을 제공하는데 있다.Another technical problem to be achieved by at least one embodiment of the present invention is to accurately and efficiently detect and recognize a single contact applied to an interface or a plurality of contacts simultaneously applied to the interface, so-called multi-touch, at low cost. The present invention provides a multi-touch sensing method.

본 발명의 적어도 일 실시예가 이루고자 하는 또 다른 기술적 과제는 인터페이스에 가해지는 하나의 접촉 혹은 그 인터페이스에 동시에 가해지는 복수의 접촉, 소위 멀티 터치(multi-touch)를 저비용으로 정확히 효율적으로 감지 및 인식할 수 있도록 하는 멀티 터치 센싱 시스템을 제공하는데 있다.Another technical object of at least one embodiment of the present invention is to detect and recognize a single contact applied to an interface or a plurality of contacts simultaneously applied to the interface, so-called multi-touch, at low cost and efficiently. The present invention provides a multi-touch sensing system.

상기 과제를 이루기 위해, 본 발명의 적어도 일 실시예에 의한 멀티 터치 센싱 장치는 일정 영상을 디스플레이 가능하며 표면에 일정 객체와 접촉 가능한 디스플레이부; 상기 디스플레이부의 표면이 일정 두께로 광으로 덮이면서 동시에 상기 디스플레이부의 내부에 전반사가 발생되도록 상기 디스플레이부에 광을 조사하여 상기 디스플레이부의 표면과 내부에 일정한 광 분포 패턴을 형성하는 광 조사부; 및 상기 디스플레이부에 대한 상기 객체의 접촉으로 인해 발생되는 상기 광 분포 패턴의 변화를 감지하여 상기 디스플레이부에 대해 이루어지는 접촉을 인식하는 터치 센싱부를 포함한다.In order to achieve the above object, the multi-touch sensing device according to at least one embodiment of the present invention is capable of displaying a certain image and the display unit which is in contact with a certain object on the surface; A light irradiation unit which covers the surface of the display unit with a predetermined thickness and simultaneously emits light to the display unit such that total reflection occurs inside the display unit to form a constant light distribution pattern on the surface and the inside of the display unit; And a touch sensing unit configured to recognize a contact made to the display unit by detecting a change in the light distribution pattern generated by the contact of the object with the display unit.

여기서, 상기 디스플레이부의 표면에 상기 디스플레이부를 조작하는 상기 객체인 조작 객체의 접촉과 상기 디스플레이부를 조작하지 않는 상기 객체인 장애 객체의 접촉이 공존하는 경우, 상기 터치 센싱부는 상기 디스플레이부의 표면에서의 상기 광 분포 패턴과 상기 디스플레이부의 내부에서의 상기 광 분포 패턴 각각의 변화를 동시에 감지하고, 감지 결과를 고려하여 상기 조작 객체의 접촉 및 상기 장애 객체의 접촉을 모두 인식한다.Here, when the contact of the operation object which is the object which manipulates the display unit and the contact of the obstacle object which is the object which does not operate the display unit coexists on the surface of the display unit, the touch sensing unit is the light on the surface of the display unit. A change in the distribution pattern and each of the light distribution patterns in the display unit is simultaneously sensed, and both the touch of the manipulation object and the touch of the obstacle object are recognized in consideration of the detection result.

여기서, 상기 디스플레이부의 표면에 상기 디스플레이부를 조작하는 상기 객체인 조작 객체의 접촉이 상기 디스플레이부를 조작하지 않는 상기 객체인 장애 객체의 접촉의 상기 광 분포 패턴에의 영향에 영향을 주는 경우, 상기 터치 센싱부는 상기 디스플레이부 내부에서의 상기 광 분포 패턴의 변화를 감지하고 감지 결과를 고려하여 상기 조작 객체의 접촉을 인식하며, 동시에 상기 디스플레이부 표면에서의 상기 광 분포 패턴의 변화를 감지하고 감지된 결과를 고려하여 상기 장애 객체의 접촉을 인식한다. 이 때 상기 조작 객체의 접촉이 상기 장애 객체의 접촉의 상기 디스플레이부 표면에서의 상기 광 분포 패턴에의 영향에 영향을 주는 경우는, 상기 디스플레이부 표면이 일정 두께의 광으로 덮이도록 상기 디스플레이부에 대해 조사되는 상기 광의 진행이 상기 장애 객체의 접촉에 의해 차단되는 경우를 포함한다.Here, when the contact of the operation object which is the object which manipulates the display unit to the surface of the display unit affects the influence on the light distribution pattern of the contact of the obstacle object which is the object which does not operate the display unit, the touch sensing The unit detects a change in the light distribution pattern inside the display unit and recognizes a contact of the manipulation object in consideration of a detection result, and simultaneously detects a change in the light distribution pattern on the surface of the display unit and displays the detected result. Consider the contact of the obstacle object in consideration. In this case, when the contact of the manipulation object affects the influence of the contact of the obstacle object on the light distribution pattern on the surface of the display unit, the display unit surface is covered with light having a predetermined thickness. Propagation of the light irradiated for the object is blocked by contact of the obstacle object.

여기서, 상기 광 조사부는 복수의 광 레이저 빔들을 서로 다른 방향을 향해 조사할 수 있고 상기 광 레이저 빔들은 상기 복수의 서로 다른 상기 광 분포 패턴들을 형성한다.Here, the light irradiator may irradiate a plurality of light laser beams in different directions, and the light laser beams form the plurality of different light distribution patterns.

여기서, 상기 광은 적외선 레이저 광이고 상기 디스플레이부는 아크릴 매질을 포함한 하나 이상의 매질들 각각이 하나의 층을 이루는 적층 구조로 구성될 수 있고, 상기 아크릴 매질로 구성된 영역의 표면이 상기 디스플레이부의 표면이며, 상기 디스플레이부 중 내부에 상기 광이 조사되는 영역은 상기 아크릴 매질로 구성된 영역이다. 이 때 상기 디스플레이부는 일정 투명도 이상의 투명도를 갖는 유리 매질로 구성된 층; 상기 유리 매질의 상부 표면에 하부 표면이 접촉하는 분산 매질로 구성된 층; 및 상기 분산 매질의 상부 표면에 하부 표면이 접촉하며 아크릴 매질로 구성된 층을 포함할 수 있다.Here, the light is an infrared laser light and the display unit may be of a laminated structure in which each of one or more media including an acrylic medium to form a layer, the surface of the area consisting of the acrylic medium is the surface of the display unit, An area in which the light is irradiated inside of the display unit is an area formed of the acrylic medium. At this time, the display unit comprises a layer consisting of a glass medium having a transparency or more than a certain transparency; A layer consisting of a dispersion medium in which a bottom surface is in contact with the top surface of the glass medium; And a lower surface in contact with the upper surface of the dispersion medium and comprising a layer composed of acrylic medium.

상기 다른 과제를 이루기 위해, 본 발명의 적어도 일 실시예에 의한 멀티 터치 센싱 방법은 (a) 일정 영상을 디스플레이 가능하며 표면에 일정 객체와 접촉 가능한 디스플레이부의 표면이 일정 두께로 광으로 덮이면서 동시에 상기 디스플레이부의 내부에 전반사가 발생되도록, 상기 디스플레이부에 광을 조사하여 상기 디스플레이부의 표면과 내부에 일정한 광 분포 패턴을 형성하는 단계; 및 (b) 상기 디스플레이부에 대한 상기 객체의 접촉으로 인해 발생되는 상기 광 분포 패턴의 변화를 감지하여 상기 디스플레이부에 대해 이루어지는 접촉을 인식하는 단계를 포함한다.In order to achieve the above another object, the multi-touch sensing method according to at least one embodiment of the present invention (a) the surface of the display unit capable of displaying a certain image and the surface contacting the predetermined object on the surface is covered with light to a certain thickness at the same time Irradiating light on the display unit to form a total light distribution pattern on the surface and the inside of the display unit such that total reflection occurs inside the display unit; And (b) detecting a change in the light distribution pattern generated by the contact of the object with the display unit to recognize a contact made to the display unit.

여기서, 상기 디스플레이부의 표면에 상기 디스플레이부를 조작하는 상기 객체인 조작 객체의 접촉과 상기 디스플레이부를 조작하지 않는 상기 객체인 장애 객체의 접촉이 공존하는 경우 상기 (b) 단계는 상기 디스플레이부의 표면에서의 상기 광 분포 패턴과 상기 디스플레이부의 내부에서의 상기 광 분포 패턴 각각의 변화를 동시에 감지하고, 감지 결과를 고려하여 상기 조작 객체의 접촉 및 상기 장애 객체의 접촉을 모두 인식한다.Here, in the case where the contact of the manipulation object which is the object which manipulates the display unit and the contact of the obstacle object which is the object which does not manipulate the display unit coexists on the surface of the display unit, the step (b) is performed on the surface of the display unit. A light distribution pattern and a change in each of the light distribution patterns in the display unit are simultaneously sensed, and both the touch of the manipulation object and the touch of the obstacle object are recognized in consideration of the detection result.

여기서, 상기 디스플레이부의 표면에 상기 디스플레이부를 조작하는 상기 객체인 조작 객체의 접촉이 상기 디스플레이부를 조작하지 않는 상기 객체인 장애 객체의 접촉의 상기 광 분포 패턴에의 영향에 영향을 주는 경우 상기 (b) 단계는 상기 디스플레이부 내부에서의 상기 광 분포 패턴의 변화를 감지하고 감지 결과를 고려하여 상기 조작 객체의 접촉을 인식하며, 동시에 상기 디스플레이부 표면에서의 상기 광 분포 패턴의 변화를 감지하고 감지된 결과를 고려하여 상기 장애 객체의 접촉을 인식한다. 이 때 상기 조작 객체의 접촉이 상기 장애 객체의 접촉의 상기 디스플레이부 표면에서의 상기 광 분포 패턴에의 영향에 영향을 주는 경우는, 상기 디스플레이부 표면이 일정 두께의 광으로 덮이도록 상기 디스플레이부에 대해 조사되는 상기 광의 진행이 상기 장애 객체의 접촉에 의해 차단되는 경우를 포함한다. Here, when the contact of the operation object which is the object which manipulates the display unit to the surface of the display unit affects the influence on the light distribution pattern of the contact of the obstacle object which is the object which does not operate the display unit, (b) The step of detecting the change of the light distribution pattern in the display unit and in consideration of the detection result to recognize the contact of the manipulation object, and at the same time to detect the change of the light distribution pattern on the surface of the display unit Recognize the contact of the obstacle object in consideration of. In this case, when the contact of the manipulation object affects the influence of the contact of the obstacle object on the light distribution pattern on the surface of the display unit, the display unit surface is covered with light having a predetermined thickness. Propagation of the light irradiated for the object is blocked by contact of the obstacle object.

여기서, 상기 (a) 단계는 복수의 광 레이저 빔들을 서로 다른 방향을 향해 조사할 수 있고, 상기 광 레이저 빔들은 상기 복수의 서로 다른 상기 광 분포 패턴들을 형성한다.Here, step (a) may irradiate a plurality of optical laser beams in different directions, and the optical laser beams form the plurality of different light distribution patterns.

여기서 상기 광은 적외선 레이저 광이고 아크릴 매질을 포함한 하나 이상의 매질들 각각이 하나의 층을 이루는 적층 구조로 구성될 수 있고, 상기 아크릴 매질로 구성된 영역의 표면이 상기 디스플레이부의 표면이며, 상기 디스플레이부 중 내부에 상기 광이 조사되는 영역은 상기 아크릴 매질로 구성된 영역이다. 이 때 상기 디스플레이부는 일정 투명도 이상의 투명도를 갖는 유리 매질로 구성된 층; 상기 유리 매질의 상부 표면에 하부 표면이 접촉하는 분산 매질로 구성된 층; 및 상기 분산 매질의 상부 표면에 하부 표면이 접촉하며 아크릴 매질로 구성된 층을 포함할 수 있다.Herein, the light may be an infrared laser light, and may be composed of a laminated structure in which each of one or more media including an acrylic medium forms one layer, and the surface of the area composed of the acrylic medium is the surface of the display unit, and among the display units The region where the light is irradiated therein is a region composed of the acrylic medium. At this time, the display unit comprises a layer consisting of a glass medium having a transparency or more than a certain transparency; A layer consisting of a dispersion medium in which a bottom surface is in contact with the top surface of the glass medium; And a lower surface in contact with the upper surface of the dispersion medium and comprising a layer composed of acrylic medium.

상기 또 다른 과제를 이루기 위해, 본 발명의 적어도 일 실시예에 의한 멀티 터치 센싱 시스템은 일정 영상을 프로젝팅하는 프로젝팅부; 상기 프로젝팅된 일정 영상을 디스플레이 가능하며 표면에 일정 객체와 접촉 가능하고, 서로 다른 매질의 하나 이상의 층들로 구성된 적층 구조를 갖는 디스플레이부; 상기 디스플레이부의 표면이 일정 두께로 광으로 덮이면서 동시에 상기 층들 중 상기 디스플레이부의 표면 부위의 층인 전반사 층의 내부에 전반사가 발생되도록 상기 디스플레이부에 광을 조사하여 상기 디스플레이부의 표면 및 상기 전반사 층의 내부에 일정한 광 분포 패턴을 형성하는 광 조사부; 및 상기 디스플레이부에 대한 상기 객체의 접촉으로 인해 발생되는 상기 광 분포 패턴의 변화를 감지하여 상기 디스플레이부에 대해 이루어지는 접촉을 인식하는 터치 센싱부를 포함한다.In order to achieve the above object, the multi-touch sensing system according to at least one embodiment of the present invention is a projection unit for projecting a certain image; A display unit capable of displaying the projected constant image and being in contact with a predetermined object on a surface, the display unit having a laminated structure composed of one or more layers of different media; The surface of the display unit is covered with light with a predetermined thickness, and at the same time, the display unit is irradiated with light so that total reflection occurs inside the total reflection layer, which is a layer of the surface portion of the display unit, and the surface of the display unit and the inside of the total reflection layer. A light irradiation unit for forming a constant light distribution pattern on the substrate; And a touch sensing unit configured to recognize a contact made to the display unit by detecting a change in the light distribution pattern generated by the contact of the object with the display unit.

여기서, 상기 디스플레이부의 표면에 상기 디스플레이부를 조작하는 상기 객체인 조작 객체의 접촉과 상기 디스플레이부를 조작하지 않는 상기 객체인 장애 객체의 접촉이 공존하는 경우, 상기 터치 센싱부는 상기 디스플레이부의 표면에서의 상기 광 분포 패턴 및 상기 전반사 층의 내부에서의 상기 광 분포 패턴 각각의 변화를 동시에 감지하고, 감지 결과를 고려하여 상기 조작 객체의 접촉 및 상기 장애 객체의 접촉을 모두 인식한다.Here, when the contact of the operation object which is the object which manipulates the display unit and the contact of the obstacle object which is the object which does not operate the display unit coexists on the surface of the display unit, the touch sensing unit is the light on the surface of the display unit. A change in each of the distribution pattern and the light distribution pattern inside the total reflection layer is simultaneously sensed, and both the contact of the manipulation object and the contact of the obstacle object are recognized in consideration of the detection result.

여기서, 상기 디스플레이부의 표면에 상기 디스플레이부를 조작하는 상기 객체인 조작 객체의 접촉이 상기 디스플레이부를 조작하지 않는 상기 객체인 장애 객체의 접촉의 상기 광 분포 패턴에의 영향에 영향을 주는 경우, 상기 터치 센싱부는 상기 전반사 층의 내부에서의 상기 광 분포 패턴의 변화를 감지하고 감지 결과를 고려하여 상기 조작 객체의 접촉을 인식하며, 동시에 상기 디스플레이부 표면에서의 상기 광 분포 패턴의 변화를 감지하고 감지 결과를 고려하여 상기 장애 객체의 접촉을 인식한다.Here, when the contact of the operation object which is the object which manipulates the display unit to the surface of the display unit affects the influence on the light distribution pattern of the contact of the obstacle object which is the object which does not operate the display unit, the touch sensing The unit detects the change of the light distribution pattern inside the total reflection layer and recognizes the touch of the manipulation object in consideration of the detection result, and simultaneously detects the change of the light distribution pattern on the surface of the display unit and detects the detection result. Consider the contact of the obstacle object in consideration.

본 발명의 적어도 일 실시예에 의한 멀티터치 센싱장치와 시스템 및 이를 위한 멀티터치 센싱방법은 일정영상을 디스플레이 가능하며 표면에 일정 객체와 접촉 가능한 디스플레이부의 표면이 일정 두께로 광으로 덮이면서 동시에 그 디스플레이부의 내부에 전반사가 발생되도록 그 디스플레이부에 광을 조사하여 그 디스플레이부의 표면과 내부에 일정한 광 분포 패턴을 형성하고, 그 디스플레이부에 대한 상기 객체의 접촉으로 인해 발생되는 그 광 분포 패턴의 변화를 감지하여 그 디스플레이부에 대해 이루어지는 그 접촉을 인식함으로써, 인터페이스에 가해지는 하나의 접촉 혹은 그 인터페이스에 동시에 가해지는 복수의 접촉, 소위 멀티 터치(multi-touch)를 저비용으로 정확히 효율적으로 감지 및 인식할 수 있다.According to at least one embodiment of the present invention, a multi-touch sensing device and system and a multi-touch sensing method therefor are capable of displaying a predetermined image and simultaneously displaying the surface of the display unit which is in contact with a certain object on a surface with light of a predetermined thickness. The display unit is irradiated with light so that total reflection occurs inside the unit, thereby forming a constant light distribution pattern on the surface and the inside of the display unit, and changing the light distribution pattern generated by contact of the object with the display unit. By sensing and recognizing the contact made to the display unit, it is possible to detect and recognize a single contact applied to the interface or a plurality of contacts simultaneously applied to the interface simultaneously, so-called multi-touch at low cost and efficiently. Can be.

도 1은 본 발명의 제1 실시예에 따른 멀티터치 센싱장치를 설명하기 위한 도면이다.
도 2는 본 발명의 제2 실시예에 따른 멀티터치 센싱장치를 설명하기 위한 도면이다.
도 3은 본 발명의 제3 실시예에 따른 멀티터치 센싱장치를 설명하기 위한 도면이다.
도 4는 본 발명의 적어도 일 실시예에 따른 광 조사부의 일 구현례를 나타낸 도면이다.
도 5는 본 발명의 적어도 일 실시예에 따른 멀티터치 센싱장치의 동작을 설명하기 위한 참고도이다.
도 6은 본 발명의 적어도 일 실시예에 따른 멀티터치 센싱방법을 나타내는 플로우챠트이다.1 is a view for explaining a multi-touch sensing device according to a first embodiment of the present invention.
2 is a view for explaining a multi-touch sensing device according to a second embodiment of the present invention.
3 is a view for explaining a multi-touch sensing device according to a third embodiment of the present invention.
4 is a diagram illustrating an implementation example of a light irradiation part according to at least one embodiment of the present invention.
5 is a reference diagram for describing an operation of a multi-touch sensing device according to at least one embodiment of the present invention.
6 is a flowchart illustrating a multi-touch sensing method according to at least one embodiment of the present invention.

본 발명과 본 발명의 동작상의 이점 및 본 발명의 실시에 의하여 달성되는 목적을 충분히 이해하기 위해서는 본 발명의 바람직한 실시예를 예시하는 첨부 도면 및 그 첨부 도면을 설명하는 내용을 참조하여야만 한다.In order to fully understand the present invention, the operational advantages of the present invention, and the objects achieved by the practice of the present invention, reference should be made to the accompanying drawings that illustrate preferred embodiments of the present invention and the accompanying drawings.

이하에서 설명할 본 발명의 적어도 일 실시예에 따른 멀티터치 센싱방안은 종래의 멀티터치 센싱방안들인 FTIR(Frustrated Total Internal Reflection) 기법과 LLP(Laser Light Plane) 기법을 적절히 결합한 방안이다.The multi-touch sensing method according to at least one embodiment of the present invention to be described below is a method in which a combination of conventional multi-touch sensing methods, FTIR (Frustrated Total Internal Reflection) and LLP (Laser Light Plane), are appropriately combined.

FTIR 기법은 적외선 다이오드들의 어레이(array)를 이용하여 멀티터치 지점들을 감지하는 멀티터치 센싱방안이다. 구체적으로, FTIR 기법은 어레이 형태의 적외선 다이오드들이 디스플레이 기능을 갖는 디스플레이부(단, 디스플레이부의 굴절률은 디스플레이부 외부의 굴절률에 비해 작음)를 향해 적외선을 발산(emit)하고 발산된 적외선이 디스플레이부 내부에서 전반사(total internal reflection)하는 상태에서 그 디스플레이부 표면에 사용자가 접촉할 경우, 그 접촉 지점에서 전반사가 깨져 그 접촉 지점에서 적외선이 디스플레이부의 외부로 이탈하고, 그 이탈된 적외선을 감지함으로써 그러한 접촉이 발생되었음과 그 접촉의 접촉 지점을 인식하는 기법을 의미한다. 이를 위해, 디스플레이부의 외부에는 그 이탈된 적외선을 밝은 흰색 광으로서 감지하기 위한 이미지 처리 툴(tool)이 마련되어 있다. FTIR 기법은 높은 시공간적 resolution (spatial and temporal resolution)을 가지며 계층적(scalable)이다.The FTIR technique is a multi-touch sensing scheme that detects multi-touch points using an array of infrared diodes. Specifically, the FTIR technique emits infrared rays toward the display unit having an array function of the infrared diodes in the form of an array, provided that the refractive index of the display unit is smaller than that of the display unit. If the user touches the surface of the display in the state of total internal reflection at, the total reflection is broken at the contact point, and the infrared rays deviate out of the display portion at the contact point, and the contact is detected by detecting the separated infrared rays. This means a technique for recognizing that a contact has occurred and its point of contact. To this end, an image processing tool is provided on the outside of the display unit to detect the separated infrared rays as bright white light. The FTIR technique has high spatial and temporal resolution and is scalable.

FTIR 기법의 문제점으로는 디스플레이부의 표면에 터치 감도(sensitivity)를 향상하기 위한 별도의 부재(compliant surface)를 부가하지 않고는 FTIR 기법이 제대로 된 동작을 기대하기 어렵다는 점과, 어레이 형태의 적외선 다이오드들 중 하나라도 고장난 경우 그 고장난 다이오드의 교체가 용이하지 않다는 점과, 주로 손가락의 접촉만 정확히 감지할 수 있을 뿐 상대적으로 커다란 객체 예를 들어 휴대폰, 카메라 등의 접촉을 정확히 감지하기 어렵다는 점 등을 들 수 있다. 여기서 마지막 언급한 문제점은 FTIR 기법이 에지(edge)를 감지하기 어렵다는 데 근거한다.Problems of the FTIR technique include that it is difficult to expect proper operation of the FTIR technique without adding a compliant surface for improving touch sensitivity on the surface of the display unit, and an array of infrared diodes. If any one of them fails, it is not easy to replace the failed diode, and it is difficult to detect touches of relatively large objects such as mobile phones and cameras. Can be. The last problem mentioned here is based on the fact that the FTIR technique is difficult to detect edges.

LLP 기법은 디스플레이부의 표면에 적외선으로 구현되는 광표면(a plane of IR(InfraRed) light)을 형성하기 위하여 디스플레이부의 표면 부근을 향해 적외선을 조사하고 그 디스플레이부 표면에 사용자가 접촉할 경우, 그 접촉 지점에서 그와 같은 광표면을 형성하기 위한 적외선의 진행(경로)이 차단되고 그 접촉 지점에서 적외선이 디스플레이부의 외부로 산란되고, 그 산란된 적외선을 감지함으로써 그러한 접촉이 발생되었음과 그 접촉의 접촉 지점을 인식하는 기법을 의미한다. 이를 위해 디스플레이부의 외부에는 그 산란된 적외선을 밝은 흰색 광으로서 감지하기 위한 이미지 처리 툴이 마련되어 있다. LLP 기법은 사용자의 제스처까지도 감지할 수 있으며, 여러 개의 적외선 조사장비를 동시에 사용할 경우 보다 넓은 영역에 상술한 광표면을 형성하여 LLP 기법의 적용 범위를 넓힐 수 있다.The LLP technique irradiates infrared rays toward the surface of the display unit to form a plane of IR (InfraRed) light on the surface of the display unit, and when the user touches the surface of the display unit, The progress (path) of the infrared rays to form such an optical surface at that point is interrupted and at that contact point the infrared light is scattered out of the display and the contact is generated by sensing the scattered infrared rays and the contact of the contact Refers to a technique for recognizing points. To this end, an image processing tool is provided outside the display unit to detect the scattered infrared rays as bright white light. The LLP technique can detect a user's gesture, and when using several infrared irradiation equipments simultaneously, the LLP technique can be extended to form the above-described optical surface in a wider area.

LLP 기법의 가장 주요 문제점으로는 장애물이 존재하는 경우 사용자의 접촉을 감지하기 어렵다는 점을 들 수 있다. 예를 들어 사용자가 손가락을 디스플레이부에 접촉하는데 그 손가락보다 앞선 위치에 장애물이 위치해 그 장애물로 인해 '광표면을 형성하기 위한 적외선의 진행'이 차단되어, 그러한 적외선 진행이 그 손가락에까지 미치지 못하면 LLP 기법은 그 손가락의 접촉을 감지하지 못한다. 여기서 앞선 위치란 적외선이 조사되는 지점을 기준으로 손가락보다 장애물이 보다 근접해 있음을 의미한다. 극단적으로, 디스플레이부 표면에 전 장애 영역(total occlusion area)이 존재하고 사용자가 그 전 장애 영역 내에 접촉을 하는 경우, LLP 기법은 그러한 접촉을 감지할 수 없다. 여기서 전 장애 영역이란 광표면을 형성하기 위한 적외선이 어느 방향에서 조사되든 즉, 모든 방향으로부터 적외선이 조사되더라도 그러한 적외선의 진행을 모두 차단하는 장애물에 의해 둘러싸인 영역을 의미한다. 예컨대, 디스플레이부 표면에 블록(block) 4개가 직사각형 형태로 위치하는 경우 그 직사각형 내부의 영역이 '전 장애 영역'이 되는 것이며, 사용자가 그 직사각형 내부의 영역을 접촉하는 경우 LLP 기법은 그 접촉을 감지할 수 없는 것이다.The main problem of the LLP technique is that it is difficult to detect the user's contact in the presence of obstacles. For example, if a user touches a finger on the display and an obstacle is placed ahead of the finger, the obstacle blocks the 'infrared travel to form an optical surface', which prevents the LLP from reaching the finger. The technique does not detect contact of the finger. Here, the preceding position means that the obstacle is closer to the finger than the point where the infrared ray is irradiated. Extremely, if there is a total occlusion area on the surface of the display and the user makes a contact within the entire obstruction area, the LLP technique cannot detect such a contact. Here, the entire obstacle area refers to an area surrounded by obstacles which block all the progress of infrared rays regardless of which direction the infrared rays for forming the optical surface are irradiated, that is, even when the infrared rays are radiated from all directions. For example, if four blocks are located in the shape of a rectangle on the surface of the display unit, the area inside the rectangle becomes a 'full obstacle area', and when the user touches an area inside the rectangle, the LLP technique detects the contact. It cannot be detected.

본 발명의 적어도 일 실시예에 따른 멀티터치 센싱 기법이 FTIR 기법 또는 LLP 기법에 대해 갖는 차이점은 다음과 같다.The difference between the multi-touch sensing technique and the FTIR technique or the LLP technique according to at least one embodiment of the present invention is as follows.

첫째, 본 발명의 적어도 일 실시예에 따른 멀티터치 센싱 기법은 FTIR 기법에서와 달리 손가락 터치의 감지만 주로 가능한 것이 아니라, 상대적으로 커다란 객체 예를 들어 휴대폰, 카메라 등의 접촉도 정확히 감지할 수 있다.First, unlike the FTIR technique, the multi-touch sensing technique according to at least one embodiment of the present invention is not only capable of detecting a finger touch, but also accurately detects a touch of a relatively large object such as a mobile phone or a camera. .

둘째, 본 발명의 적어도 일 실시예에 따른 멀티터치 센싱 기법은 FTIR 기법에서와 달리 compliant surface 없이도 멀티 터치를 정확히 감지할 수 있다. 따라서 본 발명의 적어도 일 실시예에 따른 멀티터치 센싱장치는 보다 간단한 구조로 보다 저렴하게 구현될 수 있다.Secondly, unlike the FTIR technique, the multi-touch sensing technique according to at least one embodiment of the present invention can accurately detect a multi-touch without a compliant surface. Therefore, the multi-touch sensing device according to at least one embodiment of the present invention can be implemented at a lower cost with a simpler structure.

셋째 본 발명의 적어도 일 실시예에 따른 멀티터치 센싱 기법은 LLP 기법에서와 달리, 디스플레이부 표면에 장애물이 놓여지더라도, 극단적으로, 전 장애 영역이 존재하더라도, 멀티 터치를 정확하고도 효율적으로 감지할 수 있다.Third, unlike the LLP technique, the multi-touch sensing technique according to at least one embodiment of the present invention detects the multi-touch accurately and efficiently even if obstacles are placed on the surface of the display unit, even in the presence of all obstacle regions. can do.

넷째, 본 발명의 적어도 일 실시예에 따른 멀티터치 센싱 기법은 FTIR 기법에서와 같은 수많은 적외선 다이오드들을 필요로 하지 않으며, 그에 비해 훨씬 적은 수의 광원들을 이용하여 구현될 수 있다.Fourth, the multi-touch sensing technique according to at least one embodiment of the present invention does not require as many infrared diodes as in the FTIR technique, and can be implemented using a much smaller number of light sources.

이하, 본 발명의 적어도 일 실시예에 의한 멀티터치 센싱장치와 시스템 및 이를 위한 멀티터치 센싱방법을 첨부한 도면들을 참조하여 다음과 같이 설명한다.Hereinafter, a multi-touch sensing apparatus and system and a multi-touch sensing method therefor according to at least one embodiment of the present invention will be described with reference to the accompanying drawings.

도 1은 본 발명의 제1실시예에 따른 멀티터치 센싱장치를 설명하기 위한 도면이다. 본 발명의 제1실시예에 따른 멀티터치 센싱장치는 디스플레이부(110), 프로젝팅부(118), 광 조사부(130), 및 터치 센싱부(140)를 포함한다.1 is a view for explaining a multi-touch sensing device according to a first embodiment of the present invention. The multi-touch sensing device according to the first embodiment of the present invention includes a display unit 110, a projection unit 118, a light irradiation unit 130, and a touch sensing unit 140.

디스플레이부(110)는 일정 영상을 디스플레이할 수 있으며 표면에 일정 객체와 접촉 가능하다. 디스플레이부(110)가 디스플레이부(110)의 표면에 객체와 접촉한다는 것은 객체가 디스플레이부(110)의 표면에 접촉하는 것을 의미한다.The display 110 may display a predetermined image and may contact a predetermined object on a surface. The contact of the display 110 with the object on the surface of the display 110 means that the object contacts the surface of the display 110.

디스플레이부(110)는 하나 이상의 층들로 구성된 적층구조로 이루어질 수 있다. 이 때, 각각의 층은 서로 다른 매질들로 구성되어 있다. 예를 들어 디스플레이부(110)는 일정 투명도 이상의 투명도를 갖는 유리 매질로 구성된 층(112), 유리 매질의 상부 표면에 하부 표면이 접촉하는 분산 매질로 구성된 층(114), 분산 매질의 상부 표면에 하부 표면이 접촉하며 아크릴 매질로 구성된 층(이하, 전반사 층)(116)을 포함한다. 이 예시에서는 아크릴 매질로 구성된 영역의 표면이 디스플레이부(110)의 표면이 된다. 한편, 여기서 '유리 매질로 구성된 층(112)'의 두께는 5mm 내지 8mm일 수 있고 이하에서는 설명의 편의상 8mm라 가정하고, '전반사 층(116)'의 두께는 1.5mm 내지 2.0mm일 수 있다.The display unit 110 may be formed of a stacked structure composed of one or more layers. At this time, each layer is composed of different media. For example, the display unit 110 may include a layer 112 composed of a glass medium having a transparency greater than or equal to a certain transparency, a layer 114 composed of a dispersion medium having a lower surface contacting an upper surface of the glass medium, and a top surface of the dispersion medium. The bottom surface is in contact and comprises a layer (hereinafter total reflection layer) 116 composed of acrylic medium. In this example, the surface of the region composed of the acrylic medium becomes the surface of the display 110. Meanwhile, the thickness of the layer 112 composed of the glass medium may be 5 mm to 8 mm, and hereinafter, it is assumed that the thickness is 8 mm for convenience of description, and the thickness of the total reflection layer 116 may be 1.5 mm to 2.0 mm. .

프로젝팅부(118)는 일정 영상을 디스플레이부(110)를 향해 프로젝팅한다. 디스플레이부(110)는 프로젝팅부(118)가 프로젝팅하는 영상을 디스플레이한다. 사용자는 그러한 영상을 보며, 디스플레이부(110)와 인터페이싱(interfacing)하며 디스플레이부(110)를 조작할 수 있는 것이며, 여기서 '조작'이란 가압에 따른 조작일 수도 있고 접촉에 따른 조작일 수도 있으나, 본 명세서에서는, 설명의 편의상 접촉에 따른 조작이라 가정한다. 또한 사용자의 디스플레이부(110)의 표면에 대한 접촉은 다양한 형태로 이루어질 수 있겠으나, 도 1에서는 설명의 편의상, 사용자 손가락(120)을 통한 디스플레이부(110) 표면에의 접촉이라 가정한다. 즉, 도 1에서 객체란 사용자 손가락을 의미한다.The projector 118 projects a predetermined image toward the display 110. The display 110 displays an image projected by the projector 118. The user may view such an image, and may interface with the display 110 and manipulate the display 110. Here, 'manipulation' may be an operation under pressure or an operation under contact. In this specification, for convenience of explanation, it is assumed that the operation according to the contact. In addition, although the user's contact with the surface of the display 110 may be made in various forms, in FIG. 1, for convenience of description, it is assumed that the user touches the surface of the display 110 through the user's finger 120. That is, in FIG. 1, an object means a user's finger.

광 조사부(130)는 '디스플레이부(110) 표면이 일정 두께로 광으로 덮이면서' 동시에 '디스플레이부(110)의 내부에 전반사가 발생되도록', 디스플레이부(110)에 광(132)을 조사하여 디스플레이부(110)의 표면과 내부에 일정한 광 분포 패턴을 형성한다. 이하에서는 설명의 편의상 광 조사부(130)가 조사하는 광(132)은 적외선 레이저 광이고 그의 파장은 800nm 이상 특히, 850nm 이라 가정한다. 한편, 디스플레이부(110) 중 내부에 광이 조사되는 영역은 전반사 층(112)이다.The light irradiator 130 irradiates the light 132 to the display 110 so that the surface of the display 110 is covered with light with a predetermined thickness and at the same time total reflection occurs inside the display 110. As a result, a uniform light distribution pattern is formed on the surface and the inside of the display 110. Hereinafter, for convenience of explanation, it is assumed that the light 132 irradiated by the light irradiation unit 130 is an infrared laser light and its wavelength is 800 nm or more, in particular, 850 nm. On the other hand, the area to which light is irradiated inside of the display unit 110 is the total reflection layer 112.

즉, 광 조사부(130)는 디스플레이부(110) 표면에 일정 광 분포 패턴(134)이 형성되고 그와 동시에 디스플레이부(110)의 내부에도 일정 광 분포 패턴(136)이 형성되도록 디스플레이부(110)에 광(132)을 조사한다. 구체적으로, 광 조사부(130)는 디스플레이부(110)의 표면 부근을 향해 광(132)을 조사함은 물론 그와 동시에 전반사 층(112)에 대해서도 광(132)을 조사한다. 디스플레이부(110)의 표면 부근에 조사되는 광(132)으로 인하여 디스플레이부(110)의 표면에 형성되는 광 분포 패턴(132)은 앞서 언급한 '광표면'으로서 형성되고, 디스플레이부(110)의 내부에 조사되는 광(132)으로 인하여 디스플레이부(110)의 내부에 형성되는 광 분포 패턴(134)은 전반사 층(112) 내에서 수많은 전반사가 발생되고 있는 상태를 의미한다. 부연하건대 디플레이부(110)의 표면에 광표면을 형성하기 위해, 광 조사부(130)는 프레스넬 렌즈(fresnel lens)와 같은 렌즈를 이용할 수 있다.That is, the light irradiator 130 may display the light distribution pattern 134 on the surface of the display 110, and at the same time, the light distribution pattern 136 may also be formed inside the display 110. ) Is irradiated with light 132. Specifically, the light irradiator 130 irradiates the light 132 toward the vicinity of the surface of the display 110 and at the same time irradiates the light 132 with respect to the total reflection layer 112. The light distribution pattern 132 formed on the surface of the display 110 due to the light 132 irradiated near the surface of the display 110 is formed as the above-described 'light surface', and the display 110 The light distribution pattern 134 formed in the display 110 due to the light 132 irradiated inside of the display unit 110 refers to a state in which a total number of total reflections are generated in the total reflection layer 112. In other words, in order to form a light surface on the surface of the display unit 110, the light irradiation unit 130 may use a lens such as a Fresnel lens (fresnel lens).

터치 센싱부(140)는 디스플레이부(110)에 대한 객체(120)의 접촉으로 인해 발생되는 '광 분포 패턴의 변화'를 감지하여, 디스플레이부(110)에 대해 이루어지는 그 접촉을 인식한다. 도 1에서 광 분포 패턴의 변화란 광 분포 패턴(132)의 변화이기도 하고 광 분포 패턴(134)의 변화이기도 하다. 여기서 광 분포 패턴(132)의 변화란 객체(120)가 디스플레이부(110) 표면에 접촉하여 광(132)의 진행이 그 접촉 지점에서 차단되고 광(132)이 그 접촉 지점에서 산란되는 것을 의미한다. 또한, 광 분포 패턴(134)의 변화란 전반사 층(112)의 내부에서 수많은 전반사 현상이 발생되고 있는 상황에서 객체(120)가 디스플레이부(110)의 표면에 접촉하여 그 접촉 지점에서 전반사가 깨지고 전반사 층(112) 내에서 그 접촉 지점으로 입사된 광이 디스플레이부(110) 외부로 이탈되는 것을 의미한다.The touch sensing unit 140 detects a 'change of the light distribution pattern' generated due to the contact of the object 120 to the display 110, and recognizes the contact made to the display 110. In FIG. 1, the change of the light distribution pattern is a change of the light distribution pattern 132 and a change of the light distribution pattern 134. Herein, the change of the light distribution pattern 132 means that the object 120 contacts the surface of the display 110 so that the progress of the light 132 is blocked at the contact point and the light 132 is scattered at the contact point. do. In addition, the change of the light distribution pattern 134 means that in a situation where a total number of total reflection phenomena occur inside the total reflection layer 112, the object 120 contacts the surface of the display unit 110 and the total reflection is broken at the contact point. The light incident to the contact point in the total reflection layer 112 is separated from the outside of the display 110.

터치 센싱부(140)는 그러한 산란되는 광 및 이탈되는 광을 감지하여, 접촉이 발생되었음을 인식함은 물론 그 접촉 지점이 어디인지까지도 인식한다.The touch sensing unit 140 senses the scattered light and the separated light, and recognizes that a contact has occurred, and also recognizes where the contact point is.

도 2는 본 발명의 제2실시예에 따른 멀티터치 센싱장치를 설명하기 위한 도면이다. 본 발명의 제2실시예에 따른 멀티터치 센싱장치는 디스플레이부(110), 프로젝팅부(118), 광 조사부(130), 및 터치 센싱부(140)를 포함한다.2 is a view for explaining a multi-touch sensing device according to a second embodiment of the present invention. The multi-touch sensing device according to the second embodiment of the present invention includes a display unit 110, a projection unit 118, a light irradiation unit 130, and a touch sensing unit 140.

디스플레이부(110), 프로젝팅부(118), 광 조사부(130)의 동작은 도 1에서 이미 설명한 바와 동일하므로 도 2에 대한 설명에서는 생략한다. 다만, 도 1에서 설명한 바와 같이 디스플레이부(110)의 표면에 대한 접촉은 다양한 형태로 이루어질 수 있는데, 도 2에서는 설명의 편의상 장애물(122)을 통한 디스플레이부(110) 표면에의 접촉과 사용자 손가락(120)을 통한 디스플레이부(110) 표면에의 접촉 모두를 의미한다고 가정한다. 즉, 도 2에서의 객체에는, 디스플레이부(110)를 조작하는 객체인 '조작 객체'와 디스플레이부(110)를 조작하지 않는 객체인 '장애 객체'가 있다. 도 2에서 사용자 손가락은 조작 객체(120)의 일 례이고, 장애물로서의 블록은 장애 객체(122)의 일 례이다.Since the operations of the display 110, the projector 118, and the light emitter 130 are the same as described above with reference to FIG. 1, the description of FIG. 2 will be omitted. However, as described with reference to FIG. 1, the contact with the surface of the display 110 may be made in various forms. In FIG. 2, the contact with the surface of the display 110 through the obstacle 122 and the user's finger are provided for convenience of description. Assume that all means contact with the surface of the display 110 through 120. That is, the objects in FIG. 2 include an “operation object” that is an object for operating the display 110 and an “obstacle object” that is an object that does not operate the display 110. In FIG. 2, the user finger is an example of the manipulation object 120, and a block as an obstacle is an example of the obstacle object 122.

터치 센싱부(140)는 디스플레이부(110)에 대한 객체들(120, 122)의 접촉으로 인해 발생되는 '광 분포 패턴의 변화'를 감지하여, 디스플레이부(110)에 대해 이루어지는 그 접촉을 인식한다. 도 2에서 광 분포 패턴의 변화란 광 분포 패턴(132)의 변화이기도 하고 광 분포 패턴(134)의 변화이기도 하다. 여기서, 광 분포 패턴(132)의 변화란 장애 객체(122)가 디스플레이부(110) 표면에 접촉하여 광(132)의 진행이 그 접촉 지점에서 차단되고 광(132)이 그 접촉 지점에서 산란되는 것을 의미한다. 또한, 광 분포 패턴(134)의 변화란 전반사 층(112)의 내부에서 수많은 전반사 현상이 발생되고 있는 상황에서 조작 객체(120)가 디스플레이부(110)의 표면에 접촉하여 그 접촉 지점에서 전반사가 깨져 전반사 층(112) 내에서 그 접촉 지점으로 입사된 광이 디스플레이부(110) 외부로 이탈되는 것을 의미한다.The touch sensing unit 140 detects a change in the light distribution pattern generated by the contact of the objects 120 and 122 with the display 110 and recognizes the contact made with the display 110. do. In FIG. 2, the change of the light distribution pattern is a change of the light distribution pattern 132 and a change of the light distribution pattern 134. Here, the change in the light distribution pattern 132 means that the obstacle object 122 is in contact with the surface of the display 110, the progress of the light 132 is blocked at the contact point and the light 132 is scattered at the contact point Means that. In addition, the change of the light distribution pattern 134 means that the total number of total reflection phenomena occurs inside the total reflection layer 112, and thus, the manipulation object 120 contacts the surface of the display unit 110 and total reflection is performed at the contact point. This means that the light incident to the contact point in the total reflection layer 112 is separated from the display 110.

터치 센싱부(140)는 그러한 산란되는 광 및 이탈되는 광을 감지하여, 접촉이 발생되었음을 인식함은 물론 그 접촉 지점이 어디인지까지도 인식한다.The touch sensing unit 140 senses the scattered light and the separated light, and recognizes that a contact has occurred, and also recognizes where the contact point is.

도 3은 본 발명의 제3실시예에 따른 멀티터치 센싱장치를 설명하기 위한 도면이다. 본 발명의 제3실시예에 따른 멀티터치 센싱장치는 디스플레이부(110), 프로젝팅부(118), 광 조사부(130), 및 터치 센싱부(140)를 포함한다.3 is a view for explaining a multi-touch sensing device according to a third embodiment of the present invention. The multi-touch sensing device according to the third embodiment of the present invention includes a display unit 110, a projection unit 118, a light irradiation unit 130, and a touch sensing unit 140.

디스플레이부(110), 프로젝팅부(118), 광 조사부(130)의 동작은 도 1에서 이미 설명한 바와 동일하므로 도 3에 대한 설명에서는 생략한다. 다만, 도 1에서 설명한 바와 같이 디스플레이부(110)의 표면에 대한 접촉은 다양한 형태로 이루어질 수 있는데, 도 3에서는 설명의 편의상 장애물(122)을 통한 디스플레이부(110) 표면에의 접촉과 사용자 손가락(120)을 통한 디스플레이부(110) 표면에의 접촉 모두를 의미한다고 가정한다. 즉, 도 3에서의 객체에는 디스플레이부(110)를 조작하는 객체인 '조작 객체'와 디스플레이부(110)를 조작하지 않는 객체인 '장애 객체'가 있다. 도 3에서 사용자 손가락은 조작 객체(120)의 일 례이고, 장애물로서의 블록은 장애 객체(122)의 일 례이다. 특히 도 3의 경우는, 장애 객체(122)들로 인해 '전 장애 영역'이 형성되어 있다.Since the operations of the display 110, the projector 118, and the light emitter 130 are the same as described above with reference to FIG. 1, the description of FIG. 3 will be omitted. However, as described with reference to FIG. 1, the contact with the surface of the display 110 may be made in various forms. In FIG. 3, for convenience of description, the contact with the surface of the display 110 through the obstacle 122 and the user's finger are illustrated. Assume that all means contact with the surface of the display 110 through 120. That is, the object in FIG. 3 includes an 'operation object' that is an object for operating the display 110 and an 'obstacle object' that is an object that does not manipulate the display 110. In FIG. 3, the user finger is an example of the manipulation object 120, and a block as an obstacle is an example of the obstacle object 122. In particular, in the case of FIG. 3, the entire obstacle area is formed due to the obstacle objects 122.

터치 센싱부(140)는 디스플레이부(110)에 대한 객체들(120, 122)의 접촉으로 인해 발생되는 '광 분포 패턴의 변화'를 감지하여, 디스플레이부(110)에 대해 이루어지는 그 접촉을 인식한다. 도 3에서 광 분포 패턴의 변화란 광 분포 패턴(132)의 변화이기도 하고 광 분포 패턴(134)의 변화이기도 하다. 여기서, 광 분포 패턴(132)의 변화란 장애 객체(122)가 디스플레이부(110)의 표면에 접촉하여 광(132)의 진행이 그 접촉 지점에서 차단되고 광(132)이 그 접촉 지점에서 산란되는 것을 의미한다. 또한, 광 분포 패턴(134)의 변화란 전반사 층(112)의 내부에서 수많은 전반사 현상이 발생되고 있는 상황에서 조작 객체(120)가 디스플레이부(110)의 표면에 접촉하여 그 접촉 지점에서 전반사가 깨져 전반사 층(112) 내에서 그 접촉 지점으로 입사된 광이 디스플레이부(110) 외부로 이탈되는 것을 의미한다.The touch sensing unit 140 detects a change in the light distribution pattern generated by the contact of the objects 120 and 122 with the display 110 and recognizes the contact made with the display 110. do. In FIG. 3, the change of the light distribution pattern is a change of the light distribution pattern 132 and a change of the light distribution pattern 134. Here, the change of the light distribution pattern 132 means that the obstacle object 122 is in contact with the surface of the display 110 so that the progress of the light 132 is blocked at the contact point and the light 132 is scattered at the contact point. It means to be. In addition, the change of the light distribution pattern 134 means that the total number of total reflection phenomena occurs inside the total reflection layer 112, and thus, the manipulation object 120 contacts the surface of the display unit 110 and total reflection is performed at the contact point. This means that the light incident to the contact point in the total reflection layer 112 is separated from the display 110.

터치 센싱부(140)는 그러한 산란되는 광 및 이탈되는 광을 감지하여, 접촉이 발생되었음을 인식함은 물론 그 접촉 지점이 어디인지까지도 인식한다.The touch sensing unit 140 senses the scattered light and the separated light, and recognizes that a contact has occurred, and also recognizes where the contact point is.

도 1 내지 도 3에 대한 상기 설명을 정리하면 다음과 같다.The above description of FIGS. 1 to 3 is as follows.

디스플레이부(110)의 표면에 디스플레이부(110)를 조작하는 객체인 '조작 객체'의 접촉과 디스플레이부(110)를 조작하지 않는 객체인 '장애 객체'의 접촉이 공존하는 경우, 터치 센싱부(140)는 디스플레이부(110)의 표면에서의 광 분포 패턴과 디스플레이부(110)의 내부에서의 광 분포 패턴 각각의 변화를 동시에 감지하고, 감지 결과를 고려하여 조작 객체의 접촉과 장애 객체의 접촉을 모두 인식한다. 한편 디스플레이부(110)의 표면에 '조작 객체'의 접촉이 '장애 객체'의 접촉의 광 분포 패턴에의 영향에 영향을 주는 경우, 터치 센싱부(140)는 디스플레이부(110) 내부에서의 광 분포 패턴의 변화를 감지하고 감지 결과를 고려하여 조작 객체의 접촉을 인식하며, 동시에 디스플레이부(110)의 표면에서의 광 분포 패턴의 변화를 감지하고 감지 결과를 고려하여 장애 객체의 접촉을 인식한다. 여기서, 조작 객체의 접촉이 장애 객체의 접촉의 디스플레이부(110) 표면에서의 광 분포 패턴에의 영향에 영향을 주는 경우는, 디스플레이부(110) 표면이 일정 두께의 광으로 덮이도록 디스플레이부(110)에 대해 조사되는 광의 진행이 장애 객체의 접촉에 의해 차단되는 경우를 포함한다.When the contact of the manipulation object, which is an object for operating the display 110, and the contact of the obstacle object, which is an object not for operating the display 110, coexist on the surface of the display 110, the touch sensing unit 140 simultaneously detects a change in the light distribution pattern on the surface of the display 110 and each of the light distribution patterns in the inside of the display 110, and considers the result of the detection of the contact of the manipulation object and the obstacle object. Recognize all contacts. On the other hand, when the contact of the 'manipulation object' on the surface of the display 110 affects the influence of the light distribution pattern of the contact of the 'obstacle object', the touch sensing unit 140 in the display 110 Detect the change of the light distribution pattern and recognize the touch of the manipulation object in consideration of the detection result, and at the same time detect the change of the light distribution pattern on the surface of the display 110 and recognize the touch of the obstacle object in consideration of the detection result. do. Here, when the contact of the manipulation object affects the influence of the contact of the obstacle object on the light distribution pattern on the surface of the display 110, the display unit 110 may be covered with light having a predetermined thickness. Propagation of light irradiated with respect to 110) is blocked by contact of the obstacle object.

도 4는 본 발명의 적어도 일 실시예에 따른 광 조사부의 일 구현례를 나타낸 도면이다. 도 4에 도시된 바와 같이, 광 조사부(110)는 복수의 광 레이저 빔들을 서로 다른 방향을 향해 조사하고 그 광 레이저 빔들은 그 복수의 서로 다른 광 분포 패턴들을 형성한다. 여기서, 광 레이저 빔이란 앞서 언급한 '광 조사부(130)가 조사하는 광'을 의미한다.4 is a diagram illustrating an implementation example of a light irradiation part according to at least one embodiment of the present invention. As shown in FIG. 4, the light irradiator 110 irradiates a plurality of light laser beams in different directions, and the light laser beams form the plurality of different light distribution patterns. Here, the optical laser beam means the above-mentioned 'light irradiated by the light irradiation unit 130'.

이를 위해 광 조사부(110)는 복수의 광 조사 유닛들(130-1, 130-2, 130-3)로 구현될 수 있고, 광 조사 유닛들 각각은 광 레이저 빔을 조사하며, 광 조사 유닛들 각각의 광 조사 방향은 서로 다르다.To this end, the light irradiation unit 110 may be implemented as a plurality of light irradiation units 130-1, 130-2, and 130-3, each of the light irradiation units irradiates a light laser beam, and the light irradiation units Each light irradiation direction is different from each other.

도 5는 본 발명의 적어도 일 실시예에 따른 멀티터치 센싱장치의 동작을 설명하기 위한 참고도이며 도 1에 대해 부연 설명하는 도면이다. 도 5에 도시된 바에서, X-Laser plane은 앞서 언급한 광 분포 패턴(132)을 의미하고, X-Laser plane line이란 그 X-Laser plane이 형성되는 방향을 의미한다. 또한, Y-Laser plane은 앞서 언급한 광 분포 패턴(134)을 의미하고, Y-Laser plane line이란 그 Y-Laser plane에서 발생되는 '전반사 깨짐' 현상으로 인해 디스플레이부(110)를 이탈하는 그 깨어진 광의 진행 방향을 나타내는 가상의 선을 의미한다.FIG. 5 is a reference diagram for explaining an operation of a multi-touch sensing device according to at least one embodiment of the present invention, and FIG. In FIG. 5, the X-Laser plane means the light distribution pattern 132 mentioned above, and the X-Laser plane line means the direction in which the X-Laser plane is formed. In addition, the Y-Laser plane means the above-described light distribution pattern 134, and the Y-Laser plane line is a part that leaves the display unit 110 due to the 'total reflection breakage' occurring in the Y-Laser plane. It means an imaginary line indicating the traveling direction of the broken light.

도 6은 본 발명의 적어도 일 실시예에 따른 멀티터치 센싱방법을 나타내는 플로우챠트이다.6 is a flowchart illustrating a multi-touch sensing method according to at least one embodiment of the present invention.

광 조사부(130)는 일정 영상을 디스플레이 가능하며 표면에 일정 객체와 접촉 가능한 디스플레이부(110)의 표면이 일정 두께로 광으로 덮이면서 동시에 디스플레이부(110)의 내부에 전반사가 발생되도록, 디스플레이부(110)에 광을 조사하여 디스플레이부(110)의 표면과 내부에 일정한 광 분포 패턴을 형성한다(제610 단계).The light irradiator 130 may display a predetermined image, and the surface of the display 110, which may be in contact with a certain object on the surface, may be covered with light with a predetermined thickness, and at the same time, total reflection may occur inside the display 110. Light is irradiated to the 110 to form a uniform light distribution pattern on the surface and the inside of the display 110 (operation 610).

제610 단계 후에, 터치 센싱부(140)는 디스플레이부(110)에 대한 객체의 접촉으로 인해 발생되는 광 분포 패턴의 변화를 감지하여, 디스플레이부(110)에 대해 이루어지는 그 접촉을 인식한다(제620 단계).After operation 610, the touch sensing unit 140 detects a change in the light distribution pattern generated due to the contact of the object with the display 110 and recognizes the contact made with the display 110. Step 620).

이제까지 본 발명을 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로, 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점들은 본 발명에 포함된 것으로 해석되어야 할 것이다.
So far, the present invention has been described with reference to the preferred embodiments. Those skilled in the art will appreciate that the present invention can be implemented in a modified form without departing from the essential features of the present invention. Therefore, the disclosed embodiments should be considered in descriptive sense only and not for purposes of limitation. The scope of the present invention is shown in the claims rather than the foregoing description, and all differences within the scope will be construed as being included in the present invention.

Claims (17)

일정 영상을 디스플레이 가능하며 표면에 일정 객체와 접촉 가능한 디스플레이부;
상기 디스플레이부의 측면에서 상기 디스플레이부로 광을 조사하되, 상기 디스플레이부의 표면이 일정 두께의 광으로 덮이도록 상기 디스플레이부의 표면 위로 광을 진행시키고 동시에 상기 디스플레이부의 내부에서는 전반사가 일어나도록 상기 디스플레이부의 내부로 광을 진행시켜, 상기 디스플레이부의 표면과 상기 디스플레이부의 내부에 각각 일정한 광 분포 패턴을 형성하는 광 조사부; 및
상기 디스플레이부에 대한 상기 객체의 접촉으로 인해 발생되는 상기 광 분포 패턴의 변화를 감지하여 상기 디스플레이부에 대해 이루어지는 접촉을 인식하는 터치 센싱부를 포함하고,
상기 디스플레이부의 표면에 상기 디스플레이부를 조작하는 상기 객체인 조작 객체의 접촉과 상기 디스플레이부를 조작하지 않는 상기 객체인 장애 객체의 접촉이 공존하는 경우, 상기 터치 센싱부는 상기 디스플레이부의 표면에서의 상기 광 분포 패턴과 상기 디스플레이부의 내부에서의 상기 광 분포 패턴 각각의 변화를 동시에 감지하고, 감지 결과를 고려하여 상기 조작 객체의 접촉 및 상기 장애 객체의 접촉을 모두 인식하는 것을 특징으로 하는 멀티 터치 센싱 장치.A display unit capable of displaying a predetermined image and contacting a predetermined object on a surface;
Irradiate light from the side of the display unit to the display unit, the light propagates over the surface of the display unit so that the surface of the display unit is covered with light of a predetermined thickness, and at the same time, the light is emitted into the display unit such that total reflection occurs inside the display unit. A light irradiation unit configured to form a uniform light distribution pattern on the surface of the display unit and the inside of the display unit, respectively; And
And a touch sensing unit configured to recognize a contact made to the display unit by sensing a change in the light distribution pattern generated by the contact of the object with the display unit.
When the contact of the manipulation object which is the object which manipulates the display unit and the contact of the obstacle object which is the object which does not manipulate the display unit coexists on the surface of the display unit, the touch sensing unit is the light distribution pattern on the surface of the display unit. And simultaneously detecting a change in each of the light distribution patterns in the display unit and recognizing both the touch of the manipulation object and the touch of the obstacle object in consideration of the detection result. 삭제delete 제1 항에 있어서,
상기 디스플레이부의 표면에 상기 조작 객체의 접촉이 상기 장애 객체의 접촉의 상기 광 분포 패턴에의 영향에 영향을 주는 경우, 상기 터치 센싱부는 상기 디스플레이부 내부에서의 상기 광 분포 패턴의 변화를 감지하고 감지 결과를 고려하여 상기 조작 객체의 접촉을 인식하며, 동시에 상기 디스플레이부 표면에서의 상기 광 분포 패턴의 변화를 감지하고 감지된 결과를 고려하여 상기 장애 객체의 접촉을 인식하는 것을 특징으로 하는 멀티 터치 센싱 장치.The method according to claim 1,
When the contact of the manipulation object on the surface of the display unit affects the influence of the contact of the obstacle object on the light distribution pattern, the touch sensing unit senses and detects a change in the light distribution pattern inside the display unit. The touch of the manipulation object is recognized in consideration of a result, and at the same time, the change of the light distribution pattern on the surface of the display unit is sensed, and the touch of the obstacle object is recognized in consideration of the detected result. Device. 제3 항에 있어서,
상기 조작 객체의 접촉이 상기 장애 객체의 접촉의 상기 디스플레이부 표면에서의 상기 광 분포 패턴에의 영향에 영향을 주는 경우는, 상기 디스플레이부의 표면이 일정 두께의 광으로 덮이도록 상기 디스플레이부의 표면 위로 진행되는 광이 상기 장애 객체의 접촉에 의해 차단되는 경우를 포함한 것을 특징으로 하는 멀티 터치 센싱 장치.The method of claim 3,
When the contact of the manipulation object affects the influence of the contact of the obstacle object on the light distribution pattern on the surface of the display unit, the surface of the display unit is covered over the surface of the display unit so that the surface of the display unit is covered with light of a predetermined thickness. Multi-touch sensing device comprising a case where the light is blocked by the contact of the obstacle object. 제1 항에 있어서,
상기 광 조사부는 복수의 광 레이저 빔들을 서로 다른 방향을 향해 조사하고 상기 광 레이저 빔들은 복수의 서로 다른 광 분포 패턴들을 형성하는 것을 특징으로 하는 멀티 터치 센싱 장치.The method according to claim 1,
And the light irradiator irradiates a plurality of optical laser beams in different directions, and the optical laser beams form a plurality of different light distribution patterns. 제1 항에 있어서,
상기 광은 적외선 레이저 광이고 상기 디스플레이부는 아크릴 매질을 포함한 하나 이상의 매질들 각각이 하나의 층을 이루는 적층 구조로 구성되고, 상기 아크릴 매질로 구성된 영역의 표면이 상기 디스플레이부의 표면이며, 상기 디스플레이부 중 내부에 상기 광이 조사되는 영역은 상기 아크릴 매질로 구성된 영역인 것을 특징으로 하는 멀티 터치 센싱 장치.The method according to claim 1,
The light is an infrared laser light and the display unit is composed of a laminated structure in which each of one or more media including an acrylic medium forms one layer, and the surface of the area composed of the acrylic medium is the surface of the display unit, and among the display units The region to which the light is irradiated therein is a multi-touch sensing device, characterized in that the region consisting of the acrylic medium. 제6 항에 있어서, 상기 디스플레이부는
일정 투명도 이상의 투명도를 갖는 유리 매질로 구성된 층;
상기 유리 매질의 상부 표면에 하부 표면이 접촉하는 분산매질로 구성된 층; 및
상기 분산 매질의 상부 표면에 하부 표면이 접촉하며 아크릴 매질로 구성된 층을 포함하는 것을 특징으로 하는 멀티 터치 센싱 장치.The method of claim 6, wherein the display unit
A layer consisting of a glass medium having a transparency of at least a certain transparency;
A layer consisting of a dispersion medium having a lower surface in contact with an upper surface of the glass medium; And
And a lower surface in contact with an upper surface of the dispersion medium and comprising a layer of acrylic medium. (a) 일정 영상을 디스플레이 가능하며 표면에 일정 객체와 접촉 가능한 디스플레이부의 측면에서 상기 디스플레이부로 광을 조사하되, 상기 디스플레이부의 표면이 일정 두께의 광으로 덮이도록 상기 디스플레이부의 표면 위로 광을 진행시키고 동시에 상기 디스플레이부의 내부에서는 전반사가 일어나도록 상기 디스플레이부의 내부로 광을 진행시켜, 상기 디스플레이부의 표면과 상기 디스플레이부의 내부에 각각 일정한 광 분포 패턴을 형성하는 단계; 및
(b) 상기 디스플레이부에 대한 상기 객체의 접촉으로 인해 발생되는 상기 광 분포 패턴의 변화를 감지하여 상기 디스플레이부에 대해 이루어지는 접촉을 인식하는 단계를 포함하고,
상기 디스플레이부의 표면에 상기 디스플레이부를 조작하는 상기 객체인 조작 객체의 접촉과 상기 디스플레이부를 조작하지 않는 상기 객체인 장애 객체의 접촉이 공존하는 경우 상기 (b) 단계는 상기 디스플레이부의 표면에서의 상기 광 분포 패턴과 상기 디스플레이부의 내부에서의 상기 광 분포 패턴 각각의 변화를 동시에 감지하고, 감지 결과를 고려하여 상기 조작 객체의 접촉 및 상기 장애 객체의 접촉을 모두 인식하는 것을 특징으로 하는 멀티 터치 센싱 방법.(a) irradiating light to the display unit from a side of the display unit capable of displaying a predetermined image and contacting a certain object on a surface thereof, while advancing light onto the surface of the display unit such that the surface of the display unit is covered with light of a predetermined thickness; Advancing light into the display unit such that total reflection occurs inside the display unit to form a uniform light distribution pattern on the surface of the display unit and the inside of the display unit, respectively; And
(b) detecting a change in the light distribution pattern caused by the contact of the object with the display unit and recognizing a contact made to the display unit;
(B) the light distribution on the surface of the display unit when the contact of the manipulation object which is the object operating the display unit and the contact of the obstacle object which is the object not operating the display unit coexist on the surface of the display unit. And simultaneously detecting a pattern and a change in each of the light distribution patterns in the display, and recognizing both a touch of the manipulation object and a touch of the obstacle object in consideration of a detection result. 삭제delete 제8 항에 있어서,
상기 디스플레이부의 표면에 상기 조작 객체의 접촉이 상기 장애 객체의 접촉의 상기 광 분포 패턴에의 영향에 영향을 주는 경우 상기 (b) 단계는 상기 디스플레이부 내부에서의 상기 광 분포 패턴의 변화를 감지하고 감지 결과를 고려하여 상기 조작 객체의 접촉을 인식하며, 동시에 상기 디스플레이부 표면에서의 상기 광 분포 패턴의 변화를 감지하고 감지된 결과를 고려하여 상기 장애 객체의 접촉을 인식하는 것을 특징으로 하는 멀티 터치 센싱 방법.The method of claim 8,
When the contact of the manipulation object on the surface of the display unit affects the influence of the contact of the obstacle object on the light distribution pattern, the step (b) detects a change in the light distribution pattern inside the display unit; The touch of the manipulation object is recognized in consideration of a sensing result, and at the same time, the change of the light distribution pattern on the surface of the display unit is sensed, and the touch of the obstacle object is recognized in consideration of the sensed result. Sensing method. 제10 항에 있어서,
상기 조작 객체의 접촉이 상기 장애 객체의 접촉의 상기 디스플레이부 표면에서의 상기 광 분포 패턴에의 영향에 영향을 주는 경우는, 상기 디스플레이부 표면이 일정 두께의 광으로 덮이도록 상기 디스플레이부의 표면 위로 진행되는 광이 상기 장애 객체의 접촉에 의해 차단되는 경우를 포함한 것을 특징으로 하는 멀티 터치 센싱 방법.The method of claim 10,
When the contact of the manipulation object affects the influence of the contact of the obstacle object on the light distribution pattern on the surface of the display unit, the display unit surface proceeds over the surface of the display unit such that the surface of the display unit is covered with a predetermined thickness of light. Multi-touch sensing method comprising the case that the light is blocked by the contact of the obstacle object. 제8 항에 있어서,
상기 (a) 단계는 복수의 광 레이저 빔들을 서로 다른 방향을 향해 조사하고, 상기 광 레이저 빔들은 복수의 서로 다른 광 분포 패턴들을 형성하는 것을 특징으로 하는 멀티 터치 센싱 방법.The method of claim 8,
In the step (a), the plurality of optical laser beams are irradiated in different directions, and the optical laser beams form a plurality of different light distribution patterns. 제8 항에 있어서,
상기 광은 적외선 레이저 광이고 상기 디스플레이부는 아크릴 매질을 포함한 하나 이상의 매질들 각각이 하나의 층을 이루는 적층 구조로 구성되고, 상기 아크릴 매질로 구성된 영역의 표면이 상기 디스플레이부의 표면이며, 상기 디스플레이부 중 내부에 상기 광이 조사되는 영역은 상기 아크릴 매질로 구성된 영역인 것을 특징으로 하는 멀티 터치 센싱 방법.The method of claim 8,
The light is an infrared laser light and the display unit is composed of a laminated structure in which each of one or more media including an acrylic medium forms one layer, and the surface of the area composed of the acrylic medium is the surface of the display unit, and among the display units The region to which the light is irradiated therein is a multi-touch sensing method, characterized in that the region consisting of the acrylic medium. 제13 항에 있어서, 상기 디스플레이부는
일정 투명도 이상의 투명도를 갖는 유리 매질로 구성된 층;
상기 유리 매질의 상부 표면에 하부 표면이 접촉하는 분산매질로 구성된 층; 및
상기 분산 매질의 상부 표면에 하부 표면이 접촉하며 아크릴 매질로 구성된 층을 포함하는 것을 특징으로 하는 멀티 터치 센싱 방법.The method of claim 13, wherein the display unit
A layer consisting of a glass medium having a transparency of at least a certain transparency;
A layer consisting of a dispersion medium having a lower surface in contact with an upper surface of the glass medium; And
And a lower surface in contact with the upper surface of the dispersion medium and comprising a layer of acrylic medium. 일정 영상을 프로젝팅하는 프로젝팅부;
상기 프로젝팅된 일정 영상을 디스플레이 가능하며 표면에 일정 객체와 접촉 가능하고, 서로 다른 매질의 하나 이상의 층들로 구성된 적층 구조를 갖는 디스플레이부;
상기 디스플레이부의 측면에서 상기 디스플레이부로 광을 조사하되, 상기 디스플레이부의 표면이 일정 두께의 광으로 덮이도록 상기 디스플레이부의 표면 위로 광을 진행시키고 동시에 상기 층들 중 상기 디스플레이부의 표면 부위의 층인 전반사 층의 내부에서 전반사가 일어나도록 상기 전반사 층의 내부로 광을 진행시켜, 상기 디스플레이부의 표면과 상기 전반사 층의 내부에 각각 일정한 광 분포 패턴을 형성하는 광 조사부; 및
상기 디스플레이부에 대한 상기 객체의 접촉으로 인해 발생되는 상기 광 분포 패턴의 변화를 감지하여 상기 디스플레이부에 대해 이루어지는 접촉을 인식하는 터치 센싱부를 포함하고,
상기 디스플레이부의 표면에 상기 디스플레이부를 조작하는 상기 객체인 조작 객체의 접촉과 상기 디스플레이부를 조작하지 않는 상기 객체인 장애 객체의 접촉이 공존하는 경우, 상기 터치 센싱부는 상기 디스플레이부의 표면에서의 상기 광 분포 패턴 및 상기 전반사 층의 내부에서의 상기 광 분포 패턴 각각의 변화를 동시에 감지하고, 감지 결과를 고려하여 상기 조작 객체의 접촉 및 상기 장애 객체의 접촉을 모두 인식하는 것을 특징으로 하는 멀티 터치 센싱 시스템.A projection unit for projecting a certain image;
A display unit capable of displaying the projected constant image and being in contact with a predetermined object on a surface, the display unit having a laminated structure composed of one or more layers of different media;
The light is irradiated from the side of the display unit to the display unit, and the light is advanced to the surface of the display unit so that the surface of the display unit is covered with light of a predetermined thickness and at the same time inside the total reflection layer which is a layer of the surface portion of the display unit. A light irradiation part which propagates light to the inside of the total reflection layer so that total reflection occurs, and forms a uniform light distribution pattern on the surface of the display unit and the inside of the total reflection layer; And
And a touch sensing unit configured to recognize a contact made to the display unit by sensing a change in the light distribution pattern generated by the contact of the object with the display unit.
When the contact of the manipulation object which is the object which manipulates the display unit and the contact of the obstacle object which is the object which does not manipulate the display unit coexists on the surface of the display unit, the touch sensing unit is the light distribution pattern on the surface of the display unit. And simultaneously detecting a change in each of the light distribution patterns within the total reflection layer, and recognizing both a touch of the manipulation object and a touch of the obstacle object in consideration of a detection result. 삭제delete 제15 항에 있어서,
상기 디스플레이부의 표면에 상기 조작 객체의 접촉이 상기 장애 객체의 접촉의 상기 광 분포 패턴에의 영향에 영향을 주는 경우, 상기 터치 센싱부는 상기 전반사 층의 내부에서의 상기 광 분포 패턴의 변화를 감지하고 감지 결과를 고려하여 상기 조작 객체의 접촉을 인식하며, 동시에 상기 디스플레이부 표면에서의 상기 광 분포 패턴의 변화를 감지하고 감지 결과를 고려하여 상기 장애 객체의 접촉을 인식하는 것을 특징으로 하는 멀티 터치 센싱 시스템.
The method of claim 15,
When the contact of the manipulation object on the surface of the display unit affects the influence of the contact of the obstacle object on the light distribution pattern, the touch sensing unit senses a change in the light distribution pattern inside the total reflection layer. Multi-touch sensing characterized in that it recognizes the touch of the operation object in consideration of the detection result, and at the same time detects the change of the light distribution pattern on the surface of the display unit and recognizes the touch of the obstacle object in consideration of the detection result. system.
KR1020110007537A 2011-01-25 2011-01-25 Multi touch sensing apparatus and system and multi touch sensing method for the same KR101148027B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110007537A KR101148027B1 (en) 2011-01-25 2011-01-25 Multi touch sensing apparatus and system and multi touch sensing method for the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110007537A KR101148027B1 (en) 2011-01-25 2011-01-25 Multi touch sensing apparatus and system and multi touch sensing method for the same

Publications (1)

Publication Number Publication Date
KR101148027B1 true KR101148027B1 (en) 2012-05-24

Family

ID=46272429

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110007537A KR101148027B1 (en) 2011-01-25 2011-01-25 Multi touch sensing apparatus and system and multi touch sensing method for the same

Country Status (1)

Country Link
KR (1) KR101148027B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090060283A (en) * 2006-08-03 2009-06-11 퍼셉티브 픽셀 인코포레이티드 Multi touch sensing display through frustrated total internal reflection

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090060283A (en) * 2006-08-03 2009-06-11 퍼셉티브 픽셀 인코포레이티드 Multi touch sensing display through frustrated total internal reflection

Similar Documents

Publication Publication Date Title
US10324566B2 (en) Enhanced interaction touch system
US9626043B2 (en) Optical touch system and method for optical touch location
EP2419812B1 (en) Optical touch screen systems using reflected light
US10606414B2 (en) Eraser for touch displays
TWI552055B (en) Light guide panel including diffraction gratings
US10496227B2 (en) Optical touch system comprising means for projecting and detecting light beams above and inside a transmissive panel
US9207800B1 (en) Integrated light guide and touch screen frame and multi-touch determination method
JP5346081B2 (en) Multi-touch touch screen with pen tracking
TW201005606A (en) Detecting the locations of a plurality of objects on a touch surface
JP2019053749A (en) Display and non-contact input device using the same
US20150317034A1 (en) Water-immune ftir touch screen
US20110216041A1 (en) Touch panel and touch position detection method of touch panel
KR101789906B1 (en) Optical touch screens
KR20100066671A (en) Touch display apparatus
US20150378463A1 (en) Electronic device for sensing 2d and 3d touch and method for controlling the same
TWI439906B (en) Sensing system
KR101148027B1 (en) Multi touch sensing apparatus and system and multi touch sensing method for the same
TWM398155U (en) Optical touch system
KR101397938B1 (en) Touch pannel and pointing detection apparatus having the pannel
TW201516806A (en) Three-dimension touch apparatus
JP5856357B1 (en) Non-contact input device and method
KR101579466B1 (en) Electronic device for sensing 2d and 3d touch and method for controlling the same
KR20120012895A (en) Method for judgement of opening time of deciphering of touch-position
CN109032430B (en) Optical touch panel device
KR20150049106A (en) Touch scrren device having double scan and method for touch sensing using the same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150429

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160519

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee