KR20060105716A - Image shutter based virtual touch screen system and method - Google Patents
Image shutter based virtual touch screen system and method Download PDFInfo
- Publication number
- KR20060105716A KR20060105716A KR1020060089848A KR20060089848A KR20060105716A KR 20060105716 A KR20060105716 A KR 20060105716A KR 1020060089848 A KR1020060089848 A KR 1020060089848A KR 20060089848 A KR20060089848 A KR 20060089848A KR 20060105716 A KR20060105716 A KR 20060105716A
- Authority
- KR
- South Korea
- Prior art keywords
- image
- shutter
- user
- output
- touch screen
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Position Input By Displaying (AREA)
Abstract
본 발명은 터치스크린 없이도 터치스크린 기능을 수행하는 영상셔터를 이용한 가상 터치스크린장치 및 방법에 관한 것이다. 본 발명에 의해 빔프로젝터의 영상에서도 터치스크린 기능을 구현할 수 있다. The present invention relates to a virtual touch screen apparatus and method using an image shutter that performs a touch screen function without a touch screen. According to the present invention, a touch screen function can be implemented even in an image of a beam projector.
영상셔터를 이용한 가상 터치스크린 시스템은 영상셔터(11), 출력부(12), 입력부(13), 처리부(14)로 구성된다. 영상셔터(11)는 출력부에서 출력되는 영상을 기 설정된 간격동안 출력을 차단하는 역할을 수행하고, 출력부(12)는 처리부에서 전달된 정보(영상 및 소리)를 출력하는 역할을 수행한다. 입력부(13)는 사용자의 의도된 신호(사용자 움직임이나 소리)를 감지하여 처리부로 입력하는 역할을 수행하고, 처리부(14)는 입력부로부터 전달받은 정보(사용자 움직임이나 소리)를 분석하여 사용자의 의도를 파악하고, 이를 반영한 결과인 영상 및 소리를 출력부로 전달하는 역할을 수행한다. The virtual touch screen system using the image shutter includes an image shutter 11, an output unit 12, an input unit 13, and a processing unit 14. The image shutter 11 blocks the output of the image output from the output unit for a predetermined interval, and the output unit 12 serves to output the information (image and sound) transmitted from the processing unit. The input unit 13 detects a user's intended signal (user's motion or sound) and inputs it to the processor. The processor 14 analyzes the information (user's motion or sound) received from the input unit and the user's intention. It identifies and delivers the image and sound to the output.
이러한 영상셔터, 출력부, 입력부, 처리부를 포함하는 영상셔터를 이용한 가상 터치스크린 시스템은 출력부에서 출력되는 영상 또는 소리를 사용자의 의도에 의해 제어할 수 있는 시스템이다.The virtual touch screen system using the image shutter including the image shutter, the output unit, the input unit, and the processing unit is a system capable of controlling the image or sound output from the output unit according to a user's intention.
가상 터치스크린, 동작인식, 영상처리, 카메라, 대화형시스템 Virtual touch screen, motion recognition, image processing, camera, interactive system
Description
도 1은 영상셔터 기반의 가상 터치스크린 시스템의 구성도.1 is a block diagram of a virtual shutter screen system based on the image shutter.
도 2는 영상셔터가 활성화/비활성화 상태에 따른 동작 상세도.Figure 2 is a detailed operation of the image shutter according to the enabled / disabled state.
도 3은 사용자 신체를 사용한 영상셔터 기반의 가상 터치스크린시스템의 실시 예에 따른 시스템 구성도.3 is a system configuration diagram according to an embodiment of an image shutter-based virtual touch screen system using a user's body.
도 4는 레이저 포인터를 사용한 영상셔터 기반의 가상 터치스크린시스템의 실시 예에 따른 시스템 구성도.4 is a system configuration diagram according to an embodiment of an image shutter-based virtual touch screen system using a laser pointer.
도 5는 후면스크린을 채용한 영상셔터 기반의 가상 터치스크린시스템의 실시 예에 따른 시스템 구성도.5 is a system configuration diagram according to an embodiment of an image shutter-based virtual touch screen system employing a rear screen.
빔프로젝터의 영상을 사용자가 직접 터치함으로 상호작용을 일으킬 수 있는 시스템을 "가상 터치스크린" 이라 한다. 이 시스템은 사용자의 움직임을 감지하여 출력영상에 피드백 시키는 역할을 수행한다. 즉 사용자가 출력된 영상에 있는 버튼이나 특정물체에 근접 혹은 교차하는 것만으로 마우스 입력과 동일한 효과를 주어 빔프로젝터의 영상을 사용자가 제어할 수 있다. A system that can interact with a user by directly touching the image of the beam projector is called a "virtual touch screen." This system detects user's movement and feeds back the output image. In other words, the user can control the image of the beam projector by giving the same effect as a mouse input by merely approaching or crossing a button or a specific object in the output image.
가상 터치스크린의 종래기술로는 "Video image based control system" (미국특허 5,534,917)와 "대화형 비디오 디스플레이 시스템"(출원번호 10-2003-7015990, 2004.4.8 공개) "체감형 게임용 화상처리 방법 및 이를 이용한 게임방법" (출원번호 10-2004-0072114, 2006.3.14. 공개)와 "인터액티브 프레젠테이션 시스템"(출원번호10-2004-0002700, 2005.7.19. 공개) 등이 있다.Prior arts of virtual touch screens include "Video image based control system" (US Pat. No. 5,534,917) and "Interactive video display system" (Application No. 10-2003-7015990, published on April 4, 2004). How to play this game "(Application No. 10-2004-0072114, published on March 4, 2006) and" Interactive Presentation System "(Application No. 10-2004-0002700, published on July 19, 2005).
가상 터치스크린 시스템의 핵심기술은 빔프로젝터의 출력영상에 사용자가 어떠한 작용을 하는 지를 판단하기 위해서 빔프로젝터의 출력영상과 빔프로젝터의 출력영상에 피드백을 주기 위한 사용자의 영상을 분리하는 기술이다. The core technology of the virtual touch screen system is a technology that separates the user's image to give feedback to the output image of the beam projector and the output image of the beam projector in order to determine how the user acts on the output image of the beam projector.
종래에는 사용자의 영상을 분리하기 위해 파장이 다른 광원을 이용하였다. 즉 파장이 다른 광원(예: 적외선램프)을 설치하여 사용자에게 조사하고 파장이 다른 광원 촬영기(예: 적외선 카메라)로 촬영을 하여 출력영상과 사용자 영상을 분리하였다.Conventionally, light sources having different wavelengths are used to separate an image of a user. That is, a light source having different wavelengths (eg, an infrared lamp) was installed and irradiated to the user, and the output image and the user image were separated by photographing with a light source camera having a different wavelength (eg, an infrared camera).
이러한 종래기술의 단점은 사용자의 활동을 정확히 감지하기 위해 사용자에게 조사되는 광원이 일정한 각도와 거리를 유지해야만 하고, 시스템의 주위에 태양광이 비칠 경우 빛의 간섭을 받아 정확도가 현저히 떨어지며, 사용자 영상을 단색 으로 처리할 수밖에 없는 단점이 있었다. The disadvantage of this prior art is that in order to accurately detect the user's activity, the light source irradiated to the user must maintain a constant angle and distance, and when the sunlight shines around the system, the accuracy is significantly reduced due to the interference of light, and the user's image There was a disadvantage that can only be treated as a single color.
본 발명은 이러한 단점을 개선한 영상셔터를 이용한 가상 터치스크린 시스템 및 방법에 관한 것이다. The present invention relates to a virtual touch screen system and method using an image shutter that improves these disadvantages.
본 발명은 빔프로젝터의 출력영상과 이 출력영상에 피드백을 주는 사용자 영상을 분리하기 위하여 영상셔터를 이용하였다. 즉 영상셔터가 활성화된 순간에는 출력되는 영상이 차단되므로 이 순간에 사용자 영상만을 시스템에서 감지하는 가상 터치스크린 시스템 및 방법이다. In the present invention, an image shutter is used to separate an output image of a beam projector and a user image giving feedback to the output image. That is, since the output image is blocked at the moment the image shutter is activated, the virtual touch screen system and method detects only the user image in the system at this moment.
도 1은 영상셔터를 이용한 가상 터치스크린 시스템으로 영상셔터(11), 출력부(12), 입력부(13), 처리부(14), 스크린(15) 등으로 구성된다.1 is a virtual touch screen system using an image shutter and includes an
영상셔터(11)는 출력부에서 출력되는 영상을 기 설정된 간격동안 출력을 차단하는 역할-영상셔터를 이용해서 빔프로젝터의 출력영상을 순간적으로 차단할지라도 눈의 잔상이 메워줌으로 사람이 느낄 수가 없으므로 영상셔터가 동작해도 사람은 지속적으로 영상이 주사되는 것으로 인식한다. 이러한 특징에 의해 영상셔터를 이용한 가상 터치스크린 시스템은 출력부에서 출력되는 영상을 사용자의 의도에 의해 제어할 수 있는 것이다-을 수행하는 것으로 기계식 셔터, 전자식 셔터, 액정 셔터 등 다양한 방식이 가능하다. The
출력부(12)는 처리부에서 전달된 정보(영상 및 소리)를 출력하는 역할을 수행하는 것으로 빔프로젝터가 예로 될 수 있다.The
입력부(13)는 사용자의 의도된 신호(사용자 움직임, 색깔, 소리 등)를 감지하여 처리부로 입력하는 역할을 수행하는 것으로 영상을 감지하는 카메라와 소리를 감지하는 마이크로 세부적으로 구성된다.The
처리부(14)는 입력부로부터 전달받은 정보를 기 설정된 처리과정에 따라 분석하여 사용자의 의도를 파악하고, 이를 반영한 결과인 영상 및 소리를 출력부로 전달하는 역할을 수행한다.The
도 2는 가상 터치스크린 시스템의 영상셔터의 동작원리를 설명하기 위한 것이다. 2 illustrates an operation principle of an image shutter of a virtual touch screen system.
영상셔터(21)는 입력부(23)에 포함된 카메라가 사용자를 촬영하는 순간에 출력부에서 출력되는 영상을 차단하는데, 도 2-1은 영상셔터(21)가 개방된 상태에서 출력부에서 출력되는 영상을 차단하지 않은 상태를 나타내며, 도 2-2는 영상셔터(21)가 활성화되어 출력부에서 출력되는 영상을 차단함과 동시에 입력부의 카메라가 이미지를 촬영하는 상태를 나타내고 있다. The
영상셔터를 이용한 가상 터치스크린 동작 방법은 다음과 같은 단계로 구성된다.The virtual touch screen operation method using the image shutter is composed of the following steps.
영상셔터가 비활성화 상태에서 출력부에서 영상(또는 영상 및 소리)이 출력되는 단계 1과Step 1 and the video (or video and sound) is output from the output unit when the image shutter is inactive
영상셔터가 활성화 상태에서 출력부에서 출력되는 영상을 차단하는 단계 2와Step 2 of blocking the image output from the output unit with the image shutter is activated
영상셔터가 활성화 상태에서 입력부가 사용자의 의도된 신호를 감지(사용자의 이미지 촬영 또는 사용자의 음성 인식 또는 사용자에 의해 발생한 소리 또는 사용자에 의한 레이저포인터의 포인트를 인식)하는 단계 3과(이때 촬영되는 이미지는 단색 이미지 또는 컬러 이미지임),When the image shutter is activated, the input unit detects the user's intended signal (receiving the image of the user or recognizing the user's voice or the sound generated by the user or the point of the laser pointer by the user). Image is a monochrome image or a color image),
입력부에서 감지된 사용자의 의도된 신호를 처리부로 전송하여 이를 분석하는 단계 4와,Step 4 of transmitting the intended signal of the user detected by the input unit to the processing unit and analyzing it;
단계 4의 분석결과에 따라 기 설정된 처리절차를 수행하여 그 결과를 출력부로 전달하는 단계 5로 구성되며, 이후 단계 1~5가 반복되어 수행된다.According to the analysis result of step 4 consists of step 5 to perform a predetermined processing procedure and deliver the result to the output unit, and then steps 1 to 5 are repeated.
도 3은 사용자 신체에 의한 가상 터치스크린을 제어하는 방법을 설명하기 위한 그림이다. 그림에서는 사용자(37)가 스크린(35)에 투영된 영상중 특정 객체(36)를 터치하는 경우로 보이나, 실제적으로는 출력영상에 직접 터치를 할 수는 없고, 출력영상의 특정 범위(또는 특정좌표)중에 사용자의 손이 위치하게 되면, 가상 터치스크린 시스템은 특정 범위에 있는 출력영상의 객체를 터치한 것으로 인지를 하게 되는 것이다. 이를 다시 설명하면, 가상 터치스크린 시스템의 입력부는 영상셔터가 활성화된 순간에 스크린(35)과 사용자(37)을 촬영하고(영상셔터가 활성화되어 있는 순간에는 출력부의 출력영상은 차단되어 있으므로 촬영되지 않음), 처리부는 스크린(35)을 기준으로 좌표화하여 사용자의 신체가 스크린상의 어떤 범위에 있는 지를 판단하고, 기 설정된 절차대로 수행된다. 예를 들어 사용자가 공을 터치하면 공이 터져버린다는 설정이 되어 있다면, 스크린을 기준으로 사용자의 손의 위치가 출력영상물의 공의 객체의 범위 내에 있다면 처리부는 공이 터지는 영상을 출력부로 전달하고 출력부는 이를 스크린에 투영하여 피드백 효과를 보여주게 된다.3 is a diagram for describing a method of controlling a virtual touch screen by a user's body. In the figure, it appears that the
도 4는 도 3의 실시예와 유사하나 사용자의 신체가 아닌, 레이저 포인터(47)의 포인트(48)에 의해 가상 터치스크린 시스템을 제어하는 것을 나타낸다. 즉 레이저 포인터(47)의 포인트(48)가 스크린(45)의 특정 위치에 있고, 이 위치가 특정 객체(46)의 범위 내에 있다면 시스템은 포인트(48)가 특정객체를 터치한 것으로 인지하는 것이다. 이때 포인트(48)의 색깔에 따라 다른 제어를 할 수도 있다. 가령 예를 들어 붉은색 포인트가 특정 객체를 터치한다면 공이 터져버리는 영상을 출력하고, 청색 포인트가 특정 객체를 터치한다면 공이 바깥으로 튀어 나가는 영상을 출력하는 것으로 제어할 수도 있다. 즉 형태나 모양뿐만 아니라 색깔에 의해서도 다양한 제어가 가능한 것이다. 영상셔터에 의해 스크린(45)와 포인트(48)를 촬영하는 것은 도 3에서 설명한 것과 동일하다.4 is similar to the embodiment of FIG. 3 but illustrates controlling the virtual touchscreen system by the
도 5는 후면스크린을 채용한 영상셔터 기반의 가상 터치스크린시스템을 나타낸다. 도 1의 시스템 구성과 비교하면 전면스크린과 후면스크린의 차이만 있을 뿐이며 영상셔터를 이용하여 가상 터치스크린 시스템의 동작방법은 동일하다.5 shows an image shutter-based virtual touch screen system employing a rear screen. Compared with the system configuration of FIG. 1, there is only a difference between the front screen and the rear screen, and the operation method of the virtual touch screen system using the image shutter is the same.
본 발명은 상기 실시예에 국한되지 않고 다양한 방법으로 실시 될 수 있다.The present invention is not limited to the above embodiment and can be implemented in various ways.
종래기술과 비교할 때 영상셔터를 이용한 가상 터치스크린 장치 및 방법은 다음과 같은 현저한 효과가 있다.Compared with the prior art, the virtual touch screen device and method using the image shutter have the following remarkable effects.
첫째, 파장이 다른 광원(예:적외선)을 이용하여 사용자의 움직임을 감지하지 않기 때문에 영상입력부와 스크린간의 거리 제한이 없다.First, since the user's movement is not detected by using light sources having different wavelengths (eg, infrared rays), there is no limitation on the distance between the image input unit and the screen.
둘째, 파장이 다른 광원(예:적외선)을 이용하지 않고 일반 가시광선을 이용하기 때문에 사용자의 이미지를 컬러로 입력 받을 수 있으므로 빔프로젝터의 피드백 제어를 컬러 영상 기반으로 가능할 뿐만 아니라(적외선 카메라를 이용하는 경우에는 사용자의 이미지를 바탕으로 제어가 되나, 본 발명은 컬러화된 이미지를 촬영할 수 있으므로 이미지의 특정 부분의 색깔에 의한 제어가 가능하다) 소리를 동시에 입력받아 사용하므로 빔프로젝터의 피드백 되는 사용자의 제어정보는 음성 및 색깔의 조합에 의해 기존보다 훨씬 다양한 제어가 가능하다. Second, since the user's image can be input in color because general light is used instead of light sources with different wavelengths (e.g. infrared rays), feedback control of the beam projector is not only based on the color image (infrared camera) In this case, the image is controlled based on the user's image. However, the present invention can take a colorized image and control the color of a specific part of the image. The information can be controlled in a much wider range by the combination of voice and color.
그러므로 본 발명은 종래보다 더욱 대형화된 스크린과 컬러화된 영상과 사운드를 기반으로 하는 다양한 피드백 제어가 가능한 가상 터치스크린 시스템 및 방법이다.Therefore, the present invention is a virtual touch screen system and method capable of various feedback control based on a larger screen and colored images and sounds than before.
Claims (6)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020060089848A KR100796771B1 (en) | 2006-09-15 | 2006-09-15 | Image Shutter based Virtual Touch Screen System and Method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020060089848A KR100796771B1 (en) | 2006-09-15 | 2006-09-15 | Image Shutter based Virtual Touch Screen System and Method |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR2020060026442U Division KR200435205Y1 (en) | 2006-09-28 | 2006-09-28 | Image Shutter based Virtual Touch Screen System |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20060105716A true KR20060105716A (en) | 2006-10-11 |
KR100796771B1 KR100796771B1 (en) | 2008-01-22 |
Family
ID=37635242
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020060089848A KR100796771B1 (en) | 2006-09-15 | 2006-09-15 | Image Shutter based Virtual Touch Screen System and Method |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR100796771B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101528931B1 (en) * | 2009-02-05 | 2015-06-15 | 정수영 | User Interface Device for Digital Information Display |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8259208B2 (en) * | 2008-04-15 | 2012-09-04 | Sony Corporation | Method and apparatus for performing touch-based adjustments within imaging devices |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002351615A (en) | 2001-05-24 | 2002-12-06 | Ricoh Co Ltd | Display device |
US6741323B2 (en) | 2002-08-12 | 2004-05-25 | Digital Theater Systems, Inc. | Motion picture subtitle system and method |
KR20070025138A (en) * | 2005-08-31 | 2007-03-08 | 노성렬 | The space projection presentation system and the same method |
KR20070024969A (en) * | 2005-08-31 | 2007-03-08 | (주)제니텀 엔터테인먼트 컴퓨팅 | Screen display system and method for gesture-based interaction |
-
2006
- 2006-09-15 KR KR1020060089848A patent/KR100796771B1/en not_active IP Right Cessation
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101528931B1 (en) * | 2009-02-05 | 2015-06-15 | 정수영 | User Interface Device for Digital Information Display |
Also Published As
Publication number | Publication date |
---|---|
KR100796771B1 (en) | 2008-01-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11073908B2 (en) | Eye-tracking enabled wearable devices | |
CN110647237B (en) | Gesture-based content sharing in an artificial reality environment | |
US10788673B2 (en) | User-based context sensitive hologram reaction | |
US10739861B2 (en) | Long distance interaction with artificial reality objects using a near eye display interface | |
KR102129376B1 (en) | Identifying an object in a volume based on characteristics of light reflected by the object | |
WO2012124730A1 (en) | Detection device, input device, projector, and electronic apparatus | |
US20170316264A1 (en) | Eye-tracking enabled wearable devices | |
US20100225743A1 (en) | Three-Dimensional (3D) Imaging Based on MotionParallax | |
JP2017513093A (en) | Remote device control through gaze detection | |
JP6684042B2 (en) | Electronics | |
KR100796771B1 (en) | Image Shutter based Virtual Touch Screen System and Method | |
JP2014115488A (en) | Image display device | |
JP2001062149A (en) | Spotlight position detection system, and simulator | |
KR200435205Y1 (en) | Image Shutter based Virtual Touch Screen System | |
TWI454653B (en) | Systems and methods for determining three-dimensional absolute coordinates of objects | |
KR101002071B1 (en) | Apparatus for touching a projection of 3d images on an infrared screen using multi-infrared camera | |
JP4923214B2 (en) | Electronic game controller capable of sensing player body image and method thereof | |
Demitševa | Gesture based computer controlling using Kinect camera | |
US11895254B2 (en) | Mobile terminal device | |
WO2019018365A1 (en) | Eye-tracking enabled wearable devices | |
KR102215733B1 (en) | Interactive system using laser | |
KR102215734B1 (en) | Interactive system through object recognition based on IR laser | |
JPH06242883A (en) | Inputting device | |
KR20200086459A (en) | Interactive system based on IR laser | |
JP2017167028A (en) | Control system and control method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
LAPS | Lapse due to unpaid annual fee |