KR20130055119A - 싱글 적외선 카메라 방식의 투영 영상 터치 장치 - Google Patents

싱글 적외선 카메라 방식의 투영 영상 터치 장치 Download PDF

Info

Publication number
KR20130055119A
KR20130055119A KR20110120671A KR20110120671A KR20130055119A KR 20130055119 A KR20130055119 A KR 20130055119A KR 20110120671 A KR20110120671 A KR 20110120671A KR 20110120671 A KR20110120671 A KR 20110120671A KR 20130055119 A KR20130055119 A KR 20130055119A
Authority
KR
South Korea
Prior art keywords
infrared
screen
image
infrared ray
led
Prior art date
Application number
KR20110120671A
Other languages
English (en)
Inventor
정광모
홍성희
박병하
박영충
최광순
안양근
Original Assignee
전자부품연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 전자부품연구원 filed Critical 전자부품연구원
Priority to KR20110120671A priority Critical patent/KR20130055119A/ko
Priority to US13/529,659 priority patent/US20130127705A1/en
Publication of KR20130055119A publication Critical patent/KR20130055119A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04166—Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/30—Transforming light or analogous information into electric information
    • H04N5/33—Transforming infrared radiation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04108—Touchless 2D- digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface without distance measurement in the Z direction
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Position Input By Displaying (AREA)

Abstract

본 발명은 싱글 적외선 카메라 방식의 투영 영상 터치 장치에 관한 것으로, 적외선을 발광하여 공간상에 적외선 스크린을 생성하는 적외선 엘이디(LED) 어레이, 상기 적외선 스크린에 영상을 투영하기 위한 프로젝터, 렌즈가 상기 적외선 스크린을 향하도록 설치되며, 상기 적외선 엘이디 어레이 중앙부의 상측 또는 하측에 설치되는 싱글 적외선 카메라 및 상기 적외선 카메라가 촬영한 영상을 이용하여, 사용자 지시수단이 터치한 상기 적외선 스크린의 X, Z축 좌표를 산출하는 공간터치 인식모듈을 포함한다.
이에 따라 본 발명은 싱글 적외선 카메라 방식의 투영 영상 터치 장치에 관한 것으로, 사용자들에게 보다 실감나는, 인터렉티브(Interactive)한 사용자 인터페이스를 제공할 수 있고, 사용자에게 재미와 편리함을 줄 수 있는 효과가 있어 가까운 장래에 본 발명이 적용된 키오스크들은 이러한 실감형 사용자 인터페이스를 사용하게 될 것이다.
특히, 적외선 스크린의 Z축 좌표를 깊이 정보 등으로 활용함으로써 2차원 형태의 종래 투영 영상 터치 장치보다 다양한 유저 인터페이스(UI)를 구현할 수 있을 것이다.

Description

싱글 적외선 카메라 방식의 투영 영상 터치 장치{APPARATUS FOR TOUCHING A PROJECTION OF 3D IMAGES ON AN INFRARED SCREEN USING SINGLE―INFRARED CAMERA}
본 발명은 싱글 적외선 카메라 방식의 투영 영상 터치 장치에 관한 것으로, 특히 자유 공간상에 영상을 투영하고, 투영된 영상에 대한 사용자의 터치 위치를 적외선 엘이디(LED) 어레이와 적외선 카메라를 이용하여 인식하며, 인식한 터치 위치를 토대로 사용자의 명령을 처리할 수 있도록 한 싱글 적외선 카메라 방식의 투영 영상 터치 장치에 관한 것이다.
최근 키보드를 사용하지 않고, 화면(스크린)에 나타난 문자나 특정 위치에 사람의 손 또는 물체가 닿으면, 그 위치를 파악하여 저장된 소프트웨어에 의해 특정 처리를 할 수 있도록 화면에서 직접 입력을 받을 수 있게 한 터치 스크린이 널리 사용되고 있다.
터치 스크린은 기능에 해당하는 문자나 그림 정보를 다양하게 표시할 수 있어 사용자의 기능 인지를 용이하게 한다. 때문에 지하철, 백화점, 은행 등의 장소에서 안내용 기기, 각종 점포에서 판매용 단말기 및 일반 업무용 기기 등에 적용되어 다양하게 활용되고 있다.
도 1은 종래의 멀티 적외선 카메라 방식의 투영 영상 터치 장치를 나타낸 사시도이다.
도 1에 도시된 바와 같이, 종래의 멀티 적외선 카메라 방식의 투영 영상 터치 장치는 적외선 스크린 좌/우측에 적외선 카메라를 구비하여 사용자 지시수단의 입력을 두 개의 카메라에서 교차해서 센싱하는 방법을 통해 사용자 지시수단의 입력을 인지하였다.
때문에 두 개의 카메라를 설치하는데 많은 비용이 소요되었으며, 사용자 지시수단이 한 개일 때에만 올바르게 센싱하는 구성이기 때문에 한 카메라에서 두 개의 사용자 지시수단을 센싱할 경우에는 오류가 발생하는 단점이 있었다.
또한 두 개의 카메라 간의 각도와 위치를 정밀하게 조정해야하는 문제가 있었으며, 두 개의 카메라 간의 화각이 겹치는 부분만 센싱되므로, 센싱 영역이 좁은 단점이 있었다.
본 발명은 전술한 문제점을 해결하기 위해 안출된 것으로서, 투영 영상에 대한 사용자의 터치 위치(X, Z 축 좌표)를 인식하고, 인식한 터치 위치를 토대로 사용자의 명령을 처리할 수 있도록 한 싱글 적외선 카메라 방식의 투영 영상 터치 장치를 제공하는데 그 목적이 있다.
전술한 목적을 달성하기 위해 본 발명의 싱글 적외선 카메라 방식의 투영 영상 터치 장치는 적외선을 발광하여 공간상에 적외선 스크린을 생성하는 적외선 엘이디(LED) 어레이, 상기 적외선 스크린에 영상을 투영하기 위한 프로젝터, 렌즈가 상기 적외선 스크린을 향하도록 설치되며, 상기 적외선 엘이디 어레이 중앙부의 상측 또는 하측에 설치되는 싱글 적외선 카메라 및 상기 적외선 카메라가 촬영한 영상을 이용하여, 사용자 지시수단이 터치한 상기 적외선 스크린의 X, Z축 좌표를 산출하는 공간터치 인식모듈을 포함한다.
또한 펄스 신호를 주기적으로 발생하는 펄스 발생부 및 상기 펄스 발생부로부터 펄스 신호가 입력될 때는 상기 적외선 엘이디 어레이로 직류 전원을 공급하고, 상기 펄스 발생부로부터 펄스 신호가 입력되지 않을 때는 상기 적외선 엘이디 어레이로의 직류 전원 공급을 차단하는 엘이디 구동부를 더 포함한다.
또한 상기 적외선 카메라는 상기 펄스 발생부로부터 펄스 신호가 입력될 때 촬영한다.
또한 상기 프로젝터는 영상을 표시하는 디스플레이 모듈 및 상기 디스플레이 모듈에서 표시되는 영상을 상기 적외선 스크린에 투영하기 위한 투영 모듈을 포함한다.
또한 상기 투영 모듈은 상기 디스플레이 모듈에서 발하는 빔을 두 개의 빔으로 분리하기 위한 빔 분리기 및 상기 디스플레이 모듈에서 발하여 상기 빔 분리기에서 반사되어 온 빔을 다시 빔 분리기 쪽으로 반사하기 위한 구면 거울을 포함한다.
또한 상기 투영 모듈은 상기 구면 거울에서 반사되어 상기 빔 분리기를 투과한 빔을 편광으로 바꾸기 위한 편광 필터를 더 포함한다.
본 발명은 싱글 적외선 카메라 방식의 투영 영상 터치 장치에 관한 것으로, 사용자들에게 보다 실감나는, 인터렉티브(Interactive)한 사용자 인터페이스를 제공할 수 있고, 사용자에게 재미와 편리함을 줄 수 있는 효과가 있어 가까운 장래에 본 발명이 적용된 키오스크들은 이러한 실감형 사용자 인터페이스를 사용하게 될 것이다.
특히, 적외선 스크린의 Z축 좌표를 깊이 정보 등으로 활용함으로써 2차원 형태의 종래 투영 영상 터치 장치보다 다양한 유저 인터페이스(UI)를 구현할 수 있을 것이다.
도 1은 종래의 멀티 적외선 카메라 방식의 투영 영상 터치 장치를 나타낸 사시도,
도 2는 본 발명의 실시 예에 따른 싱글 적외선 카메라 방식의 투영 영상 터치 장치를 나타낸 사시도,
도 3은 본 발명의 실시 예에 따른 싱글 적외선 카메라 방식의 투영 영상 터치 장치의 내부 구성도,
도 4는 본 발명의 실시 예에 따라 싱글 적외선 카메라 방식의 투영 영상 터치 장치에서 공간 터치를 인식하는 원리를 설명하기 위한 도,
도 5는 본 발명의 실시 예에 따른 공간 터치 인식 모듈의 내부 구성도,
도 6은 본 발명의 실시 예에 따라 싱글 적외선 카메라 방식의 투영 영상 터치 장치에서 투영 영상 터치 인식 방법을 설명하기 위한 흐름도.
이하, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 상세히 설명하기 위하여, 본 발명의 바람직한 실시 예를 첨부한 도면을 참조하여 상세하게 설명한다.
도 2는 본 발명의 실시 예에 따른 싱글 적외선 카메라 방식의 투영 영상 터치 장치를 나타낸 사시도이다.
도 2에 도시한 바와 같이, 본 발명의 실시 예에 따른 싱글 적외선 카메라 방식의 투영 영상 터치 장치는 적외선을 발광하여 공간상에 적외선 스크린을 생성하는 적외선 엘이디(LED) 어레이(110), 적외선 엘이디(LED) 어레이(110) 중앙부의 상측 또는 하측에 설치되어 적외선 스크린을 촬영하는 적외선 카메라(120), 적외선 스크린에 영상을 투영하기 위한 프로젝터(130), 적외선 카메라(120)가 촬영한 흑백(gray scale) 영상에서 사용자 지시수단 예컨대, 손끝이나 터치 펜이 적외선 스크린을 터치한 위치를 인식하는 공간터치 인식모듈(150)과, 이들을 탑재하는 하우징(140)을 포함하여 이루어진다.
본 발명의 구성에 대해 보다 구체적으로 설명하자면 먼저, 적외선 스크린은 적외선 엘이디 어레이(110)에 의해 생성되는 공간상에 위치한 가상의 터치 스크린이다.
적외선 스크린의 가로 길이는 일렬로 배열된 적외선 LED 수에 의해 결정된다.
적외선 스크린의 테두리에는 사용자가 적외선 스크린의 윤곽을 쉽게 인지할 수 있도록 사각형 형태의 틀이 형성될 수 있다. 그렇다고 한다면, 적외선 엘이디 어레이(110)는 틀의 상단, 하단, 좌측 및 우측 중 어느 한 곳에 설치가 가능하다.
적외선 엘이디 어레이(110)는 협각(좁은각) 적외선 LED로 구성되는 것이 바람직하다. 다시 말해, 적외선 엘이디 어레이(110)의 적외선 빔각(infrared beam angle)은 10도 이내인 것이 바람직하다. 여기서, 적외선 LED는 본 발명이 속하는 기술분야에서 널리 사용되는 반도체 소자이므로 그 구체적인 설명은 생략한다.
적외선 카메라(120)는 주지되어 있는 바와 같이, 가시광선 영역을 컷오프(Cut-off)시키고 적외선 영역만을 패스(pass)시키는 필터가 내장되어 있는 것으로서, 실내의 형광등 등에서 발생하는 가시광선 및 적외선 스크린으로 투영된 입체 영상(three-dimensional image)을 차단하고 적외선만을 흑백(gray scale)영상으로 촬영한다.
또한 적외선 카메라(120)는 렌즈가 적외선 스크린을 향하도록 설치된다.
프로젝터(130)는 미국등록특허공보 제6,808,268호에 공지되어 있는 바와 같이 영상을 표시하는 디스플레이 모듈(137) 및 여기에서 표시되는 영상을 적외선 스크린에 투영하기 위한 투영 모듈을 포함하여 이루어지는 것이 바람직하다.
투영 모듈은 편광필터(131), 빔 분리기(beam splitter:133) 및 구면 거울(spherical mirror:135)을 포함하여 이루어질 수 있다.
편광필터(131)는 디스플레이 모듈(137)의 화면 위에 비스듬히 기울어진 채로 설치되는 것으로서, 구면 거울(135)에서 반사되어 빔 분리기(133)를 투과한 빔을 편광(30)으로 바꿔 적외선 스크린에 투영한다.
또한, 편광필터(131)는 구면 거울(135)에서 반사되어 빔 분리기(133)를 투과한 빔을 원편광(circularly polarized light:CPL)으로 바꾸는 CPL 필터로 구현 가능하다.
빔 분리기(133)는 디스플레이 모듈(137)과 편광필터(131) 사이에 설치되되 편광필터(131)와 평행한 것으로서, 디스플레이 모듈(137)에서 발하는 빔(10)을 두개의 빔 즉, 빔 분리기(133)를 투과하는 오브젝트 빔(object beam)과 빔 분리기(133)에서 반사되는 레퍼런스 빔(reference beam)으로 분리한다.
구면 거울(135)은 빔 분리기(133)에서 반사된 레퍼런스 빔(20)이 진행하는 쪽에 위치하는 것으로서, 디스플레이 모듈(137)에서 발하여 빔 분리기(133)에서 반사되어 온 레퍼런스 빔(20)을 다시 빔 분리기(133)쪽으로 반사한다.
또한, 구면 거울(135)은 도 2에 도시한 바와 같이, 오목 거울(concave mirror)로 구현 가능하다.
디스플레이 모듈(137)은 HLCD(high bright LCD)를 포함하여 이루어질 수 있다.
도 3은 본 발명의 실시 예에 따른 싱글 적외선 카메라 방식의 투영 영상 터치 장치의 내부 구성도이다.
본 발명에 따른 싱글 적외선 카메라 방식의 투영 영상 터치 장치는 도 3에 도시된 바와 같이, 펄스 신호를 주기적으로 발생하는 펄스 발생부(180), 펄스 발생부(!80)로부터 주기적으로 입력되는 펄스 신호에 맞춰 적외선 엘이디 어레이(110)를 구동하는 엘이디 구동부(190)와 DC전원(170)과 적외선 엘이디 어레이(110) 사이에 위치하는 저항소자(180)를 더 포함하여 이루어질 수 있다.
전술한 구성에서 펄스 발생부(180)는 예컨대, 10ms마다 100㎲의 폭을 갖는 펄스 신호를 발생한다.
엘이디 구동부(190)는 구체적으로, 펄스 발생부(180)로부터 펄스 신호가 입력될 때는 적외선 엘이디 어레이(110)로 직류 전원을 공급하고, 펄스 발생부(180)로부터 펄스 신호가 입력되지 않을 때는 적외선 엘이디 어레이(110)로의 직류 전원 공급을 차단한다.
즉, 엘이디 구동부(190)는 적외선 엘이디 어레이(110)를 항상 켜 놓는 것이 아니라, 펄스 신호에 따라 적외선 엘이디 어레이(110)를 구동한다. 이렇게 정전류 구동이 아닌 펄스 구동이 필요한 이유는 다음과 같다.
LED는 일반적으로, 정전류 구동 또는 펄스 구동 방식으로 동작하게 되는데, 펄스 구동으로 동작시킬 때 더 밝다. 즉, 펄스 구동이 정전류 구동보다 더 높은 전류를 LED로 흘릴 수 있는, 더 밝은 광을 얻을 수 있는 방식이다. 단, LED가 파괴될 수 있으므로 시간 조절 즉, 펄스 폭 조절이 필요하다.
예컨대, LED를 펄스로 구동하면 1A의 전류를 흘릴 수 있는 반면, 정전류로 구동하면 100mA의 전류를 흘릴 수 있다. 이와 같이 LED를 정전류 구동이 아닌 펄스 구동 방식으로 동작시키게 되면, 정전류 구동일 때보다 10배의 밝기를 얻을 수 있게 되므로, 외부광(예, 햇빛, 형광등, 백열등)에 의한 터치 인식의 오류를 줄일 수 있다.
한편, 적외선 카메라(120)는 마치 카메라 플래시가 터질 때 사진을 찍듯, 펄스 발생부(150)로부터 펄스 신호가 입력될 때 촬영한다.
공간터치 인식모듈(150)은 적외선 카메라에서 촬영된 이미지를 통해 사용자 지시수단이 진입한 위치의 위치좌표를 추출한다.
공간터치 인식모듈(150)의 세부 구성요소에 대해서는 도 5를 참조하여 후술한다.
컴퓨팅 모듈(160)은 공간터치 인식모듈(150)로부터 사용자 지시수단의 위치좌표를 전달받으면, 위치좌표에 대응되는 스크린상의 위치에 표시된 특정 기능의 선택으로 인지하여 해당 기능을 수행한다. 예컨대, 사용자가 손가락을 적외선 스크린 앞쪽으로 깊숙이 집어넣은 상태에서 좌로 이동하면, 이를 드래그(drag)동작으로 인식하여 해당 기능을 수행한다.
또한 컴퓨팅 모듈(160)은 공간터치 인식모듈(150)로부터 복수개의 위치좌표를 전달받으면, 복수개의 위치좌표 간의 간격 변화에 따라 특정 기능의 해당 기능을 수행한다.
또한 컴퓨팅 모듈(160)은 유선 혹은 무선 네트워크를 통해 외부기기와 연결된다. 그렇다고 한다면, 공간터치 인식모듈(150)이 인식한 위치좌표를 이용하여 외부기기를 제어할 수 있게 된다. 다시 말해, 위치좌표가 외부기기에 대한 제어 명령에 해당되는 경우, 외부기기가 해당기능을 수행하도록 한다.
여기서, 외부기기는 네트워크로 연결된 홈네트워크 가전기기 및 서버일 수 있다.
도 4는 본 발명의 실시 예에 따라 싱글 적외선 카메라 방식의 투영 영상 터치 장치에서 공간 터치를 인식하는 원리를 설명하기 위한 도이고, 도 5는 본 발명의 실시 예에 따른 공간터치 인식모듈의 내부 구성도이다.
적외선 카메라(120)에서 촬영된 이미지는 사용자 지시수단(사용자 손)이 적외선 스크린 내에 진입하기 전에는 적외선 엘이디 어레이(110)에서 발광되는 적외선 때문에 검은색이다.
그러나 사용자 지시수단 즉 사용자 손가락 끝이 적외선 스크린 내에 진입하게 되면, 그 곳에서 적외선이 산란(Scattering or Diffusing)하게 되어, 도 4에 도시한 바와 같이 사용자 지시수단이 위치한 곳이 밝게 보이게 된다. 결국, 밝게 보이는 이 부분을 화상 처리를 해서 손끝을 찾으면, 사용자 지시수단(손끝)이 터치한 적외선 스크린의 X, Z 축 좌표를 찾을 수 있게 된다.
공간터치 인식 모듈(150)은 차영상 획득부(151), 이진화부(152), 평활화부(153), 라벨링부(154), 좌표 계산부(155)를 포함한다.
차영상 획득부(151)는 적외선 카메라(120)로부터 입력되는 카메라 영상(input image)을 전달받으면, 카메라 영상의 픽셀값에서 미리 저장되어 있는 배경 영상(background image)의 픽셀값을 빼는 뺄셈연산을 수행하여, 차영상(source image)을 구한다.
이진화부(152)는 차영상 획득부(151)에서 도 5(a)와 같은 흑백 영상에 해당하는 차영상을 전달받으면, 전달받은 차영상을 이진화 처리한다. 구체적으로 이진화부(152)는 차영상을 가지고 화소별로 미리 정해진 임계(threshold)값 이하는 화소값을 0(검정색)으로 조정하고 임계값 이상은 화소값을 255(흰색)으로 바꾸는 이진화 처리를 한다.
평활화부(153)는 이진화부(152)에 의해 이진화된 이진화 영상을 평활화(smoothing) 처리하여 이진화 영상에서 노이즈를 제거한다.
라벨링부(154)는 평활화부(153)에 의해 평활화 처리된 이진화 영상에 대해 라벨링(labeling)을 수행한다. 구체적으로, 라벨링부(154)는 화소값이 255로 조정된 픽셀에 대해 라벨링을 한다. 예컨대, 라벨링부(154)는 8-근방화소 라벨링 기법을 이용하여 흰색인 영역(Blob)들에 대해 각각 다른 번호를 붙여 이진 영상을 재구성한다. 이상으로, 라벨링 연산은 영상처리 분야에서 널리 사용되는 기법이므로, 구체적인 설명은 생략한다.
좌표 계산부(155)는 라벨링부(154)에 의해 라벨링된 영역(Blob)들 중에서 크기가 미리 정해진 임계치 이상인 영역의 중심 좌표를 계산한다. 구체적으로, 좌표 계산부(155)는 임계치 이상인 영역을 적외선 스크린을 터치한 손가락이나 사물로 간주하여 해당 영역의 중심 좌표를 계산한다. 여기서 중심 좌표는 다양한 검출 방식을 사용하여 검출할 수 있다. 예컨대, 좌표 계산부(155)는 해당 영역의 X, Z 축 최소값과 X, Z 축 최대값의 중간값을 무게중심으로 잡아서 터치의 해당좌표로 정한다.
또한, 좌표 계산부(155)는 임계치 이상인 영역이 다수인 경우, 다수개의 중심 좌표를 계산할 수도 있다.
도 6은 본 발명의 실시 예에 따라 싱글 적외선 카메라 방식의 투영 영상 터치 장치에서 투영 영상 터치 인식 방법을 설명하기 위한 흐름도이다.
먼저 공간터치 인식모듈(150)은 S601단계에서 적외선 카메라(120)로부터 흑백 영상을 전달받으면, 카메라 영상의 픽셀값에서 미리 저장되어 있는 배경 영상의 픽셀값을 빼는 뺄셈연산을 통해 차영상을 획득한다.
그리고 공간터치 인식모듈(150)은 S602단계에서 획득한 차영상에 이진화 및 평활화 처리를 수행한다.
그런다음 공간터치 인식모듈(150)은 S603단계에서 이진화 및 평활화 처리된 영상에 대해 라벨링을 수행하고, 라벨링된 영역들 중에서 사용자 지시수단(손가락)이 해당하는 외곽선을 검출한다.
공간터치 인식모듈(150)은 S604단계에서 1차로 검출된 외곽선 중 일정 크기 이상의 외곽선을 2차로 검출하고, S605단계에서 2차로 검출된 외곽선 영역의 중심 좌표를 계산한다. 이때 2차로 검출된 외곽선 영역은 복수개 일 수 있다.
공간터치 인식모듈(150)은 S606단계에서 계산한 중심 좌표를 적외선 스크린의 중심 좌표로 변환하고, S608단계에서 변환한 중심 좌표를 컴퓨팅 모듈(160)로 전달한다.
그러면, 컴퓨팅 모듈(160)은 S607단계에서 공간터치 인식모듈(150)이 인식한 위치 정보에 해당되는 기능을 수행한다.
본 발명의 싱글 적외선 스크린 방식의 공간 터치 장치는 전술한 실시 예에 국한되지 않고 본 발명의 기술 사상이 허용하는 범위에서 다양하게 변형하여 실시할 수가 있다.
이상의 설명에서는 본 발명의 바람직한 실시 예를 제시하여 설명하였으나, 본 발명이 반드시 이에 한정되는 것은 아니며, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경할 수 있음을 쉽게 알 수 있을 것이다.
110: 적외선 엘이디 어레이 120: 적외선 카메라
130: 프로젝트 131: 편광필터
133: 빔 분리기 135: 구면 거울
137: 디스플레이 모듈 140: 하우징
150: 공간터치 인식모듈 151: 차영상 획득부
152: 이진화부 153: 평활화부
154: 라벨링부 155: 좌표 계산부
160: 컴퓨팅 모듈 180: 펄스 발생부
190: 엘이디 구동부 200: DC전원
210: 저항

Claims (6)

  1. 적외선을 발광하여 공간상에 적외선 스크린을 생성하는 적외선 엘이디(LED) 어레이;
    상기 적외선 스크린에 영상을 투영하기 위한 프로젝터;
    렌즈가 상기 적외선 스크린을 향하도록 설치되며, 상기 적외선 엘이디 어레이 중앙부의 상측 또는 하측에 설치되는 싱글 적외선 카메라; 및
    상기 적외선 카메라가 촬영한 영상을 이용하여, 사용자 지시수단이 터치한 상기 적외선 스크린의 X, Z축 좌표를 산출하는 공간터치 인식모듈을 포함하는 싱글 적외선 카메라 방식의 투영 영상 터치 장치.
  2. 제1 항에 있어서,
    펄스 신호를 주기적으로 발생하는 펄스 발생부; 및
    상기 펄스 발생부로부터 펄스 신호가 입력될 때는 상기 적외선 엘이디 어레이로 직류 전원을 공급하고, 상기 펄스 발생부로부터 펄스 신호가 입력되지 않을 때는 상기 적외선 엘이디 어레이로의 직류 전원 공급을 차단하는 엘이디 구동부를 더 포함하는 것을 특징으로 하는 싱글 적외선 카메라 방식의 투영 영상 터치 장치.
  3. 제2 항에 있어서, 상기 적외선 카메라는,
    상기 펄스 발생부로부터 펄스 신호가 입력될 때 촬영하는 것임을 특징으로 하는 싱글 적외선 카메라 방식의 투영 영상 터치 장치.
  4. 제1 항 내지 제4항 중 어느 한 항에 있어서, 상기 프로젝터는,
    영상을 표시하는 디스플레이 모듈; 및
    상기 디스플레이 모듈에서 표시되는 영상을 상기 적외선 스크린에 투영하기 위한 투영 모듈을 포함하여 이루어진 것을 특징으로 하는 싱글 적외선 카메라 방식의 투영 영상 터치 장치.
  5. 제4 항에 있어서, 상기 투영 모듈은,
    상기 디스플레이 모듈에서 발하는 빔을 두 개의 빔으로 분리하기 위한 빔 분리기; 및
    상기 디스플레이 모듈에서 발하여 상기 빔 분리기에서 반사되어 온 빔을 다시 빔 분리기 쪽으로 반사하기 위한 구면 거울을 포함하여 이루어진 것을 특징으로 하는 싱글 적외선 카메라 방식의 투영 영상 터치 장치.
  6. 제5 항에 있어서, 상기 투영 모듈은,
    상기 구면 거울에서 반사되어 상기 빔 분리기를 투과한 빔을 편광으로 바꾸기 위한 편광 필터를 더 포함하여 이루어진 것을 특징으로 하는 싱글 적외선 카메라 방식의 투영 영상 터치 장치.
KR20110120671A 2011-11-18 2011-11-18 싱글 적외선 카메라 방식의 투영 영상 터치 장치 KR20130055119A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR20110120671A KR20130055119A (ko) 2011-11-18 2011-11-18 싱글 적외선 카메라 방식의 투영 영상 터치 장치
US13/529,659 US20130127705A1 (en) 2011-11-18 2012-06-21 Apparatus for touching projection of 3d images on infrared screen using single-infrared camera

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20110120671A KR20130055119A (ko) 2011-11-18 2011-11-18 싱글 적외선 카메라 방식의 투영 영상 터치 장치

Publications (1)

Publication Number Publication Date
KR20130055119A true KR20130055119A (ko) 2013-05-28

Family

ID=48426267

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20110120671A KR20130055119A (ko) 2011-11-18 2011-11-18 싱글 적외선 카메라 방식의 투영 영상 터치 장치

Country Status (2)

Country Link
US (1) US20130127705A1 (ko)
KR (1) KR20130055119A (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015016864A1 (en) * 2013-07-31 2015-02-05 Hewlett-Packard Development Company, L.P. System with projector unit and computer
KR101665398B1 (ko) * 2015-06-02 2016-10-13 이주성 이미지의 도면화 방법
WO2017175980A1 (ko) * 2016-04-07 2017-10-12 이주성 윈도우 이미지 검출 방법 및 장치
KR20200039995A (ko) * 2018-10-08 2020-04-17 주식회사 토비스 공간 터치 감지 방법 및 이를 수행하는 표시 장치

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9507462B2 (en) * 2012-06-13 2016-11-29 Hong Kong Applied Science and Technology Research Institute Company Limited Multi-dimensional image detection apparatus
US10891003B2 (en) 2013-05-09 2021-01-12 Omni Consumer Products, Llc System, method, and apparatus for an interactive container
US9569692B2 (en) 2014-10-31 2017-02-14 The Nielsen Company (Us), Llc Context-based image recognition for consumer market research
CA2971280C (en) 2014-12-30 2021-11-30 Omni Consumer Products, Llc System and method for interactive projection
KR101745651B1 (ko) * 2016-03-29 2017-06-09 전자부품연구원 손 제스처 인식 시스템 및 방법
JP2018006981A (ja) * 2016-06-30 2018-01-11 キヤノン株式会社 画像処理装置、画像処理方法、コンピュータプログラム
CN107818290B (zh) * 2016-09-14 2021-03-16 京东方科技集团股份有限公司 基于深度图的启发式手指检测方法
CN110784656A (zh) * 2018-07-13 2020-02-11 宏海微电子股份有限公司 具有物联网控制能力的摄影红外线led灯板装置
CN110221732B (zh) * 2019-05-15 2022-11-08 青岛小鸟看看科技有限公司 一种触控投影系统和触控动作识别方法
CN112306305B (zh) * 2020-10-28 2021-08-31 黄奎云 三维触摸装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0849697B1 (en) * 1996-12-20 2003-02-12 Hitachi Europe Limited A hand gesture recognition system and method
WO2003054683A2 (en) * 2001-12-07 2003-07-03 Canesta Inc. User interface for electronic devices
US6857746B2 (en) * 2002-07-01 2005-02-22 Io2 Technology, Llc Method and system for free-space imaging display and interface
JP4173114B2 (ja) * 2004-02-23 2008-10-29 株式会社国際電気通信基礎技術研究所 体感作画装置
US8279168B2 (en) * 2005-12-09 2012-10-02 Edge 3 Technologies Llc Three-dimensional virtual-touch human-machine interface system and method therefor
US7599561B2 (en) * 2006-02-28 2009-10-06 Microsoft Corporation Compact interactive tabletop with projection-vision

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015016864A1 (en) * 2013-07-31 2015-02-05 Hewlett-Packard Development Company, L.P. System with projector unit and computer
KR101665398B1 (ko) * 2015-06-02 2016-10-13 이주성 이미지의 도면화 방법
WO2017175980A1 (ko) * 2016-04-07 2017-10-12 이주성 윈도우 이미지 검출 방법 및 장치
US10832415B2 (en) 2016-04-07 2020-11-10 Archidraw. Inc. Window image detection method and device
KR20200039995A (ko) * 2018-10-08 2020-04-17 주식회사 토비스 공간 터치 감지 방법 및 이를 수행하는 표시 장치

Also Published As

Publication number Publication date
US20130127705A1 (en) 2013-05-23

Similar Documents

Publication Publication Date Title
KR20130055119A (ko) 싱글 적외선 카메라 방식의 투영 영상 터치 장치
KR100974894B1 (ko) 멀티 적외선 카메라 방식의 3차원 공간 터치 장치
US10324566B2 (en) Enhanced interaction touch system
CN106062862B (zh) 用于沉浸式和交互式多媒体生成的系统和方法
US9996197B2 (en) Camera-based multi-touch interaction and illumination system and method
JP5950130B2 (ja) カメラ式マルチタッチ相互作用装置、システム及び方法
JP6037901B2 (ja) 操作検出装置、操作検出方法及び表示制御データ生成方法
US9720511B2 (en) Hand and object tracking in three-dimensional space
KR100734894B1 (ko) 사용자 오브젝트와 가상 입력 장치의 상호작용을 탐색하고 배치하는 준 3차원 방법 및 장치
US20130314380A1 (en) Detection device, input device, projector, and electronic apparatus
US9501160B2 (en) Coordinate detection system and information processing apparatus
US20080252596A1 (en) Display Using a Three-Dimensional vision System
KR20120058594A (ko) 향상된 신호 대 노이즈비（ｓｎｒ）를 갖는 인터랙티브 입력 시스템 및 이미지 캡처 방법
US20050024324A1 (en) Quasi-three-dimensional method and apparatus to detect and localize interaction of user-object and virtual transfer device
TW201423484A (zh) 動態偵測系統
KR20160104743A (ko) 영상-기반 인터랙티브 프로젝션 시스템
TW201112092A (en) Optical touch system and method thereof
US20130127704A1 (en) Spatial touch apparatus using single infrared camera
KR100936666B1 (ko) 적외선 스크린 방식의 투영 영상 터치 장치
JP6528964B2 (ja) 入力操作検出装置、画像表示装置、プロジェクタ装置、プロジェクタシステム、及び入力操作検出方法
KR100977558B1 (ko) 적외선 스크린 방식의 공간 터치 장치
KR101002072B1 (ko) 펄스 구동 방식의 투영 영상 터치 장치
KR20090116544A (ko) 적외선 카메라 방식의 공간 터치 감지 장치, 방법 및스크린 장치
KR101002071B1 (ko) 멀티 적외선 카메라 방식의 투영 영상 터치 장치
KR102495234B1 (ko) 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application