KR101065771B1 - 터치 디스플레이 시스템 - Google Patents

터치 디스플레이 시스템 Download PDF

Info

Publication number
KR101065771B1
KR101065771B1 KR1020090039768A KR20090039768A KR101065771B1 KR 101065771 B1 KR101065771 B1 KR 101065771B1 KR 1020090039768 A KR1020090039768 A KR 1020090039768A KR 20090039768 A KR20090039768 A KR 20090039768A KR 101065771 B1 KR101065771 B1 KR 101065771B1
Authority
KR
South Korea
Prior art keywords
image
light
touch
display device
screen
Prior art date
Application number
KR1020090039768A
Other languages
English (en)
Other versions
KR20100120902A (ko
Inventor
최순필
Original Assignee
(주)초이스테크놀로지
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)초이스테크놀로지 filed Critical (주)초이스테크놀로지
Priority to KR1020090039768A priority Critical patent/KR101065771B1/ko
Publication of KR20100120902A publication Critical patent/KR20100120902A/ko
Application granted granted Critical
Publication of KR101065771B1 publication Critical patent/KR101065771B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04166—Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units

Abstract

본 발명은 터치 디스플레이 시스템에 관한 것으로, 화면 상에 영상을 표시하기 위한 영상 디스플레이 디바이스와; 상기 영상 디스플레이 디바이스의 화면으로의 접촉에 반응하는 터치 감지 유닛과, 상기 터치 감지 유닛이 상기 영상 디스플레이 디바이스의 화면으로의 접촉에 반응하는 경우 비가시광선 영역의 빛을 발광하는 발광부를 갖는 터치 디바이스와; 상기 영상 디스플레이 디바이스의 화면을 촬영하되, 가시광선 영역의 빛이 차단되고 비가시광선 영역의 빛의 촬영이 가능한 카메라와; 상기 영상 디스플레이 디바이스에 영상이 표시되도록 상기 영상 디스플레이 디바이스에 영상신호를 출력하고, 상기 카메라에 의해 촬영된 영상 데이터로부터 상기 발광부로부터 발광된 빛의 상기 영상 디스플레이 디바이스의 화면 상의 좌표를 산출하며, 상기 발광부로부터 발광된 빛을 상기 산출된 좌표에 대한 터치로 인식하여 처리하는 정보처리 디바이스를 포함하는 것을 특징으로 한다. 이에 따라, 제작 비용이 저렴한 새로운 형태의 터치스크린 개념이 도입되고, 터치스크린 장치가 설치되지 않은 기존의 영상 디스플레이 디바이스에도 간편하게 설치가 가능하여 기존의 영상 디스플레이 디바이스를 활용할 수 있는 효과가 제공되며, 그 설치가 간단하여 일반 사용자도 쉽게 설치 가능한 효과가 제공된다.

Description

터치 디스플레이 시스템{TOUCH DISPLAY SYSTEM}
본 발명은 터치 디스플레이 시스템에 관한 것으로서, 제작 비용이 저렴하면서도 설치가 간편한 새로운 형태의 터치스크린 개념이 도입된 터치 디스플레이 시스템에 관한 것이다.
일반적으로 터치스크린(Touch Screen)은 각종 영상 디스플레이 디바이스를 이용하는 정보통신기기와 사용자 간의 인터페이스를 구성하는 방식 중의 하나로서, 사용자가 손가락이나 팬 등(이하, '손가락 등'이라 함)으로 화면을 터치하는 방식으로 기기와 인터페이스 할 수 있는 입력장치의 하나이다.
터치스크린은 영상 디스플레이 디바이스에 표시되어 있는 버튼을 손가락 등으로 터치하는 것만으로 컴퓨터 등을 대화적, 직감적으로 조작함으로써 남녀노소 누구나 쉽게 사용할 수 있는 입력장치이기 때문에, 현재 PDA(Personal Digital Assistant), 타블렛 PC, 은행이나 관공서의 디스플레이, 각종 의료장비, 관광 및 주요 기관의 안내 등 많은 분야에서 적용되고 있다.
또한, 근래에는 PDP(Plasma Display Panel)나 LCD(Liquid Crystal Display)와 같은 평판 디스플레이 디바이스가 대형화되면서도 그 가격이 내려감에 따라, PDP나 LCD의 화면 전면에 터치스크린 장치를 설치하고 이를 기존의 화이트보드를 대체하는 디지털 보드의 형태로 사용하는 새로운 용도가 제안되고 있다.
이러한 터치스크린에서 스크린 상의 터치를 인식하는 방법으로는 적외선 광 방식, 초음파 방식, 저항막 방식 등이 있다.
저항막 방식을 사용하는 터치스크린은 전도성 물질이 코팅된 투명한 유리나 플라스틱으로 구성된 하부층과 전도성 물질이 코팅된 필름으로 구성된 상부층으로 구성된 투명한 두 층으로 구성되는데, 두 층은 미세하게 인쇄된 스페이서 도트(Spacer dots)에 의해 일정한 간격을 유지하며 전기적으로 절연된다.
저항막 방식의 동작 원리는 전도성 물질이 코팅된 두 층에 일정한 전압이 가해지고, 손가락 등으로 상부층을 터치하게 되면 터치위치에 따라 상부층(X축), 하부층(Y축) 각각에 저항의 변화가 생기는데 이 때 저항값이 변한 상부층(X축), 하부층(Y축)의 위치를 감지함으로써 터치 위치를 검출한다.
초음파 방식은 5MHz 정도의 전기 신호를 초음파를 생성하는 송신 변환기로 보내고, 생성된 초음파를 반사선들에 의해 판넬 표면을 통과시킨다. 이 때, 사용자가 터치스크린의 표면을 터치하는 경우 그 지점을 통과하는 초음파의 일부가 사용자에 의해 흡수되고, 수신된 신호와 디지털 지도에 의해 손실된 신호는 컨트롤러에 의해 확인된다. 이를 바탕으로 현재 신호의 변화가 있는 지점의 좌표값을 산출함으로써, 터치 위치를 검출하게 된다.
적외선 광 방식은 적외선의 직진성을 이용하는 것으로, 장애물이 가로와 세로 방향으로 나오는 적외선을 차단할 때 차단된 부분의 좌표를 감지하는 방식이다. 적외선 광 방식은 대화면의 평판 디스플레이 디바이스에 널리 적용되고 있는 방식 중 하나이다.
그런데, 대화면의 평판 디스플레이 디바이스에 적외선 광 방식의 터치스크린을 적용하기 위해서는 평판 디스플레이 디바이스에 가로 및 세로 방향 양측에 각각 적외선 송신소자와 적외선 수신소자를 배치하여야 하기 때문에 그 가격이 고가인 단점이 있다.
또한, 적외선 광 방식과 같은 터치스크린 장치가 설치되지 않은 평판 디스플레이 디바이스에 터치스크린 장치를 설치하고자 하는 경우에는, 터치스크린 장치의 제조사에서 평판 디스플레이 디바이스를 분해한 후 설치하여야 하는 문제점이 있어, 일반 사용자가 간편하게 기존의 평판 디스플레이 디바이스와 같은 영상 디스플레이 디바이스에 터치스크린 장치를 설치하기는 현실적으로 어려운 문제점이 있다.
이에, 본 발명은 상기와 같은 문제점을 해결하기 위해 안출된 것으로서, 제작 비용이 저렴한 새로운 형태의 터치스크린 개념이 도입된 터치 디스플레이 시스템을 제공하는데 그 목적이 있다.
또한, 본 발명은 기존의 영상 디스플레이 디바이스에 터치스크린 장치를 적용하는데 있어 그 설치가 간편하여 일반 사용자도 설치가 가능한 터치 디스플레이 시스템을 제공하는데 그 목적이 있다.
상기 목적은 본 발명에 따라, 터치 디스플레이 시스템에 있어서, 화면 상에 영상을 표시하기 위한 영상 디스플레이 디바이스와; 상기 영상 디스플레이 디바이스의 화면으로의 접촉에 반응하는 터치 감지 유닛과, 상기 터치 감지 유닛이 상기 영상 디스플레이 디바이스의 화면으로의 접촉에 반응하는 경우 비가시광선 영역의 빛을 발광하는 발광부를 갖는 터치 디바이스와; 상기 영상 디스플레이 디바이스의 화면을 촬영하되, 가시광선 영역의 빛이 차단되고 비가시광선 영역의 빛의 촬영이 가능한 카메라와; 상기 영상 디스플레이 디바이스에 영상이 표시되도록 상기 영상 디스플레이 디바이스에 영상신호를 출력하고, 상기 카메라에 의해 촬영된 영상 데이터로부터 상기 발광부로부터 발광된 빛의 상기 영상 디스플레이 디바이스의 화면 상의 좌표를 산출하며, 상기 발광부로부터 발광된 빛을 상기 산출된 좌표에 대한 터치로 인식하여 처리하는 정보처리 디바이스를 포함할 수 있다.
여기서, 상기 터치 디바이스는 상기 발광부를 수용하는 디바이스 본체를 포함하며; 상기 터치 감지 유닛은, 상기 영상 디스플레이 디바이스의 화면에 접촉될 때 탄성적으로 가압되도록 상기 디바이스 본체에 설치되는 가압 반응 유닛과; 상기 가압 반응 유닛이 탄성적으로 가압될 때 스위칭되어 상기 발광부를 발광시키는 스위칭부를 포함할 수 있다.
그리고, 상기 카메라는, 상기 비가시광선 영역의 빛을 감지 가능한 광 센서 모듈과; 상기 광 센서 모듈의 전방에 설치되어 상기 영상 디스플레이 디바이스의 화면의 촬영에 의해 입사되는 빛 중 가시광선 영역의 빛을 차단하는 가시광선 차단 필터와; 상기 광 센서 모듈에 의해 수신된 빛에 기초하여 영상 데이터를 생성하는 영상 데이터 생성부와; 상기 영상 데이터 생성부에 의해 생성된 상기 영상 데이터 를 상기 정보처리 디바이스로 전송하는 카메라 인터페이스부를 포함할 수 있다.
한편, 상기 목적은 본 발명의 다른 실시 형태에 따라, 터치 디스플레이 시스템에 있어서, 화면 상에 영상을 표시하기 위한 영상 디스플레이 디바이스와, 상기 영상 디스플레이 디바이스의 화면으로의 접촉에 반응하는 터치 감지 유닛과, 상기 터치 감지 유닛이 상기 영상 디스플레이 디바이스의 화면으로의 접촉에 반응하는 경우 비가시광선 영역의 빛을 발광하는 발광부를 갖는 터치 디바이스와, 비가시광선 영역의 빛을 촬영하되 가시광선 영역의 빛을 선택적으로 촬영 가능하게 마련되어 상기 영상 디스플레이 디바이스의 화면을 촬영하는 카메라와, 상기 영상 디스플레이 디바이스를 통해 영상이 표시되도록 상기 영상 디스플레이 디바이스에 영상신호를 출력하고, 상기 카메라가 가시광선 영역의 빛을 촬영하는 상태에서 동작하는 칼리브레이션 모드와 상기 카메라가 가시광선 영역의 빛의 촬영이 차단되고 비가시광선 영역의 빛을 촬영하는 상태에서 동작하는 터치 모드로 동작 가능한 정보처리 디바이스를 포함하며; 상기 정보처리 디바이스는 상기 칼리브레이션 모드로 동작하는 상태에서 적어도 하나의 칼리브레이션 영상을 상기 영상 디스플레이 디바이스에 표시하고, 상기 카메라에 의해 촬영된 촬영 영상으로부터 상기 칼리브레이션 영상을 추출하여 촬영 영상 중 상기 영상 디스플레이 디바이스의 화면 영역을 결정하고, 상기 터치 모드로 동작하는 상태에서 상기 카메라에 의해 촬영된 영상 데이터로부터 상기 발광부로부터 발광된 빛의 상기 영상 디스플레이 디바이스의 화면 상의 좌표를 산출하며, 상기 발광부로부터 발광된 빛을 상기 산출된 좌표에 대한 터치로 인식하여 처리하는 터치 디스플레이 시스템에 의해서도 달성될 수 있다.
여기서, 상기 정보처리 디바이스는, 상기 카메라로부터 수신되는 촬영 영상으로부터 영상 프레임을 캡처하는 영상 캡처 모듈과; 상기 칼리브레이션 모드로 동작하는 상태에서 상기 영상 캡처 모듈에 의해 캡처된 영상 프레임으로부터 상기 칼리브레이션 영상을 추출하여 상기 화면 영역을 결정하는 칼리브레이션 모듈과; 상기 터치 모드로 동작하는 상태에서 상기 영상 캡처 모듈에 의해 캡처된 영상 프레임으로부터 상기 발광부로부터 발광된 빛을 검출하여 영상 프레임 상에서의 좌표를 결정하는 터치 검출 모듈과; 상기 터치 검출 모듈에 의해 결정된 상기 발광부로부터 발광된 빛의 영상 프레임 상에서의 좌표에 기초하여 상기 화면 영역 상의 좌표를 산출하는 좌표 산출 모듈과; 상기 칼리브레이션 모드로 동작하는 상태에서 상기 칼리브레이션 영상을 상기 영상 디스플레이 디바이스에 표시하고, 상기 터치 모드로 동작하는 상태에서 상기 좌표 산출 모듈에 의해 산출된 좌표를 상기 화면 영역 상의 좌표에 대한 터치로 인식하여 처리하는 메인 제어 모듈을 포함할 수 있다.
그리고, 상기 칼리브레이션 영상은 화면의 네 모서리에 사각 형상의 제1 보정 이미지가 각각 표시된 제1 칼리브레이션 영상과, 상기 각 제1 보정 이미지의 내측 대각 방향의 꼭지점을 공유하며 상기 각 제1 보정 이미지로부터 내측 대각 방향에 위치하는 사각 형상의 제2 보정 이미지가 표시된 제2 칼리브레이션 영상과, 전체가 동일한 밝기값을 갖는 배경 이미지가 표시된 제3 칼리브레이션 영상을 포함하며; 상기 제1 칼리브레이션 영상에서 상기 제1 보정 이미지 외의 영역과 상기 제2 칼리브레이션 영상에서 상기 제2 보정 이미지 이외의 영역은 상기 제3 칼리브레이션 영상의 상기 배경 이미지와 동일한 밝기값을 가지며; 상기 칼리브레이션 모듈은 상기 영상 캡처 모듈에 의해 캡처된 상기 제1 칼리브레이션 영상에 대한 제1 영상 프레임과 상기 제3 칼리브레이션 영상에 대한 제3 영상프레임 간의 제1 차영상을 생성하고, 상기 제1 차영상을 4개의 사분면으로 분할하여 각 사분면에 대한 제1 대표 보정 좌표를 결정하며; 상기 영상 캡처 모듈에 의해 캡처된 상기 제2 칼리브레이션 영상에 대한 제2 영상 프레임과 상기 제3 영상 프레임 간의 제2 차영상을 생성하고, 상기 제2 차영상을 4개의 사분면으로 분할하여 각 사분면에 대한 제2 대표 보정 좌표를 결정하며; 상기 4개의 제1 대표 보정 좌표 및 상기 4개의 제2 대표 보정 좌표에 기초하여 촬영 영상 중 상기 화면 영역을 형성하는 4개의 외곽 모서리 좌표를 산출하여 상기 화면 영역을 결정할 수 있다.
그리고, 상기 제1 대표 보정 좌표 및 상기 제2 대표 보정 좌표는 각 사분면 내에서 가장 밝은 픽셀의 좌표로 결정될 수 있다.
그리고, 상호 대응하는 상기 제1 보정 이미지 및 상기 제2 보정 이미지는 동일한 형상을 가지며; 상기 각 외곽 모서리 좌표는 수학식 Ck = Pk + (Pk - Pk')/2 (여기서, Ck는 k 번째 외곽 모서리 좌표이고, Pk는 k 번째 제1 대표 보정 좌표이고, Pk'는 k 번째 제2 대표 보정 좌표이다)에 의해 산출될 수 있다.
그리고, 상기 터치 검출 모듈은 상기 영상 캡처 모듈에 의해 캡처된 상기 영상 프레임 중 가장 밝은 픽셀을 검출하고; 기 설정된 크기의 윈도우 영역을 상기 가장 밝은 픽셀을 중심으로 기 설정된 탐색 범위 내에서 이동시키며 상기 윈도우 영역의 평균 밝기값을 산출하며; 상기 탐색 범위 내에서의 상기 윈도우 영역의 각 위치 중 가장 큰 평균 밝기값을 갖는 위치의 윈도우 영역의 중심 픽셀을 상기 영상 프레임 내에서 상기 발광부로부터 발광된 빛의 위치로 결정할 수 있다.
그리고, 상기 터치 검출 모듈은 상기 가장 밝은 픽셀의 밝기가 기 설정된 기준 밝기값 이하인 경우 검출 오류로 판단하고, 상기 가장 큰 평균 밝기값이 상기 기준 밝기값 이하인 경우 검출 오류로 판단할 수 있다.
그리고, 상기 좌표 산출 모듈은 상기 영상 프레임의 해상도와, 상기 영상 디스플레이 디바이스에 표시된 영상의 해상도와, 상기 칼리브레이션 모듈에 의해 결정된 상기 화면 영역에 기초하여, 상기 터치 검출 모듈에 의해 결정된 상기 영상 프레임 상의 좌표에 대한 상기 영상 디스플레이 디바이스의 화면 내의 좌표 범위를 산출하고; 상기 좌표 범위의 중심 좌표를 상기 화면 영역 상의 좌표로 산출할 수 있다.
여기서, 상기 카메라는, 가시광선 영역의 빛과 비가시광선 영역의 빛을 감지 가능한 이미지 센서 모듈과; 상기 이미지 센서 모듈에 비가시광선 영역이 빛이 전달되도록 가시광선 영역의 빛을 차단하는 가시광선 차단 필터와; 상기 이미지 센서 모듈로 가시광선 영역의 빛이 입사 또는 차단되도록 상기 가시광선 차단 필터를 구동하는 필터 구동부와; 상기 이미지 센서 모듈에 의해 수신된 빛에 기초하여 촬영 영상을 생성하는 촬영 영상 생성부와; 상기 촬영 영상 생성부에 의해 생성된 촬영 영상을 상기 정보처리 디바이스로 전송하는 카메라 인터페이스부를 포함할 수 있다.
상기와 같은 구성을 통해, 제작 비용이 저렴한 새로운 형태의 터치스크린 개념이 도입된 터치 디스플레이 시스템이 제공된다.
또한, 터치스크린 장치가 설치되지 않은 기존의 영상 디스플레이 디바이스에도 간편하게 설치가 가능하여, 기존의 영상 디스플레이 디바이스를 활용할 수 있는 효과가 제공되며, 그 설치가 간단하여 일반 사용자도 쉽게 설치 가능한 효과가 제공된다.
또한, 터치 디바이스의 발광부가 비가시광선 영역의 빛, 예를 들어 적외선 빔을 방출하고 카메라가 가시광선 영역의 빛을 차단하도록 마련됨으로써, 터치 위치의 보다 정확한 검출이 가능하게 된다.
이하에서는 첨부된 도면을 참조하여 본 발명을 상세히 설명한다.
도 1은 본 발명에 따른 터치 디스플레이 시스템의 구성을 도시한 도면이다. 도 1에 도시된 바와 같이, 본 발명에 따른 터치 디스플레이 시스템은 영상 디스플레이 디바이스(50)와, 터치 디바이스(10), 카메라(40) 및 정보처리 디바이스(30)를 포함한다.
영상 디스플레이 디바이스(50)는 정보처리 디바이스(30)로부터 전달되는 영상신호를 처리하여 화면 상에 영상을 표시한다. 여기서, 본 발명에 따른 영상 디스플레이 디바이스(50)는, 도 1에 도시된 바와 같이, 평판 디스플레이 디바이스, 예를 들어, PDP(Plasma Display Panel)나 LCD(Liquid Crystal Display) 방식의 평판 디스플레이 디바이스 형태로 마련되는 것을 일 예로 한다.
터치 디바이스(10)는 사용자가 터치스크린 방식을 통해 정보처리 디바이스(30)에 입력 신호를 입력하기 위해 영상 디스플레이 디바이스(50)의 화면을 터치하는데 사용된다.
이하에서는, 도 2 및 도 3을 참조하여 본 발명에 따른 터치 디바이스(10)의 일 실시 형태에 대해 상세히 설명한다. 본 발명에 따른 터치 디바이스(10)는, 도 2 및 도 3에 도시된 바와 같이, 터치 감지 유닛(130,132)과 발광부(120,124)를 포함한다. 또한, 터치 디바이스(10)는 발광부(120,124)를 수용하는 디바이스 본체(110)를 포함할 수 있다.
터치 감지 유닛(130,132)은 터치 디바이스(10)가 영상 디스플레이 디바이스(50)의 화면에 접촉하는 경우, 해당 접촉에 반응하도록 마련된다. 여기서, 본 발명에 따른 터치 감지 유닛(130,132)은 가압 반응 유닛(130)과 스위칭부(132)를 포함할 있다.
가압 반응 유닛(130)은, 터치 디바이스(10)가 영상 디스플레이 디바이스(50)의 화면에 접촉할 때, 탄성적으로 가압되도록 디바이스 본체(110)에 설치된다. 도 3을 참조하여 보다 상세하게 설명하면, 가압 반응 유닛(130)은 대략 통 형상으로 마련되며, 그 내부에 디바이스 본체(110)의 일측에 마련된 가압 가이드부(111)가 삽입된다. 또한, 가압 반응 유닛(130)과 디바이스 본체(110)의 가압 가이드부(111)에는 상호 걸리는 걸림턱부(A)가 마련되어 가압 반응 유닛(130)이 디바이스 본체(110)로부터 이탈되는 것을 방지한다. 그리고, 디바이스의 본체의 가압 가이드부(111)와 가압 반응 유닛(130)의 내측벽 사이에는 가압 가이드부(111)를 밀어내는 방향으로 탄성력이 작용하는 탄성부재(131)가 설치된다.
상기와 같은 구성에 따라, 사용자가 터치 디바이스(10)로 영상 디스플레이 디바이스(50)를 터치하게 되면, 가압 반응 유닛(130)이 가압되어 디바이스 본체(110) 방향으로 슬라이딩 이동하고, 터치가 해제되면 탄성부재(131)의 탄성력에 따라 가압 반응 유닛(130)이 디바이스 본체(110)로부터 이격되는데 이 때 걸림턱부(A)가 상호 걸리게 되어 가압 반응 유닛(130)의 이탈이 저지된다.
한편, 스위칭부(132)는 가압 반응 유닛(130)이 터치 디바이스(10)를 이용한 화면의 터치에 따라 탄성적으로 가압될 때 스위칭되어 발광부(120,124)를 발광시킨다. 도 3에서는 스위칭부(132)가 가압 반응 유닛(130)이 디바이스 본체(110) 방향으로 슬라이딩 이동할 때 상호 접촉되도록 마련되는 것을 예로 하고 있으나, 가압 반응 유닛(130)의 슬라이딩 이동에 따라 온오프될 수 있는 다른 다양한 형태로 마련될 수 있음은 물론이다.
터치 디바이스(10)의 발광부(120,124)는 터치 감지 유닛(130,132)이 영상 디스플레이 디바이스(50)의 화면으로의 접촉에 반응하는 경우 비가시광선 영역의 빛을 발광한다. 여기서, 상술한 터치 감지 유닛(130,132)의 구성에 따르는 경우, 발광부(120,124)는 스위칭부(132)의 스위칭에 따라 비가시광선 영역의 빛을 발광한다.
도 3을 참조하여 설명하면, 발광부(120,124)는 비가시광선 영역의 빛을 방출 하는 레이저 모듈(120)과, 광 확산부(124)를 포함할 수 있다.
레이저 모듈(120)은 디바이스 본체(110)에 수용되며, 스위칭부(132)의 스위칭에 따라 비가시광선 영역에 빛을 방출한다. 여기서, 레이저 모듈(120)은 비가시광선 영역의 빛을 발생하는 광원부(122)와, 스위칭부(132)의 스위칭 동작에 반응하여 광원부(122)의 발광 여부를 제어하는 제어회로부(121)를 포함할 수 있다. 그리고, 레이저 모듈(120)은 광원부(122)의 전방에 위치하여 광원부(122)로부터 출광된 레이저 광을 집광시키는 렌즈(123)를 더 포함할 수 있다. 여기서, 본 발명에 따른 레이저 모듈(120)은 비가시광선 영역의 적외선 빔을 방출하는 것을 일 예로 한다.
레이저 모듈(120)로부터 출광된 빛은 디바이스 본체(110)의 가압 가이드부(111)에 형성된 광 통과공(112)을 통과하여, 가압 반응 유닛(130)에 형성된 광 노출공(133)을 통과하여 광 확산부(124)로 입사된다. 여기서, 광 확산부(124)는 입사되는 광을 확산시킴으로써, 카메라(40)에 의한 촬영시 터치 디바이스(10)의 발광이 감지 가능하게 된다. 여기서, 광 확산부(124)는 빛을 확산시킬 수 있는 재질로 마련되며, 일 예로 아크릴, ABS, 폴리카보네이트(Polycarbonate) 또는 유리 재질로 마련될 수 있다.
상기와 같은 구성에 따라 사용자가 터치 디바이스(10)를 이용하여 영상 디스플레이 디바이스(50)의 화면을 터치하게 되면, 발광부(120,124)의 광 확산부(124)에서 비가시광선 영역의 빛, 예컨대 적외선 빔이 발광하게 되는데, 이는 사람이 시각적으로 인식하지 못하는 빛이 된다.
한편, 카메라(40)는 영상 디스플레이 디바이스(50)에 의해 표시되는 화면 상 의 영상을 촬영한다. 여기서, 본 발명에 따른 카메라(40)는 영상 디스플레이 디바이스(50)의 화면을 촬영하되, 가시광선 영역의 빛이 차단되고 비가시광선 영역의 빛의 촬영이 가능한 형태로 마련된다. 그리고, 본 발명의 실시예에서는 카메라(40)가, 도 4에 도시된 바와 같이, 가시광선 영역의 빛을 선택적으로 촬영 가능하게 마련되는 것을 일 예로 한다.
여기서, 카메라(40)가 비가시광선 영역의 빛의 촬영이 차단되고 비가시광선 영역이 빛을 촬영하는 상태에서 영상이 표시되고 있는 영상 디스플레이 디바이스(50)를 촬영할 때, 영상 디스플레이 디바이스(50)와 화면에 표시되는 영상 중 가시광선 영역에 해당하는 영상, 즉 정보처리 디바이스(30)로부터 출력되어 영상 디스플레이 디바이스(50)의 화면에 표시되는 영상은 촬영되지 않고, 터치 디바이스(10)를 이용하여 영상 디스플레이 디바이스(50)의 화면을 터치할 때 터치 디바이스(10)의 발광부(120,124)에 의해 방출되는 비가시광선 영역의 빛, 즉 적외선 빔이 촬영된다.
도 4를 참조하여 본 발명에 따른 카메라(40)의 구성의 일 예를 설명하면, 본 발명에 따른 카메라(40)는 가시광선 차단 필터(42), 필터 구동부(44), 촬영 영상 생성부(43), 카메라 인터페이스부(45)를 포함할 수 있다.
가시광선 차단 필터(42)는 카메라(40)로 입사되는 빛 중 가시광선 영역의 빛을 차단한다. 그리고, 필터 구동부(44)는 이미지 센서 모듈(41)로 가시광선 영역의 빛이 입사 또는 차단되도록 가시광선 차단 필터(42)를 구동한다. 즉, 필터 구동부(44)는 이미지 센서 모듈(41)의 전방에 가시광선 차단 필터(42)가 배치되도록 가시광선 차단 필터(42)를 구동시켜 이미지 센서 모듈(41)로 가시광선 영역의 빛의 입사를 차단시킨다. 또한, 필터 구동부(44)는 이미지 센서 모듈(41)의 전방에 배치된 가시광선 차단 필터(42)를 제거하여 이미지 센서 모듈(41)로 가시광선 영역의 빛이 입사되도록 한다.
이미지 센서 모듈(41)은 가시광선 영역의 빛과 비가시광선 영역의 빛을 감지하며, CMOS 센서나 CCD 센서 형태로 마련될 수 있다. 여기서, 이미지 센서 모듈(41)은 그 전방에 가시광선 차단 필터(42)가 배치된 상태에서는 비가시광선 영역의 빛, 예컨대 영상 디스플레이 디바이스(50)의 화면의 터치에 의해 발생한 터치 디바이스(10)의 발광부(120,124)로부터의 적외선 빔은 감지하지만 영상 디스플레이 디바이스(50)에 표시되는 영상은 가시광선 차단 필터(42)에 의해 차단되어 감지되지 않는다. 반면, 이미지 센서 모듈(41)은 가시광선 차단 필터(42)가 그 전방에서 제거된 상태에서는 비가시광선 영역의 빛과 가시광선 영역의 빛을 모두 감지하게 되어 영상 디스플레이 디바이스(50)에 표시된 영상 또한 감지하게 된다.
촬영 영상 생성부(43)는 이미지 센서 모듈(41)에 의해 감지된 빛에 기초하여 촬영 영상을 생성한다. 그리고, 촬영 영상 생성부(43)에 의해 생성된 촬영 영상은 카메라 인터페이스부(45)를 통해 정보처리 디바이스(30)로 전달된다. 여기서, 본 발명에 따른 카메라 인터페이스부(45)는 USB(Universal Serial Bus) 통신을 통해 정보처리 디바이스(30)와 연결되는 것을 일 예로 하며, 이에 따라 촬영 영상 생성부(43)에 의해 생성되는 촬영 영상은 USB 포맷 데이터 형태로 변환되어 전송될 수 있다. 여기서, 본 발명에 따른 카메라 인터페이스부(45)에 USB(Universal Serial Bus) 통신이 적용되는 것은 하나의 예을 뿐이며, IEEE 1394 등과 같이 다른 통신 방식이 적용 가능함은 물론이다.
한편, 정보처리 디바이스(30)는 영상 디스플레이 디바이스(50)에 영상이 표시되도록 영상 디스플레이 디바이스(50)에 영상신호를 출력한다. 그리고, 정보처리 디바이스(30)는 카메라(40)가 가시광선 영역의 빛을 촬영하는 상태에서 동작하는 칼리브레이션 모드(Calibration mode)와, 카메라(40)가 가시광선 영역의 빛의 촬영이 차단되고 비가시광선 영역의 빛을 촬영하는 상태에서 동작하는 터치 모드(Touch mode)로 선택적으로 동작한다.
여기서, 정보처리 디바이스(30)는 칼리브레이션 모드로 동작하는 상태에서 적어도 하나의 칼리브레이션 영상을 영상 디스플레이 디바이스(50)에 표시한다. 그리고, 정보처리 디바이스(30)는 카메라(40)가 영상 디스플레이 디바이스(50)의 화면을 촬영한 촬영 영상을 전달받는데, 칼리브레이션 모드인 상태에서 카메라(40)는 가시광선 영역의 빛을 촬영하므로 정보처리 디바이스(30)로 전달된 촬영 영상은 칼리브레이션 영상을 포함하게 된다. 그리고, 정보처리 디바이스(30)는 카메라(40)로부터 전달된 촬영 영상으로부터 칼리브레이션 영상을 추출하고, 추출된 칼리브레이션 영상에 기초하여 전체 촬영 영상 중 영상 디스플레이 디바이스(50)의 화면 영역을 결정한다.
또한, 정보처리 디바이스(30)는 터치 모드로 동작하는 상태, 즉 카메라(40)가 가시광선 차단 필터(42)에 의해 가시광선 영역의 빛을 촬영하지 않은 상태에서, 카메라(40)에 의해 촬영된 촬영 영상으로부터 비가시광선 영역의 빛인 터치 디바이 스(10)의 발광부(120,124)에서 발광하는 적외선 빔을 검출한다. 그리고, 정보처리 디바이스(30)는 칼리브레이션 모드에서 결정된 영상 디스플레이 디바이스(50)의 화면 영역 상에서 터치 디바이스(10)의 발광부(120,124)로부터 발광되는 빛의 좌표를 산출하고, 터치 디바이스(10)로부터 발광된 빛을 산출된 좌표에 대한 터치로 인식하여 처리한다.
이하에서는 도 5를 참조하여, 본 발명에 따른 정보처리 디바이스(30)에 대해 상세히 설명한다. 본 발명에 따른 정보처리 디바이스(30)는, 도 5에 도시된 바와 같이, 영상 캡처 모듈(31), 칼리브레이션 모듈(32), 터치 검출 모듈(33), 좌표 산출 모듈(34) 및 메인 제어 모듈(35)을 포함할 수 있다.
영상 캡처 모듈(31)은 카메라(40)에 의해 촬영되어 전송된 촬영 영상을 수신하고, 수신된 촬영 영상으로부터 영상 프레임을 캡처한다.
칼리브레이션 모듈(32)은 정보처리 디바이스(30)가 칼리브레이션 모드로 동작하는 상태에서 영상 캡처 모듈(31)에 의해 캡처된 영상 프레임으로부터 칼리브레이션 영상을 추출하여 전체 영상 프레임 중 화면 영역을 결정한다. 여기서, 본 발명에 따른 칼리브레이션 모듈(32)은 3개의 칼리브레이션 영상을 이용하여 화면 영역을 결정하는 것을 일 예로 하며, 도 6 내지 도 10을 참조하여 3개의 칼리브레이션 영상을 이용하여 화면 영역을 결정하는 과정에 대해 상세히 설명한다.
먼저, 정보처리 디바이스(30)가 칼리브레이션 모드로 동작하는 상태에서, 메인 제어 모듈(35)은 도 6의 (a)에 도시된 바와 같은 제1 칼리브레이션 영상(100)을 영상 디스플레이 디바이스(50)에 표시한다. 이 때, 카메라(40)는 칼리브레이션 모 드에서 가시광선 영역의 빛을 촬영할 수 있도록 가시광선 차단 필터(42)가 이미지 센서 모듈(41)의 전방에서 제거된 상태이다. 여기서, 제1 칼리브레이션 영상(100)에는, 도 5의 (a)에 도시된 바와 같이, 화면의 네 모서리에 사각 형상의 제1 보정 이미지(101,102,103,104)들이 각각 표시된다.
그리고, 영상 캡처 모듈(31)은 카메라(40)로부터 촬영되어 전달되는 촬영 화면으로부터 영상 프레임(이하, '제1 영상 프레임(100a)'이라 함)을 캡처한다. 도 6의 (b)는 영상 캡처 모듈(31)에 의해 캡처된 제1 영상 프레임(100a)을 도시한 것으로, 영상 디스플레이 디바이스(50)의 화면, 즉 화면 영역이 모두 포함되어 촬영될 수 있도록 카메라(40)가 조절되므로 카메라(40)가 촬영하는 전체 촬영 영상보다 영상 디스플레이 디바이스(50)에 화면이 작다.
동일한 방법으로, 메인 제어 모듈(35)은 도 7의 (a)에 도시된 바와 같은 제2 칼리브레이션 영상(200)을 영상 디스플레이 디바이스(50)에 표시한다. 그리고, 영상 캡처 모듈(31)은 카메라(40)로부터 촬영되어 전달되는 촬영 화면으로부터 영상 프레임(이하, '제2 영상 프레임(200a)'이라 함)을 캡처한다. 도 7의 (b)는 영상 캡처 모듈(31)에 의해 캡처된 제2 영상 프레임(200a)을 도시한 도면이다.
여기서, 제2 칼리브레이션 영상(200)에는, 도 7의 (a)에 도시된 바와 같이, 제1 보정 이미지(101,102,103,104)로부터 내측 대각 방향에 각각 위치하는 사각 형상의 제2 보정 이미지(201,202,203,204)들이 표시되는데, 상호 대응하는 제1 보정 이미지(101,102,103,104) 및 제2 보정 이미지(201,202,203,204)는 제1 보정 이미지(101,102,103,104)의 내측 대각 방향의 꼭지점과 제2 보정 이미 지(201,202,203,204)의 외측 대각 방향의 꼭지점이 공유된다. 그리고, 상호 대응하는 제1 보정 이미지(101,102,103,104) 및 제2 보정 이미지(201,202,203,204)는 동일한 형상, 예컨대 동일 사이즈의 정사각형 형상을 갖는 것을 일 예로 한다.
그런 다음, 메인 제어 모듈(35)은 도 8의 (a)에 도시된 바와 같은 제3 칼리브레이션 영상(300)을 영상 디스플레이 디바이스(50)에 표시한다. 그리고, 영상 캡처 모듈(31)은 카메라(40)로부터 촬영되어 전달되는 촬영 화면으로부터 영상 프레임(이하, '제3 영상 프레임(300a)'이라 함)을 캡처한다. 도 8의 (c)는 영상 캡처 모듈(31)에 의해 캡처된 제2 영상 프레임(200a)을 도시한 도면이다.
여기서, 제3 칼리브레이션 영상(300)에는 전체가 동일한 픽셀값을 갖는 배경 이미지(예컨대, 블랙 이미지)가 표시된다. 그리고, 제1 칼리브레이션 영상(100)에서 제1 보정 이미지(101,102,103,104) 외의 영역과, 제2 칼리브레이션 영상(200)에서 제2 보정 이미지(201,202,203,204) 이외의 영역은 제3 칼리브레이션 영상(300)의 배경 이미지와 동일한 픽셀값을 갖도록 마련된다.
상기와 같은 과정을 통해, 제1 영상 프레임(100a), 제2 영상 프레임(200a) 및 제3 영상 프레임(300a)이 캡처되면, 칼리브레이션 모듈(32)은 제1 영상 프레임(100a)과 제3 영상 프레임(300a) 간의 제1 차영상(400)을 생성한다. 여기서, 제1 차영상(400)은 제1 영상 프레임(100a)과 제3 영상 프레임(300a)의 상호 대응하는 픽셀의 밝기값의 차이값으로 각 픽셀의 밝기값이 결정된다.
도 9의 (a)는 제1 차영상(400)을 도시한 도면으로, 제1 영상 프레임(100a)의 제1 보정 이미지(101,102,103,104)들을 제외한 부분은 제3 영상 프레임(300a)과 이 상적으로 동일하므로, 제1 차영상(400)에서 제1 보정 이미지(101,102,103,104)가 위치하는 영역 이외의 영역의 밝기값은 제1 보정 이미지(101,102,103,104)가 위치하는 영역 보다 낮다. 또한, 제1 영상 프레임(100a)의 제1 보정 이미지(101,102,103,104) 부분은 제3 영상 프레임(300a) 상의 제3 칼리브레이션 영상(300)의 배경 이미지의 밝기값과의 차이값을 갖게 되는데, 제1 보정 이미지(101,102,103,104)의 밝기값을 255로 설정하고, 배경 이미지의 밝기값을 0으로 설정한 경우, 제1 차영상(400)에서 제1 보정 이미지(101,102,103,104) 부분들의 밝기값들은 매우 크다.
여기서, 제1 보정 이미지(101,102,103,104)의 밝기값과 배경 이미지의 밝기값의 차이를 크게 설정하게 되면, 외부적인 요인, 예를 들어 카메라(40)의 자체적인 요인이나 촬영 당시의 조명 등의 영향에 의해 제1 영상 프레임(100a) 및 제3 영상 프레임(300a)의 각 픽셀의 밝기값들이 이상적이지 않더라도 제1 차영상(400)에서 제1 보정 이미지(101,102,103,104) 부분이 구분될 수 있다.
이와 같이 제1 차영상(400)이 생성되면, 칼리브레이션 모듈(32)은 제1 차영상(400)을 4개의 사분면으로 분할하고, 각 사분면에 대한 제1 대표 보정 좌표(P1,P2,P3,P4), 즉 4개의 제1 대표 보정 좌표(P1,P2,P3,P4)를 결정한다. 여기서, 제1 대표 보정 좌표(P1,P2,P3,P4)는 각각의 제1 보정 이미지(101,102,103,104)의 중심 좌표인 것이 바람직하며, 본 발명에서는 각 사분면 내에서 가장 밝은 픽셀의 좌표를 제1 대표 보정 좌표(P1,P2,P3,P4)로 결정한다.
보다 구체적으로 설명하면, 제1 차영상(400)을 4개의 사분면으로 분할하게 되면 각 사분면에 하나씩의 제1 보정 이미지(101,102,103,104)와 관련된 픽셀이 포함된다. 여기서, 각 사분면에서 주변에 비해 밝은 영역으로 인식되는 부분은 제1 보정 이미지(101,102,103,104)와 관련된 픽셀 영역이고, 제1 보정 이미지(101,102,103,104) 내에서도 주변 밝기의 영향으로 제1 보정 이미지(101,102,103,104)의 가장자리 부분은 내부 중심 부분보다 상대적으로 낮은 밝기값을 갖게 된다. 따라서, 각 사분면 내에서 가장 밝은 밝기값을 갖는 픽셀을 제1 대표 보정 좌표(P1,P2,P3,P4)로 결정한다.
동일한 방법으로, 칼리브레이션 모듈(32)은 제2 영상 프레임(200a)과 제3 영상 프레임(300a) 간의 제2 차영상(500)을 생성한다. 여기서, 제2 차영상(500)은 제2 영상 프레임(200a)과 제3 영상 프레임(300a)의 상호 대응하는 픽셀의 밝기값의 차이값으로 각 픽셀의 밝기값이 결정된다.
도 9의 (b)는 제2 차영상(500)을 도시한 도면으로, 제2 영상 프레임(200a)의 제2 보정 이미지(201,202,203,204)들을 제외한 부분은 제3 영상 프레임(300a)과 이상적으로 동일하므로, 제2 차영상(500)에서 제2 보정 이미지(201,202,203,204)가 위치하는 영역 이외의 영역의 밝기값은 제2 보정 이미지(201,202,203,204)가 위치하는 영역 보다 낮다. 또한, 제2 영상 프레임(200a)의 제2 보정 이미지(201,202,203,204) 부분은 제3 영상 프레임(300a) 상의 제3 칼리브레이션 영상(300)의 배경 이미지의 밝기값과의 차이값을 갖게 되는데, 제2 보정 이미지(201,202,203,204)의 밝기값을 255로 설정하고, 배경 이미지의 밝기값을 0으로 설정한 경우, 제2 차영상(500)에서 제2 보정 이미지(201,202,203,204) 부분들의 밝 기값들은 매우 크다.
이와 같이 제2 차영상(500)이 생성되면, 칼리브레이션 모듈(32)은 제1 차영상(400)에서와 동일하게, 제2 차영상(500)을 4개의 사분면으로 분할하고, 각 사분면에 대한 제2 대표 보정 좌표(P1',P2',P3',P4')를 결정하는데, 제1 차영상(400)에서와 동일하게 각 사분면에서 가장 밝은 픽셀의 좌표를 제2 대표 보정 좌표(P1',P2',P3',P4')로 결정한다.
상기와 같이 4개의 제1 대표 보정 좌표(P1,P2,P3,P4)와 4개의 제2 대표 보정 좌표(P1',P2',P3',P4')가 결정되면, 칼리브레이션 모듈(32)은 4개의 제1 대표 보정 좌표(P1,P2,P3,P4)와 4개의 제2 대표 보정 좌표(P1',P2',P3',P4')에 기초하여 촬영 영상 중 화면 영역을 형성하는 4개의 외곽 모서리 좌표(C1)를 산출함으로써, 영상 프레임, 즉 카메라(40)에 의해 촬영된 촬영 영상 중 영상 디스플레이 디바이스(50)에 의해 표시되는 화면 영역을 결정하게 된다.
도 10을 참조하여 설명하여 보다 구체적으로 설명하면, 제1 보정 이미지(101,102,103,104)와 제2 보정 이미지(201,202,203,204)의 하나의 꼭지점이 공유되고, 제1 보정 이미지(101,102,103,104)와 제2 보정 이미지(201,202,203,204)가 동일한 형상을 갖는 경우, 제1 보정 이미지(101,102,103,104)와 제2 보정 이미지(201,202,203,204)를 겹치게 되면 도 9에 도시된 바와 같다. 여기서, 벡터 연산을 통해 아래 [수학식]과 같이 계산하게 되면, 제1 보정 이미지(101,102,103,104)의 최외곽 모서리의 좌표가 계산된다.
[수학식 1]
Ck = Pk + (Pk - Pk')/2
여기서, Ck는 k 번째 외곽 모서리 좌표(C1)이고, Pk는 k 번째 제1 대표 보정 좌표(P1,P2,P3,P4)이고, Pk'는 k 번째 제2 대표 보정 좌표(P1',P2',P3',P4')이다.
상술한 바와 같이, 제1 칼리브레이션 영상(100) 내에서 각각의 제1 보정 이미지(101,102,103,104)의 최외곽 꼭지점들이 제1 칼리브레이션 영상(100) 즉 영상 디스플레이 디바이스(50)의 화면 영역의 최외곽 꼭지점이 되므로, 상기 [수학식 1]을 통해 화면 영상의 4개의 외곽 모서리 좌표(C1)가 산출됨으로써 화면 영역이 결정된다.
이하에서는, 상기와 같이 칼리브레이션 모드에서 결정된 화면 영역을 이용한 정보처리 디바이스(30)의 터치 모드에 대해 상세히 설명한다. 여기서, 정보처리 디바이스(30)의 터치 모드에서는 카메라(40)가 가시광선 영역의 빛은 촬영하지 않는 상태, 즉 이미지 센서 모듈(41)의 전방에 가시광선 차단 필터(42)가 배치되어 이미지 센서 모듈(41)에는 비가시광선 영역의 빛만이 도달되는 상태가 됨은 전술한 바와 같다.
먼저, 정보처리 디바이스(30)가 영상 디스플레이 디바이스(50)에 영상을 표시하는 상태에서 사용자가 터치 디바이스(10)를 이용하여 영상 디스플레이 디바이스(50)의 화면의 특정 영역을 터치하게 되면, 터치 디바이스(10)의 발광부(120,124)가 비가시광선 영역의 빛인 적외선 빔을 방출하게 된다. 이 때, 카메라(40)에 의해 촬영된 촬영 영상에는 정보처리 디바이스(30)가 표시한 영상은 촬영 되지 않고 터치 디바이스(10)의 발광부(120,124)에서 방출되는 비가시광선 영역의 빛인 적외선 빔은 촬영된다.
카메라(40)에 의해 촬영된 촬영 영상은 정보처리 디바이스(30)로 전달되고, 정보처리 디바이스(30)의 영상 캡처 모듈(31)이 수신된 촬영 영상으로부터 영상 데이터를 캡처한다. 터치 모드에서 영상 캡처 모듈(31)에 의해 캡처된 영상 데이터는 터치 검출 모듈(33)로 전달된다.
터치 검출 모듈(33)은 영상 캡처 모듈(31)에 의해 캡처된 영상 프레임 중 가장 밝은 밝기값을 갖는 픽셀(이하, '포인터 픽셀'이라 함)을 검출한다. 그런 다음, 터치 검출 모듈(33)은 기 설정된 크기의 윈도우 영역을 포인터 픽셀을 중심으로 기 설정된 탐색 범위 내에서 이동시키고, 각 위치에서의 윈도우 영역의 평균 밝기값을 산출한다.
예컨대, 윈도우 영역을 영상 프레임의 크기가 320×240인 경우 7×7 크기로 윈도우 영역을 설정할 수 있고, 포인터 픽셀을 중심으로 윈도우 영역이 상하좌우로 3개의 픽셀씩을 이동하며 평균 밝기값을 산출할 수 있다. 즉, 탐색 범위가 13×13 크기가 되며, 7×7 크기의 윈도우 영역이 13×13 크기의 탐색 범위 내에서 49개의 평균 밝기값을 산출하게 된다.
이와 같이 평균 밝기값들이 산출되면, 터치 검출 모듈(33)은 산출된 평균 밝기값을 갖는 위치의 윈도우 영역을 결정하고, 해당 윈도우 영역의 중심 픽셀을 영상 프레임 내에서 터치 디바이스(10)의 발광부(120,124)로부터 발광된 빛의 위치로 결정하게 된다.
여기서, 터치 검출 모듈(33)은 포인터 픽셀을 결정할 때, 영상 프레임 중 가장 밝은 픽셀값을 갖는 픽셀의 밝기가 기 설정된 기준 밝기값 이하인 경우 검출 오류로 판단함으로써, 터치 디바이스(10)의 발광부(120,124)가 발광하지 않은 상태에서 촬영된 촬영 영상에서 가장 밝은 픽셀을 터치 디바이스(10)의 발광부(120,124)로부터 발광된 빛으로 인식하는 오류를 방지할 수 있다. 또한, 터치 검출 모듈(33)은 가장 큰 평균 밝기값이 기준 밝기값 이하인 경우에도 검출 오류로 판단할 수 있다.
한편, 좌표 산출 모듈(34)은 영상 캡처 모듈(31)에 의해 캡처된 영상 프레임의 해상도와, 영상 디스플레이 디바이스(50)에 표시된 영상의 해상도, 그리고 칼리브레이션 모듈(32)에 의해 결정된 화면 영역에 기초하여, 터치 검출 모듈(33)에 의해 결정된 영상 프레임 상의 좌표에 해당하는 영상 디스플레이 디바이스(50)의 화면 내의 좌표 범위를 산출한다.
보다 구체적으로 설명하면, 영상 디스플레이 디바이스(50)에 표시되는 영상의 해상도가 1280×1024이고 영상 프레임의 해상도가 320×240인 경우, 영상 프레임의 해상도는 영상 디스플레이 디바이스(50)에 표시되는 영상의 해상도 보다 0.25×0.23로 축소된 크기가 된다.
또한, 영상 프레임 내에서도 실제 영상 디스플레이 디바이스(50)의 화면 영역은 영상 프레임의 사이즈보다 작게 되는데, 칼리브레이션 모듈(32)에 의해 결정된 화면 영역이 영상 프레임 전체 영역의 80% 정도라 가정하면, 화면 영역은 영상 디스플레이 디바이스(50)에 표시되는 영상의 해상도 보다 0.20×0.18로 축소된 크 기가 된다.
따라서, 좌표 산출 모듈(34)은 터치 검출 모듈(33)에 의해 결정된 영상 프레임 상의 좌표와, 영상 프레임 내에서의 화면 영역의 위치, 그리고 상기와 같은 정보에 기초하여 영상 프레임 상의 좌표에 해당하는 영상 디스플레이 디바이스(50)의 화면 내의 좌표 범위를 산출한다. 위 예의 경우 터치 검출 모듈(33)에 의해 결정된 좌표를 영상 디스플레이 디바이스(50)에 적용하게 되면 5×5 크기의 좌표 범위가 된다. 그리고, 좌표 산출 모듈(34)은 좌표 범위의 중심 좌표를 화면 영역 상의 좌표로 산출함으로써, 영상 디스플레이 디바이스(50)의 해상도를 기준으로 하나의 픽셀을 터치 디바이스(10)의 발광부(120,124)로부터의 빛의 위치로 판단하게 된다.
상기와 같이 터치 모드에서 터치 디바이스(10)의 발광부(120,124)로부터의 빛이 위치하는 영상 디스플레이 디바이스(50)의 하나의 픽셀의 좌표가 결정되며, 카메라(40)로부터 전달되는 촬영 영상에 대해 상기와 같은 과정을 통해 터치 디바이스(10)의 발광부(120,124)로부터의 빛의 영상 디스플레이 디바이스(50)의 화면 상에서의 위치가 결정된다.
이 때, 메인 제어 모듈(35)은 터치 모드에서 터치 디바이스(10)의 발광부(120,124)로부터의 빛의 영상 디스플레이 디바이스(50)의 화면 상에서의 좌표에 따라 이를 해당 좌표에 대한 터치로 인식하여 처리하게 된다. 즉, 정보처리 디바이스(30)는 터치 디바이스(10)의 발광부(120,124)로부터의 빛의 화면 상의 위치를 카메라(40)에 의해 촬영된 촬영 영상으로부터 추적하여 이를 영상 디스플레이 디바이스(50)의 화면에 대한 터치로 인식하게 됨으로써, 새로운 형태의 터치스크린 방 식이 구현된다.
여기서, 터치 인식 방법은 기존의 터치스크린 인식 방식과 동일한 형태로 구현 가능한다. 예컨대, 사용자가 화면 상의 특정 영역에서 한번 터치하는 경우 터치 디바이스(10)의 발광부(120,124)가 한번 점멸되고, 두 번 터치하는 경우에는 두 번 점멸되어 클릭과 더블 클릭의 인식이 가능하게 된다.
또한, 사용자가 터치 디바이스(10)로 화면을 터치한 상태, 즉 터치 디바이스(10)의 발광부(120,124)가 발광한 상태에서 화면 상에서 터치 디바이스(10)를 움직이는 경우에는 이를 드래그 동작으로 인식하게 된다.
한편, 도 11은 본 발명에 따른 정보처리 디바이스(30)가, 도 1에 도시된 컴퓨터 형태로 마련되는 경우의 예를 도시한 도면이다.
도 11을 참조하여 설명하면, 정보처리 디바이스(30)는 중앙처리장치인 CPU(36a)(Central Processing Unit), 칩셋(36b), 메인 메모리(36f), 운영체계(36i)(OS : Operating System) 및 터치 드라이버(37)를 포함할 수 있다. 또한, 정보처리 디바이스(30)는 카메라(40) 연결부(36g) 및 비디오 출력포트(36c)를 포함할 수 있다. 여기서, 상술한 정보처리 디바이스(30)의 영상 캡처 모듈(31), 칼리브레이션 모듈(32), 터치 검출 모듈(33), 좌표 산출 모듈(34) 및 메인 제어 모듈(35)은 컴퓨터에 인스톨되는 터치 드라이버(37) 형태로 마련되는 것을 예로 한다.
카메라(40) 연결부(36g)는 카메라(40)가 접속되며, 카메라(40)로부터 전달되는 촬영 영상을 수신한다. 여기서, 본 발명에 따른 카메라(40) 연결부(36g)는 상 술한 바와 같이 USB(Universal Serial Bus) 방식을 통해 카메라(40)와 접속될 수 있다. 이외에도, 카메라(40) 연결부(36g)와 카메라(40)의 접속 방식은 다양한 형태를 가질 수 있음은 전술한 바와 같다.
비디오 출력포트(36c)는 영상 디스플레이 디바이스(50)로 영상신호를 출력한다. 여기서, 비디오 출력포트(36c)는 출력되는 영상신호의 포맷에 따라 D-Sub(RGB) 포트, DVI(Digital Video Interface) 포트, HDMI(High Definition Multimedia Interface) 포트나 S-Video 포트 등의 형태로 마련될 수 있다.
메인 메모리(36f)는 비휘발성 메모리인 램(RAM : Random Access Memory) 형태로 마련되며, CPU(36a)의 동작에 따른 어플리케이션 프로그램(36j) 등의 프로그램이나 기타 데이터를 임시 저장한다. 칩셋(36b)은 메인 메모리(36f) 및 모니터(36d)와 교환되는 데이터를 관리하며, CPU(36a), 메인 메모리(36f), 모니터(36d) 및 비디오 출력포트(36c)와 연결된 영상 디스플레이 디바이스(50) 및 하드디스크 드라이브(36h) 간에 이동하는 데이터를 관리한다.
터치 드라이버(37)는 운영체계(36i)와 연동하여 동작하며, 카메라(40) 연결부(36g)를 통해 수신되는 촬영 영상에 기초하여 상술한 바와 같이 칼리브레이션 모드와 터치 모드로 동작한다. 여기서, 터치 드라이버(37)는 촬영 영상에 기초하여 터치 좌표에 대한 정보를 전달한다.
여기서, 도 11에서는 영상 캡처 모듈(31)이 터치 드라이버(37)의 일 구성으로 포함되는 것을 예로 하고 있으나, 영상 캡처 모듈(31)의 기능을 터치 드라이버(37)의 기능으로부터 분리시키고 카메라(40)의 제조사에서 제공하는 API(Application programming interface)를 영상 캡처 모듈(31)로 사용할 수 있다. 이 경우, 터치 드라이버(37)는 API와의 연동을 통해 영상 데이터를 API로부터 제공받아 사용할 수 있다.
전술한 실시예에서는 카메라(40)가 비가시광선 영역의 빛을 촬영하되 가시광선 영역의 빛을 선택적으로 촬영 가능하게 마련되는 것을 예로 하고, 정보처리 디바이스(30)가 칼리브레이션 모드와 터치 모드로 동작하도록 마련되는 것을 예로 하여 설명하였다. 반면, 본 발명에 따른 터치 디스플레이 시스템에서 카메라(40), 영상 디스플레이 디바이스(50) 및 정보처리 디바이스(30) 간의 칼리브레이션을 다른 방식으로 수행한 상태에서는 가시광선 영역의 빛을 차단하는 카메라(40), 예컨대 적외선 카메라(40)를 설치하여 사용 가능함은 물론이다.
비록 본 발명의 몇몇 실시예들이 도시되고 설명되었지만, 본 발명이 속하는 기술분야의 통상의 지식을 가진 당업자라면 본 발명의 원칙이나 정신에서 벗어나지 않으면서 본 실시예를 변형할 수 있음을 알 수 있을 것이다. 별명의 범위는 첨부된 청구항과 그 균등물에 의해 정해질 것이다.
도 1은 본 발명에 따른 터치 디스플레이 시스템의 구성을 도시한 도면이고,
도 2 및 도 3은 도 1의 터치 디스플레이 시스템의 터치 디바이스의 구성의 일 예를 도시한 도면이고,
도 4는 도 1의 터치 디스플레이 시스템의 카메라의 구성의 일 예를 도시한 도면이고,
도 5는 도 1의 터치 디스플레이 시스템의 정보처리 디바이스의 구성의 일 예를 도시한 도면이고,
도 6 내지 도 10은 도 5의 정보처리 디바이스의 칼리브레이션 모듈이 영상 디스플레이 디바이스의 화면 영역을 결정하는 과정을 설명하기 위한 도면이고,
도 11은 본 발명에 따른 정보처리 디바이스가 컴퓨터 형태로 마련된 예를 도시한 도면이다.

Claims (12)

  1. 터치 디스플레이 시스템에 있어서,
    화면 상에 영상을 표시하기 위한 영상 디스플레이 디바이스와;
    상기 영상 디스플레이 디바이스의 화면으로의 접촉에 반응하는 터치 감지 유닛과, 상기 터치 감지 유닛이 상기 영상 디스플레이 디바이스의 화면으로의 접촉에 반응하는 경우 비가시광선 영역의 빛을 발광하는 발광부를 갖는 터치 디바이스와;
    상기 영상 디스플레이 디바이스의 화면을 촬영하되, 가시광선 영역의 빛이 차단되고 비가시광선 영역의 빛의 촬영이 가능한 카메라와;
    상기 영상 디스플레이 디바이스에 영상이 표시되도록 상기 영상 디스플레이 디바이스에 영상신호를 출력하고, 상기 카메라에 의해 촬영된 영상 데이터로부터 상기 발광부로부터 발광된 빛의 상기 영상 디스플레이 디바이스의 화면 상의 좌표를 산출하며, 상기 발광부로부터 발광된 빛을 상기 산출된 좌표에 대한 터치로 인식하여 처리하는 정보처리 디바이스를 포함하는 것을 특징으로 하는 터치 디스플레이 시스템.
  2. 제1항에 있어서,
    상기 터치 디바이스는 상기 발광부를 수용하는 디바이스 본체를 포함하며;
    상기 터치 감지 유닛은,
    상기 영상 디스플레이 디바이스의 화면에 접촉될 때 탄성적으로 가압되도록 상기 디바이스 본체에 설치되는 가압 반응 유닛과;
    상기 가압 반응 유닛이 탄성적으로 가압될 때 스위칭되어 상기 발광부를 발광시키는 스위칭부를 포함하는 것을 특징으로 하는 터치 디스플레이 시스템.
  3. 제2항에 있어서,
    상기 카메라는,
    상기 비가시광선 영역의 빛을 감지 가능한 광 센서 모듈과;
    상기 광 센서 모듈의 전방에 설치되어 상기 영상 디스플레이 디바이스의 화면의 촬영에 의해 입사되는 빛 중 가시광선 영역의 빛을 차단하는 가시광선 차단 필터와;
    상기 광 센서 모듈에 의해 수신된 빛에 기초하여 영상 데이터를 생성하는 영상 데이터 생성부와;
    상기 영상 데이터 생성부에 의해 생성된 상기 영상 데이터를 상기 정보처리 디바이스로 전송하는 카메라 인터페이스부를 포함하는 것을 특징으로 하는 터치 디스플레이 시스템.
  4. 터치 디스플레이 시스템에 있어서,
    화면 상에 영상을 표시하기 위한 영상 디스플레이 디바이스와,
    상기 영상 디스플레이 디바이스의 화면으로의 접촉에 반응하는 터치 감지 유닛과, 상기 터치 감지 유닛이 상기 영상 디스플레이 디바이스의 화면으로의 접촉에 반응하는 경우 비가시광선 영역의 빛을 발광하는 발광부를 갖는 터치 디바이스와,
    비가시광선 영역의 빛을 촬영하되 가시광선 영역의 빛을 선택적으로 촬영 가능하게 마련되어 상기 영상 디스플레이 디바이스의 화면을 촬영하는 카메라와,
    상기 영상 디스플레이 디바이스를 통해 영상이 표시되도록 상기 영상 디스플레이 디바이스에 영상신호를 출력하고, 상기 카메라가 가시광선 영역의 빛을 촬영하는 상태에서 동작하는 칼리브레이션 모드와 상기 카메라가 가시광선 영역의 빛의 촬영이 차단되고 비가시광선 영역의 빛을 촬영하는 상태에서 동작하는 터치 모드로 동작 가능한 정보처리 디바이스를 포함하며;
    상기 정보처리 디바이스는
    상기 칼리브레이션 모드로 동작하는 상태에서 적어도 하나의 칼리브레이션 영상을 상기 영상 디스플레이 디바이스에 표시하고, 상기 카메라에 의해 촬영된 촬영 영상으로부터 상기 칼리브레이션 영상을 추출하여 촬영 영상 중 상기 영상 디스플레이 디바이스의 화면 영역을 결정하고,
    상기 터치 모드로 동작하는 상태에서 상기 카메라에 의해 촬영된 영상 데이터로부터 상기 발광부로부터 발광된 빛의 상기 영상 디스플레이 디바이스의 화면 상의 좌표를 산출하며, 상기 발광부로부터 발광된 빛을 상기 산출된 좌표에 대한 터치로 인식하여 처리하는 터치 디스플레이 시스템.
  5. 제4항에 있어서,
    상기 정보처리 디바이스는,
    상기 카메라로부터 수신되는 촬영 영상으로부터 영상 프레임을 캡처하는 영상 캡처 모듈과;
    상기 칼리브레이션 모드로 동작하는 상태에서 상기 영상 캡처 모듈에 의해 캡처된 영상 프레임으로부터 상기 칼리브레이션 영상을 추출하여 상기 화면 영역을 결정하는 칼리브레이션 모듈과;
    상기 터치 모드로 동작하는 상태에서 상기 영상 캡처 모듈에 의해 캡처된 영상 프레임으로부터 상기 발광부로부터 발광된 빛을 검출하여 영상 프레임 상에서의 좌표를 결정하는 터치 검출 모듈과;
    상기 터치 검출 모듈에 의해 결정된 상기 발광부로부터 발광된 빛의 영상 프레임 상에서의 좌표에 기초하여 상기 화면 영역 상의 좌표를 산출하는 좌표 산출 모듈과;
    상기 칼리브레이션 모드로 동작하는 상태에서 상기 칼리브레이션 영상을 상기 영상 디스플레이 디바이스에 표시하고, 상기 터치 모드로 동작하는 상태에서 상기 좌표 산출 모듈에 의해 산출된 좌표를 상기 화면 영역 상의 좌표에 대한 터치로 인식하여 처리하는 메인 제어 모듈을 포함하는 것을 특징으로 하는 터치 디스플레이 시스템.
  6. 제5항에 있어서,
    상기 칼리브레이션 영상은 화면의 네 모서리에 사각 형상의 제1 보정 이미지가 각각 표시된 제1 칼리브레이션 영상과, 상기 각 제1 보정 이미지의 내측 대각 방향의 꼭지점을 공유하며 상기 각 제1 보정 이미지로부터 내측 대각 방향에 위치하는 사각 형상의 제2 보정 이미지가 표시된 제2 칼리브레이션 영상과, 전체가 동일한 밝기값을 갖는 배경 이미지가 표시된 제3 칼리브레이션 영상을 포함하며;
    상기 제1 칼리브레이션 영상에서 상기 제1 보정 이미지 외의 영역과 상기 제2 칼리브레이션 영상에서 상기 제2 보정 이미지 이외의 영역은 상기 제3 칼리브레이션 영상의 상기 배경 이미지와 동일한 밝기값을 가지며;
    상기 칼리브레이션 모듈은
    상기 영상 캡처 모듈에 의해 캡처된 상기 제1 칼리브레이션 영상에 대한 제1 영상 프레임과 상기 제3 칼리브레이션 영상에 대한 제3 영상프레임 간의 제1 차영상을 생성하고, 상기 제1 차영상을 4개의 사분면으로 분할하여 각 사분면에 대한 제1 대표 보정 좌표를 결정하며;
    상기 영상 캡처 모듈에 의해 캡처된 상기 제2 칼리브레이션 영상에 대한 제2 영상 프레임과 상기 제3 영상 프레임 간의 제2 차영상을 생성하고, 상기 제2 차영상을 4개의 사분면으로 분할하여 각 사분면에 대한 제2 대표 보정 좌표를 결정하며;
    상기 4개의 제1 대표 보정 좌표 및 상기 4개의 제2 대표 보정 좌표에 기초하여 촬영 영상 중 상기 화면 영역을 형성하는 4개의 외곽 모서리 좌표를 산출하여 상기 화면 영역을 결정하는 것을 특징으로 하는 터치 디스플레이 시스템.
  7. 제6항에 있어서,
    상기 제1 대표 보정 좌표 및 상기 제2 대표 보정 좌표는 각 사분면 내에서 가장 밝은 픽셀의 좌표로 결정되는 것을 특징으로 하는 터치 디스플레이 시스템.
  8. 제6항에 있어서,
    상호 대응하는 상기 제1 보정 이미지 및 상기 제2 보정 이미지는 동일한 형상을 가지며;
    상기 각 외곽 모서리 좌표는 수학식 Ck = Pk + (Pk - Pk')/2 (여기서, Ck는 k 번째 외곽 모서리 좌표이고, Pk는 k 번째 제1 대표 보정 좌표이고, Pk'는 k 번째 제2 대표 보정 좌표이다)에 의해 산출되는 것을 특징으로 하는 터치 디스플레이 시스템.
  9. 제6항에 있어서,
    상기 터치 검출 모듈은
    상기 영상 캡처 모듈에 의해 캡처된 상기 영상 프레임 중 가장 밝은 픽셀을 검출하고;
    기 설정된 크기의 윈도우 영역을 상기 가장 밝은 픽셀을 중심으로 기 설정된 탐색 범위 내에서 이동시키며 상기 윈도우 영역의 평균 밝기값을 산출하며;
    상기 탐색 범위 내에서의 상기 윈도우 영역의 각 위치 중 가장 큰 평균 밝기값을 갖는 위치의 윈도우 영역의 중심 픽셀을 상기 영상 프레임 내에서 상기 발광 부로부터 발광된 빛의 위치로 결정하는 것을 특징으로 하는 터치 디스플레이 시스템.
  10. 제9항에 있어서,
    상기 터치 검출 모듈은 상기 가장 밝은 픽셀의 밝기가 기 설정된 기준 밝기값 이하인 경우 검출 오류로 판단하고, 상기 가장 큰 평균 밝기값이 상기 기준 밝기값 이하인 경우 검출 오류로 판단하는 것을 특징으로 하는 터치 디스플레이 시스템.
  11. 제6항에 있어서,
    상기 좌표 산출 모듈은
    상기 영상 프레임의 해상도와, 상기 영상 디스플레이 디바이스에 표시된 영상의 해상도와, 상기 칼리브레이션 모듈에 의해 결정된 상기 화면 영역에 기초하여, 상기 터치 검출 모듈에 의해 결정된 상기 영상 프레임 상의 좌표에 대한 상기 영상 디스플레이 디바이스의 화면 내의 좌표 범위를 산출하고;
    상기 좌표 범위의 중심 좌표를 상기 화면 영역 상의 좌표로 산출하는 것을 특징으로 하는 터치 디스플레이 시스템.
  12. 제4항 내지 제11항 중 어느 한 항에 있어서,
    상기 카메라는,
    가시광선 영역의 빛과 비가시광선 영역의 빛을 감지 가능한 이미지 센서 모듈과;
    상기 이미지 센서 모듈에 비가시광선 영역이 빛이 전달되도록 가시광선 영역의 빛을 차단하는 가시광선 차단 필터와;
    상기 이미지 센서 모듈로 가시광선 영역의 빛이 입사 또는 차단되도록 상기 가시광선 차단 필터를 구동하는 필터 구동부와;
    상기 이미지 센서 모듈에 의해 수신된 빛에 기초하여 촬영 영상을 생성하는 촬영 영상 생성부와;
    상기 촬영 영상 생성부에 의해 생성된 촬영 영상을 상기 정보처리 디바이스로 전송하는 카메라 인터페이스부를 포함하는 것을 특징으로 하는 터치 디스플레이 시스템.
KR1020090039768A 2009-05-07 2009-05-07 터치 디스플레이 시스템 KR101065771B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090039768A KR101065771B1 (ko) 2009-05-07 2009-05-07 터치 디스플레이 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090039768A KR101065771B1 (ko) 2009-05-07 2009-05-07 터치 디스플레이 시스템

Publications (2)

Publication Number Publication Date
KR20100120902A KR20100120902A (ko) 2010-11-17
KR101065771B1 true KR101065771B1 (ko) 2011-09-19

Family

ID=43406328

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090039768A KR101065771B1 (ko) 2009-05-07 2009-05-07 터치 디스플레이 시스템

Country Status (1)

Country Link
KR (1) KR101065771B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102172564B1 (ko) * 2018-11-21 2020-11-02 (주)이즈커뮤니케이션즈 영상 처리 모듈의 소형화가 가능한 컴퓨터에의 입력 정보의 추출 방법 및 이 추출 방법이 구현되는 컴퓨터 입력 시스템
JP2022527280A (ja) * 2019-03-28 2022-06-01 ジーエイチエスピー・インコーポレイテッド 対話型キッチンディスプレイ

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003308144A (ja) 2002-04-17 2003-10-31 Nippon Telegr & Teleph Corp <Ntt> 情報処理装置及びそのユーザ・インタフェース方法
KR20080073181A (ko) * 2007-02-05 2008-08-08 전남대학교산학협력단 원격 포인팅 장치를 이용한 제어 시스템

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003308144A (ja) 2002-04-17 2003-10-31 Nippon Telegr & Teleph Corp <Ntt> 情報処理装置及びそのユーザ・インタフェース方法
KR20080073181A (ko) * 2007-02-05 2008-08-08 전남대학교산학협력단 원격 포인팅 장치를 이용한 제어 시스템

Also Published As

Publication number Publication date
KR20100120902A (ko) 2010-11-17

Similar Documents

Publication Publication Date Title
US8139046B2 (en) Touch screen using infrared camera hardly affected by external disturbance light
KR101531070B1 (ko) 터치-감응 장치상의 손가락 방향의 검출
US9454260B2 (en) System and method for enabling multi-display input
US20110199335A1 (en) Determining a Position of an Object Using a Single Camera
KR101135901B1 (ko) 디스플레이장치, 디스플레이시스템 및 그 제어방법
US20140267029A1 (en) Method and system of enabling interaction between a user and an electronic device
US20130229387A1 (en) Optical touch device, passive touch control system, and input detection method
CN102436327B (zh) 一种屏幕输入系统及其实现方法
US20120212412A1 (en) Pointing device
US9811197B2 (en) Display apparatus and controlling method thereof
US20110102318A1 (en) User input by pointing
US20110095989A1 (en) Interactive input system and bezel therefor
WO2010100798A1 (ja) 表示装置、テレビ受信装置およびポインティングシステム
JP2017182109A (ja) 表示システム、情報処理装置、プロジェクター及び情報処理方法
KR101065771B1 (ko) 터치 디스플레이 시스템
KR20160148769A (ko) 공간 터치 기능을 갖는 입체 영상 표시 장치
CN101819493B (zh) 交互式显示屏幕及其方法
CN101446875B (zh) 一种交互式显示屏幕及交互式显示的方法
US9684415B2 (en) Optical touch-control system utilizing retro-reflective touch-control device
KR101418018B1 (ko) 터치펜 및 이를 이용한 터치 디스플레이 시스템
KR101056388B1 (ko) 포인팅/인터페이스 시스템
KR101687954B1 (ko) 적외선 스테레오 카메라를 이용한 필기 인식 시스템 및 그 방법
US20160320897A1 (en) Interactive display system, image capturing apparatus, interactive display method, and image capturing method
KR20160121963A (ko) 제스처 인식이 가능한 적외선 터치스크린 시스템
TWI428802B (zh) 碰觸感應操作系統及方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140703

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150713

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20160617

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20180724

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20190723

Year of fee payment: 9