KR101744809B1 - 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법 및 장치 - Google Patents
곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법 및 장치 Download PDFInfo
- Publication number
- KR101744809B1 KR101744809B1 KR1020150144299A KR20150144299A KR101744809B1 KR 101744809 B1 KR101744809 B1 KR 101744809B1 KR 1020150144299 A KR1020150144299 A KR 1020150144299A KR 20150144299 A KR20150144299 A KR 20150144299A KR 101744809 B1 KR101744809 B1 KR 101744809B1
- Authority
- KR
- South Korea
- Prior art keywords
- gesture
- curved screen
- start point
- infrared
- touch drag
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 238000004020 luminiscence type Methods 0.000 claims description 15
- 238000005286 illumination Methods 0.000 claims description 12
- 238000010586 diagram Methods 0.000 description 9
- 238000007796 conventional method Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000001678 irradiating effect Effects 0.000 description 2
- 238000004378 air conditioning Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
- G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
- G06F3/0421—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0416—Control or interface arrangements specially adapted for digitisers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G06K9/00389—
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/143—Touch sensitive instrument input devices
- B60K2360/1438—Touch screens
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/146—Instrument input by gesture
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법 및 장치가 개시된다.
본 발명의 실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법은, 상기 곡면 스크린을 복수의 영역으로 구분하는 단계; 상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 임계값을 설정하는 단계; 상기 곡면 스크린을 향하여 배치된 적외선 카메라로부터 입력되는 적외선 영상들을 기초로 제스처 시작점을 검출하는 단계; 상기 복수의 영역 중에서 상기 제스처 시작점을 포함하는 영역을 판단하는 단계; 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향을 판단하는 단계; 상기 복수의 임계값 중에서 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향에 대응하는 임계값을 선택하는 단계; 상기 제스처 시작점으로부터 제스처 끝점까지의 궤적의 길이를 계산하는 단계; 및 상기 궤적의 길이가 상기 선택된 임계값 보다 크면, 상기 궤적을 기초로 터치 드래그 제스처를 인식하는 단계;를 포함할 수 있다.
본 발명의 실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법은, 상기 곡면 스크린을 복수의 영역으로 구분하는 단계; 상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 임계값을 설정하는 단계; 상기 곡면 스크린을 향하여 배치된 적외선 카메라로부터 입력되는 적외선 영상들을 기초로 제스처 시작점을 검출하는 단계; 상기 복수의 영역 중에서 상기 제스처 시작점을 포함하는 영역을 판단하는 단계; 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향을 판단하는 단계; 상기 복수의 임계값 중에서 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향에 대응하는 임계값을 선택하는 단계; 상기 제스처 시작점으로부터 제스처 끝점까지의 궤적의 길이를 계산하는 단계; 및 상기 궤적의 길이가 상기 선택된 임계값 보다 크면, 상기 궤적을 기초로 터치 드래그 제스처를 인식하는 단계;를 포함할 수 있다.
Description
본 발명은 차량용 곡면 디스플레이 장치에 관한 것으로서, 보다 상세하게는 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법 및 장치에 관한 것이다.
차량 내부에는 탑승자의 편의를 위해 내비게이션 장치, 오디오 장치, 및 공조 장치와 같은 다양한 전자 장치들이 설치된다. 상기 전자 장치들의 각종 기능들을 조작하기 위해 키 패드, 조그 다이얼, 터치 스크린 등 다양한 입력 장치들이 사용된다.
최근 일부 전자 장치들은 운전자의 시선이 분산되는 것을 방지하기 위하여 원격 제어 방법으로 제어되고 있다. 상기 원격 제어 방법으로는 스티어링 휠에 배치된 버튼을 이용하거나, 사용자의 제스처를 인식하는 방법 등이 있다.
사용자의 조작감과 차량 내부 디자인을 향상시키기 위하여 클러스터 및 AVN(audio-video-navigation) 장치에 사용자의 제스처를 인식하는 터치 디스플레이 장치를 적용하려는 연구가 진행되고 있다.
도 7 및 도 8은 종래의 터치 드래그 제스처를 인식하는 방법을 설명하기 위한 도면이다.
도 7에 도시된 바와 같이, 후면 투사 방식의 터치 디스플레이 장치는 스크린의 후면에 배치되어 영상을 투사하는 프로젝터를 이용한다. 사용자의 터치 제스처를 인식하기 위하여, 적외선 조명 및 적외선 카메라가 이용될 수 있다. 적외선 조명은 적외선을 조사하고, 적외선 카메라는 적외선 영상을 촬영한다.
상기 터치 디스플레이 장치는 상기 적외선 영상을 기초로 제스처 시작점, 제스처 끝점, 및 상기 제스처 시작점으로부터 상기 제스처 끝점까지의 궤적을 검출한다. 오인식을 방지하기 위하여, 상기 터치 디스플레이 장치는 상기 궤적의 길이가 임계값 보다 큰 경우에만 상기 궤적을 이용하여 사용자의 터치 드래그 제스처를 인식한다. 상기 임계값은 고정되어 있지만, 평면 스크린(10A)에는 단차가 존재하지 않으므로, 어느 위치에서나 제스처 인식 성능이 동일하다.
그러나, 도 8에 도시된 바와 같이, 곡면 스크린(10B)에는 단차가 존재하므로, 터치 위치에 따라 제스처 인식 성능이 달라질 수 있다. 상기 곡면 스크린(10B) 상의 손의 이동 거리(D1 및 D2)는 서로 동일하지만 상기 적외선 영상을 기초로 검출된 궤적의 길이(L1 및 L2)가 서로 다를 수 있다. 이에 따라, 상기 궤적의 길이(L1)가 임계값 보다 작은 경우 터치 디스플레이 장치는 사용자의 터치 드래그 제스처를 인식하지 못하는 문제점이 있다.
따라서, 본 발명은 상기한 바와 같은 문제점을 해결하기 위한 것으로, 본 발명이 해결하고자 하는 과제는, 제스처 시작점 및 제스처의 방향을 기초로 터치 드래그 제스처를 하고자 하는 사용자의 의도를 정확하게 판단할 수 있는 곡면 스크린 상의 터치 드래그 제스처를 정확하게 인식할 수 있는 방법 및 장치를 제공하는 것을 목적으로 한다.
본 발명의 일실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법은, 상기 곡면 스크린을 복수의 영역으로 구분하는 단계; 상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 임계값을 설정하는 단계; 상기 곡면 스크린을 향하여 배치된 적외선 카메라로부터 입력되는 적외선 영상들을 기초로 제스처 시작점을 검출하는 단계; 상기 복수의 영역 중에서 상기 제스처 시작점을 포함하는 영역을 판단하는 단계; 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향을 판단하는 단계; 상기 복수의 임계값 중에서 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향에 대응하는 임계값을 선택하는 단계; 상기 제스처 시작점으로부터 제스처 끝점까지의 궤적의 길이를 계산하는 단계; 및 상기 궤적의 길이가 상기 선택된 임계값 보다 크면, 상기 궤적을 기초로 터치 드래그 제스처를 인식하는 단계;를 포함할 수 있다.
상기 복수의 임계값은 상기 곡면 스크린의 곡률값 및 상기 곡면 스크린과 상기 적외선 카메라 사이의 위치 관계를 기초로 설정될 수 있다.
상기 방법은 상기 궤적의 길이가 상기 선택된 임계값 보다 작거나 같으면, 상기 궤적을 노이즈로 인식하는 단계;를 더 포함할 수 있다.
상기 방법은 상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 발광 세기를 설정하는 단계; 상기 복수의 발광 세기 중에서 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향에 대응하는 발광 세기를 선택하는 단계; 및 상기 선택된 발광 세기로 적외선을 조사하도록 적외선 조명을 제어하는 단계;를 더 포함할 수 있다.
상기 복수의 발광 세기는 상기 곡면 스크린의 곡률값 및 상기 곡면 스크린과 상기 적외선 카메라 사이의 위치 관계를 기초로 설정될 수 있다.
본 발명의 다른 실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법은, 상기 곡면 스크린을 복수의 영역으로 구분하는 단계; 상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 발광 세기를 설정하는 단계; 상기 곡면 스크린을 향하여 배치된 적외선 카메라로부터 입력되는 적외선 영상들을 기초로 제스처 시작점을 검출하는 단계; 상기 복수의 영역 중에서 상기 제스처 시작점을 포함하는 영역을 판단하는 단계; 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향을 판단하는 단계; 상기 복수의 발광 세기 중에서 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향에 대응하는 발광 세기를 선택하는 단계; 상기 선택된 발광 세기로 적외선을 조사하도록 적외선 조명을 제어하는 단계; 상기 제스처 시작점으로부터 제스처 끝점까지의 궤적의 길이를 계산하는 단계; 및 상기 궤적의 길이가 설정된 임계값 보다 크면, 상기 궤적을 기초로 터치 드래그 제스처를 인식하는 단계;를 포함할 수 있다.
상기 복수의 발광 세기는 상기 곡면 스크린의 곡률값 및 상기 곡면 스크린과 상기 적외선 카메라 사이의 위치 관계를 기초로 설정될 수 있다.
상기 방법은 상기 궤적의 길이가 상기 설정된 임계값 보다 작거나 같으면, 상기 궤적을 노이즈로 인식하는 단계;를 더 포함할 수 있다.
본 발명의 일실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 장치는, 상기 곡면 스크린으로 적외선을 조사하는 적외선 조명; 상기 곡면 스크린의 적외선 영상을 촬영하는 적외선 카메라; 및 상기 곡면 스크린을 복수의 영역으로 구분하고, 상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 임계값을 설정하는 제어부;를 포함할 수 있으며, 상기 제어부는 상기 적외선 영상들을 기초로 제스처 시작점을 검출하고, 상기 복수의 영역 중에서 상기 제스처 시작점을 포함하는 영역을 판단하며, 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향을 판단하고, 상기 복수의 임계값 중에서 상기 제스처 시작점을 포함하는 영역에 대응하는 임계값을 선택하며, 상기 제스처 시작점으로부터 제스처 끝점까지의 궤적의 길이를 계산하고, 상기 궤적의 길이가 상기 선택된 임계값 보다 크면, 상기 궤적을 기초로 터치 드래그 제스처를 인식할 수 있다.
상기 제어부는 상기 곡면 스크린의 곡률값 및 상기 곡면 스크린과 상기 적외선 카메라 사이의 위치 관계를 기초로 상기 복수의 임계값을 설정할 수 있다.
상기 제어부는 상기 궤적의 길이가 상기 선택된 임계값 보다 작거나 같으면, 상기 궤적을 노이즈로 인식할 수 있다.
상기 제어부는 상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 발광 세기를 설정하고, 상기 복수의 발광 세기 중에서 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향에 대응하는 발광 세기를 선택하며, 상기 선택된 발광 세기로 적외선을 조사하도록 상기 적외선 조명을 제어할 수 있다.
상기 제어부는 상기 곡면 스크린의 곡률값 및 상기 곡면 스크린과 상기 적외선 카메라 사이의 위치 관계를 기초로 상기 복수의 발광 세기를 설정할 수 있다.
본 발명의 다른 실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 장치는, 상기 곡면 스크린으로 적외선을 조사하는 적외선 조명; 상기 곡면 스크린의 적외선 영상을 촬영하는 적외선 카메라; 및 상기 곡면 스크린을 복수의 영역으로 구분하고, 상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 발광 세기를 설정하는 제어부;를 포함할 수 있으며, 상기 제어부는 상기 적외선 영상들을 기초로 제스처 시작점을 검출하고, 상기 복수의 영역 중에서 상기 제스처 시작점을 포함하는 영역을 판단하며, 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향을 판단하고, 상기 복수의 발광 세기 중에서 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향에 대응하는 발광 세기를 선택하며, 상기 선택된 발광 세기로 적외선을 조사하도록 적외선 조명을 제어하고, 상기 제스처 시작점으로부터 제스처 끝점까지의 궤적의 길이를 계산하며, 상기 궤적의 길이가 설정된 임계값 보다 크면, 상기 궤적을 기초로 터치 드래그 제스처를 인식할 수 있다.
상기 제어부는 상기 곡면 스크린의 곡률값 및 상기 곡면 스크린과 상기 적외선 카메라 사이의 위치 관계를 기초로 상기 복수의 발광 세기를 설정할 수 있다.
상기 제어부는 상기 궤적의 길이가 상기 설정된 임계값 보다 작거나 같으면, 상기 궤적을 노이즈로 인식할 수 있다.
상술한 바와 같이 본 발명의 실시예에 따르면, 제스처 시작점 및 제스처 시작 방향에 따라 임계값 또는 적외선 조명의 발광 세기를 선택하여 곡면 스크린 상에서의 터치 드래그 제스처를 정확하게 인식할 수 있다.
도 1은 본 발명의 일실시예에 따른 차량용 곡면 디스플레이 장치의 구성도이다.
도 2는 본 발명의 일실시예에 따른 차량의 내부에서 바라본 곡면 스크린을 도시한 도면이다.
도 3은 본 발명의 일실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법의 흐름도이다.
도 4는 본 발명의 일실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법을 설명하기 위한 도면이다.
도 5는 본 발명의 다른 실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법의 흐름도이다.
도 6은 본 발명의 다른 실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법을 설명하기 위한 도면이다.
도 7은 종래의 터치 드래그 제스처를 인식하는 방법을 설명하기 위한 도면이다.
도 2는 본 발명의 일실시예에 따른 차량의 내부에서 바라본 곡면 스크린을 도시한 도면이다.
도 3은 본 발명의 일실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법의 흐름도이다.
도 4는 본 발명의 일실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법을 설명하기 위한 도면이다.
도 5는 본 발명의 다른 실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법의 흐름도이다.
도 6은 본 발명의 다른 실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법을 설명하기 위한 도면이다.
도 7은 종래의 터치 드래그 제스처를 인식하는 방법을 설명하기 위한 도면이다.
이하에서는 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나, 본 발명은 여기서 설명되는 실시예에 한정되지 않고 다른 형태로 구체화될 수도 있다.
본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 동일 또는 유사한 구성요소에 대해서는 동일한 참조 부호를 부여한다.
또한, 도면에서 나타난 각 구성은 설명의 편의를 위해 임의로 나타내었으므로, 본 발명이 반드시 도면에 도시된 바에 한정되지 않는다.
도 1은 본 발명의 실시예에 따른 차량용 곡면 디스플레이 장치의 구성도이다. 도 2는 본 발명의 실시예에 따른 차량의 내부에서 바라본 곡면 스크린을 도시한 도면이다.
도 1 및 도 2에 도시된 바와 같이, 본 발명의 실시예에 따른 차량용 곡면 디스플레이 장치(5)는 곡면 스크린(10), 프로젝터(20), 제1 거울(30), 제2 거울(40), 적외선 조명(50), 적외선 카메라(52), 및 제어부(60)를 포함할 수 있다.
차량용 곡면 디스플레이 장치(5)는 차량 내부 디자인에 따라 대시보드(100)의 내부에 구비된다.
프로젝터(20)는 설정된 투영 영역에 영상을 투영한다. 사용자(예를 들어, 운전자)가 시각적으로 인식할 수 있도록 상기 영상이 곡면 스크린(10)에 표시된다. 제어부(60)는 외부로부터 영상 신호를 수신하여 곡면 스크린(10)에 표시되는 영상을 결정하고, 상기 결정된 영상에 따라 프로젝터(20)를 제어할 수 있다.
상기 영상은 클러스터 정보, 내비게이션 장치 정보, 오디오 장치 정보, 공조 장치 정보 등을 포함할 수 있다. 즉, 상기 영상은 클러스터 장치, 내비게이션 장치, 오디오 장치, 및 공조 장치의 동작 상태를 표시하는 영상 및 선택 가능한(터치 가능한) 인터페이스 객체를 포함할 수 있다. 상기 인터페이스 객체는 사용자 입력에 의해 선택되어 사용자의 의도에 따라 제어될 수 있는 정보를 의미한다. 예를 들어, 상기 인터페이스 객체는 이미지, 아이콘, 텍스트 컨텐츠, 리스트 등을 포함할 수 있다.
곡면 스크린(10)은 상기 클러스터 정보, 내비게이션 정보, 오디오 정보, 및 공조 정보 등을 표시할 수 있도록 대면적으로 형성될 수 있다.
곡면 스크린(10)과 프로젝터(20) 사이에는 제1 거울(30)과 제2 거울(40)이 배치될 수 있다. 프로젝터(20)로부터 투영된 영상은 제1 거울(30)을 통해 제2 거울(40)로 반사된다. 제2 거울(40)에서 반사된 영상은 곡면 스크린(10)으로 투영되어 사용자에게 표시된다.
제1 거울(30)은 곡면 스크린(10)의 곡률값에 따라 제작되는 비구면 거울일 수 있다. 또한, 제1 거울(30)을 사용함으로써, 곡면 스크린(10)에 영상을 표시하기 위해 요구되는 광 경로 깊이를 조절하여 차량용 곡면 디스플레이 장치(5)를 설치하기 위한 공간의 크기를 줄일 수 있다.
사용자의 터치를 인식하기 위하여, 적외선 조명(50) 및 적외선 카메라(52)가 이용될 수 있다. 적외선 조명(50) 및 적외선 카메라(52)는 곡면 스크린(10)을 향하여 배치된다.
적외선 조명(50)은 곡면 스크린(10)으로 적외선을 조사할 수 있다. 적외선 카메라(52)는 곡면 스크린(10)의 전체 영역에 해당하는 적외선 영상을 촬영하여 제어부(60)로 전달할 수 있다. 사용자의 손가락(H)이 곡면 스크린(10) 상을 터치하면 적외선이 반사되고, 적외선 카메라(52)는 반사된 적외선 영상을 촬영하며, 제어부(60)는 상기 적외선 영상을 기초로 터치점을 검출할 수 있다.
도 1에서는 점선으로 프로젝터(20)가 표시하는 영상이 표시되어 있고, 일점 쇄선으로 적외선 조사 영역이 표시되어 있으며, 이점 쇄선으로 적외선 영상 촬영 영역이 표시되어 있다.
제어부(60)는 설정된 프로그램에 의하여 동작하는 하나 이상의 마이크로프로세서로 구현될 수 있으며, 상기 설정된 프로그램은 본 발명의 실시예에 따른 곡면 스크린(10) 상의 터치 드래그 제스처를 인식하는 방법에 포함된 각 단계를 수행하기 위한 일련의 명령을 포함하는 것으로 할 수 있다.
상기 제어부(60)는 상기 터치 드래그 제스처를 인식하여 차량에 설치된 전자 장치(70)(예를 들어, 클러스터 장치, 내비게이션 장치, 오디오 장치, 및 공조 장치)로 제어 신호를 전달할 수 있다. 상기 전자 장치(70)는 상기 제어 신호에 따라 미리 정해진 기능을 실행할 수 있다. 예를 들어, 오디오 장치의 음악 탐색 기능이 활성화되어 있는 경우, 상기 터치 드래그 제스처에 따라 다음 음악이 선택될 수 있다.
이하, 도 1 내지 도 4를 참조하여 본 발명의 일실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법에 대해 설명한다.
도 3은 본 발명의 일실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법의 흐름도이고, 도 4는 본 발명의 일실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법을 설명하기 위한 도면이다.
도 1 내지 도 4를 참조하면, 본 발명의 일실시예에 따른 곡면 스크린(10) 상의 터치 드래그 제스처를 인식하는 방법은 곡면 스크린(10)을 복수의 영역으로 구분함으로써 시작된다(S100). 도 2 및 도4에서는 서로 다른 크기를 가지는 제1 영역(R1) 및 제2 영역(R2)을 예시하였으나, 이에 한정되는 것은 아니다. 제어부(60)는 곡면 스크린(10)의 크기 및 곡률값을 고려하여 상기 곡면 스크린(10)을 상기 복수의 영역으로 구분할 수 있다. 예를 들어, 곡면 스크린(10)의 단차가 큰 부분은 평면에 가까운 부분 보다 세부적으로 구분될 수 있다.
상기 터치 드래그 제스처는 사용자의 손가락(H)이 곡면 스크린(10) 상에서 이동함으로써 실현될 수 있다. 이하에서는, 사용자가 상기 제1 영역(R1)을 처음으로 터치한 경우를 중심으로 설명한다.
제어부(60)는 상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 임계값을 설정한다(S110). 상기 임계값은 터치 드래그 제스처를 하고자 하는 사용자의 의도를 판단하기 위한 기준이 되는 값을 의미한다. 상기 복수의 임계값은 곡면 스크린(10)의 곡률값 및 곡면 스크린(10)과 적외선 카메라(52) 사이의 위치 관계를 기초로 설정될 수 있다. 상기 제스처 시작 방향은 사용자가 손가락을 곡면 스크린(10) 상에서 한 포인트를 누르고 다른 포인트로 이동시키는 방향을 의미한다. 예를 들어, 제어부(60)는 상기 제1 영역(R1) 내에서의 왼쪽 방향에 대응하는 임계값(T1) 및 상기 제2 영역(R2) 내에서의 왼쪽 방향에 대응하는 임계값(T2)를 설정할 수 있다. 이때, 상기 제1 영역(R1) 내에서의 왼쪽 방향에 대응하는 임계값(T1)은 상기 제2 영역(R2) 내에서의 왼쪽 방향에 대응하는 임계값(T2) 보다 작을 수 있다.
제어부(60)는 적외선 카메라(52)로부터 입력되는 적외선 영상들을 기초로 제스처 시작점(SP)을 검출한다(S120).
제어부(60)는 상기 복수의 영역 중에서 제스처 시작점(SP)을 포함하는 영역을 판단한다(S130). 즉, 제어부(60)는 제스처 시작점(SP)을 포함하는 제1 영역(R1)을 판단할 수 있다.
제어부(60)는 상기 제스처 시작점(SP)을 포함하는 영역(R1) 내에서의 제스처 시작 방향을 판단한다(S140). 예를 들어, 제어부(60)는 적외선 영상(A1 및 A2)를 기초로 사용자의 손가락이 왼쪽 방향으로 이동하는 것으로 판단할 수 있다.
제어부(60)는 상기 복수의 임계값 중에서 제스처 시작점(SP)을 포함하는 영역 내에서의 제스처 시작 방향에 대응하는 임계값을 선택한다(S150). 즉, 제어부(60)는 상기 임계값(T1 및 T2) 중에서 제스처 시작점(SP)을 포함하는 영역(R1) 내에서의 제스처 시작 방향에 대응하는 임계값(T1)을 선택할 수 있다.
제어부(60)는 제스처 시작점(SP)으로부터 제스처 끝점(EP)까지의 궤적의 길이(L1)를 계산한다(S160). 제어부(60)는 적외선 영상들을 기초로 제스처 끝점(EP)을 검출할 수 있다.
제어부(60)는 상기 궤적의 길이(L1)를 상기 선택된 임계값(T1)과 비교한다(S170).
상기 S170 단계에서 상기 궤적의 길이(L1)가 상기 선택된 임계값(T1) 보다 작거나 같으면, 제어부(60)는 상기 궤적을 노이즈로 인식한다(S180). 즉, 사용자가 터치 드래그 제스처를 하고자 하는 의도가 없는 것으로 판단하여 터치 드래그 제스처를 인식하지 않는다.
상기 S170 단계에서 상기 궤적의 길이(L1)가 상기 선택된 임계값(T1) 보다 크면, 제어부(60)는 상기 궤적을 기초로 터치 드래그 제스처를 인식한다(S190). 제어부(60)는 인식된 터치 드래그 제스처에 대응하는 제어 신호를 전자 장치(70)에 전달하고, 전자 장치(70)는 제어 신호에 따라 미리 정해진 기능을 실행할 수 있다.
본 발명의 실시예에 따르면, 터치 위치 및 드래그 방향에 따라 제스처 인식 성능이 달라지지 않는다.
이하, 도 1, 도 2, 도 5, 및 도 6을 참조하여 본 발명의 다른 실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법에 대해 설명한다. 앞에서 설명한 실시예와 동일한 설명은 생략한다.
도 5는 본 발명의 다른 실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법의 흐름도이고, 도 6은 본 발명의 다른 실시예에 따른 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법을 설명하기 위한 도면이다.
도 1, 도 2, 도 5, 및 도 6을 참조하면, 본 발명의 다른 실시예에 따른 곡면 스크린(10) 상의 터치 드래그 제스처를 인식하는 방법은 곡면 스크린(10)을 복수의 영역으로 구분함으로써 시작된다(S200). 제어부(60)는 곡면 스크린(10)의 크기 및 곡률값을 고려하여 상기 곡면 스크린(10)을 상기 복수의 영역으로 구분할 수 있다.
이하에서는, 사용자가 상기 제3 영역(R3)을 처음으로 터치한 경우를 중심으로 설명한다.
제어부(60)는 상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 발광 세기를 설정할 수 있다(S210). 적외선 조명(50)의 발광 세기가 강하면, 사용자의 손가락(H)이 상기 곡면 스크린(10)으로부터 소정 간격(W)만큼 떨어져 있더라도, 제어부(60)는 사용자의 손가락(H)이 상기 곡면 스크린(10)에 터치된 것으로 판단할 수 있다. 상기 발광 세기는 곡면 스크린(10)의 곡률값 및 곡면 스크린(10)과 적외선 카메라(52) 사이의 위치 관계를 기초로 설정될 수 있다. 이때, 상기 제3 영역(R3) 내에서의 왼쪽 방향에 대응하는 발광 세기는 상기 제2 영역(R2) 내에서의 왼쪽 방향에 대응하는 발광 세기 보다 클 수 있다.
적외선 조명(50)이 기본 발광 세기로 적외선을 조사하는 상태에서, 제어부(60)는 적외선 카메라(52)로부터 입력되는 적외선 영상들을 기초로 제스처 시작점(SP`)을 검출한다(S220).
제어부(60)는 상기 복수의 영역 중에서 제스처 시작점(SP`)을 포함하는 영역을 판단한다(S230). 즉, 제어부(60)는 제스처 시작점(SP`)을 포함하는 제3 영역(R3)을 판단할 수 있다.
제어부(60)는 상기 제스처 시작점(SP`)을 포함하는 영역(R3) 내에서의 제스처 시작 방향을 판단한다(S240). 예를 들어, 제어부(60)는 적외선 영상(A1` 및 A2`)를 기초로 사용자의 손가락이 왼쪽 방향으로 이동하는 것으로 판단할 수 있다.
제어부(60)는 상기 복수의 발광 세기 중에서 상기 제스처 시작점(SP`)을 포함하는 영역 내에서의 제스처 시작 방향에 대응하는 발광 세기를 선택한다(S250).
제어부(60)는 상기 선택된 발광 세기로 적외선을 조사하도록 적외선 조명(50)을 제어할 수 있다(S260). 이에 따라, 사용자의 손가락(H)이 상기 곡면 스크린(10)으로부터 소정 간격(W)만큼 떨어져 있더라도, 제어부(60)는 사용자의 손가락(H)이 곡면 스크린(10)에 터치된 것으로 판단할 수 있다.
제어부(60)는 제스처 시작점(SP`)으로부터 제스처 끝점(EP`)까지의 궤적의 길이(L1`)를 계산한다(S270). 제어부(60)는 적외선 영상들을 기초로 제스처 끝점(EP`)을 검출할 수 있다.
제어부(60)는 상기 궤적의 길이(L1`)를 설정된 임계값(T)과 비교한다(S280).
상기 S280 단계에서 상기 궤적의 길이(L1`)가 상기 설정된 임계값(T) 보다 작거나 같으면, 제어부(60)는 상기 궤적을 노이즈로 인식한다(S290). 즉, 사용자가 터치 드래그 제스처를 하고자 하는 의도가 없는 것으로 판단하여 터치 드래그 제스처를 인식하지 않는다.
상기 S280 단계에서 상기 궤적의 길이(L1`)가 상기 설정된 임계값(T) 보다 크면, 제어부(60)는 상기 궤적을 기초로 터치 드래그 제스처를 인식한다(S300). 제어부(60)는 인식된 터치 드래그 제스처에 대응하는 제어 신호를 전자 장치(70)에 전달하고, 전자 장치(70)는 제어 신호에 따라 미리 정해진 기능을 실행할 수 있다.
본 발명의 다른 실시예에 따르면, 상기 설정된 임계값(T)이 고정된 경우에도, 터치 위치 및 드래그 방향에 따라 제스처 인식 성능이 달라지지 않는다. 즉,
한편, 본 명세서에서는 제어부(60)가 복수의 임계값과 복수의 발광 세기를 따로 설정하는 것을 예시하였으나, 이에 한정되는 것은 아니다. 즉, 제어부(60)는 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향에 따라 임계값과 발광 세기를 선택할 수 있다.
상기 S110 단계에서, 제어부(60)는 상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 발광 세기를 설정할 수 있다.
상기 S150 단계에서, 제어부(60)는 상기 복수의 발광 세기 중에서 상기 제스처 시작점(SP)을 포함하는 영역(R1) 내에서의 제스처 시작 방향에 대응하는 발광 세기를 선택할 수 있다. 이때, 제어부(60)는 상기 선택된 발광 세기로 적외선을 조사하도록 적외선 조명(50)을 제어할 수 있다.
상기한 바와 같이, 본 발명의 실시예에 따르면, 제스처 시작점 및 제스처 시작 방향에 따라 임계값 또는 적외선 조명의 발광 세기를 선택하여 곡면 스크린 상에서의 터치 드래그 제스처를 정확하게 인식할 수 있다.
이상에서 본 발명의 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.
5: 곡면 디스플레이 장치 10: 곡면 스크린
20: 프로젝터 30: 제1 거울
40: 제2 거울 50: 적외선 조명
52: 적외선 카메라 60: 제어부
70: 전자 장치 100: 대시보드
20: 프로젝터 30: 제1 거울
40: 제2 거울 50: 적외선 조명
52: 적외선 카메라 60: 제어부
70: 전자 장치 100: 대시보드
Claims (16)
- 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법에 있어서,
상기 곡면 스크린을 복수의 영역으로 구분하는 단계;
상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 임계값을 설정하는 단계;
상기 곡면 스크린을 향하여 배치된 적외선 카메라로부터 입력되는 적외선 영상들을 기초로 제스처 시작점을 검출하는 단계;
상기 복수의 영역 중에서 상기 제스처 시작점을 포함하는 영역을 판단하는 단계;
상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향을 판단하는 단계;
상기 복수의 임계값 중에서 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향에 대응하는 임계값을 선택하는 단계;
상기 제스처 시작점으로부터 제스처 끝점까지의 궤적의 길이를 계산하는 단계; 및
상기 궤적의 길이가 상기 선택된 임계값 보다 크면, 상기 궤적을 기초로 터치 드래그 제스처를 인식하는 단계;
를 포함하되,
상기 복수의 임계값은 상기 곡면 스크린의 곡률값 및 상기 곡면 스크린과 상기 적외선 카메라 사이의 위치 관계를 기초로 설정되는 것을 특징으로 하는 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법.
- 삭제
- 제1항에 있어서,
상기 궤적의 길이가 상기 선택된 임계값 보다 작거나 같으면, 상기 궤적을 노이즈로 인식하는 단계;
를 더 포함하는 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법.
- 제1항에 있어서,
상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 발광 세기를 설정하는 단계;
상기 복수의 발광 세기 중에서 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향에 대응하는 발광 세기를 선택하는 단계; 및
상기 선택된 발광 세기로 적외선을 조사하도록 적외선 조명을 제어하는 단계;
를 더 포함하는 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법.
- 제4항에 있어서,
상기 복수의 발광 세기는 상기 곡면 스크린의 곡률값 및 상기 곡면 스크린과 상기 적외선 카메라 사이의 위치 관계를 기초로 설정되는 것을 특징으로 하는 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법.
- 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법에 있어서,
상기 곡면 스크린을 복수의 영역으로 구분하는 단계;
상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 발광 세기를 설정하는 단계;
상기 곡면 스크린을 향하여 배치된 적외선 카메라로부터 입력되는 적외선 영상들을 기초로 제스처 시작점을 검출하는 단계;
상기 복수의 영역 중에서 상기 제스처 시작점을 포함하는 영역을 판단하는 단계;
상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향을 판단하는 단계;
상기 복수의 발광 세기 중에서 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향에 대응하는 발광 세기를 선택하는 단계;
상기 선택된 발광 세기로 적외선을 조사하도록 적외선 조명을 제어하는 단계;
상기 제스처 시작점으로부터 제스처 끝점까지의 궤적의 길이를 계산하는 단계; 및
상기 궤적의 길이가 설정된 임계값 보다 크면, 상기 궤적을 기초로 터치 드래그 제스처를 인식하는 단계;
를 포함하는 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법.
- 제6항에 있어서,
상기 복수의 발광 세기는 상기 곡면 스크린의 곡률값 및 상기 곡면 스크린과 상기 적외선 카메라 사이의 위치 관계를 기초로 설정되는 것을 특징으로 하는 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법.
- 제6항에 있어서,
상기 궤적의 길이가 상기 설정된 임계값 보다 작거나 같으면, 상기 궤적을 노이즈로 인식하는 단계;
를 더 포함하는 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법.
- 곡면 스크린 상의 터치 드래그 제스처를 인식하는 장치에 있어서,
상기 곡면 스크린으로 적외선을 조사하는 적외선 조명;
상기 곡면 스크린의 적외선 영상을 촬영하는 적외선 카메라; 및
상기 곡면 스크린을 복수의 영역으로 구분하고, 상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 임계값을 설정하는 제어부;
를 포함하되,
상기 제어부는 상기 곡면 스크린의 곡률값 및 상기 곡면 스크린과 상기 적외선 카메라 사이의 위치 관계를 기초로 상기 복수의 임계값을 설정하고, 상기 적외선 영상들을 기초로 제스처 시작점을 검출하며, 상기 복수의 영역 중에서 상기 제스처 시작점을 포함하는 영역을 판단하고, 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향을 판단하며, 상기 복수의 임계값 중에서 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향에 대응하는 임계값을 선택하고, 상기 제스처 시작점으로부터 제스처 끝점까지의 궤적의 길이를 계산하며, 상기 궤적의 길이가 상기 선택된 임계값 보다 크면 상기 궤적을 기초로 터치 드래그 제스처를 인식하는 곡면 스크린 상의 터치 드래그 제스처를 인식하는 장치.
- 삭제
- 제9항에 있어서,
상기 제어부는 상기 궤적의 길이가 상기 선택된 임계값 보다 작거나 같으면, 상기 궤적을 노이즈로 인식하는 것을 특징으로 하는 곡면 스크린 상의 터치 드래그 제스처를 인식하는 장치.
- 제9항에 있어서,
상기 제어부는 상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 발광 세기를 설정하고, 상기 복수의 발광 세기 중에서 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향에 대응하는 발광 세기를 선택하며, 상기 선택된 발광 세기로 적외선을 조사하도록 상기 적외선 조명을 제어하는 것을 특징으로 하는 곡면 스크린 상의 터치 드래그 제스처를 인식하는 장치.
- 제12항에 있어서,
상기 제어부는 상기 곡면 스크린의 곡률값 및 상기 곡면 스크린과 상기 적외선 카메라 사이의 위치 관계를 기초로 상기 복수의 발광 세기를 설정하는 것을 특징으로 하는 곡면 스크린 상의 터치 드래그 제스처를 인식하는 장치.
- 곡면 스크린 상의 터치 드래그 제스처를 인식하는 장치에 있어서,
상기 곡면 스크린으로 적외선을 조사하는 적외선 조명;
상기 곡면 스크린의 적외선 영상을 촬영하는 적외선 카메라; 및
상기 곡면 스크린을 복수의 영역으로 구분하고, 상기 복수의 영역 내에서의 제스처 시작 방향 각각에 대응하는 복수의 발광 세기를 설정하는 제어부;
를 포함하되,
상기 제어부는 상기 적외선 영상들을 기초로 제스처 시작점을 검출하고, 상기 복수의 영역 중에서 상기 제스처 시작점을 포함하는 영역을 판단하며, 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향을 판단하고, 상기 복수의 발광 세기 중에서 상기 제스처 시작점을 포함하는 영역 내에서의 제스처 시작 방향에 대응하는 발광 세기를 선택하며, 상기 선택된 발광 세기로 적외선을 조사하도록 적외선 조명을 제어하고, 상기 제스처 시작점으로부터 제스처 끝점까지의 궤적의 길이를 계산하며, 상기 궤적의 길이가 설정된 임계값 보다 크면 상기 궤적을 기초로 터치 드래그 제스처를 인식하는 곡면 스크린 상의 터치 드래그 제스처를 인식하는 장치.
- 제14항에 있어서,
상기 제어부는 상기 곡면 스크린의 곡률값 및 상기 곡면 스크린과 상기 적외선 카메라 사이의 위치 관계를 기초로 상기 복수의 발광 세기를 설정하는 것을 특징으로 하는 터치 드래그 제스처를 인식하는 장치.
- 제14항에 있어서,
상기 제어부는 상기 궤적의 길이가 상기 설정된 임계값 보다 작거나 같으면, 상기 궤적을 노이즈로 인식하는 것을 특징으로 하는 곡면 스크린 상의 터치 드래그 제스처를 인식하는 장치.
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150144299A KR101744809B1 (ko) | 2015-10-15 | 2015-10-15 | 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법 및 장치 |
US15/195,294 US20170108988A1 (en) | 2015-10-15 | 2016-06-28 | Method and apparatus for recognizing a touch drag gesture on a curved screen |
CN201610601699.6A CN106598350B (zh) | 2015-10-15 | 2016-07-27 | 识别曲屏上的触摸拖动手势的方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150144299A KR101744809B1 (ko) | 2015-10-15 | 2015-10-15 | 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법 및 장치 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20170044512A KR20170044512A (ko) | 2017-04-25 |
KR101744809B1 true KR101744809B1 (ko) | 2017-06-08 |
Family
ID=58523865
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020150144299A KR101744809B1 (ko) | 2015-10-15 | 2015-10-15 | 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법 및 장치 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20170108988A1 (ko) |
KR (1) | KR101744809B1 (ko) |
CN (1) | CN106598350B (ko) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102015015630A1 (de) * | 2015-12-03 | 2017-06-08 | Audi Ag | Vorrichtung zur Anordnung in einem Kraftfahrzeug, Kraftfahrzeug mit einer Vorrichtung und Verfahren zum Betreiben einer Vorrichtung |
KR101975326B1 (ko) * | 2017-12-13 | 2019-05-07 | (주)아바비젼 | 광학 터치 보정 방법 및 이를 이용한 시스템 |
CN108382305B (zh) * | 2018-02-11 | 2020-04-21 | 北京车和家信息技术有限公司 | 一种影像显示方法、装置及车辆 |
TWI663577B (zh) * | 2018-06-04 | 2019-06-21 | 宏碁股份有限公司 | 針對非平面螢幕之色不均瑕疵補償系統 |
CN109407881B (zh) * | 2018-09-13 | 2022-03-25 | 广东美的制冷设备有限公司 | 基于曲面触摸屏的触控方法、装置和家电设备 |
DE102018216330A1 (de) * | 2018-09-25 | 2020-03-26 | Bayerische Motoren Werke Aktiengesellschaft | Benutzerschnittstellen-System und Fahrzeug |
CN109582144A (zh) * | 2018-12-06 | 2019-04-05 | 江苏萝卜交通科技有限公司 | 一种人机交互的手势识别方法 |
DE102019204047A1 (de) * | 2019-03-25 | 2020-10-01 | Volkswagen Aktiengesellschaft | Verfahren und Vorrichtung zum Einstellen eines Parameterwerts in einem Fahrzeug |
DE102019211518B3 (de) * | 2019-08-01 | 2020-08-20 | Audi Ag | Anzeigevorrichtung für ein Kraftfahrzeug und Kraftfahrzeug mit einer Anzeigevorrichtung |
CN112256126A (zh) * | 2020-10-19 | 2021-01-22 | 上海肇观电子科技有限公司 | 用于识别手势的方法、电子电路、电子设备和介质 |
CN113076836B (zh) * | 2021-03-25 | 2022-04-01 | 东风汽车集团股份有限公司 | 一种汽车手势交互方法 |
Family Cites Families (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090322499A1 (en) * | 1995-06-29 | 2009-12-31 | Pryor Timothy R | Programmable tactile touch screen displays and man-machine interfaces for improved vehicle instrumentation and telematics |
JP4196226B2 (ja) * | 1996-07-31 | 2008-12-17 | 東芝電池株式会社 | 無水銀アルカリ電池 |
JP3415407B2 (ja) * | 1997-09-26 | 2003-06-09 | 富士写真フイルム株式会社 | 波長変換レーザー |
KR20070034767A (ko) * | 2005-09-26 | 2007-03-29 | 엘지전자 주식회사 | 다중 표시영역을 갖는 이동통신 단말기 및 이를 이용한 디스플레이 간의 데이터 표시 방법 |
WO2008111235A1 (ja) * | 2007-03-13 | 2008-09-18 | Toyo Seikan Kaisha, Ltd. | インキトラップ方法およびその装置 |
KR101581275B1 (ko) * | 2008-11-05 | 2015-12-31 | 엘지전자 주식회사 | 플렉서블 디스플레이를 구비하는 휴대 단말기 및 그 제어방법 |
US9069398B1 (en) * | 2009-01-30 | 2015-06-30 | Cellco Partnership | Electronic device having a touch panel display and a method for operating the same |
KR20110010199A (ko) * | 2009-07-24 | 2011-02-01 | 현대중공업 주식회사 | 용접토치의 순간 위치변화기능을 갖는 용접캐리지 |
KR101071864B1 (ko) * | 2010-03-10 | 2011-10-10 | 전남대학교산학협력단 | 터치 및 터치 제스처 인식 시스템 |
JP5557314B2 (ja) * | 2010-03-24 | 2014-07-23 | Necカシオモバイルコミュニケーションズ株式会社 | 端末装置及びプログラム |
JP2012033059A (ja) * | 2010-07-30 | 2012-02-16 | Sony Corp | 情報処理装置、情報処理方法及び情報処理プログラム |
US9182897B2 (en) * | 2011-04-22 | 2015-11-10 | Qualcomm Incorporated | Method and apparatus for intuitive wrapping of lists in a user interface |
GB2498649B (en) * | 2011-08-03 | 2014-03-26 | Blackstar Amplification Ltd | Solid state audio power amplifier |
TWI450128B (zh) * | 2011-12-05 | 2014-08-21 | Wistron Corp | 手勢偵測方法、手勢偵測系統及電腦可讀取儲存媒體 |
US20130342493A1 (en) * | 2012-06-20 | 2013-12-26 | Microsoft Corporation | Touch Detection on a Compound Curve Surface |
JP5942762B2 (ja) * | 2012-10-04 | 2016-06-29 | 富士ゼロックス株式会社 | 情報処理装置及びプログラム |
DE102012110460A1 (de) * | 2012-10-31 | 2014-04-30 | Audi Ag | Verfahren zum Eingeben eines Steuerbefehls für eine Komponente eines Kraftwagens |
KR101542961B1 (ko) * | 2013-09-13 | 2015-08-07 | 현대자동차 주식회사 | 사용자 단말의 터치 검출 방법 및 시스템 |
KR101550601B1 (ko) * | 2013-09-25 | 2015-09-07 | 현대자동차 주식회사 | 촉감 피드백을 제공하는 곡면 터치 디스플레이 장치 및 그 방법 |
KR20150080298A (ko) * | 2013-12-31 | 2015-07-09 | 현대자동차주식회사 | 곡면 디스플레이의 터치 인식 장치 |
CN105934738B (zh) * | 2014-01-28 | 2020-04-03 | 索尼公司 | 信息处理设备、信息处理方法以及程序 |
KR101610116B1 (ko) * | 2014-10-15 | 2016-04-08 | 현대자동차 주식회사 | 차로 이탈 경고 시스템 및 그 제어 방법 |
JP7100982B2 (ja) * | 2017-01-27 | 2022-07-14 | サンコ テキスタイル イスレットメレリ サン ベ ティク エーエス | 静電容量型の伸縮可能なタッチパッド |
-
2015
- 2015-10-15 KR KR1020150144299A patent/KR101744809B1/ko active IP Right Grant
-
2016
- 2016-06-28 US US15/195,294 patent/US20170108988A1/en not_active Abandoned
- 2016-07-27 CN CN201610601699.6A patent/CN106598350B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN106598350A (zh) | 2017-04-26 |
CN106598350B (zh) | 2021-02-05 |
US20170108988A1 (en) | 2017-04-20 |
KR20170044512A (ko) | 2017-04-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101744809B1 (ko) | 곡면 스크린 상의 터치 드래그 제스처를 인식하는 방법 및 장치 | |
JP5261554B2 (ja) | 指先ポインティング、ジェスチャに基づく車両用ヒューマンマシンインタフェース | |
KR101537936B1 (ko) | 차량 및 그 제어방법 | |
CN104460974B (zh) | 车辆操纵装置 | |
KR101741691B1 (ko) | 차량 및 그 제어방법 | |
CN104723964B (zh) | 用于车辆的曲面显示设备 | |
US10725655B2 (en) | Operation apparatus | |
US9824590B2 (en) | Lane departure warning system and method for controlling the same | |
JP6671288B2 (ja) | ジェスチャー装置、その動作方法及びこれを備えた車両 | |
KR20170088421A (ko) | 이동 수단, 사용자 인터페이스 및 2개의 디스플레이 장치 상에 디스플레이 콘텐츠를 중첩 표시하기 위한 방법 | |
CN108399044B (zh) | 用户界面、运输工具和用于区分用户的方法 | |
US11397518B2 (en) | Vehicle lighting device | |
US9141185B2 (en) | Input device | |
KR101484202B1 (ko) | 제스쳐 인식 시스템을 갖는 차량 | |
WO2012147942A1 (ja) | 車載機器制御装置、及び、プログラム | |
JP6581482B2 (ja) | 画像認識装置 | |
KR20120138126A (ko) | 모션 인식을 통한 디지털 기기 제어 장치 및 방법 | |
RU2410259C2 (ru) | Интерактивное устройство управления и способ эксплуатации интерактивного устройства управления | |
JP2007080187A (ja) | 操作入力装置 | |
KR20160093496A (ko) | 원형 핸들을 구비한 전자 기기 제어 장치 및 전자 기기 제어 방법 | |
KR101558395B1 (ko) | 차량용 곡면 디스플레이 시스템 및 그 제어 방법 | |
JP6315443B2 (ja) | 入力装置、マルチタッチ操作の入力検出方法及び入力検出プログラム | |
KR101510342B1 (ko) | 안전 버튼을 구비한 곡면 디스플레이 장치 | |
JP2016157457A (ja) | 操作入力装置、操作入力方法及び操作入力プログラム | |
WO2014076992A1 (ja) | インターフェース装置、表示システム及び入力受付方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |