KR101677648B1 - 차량 제어 장치 및 그 제어 방법 - Google Patents

차량 제어 장치 및 그 제어 방법 Download PDF

Info

Publication number
KR101677648B1
KR101677648B1 KR1020140186342A KR20140186342A KR101677648B1 KR 101677648 B1 KR101677648 B1 KR 101677648B1 KR 1020140186342 A KR1020140186342 A KR 1020140186342A KR 20140186342 A KR20140186342 A KR 20140186342A KR 101677648 B1 KR101677648 B1 KR 101677648B1
Authority
KR
South Korea
Prior art keywords
driver
window
vehicle
occupant
windows
Prior art date
Application number
KR1020140186342A
Other languages
English (en)
Other versions
KR20160076294A (ko
Inventor
김선량
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020140186342A priority Critical patent/KR101677648B1/ko
Priority to EP15873437.6A priority patent/EP3237256B1/en
Priority to PCT/KR2015/008426 priority patent/WO2016104909A1/en
Priority to US14/832,084 priority patent/US9720498B2/en
Publication of KR20160076294A publication Critical patent/KR20160076294A/ko
Application granted granted Critical
Publication of KR101677648B1 publication Critical patent/KR101677648B1/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Arrangement of adaptations of instruments
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/015—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting the presence or position of passengers, passenger seats or child seats, and the related safety parameters therefor, e.g. speed or timing of airbag inflation in relation to occupant position or seat belt use
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05F—DEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05F15/00—Power-operated mechanisms for wings
    • E05F15/70—Power-operated mechanisms for wings with automatic actuation
    • E05F15/73—Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60J—WINDOWS, WINDSCREENS, NON-FIXED ROOFS, DOORS, OR SIMILAR DEVICES FOR VEHICLES; REMOVABLE EXTERNAL PROTECTIVE COVERINGS SPECIALLY ADAPTED FOR VEHICLES
    • B60J7/00—Non-fixed roofs; Roofs with movable panels, e.g. rotary sunroofs
    • B60J7/02—Non-fixed roofs; Roofs with movable panels, e.g. rotary sunroofs of sliding type, e.g. comprising guide shoes
    • B60J7/04—Non-fixed roofs; Roofs with movable panels, e.g. rotary sunroofs of sliding type, e.g. comprising guide shoes with rigid plate-like element or elements, e.g. open roofs with harmonica-type folding rigid panels
    • B60J7/057—Driving or actuating arrangements e.g. manually operated levers or knobs
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373—Voice control
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05Y—INDEXING SCHEME RELATING TO HINGES OR OTHER SUSPENSION DEVICES FOR DOORS, WINDOWS OR WINGS AND DEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION, CHECKS FOR WINGS AND WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05Y2400/00—Electronic control; Power supply; Power or signal transmission; User interfaces
    • E05Y2400/80—User interfaces
    • E05Y2400/85—User input means
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05Y—INDEXING SCHEME RELATING TO HINGES OR OTHER SUSPENSION DEVICES FOR DOORS, WINDOWS OR WINGS AND DEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION, CHECKS FOR WINGS AND WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05Y2400/00—Electronic control; Power supply; Power or signal transmission; User interfaces
    • E05Y2400/80—User interfaces
    • E05Y2400/85—User input means
    • E05Y2400/852—Sensors
    • E05Y2400/856—Actuation thereof
    • E05Y2400/858—Actuation thereof by body parts
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05Y—INDEXING SCHEME RELATING TO HINGES OR OTHER SUSPENSION DEVICES FOR DOORS, WINDOWS OR WINGS AND DEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION, CHECKS FOR WINGS AND WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05Y2900/00—Application of doors, windows, wings or fittings thereof
    • E05Y2900/50—Application of doors, windows, wings or fittings thereof for vehicles
    • E05Y2900/53—Application of doors, windows, wings or fittings thereof for vehicles characterised by the type of wing
    • E05Y2900/542—Roof panels
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05Y—INDEXING SCHEME RELATING TO HINGES OR OTHER SUSPENSION DEVICES FOR DOORS, WINDOWS OR WINGS AND DEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION, CHECKS FOR WINGS AND WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
    • E05Y2900/00—Application of doors, windows, wings or fittings thereof
    • E05Y2900/50—Application of doors, windows, wings or fittings thereof for vehicles
    • E05Y2900/53—Application of doors, windows, wings or fittings thereof for vehicles characterised by the type of wing
    • E05Y2900/55—Windows
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0381—Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer

Abstract

본 발명은 차량의 제어 장치 및 그 제어 방법에 관한 것으로, 복수의 윈도우를 포함하는 차량의 바디부와, 상기 차량에 탑승한 적어도 한 명의 탑승자의 시선을 감지하는 감지부, 및, 상기 탑승자의 요청에 근거하여, 상기 복수의 윈도우 중 상기 감지된 시선의 방향에 대응되는 어느 하나가 오픈(open) 또는 클로즈(close) 되도록 제어하는 제어부를 포함하는 것을 특징으로 한다.

Description

차량 제어 장치 및 그 제어 방법{VEHICLE CONTROL APPARATUS AND METHOD THEREOF}
본 발명은 차량의 제어 장치 및 그 제어 방법에 관한 것이다.
현재의 차량 제어 기술은 종래와 달리 다양한 기능을 차량이 사용자에게 제공할 수 있도록 한다. 이에 따라 현재의 차량에서는 이러한 다양한 기능들을 사용자의 선택에 따라 구동하기 위한 매우 많은 수의 키나 버튼 등이 구비된다. 이에 따라 현재의 차량에서는 상기 다양한 기능들을 제어하기 위한 복잡한 컨트롤 환경이 형성되고, 이에 따라 사용자는 상기 기능들을 제어하는데 있어 어려움이 있다. 또한 이러한 복수의 키들을 간소화하는 경우, 하나의 키에 보다 많은 수의 기능들이 매칭됨에 따라 사용자에게 복작한 조작을 요구하게 된다.
따라서 사용자에게 보다 편리하게 상기 다양한 기능들을 조작할 수 있도록 하는 방법들이 현재 활발하게 연구 중인 실정이다.
본 발명의 목적은, 사용자가 차량에서 실행 가능한 복수의 기능들을 보다 간편하고 쉽게 조작할 수 있도록 하는 차량 제어 장치 및 그 방법을 제공하는 것이다.
본 발명의 다른 목적은, 차량 내부에 구비된 키나 버튼의 수를 최소화하면서도, 사용자가 복잡한 조작을 할 필요없이 차량에서 실행 가능한 복수의 기능들을 보다 쉽게 조작할 수 있도록 하는 차량 제어 장치 및 그 방법을 제공하는 것이다.
상기 또는 다른 목적을 달성하기 위해 본 발명의 일 측면에 따르면, 본 발명의 실시 예에 따른 차량 제어 장치는, 복수의 윈도우를 포함하는 차량의 바디부와, 상기 차량에 탑승한 적어도 한 명의 탑승자의 시선을 감지하는 감지부, 및, 상기 탑승자의 요청에 근거하여, 상기 복수의 윈도우 중 상기 감지된 시선의 방향에 대응되는 어느 하나가 오픈(open) 또는 클로즈(close) 되도록 제어하는 제어부를 포함하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 탑승자의 요청은, 상기 탑승자가, 상기 시선 방향에 대응되는 윈도우를 응시한 시간, 상기 탑승자로부터 인가되는 기 설정된 키 입력 또는 음성 명령 중 적어도 하나이며, 상기 탑승자는, 상기 시선 방향에 대응되는 윈도우를 제어할 권한을 가지고 있는 탑승자임을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는, 상기 탑승자가 착석한 상기 차량의 좌석 위치에 근거하여 상기 탑승자가 제어 가능한 윈도우를 결정하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는, 상기 탑승자가, 상기 시선 방향에 대응되는 윈도우를 응시한 시간이 기 설정된 제1 시간 이상일 경우에 상기 시선 방향에 대응되는 윈도우의 오픈 또는 클로즈되도록 하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는, 상기 탑승자가 상기 시선 방향에 대응되는 윈도우를 응시한 시간이 기 설정된 제2 시간을 초과하는 경우, 상기 차량 내부에 구비된 음향 출력부 또는 디스플레이부를 통해 경고 메시지를 출력하거나, 상기 탑승자가 일정 시간동안 상기 시선 방향에 대응되는 윈도우를 제어할 권한을 제한하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는, 상기 탑승자로부터, 상기 탑승자의 시선 방향에 대응되는 윈도우에 대한 터치 앤드 드래그 입력에 근거하여, 상기 시선 방향에 대응되는 윈도우를 오픈 또는 클로즈하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는, 상기 복수의 윈도우 중 상기 감지된 시선의 방향에 대응되는 어느 하나의 윈도우를 상기 탑승자가 구분할 수 있도록 표시하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는, 상기 복수의 윈도우 각각에 기 설정된 영역에 표시되는 화상 정보 또는 상기 복수의 윈도우 각각에 대응되는 위치에 형성된 LED(Light Emitted Diode)의 광 신호에 근거하여 상기 감지된 시선의 방향에 대응되는 어느 하나의 윈도우를 표시하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 복수의 윈도우는, 썬루프(Sun-roof) 윈도우, 조수석 윈도우 및 조수석 뒷좌석의 윈도우, 운전석 윈도우 및 운전석 뒷좌석의 윈도우임을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는, 상기 적어도 한 명의 탑승자의 시선을 감지한 결과, 적어도 두 개의 윈도우가 상기 감지된 시선에 대응되는 경우, 상기 탑승자부터 입력되는 키 또는 음성 명령에 근거하여 오픈 또는 클로즈 할 윈도우를 결정하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는, 적어도 두 개의 윈도우가 상기 감지된 시선에 대응되는 경우, 오픈 또는 클로즈 할 윈도우를 선택받기 위한 상기 키 또는 음성 명령을 요청하는 음향 정보 또는 화상 정보를 출력하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는, 적어도 두 개의 윈도우가 상기 감지된 시선에 대응되는 경우, 상기 탑승자의 얼굴이 향하는 방향에 근거하여, 오픈 또는 클로즈 할 윈도우를 결정하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 복수의 윈도우 중 적어도 하나는, 화상 정보를 표시할 수 있도록 형성되며, 상기 제어부는, 상기 탑승자의 요청에 근거하여, 상기 복수의 윈도우 중 상기 탑승자의 시선 방향에 대응되는 어느 하나에, 상기 차량과 관련된 기 설정된 정보를 표시하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 탑승자의 요청은, 상기 차량에 관련된 기 설정된 정보를 요청하는 음성 명령 또는 상기 기 설정된 정보에 대응되는 적어도 하나의 키 입력임을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는, 상기 복수의 윈도우 중, 상기 탑승자의 시선 방향에 대응되는 어느 하나가 오픈 또는 클로즈 된 상태에 근거하여, 상기 기 설정된 정보가 상기 어느 하나의 윈도우에 표시되는 영역의 크기를 결정하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는, 상기 탑승자가 복수인 경우, 상기 탑승자들 각각의 요청에 근거하여 상기 복수의 윈도우 중 적어도 두 개에 상기 차량에 관련된 기 설정된 정보를 표시하며, 상기 표시되는 정보는 상기 차량에 관련된 서로 다른 정보이며, 상기 적어도 두 개의 윈도우는, 상기 탑승자들의 시선 방향에 각각 대응되는 윈도우들임을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는, 상기 차량의 주행 속도가 기 설정된 속도 이하인 경우에, 상기 운전자의 시선에 따라 상기 복수의 윈도우 중 어느 하나가 오픈 또는 클로즈 되도록 제어하는 것을 특징으로 한다.
상기 또는 다른 목적을 달성하기 위해 본 발명의 일 측면에 따르면, 본 발명의 실시 예에 따른 차량 제어 장치는, 복수의 내부 기기를 구비하는 차량의 바디부와, 상기 차량에 탑승한 적어도 한 명의 탑승자의 시선을 감지하는 감지부, 및, 상기 감지된 시선 방향에 근거하여, 상기 복수의 내부 기기 중 어느 하나를 구동하는 제어부를 포함하며, 상기 복수의 내부 기기는, 적어도 하나의 멀티미디어 기기 및, 내비게이션 기기를 포함하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는, 상기 복수의 내부 기기 중, 상기 탑승자의 시선에 대응되는 내부 기기가 두 개 이상인 경우, 상기 탑승자의 시선에 대응되는 기기들을 다른 기기들과 구분되게 표시하며, 상기 표시된 내부 기기들 중, 상기 탑승자의 선택에 따른 적어도 하나의 기기가 구동되도록 제어하는 것을 특징으로 한다.
상기 또는 다른 목적을 달성하기 위해 본 발명의 일 측면에 따르면, 본 발명의 실시 예에 따른 차량 제어 장치의 제어 방법은, 상기 차량에 탑승한 적어도 한 명의 탑승자의 시선 방향을 감지하는 단계와, 상기 복수의 윈도우 중 적어도 하나를 제어하기 위한 상기 탑승자의 요청을 수신하는 단계, 및, 상기 요청에 대한 응답으로, 상기 복수의 윈도우 중 상기 탑승자의 시선 방향에 대응되는 적어도 하나의 윈도우를 상기 요청에 따라 제어하는 단계를 포함하며, 상기 어느 하나의 윈도우를 제어하는 단계는, 상기 적어도 하나의 윈도우를 상기 요청에 따라 오픈(open) 또는 클로즈(close)하는 단계, 또는 상기 적어도 하나의 윈도우에 상기 차량에 관련된 기 설정된 정보를 표시하는 단계임을 특징으로 한다.
본 발명에 따른 이동 단말기 및 그 제어 방법의 효과에 대해 설명하면 다음과 같다.
본 발명의 실시 예들 중 적어도 하나에 의하면, 본 발명은, 사용자의 시선 방향에 근거하여, 차량 내부에 구비된 적어도 하나의 윈도우가 제어될 수 있도록 함으로써, 차량 내부에 구비된 키나 버튼을 최소화할 수 있도록 한다는 장점이 있다.
본 발명의 실시 예들 중 적어도 하나에 의하면, 본 발명은, 사용자의 시선 방향에 근거하여, 차량 내부에 구비된 적어도 하나의 기기가 구동되도록 함으로써, 사용자가 보다 쉽고 편리하게 차량에서 실행 가능한 기능을 구동시킬 수 있도록 한다는 장점이 있다.
도 1은 본 발명과 관련된 차량 제어 장치를 설명하기 위한 블록도이다.
도 2a 내지 도 2c는 본 발명과 관련된 차량 제어 장치에서, 사용자의 시선 방향에 대응되는 윈도우가 개폐되는 예를 도시한 예시도이다.
도 3은 본 발명과 관련된 차량 제어 장치에서, 운전자의 시선 방향에 대응되는 윈도우가 개폐되는 동작 과정을 도시한 흐름도이다.
도 4는 본 발명과 관련된 차량 제어 장치에서, 운전자의 시선 방향에 대응되는 윈도우를 결정하는 동작 과정을 도시한 흐름도이다.
도 5는 본 발명과 관련된 차량 제어 장치에서, 운전자의 시선 방향에 대응되는 윈도우에, 운전자의 요청에 따른 정보를 표시하는 동작 과정을 도시한 흐름도이다.
도 6은 본 발명과 관련된 차량 제어 장치에서, 운전자 외에 탑승자가 있는 경우, 탑승자의 좌석 위치에 따라 특정 윈도우의 개폐가 제어되는 동작 과정을 도시한 흐름도이다.
도 7은 본 발명과 관련된 차량 제어 장치에서, 운전자 외에 탑승자가 있는 경우, 상기 운전자 및 탑승자의 요청에 따른 정보가 윈도우에 표시되는 동작 과정을 도시한 흐름도이다.
도 8은 본 발명의 실시 예에 따른 차량 제어 장치가, 차량에 탑승한 탑승자의 시선 방향에 따라 차량 내부의 기기들을 구동하는 동작 과정을 도시한 흐름도이다.
도 9는, 도 8에서 보인 과정들 중, 탑승자의 시선 방향에 대응되는 차량 내부 기기를 결정하는 동작 과정을 보다 자세하게 도시한 흐름도이다.
도 10a 내지 도 10d는 본 발명의 실시 예에 따른 차량 제어 장치가, 사용자의 시선 방향에 따라 어느 하나의 윈도우를 개폐하는 예를 도시한 예시도이다.
도 11a 내지 도 11d는 본 발명의 실시 예에 따른 차량 제어 장치가, 사용자의 시선 방향에 따른 윈도우에, 사용자의 요청에 따른 정보를 표시하는 예를 도시한 예시도이다.
도 12a 내지 도 12b는 본 발명의 실시 예에 따른 차량 제어 장치가, 조수석에 탑승한 탑승자의 제어에 따라 조수석의 윈도우가 개폐되는 예를 도시한 예시도이다.
도 13a 내지 도 13c는 본 발명의 실시 예에 따른 차량 제어 장치가, 운전자 및 조수석에 탑승한 탑승자의 시선 방향에 대응되는 윈도우에, 상기 운전자 및 탑승자의 요청에 따른 서로 다른 정보를 표시하는 예시도이다.
도 14a 내지 도 14d는, 본 발명의 실시 예에 따른 차량 제어 장치가, 운전자의 시선 방향 및 음성 신호에 따라 차량 내부에 구비된 어느 하나의 기기를 구동시키는 예를 도시한 예시도이다.
도 15a 내지 도 15b는, 본 발명의 실시 예에 따른 차량 제어 장치가, 상기 운전자의 시선 방향에 대응되는 기기가 복수인 경우, 어느 하나의 기기를 선택받는 예를 도시한 예시도이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 동일하거나 유사한 구성요소에는 동일, 유사한 도면 부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
도 1은 본 발명과 관련된 차량 제어 장치를 설명하기 위한 블록도이다.
우선 도 1에서 보이고 있는 바와 같이 본 발명의 실시 예에 따른 차량 제어 장치(100)는, 제어부(110) 및, 제어부(110)와 연결되는 감지부(130), 구동부(120), 메모리(140), 출력부(150)를 포함하여 구성될 수 있으며, 사용자 입력부(160)를 더 포함할 수 있다. 그리고 상기 차량 제어 장치(100)는, 차량의 외관을 이루는 외부 프레임과 윈도우 및 사용자가 탑승 가능하도록 형성되는 내부 프레임을 포함하는 차량의 바디(body)부에 형성될 수 있다. 여기서 도 1에 도시된 구성요소들은 본 발명과 관련된 차량 제어 장치(100)를 구현하는데 있어서 필수적인 것은 아니어서, 본 명세서 상에서 설명되는 차량 제어 장치(100)는 위에서 열거된 구성요소들 보다 많거나, 또는 적은 구성요소들을 가질 수 있다.
감지부(130)는 차량 제어 장치(100) 내 정보, 차량 제어 장치(100)를 둘러싼 주변 환경 정보 및 사용자 정보 중 적어도 하나를 센싱하기 위한 하나 이상의 센서를 포함할 수 있다. 예를 들어, 감지부(130)는 근접센서(proximity sensor), 조도 센서(illumination sensor), 터치 센서(touch sensor), 가속도 센서(acceleration sensor), 자기 센서(magnetic sensor), 중력 센서(G-sensor), 자이로스코프 센서(gyroscope sensor), 모션 센서(motion sensor), RGB 센서, 적외선 센서(IR 센서: infrared sensor), 지문인식 센서(finger scan sensor), 초음파 센서(ultrasonic sensor), 광 센서(optical sensor), 환경 센서(예를 들어, 기압계, 습도계, 온도계, 방사능 감지 센서, 열 감지 센서, 가스 감지 센서 등), 화학 센서(예를 들어, 전자 코, 헬스케어 센서, 생체 인식 센서 등) 중 적어도 하나를 포함할 수 있다. 한편, 본 명세서에 개시된 차량 제어 장치(100)는, 이러한 센서들 중 적어도 둘 이상의 센서에서 센싱되는 정보들을 조합하여 활용할 수 있다.
또한 이러한 감지부(130)는 사용자의 입력을 감지할 수 있는 감지 영역을 적어도 하나 포함할 수 있으며, 이러한 감지 영역은 상기 차량의 외부 프레임과 내부 프레임을 포함하는 차량의 바디부에 형성될 수 있다. 이러한 감지 영역은, 터치 스크린 등의 형태로 구현될 수 있다.
이러한 감지 영역은 차량의 다양한 부분에 형성될 수 있다. 예를 들어 상기 감지 영역은, 차량의 윈드 쉴드 글래스(Wind Shield Glass)의 전체 또는 일부에 구현될 수 있으며, 운전석 옆면의 윈도우나 보조석 옆면의 윈도우 또는 차량 뒷좌석의 윈도우에 구현될 수도 있다. 또는 상기 감지 영역은 차량의 썬루프(sunroof)에도 구현될 수 있다.
구동부(120)는 차량의 각종 설정을 변경하거나, 특정 기능이 구동되도록 할 수 있다. 예를 들어 구동부(120)는, 차량의 각 구성부, 예를 들어 앞좌석의 운전석이나 보조석의 윈도우(Window)의 오픈(open) 또는 클로즈(close)를 상기 제어부(110)의 제어에 따라 제어할 수 있다. 또한 구동부(120)는 상기 제어부(110)의 제어에 따라 특정 차량 내부 또는 외부에 구비된 각종 기기가 구동되도록 할 수도 있다. 예를 들어 구동부(120)는 기 저장되거나 외부로부터 수신된 음향 정보 또는 영상 정보를 재생할 수 있는 멀티미디어 기기 또는 내비게이션(Navigation) 기기 등을 제어부(110)의 제어에 따라 구동시킬 수 있다. 이를 위해 상기 구동부(120)는 기 설정된 음악 리스트가 표시되도록 하거나, 또는 상기 기 설정된 리스트 상의 음악 중 어느 하나가 자동으로 재생되도록 할 수도 있다. 또는 구동부(120)는 네비게이션 기기를 구동하여 사용자로부터 입력되는 음성 신호 또는 키 입력에 따른 목적지까지의 경로가 표시되도록 할 수도 있다.
출력부(150)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 디스플레이부(151), 음향 출력부(152), 햅팁 모듈(153), 광 출력부(154) 중 적어도 하나를 포함할 수 있다. 각종 화상 정보를 표시하는 디스플레이부(151)는, 터치 센서와 상호 레이어 구조를 이루거나 일체형으로 형성됨으로써, 터치스크린을 구현할 수 있다. 이러한 터치스크린은, 차량 제어 장치(100)와 사용자 사이의 입력 인터페이스를 제공하는 사용자 입력부(160)로써 기능함과 동시에, 차량 제어 장치(100)와 사용자 사이의 출력 인터페이스를 제공할 수 있다.
여기서 상기 디스플레이부(151)는, 차량의 다양한 부분에 구현될 수 있다. 예를 들어 상기 디스플레이부(151)는, 차량의 윈드 쉴드 글래스(Wind Shield Glass)의 전체 또는 일부 또는 상기 운전석 옆면의 윈도우나 보조석 옆면의 윈도우 또는 차량 뒷좌석의 윈도우 등에 구현될 수도 있다. 또는 상기 디스플레이부(151)는 차량의 썬루프에도 구현될 수 있다.
메모리(140)는 차량 제어 장치(100)의 다양한 기능을 지원하는 데이터를 저장한다. 메모리(140)는 차량 제어 장치(100)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 차량 제어 장치(100)의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 그리고 메모리(140)는 제어부(110)의 동작을 위한 다양한 프로그램을 저장할 수 있고, 입/출력되는 데이터들을 임시 저장할 수도 있다. 이러한 응용 프로그램 중 적어도 일부는, 무선 통신을 통해 외부 서버로부터 다운로드 될 수 있다. 또한 이러한 응용 프로그램 중 적어도 일부는, 차량 제어 장치(100)의 기본적인 기능(예를 들어, 시동 기능, 네비게이션 기능 등)을 위하여 출고 당시부터 차량 제어 장치(100)상에 존재할 수 있다. 한편, 응용 프로그램은, 메모리(140)에 저장되고, 차량 제어 장치(100) 상에 설치되어, 제어부(110)에 의하여 상기 차량 제어 장치의 동작(또는 기능)을 수행하도록 구동될 수 있다.
뿐만 아니라 메모리(140)는 적어도 한 명이상의 사용자에 관련된 정보들을 저장할 수 있다. 여기서 사용자 관련 정보라는 것은, 특정 사용자를 인식한 정보 등이 될 수 있다. 예를 들어 제어부(110)는 사용자로부터 음성이 입력되는 경우, 입력된 음성의 특징을 이용하여 상기 음성을 발성한 사용자를 인식할 수 있다. 그리고 차량의 탑승자가 복수인 경우, 상기 인식된 결과를 이용하여 상기 복수의 탑승자들 각각을 구분할 수도 있다. 이러한 경우 상기 탑승자들 각각을 구분하기 위한 정보 등이 상기 메모리(140)에 저장될 수도 있다.
이러한 메모리(140)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), SSD 타입(Solid State Disk type), SDD 타입(Silicon Disk Drive type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(random access memory; RAM), SRAM(static random access memory), 롬(read-only memory; ROM), EEPROM(electrically erasable programmable read-only memory), PROM(programmable read-only memory), 자기 메모리, 자기 디스크 및 광 디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 차량 제어 장치(100)는 인터넷(internet)상에서 상기 메모리(140)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작될 수도 있다.
한편, 제어부(110)는 상기 응용 프로그램과 관련된 동작 외에도, 통상적으로 차량 제어 장치(100)의 전반적인 동작을 제어한다. 제어부(110)는 위에서 살펴본 구성요소들을 통해 입력 또는 출력되는 신호, 데이터, 정보 등을 처리하거나 메모리(140)에 저장된 응용 프로그램을 구동함으로써, 차량의 구동을 제어할 수 있다. 또한, 제어부(110)는 메모리(140)에 저장된 응용 프로그램을 구동하기 위하여, 도 1과 함께 살펴본 구성요소들 중 적어도 일부를 제어할 수 있다. 나아가, 제어부(110)는 상기 응용 프로그램의 구동을 위하여, 차량 제어 장치(100)에 포함된 구성요소들 중 적어도 둘 이상을 서로 조합하여 동작시킬 수 있다.
또한 제어부(110)는, 사용자의 입력에 근거하여 디스플레이부(151)에 각종 화상 정보가 표시되도록 할 수도 있다. 예를 들어 제어부(110)는 사용자의 시선이 향하는 방향 및, 사용자의 음성 신호 중 적어도 하나에 근거하여 차량 제어 장치(100)에서 실행 가능한 기능들 중 적어도 하나가 실행되도록 할 수 있다.
여기에서, 상기 차량 제어 장치(100) 상에서 실행 가능한 기능은, 차량 제어 장치(100)에서 실행되거나 구동되는 것이 가능한 모든 종류의 기능을 의미할 수 있다. 여기서 상기 실행 가능한 기능 중 하나는, 차량 제어 장치(100)에 설치된 애플리케이션일 수 있다. 그리고 '임의의 기능이 실행된다'고 함은, '임의의 응용 프로그램이 상기 차량 제어 장치(100)에서 실행 또는 구동'되는 것을 의미할 수 있다. 예를 들어 제어부(110)는 사용자의 시선 및, 사용자의 음성 명령 중 적어도 하나에 근거하여, 음악 파일을 재생하거나 또는 기 설정된 목적지까지의 경로가 자동으로 설정되도록 네비게이션을 제어 할 수 있다.
또 다른 예로서, 차량 제어 장치(100)에서 실행 가능한 기능은, 차량 제어 장치(100)의 기본적인 구동을 위하여 필요한 기능일 수 있다. 예를 들어, 기본적인 구동을 위하여 필요한 기능은, 차량에 구비된 에어컨이나 온풍기를 온/오프하는 기능일 수 있다. 또는 윈드 쉴드 글래스에 설치된 와이퍼들을 구동시키는 기능일 수도 있다.
한편, 상기 각 구성요소들 중 적어도 일부는, 이하에서 설명되는 다양한 실시 예들에 따른 차량 제어 장치(100)의 동작, 제어, 또는 제어방법을 구현하기 위하여 서로 협력하여 동작할 수 있다. 또한, 상기 차량 제어 장치(100)의 동작, 제어, 또는 제어방법은 상기 메모리(140)에 저장된 적어도 하나의 응용 프로그램의 구동에 의하여 차량 제어 장치(100) 상에서 구현될 수 있다.
한편 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는 상기 감지부(130)를 통해 감지되는 사용자의 시선 및/또는 음성 신호에 근거하여 상기 차량에서 수행 가능한 다양한 기능을 제어할 수 있다. 예를 들어 제어부(110)는 상기 사용자의 시선 및/또는 음성 신호에 근거하여, 상기 차량에 구비된 윈도우들 중 적어도 하나가 오픈(open) 또는 클로즈(close)되도록 구동부(120)를 제어할 수 있다. 여기서 상기 차량에 구비된 복수의 윈도우는, 운전석의 사이드 윈도우(sidr window), 운전석 뒷좌석의 사이드 윈도우, 조수석의 사이드 윈도우와 조수석 뒷좌석의 사이드 윈도우, 및 썬루프(Sunroof)를 포함할 수 있다.
도 2a 내지 도 2c는 이러한 본 발명의 실시 예에 따른 차량 제어 장치(100)에서, 상기 차량에 형성된 복수의 윈도우 중 사용자의 시선 방향에 대응되는 어느 하나가 개폐되는 예를 보이고 있는 것이다.
우선 도 2a를 참조하여 살펴보면, 본 발명의 실시 예에 따른 차량 제어 장치(100)가 구비된 차량에 운전자(250)가 탑승한 예를 보이고 있는 것이다. 이러한 상태에서 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는 시선 감지부(131)의 감지 결과에 따라 상기 운전자의 시선이 향하는 방향을 감지할 수 있다. 예를 들어 상기 시선 감지부(131)는 차량 내부에 구비된 카메라(240)일 수 있으며, 제어부(110)는 상기 카메라(240)를 통해 운전자의 눈동자를 감지하고, 상기 운전자의 눈동자가 향하는 방향에 근거하여 운전자의 시선이 향하는 방향을 감지할 수 있다.
이에 따라 만약 운전자(250)의 시선 방향이 변경되는 경우, 제어부(110)는 이를 감지할 수 있다. 예를 들어 도 2b에서 보이고 있는 것처럼, 운전자(250)가 운전석 사이드 윈도우(210)를 바라보는 경우, 제어부(110)는 상기 카메라(240)를 통해 상기 운전자(250)의 눈동자 이동을 감지할 수 있고, 이에 따라 운전자(250) 시선이 향하는 방향이 변경되었음을 감지할 수 있다. 그리고 변경된 운전자(250)의 시야 방향에 근거하여, 상기 운전자(250)가 운전석 사이드 윈도우(210)를 바라보고 있다고 판단할 수 있다.
이러한 경우, 제어부(110)는 상기 운전자(250)의 시선 방향에 근거하여, 운전자(250)의 시선 방향에 대응되는 윈도우, 즉 운전석 사이드 윈도우(210)를 오픈(open)하거나 클로즈(close)할 수 있다. 예를 들어 제어부(110)는 운전자(250)가 기 설정된 시간 이상 상기 운전석 사이드 윈도우(210)를 응시하고 있는 경우, 이에 근거하여 상기 운전석 사이드 윈도우(210)를 오픈하거나 또는 클로즈할 수 있다. 또는 제어부(110)는 운전자(250)가 상기 운전석 사이드 윈도우(210)를 응시하고 있는 상태에서 상기 운전자(250)의 음성 명령이 감지되는 경우, 상기 음성 명령에 근거하여 운전석 사이드 윈도우(210)가 오픈되거나 클로즈되도록 할 수도 있다. 또는 제어부(110)는 상기 운전자(250)로부터 기 설정된 키가 입력되는 경우, 입력된 키에 근거하여 상기 운전석 사이드 윈도우(210)가 오픈되거나 클로즈되도록 할 수도 있다. 도 2b는 이처럼 운전자(250)의 시선 방향에 대응되는 윈도우(210)가 오픈되는 예를 도시하고 있는 것이다.
한편, 본 발명에서 상기 운전자(250)의 시선 방향에 대응되는 윈도우는 운전석의 사이드 윈도우(210)에 한정되는 것이 아님은 물론이다. 예를 들어 본 발명에서, 운전자(250)의 시선에 의해 제어될 수 있는 윈도우는, 개폐가 가능한 차량 내부의 모든 윈도우를 포함할 수 있다. 예를 들어, 운전자(250)는 시선만으로 도 2b에서 보이고 있는 것처럼 운전석 사이드 윈도우 뿐만 아니라, 조수석, 즉 운전석 옆 좌석의 사이드 윈도우(220) 또는 썬루프 윈도우(200)를 포함할 수 있다. 뿐만 아니라 비록 도 2a 및 도 2b에 도시되지는 않았으나 운전석 뒷좌석의 사이드 윈도우 및 조수석 뒷좌석의 사이드 윈도우를 포함할 수도 있음은 물론이다.
따라서 상기 도 2b에서 보인 것과 유사하게, 썬루프 윈도우가 오픈되거나 클로즈되도록 할 수도 있다. 즉 도 2c에서 보이고 있는 것과 같이, 운전자(250)가 썬루프 윈도우(200)가 위치한 방향을 응시하는 경우, 카메라(240)는 이러한 운전자(250)의 시선 방향을 감지할 수 있고, 운전자(250)의 요청에 따라 상기 썬루프 윈도우(200)가 오픈 또는 클로즈 되도록 할 수도 있다. 여기서 상기 운전자(250)의 요청이 있는지 여부는, 운전자(250)가 일정 시간 이상동안 상기 썬루프 윈도우(200)를 응시 또는 기 설정된 제스처를 취하하였는지 여부 또는 운전자가 음성 또는 기 설정된 키를 입력하였는지 여부에 따라 결정될 수 있다. 예를 들어 제어부(110)는 운전자가 썬루프 윈도우(200)를 일정시간 이상동안 응시한 상태에서 고개를 뒤로 젖히거나 고개를 앞으로 숙이는 제스처를 취하는 경우, 이러한 제스처에 근거하여 상기 썬루프 윈도우(200)가 오픈되거나 또는 클로즈 되도록 할 수도 있다. 또한 만약 운전자(250)가 음성 명령 또는 기 설정된 키를 통해 오픈 또는 클로즈를 지시하는 경우, 제어부(110)는 이에 근거하여 상기 썬루프 윈도우(200)가 오픈되거나 또는 클로즈 되도록 할 수도 있다.
한편, 제어부(110)는 윈도우의 개폐(開閉) 뿐만 아니라, 상기 차량 내부에 구비된 다양한 기능들이 상기 사용자의 시선 및/또는 음성에 의해 제어되도록 할 수 있다. 예를 들어 제어부(110)는 사용자의 시선 및/또는 음성에 의하여 상기 차량에 관련된 기 설정된 정보가 상기 윈도우 중 적어도 하나에 표시되도록 할 수 있다. 일 예로 제어부(110)는 사용자의 시선 방향에 대응되는 상기 윈도우들 중 어느 하나에, 사용자의 음성 명령에 따른 정보(예를 들어 내비게이션 정보)가 표시되도록 할 수도 있다.
한편, 제어부(110)는 사용자의 시선 방향 또는 음성 명령을 인식하기 어려운 경우, 부가적인 사용자의 입력을 이용할 수도 있다. 예를 들어 제어부(110)는 사용자의 시선 방향에 대응되는 차량 내부의 기기가 적어도 두 개 이상인 경우, 상기 적어도 두 개의 기기를 다른 기기들과 구분되게 표시하고, 사용자의 음성 명령 또는 기 설정된 키의 입력에 근거하여 어느 하나의 기기가 구동되도록 할 수도 있다.
한편 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는 사용자가 복수인 경우에도 얼마든지 상기 복수의 사용자의 시선 및/또는 음성 신호에 근거하여 상기 차량에서 수행 가능한 다양한 기능을 제어할 수도 있음은 물론이다.
예를 들어, 상기 감지부(130)의 센서들은 차량 내부에 복수 개 있을 수 있다. 그리고 상기 센서들은, 차량 내부에 구비된 복수의 좌석들 각각에 대응되는 위치에 형성되어 있을 수 있다. 그리고 이러한 경우 상기 감지부(130)는 상기 차량에 복수의 탑승자가 있는 경우, 상기 탑승자들의 음성 및 시선을 각각 감지할 수도 있다.
그러면 제어부(110)는 상기 복수의 좌석 중 탑승자가 착석한 좌석에 대응되는 센서들로부터 감지되는 센싱 신호들만을 수신하여 상기 음성 신호를 발성한 탑승자가 어느 좌석에 위치하고 있는지를 판단할 수도 있다. 또는 제어부(110)는 동시에 복수의 음성 감지부(132)에서 동일 또는 유사하다고 판단할 수 있는 음성 신호가 감지되는 경우, 상기 음성 신호가 상기 복수의 음성 감지부(132) 각각에 수신된 세기들에 근거하여, 상기 음성 신호를 발성한 탑승자가 어느 좌석에 위치하고 있는지를 판단할 수도 있다.
이에 따라 제어부(110)는 상기 감지부(130)로부터 감지된 복수의 탑승자들로부터 수신된 음성 신호를 각각 좌석에 따른 위치별로 구분하여 인식할 수 있다. 그리고 상기 제어부(110)는 상기 감지부(130)를 통해 각 좌석에 착석한 탑승자들의 시선들을 인식할 수 있으며, 상기 탑승자들의 시선이 향하는 방향을 인식할 수 있다. 그리고 인식된 탑승자들의 시선 방향과, 상기 탑승자들의 음성 신호에 근거하여, 상기 차량의 윈도우 중 적어도 하나가 오픈 또는 클로즈되도록 하거나, 상기 차량에 관련된 다양한 정보가 표시되도록 할 수있다.
이하에서는, 위에서 살펴본 차량 제어 장치(100)를 통하여 구현되는 다양한 실시 예들을 살펴보기에 앞서, 위에서 열거된 구성요소들에 대하여 도 1을 참조하여 보다 구체적으로 살펴본다.
감지부(130)는 차량 제어 장치(100) 내 정보, 차량 제어 장치(100)를 둘러싼 주변 환경 및 사용자로부터 입력되는 정보를 감지하고, 이에 대응하는 센싱 신호를 발생시킨다. 제어부(110)는 이러한 센싱 신호에 기초하여, 차량 제어 장치(100)의 구동 또는 동작을 제어하거나, 차량 제어 장치(100)에 설치된 응용 프로그램과 관련된 데이터 처리, 기능 또는 동작을 수행 할 수 있다. 감지부(130)에 포함될 수 있는 다양한 센서 중 대표적인 센서들의 대하여, 보다 구체적으로 살펴본다.
먼저 시선 감지부(131)는 사용자의 시선을 감지하는 센서를 말한다. 예를 들어 시선 감지부(131)는 사용자의 눈동자를 인식하고, 상기 사용자의 눈동자가 향하는 방향에 근거하여 사용자의 시선이 향하는 방향을 감지할 수 있다.
이를 위해 시선 감지부(131)는 사용자의 눈동자가 향하는 방향을 감지하기 위해 적어도 하나의 센서로 이루어질 수 있다. 예를 들어 시선 감지부(131)는 카메라 센서(예를 들어, CCD, CMOS 등), 포토 센서(또는 이미지 센서)등을 포함할 수 있다. 이러한 경우 상기 시선 감지부(131)는 상기 카메라 센서 또는 포토 센서로부터 감지되는 영상 정보로부터 사용자의 눈동자 및 상기 눈동자가 향하는 방향(즉 시선 방향)을 인식할 수 있고, 상기 시선 방향이 변경되는 경우, 변경된 방향에 대해 감지할 수 있다.
뿐만 아니라 상기 시선 감지부(131)는 사용자의 시선 뿐만 아니라, 사사용자의 얼굴이 향하는 방향 등을 더 감지할 수도 있음은 물론이다. 이러한 경우, 제어부(110)는 상기 시선 감지부(131)에서 감지되는 감지 결과에 근거하여 사용자의 얼굴이 향하는 방향을 더 감지하여, 상기 사용자의 시선 방향과 더불어 보다 정확하게 사용자의 시선이 향하는 방향을 감지할 수 있다. 뿐만 아니라, 상기 사용자의 얼굴이 향하는 방향을 감지한 결과에 근거하여, 사용자의 제스처, 즉 사용자가 고개를 뒤로 젖히거나 앞으로 숙이는 등과 같은 제스러를 감지할 수도 있다.
그리고 음성 감지부(132)는 사용자의 음성을 감지하는 센서를 말한다. 예를 들어 음성 감지부(132)는 마이크등과 같이 음향 정보를 수신하는 센서를 포함하여 음향 정보의 수신 여부를 감지하고, 상기 수신된 음향 정보를 음성으로 인식할 수 있다. 이를 위해 상기 음성 감지부(132)는 수신된 음향 신호를 음성으로 인식하기 위한 음성 인식 기능을 더 포함할 수도 있다.
또한 상기 감지부(130)는 비록 도시되지는 않았으나, 다양한 센서들을 더 구비할 수도 있다. 예를 들어 상기 감지부(130)는 모션(motion) 센서, 근접 센서, 터치 센서, 초음파 센서 등을 더 구비할 수 있다.
여기서 모션 센서는, 사용자의 제스처를 감지하기 위한 센서로, 카메라 센서(예를 들어, CCD, CMOS 등), 포토 센서(또는 이미지 센서)등을 포함할 수 있다. 이러한 경우 상기 모션 센서는 상기 카메라 센서 또는 포토 센서로부터 감지되는 영상 정보로부터 사용자의 제스처를 인식할 수 있고, 상기 인식된 제스처에 대한 정보를 제어부(110)에 인가할 수 있다.
한편 근접 센서는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선 등을 이용하여 기계적 접촉이 없이 검출할 수 있다.
한편 터치 센서는, 감지 영역의 특정 부위에 가해진 압력 또는 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서는, 감지 영역 상에 터치를 가하는 터치 대상체가 터치 센서 상에 터치 되는 위치, 면적, 터치 시의 압력, 터치 시의 정전 용량 등을 검출할 수 있도록 구성될 수 있다. 여기에서, 터치 대상체는 상기 터치 센서에 터치를 인가하는 물체로서, 예를 들어, 손가락, 터치펜 또는 스타일러스 펜(Stylus pen), 포인터 등이 될 수 있다.
이와 같이, 터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(110)로 전송한다. 이로써, 제어부(110)는 감지 영역 상의 어느 지점이 터치 되었는지 여부 등을 알 수 있게 된다. 여기에서, 터치 제어기는, 제어부(110)와 별도의 구성요소일 수 있고, 제어부(110) 자체일 수 있다.
한편, 제어부(110)는, 상기 감지 영역을 터치하는, 터치 대상체의 종류에 따라 서로 다른 제어를 수행하거나, 동일한 제어를 수행할 수 있다. 터치 대상체의 종류에 따라 서로 다른 제어를 수행할지 또는 동일한 제어를 수행할 지는, 현재 차량 제어 장치(100)의 동작상태 또는 실행 중인 응용 프로그램에 따라 결정될 수 있다.
한편, 위에서 살펴본 터치 센서 및 근접 센서는 독립적으로 또는 조합되어, 감지 영역에 대한 숏(또는 탭) 터치(short touch), 롱 터치(long touch), 멀티 터치(multi touch), 드래그 터치(drag touch), 플리크 터치(flick touch), 핀치-인 터치(pinch-in touch), 핀치-아웃 터치(pinch-out 터치), 스와이프(swype) 터치, 호버링(hovering) 터치 등과 같은, 다양한 방식의 터치를 센싱할 수 있다.
초음파 센서는 초음파를 이용하여, 감지대상의 위치정보를 인식할 수 있다. 한편 제어부(110)는 광센서와 복수의 초음파 센서로부터 감지되는 정보를 통해, 파동 발생원의 위치를 산출하는 것이 가능하다. 파동 발생원의 위치는, 광이 초음파보다 매우 빠른 성질, 즉, 광이 광센서에 도달하는 시간이 초음파가 초음파 센서에 도달하는 시간보다 매우 빠름을 이용하여, 산출될 수 있다. 보다 구체적으로 광을 기준 신호로 초음파가 도달하는 시간과의 시간차를 이용하여 파동 발생원의 위치가 산출될 수 있다.
디스플레이부(151)는 다양한 화상 정보를 표시할 수 있다. 예를 들어 디스플레이부(151)는, 상술한 바와 같이 차량 제어 장치(100)에서 수행 가능한 각종 차량의 제어 기능과 관련된 화상 정보를 표시할 수 있으며, 또는 사용자 인증이 완료된 경우 사용자 인증 결과 및 현재 인증된 사용자와 관련된 정보를 표시할 수도 있다. 그리고 상기 디스플레이부(151)는 차량 제어 장치(100)에서 처리되는 정보를 표시(출력)할 수도 있다. 예를 들어, 상기 디스플레이부(151)에 표시되는 화면 정보는, 차량 제어 장치(100)에서 구동되는 응용 프로그램의 실행화면 정보, 또는 이러한 실행화면 정보에 따른 UI(User Interface), GUI(Graphic User Interface) 정보일 수 있다.
이러한 화상 정보들은 차량의 윈드 쉴드 글래스의 적어도 일부나 운전석 또는 보조석의 윈도우 등에 표시될 수 있으며, 이에 따라 본 발명의 실시 예에 따른 차량 제어 장치(100)가 구비되는 차량의 윈도우 또는 윈드 쉴드 글래스의 적어도 일부는, 투명 디스플레이(Glass display) 형태로 구현될 수도 있다.
음향 출력부(152)는 메모리(140)에 저장된 오디오 데이터를 출력할 수 있다. 음향 출력부(152)는 차량 제어 장치(100)에서 수행되는 기능과 관련된 음향 신호를 출력하기도 한다. 이러한 음향 출력부(152)에는 스피커(speaker), 버저(buzzer) 등이 포함될 수 있다.
한편, 본 발명의 실시 예에 따른 차량 제어 장치(100)의 출력부(150)는 햅틱 모듈(haptic module)(153)을 포함할 수 있다. 햅틱 모듈(153)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(153)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 될 수 있다.
그리고 상기 출력부(150)는 광 출력부(154)를 더 포함할 수 있다. 광 출력부(154)는 이벤트의 발생시 이를 알리기 위한 빛을 출력하도록 이루어진다. 광 출력부(154)는 적어도 하나의 LED(Light Emitted Diode)를 포함하여 구성될 수 있으며, 사용자의 시선 및/또는 음성에 의해 선택된 차량의 기능 또는 기기를 사용자가 식별할 수 있도록 표시할 수 있다. 예를 들어 상기 LED는 상기 차량 내부에 구비된 윈도우들에 각각 대응되도록 형성될 수 있으며, 또는 라디오, 음원 재생 장치, 동영상 플레이어 등과 같이 멀티미디어 데이터를 재생할 수 있는 멀티미디어 기기나 내비게이션 기기 등에 각각 대응되도록 형성될 수도 있다. 이러한 경우 제어부(110)는 사용자의 시선 방향 및/또는 음성 신호에 대응되는 윈도우나 멀티미디어 기기 또는 내비게이션 기기를, 그렇지 않은 기기와 구분될 수 있도록 상기 LED를 이용하여 표시할 수 있다.
한편 본 발명의 실시 예에 따른 차량 제어 장치(100)는 사용자 입력부(160)를 더 포함할 수도 있다. 상기 사용자 입력부(160)는 사용자로부터 정보를 입력받기 위한 것으로서, 사용자 입력부(160)를 통해 정보가 입력되면, 제어부(110)는 입력된 정보에 대응되도록 상기 차량에서 수행 가능한 다양한 기능을 제어할 수 있다. 이러한, 사용자 입력부(160)는 기계식 (mechanical) 입력수단(또는, 메커니컬 키, 예를 들어, 버튼, 돔 스위치(dome switch), 조그 휠, 조그 스위치 등) 및 터치식 입력수단을 포함할 수 있다. 일 예로서, 터치식 입력수단은, 소프트웨어적인 처리를 통해 터치스크린에 표시되는 가상 키(virtual key), 소프트 키(soft key) 또는 비주얼 키(visual key)로 이루어지거나, 상기 터치스크린 이외의 부분에 배치되는 터치 키(touch key)로 이루어질 수 있다. 한편, 상기 가상키 또는 비주얼 키는, 다양한 형태를 가지면서 터치스크린 상에 표시되는 것이 가능하며, 예를 들어, 그래픽(graphic), 텍스트(text), 아이콘(icon), 비디오(video) 또는 이들의 조합으로 이루어질 수 있다.
또한 상기 사용자 입력부(160)는 사용자로부터 적어도 하나의 방향을 입력받을 수 있는 키(key)의 형태로 형성될 수 있으며, 복수의 윈도우나 상기 차량에서 수행 가능한 기능 또는 상기 차량 내부의 복수의 기기들이 상기 사용자의 시선 방향에 대응되는 경우, 상기 사용자의 시선 방향에 대응되는 어느 하나의 윈도우나 차량의 기능 또는 기기를 선택받기 위한 용도로 사용될 수도 있다.
이하에서는 이와 같이 구성된 차량 제어 장치(100)에서 구현될 수 있는 제어 방법과 관련된 실시 예들에 대해 첨부된 도면을 참조하여 살펴보겠다. 본 발명은 본 발명의 정신 및 필수적 특징을 벗어나지 않는 범위에서 다른 특정한 형태로 구체화될 수 있음은 당업자에게 자명하다.
도 3은 본 발명과 관련된 차량 제어 장치에서, 운전자의 시선 방향에 대응되는 윈도우가 개폐되는 동작 과정을 도시한 흐름도이다.
도 3을 참조하여 살펴보면, 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는, 차량이 구동되는 경우, 시선 감지부(131)를 통해 운전자의 시선 방향을 모니터링(monitoring)한다(S300). 여기서 차량의 구동 여부 판단은, 운전자가 차량의 시동을 거는 경우, 또는 기 설정된 잠금 해제 신호의 입력에 의해 차량의 잠금 상태가 해제되는 경우 등이 될 수 있다.
이러한 상태에서, 제어부(110)는 차량 내부에 구비된 특정 윈도우를 개폐시키기 위한 기 설정된 입력이 있는지 여부를 판단할 수 있다(S302). 예를 들어 제어부(110)는 운전자로부터 기 설정된 키가 입력되는 경우 또는 운전자로부터 윈도우를 개폐시키기 위한 음성 명령이 입력되는 경우 이러한 기 설정된 입력이 있는 것으로 판단할 수 있다. 또한 제어부(110)는 상기 S300 단계에서 운전자의 시선을 감지한 결과, 운전자의 시선이 향하는 방향이 기 설정된 시간 이상인 경우에 상기 기 설정된 입력이 있는 것으로 판단할 수 있다. 여기서 상기 제어부(110)는 상기 운전자의 시선 방향이 기 설정된 방향이 아닌 다른 방향을 기 설정된 시간 이상 향하고 있는 경우에 한하여 상기 기 설정된 입력이 있는 것으로 판단할 수도 있음은 물론이다. 즉, 제어부(110)는 상기 S302 단계에서 운전자가 정면 방향, 즉 윈드 쉴드 글래스(230)를 기 설정된 시간 이상 향하고 있는 경우에는, 상기 기 설정된 입력이 있는 것으로 판단하지 않을 수 있다. 그리고 운전자가 자신의 왼쪽 방향이나 오른쪽 방향, 즉 예를 들어 운전석 사이드 윈도우(210)나 조수석 사이드 윈도우(220)를 기 설정된 시간 이상동안 응시하는 경우에 한하여 상기 기 설정된 입력이 있는 것으로 판단할 수도 있음은 물론이다.
한편, 상기 S302 단계에서, 운전자로부터 특정 윈도우를 개폐하기 위한 기 설정된 입력이 있는 것으로 판단되는 경우라면, 제어부(110)는 운전자의 시선 방향에 대응되는 윈도우를 결정할 수 있다(S304). 여기서 제어부(110)는 상기 시선 감지부(131)로부터 감지된 운전자의 눈동자가 향하는 방향에 근거하여, 상기 차량에 구비된 윈도우들 중 어느 하나를 결정할 수 있다. 여기서 상기 윈도우들은, 운전석 사이드 윈도우(210), 운전석 옆 좌석인 조수석 사이드 윈도우(220), 그리고 썬루프 윈도우(200)가 될 수 있다. 또한 상기 윈도우에는 운전석 뒷좌석의 사이드 윈도우 및 조수석 뒷좌석의 사이드 윈도우를 더 포함할 수도 있다. 물론 이는 4개의 좌석을 가진 차량의 경우를 예로 든 것이며, 본 발명이 이에 한정되는 것이 아님은 물론이다.
즉, 예를 들어 본 발명의 차량 제어 장치(100)가 구비된 차량이, 4개의 좌석이 아니라 6명이상이 탑승할 수 있는 밴(Ban) 등의 중형 차량 또는 대형 차량인 경우에도 본 발명이 적용될 수도 있음은 물론이다. 이러한 경우 운전자는 자신이 응시할 수 있는 윈도우의 경우에는 시선으로, 응시가 불가능한 위치의 윈도우의 경우에는, 운전자의 고개 방향 또는 음성을 통해 오픈 또는 클로즈될 윈도우를 선택할 수도 있음은 물론이다.
한편 상기 S304 단계에서, 제어부(110)는 운전자의 시선 방향에 대응되는 윈도우를 정확하게 결정할 수 없을 수도 있음은 물론이다. 예를 들어 운전자가, 운전석 뒷좌석의 사이드 윈도우 또는 조수석 뒷좌석의 사이드 윈도우를 응시하는 경우, 제어부(110)는 상기 운전자의 시선이 향하는 방향이 운전석 사이드 윈도우인지, 또는 운전석 뒷좌석 사이드 윈도우인지 여부를 구분하지 못할 수 있다. 이와 마찬가지로, 제어부(110)는 상기 운전자의 시선이 조수석 사이드 윈도우를 향하고 있는지, 또는 조수석 뒷좌석 사이드 윈도우를 향하고 있는지를 구분하지 못할 수 있다.
이러한 경우 제어부(110)는 다양한 방법을 통해 운전자로부터 어느 하나의 윈도우를 선택받을 수 있다. 예를 들어 제어부(110)는 운전자의 얼굴이 향하는 방향을 더 고려하여 어느 하나의 윈도우를 결정할 수도 있다. 예를 들어 운전자가 운전석 뒷좌석 사이드 윈도우를 응시하는 경우, 비록 운전자의 눈동자가 향하는 방향은 유사하다고 할지라도, 운전자가 운전석 사이드 윈도우를 응시하는 경우보다 운전자의 왼편 뒤쪽 방향을 바라보아야 하므로 운전자의 얼굴 방향이 왼쪽으로 보다 회전된 상태일 수 있기 때문이다.
또는 제어부(110)는 운전자의 시선 방향에 대응되는 윈도우를 정확하게 결정할 수 없는 경우, 현재 운전자의 시선 방향에 대응되는 윈도우를 다른 윈도우들과 구분되게 표시할 수도 있음은 물론이다. 예를 들어 제어부(110)는 윈도우들 주변에 각각 형성된 LED(Light Emitted Display)를 통해 출력되는 광신호를 이용하여 이를 표시할 수 있다.
상술한 예와 같이 제어부(110)가 운전자의 시선이 향하는 방향이 운전석 사이드 윈도우인지, 또는 운전석 뒷좌석 사이드 윈도우인지 여부의 구분이 어려운 경우, 제어부(110)는 운전석 사이드 윈도우(210)와 운전석 뒷좌석 사이드 윈도우에 각각 대응되게 형성된 LED가 발광되도록 함으로써, 운전자에게 현재 운전자의 시선 방향에 대응되는 윈도우들을 표시할 수 있다. 그리고 운전자의 선택에 근거하여 어느 하나의 윈도우가 제어, 즉 오픈 또는 클로즈 되도록 할 수 있다. 여기서 운전자의 선택은 기 설정된 키 또는 음성 등, 다양한 것이 될 수 있음은 물론이다. 이처럼 운전자의 시선 방향에 대응되는 윈도우들을, 그렇지 않은 윈도우들과 구분되게 표시하고, 사용자의 선택에 따라 어느 하나를 선택받는 동작 과정을 하기 도 4를 참조하여 보다 자세하게 살펴보기로 한다.
한편 S304 단계에서 운전자의 시선 방향에 대응되는 윈도우가 결정되면, 제어부(110)는 현재 결정된 윈도우를 운전자의 요청에 따라 오픈 또는 클로즈되도록 제어한다(S306). 여기서 상기 운전자의 요청은, 상기 S302 단계에서 감지된 입력에 근거한 것일 수 있다. 즉, 상기 S302 단계에서 사용자가 특정 윈도우가 위치한 방향을 일정 시간 이상동안 응시하는 경우, 제어부(110)는 이에 근거하여 상기 특정 윈도우를 오픈 또는 클로즈할 수 있다. 이러한 경우, 상기 윈도우를 오픈할지 클로즈할 지는 운전자에 미리 결정된 것일 수 있다. 또는 제어부(110)는 상기 S302 단계에서 입력된 음성 명령, 즉 '열어(open)' 또는 '닫아(close)'에 근거하여 상기 특정 윈도우가 오픈 또는 클로즈되도록 상기 구동부(120)를 제어할 수 있다. 또는 제어부(110)는 상기 S302 단계에서 입력된 키에 근거하여 상기 특정 윈도우가 오픈 또는 클로즈되도록 상기 구동부(120)를 제어할 수도 있다.
한편 도 3의 설명에서는, 상기 S302 단계에서 먼저 사용자의 요청이 있는 경우, 사용자의 시선 방향에 대응되는 윈도우가 개폐되는 예를 도시하였으나, 이는 본 발명의 실시 예일 뿐, 본 발명이 이에 한정되는 것은 아니다. 즉, 상기 도 3에서 보인 과정과는 다르게, 상기 S300 단계에서 제어부(110)는 운전자의 시선 및 운전자의 시선이 향하는 방향을 먼저 감지할 수 있다. 이러한 경우, 상기 S302 단계와 같이 사용자의 요청이 없는 경우에도 운전자의 시선 방향에 대응되는 윈도우가 결정될 수 있다. 그리고 이러한 상태에서 상기 S302 단계와 같은 사용자의 요청이 있는 경우, 제어부(110)는 상기 운전자의 시선 방향에 대응되는 윈도우가 오픈 또는 클로즈 되도록 구동부(120)를 제어할 수도 있음은 물론이다.
한편, 도 4는 본 발명과 관련된 차량 제어 장치에서, 운전자의 시선 방향에 대응되는 윈도우를 결정하는 동작 과정을 도시한 것이다.
도 4를 참조하여 살펴보면, 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는 상기 S302 단계에서 운전자로부터 윈도우를 오픈 또는 클로즈하기 위한 기 설정된 입력이 있는 것으로 판단되는 경우, 운전자의 시선 방향에 대응되는 윈도우가 2개 이상인지 여부를 판단할 수 있다(S400). 여기서 제어부(110)는 운전자의 시선 방향에 근거하여 대응되는 윈도우가 2개 이상인지 여부를 판단할 수 있으며, 판단 결과, 시선 방향에 대응되는 윈도우가 2개 이상인 경우, 운전자의 얼굴이 향하는 방향을 더 고려할 수도 있다. 그리고 상기 운전자의 시선 방향 및 상기 운전자의 얼굴이 향하는 방향을 모두 고려한 경우에도 상기 운전자의 시선 방향에 대응되는 윈도우가 명확하지 않을 경우 상기 운전자의 시선 방향에 대응되는 윈도우가 2개 이상이라고 판단할 수 있다.
또한 제어부(110)는, 운전자의 정면 방향을 기준으로 상기 운전자의 시선이 향하는 방향의 각도에 근거하여 상기 운전자의 시선 방향에 대응되는 윈도우를 식별할 수 있다. 예를 들어 제어부(110)는 운전자의 시선 방향이, 정면으로부터 왼쪽으로 30도에서 45도 사이인 경우 상기 운전자의 시선 방향에 대응되는 윈도우가 운전석 사이드 윈도우로 판단할 수 있으며, 운전자의 시선이 향하는 방향이 정면으로부터 왼쪽으로 50도 이상인 경우 운전자의 시선 방향에 대응되는 윈도우가 운전석 뒷좌석의 사이드 윈도우라고 판단할 수 있다. 이러한 경우 만약 운전자의 시선이 향하는 방향이, 정면을 기준으로 왼쪽으로 45도에서 50도 사이, 또는 일정 시간 동안 운전자의 시선이 향하는 방향이 정면을 기준으로 왼쪽으로 40도에서 60도 사이에서 변경되는 경우, 상기 운전자의 시선 방향에 대응되는 윈도우가 2개(운전석 사이드 윈도우 및 운전석 뒷좌석의 사이드 윈도우)라고 판단할 수도 있다.
그리고 상기 S400 단계의 판단 결과, 운전자의 시선 방향에 대응되는 윈도우가 2개 이상인 경우라면, 제어부(110)는 상기 운전자의 시선 방향에 대응되는 윈도우들을, 다른 윈도우들과 구분되게 표시할 수 있다(S402). 예를 들어 상기 S402 단계는, 상기 운전자의 시선 방향에 대응되는 윈도우들 주변에 형성된 LED들을 발광시키는 단계가 될 수 있다. 또는 상기 윈도우가, 화상 정보의 출력이 가능한 경우라면, 즉, 디스플레이부(151)가 상기 차량의 윈드 쉴드 글래스(Wind Shield Glass : 230)의 전체 또는 일부 또는 상기 운전석 옆면의 윈도우나 보조석 옆면의 윈도우 또는 차량 뒷좌석의 윈도우 등에 구현된 경우라면, 제어부(110)는 상기 S402 단계에서 상기 운전자의 시선 방향에 대응되는 윈도우들에 기 설정된 화상 정보를 표시할 수도 있다.
한편 이러한 경우 제어부(110)는, 운전자에게 이를 알리기 위한 가이드(guide) 메시지를 차량의 윈드 쉴드 글래스(230)나 디스플레이부(151)가 형성된 특정 윈도우 또는 화상 정보 출력 기기를 통해 화상 정보의 형태로 출력하거나, 또는 음향 정보의 형태로 출력할 수 있다. 상기 가이드 메시지에는, 현재 운전자의 시선 방향에 대응되는 윈도우가 2개 이상이며, 운전자에게 상기 윈도우들 중에 어느 하나를 선택하기 위한 추가적인 입력을 요청하는 내용이 포함될 수 있다. 뿐만 아니라, 현재 운전자의 시선 방향에 대응되는 윈도우에 대한 정보가 상기 가이드 메시지에 포함될 수도 있음은 물론이다.
이러한 경우 운전자는 상기 윈도우들에 주변에서 발광되는 LED들 또는 상기 윈도우들에서 표시되는 화상 정보들 또는 상기 가이드 메시지를 통해 현재 자신의 시선 방향에 대응되는 윈도우가 2개 이상임을 인지할 수 있다. 그리고 상기 가이드 메시지에서 요청되는 방식 또는 기 설정된 방식으로 어느 하나의 윈도우를 선택하기 입력을 인가할 수 있다. 여기서 상기 운전자의 입력은, 운전자의 음성 명령 또는 기 설정된 키 또는 기 설정된 제스처일 수 있다. 예를 들어 운전자는 자신이 제어하고자 하는 윈도우를 향해 고개를 더 회전시키는 등의 제스처를 취할 수 있으며, 또는 특정 윈도우를 선택하기 위한 음성 신호를 입력할 수도 있다. 또는 운전자는 복수의 방향 중 어느 하나의 방향을 입력할 수 있도록 형성된 특정 키를 통해, 자신이 제어하고자 하는 윈도우가 위치한 방향을 입력하여 특정 윈도우가 선택되도록 할 수도 있다.
제어부(110)는 이처럼 특정 윈도우를 선택하기 위한 운전자의 입력이 있는지 여부를 판단할 수 있다(S404). 상기 S404 단계에서 제어부(110)는 특정 윈도우를 선택하기 위한 운전자의 입력이, 기 설정된 시간 이내에 감지되었는지 여부를 판단할 수 있다. 그리고 만약, 기 설정된 시간 이내에 상기 특정 윈도우를 선택하기 위한 운전자의 입력이 없는 경우라면, 다시 S402 단계로 진행하여, 다른 형태로 상기 운전자의 시선에 대응되는 적어도 두 개의 윈도우를 구분되게 표시할 수 있으며, 또는 상기 가이드 메시지를 재출력할 수도 있다.
여기서 제어부(110)는, 상기 S404 단계에서 특정 윈도우를 선택하기 위한 운전자의 입력이 있는 경우에도, 그 입력에 따른 윈도우가 명확하게 식별되지 않는 경우, 여전히 어느 하나의 윈도우를 선택하기 위한 운전자의 입력이 없는 것으로 판단할 수 있다. 즉, 제어부(110)는 상기 S404 단계에서, 운전자의 입력에 대응되는 특정 윈도우가 식별 가능한 경우에 한하여, 상기 어느 하나의 윈도우를 선택하기 위한 운전자의 입력이 있는 것으로 판단할 수도 있다.
한편 상기 S404 단계에서 상기 특정 윈도우를 선택하기 위한 운전자의 입력이 감지된 경우라면, 제어부(110)는 상기 운전자의 입력에 따른 어느 하나의 윈도우를 선택할 수 있다(S406). 이러한 경우 제어부(110)는 상기 도 3의 S306 단계로 진행하여 현재 선택된 윈도우가 운전자의 요청에 따라 오픈되거나 클로즈 되도록 구동부(120)를 제어할 수 있다.
한편, 상술한 설명에 따르면, 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는, 윈도우의 개폐(開閉) 뿐만 아니라, 상기 차량 내부에 구비된 다양한 기능들이 상기 사용자의 시선 및/또는 음성에 의해 제어되도록 할 수 있음을 언급한 바 있다.
도 5는 이러한 경우에 본 발명과 관련된 차량 제어 장치(100)에서, 운전자의 시선 방향에 대응되는 윈도우에, 운전자의 요청에 따른 정보가 표시되는 동작 과정을 도시한 것이다.
도 5를 참조하여 살펴보면, 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는, 차량이 구동되는 경우, 상기 S300 단계에서 운전자의 시선 방향을 모니터링(monitoring)한다(S300). 그리고 운전자의 시선이 향하는 방향을 감지할 수 있다. 그리고 제어부(110)는 상기 운전자의 시선이 향하는 방향에 대응되는 윈도우에, 기 설정된 정보를 표시하기 위한 운전자의 요청이 있는지 여부를 판단할 수 있다(S500). 여기서 상기 기 설정된 정보를 표시하는 윈도우는, 운전석 사이드 윈도우(210), 조수석 사이드 윈도우(220) 및 운전석 뒷좌석의 사이드 윈도우와 조수석 뒷좌석의 사이드 윈도우, 그리고 썬루프 윈도우(200) 뿐만 아니라 윈드 쉴드 글래스(230)를 포함할 수 있다.
여기서 상기 기 설정된 정보는 다양한 것이 될 수 있다. 예를 들어 상기 기 설정된 정보는, 현재 차량의 상태에 대한 정보가 될 수 있으며, 또는 현재 설정된 목적지나 출발지, 또는 경로 등 내비게이션 정보가 될 수도 있다. 또는 현재 차량에서 실행 가능한 다양한 기능들, 예를 들어 기 저장 또는 수신된 멀티미디어 컨텐츠의 재생 또는 특정 라디오 채널의 선택이나 지상파 또는 위성 DMB(Digital Multimedia Broadcasting) 시청에 관련된 기능(예를 들어 채널의 선택 또는 음량 조절 등)에 관련된 정보일 수 있다. 또는 운전석 또는 조수석등의 위치 변경이나 높이 조절에 관련된 정보 등이 될 수도 있다.
한편 상기 운전자의 요청은 다양한 방법으로 이루어질 수 있다. 예를 들어 상기 운전자의 요청은, 운전자로부터 입력되는 음성 명령 또는 상기 차량에 관련된 기 설정된 정보들 중 적어도 하나를 선택하기 위한 운전자의 키 입력일 수 있다. 또는 운전자의 손짓과 같은 특정 제스처로 이루어질 수도 있다.
또는 상기 사용자가 특정 윈도우를 일정 시간 이상동안 응시하는 경우에도 제어부(110)는 이를 특정 정보를 요청하기 위한 운전자의 요청으로 인식할 수도 있다. 이러한 경우, 차량 내부에 구비된 각 윈도우에는 서로 다른 정보들이 미리 지정되어 있을 수 있으며, 운전자가 특정 윈도우를 기 설정된 시간 이상 응시하는 경우, 그 윈도우에 미리 지정된 정보가 해당 윈도우 상에 형성된 디스플레이부(151) 영역에 표시될 수도 있다.
그리고 이처럼 운전자의 시선에 따라 기 설정된 정보가 표시되도록 하는 경우, 제어부(110)는 이러한 사용자의 시선을, 상기 운전자의 시선 방향에 대응되는 윈도우의 개폐를 위한 운전자의 요청과는 구분하여 인식할 수도 있다. 즉, 제어부(110)는 운전자의 시선에 따라 기 설정된 정보가 표시되도록 하는 경우, 운전자의 음성 명령 또는 특정 키 입력이나 제스처에 의하여만 운전자의 시선 방향에 대응되는 윈도우가 개폐되도록 하거나, 기 설정된 키, 예를 들어 윈도우의 개폐를 위해 미리 설정된 키가 입력된 상태인지 여부에 따라 상기 운전자의 시선이 특정 윈도우를 개폐하기 위한 것인지 또는 기 설정된 정보를 특정 윈도우에 표시하기 위한 것인지 여부를 판단할 수도 있다.
한편 상기 S500 단계에서, 차량에 관련된 기 설정된 정보를 표시하기 위한 운전자의 요청이 있는 것으로 판단되는 경우에는, 제어부(110)는 운전자의 시선 방향에 대응되는 윈도우의 현재 개폐 상태에 따른 디스플레이 영역을 확인할 수 있다(S502). 예를 들어, 제어부(110)는 상기 운전자의 시선 방향에 대응되는 윈도우가 완전히 클로즈된 상태인 경우, 상기 윈도우에 기 설정된 정보를 표시할 수 있는 디스플레이 영역이 최대라고 판단할 수 있으며, 상기 윈도우가 20% 정도 오픈된 상태인 경우 기 설정된 정보를 표시할 수 있는 디스플레이 영역이 최대 영역의 80%라고 판단할 수도 있다. 또는 제어부(110)는 상기 윈도우가 오픈되어 상기 윈도우의 적어도 일부가 운전석 도어(door)의 내부로 삽입되는 경우, 상기 삽입된 윈도우 영역에 따라 기 설정된 정보를 표시할 수 있는 디스플레이 영역의 크기를 판단할 수도 있다.
한편 상기 S502 단계에서 상기 윈도우의 개폐 상태에 근거하여, 기 설정된 정보를 표시할 수 있는 디스플레이 영역의 크기가 확인되면, 제어부(110)는 현재 확인된 디스플레이 영역에 상기 운전자로부터 요청된 정보를 표시할 수 있는지 여부를 확인할 수 있다(S504). 예를 들어 제어부(110)는, 상기 S502 단계에서 확인된 디스플레이 영역의 크기가 상기 운전자로부터 요청된정보를 표시할 수 있는 크기라고 판단되는 경우, 상기 운전자로부터 요청된 정보를 상기 윈도우에 표시한다(S506). 이러한 경우, 제어부(110)는 상기 S502 단계에서 확인된 디스플레이 영역의 크기에 따라 상기 요청된 정보의 크기를 확대하거나 축소할 수도 있음은 물론이다. 이에 따라 만약 상기 운전자의 시선 방향에 대응되는 윈도우가 완전히 클로즈된 상태인 경우, 상기 운전자로부터 요청된 정보는 가장 큰 사이즈로 표시될 수 있으며, 상기 윈도우가 열린 상태일수록, 상기 운전자로부터 요청된 정보는 작은 사이즈로 표시될 수 있다.
한편, 제어부(110)는 상기 S504 단계에서 현재 운전자의 시선 방향에 대응되는 윈도우의 개폐 상태에 따른 디스플레이 영역을 확인한 결과, 상기 디스플레이 영역이 기 설정된 수준 미만일 경우, 상기 요청된 정보를 상기 윈도우에 표시하는 것이 불가능하다고 판단할 수 있다. 이는 상기 요청된 정보를 축소해서 표시할 수 있다고 하여도, 일정 수준 이상 축소하여 표시하는 경우 운전자가 이를 식별하기 어려울 수 있기 때문이다.
이에 따라 상기 S504 단계에서, 운전자의 시선 방향에 대응되는 윈도우의 개폐 상태에 따른 디스플레이 영역이 기 설정된 수준 미만이라고 판단되는 경우, 제어부(110)는 상기 요청된 정보를 출력할 수 없다는 오류 메시지를 출력할 수 있다(S508). 여기서 상기 오류 메시지는 음향 정보 또는 화상 정보의 형태로 출력될 수 있으며, 상기 요청된 정보를 표시할 다른 윈도우를 운전자가 선택하도록 하거나 또는 현재 선택된 윈도우, 즉 운전자의 시선 방향에 대응되는 윈도우를 클로즈할 것을 요청하는 내용을 포함할 수도 있다.
한편 이상의 본 발명의 설명에서는, 본 발명의 실시 예에 따른 차량 제어 장치(100)가 구비된 차량의 운전자에 의해, 특정 윈도우가 개폐되거나 또는 상기 차량에 관련된 기 설정된 정보가 특정 윈도우에 표시되도록 하는 것을 설명하였으나, 본 발명이 이에 한정되는 것은 아니다. 즉, 본 발명은 운전자 뿐만 아니라 차량에 복수의 탑승자가 있는 경우에도 얼마든지 적용될 수 있다.
도 6은 이처럼 본 발명과 관련된 차량 제어 장치에서, 운전자 외에 탑승자가 있는 경우, 탑승자의 좌석 위치에 따라 특정 윈도우의 개폐가 제어되는 동작 과정을 도시한 것이다.
도 6을 참조하여 살펴보면, 본 발명의 실시 예에 따른 차량 제어 장치(100)는 차량이 구동, 즉 차량에 시동이 걸리거나 또는 상기 차량의 잠금이 해제되는 경우, 차량의 탑승자 수를 감지할 수 있다(S600). 예를 들어 제어부(110)는 차량 내부에 감지된 센서들을 이용하여 차량에 탑승한 탑승자들의 수를 감지할 수 있다. 예를 들어 상기 시선 감지부(131) 및/또는 음성 감지부(132)는 상술한 바와 같이 상기 차량의 각 좌석에 대응되는 위치에 복수개 구비될 수 있으며, 제어부(110)는 상기 각 좌석별로 구비된 시선 감지부(131) 및/또는 음성 감지부(132)를 통해 현재 차량의 각 좌석에 착석한 탑승자들의 수를 감지할 수 있다. 또는 각 좌석별로 사람의 몸무게를 인식할 수 있는 센서들 또는 차량 내부에 구비된 카메라를 통해 촬영되는 이미지를 통해 상기 차량에 탑승한 탑승자들의 수를 감지할 수도 있다.
상기 S600 단계에서, 차량에 탑승한 탑승자들의 수가 감지되면, 제어부(110)는 현재 차량에 운전자 외에 적어도 한 명의 탑승자가 있는지 여부를 판단할 수 있다(S602). 그리고 상기 S602 단계의 판단 결과, 운전자 외에 탑승자가 없는 경우라면, 상기 도 3 내지 도 5에서 보인 바와 같이 운전자의 시선 방향에 대응되는 윈도우를 개폐하거나, 또는 운전자의 시선 방향에 대응되는 윈도우에 기 설정된 정보가 표시되도록 할 수 있다.
그러나 상기 S602 단계의 판단 결과, 운전자 외에 적어도 한 명의 탑승자가 있는 경우, 제어부(110)는 상기 운전자를 포함하여 상기 차량에 탑승한 탑승자들이 착석한 좌석 위치에 근거하여 특정 윈도우를 제어할 수 있는 권한을 결정할 수 있다(S606). 예를 들어 운전자는 차량 내부에 위치한 모든 윈도우, 즉 운전석 사이드 윈도우(210), 조수석 사이드 윈도우(220) 및 운전석 뒷좌석의 사이드 윈도우와 조수석 뒷좌석의 사이드 윈도우, 그리고 썬루프 윈도우(200)를 모두 제어할 수 있는 권한을 가질 수 있다. 뿐만 아니라 운전자는 기 설정된 정보가 특정 윈도우에 표시되도록 함에 있어서는, 상기 윈도우들 뿐만 아니라, 윈드 쉴드 글래스(230)를 제어할 수 있는 권한을 가질 수도 있다.
그러나 운전자 외의 탑승자의 경우, 윈도우를 제어할 수 있는 권한이 제한될 수 있다. 예를 들어 운전자 외의 탑승자의 경우, 그 탑승자는 자신이 착석한 좌석에 대응되는 특정 윈도우를 제어할 수 있는 권한만을 가질 수도 있다. 즉, 예를 들어 조수석에 착석한 탑승자의 경우, 조수석 사이드 윈도우(220) 만을 제어할 수 있는 권한을 가질 수 있으며, 운전석 뒷좌석에 탑승한 탑승자는 운전석 뒷좌석의 사이드 윈도우 만을, 조수석 뒷좌석에 착석한 탑승자는 조수석 뒷좌석의 사이드 윈도우 만을 제어할 수 있는 권한을 가질 수 있다.
이러한 상태에서, 제어부(110)는 각 탑승자들의 시선 방향에 대응되는 윈도우의 제어 요청이 있는지 여부를 감지할 수 있다(S612). 상기 S612 단계에서 제어부(110)는 각 좌석에 착석한 탑승자들 각각으로부터 윈도우의 제어 요청이 있는지 여부를 감지할 수 있다. 예를 들어 제어부(110)는 각 좌석에 대응되게 형성된 각 시선 감지부(131)들의 감지 결과 또는 각 음성 감지부(132)의 감지 결과를 이용할 수도 있다. 이러한 경우 제어부(110)는 각 시선 감지부(131)들의 감지 결과에 근거하여 상기 탑승자들의 시선을 감지할 수 있으며, 이에 따라 상기 탑승자들 각각의 시선 방향에 대응되는 윈도우를 결정할 수 있다.
그리고 탑승자들 중, 기 설정된 시간 이상 동안 특정 방향에 위치한 윈도우를 응시하거나, 음성으로 상기 시선 방향에 대응되는 윈도우의 제어를 명령한 탑승자가 있는 경우(예를 들어 '열어(open)', '닫어(close)' ), 이를 해당 탑승자의 시선 방향에 대응되는 윈도우의 제어 요청이 있는 것으로 판단할 수 있다. 이 뿐만 아니라 해당 탑승자로부터 특정 키가 입력되는 경우, 이를 해당 탑승자의 시선 방향에 대응되는 윈도우의 제어 요청이 있는 것으로 판단할 수도 있음은 물론이다.
이처럼 탑승자 들 중 적어도 한 명으로부터, 시선 방향에 대응되는 윈도우에 대한 제어 요청이 감지된 경우, 제어부(110)는 윈도우의 제어를 요청한 탑승자가 상기 윈도우의 제어 권한이 있는지 여부를 판단할 수 있다(S610). 그리고 제어부(110)는 상기 S610 단계의 판단 결과, 상기 윈도우의 제어를 요청한 것으로 감지된 탑승자가, 상기 윈도우, 즉 그 탑승자의 시선 방향에 대응되는 윈도우에 대한 제어 권한을 가지고 있는 경우에, 그 탑승자의 시선 방향에 대응되는 윈도우가 제어될 수 있도록 한다.
따라서 상술한 바와 같이, 착석한 좌석에 대응되는 특정 윈도우를 제어할 수 있는 권한만을 각 좌석에 착석한 탑승자 만 가질 수 있도록 하는 경우, 제어부(110)는 해당 탑승자가, 자신이 착석한 좌석에 대응되는 윈도우를 일정 시간 이상 응시하는 경우에 한하여, 자신의 시선 방향에 대응되는 윈도우가 제어될 수 있도록 할 수 있다. 그리고 여기서 상기 착석한 좌석에 대응되는 윈도우는, 그 좌석의 사이드 윈도우, 즉 조수석의 경우 조수석 사이드 윈도우, 운전석 뒷좌석의 경우 운전석 뒷좌석의 사이드 윈도우, 조수석 뒷좌석의 경우 조수석 뒷좌석의 사이드 윈도우가 각각 대응될 수 있다.
이에 따라 조수석 또는 운전석 뒷좌석이나 조수석 뒷좌석에 착석한 탑승자가, 운전석 사이드 윈도우(210)를 바라보고 음성 명령을 입력한다고 하여도, 상기 운전석 사이드 윈도우(210)는 개폐되거나 특정 정보가 표시되지 않을 수 있다.
한편 이처럼 각 좌석에 대응되는 윈도우 만이, 각 좌석에 착석한 탑승자에 의해 제어될 수 있도록 하는 것과는 별개로, 운전자는 모든 윈도우에 대한 제어 권한을 가질 수 있다. 이러한 경우 제어부(110)는 각 좌석에 착석한 탑승자들과의 제어와는 별개로, 상기 운전자의 시선 방향 및 운전자의 요청에 따라 각 좌석에 대응되는 윈도우들이 제어되도록 할 수 있다. 한편, 운전자의 제어 요청과, 해당 좌석에 착석한 탑승자의 제어 요청이 서로 상충되는 경우, 제어부(110)는 기 설정된 우선 순위에 따라 해당 좌석에 착석한 탑승자 또는 운전자 중 어느 한 쪽의 제어 요청에 따라 해당 윈도우가 제어되도록 할 수 있다.
한편, 이처럼 차량에 탑승한 탑승자의 수가 복수인 경우인 경우에도, 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는, 상기 탑승자들 각각이 요구하는 정보가 특정 윈도우에 표시되도록 할 수도 있다. 여기서 상기 특정 윈도우는, 상기 탑승자들의 시선에 대응되는 윈도우가 될 수 있다.
이를 위해 제어부(110)는 상기 S610 단계의 판단 결과, 시선 방향에 대응되는 윈도우의 제어를 요청한 적어도 한 명의 탑승자가 각각 대응되는 윈도우에 대한 제어 권한이 있다고 판단되는 경우, 상기 정보의 표시를 요청한 탑승자가 2명 이상인지 여부를 판단할 수 있다(S700). 그리고 상기 S700 단계의 판단 결과, 정보의 표시를 요청한 탑승자가 적어도 2명 이상인 경우라면, 제어부(110)는 상기 정보의 표시를 요청한 탑승자들 각각의 시선 방향에 대응되는 적어도 두 개의 윈도우를 선택할 수 있다(S702). 이러한 경우 상기 선택되는 윈도우들은 상기 정보의 표시를 요청한 탑승자들이 제어 권한을 가지고 있는 윈도우들 일 수 있다. 즉, 상기 선택되는 윈도우들은, 상기 정보의 표시를 요청한 탑승자가 착석한 좌석에 대응되는 윈도우들일 수 있으며, 만약 상기 정보의 표시를 요청한 탑승자들이, 운전자를 포함하는 경우라면, 상기 운전자의 시선 방향에 대응되는 윈도우가 포함될 수 있다.
그리고 제어부(110)는 상기 S702 단계에서 선택된 윈도우들에 형성된 디스플레이 영역들에, 각각 기 설정된 정보를 표시할 수 있다(S704). 여기서 상기 윈도우들에 표시되는 정보들은 각각 다를 수 있다. 즉, 탑승자들은 각각 서로 다른 정보를 자신이 제어 권한을 가지는 윈도우에 표시되도록 요청(예를 들어 일정 시간 이상 응시 또는 음성 명령이나 키 입력)할 수 있으며, 이에 따라 제어부(110)는 상기 요청에 따른 응답으로, 상기 요청에 대응되는 서로 다른 정보를 각각 서로 다른 윈도우에 표시할 수 있다.
한편 상기 S700 단계에서, 정보의 표시를 요청한 탑승자가 한 명 뿐인 경우라면, 제어부(110)는 정보를 요청한 탑승자의 시선 방향에 대응되는 윈도우를 선택할 수 있다(S706). 그리고 선택된 윈도우에 상기 탑승자가 요청한 기 설정된 정보를 표시할 수 있다(S708). 여기서 만약 상기 탑승자가 운전자인 경우라면, 상기 S706 단계에서 선택 및 운전자가 요청한 정보가 표시되는 윈도우는, 차량의 윈도우들, 즉 운전석 및 조수석, 그리고 각 뒷좌석의 사이드 윈도우들 및 썬루프 윈도우가 될 수 있으며, 윈드 쉴드 글래스(230)가 될 수도 있음은 물론이다.
한편 상기 S704 단계 또는 S708 단계에서, 선택된 적어도 하나의 윈도우에 각각 요청된 정보를 표시하는 경우, 제어부(110)는 상기 도 5에서 보인 바와 같이, 상기 선택된 적어도 하나의 윈도우 각각의 개폐 상태에 따라 디스플레이 영역의 크기를 확인할 수도 있음은 물론이다. 이러한 경우 제어부(110)는 상기 선택된 윈도우의 개폐 상태에 따른 디스플레이 영역의 크기에 따라 상기 요청된 정보가 표시될 사이즈를 결정할 수 있다. 한편, 상기 선택된 윈도우의 개폐 상태에 따른 디스플레이 영역의 크기가 기 설정된 크기 미만인 경우, 제어부(110)는 이를 알리기 위한 오류 메시지를 출력할 수도 있음은 물론이다.
한편 상술한 설명에 따르면, 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는 탑승자의 시선 방향에 근거하여, 적어도 하나의 차량 내부 기기를 구동시킬 수도 있음을 언급한 바 있다.
도 8은 이러한 경우에, 본 발명의 실시 예에 따른 차량 제어 장치가, 차량에 탑승한 탑승자의 시선 방향에 따라 차량 내부의 기기들을 적어도 하나 구동하는 동작 과정을 도시한 것이다.
도 8을 참조하여 살펴보면, 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는, 차량이 구동되는 경우, 차량에 탑승한 적어도 한 명의 탑승자의 시선 방향을 감지할 수 있다(S800). 그리고 상기 탑승자의 요청이 있는 경우 상기 탑승자의 시선 방향에 대응되는 차량 내부 기기를 선택할 수 있다(S802).
여기서 상기 탑승자의 요청은 다양한 방법으로 이루어질 수 있다. 예를 들어 제어부(110)는 상기 차량에 탑승한 탑승자의 음성 명령 또는 기 설정된 키의 입력이 있는 경우, 상기 요청이 있는 것으로 판단할 수 있다. 또는 제어부(110)는 상기 탑승자가, 차량 내부의 기기 중 어느 하나를 기 설정된 시간 이상 응시하는 경우, 상기 탑승자의 시선 방향에 대응되는 어느 하나의 기기에 대한 탑승자의 요청이 있는 것으로 판단할 수도 있다.
한편, 상기 차량의 내부 기기 중 어느 하나의 구동을 요청은 기 설정된 권한을 가지는 탑승자에 한하여 이루어질 수도 있음은 물론이다. 예를 들어 제어부(110)는, 미리 인증된 사람에 한하여 상기 차량의 내부 기기 중 어느 하나의 구동이 요청될 수 있도록 제한할 수도 있다. 이러한 경우 상기 미리 인증된 사람은 상기 차량의 소유자 또는 상기 차량의 운전자로 미리 지정된 사람일 수 있다.
또는 제어부(110)는 상기 차량의 내부 기기 중 어느 하나의 구동을 요청할 수 있는 권한을, 상기 탑승자가 착석한 좌석에 근거하여 부여할 수도 있음은 물론이다. 예를 들어 제어부(110)는 상기 차량의 내부 기기 중 어느 하나의 구동을 요청할 수 있는 권한을 운전석에 착석한 사람에게만 부여할 수 있으며, 이러한 경우 운전자의 시선 방향이 특정 차량의 내부 기기에 일정 시간 이상동안 응시되는 경우에 한하여, 상기 운전자의 시선 방향에 대응되는 기기의 구동이 요청된 것으로 판단할 수도 있다.
한편 이러한 구동 요청 권한은, 차량의 내부 기기 별로 서로 다를 수도 있음은 물론이다. 예를 들어 내비게이션 기기의 경우, 상기 내비게이션 기기의 구동을 위한 권한은 운전자에게만 부여될 수 있다. 그러나 라디오 기기 나 DMB 방송 컨텐츠 출력 기기, 또는 뮤직 플레이어와 같은 멀티미디어 기기들은 운전석 및 조수석에 착석한 탑승자들 모두에게 부여될 수도 있다.
한편 상기 S802 단계에서, 구동을 요청할 수 있는 권한이 있는 탑승자로부터 특정 차량 내부 기기가 선택된 것으로 판단되는 경우, 제어부(110)는 상기 선택된 차량 내부 기기를 구동할 수 있다. 이러한 경우 제어부(110)는 상기 구동을 요청할 수 있는 권한이 있는 탑승자의 음성 또는 키 입력 등에 따라 상기 선택된 특정 차량 내부의 기기가 제어되도록 할 수도 있다. 이에 따라 본 발명의 실시 예에 따른 차량 제어 장치(100)는, 운전자가 일정 시간 이상 동안 내비게이션 기기를 응시하는 경우, 상기 내비게이션 기기가 구동되도록 할 수 있으며, 운전자의 음성 명령에 근거하여 특정 장소를 목적지 또는 출발지로 설정하거나, 상기 음성 명령에 따른 경로가 설정되도록 할 수 있다.
한편, 상기 S802 단계에서, 제어부(110)는 탑승자의 시선 방향에 대응되는 차량 내부 기기를 정확하게 특정하지 못할 수도 있다. 예를 들어 어느 한 명의 탑승자의 시선 방향에 대응되는 차량 내부 기기가 둘 이상인 경우, 또는 복수의 탑승자가 동일한 차량 내부 기기를 응시하는 경우, 제어부(110)는 특정 탑승자에 대응되는 시선 방향에 대응되는 차량 내부 기기를 정확하게 특정하지 못할 수도 있다.
이러한 경우, 만약 복수의 탑승자가 동일한 차량 내부 기기를 응시하는 경우라면, 제어부(110)는 상기 복수의 탑승자가 응시하는 차량 내부 기기를 구동시키고, 상기 복수의 탑승자들이 가지는 요청 권한의 우선 순위에 따라 어느 한 명의 탑승자로부터 입력된 요청(예를 들어 음성 입력)에 근거하여 상기 차량 내부 기기를 제어할 수 있다. 예를 들어 운전자 및, 조수석에 착석한 탑승자가 내비게이션 기기의 구동을 요청할 권한이 있는 경우, 상기 운전자 및 조수석에 탑승한 탑승자의 시선에 근거하여 내비게이션 기기를 구동시킬 수는 있으나, 상기 내비게이션 기기가 구동된 후의 제어는 운전자의 음성 명령에 의하여만 이루어지도록 할 수도 있다.
한편, 제어부(110)는 시선 방향에 대응되는 차량 내부 기기가 둘 이상인지 여부를 감지할 수 있다(S900). 그리고 상기 시선 방향에 대응되는 차량 내부 기가가 하나인 경우, 제어부(110)는 탑승자의 시선 방향에 대응되는 차량 내부 기기를 선택할 수 있다(S906). 이러한 경우 상기 S906 단계에서 선택된 차량 내부 기기는, 도 8의 S804 단계에서 구동될 수 있다.
한편 상기 S900 단계의 감지 결과, 상기 시선 방향에 대응되는 차량 내부 기기가 둘 이상인 경우라면, 제어부(110)는 상기 시선 방향에 대응되는 차량 내부 기기들을, 다른 기기들과 구분되게 표시할 수 있다(S902). 예를 들어 본 발명의 실시 예에 따른 차량의 내부 기기들은 각각 대응되는 LED를 구비할 수 있으며, 이러한 경우 제어부(110)는 상기 시선 방향에 대응되는 모든 차량 내부 기기들에 대응되는 LED들이 발광되도록 제어할 수 있다. 이러한 경우 탑승자는, 상기 LED에서 방출되는 광 신호에 근거하여 자신의 시선 방향에 대응되는 차량 내부 기기들을 인지할 수 있고, 그 기기들 중 어느 하나를 선택하기 위한 입력을 인가할 수 있다. 여기서 상기 어느 하나의 차량 내부 기기를 선택하기 위한 입력은, 해당 탑승자의 음성 명령이나 기 설정된 키의 입력, 또는 해당 탑승자의 손짓과 같은 기 설정된 제스처 등이 될 수 있다.
그리고 상기 S902 단계에서, 어느 하나의 기기를 선택하기 위한 입력이 인가되는 경우, 제어부(110)는 상기 구분되게 표시된 차량 내부 기기들 중, 인가된 입력에 대응되는 기기를 선택할 수 있다(S904). 이러한 경우 상기 S904 단계에서 선택된 차량 내부 기기는, 도 8의 S804 단계에서 구동될 수 있다.
이상의 설명에서는, 본 발명의 실시 예에 따른 차량 제어 장치가, 탑승자의 시선 방향에 근거하여, 특정 윈도우가 오픈 또는 클로즈되도록 하거나, 상기 특정 윈도우에 차량과 관련된 기 설정된 정보가 표시되도록 하는 동작 과정 및, 상기 차량 내부에 구비된 기기들이 상기 탑승자의 시선에 근거하여 구동되도록 하는 동작 과정을, 흐름도들을 참조하여 자세하게 살펴보았다.
이하에서는 상기 흐름도에서 보인 동작 과정들의 예들을 도시한 예시도들을 참조하여 보다 자세하게 본 발명의 실시 예에 따른 차량 제어 장치(100)의 동작을 살펴보기로 한다.
도 10a 내지 도 10b는 본 발명의 실시 예에 따른 차량 제어 장치가, 사용자의 시선 방향에 따라 어느 하나의 윈도우를 개폐하는 예를 도시한 예시도이다.
상술한 바에 의하면, 본 발명의 실시 예에 따른 차량 제어 장치(100)는 운전자의 요청에 근거하여, 운전자의 시선 방향에 대응되는 윈도우를 오픈 또는 클로즈 하거나, 차량에 관련된 기 설정된 정보가 표시되도록 할 수 있음을 밝힌 바 있다. 이에 따라 제어부(110)는 운전자가 운전석 사이드 윈도우(210)를 일정 시간 이상 응시하는 경우, 상기 운전석 사이드 윈도우(210)를 오픈 또는 클로즈 하거나, 윈드 쉴드 글래스(230)에 차량에 관련된 정보가 표시되도록 할 수 있다.
그러나 운전자의 시선 방향이 윈드 쉴드 글래스(230)를 향하고 있는지, 또는 운전석 사이드 윈도우(210)를 향하고 있는지 모호한 경우, 제어부(110)는 운전자에게 이러한 사실을 알릴 수 있다. 예를 들어 제어부(110)는 도 10a에서 보이고 있는 것과 같이, 윈드 쉴드 글래스(230)에 대응되게 형성된 제1 LED(1000) 및, 운전석 사이드 윈도우(210)에 대응되게 형성된 제2 LED(1002)를 모두 발광할 수 있다.
또는 제어부(110)는 상기 윈드 쉴드 글래스(230) 및 운전석 사이드 윈도우(210)에 화상 정보를 표시하는 것이 가능한 경우, 기 설정된 화상 정보를 상기 윈드 쉴드 글래스(230) 및 운전석 사이드 윈도우(210)에 표시함으로써 운전자에게 현재 운전자의 시선 방향에 대응되는 윈도우가 2개임을 알릴 수 있다. 뿐만 아니라 제어부(110)는 이처럼 운전자의 시선 방향에 대응되는 윈도우가 2개 이상인 경우, 어느 하나의 윈도우를 선택받기 위한 가이드 메시지가 출력되도록 할 수도 있다.
한편 도 10a 및 도 10b에서 보이고 있는 것처럼 운전자의 시선 방향에 대응되는 윈도우가 복수임을 사용자에게 표시한 경우, 및/또는 상기 가이드 메시지가 출력한 경우, 제어부(110)는 운전자로부터 어느 하나의 윈도우를 선택받을 수 있다. 예를 들어 제어부(110)는 도 10c에서 보이고 있는 것처럼, 운전자로부터 발성된 음성 명령에 근거하여 어느 하나의 윈도우를 선택할 수 있다. 따라서 도 10c에서 보이고 있는 것처럼, 운전자가 'Side of seat'와 같이 어느 하나의 윈도우를 선택하기 위한 음성 명령을 인가하는 경우, 제어부(110)는 이에 근거하여 상기 운전자의 시선 방향에 대응되는 윈도우로 운전석 사이드 윈도우(210)를 선택할 수 있다.
그리고 제어부(110)는 운전자의 요청에 근거하여 상기 선택된 윈도우(210)가 제어되도록 할 수 있다. 예를 들어, 운전자가 일정 시간 이상 동안 응시하는 경우, 윈도우가 오픈 되도록 기 설정된 경우라면, 현재 운전자의 시선 방향에 대응되는 것으로 선택된 윈도우(210)는, 도 10d에서 보이고 있는 것처럼 오픈될 수 있다.
한편 도 10c에서 보이고 있는 것과 달리, 만약 운전자가 음성으로 윈드 쉴드 글래스(230)를 선택하는 경우라면, 제어부(110)는 운전자의 요청, 즉 일정 시간 이상 동안 윈드 쉴드 글래스(230)의 특정 지점을 응시한 것에 대한 응답으로 차량에 관련된 특정 정보가 표시되도록 할 수도 있음은 물론이다. 여기서 표시되는 특정 정보는 내비게이션 정보 또는 현재 차량의 주행 속도나 주행 거리 등 차량에 관련된 다양한 정보가 될 수 있다.
한편 도 11a 내지 도 11b는 본 발명의 실시 예에 따른 차량 제어 장치가, 사용자의 시선 방향에 따른 윈도우에, 사용자의 요청에 따른 정보를 표시하는 예를 도시한 예시도이다.
예를 들어 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는 운전자의 요청에 근거하여, 운전자의 시선 방향에 대응되는 윈도우에 상기 차량과 관련된 다양한 정보들을 표시할 수 있다. 즉, 도 11a에서 보이고 있는 것과 같이, 운전자가 기 설정된 시간 이상 동안 운전석 사이드 윈도우(210)를 응시하는 경우, 제어부(110)는 운전자의 시선 방향에 대응되는 윈도우, 즉 운전석 사이드 윈도우(210)에 운전자의 요청에 따른 정보를 표시할 수 있다. 이러한 경우, 제어부(110)는 상기 운전자의 시선 방향에 의해 선택된 윈도우에 대응되는 LED(예를 들어 제2 LED(1002))의 광 신호 또는 상기 선택된 윈도우에 표시되는 화상 정보를 통해, 운전자에게 현재 선택된 윈도우를 표시할 수 있다.
한편, 운전자는 상기 LED 또는 윈도우에 표시되는 화상 정보를 통해, 현재 자신의 시선 방향에 대응되는 윈도우를 인지할 수 있다. 이러한 상태에서 운전자는 현재 선택된 윈도우에 표시될 정보를 요청할 수 있으며, 이러한 요청은 운전자의 음성 정보를 통해 입력될 수 있다. 도 11b는 이러한 예를 보이고 있는 것이다.
도 11b를 참조하여 살펴보면, 운전자가 음성으로 '내비게이션(Navigation)'정보를 요청하는 예를 보이고 있다. 이러한 경우 제어부(110)는 사용자가 요청한 정보, 즉 내비게이션 정보를, 사용자의 시선 방향에 의해 선택된 윈도우, 즉 운전석 사이드 윈도우(210)에 표시할 수 있다.
한편, 상기 운전석 사이드 윈도우(210)에 표시되는 정보는, 상기 운전석 사이드 윈도우(210)의 개폐 상태에 따라 그 사이즈가 다르게 표시될 수 있다. 예를 들어 도 11c에서 보이고 있는 것처럼, 완전히 닫힌 상태의 운전석 사이드 윈도우(210a)의 경우, 상기 운전석 사이드 윈도우(210a)에서 내비게이션 정보(1100a)가 표시될 디스플레이 영역은 최대일 수 있다. 이에 따라 도 11c에서 보이고 있는 것처럼, 내비게이션 정보(1100a)는 가장 큰 사이즈로 표시될 수 있다.
그러나 도 11d에서 보이고 있는 것처럼, 반쯤 열린 상태의 운전석 사이드 윈도우(210b)의 경우, 상기 운전석 사이드 윈도우(210b)가 차량의 도어 외부로 노출된 영역의 넓이에 따라 내비게이션 정보(1100b)가 표시될 디스플레이 영역이 결정될 수 있다. 이에 따라 도 11d에서 보이고 있는 것처럼, 반쯤 열린 상태에 있는 운전석 사이드 윈도우(210b)에서 표시되는 내비게이션 정보(1100b)는, 완전히 닫힌 상태의 운전석 사이드 윈도우(210a)에서 표시되는 내비게이션 정보(1100a)의 사이즈보다 작게 표시될 수 있다.
한편, 상기 운전석 사이드 윈도우(210)가 차량 도어 외부로 노출된 영역이 상기 도 11d에서 보이고 있는 상태보다 더 작아지는 경우(즉, 운전석 사이드 윈도우(210)가 더 열리는 경우), 제어부(110)는 상기 운전석 사이드 윈도우(210)가 현재 열린 상태에 따른 디스플레이 영역이 기 설정된 수준 미만이라고 판단할 수 있다. 그리고 제어부(110)는 다른 윈도우에 상기 정보가 표시되도록 하거나, 또는 상기 운전석 사이드 윈도우(210)가 노출되는 영역을 더 넓게(즉, 운전석 사이드 윈도우(210)가 더 닫히도록) 할 것을 운전자에게 요청하는 내용을 포함하는 오류 메시지를 출력할 수도 있다.
한편 도 12a 내지 도 12b는 본 발명의 실시 예에 따른 차량 제어 장치가, 조수석에 탑승한 탑승자의 제어에 따라 조수석의 윈도우가 개폐되는 예를 도시한 예시도이다.
우선 도 12a를 참조하여 살펴보면, 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는 도 12a에서 보이고 있는 것과 같이, 조수석에 탑승한 탑승자가 특정 윈도우를 응시하는 경우, 특정 윈도우에 대한 탑승자의 제어 요청이 있는 것으로 판단할 수 있다. 이러한 경우 제어부(110)는 상기 특정 윈도우에 대한 제어 권한이 상기 탑승자에게 있는지 여부를 판단할 수 있다. 그리고 상기 제어 권한은 상기 탑승자가 착석한 좌석의 위치에 근거하여 부여될 수 있다.
이에 따라 상기 도 12a에서 보이고 있는 것처럼, 조수석에 탑승한 탑승자(1200)가, 조수석 사이드 윈도우(220)를 기 설정된 시간 이상 동안 응시하는 경우, 제어부(110)는 상기 조수석 사이드 윈도우(220)에 대한 권한이 있는 탑승자(1200)에 의해 상기 조수석 사이드 윈도우(220)의 제어 요청이 있음을 감지할 수 있다. 그리고 상기 탑승자(1200)의 요청에 따라 상기 조수석 사이드 윈도우(220)가 제어되도록 할 수 있다.
여기서 상기 특정 윈도우에 대한 제어는 다양한 기능을 포함할 수 있다. 예를 들어 상기 특정 윈도우에 특정 정보를 표시하도록 하거나, 또는 상기 특정 윈도우를 오픈 또는 클로즈 하는 기능을 포함할 수 있다. 그리고 이러한 기능의 선택은, 상기 특정 윈도우에 대해 제어 권한이 있는 탑승자의 요청에 의해 이루어질 수 있다. 그리고 상기 요청은 탑승자의 음성 명령, 특정 키의 입력 또는 제스처 등에 의해 이루어질 수 있다.
한편 이러한 제스처는, 다양하게 이루어질 수 있다. 예를 들어 상기 탑승자의 손짓 등에 의해 이루어지거나 또는 상기 특정 윈도우에 대해 인가되는 터치 앤드 드래그 입력등에 근거하여 이루어질 수 있다. 즉, 특정 윈도우에 대한 제어 권한이 있는 탑승자가, 상기 특정 윈도우에 기 설정된 방향의 터치 앤드 드래그 입력을 가하는 경우, 상기 제어부(110)는 상기 터치 앤드 드래그 입력에 근거하여 상기 특정 윈도우가 오픈 또는 클로즈되도록 할 수 있다.
즉, 도 12b에서 보이고 있는 것과 같이, 조수석에 탑승한 탑승자(1200)가 위에서 아래 방향으로 터치 앤드 드래그 입력을 가하는 경우, 제어부(110)는 이에 대한 응답으로 상기 조수석 사이드 윈도우(220)가 오픈되도록 할 수도 있다. 여기서 상기 터치 앤드 드래그 입력 제스처는, 차량 내부에 구비된 카메라등을 통해 인식할 수 있으며, 또는 각 윈도우(예를 들어 조수석 사이드 윈도우(220))에 형성된 형성된 감지 영역을 통해 인식될 수도 있다.
한편 도 13a 내지 도 13c는 본 발명의 실시 예에 따른 차량 제어 장치가, 운전자 및 조수석에 탑승한 탑승자의 시선 방향에 대응되는 윈도우에, 상기 운전자 및 탑승자의 요청에 따른 서로 다른 정보를 표시하는 예시도이다.
우선 도 13a를 참조하여 살펴보면, 운전자(1300) 및 탑승자(1302)가 각각 서로 다른 방향을 응시하고 있으며, 음성으로 특정 정보를 요청하는 예를 보이고 있다. 이러한 경우 제어부(110)는 상기 운전자(1300) 및 탑승자(1302)로부터 발성된 음성 명령을 각각 구분하여 인식할 수 있다. 예를 들어 상기 운전자(1300) 및 탑승자(1302)의 음성이 미리 인식된 경우, 제어부(110)는 음성 인식 결과를 이용하여 상기 운전자(1300) 및 탑승자(1302)로부터 발성된 음성 명령을 각각 구분할 수 있다. 또는 제어부(110)는 운전석 및 조수석에 각각 대응되게 형성된 시선 감지부(131) 및 음성 감지부(132)에 근거하여, 운전석에 착석한 운전자(1300)의 음성 및, 조수석에 착석한 탑승자(1302)의 음성을 각각 구분할 수 있다. 그리고 상기 운전자(1300) 및 탑승자(1302)의 시선 방향에 대응되는 윈도우를 감지할 수 있다.
이러한 경우, 제어부(110)는 도 13a에서 보이고 있는 것처럼, 운전자(1300)가 내비게이션 정보를 요청하고, 탑승자(1302)가 음악 리스트에 대한 정보를 요청하는 경우, 각각의 요청에 대한 응답으로, 각 시선 방향에 대응되는 윈도우에 요청된 정보를 표시할 수 있다. 이에 따라 윈드 쉴드 글래스(230)에는 운전자(1300)가 요청한 내비게이션 정보가 표시될 수 있으며, 조수석 사이드 윈도우(220)에는 탑승자(1302)가 요청한 음악 리스트(Music list)에 대한 정보가 표시될 수 있다. 도 13b 및 도 13c는 이러한 예들을 보이고 있는 것이다.
한편 도 14a 내지 도 14d는, 본 발명의 실시 예에 따른 차량 제어 장치가, 운전자의 시선 방향 및 음성 신호에 따라 차량 내부에 구비된 어느 하나의 기기를 구동시키는 예를 도시한 예시도이다.
우선 도 14a를 참조하여 살펴보면, 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는 탑승자(1400 또는 1402)의 시선 방향에 대응되는 차량 내부 기기를 선택할 수 있다. 이러한 경우, 상술한 바와 같이 각각의 차량 내부 기기 별로 해당 기기의 구동을 요청할 권한이 서로 다르게 설정될 수 있으며, 내비게이션 기기의 경우, 운전자에 한해 상기 구동 요청 권한이 있을 수 있음을 언급한 바 있다.
이러한 경우, 제어부(110)는 내비게이션 기기(1410)를 응시하는 운전자(1400) 및 탑승자(1402)의 시선이 모두 감지되는 경우에, 운전자(1400)의 시선에 근거하여 상기 내비게이션 기기(1410)의 구동 요청이 있는 것으로 판단할 수 있다. 이러한 경우 제어부(110)는 도 14b에서 보이고 있는 것처럼, 운전자(1400)의 시선 방향에 대응되는 기기, 즉 내비게이션 기기(1410)가 구동된 상태임을, 상기 내비게이션 기기(1412)에 대응되는 LED(1412)의 광 신호를 통해 표시할 수 있다.
이러한 경우 운전자(1400)는 상기 LED(1412)의 광 신호를 통해 상기 내비게이션 기기(1410)가 구동된 상태임을 인지할 수 있으며, 상기 내비게이션 조작을 위한 입력을 인가할 수 있다. 예를 들어 이러한 입력은 도 14c에서 보이고 있는 것과 같이, 음성으로 입력될 수 있다. 그리고 제어부(110)는 상기 내비게이션 기기(1410)의 구동 요청 권한과 마찬가지로, 운전자(1400)에 한해 상기 내비게이션 기기(1410)를 조작할 수 있는 권한을 부여할 수 있다.
이러한 경우, 제어부(110)는 운전자(1400)로부터 인가되는 입력에 근거하여 상기 내비게이션 기기(1410)를 제어할 수 있다. 이에 따라 상기 내비게이션 기기(1410)에는, 도 14d에서 보이고 있는 것처럼, 운전자(1400)의 음성 입력에 따른 목적지(dest.)가 결정될 수 있으며, 설정된 목적지까지의 경로가 표시될 수 있다.
한편, 도 14a 내지 도 14d에서 보인 바와 달리, 운전자의 시선 방향에 대응되는 차량 내부 기기가 복수일 수도 있음은 물론이다. 도 15a 내지 도 15b는, 이러한 경우에, 본 발명의 실시 예에 따른 차량 제어 장치가, 어느 하나의 기기를 선택받는 예를 도시한 예시도이다.
우선 도 15a를 참조하여 살펴보면, 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는 탑승자의 시선에 근거하여 특정 차량 내부 기기의 구동이 요청되었는지 여부를 감지할 수 있다. 여기서 상기 차량 내부 기기는 상술한 바와 같이 각각 상기 구동을 요청할 수 있는 권한이 다르게 설정될 수 있다.
이러한 상태에서, 제어부(110)는 운전자(1500)의 시선을 감지한 결과, 운전자의 시선이 내비게이션 기기(1510) 및, 음악 플레이어(1520)를 향하는 경우, 상기 운전자의 시선 방향에 대응되는 기기가 상기 내비게이션 기기(1510) 및, 음악 플레이어(1520) 모두라고 판단할 수 있다. 이러한 경우 제어부(110)는 상기 내비게이션 기기(1510) 및, 음악 플레이어(1520)에 각각 대응되는 LED들(1512, 1522)을 모두 발광할 수 있다. 또는 제어부(110)는 상기 내비게이션 기기(1510) 및, 음악 플레이어(1520) 중 어느 하나의 기기를 선택받기 위한 운전자의 입력을 요청하는 가이드 메시지를 음향 정보 또는 화상 정보의 형태로 출력할 수 있다.
이에 따라 운전자(1500)는 상기 LED들(1512, 1522) 및/또는 상기 가이드 메시지에 근거하여, 자신의 시선 방향에 대응되는 기기가 내비게이션 기기(1510) 및, 음악 플레이어(1520)임을 인지할 수 있다. 그리고 운전자(1500)는 내비게이션 기기(1510) 및, 음악 플레이어(1520) 중 어느 하나의 기기를 선택하기 위한 입력을 인가할 수 있다.
예를 들어, 이러한 운전자(1500)의 입력은 음성 정보 또는 기 설정된 키의 입력 등을 통해 이루어질 수 있다. 예를 들어 도 15b에서 보이고 있는 것처럼, 운전자(1500)가 음성으로 특정 기기, 즉 '내비게이션(Navigation) 기기'를 지정하는 경우, 제어부(110)는 운전자의 음성 입력에 근거하여, 내비게이션 기기(1510)를 선택할 수 있다. 이러한 경우 제어부(110)는 선택되지 않은 음악 플레이어(1520)에 대응되는 LED(1522)를 오프하여, 내비게이션 기기(1510)에 대응되는 LED(1512) 만 발광되도록 함으로써, 운전자(1500)에게 현재 내비게이션 기기가 선택되었음을 표시할 수도 있다. 그리고 이러한 경우 상기 도 14c 및 도 14d에서보이고 있는 것처럼, 운전자의 음성 입력에 근거하여 내비게이션 기기(1510)를 제어할 수 있다.
한편 상술한 설명에서는, 단지 사용자의 요청에 따라 특정 윈도우가 오픈 또는 클로즈되도록 제어하는 것만을 언급하였으나, 상기 특정 윈도우가 오픈 또는 클로즈 되는 정도를 탑승자가 제어할 수도 있음은 물론이다. 예를 들어 제어부(110)는 상기 특정 윈도우를 제어하기 위한 요청으로 기 설정된 키가 입력되는 경우, 상기 키가 입력된 시간에 근거하여 특정 윈도우, 즉 탑승자의 시선 방향에 대응되는 윈도우가 오픈 또는 클로즈 되는 정도가 결정되도록 할 수도 있다. 또는 제어부(110)는 탑승자로부터 기 설정된 중지 명령'그만(stop)'등과 같은 음성 명령이 있는 경우, 상기 특정 윈도우가 오픈 또는 클로즈되는 동작 상태를 중지하여, 탑승자가 상기 윈도우가 오픈 또는 클로즈되는 정도를 조정하도록 할 수도 있음은 물론이다.
한편, 본 발명의 실시 예에서는, 윈도우가 어느 정도 열려 있는 상태에서 탑승자가 상기 윈도우를 응시하는 예를 들어 설명하였으나, 상기 윈도우가 완전히 오픈된 상태, 즉 윈도우가 도어의 내부로 완전히 삽입되어 노출된 부분이 전혀 없는 경우에도 본 발명이 적용될 수 있음은 물론이다. 이는 본 발명의 경우 윈도우의 오픈 여부와 상관없이 탑승자의 시선 방향에 따라 특정 윈도우가 제어될 수 있도록 하므로, 윈도우가 완전히 오픈된 경우라고 할지라도, 해당 윈도우가 위치한 방향으로 탑승자의 시선이 일정 시간 이상 향하는 경우, 제어부(110)는 이를 상기 해당 윈도우에 대한 제어 요청으로 인식할 수 있다.
한편, 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는 특정 윈도우를 일정 시간 이상 응시하는 탑승자의 경우, 해당 윈도우에 대한 상기 탑승자의 제어 권한을 일시적으로 제한할 수도 있음은 물론이다. 즉, 제어부(110)는 기 설정된 제1 시간 동안 특정 윈도우를 상기 탑승자가 응시하는 경우, 이를 상기 특정 윈도우에 대한 상기 탑승자의 제어 요청으로 인식할 수 있으나, 기 설정된 제2 시간 동안 상기 탑승자가 상기 특정 윈도우에 대한 제어 없이 계속 응시하는 경우, 상기 특정 윈도우에 대한 상기 탑승자의 제어 권한을 일시적으로 제한할 수도 있다. 이는 상기 탑승자가 운전자인 경우, 운전 도중에 위험한 상황이 발생하는 것을 미연에 방지하기 위함이며(윈드 쉴드 글래스의 경우 상기 제2 시간 이상 계속 응시하는 경우, 특정 정보를 윈드 쉴드 글래스에 표시하지 않음), 또한 운전자가 아닌 탑승자의 경우 기 설정된 제2 시간 이상 상기 특정 윈도우를 응시하는 경우 단지 창 밖을 응시하고자 하는 의도로 판단될 수 있기 때문이다. 여기서 상기 기 설정된 제2 시간은, 상기 기 설정된 제1 시간보다 더 긴 시간일 수도 있음은 물론이다.
또한 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는, 외부 환경에 따라 윈도우의 제어 권한을 제한할 수도 있다. 예를 들어 비 또는 눈이 오는 등의 악천후 속을 차량이 주행하는 경우, 탑승자가 일정시간 이상 응시하는 것만으로는 윈도우의 오픈이 제한되도록 할 수도 있다. 이러한 경우 탑승자가 윈도우를 오픈하기 위해서는 추가적인 다른 입력(예를 들어 음성 입력)이 필요할 수도 있다.
또한 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는, 차량의 속도에 근거하여 상기 윈도우를 제어하는 권한을 제한할 수도 있다. 이는 차량의 속도가 기 설정된 수준 이상인 경우 윈도우를 제어하기 위해 운전자가 다른 방향을 응시하는 경우 자칫 사고로 이어질 수 있기 때문이다. 이에 따라 차량의 속도가 기 설정된 속도 이상인 경우, 본 발명의 실시 예에 따른 차량 제어 장치(100)의 제어부(110)는, 운전자의 시선 방향에 따라 차량 내부 기기 또는 특정 윈도우를 제어하는 기능을 제한할 수도 있다.
전술한 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, HDD(Hard Disk Drive), SSD(Solid State Disk), SDD(Silicon Disk Drive), ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 상기 컴퓨터는 단말기의 제어부(180)를 포함할 수도 있다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.

Claims (20)

  1. 복수의 윈도우를 포함하는 차량의 바디부;
    상기 차량에 탑승한 적어도 한 명의 탑승자의 시선을 감지하는 감지부; 및,
    상기 탑승자의 요청에 근거하여, 상기 복수의 윈도우 중 상기 감지된 시선의 방향에 대응되는 어느 하나가 오픈(open) 또는 클로즈(close) 되도록 제어하며,
    상기 차량의 탑승자가 복수인지 여부를 감지하고, 감지된 차량의 탑승자가 복수인 경우, 상기 복수의 탑승자가 착석한 각각의 좌석에 근거하여 상기 복수의 탑승자를 운전자와, 상기 운전자 외의 탑승자로 구분하고, 구분 결과에 따라 기 설정된 우선순위가 서로 다른 윈도우 제어 권한을 결정하는 제어부를 포함하며,
    상기 서로 다른 윈도우 제어 권한은,
    제어 가능한 윈도우의 개수 및 제어 가능한 윈도우 중 적어도 하나가 서로 다르며,
    상기 제어부는,
    상기 운전자가 상기 복수의 윈도우 전체의 제어가 가능한 제어 권한을 가질 수 있도록 하고, 상기 운전자 외의 탑승자는 착석한 좌석의 위치에 근거하여 특정 윈도우의 제어만 제어 권한을 부여하며, 상기 운전자 외의 탑승자에게 부여되는 제어 권한보다 상기 운전자의 제어 권한에 더 높은 우선 우선순위를 부여하여, 상기 운전자 및 상기 운전자 외의 탑승자로부터 특정 윈도우에 대해 각각 제어 요청이 수신되는 경우, 상기 제어 권한의 우선순위에 근거하여 상기 운전자의 제어 요청에 따라 상기 특정 윈도우가 제어되도록 하는 것을 특징으로 하는 차량 제어 장치.
  2. 제1항에 있어서, 상기 탑승자의 요청은,
    상기 탑승자가, 상기 시선 방향에 대응되는 윈도우를 응시한 시간, 상기 탑승자로부터 인가되는 기 설정된 키 입력 또는 음성 명령 중 적어도 하나이며,
    상기 탑승자는,
    상기 시선 방향에 대응되는 윈도우를 제어할 권한을 가지고 있는 탑승자임을 특징으로 하는 차량 제어 장치.
  3. 삭제
  4. 제2항에 있어서, 상기 제어부는,
    상기 탑승자가, 상기 시선 방향에 대응되는 윈도우를 응시한 시간이 기 설정된 제1 시간 이상일 경우에 상기 시선 방향에 대응되는 윈도우의 오픈 또는 클로즈되도록 하는 것을 특징으로 하는 차량 제어 장치.
  5. 제4항에 있어서, 상기 제어부는,
    상기 탑승자가 상기 시선 방향에 대응되는 윈도우를 응시한 시간이 기 설정된 제2 시간을 초과하는 경우, 상기 차량 내부에 구비된 음향 출력부 또는 디스플레이부를 통해 경고 메시지를 출력하거나, 상기 탑승자가 일정 시간동안 상기 시선 방향에 대응되는 윈도우를 제어할 권한을 제한하는 것을 특징으로 하는 차량 제어 장치.
  6. 제2항에 있어서, 상기 제어부는,
    상기 탑승자로부터, 상기 탑승자의 시선 방향에 대응되는 윈도우에 대한 터치 앤드 드래그 입력에 근거하여, 상기 시선 방향에 대응되는 윈도우를 오픈 또는 클로즈하는 것을 특징으로 하는 차량 제어 장치.
  7. 제1항에 있어서, 상기 제어부는,
    상기 복수의 윈도우 중 상기 감지된 시선의 방향에 대응되는 어느 하나의 윈도우를 상기 탑승자가 구분할 수 있도록 표시하는 것을 특징으로 하는 차량 제어 장치.
  8. 제7항에 있어서, 상기 제어부는,
    상기 복수의 윈도우 각각에 기 설정된 영역에 표시되는 화상 정보 또는 상기 복수의 윈도우 각각에 대응되는 위치에 형성된 LED(Light Emitted Diode)의 광 신호에 근거하여 상기 감지된 시선의 방향에 대응되는 어느 하나의 윈도우를 표시하는 것을 특징으로 하는 차량 제어 장치.
  9. 제1항에 있어서, 상기 복수의 윈도우는,
    썬루프(Sun-roof) 윈도우, 조수석 윈도우 및 조수석 뒷좌석의 윈도우, 운전석 윈도우 및 운전석 뒷좌석의 윈도우임을 특징으로 하는 차량 제어 장치.
  10. 제1항에 있어서, 상기 제어부는,
    상기 적어도 한 명의 탑승자의 시선을 감지한 결과, 적어도 두 개의 윈도우가 상기 감지된 시선에 대응되는 경우, 상기 탑승자부터 입력되는 키 또는 음성 명령에 근거하여 오픈 또는 클로즈 할 윈도우를 결정하는 것을 특징으로 하는 차량 제어 장치.
  11. 제10항에 있어서, 상기 제어부는,
    적어도 두 개의 윈도우가 상기 감지된 시선에 대응되는 경우, 오픈 또는 클로즈 할 윈도우를 선택받기 위한 상기 키 또는 음성 명령을 요청하는 음향 정보 또는 화상 정보를 출력하는 것을 특징으로 하는 차량 제어 장치.
  12. 제10항에 있어서, 상기 제어부는,
    적어도 두 개의 윈도우가 상기 감지된 시선에 대응되는 경우, 상기 탑승자의 얼굴이 향하는 방향에 근거하여, 오픈 또는 클로즈 할 윈도우를 결정하는 것을 특징으로 하는 차량 제어 장치.
  13. 제1항에 있어서,
    상기 복수의 윈도우 중 적어도 하나는,
    화상 정보를 표시할 수 있도록 형성되며,
    상기 제어부는,
    상기 탑승자의 요청에 근거하여, 상기 복수의 윈도우 중 상기 탑승자의 시선 방향에 대응되는 어느 하나에, 상기 차량과 관련된 기 설정된 정보를 표시하는 것을 특징으로 하는 차량 제어 장치.
  14. 제13항에 있어서, 상기 탑승자의 요청은,
    상기 차량에 관련된 기 설정된 정보를 요청하는 음성 명령 또는 상기 기 설정된 정보에 대응되는 적어도 하나의 키 입력임을 특징으로 하는 차량 제어 장치.
  15. 제13항에 있어서, 상기 제어부는,
    상기 복수의 윈도우 중, 상기 탑승자의 시선 방향에 대응되는 어느 하나가 오픈 또는 클로즈 된 상태에 근거하여, 상기 기 설정된 정보가 상기 어느 하나의 윈도우에 표시되는 영역의 크기를 결정하는 것을 특징으로 하는 차량 제어 장치.
  16. 제13항에 있어서, 상기 제어부는,
    상기 탑승자가 복수인 경우, 상기 탑승자들 각각의 요청에 근거하여 상기 복수의 윈도우 중 적어도 두 개에 상기 차량에 관련된 기 설정된 정보를 표시하며,
    상기 표시되는 정보는
    상기 차량에 관련된 서로 다른 정보이며,
    상기 적어도 두 개의 윈도우는,
    상기 탑승자들의 시선 방향에 각각 대응되는 윈도우들임을 특징으로 하는 차량 제어 장치.
  17. 제1항에 있어서, 상기 제어부는,
    상기 차량의 주행 속도가 기 설정된 속도 이하인 경우에, 상기 운전자의 시선에 따라 상기 복수의 윈도우 중 어느 하나가 오픈 또는 클로즈 되도록 제어하는 것을 특징으로 하는 차량 제어 장치.
  18. 적어도 하나의 멀티미디어 기기 및, 내비게이션 기기를 포함하는 복수의 내부 기기를 구비하는 차량의 바디부;
    상기 차량에 탑승한 적어도 한 명의 탑승자의 시선을 감지하는 감지부; 및,
    상기 감지된 시선 방향에 근거하여, 상기 복수의 내부 기기 중 어느 하나를 구동하며, 상기 차량에 탑승한 탑승자가 복수인지 여부를 감지하고, 감지된 차량의 탑승자가 복수인 경우 상기 복수의 탑승자가 착석한 각각의 좌석에 근거하여 상기 복수의 탑승자를 운전자와, 상기 운전자 외의 탑승자로 구분하고, 구분 결과에 따라 기 설정된 우선순위가 서로 다른 제어 권한을 결정하는 제어부를 포함하며,
    상기 서로 다른 제어 권한은,
    상기 복수의 내부 기기 중 제어 가능한 기기 및 제어 가능한 기기의 개수 중 적어도 하나가 서로 다르며,
    상기 제어부는,
    상기 운전자가 상기 복수의 내부 기기 전체의 제어가 가능한 제어 권한을 가질 수 있도록 하고, 상기 운전자 외의 탑승자는 착석한 좌석의 위치에 근거하여 상기 복수의 내부 기기 중 일부만 제어할 수 있는 제어 권한을 부여하며, 상기 운전자 외의 탑승자에게 부여되는 제어 권한보다 상기 운전자의 제어 권한에 더 높은 우선순위를 부여하여, 상기 운전자 및 상기 운전자 외의 탑승자로부터 특정 내부 기기에 대해 각각 제어 요청이 수신되는 경우, 상기 제어 권한의 우선 순위에 근거하여 상기 운전자의 제어 요청에 따라 상기 특정 내부 기기가 제어되도록 하는 것을 특징으로 하는 차량 제어 장치.
  19. 제18항에 있어서, 상기 제어부는,
    상기 복수의 내부 기기 중, 상기 탑승자의 시선에 대응되는 내부 기기가 두 개 이상인 경우, 상기 탑승자의 시선에 대응되는 기기들을 다른 기기들과 구분되게 표시하며,
    상기 표시된 내부 기기들 중, 상기 탑승자의 선택에 따른 적어도 하나의 기기가 구동되도록 제어하는 것을 특징으로 하는 차량 제어 장치.
  20. 복수의 윈도우를 포함하는 차량을 제어하는 방법에 있어서,
    상기 차량의 탑승자가 복수인지 여부를 감지하는 단계;
    상기 감지된 차량의 탑승자가 복수인 경우, 상기 복수의 탑승자가 착석한 각각의 좌석에 근거하여, 제어 가능한 윈도우의 개수 및 제어 가능한 윈도우 중 적어도 하나 및 우선 순위가 서로 다른 윈도우 제어 권한을 부여하는 단계;
    상기 차량에 탑승한 복수의 탑승자 각각의 시선 방향들을 감지하는 단계;
    상기 복수의 탑승자 중 적어도 하나로부터 상기 복수의 윈도우 중 어느 하나를 제어하기 위한 요청을 수신하는 단계; 및,
    상기 요청에 대한 응답으로, 상기 복수의 탑승자 중 적어도 하나의 시선 방향에 대응되는 어느 하나의 윈도우를 상기 요청에 따라 제어하는 단계를 포함하며,
    상기 서로 다른 윈도우 제어 권한을 부여하는 단계는,
    상기 복수의 탑승자가 착석한 각각의 좌석에 근거하여 상기 복수의 탑승자를 운전자와, 상기 운전자 외의 탑승자로 구분하고, 구분 결과에 따라 상기 운전자 외의 탑승자보다 상기 운전자에게 더 높은 우선순위를 가지는 윈도우 제어 권한을 부여하는 단계를 더 포함하며,
    상기 어느 하나의 윈도우를 제어하는 단계는,
    상기 시선 방향에 대응되는 상기 어느 하나의 윈도우에 대해 제어 권한을 가지는 운전자 및 상기 운전자 외의 탑승자로부터, 각각 제어 요청이 수신되는 경우 상기 우선순위에 근거하여 상기 운전자의 제어 요청에 따라 상기 어느 하나의 윈도우를 제어하는 단계이며,
    상기 제어 요청에 따라 상기 어느 하나의 윈도우를 오픈(open) 또는 클로즈(close)하거나, 또는 상기 어느 하나의 윈도우에 상기 차량에 관련된 기 설정된 정보를 표시하는 단계임을 특징으로 하는 차량 제어 방법.
KR1020140186342A 2014-12-22 2014-12-22 차량 제어 장치 및 그 제어 방법 KR101677648B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020140186342A KR101677648B1 (ko) 2014-12-22 2014-12-22 차량 제어 장치 및 그 제어 방법
EP15873437.6A EP3237256B1 (en) 2014-12-22 2015-08-12 Controlling a vehicle
PCT/KR2015/008426 WO2016104909A1 (en) 2014-12-22 2015-08-12 Controlling a vehicle
US14/832,084 US9720498B2 (en) 2014-12-22 2015-08-21 Controlling a vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140186342A KR101677648B1 (ko) 2014-12-22 2014-12-22 차량 제어 장치 및 그 제어 방법

Publications (2)

Publication Number Publication Date
KR20160076294A KR20160076294A (ko) 2016-06-30
KR101677648B1 true KR101677648B1 (ko) 2016-11-18

Family

ID=56128535

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140186342A KR101677648B1 (ko) 2014-12-22 2014-12-22 차량 제어 장치 및 그 제어 방법

Country Status (4)

Country Link
US (1) US9720498B2 (ko)
EP (1) EP3237256B1 (ko)
KR (1) KR101677648B1 (ko)
WO (1) WO2016104909A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020189807A1 (ko) * 2019-03-15 2020-09-24 엘지전자 주식회사 차량 제어 장치

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10083685B2 (en) * 2015-10-13 2018-09-25 GM Global Technology Operations LLC Dynamically adding or removing functionality to speech recognition systems
US10843535B1 (en) * 2015-12-01 2020-11-24 Apple Inc. System and method for dynamic privacy and window tinting
JP2017123029A (ja) * 2016-01-06 2017-07-13 富士通株式会社 情報通知装置、情報通知方法及び情報通知プログラム
US10682911B2 (en) * 2016-02-18 2020-06-16 Sony Corporation Active window for vehicle infomatics and virtual reality
JP6917708B2 (ja) * 2016-02-29 2021-08-11 株式会社デンソー 運転者監視システム
US9886841B1 (en) * 2016-04-27 2018-02-06 State Farm Mutual Automobile Insurance Company Systems and methods for reconstruction of a vehicular crash
KR20170133743A (ko) * 2016-05-26 2017-12-06 현대자동차주식회사 사용자 입력 기반 차량 제어 시스템 및 그 방법
DE102016214273B4 (de) * 2016-08-02 2019-10-10 Audi Ag Verfahren zur Steuerung einer Anzeigevorrichtung für ein Fahrzeug und Fahrzeug mit einer Anzeigevorrichtung
KR102025434B1 (ko) * 2016-08-30 2019-09-26 자동차부품연구원 운전자 제스처 기반 hud 정보 제공 시스템 및 방법
US20180101146A1 (en) * 2016-10-06 2018-04-12 International Business Machines Corporation Environment customization through local automation services
KR20180051842A (ko) 2016-11-09 2018-05-17 엘지전자 주식회사 디스플레이 장치 및 디스플레이 제어 방법
JP2018150694A (ja) * 2017-03-10 2018-09-27 株式会社オートネットワーク技術研究所 駆動制御装置及びコンピュータプログラム
US20180284932A1 (en) * 2017-03-31 2018-10-04 Honda Motor Co., Ltd. Transparent display for resilient vehicle surfaces
US10656777B1 (en) * 2017-06-29 2020-05-19 Apple Inc. Concealed user interfaces
DE102017216465A1 (de) * 2017-09-18 2019-03-21 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Ausgabe von Informationen zu einem Objekt eines Fortbewegungsmittels, System und Automobil
CN111108731B (zh) 2017-10-03 2021-08-10 谷歌有限责任公司 车辆环境中的多因子认证和访问控制的系统和方法
KR102170201B1 (ko) * 2017-10-03 2020-10-27 구글 엘엘씨 센서 기반 검증을 통한 차량 기능 제어
CN111801249A (zh) * 2018-02-22 2020-10-20 三菱电机株式会社 操作限制控制装置以及操作限制控制方法
WO2019198998A1 (ko) * 2018-04-12 2019-10-17 엘지전자 주식회사 차량 제어 장치 및 그것을 포함하는 차량
US20190384384A1 (en) * 2018-06-13 2019-12-19 At&T Intellectual Property I, L.P. System and method to augment reality in moving environments
US11318961B2 (en) 2018-07-20 2022-05-03 Lg Electronics Inc. Robot for vehicle and control method thereof
KR20200042660A (ko) * 2018-10-16 2020-04-24 현대자동차주식회사 차량 디스플레이 제어 장치, 그를 포함한 시스템 및 그 방법
CN109823267A (zh) * 2019-01-22 2019-05-31 李良春 一种汽车紧急救生系统
JP7239365B2 (ja) * 2019-03-25 2023-03-14 本田技研工業株式会社 エージェント装置、エージェント装置の制御方法、およびプログラム
JP2021059931A (ja) * 2019-10-09 2021-04-15 株式会社東海理化電機製作所 制御装置
US11873000B2 (en) 2020-02-18 2024-01-16 Toyota Motor North America, Inc. Gesture detection for transport control
US20210253135A1 (en) * 2020-02-18 2021-08-19 Toyota Motor North America, Inc. Determining transport operation level for gesture control
US11287895B2 (en) * 2020-02-21 2022-03-29 Toyota Motor Engineering & Manufacturing North America, Inc. System for remote vehicle door and window opening
KR20210133600A (ko) * 2020-04-29 2021-11-08 현대자동차주식회사 차량 음성 인식 방법 및 장치
JP7366850B2 (ja) * 2020-07-28 2023-10-23 本田技研工業株式会社 情報共有システムおよび情報共有方法
DE102020210109A1 (de) * 2020-08-10 2022-02-10 Brose Fahrzeugteile Se & Co. Kommanditgesellschaft, Bamberg Verfahren zur Erzeugung eines haptischen Feedbacks an einem Fahrzeugteil
JP7043561B2 (ja) * 2020-10-07 2022-03-29 グーグル エルエルシー 乗物環境における多要素認証およびアクセス制御
FR3115506A1 (fr) * 2020-10-27 2022-04-29 Psa Automobiles Sa Procédé et dispositif d’assistance vocale pour un conducteur et un passager
US20230123723A1 (en) * 2021-10-15 2023-04-20 Hyundai Mobis Co., Ltd. System for controlling vehicle display based on occupant's gaze departure
WO2023218799A1 (ja) * 2022-05-13 2023-11-16 株式会社Ｊｖｃケンウッド 映像表示装置および映像表示方法
CN114876312A (zh) * 2022-05-25 2022-08-09 重庆长安汽车股份有限公司 一种基于眼动追踪的车窗升降控制系统及方法
JP2023176219A (ja) * 2022-05-31 2023-12-13 株式会社デンソー 認証装置及び認証方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5554879B2 (ja) * 2011-06-20 2014-07-23 本田技研工業株式会社 車載機器操作装置及び報知装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS59102633A (ja) * 1982-12-02 1984-06-13 Toyota Motor Corp 車両用音声認識装置
KR101491169B1 (ko) * 2009-05-07 2015-02-06 현대자동차일본기술연구소 차량의 탑재기기 조작 장치 및 그 제어 방법
JP5467527B2 (ja) * 2010-09-06 2014-04-09 株式会社デンソー 車載機器制御装置
JP2012121386A (ja) * 2010-12-06 2012-06-28 Fujitsu Ten Ltd 車載装置
DE102011010594A1 (de) * 2011-02-08 2012-08-09 Daimler Ag Verfahren, Vorrichtung und Computerprogrammprodukt zum Ansteuern einer Funktionseinheit eines Fahrzeugs
US9934780B2 (en) * 2012-01-17 2018-04-03 GM Global Technology Operations LLC Method and system for using sound related vehicle information to enhance spoken dialogue by modifying dialogue's prompt pitch
KR20140023488A (ko) * 2012-08-16 2014-02-27 엘지이노텍 주식회사 차량의 미러 제어 장치 및 방법
EP2746833A1 (en) * 2012-12-18 2014-06-25 Volvo Car Corporation Vehicle adaptation to automatic driver independent control mode
US9499125B2 (en) * 2013-10-29 2016-11-22 Volkswagen Aktiengesellschaft Vehicle system for activating a vehicle component to provide vehicle access

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5554879B2 (ja) * 2011-06-20 2014-07-23 本田技研工業株式会社 車載機器操作装置及び報知装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020189807A1 (ko) * 2019-03-15 2020-09-24 엘지전자 주식회사 차량 제어 장치
US11314976B2 (en) 2019-03-15 2022-04-26 Lg Electronics Inc. Vehicle control device

Also Published As

Publication number Publication date
WO2016104909A1 (en) 2016-06-30
EP3237256B1 (en) 2021-03-03
US20160176372A1 (en) 2016-06-23
EP3237256A1 (en) 2017-11-01
KR20160076294A (ko) 2016-06-30
EP3237256A4 (en) 2018-11-14
US9720498B2 (en) 2017-08-01

Similar Documents

Publication Publication Date Title
KR101677648B1 (ko) 차량 제어 장치 및 그 제어 방법
KR101561917B1 (ko) 차량 제어 장치 및 그 제어 방법
CN107107841B (zh) 信息处理装置
US9460575B2 (en) Vehicle control apparatus and method thereof
US9703472B2 (en) Method and system for operating console with touch screen
US20180232057A1 (en) Information Processing Device
US9387824B2 (en) Interactive vehicle window display system with user identification and image recording
US9104243B2 (en) Vehicle operation device
US20150077272A1 (en) Interactive vehicle window display system with personal convenience reminders
KR102084032B1 (ko) 사용자 인터페이스, 운송 수단 및 사용자 구별을 위한 방법
US20180024695A1 (en) Detecting user interactions with a computing system of a vehicle
JP4858206B2 (ja) 車載機器の操作支援装置、操作支援方法
KR101946746B1 (ko) 차량에서 비-차량 오브젝트의 위치 결정
KR20200145826A (ko) 신뢰 모바일 컴퓨팅 디바이스와 함께 차량 내 카메라를 사용한 무결절 운전자 인증
KR20200093091A (ko) 단말기, 그를 가지는 차량 및 그 제어 방법
KR101542502B1 (ko) 차량 제어 장치 및 그 제어 방법
JP2018501998A (ja) 自動車の機器を制御するためのシステムおよび方法
TW201926050A (zh) 車輛多螢幕控制系統及車輛多螢幕控制方法
CN110850975B (zh) 具有手掌辨识的电子系统、车辆及其操作方法
US20140184491A1 (en) System and method for providing user interface using an optical scanning
JP2007112283A (ja) ナビゲーション装置
US20220089029A1 (en) Infotainment device for a vehicle
JP2007094612A (ja) 入力装置、情報処理装置、及び情報処理方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20191014

Year of fee payment: 4