KR102099328B1 - 적어도 하나의 비디오 신호 또는 제어 신호를 계산하기 위한 장치, 차량, 방법 및 컴퓨터 프로그램 - Google Patents
적어도 하나의 비디오 신호 또는 제어 신호를 계산하기 위한 장치, 차량, 방법 및 컴퓨터 프로그램 Download PDFInfo
- Publication number
- KR102099328B1 KR102099328B1 KR1020187005771A KR20187005771A KR102099328B1 KR 102099328 B1 KR102099328 B1 KR 102099328B1 KR 1020187005771 A KR1020187005771 A KR 1020187005771A KR 20187005771 A KR20187005771 A KR 20187005771A KR 102099328 B1 KR102099328 B1 KR 102099328B1
- Authority
- KR
- South Korea
- Prior art keywords
- vehicle
- information
- sensor
- sensor data
- occupant
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 55
- 238000004590 computer program Methods 0.000 title claims description 8
- 230000014509 gene expression Effects 0.000 claims abstract description 57
- 230000006399 behavior Effects 0.000 claims description 22
- 238000004891 communication Methods 0.000 claims description 14
- 230000006870 function Effects 0.000 claims description 8
- 230000001133 acceleration Effects 0.000 claims description 7
- 230000008921 facial expression Effects 0.000 claims description 7
- 230000004044 response Effects 0.000 claims description 5
- 230000000007 visual effect Effects 0.000 claims description 4
- 230000007613 environmental effect Effects 0.000 claims 4
- 230000005540 biological transmission Effects 0.000 description 13
- 238000004458 analytical method Methods 0.000 description 12
- 238000006243 chemical reaction Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 238000010295 mobile communication Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 108010076504 Protein Sorting Signals Proteins 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 2
- 230000002411 adverse Effects 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 239000006185 dispersion Substances 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000003909 pattern recognition Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 101100521334 Mus musculus Prom1 gene Proteins 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000010219 correlation analysis Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 210000001097 facial muscle Anatomy 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 235000020803 food preference Nutrition 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000010921 in-depth analysis Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000001020 rhythmical effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Arrangement of adaptations of instruments
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
- B60R16/03—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for supply of electrical power to vehicle subsystems or for
- B60R16/0315—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for supply of electrical power to vehicle subsystems or for using multiplexing techniques
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/10—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
- G08B21/06—Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
-
- B60K2350/1004—
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/70—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by an event-triggered choice to display a specific image among a selection of captured images
Abstract
예시적인 적용예는 차량(100)을 위한 장치(10), 차량(100), 방법 및 프로그램 코드를 갖는 프로그램에 관한 것이다. 상기 장치(10)는 적어도 하나의 센서 모듈(110)로부터 센서 데이터를 수신하도록 형성되는 적어도 하나의 입력 인터페이스(12)를 포함하며, 상기 센서 데이터는 상기 차량(100)의 적어도 하나의 탑승자의 거동에 관한 그리고/또는 상기 차량(100)의 주행 상황에 관한 센서 정보를 포함한다. 상기 장치(10)는 상기 센서 정보에 기초하여 상기 차량 탑승자에 의한 잠재적 정보 필요성을 결정하도록 형성된 제어 모듈(14)을 더 포함한다. 상기 제어 모듈(14)은 상기 잠재적 정보 필요성에 대응하는 정보를 제공하도록 추가로 형성된다. 상기 제어 모듈(14)은 상기 센서 정보에 기초하여 상기 차량 내의 상기 잠재적 정보 필요성에 따라 상기 정보의 표현 방식을 확인하도록 추가로 형성된다. 상기 장치(10)는 상기 차량(100)의 하나 이상의 디스플레이 장치(120) 상에 상기 확인된 표현 방식에 따라 적어도 하나의 비디오 신호 또는 제어 신호를 제공하기 위한 적어도 하나의 출력 인터페이스(16)를 더 포함한다.
Description
예시적인 적용예는 청구항 제1항에 따른 장치, 청구항 제8항에 따른 차량, 청구항 제9항에 따른 방법 그리고 청구항 제10항에 따른 프로그램 코드를 포함하는 프로그램에 관한 것이다.
디스플레이 장치는 현대 차량에서 종종 중앙 위치를 차지한다. 종종 예를 들어 차량에 관한 정보의 표현, 미디어의 재생, 지도 정보의 제공 또는 주행 또는 위치 컨텍스트 정보의 표현과 같은 차량의 많은 기능들이 디스플레이 장치를 통해 제공된다. 여기서 시선 분산 및 덜 직관적인 표현은 종종 운전자의 집중력 및 이에 따라 주행 안전에 악영향을 미칠 수 있기 때문에, 정보의 직관적인 표현이 종종 중요한 역할을 한다.
현대의 차량은 종종 하나 이상의 디스플레이 장치를 갖는다: 예를 들어 차량의 센터 콘솔에 있는 정보 재생 시스템의 디스플레이 장치 이외에, 차량은 종종 차량의 운전자가 볼 때 차량의 핸들 뒤에 배치되는 예를 들어 조합 디스플레이 장치와 같은 다른 디스플레이 장치를 포함하거나, 또는 예를 들어 운전자 또는 다른 차량 탑승자의 시야에 투영되는 예를 들어 소위 헤드 업 디스플레이(Head-Up-Display)와 같은 프로젝션 기반 디스플레이 장치를 포함할 수 있다.
현재의 차량은 종종 이동 통신 네트워크에 액세스할 수 있으며, 따라서 종종 차량의 탑승자가 흥미를 가질 수 있는 많은 양의 정보에 액세스할 수 있다. 이러한 경우, 종종 모든 정보가 모든 상황에서 동일하게 관련되는 것은 아니고, 현재의 상황과 차량의 탑승자에 의존한다.
따라서, 디스플레이 장치를 사용할 때 차량 사용의 안전성 및/또는 안락감을 향상시킬 수 있는 디스플레이 장치에서의 정보의 선택 및 표현에 대한 개념을 제공할 필요성이 존재한다. 이러한 필요성은 청구항 제1항에 따른 장치, 청구항 제8항에 따른 차량, 청구항 제9항에 따른 방법 및 청구항 제10항에 따른 프로그램 코드를 포함하는 프로그램에 의해 충족된다.
몇몇 실시예는 예를 들어 센서 데이터에 기초하여 차량 탑승자의 잠재적 정보 필요성을 확인함으로써 이를 가능하게 할 수 있다. 하나 이상의 센서 모듈은 예를 들어 카메라, 음향 센서 또는 동작 센서를 통해 차량 탑승자의 거동에 대한 센서 정보를 검출하거나 또는 주행 상황을 결정할 수 있다. 이러한 거동, 예를 들어 특정 방향으로 보는 것에 근거하여 또는 스트레스의 징후에 근거하여 잠재적 정보 필요성이 결정될 수 있고, 잠재적 정보 필요성에 대응하는 정보의 가능한 한 직관적인 표현 방식이 결정될 수 있다. 여기서 예를 들어 전송 용량을 절약하기 위해, 잠재적 정보 필요성에 기초하여 현재 필요한 정보만이 호출될 수 있다.
실시예는 차량용 장치를 제공한다. 상기 장치는 적어도 하나의 입력 인터페이스를 포함한다. 적어도 하나의 입력 인터페이스는 적어도 하나의 센서 모듈로부터 센서 데이터를 수신하도록 형성된다. 센서 데이터는 차량의 적어도 하나의 탑승자의 거동에 관한 그리고/또는 차량의 주행 상황에 관한 센서 정보를 포함한다. 상기 장치는 제어 모듈을 또한 포함한다. 제어 모듈은 센서 정보에 기초하여 차량 탑승자의 잠재적 정보 필요성을 결정하도록 형성된다. 제어 모듈은 또한 잠재적 정보 필요성에 대응하는 정보를 제공하도록 형성된다. 제어 모듈은 또한 센서 정보에 기초하여 차량의 잠재적 정보 필요성에 대응하는 정보의 표현 방식을 확인하도록(ascertain) 형성된다. 상기 장치는 또한 차량의 하나 이상의 디스플레이 장치 상에 확인된 표현 방식에 따라 적어도 하나의 비디오 또는 제어 신호를 제공하기 위한 적어도 하나의 출력 인터페이스를 포함한다. 잠재적 정보 필요성 및/또는 표현 방식의 확인에 의해 예를 들어 정보의 직관적인 표현이 가능하게 되고, 차량의 안전성이 향상될 수 있다. 잠재적 정보 필요성에 대응하는 정보를 제공함으로써, 예를 들어 정보의 전송 용량이 감소될 수 있다.
일부 실시예에서, 제어 모듈은 잠재적 정보 필요성에 대응하는 정보를 제공하기 위해 잠재적 정보 필요성에 대응하는 정보를 요청하고 수신하도록 형성될 수 있다. 잠재적 정보 필요성에 대응하는 정보를 요청하고 수신함으로써, 예를 들어 정보의 전송 용량이 감소될 수 있다.
몇몇 실시예에서, 제어 모듈은 이동 무선 인터페이스를 통해 잠재적 정보 필요성에 대응하는 정보를 요청하고 수신하도록 형성될 수 있다. 잠재적 정보 필요성에 대응하는 정보를 요청하고 수신함으로써, 예를 들어 정보의 전송 용량이 감소될 수 있고, 예를 들어 이동 무선 네트워크를 통한 전송을 위한 비용이 감소될 수 있다.
일부 실시예에서, 제어 모듈은 2개 이상의 중첩된 표현 레벨에 기초하여 표현 방식을 확인하도록 형성될 수 있다. 2개 이상의 중첩된 표현 레벨은 차량의 잠재적 정보 필요성 및 기본 정보에 따른 정보의 중첩을 가능하게 할 수 있다.
몇몇 실시예에서, 센서 정보는 시각 센서 데이터, 음향 센서 데이터, 위치 센서 데이터, 가속도 센서 데이터, 주행 다이내믹 센서 데이터, 신체 센서 데이터, 주변 광 센서 데이터, 기상 센서 데이터 및 차량 센서 데이터의 그룹 중 적어도 하나의 요소에 기초할 수 있다. 이러한 센서 데이터의 사용은 탑승자의 거동 및/또는 주행 상황의 검출을 가능하게 할 수 있다.
일부 실시예에서, 잠재적 정보 필요성에 대응하는 정보는 차량에 관한 정보, 차량의 차량 상태에 관한 정보, 차량의 위치에 관한 정보, 차량의 주변의 위치에 관한 정보, 차량의 주변의 이벤트에 관한 정보, 차량의 미디어 재생 시스템의 미디어에 관한 정보 및 위치 데이터의 그룹 중 적어도 하나의 요소를 포함한다. 잠재적 정보 필요성에 대응하는 정보는 예를 들어 현재의 주행 상황에서 적어도 하나의 탑승자에게 부가적인 정보를 제공하는데 사용될 수 있다.
몇몇 실시예에서, 제어 모듈은 센서 정보에 기초하여 잠재적 정보 필요성에 대응하는 정보의 세부 레벨을 적응성으로 조정하도록 형성된다. 세부 수준의 조정에 의해 스트레스 상황에서 주행 안전성이 향상될 수 있다.
적어도 일부 실시예에서, 제어 모듈은 차량 대 차량 통신 데이터를 획득하도록 추가로 형성될 수 있다. 제어 모듈은 또한 차량 대 차량 통신 데이터에 기초하여 잠재적 정보 필요성을 추가로 결정하도록 형성될 수 있다. 차량 대 차량 통신은 차량의 주행 상황에 대한 센서 정보를 보완하고 잠재적 정보 필요성의 결정을 향상시킬 수 있다.
적어도 몇몇 실시예에서, 제어 모듈은 센서 정보에 기초한 확률 함수에 기초하여 잠재적 정보 필요성을 결정하도록 형성된다. 확률 함수의 사용은 잠재적 정보 필요성을 결정하기 위해 경험값의 사용을 가능하게 한다.
적어도 일부 실시예에서, 장치는 메모리 모듈을 더 포함할 수 있다. 제어 모듈은 센서 데이터에 기초하여 표현 방식에 대한 적어도 하나의 탑승자의 반응을 결정하도록 형성될 수 있다. 제어 모듈은 메모리 모듈을 통해 적어도 하나의 탑승자의 반응을 저장하도록 형성될 수 있다. 제어 모듈은 저장된 반응 및 적응성 학습 기능에 기초하여 추가로 표현 방식을 결정하도록 형성될 수 있다. 반응의 분석에 의해 잠재적 정보 필요성의 예측 정확도를 향상시킬 수 있다.
몇몇 실시예에서, 메모리 모듈은 적어도 하나의 탑승자의 적어도 하나의 선호도 프로파일을 포함할 수 있다. 제어 모듈은 또한 적어도 하나의 선호도 프로파일에 기초하여 잠재적 정보 필요성 및/또는 표현 방식을 결정하도록 형성될 수 있다. 잠재적 정보 필요성의 예측 정확도는 적어도 하나의 선호도 프로파일에 의해 향상될 수 있다.
일부 실시예에서, 제어 모듈은 적어도 하나의 선호도 프로파일에 기초하여 잠재적 정보 필요성에 대응하는 정보를 수신하거나 또는 요청하도록 형성될 수 있다. 적어도 하나의 선호도 프로파일에 의해 추가로 특정된 잠재적 정보 필요성에 대응하는 정보의 요청 및 수신에 의해, 예를 들어 정보의 전송 용량이 감소될 수 있다.
적어도 몇몇 실시예에서, 잠재적 정보 필요성에 대응하는 정보는 차량의 주변의 이벤트에 관한 정보를 포함할 수 있다. 제어 모듈은 적어도 하나의 선호도 프로파일에 기초하여 이벤트에 관한 정보를 수신하거나 또는 요청하도록 형성될 수 있다. 선호도 프로파일에 기초한 이벤트에 관한 정보의 요청은 이벤트가 적어도 하나의 탑승자에게 관련된다는 것을 확인할 수 있다. 또한, 예를 들어 정보의 전송 용량이 감소될 수 있다.
몇몇 실시예에서, 적어도 하나의 선호도 프로파일은 캘린더 정보를 포함할 수 있다. 제어 모듈은 캘린더 정보에 기초하여 이벤트에 관한 정보를 수신 또는 요청하도록 형성될 수 있다. 캘린더 정보에 기초한 이벤트에 관한 정보의 요청은 이벤트가 적어도 하나의 탑승자에게 시간적으로 관련된다는 것을 확인할 수 있다. 또한, 예를 들어 정보의 전송 용량이 감소될 수 있다.
일부 실시예에서, 이벤트에 관한 정보는 이벤트의 가용성에 관한 정보를 포함할 수 있다. 제어 모듈(14)은 가용성에 기초하여 이벤트에 관한 정보를 수신하거나 또는 요청하도록 형성될 수 있다. 캘린더 정보에 기초한 이벤트에 관한 정보의 요청은 이벤트가 가용한 것이라는 것을 확인할 수 있다. 또한 예를 들어 정보의 전송 용량이 감소될 수 있다.
몇몇 실시예에서, 메모리 모듈은 위치 데이터를 포함할 수 있다. 제어 모듈은 위치 데이터에 기초하여 이벤트에 관한 정보를 수신하거나 또는 요청하도록 형성될 수 있다. 캘린더 정보에 기초한 이벤트에 관한 정보의 요청은 이벤트가 차량에 도달 가능하고 그리고/또는 우회 경로 없이 도달 가능한 것을 확인할 수 있다. 또한, 예를 들어 정보의 전송 용량이 감소될 수 있다.
또한 실시예는 장치 및 하나 이상의 디스플레이 장치를 포함하는 차량을 제공한다. 상기 장치는 적어도 하나의 비디오 또는 제어 신호를 하나 이상의 디스플레이 장치에 제공하도록 형성될 수 있다. 하나 이상의 디스플레이 장치는 정보 재생 시스템, 조합 디스플레이 시스템 그리고 프로젝션 기반 디스플레이 시스템의 그룹 중 적어도 하나의 요소를 포함할 수 있다. 장치의 사용은 예를 들어 정보의 보다 직관적인 표현을 가능하게 하고, 차량의 안전성을 향상시킬 수 있다.
실시예는 또한 차량을 위한 방법을 제공한다. 상기 방법은 적어도 하나의 센서 모듈로부터 센서 데이터를 수신하는 단계를 포함한다. 센서 데이터는 차량의 적어도 하나의 탑승자의 거동에 관한 및/또는 차량의 주행 상황에 관한 센서 정보를 포함한다. 또한 상기 방법은 센서 정보에 기초하여 차량 탑승자의 잠재적 정보 필요성을 결정하는 단계를 포함한다. 또한 상기 방법은 잠재적 정보 필요성에 대응하는 정보를 제공하는 단계를 포함한다. 또한 상기 방법은 센서 정보에 기초하여 차량 내의 잠재적 정보 필요성에 대응하는 정보의 표현 방식을 확인하는 단계를 포함한다. 또한 상기 방법은 차량의 하나 이상의 디스플레이 장치 상에 확인된 표현 방식에 따라 적어도 하나의 비디오 또는 제어 신호를 제공하는 단계를 포함한다.
다른 실시예는 컴퓨터 프로그램이 컴퓨터, 프로세서 또는 프로그래밍 가능한 하드웨어 부품 상에서 실행될 때, 위에 설명된 방법들 중 적어도 하나를 수행하기 위한 상기 컴퓨터 프로그램에 관한 것이다. 또 다른 실시예는 프로그래밍 가능한 하드웨어 부품과 상호 작용하여 위에 설명된 방법들 중 하나를 수행할 수 있는 전자 판독 가능 제어 신호를 포함하고, 기계 판독 가능하거나 또는 컴퓨터 판독 가능한 디지털 저장 매체다.
추가의 유리한 실시예는 도면에 도시된 실시예를 참조하여 이하에서 보다 상세하게 설명될 것이며, 실시예는 상기 도면에 도시된 실시예로 일반적으로 전체로 제한되지 않는다.
도 1은 차량용 장치의 실시예의 블록 다이어그램을 도시한다.
도 2는 차량용 장치의 실시예의 블록 다이어그램을 도시하며, 상기 장치는 메모리 모듈을 더 포함한다.
도 3은 차량용 장치 및 하나 이상의 디스플레이 장치를 포함하는 차량의 실시예의 블록 다이어그램을 도시한다.
도 4는 차량용 방법의 실시예의 블록 다이어그램을 도시한다.
도 2는 차량용 장치의 실시예의 블록 다이어그램을 도시하며, 상기 장치는 메모리 모듈을 더 포함한다.
도 3은 차량용 장치 및 하나 이상의 디스플레이 장치를 포함하는 차량의 실시예의 블록 다이어그램을 도시한다.
도 4는 차량용 방법의 실시예의 블록 다이어그램을 도시한다.
다양한 실시예들이 이제 몇몇 실시예들이 도시되어 있는 첨부 도면들을 참조하여 더 상세히 설명될 것이다. 도면에서 선, 층 및/또는 영역의 두께 치수는 명확성을 위해 과장되어 도시될 수 있다.
단지 몇몇 예시적인 실시예를 나타내는 첨부된 도면의 다음 설명에서, 동일한 참조 부호는 동일하거나 유사한 부품을 지칭할 수 있다. 또한, 실시예 또는 도면에서 여러 번 나타나지만 하나 이상의 특징과 관련해서 공통으로 설명되는 부품 및 객체에 대해서는 통합 참조 부호가 사용될 수 있다. 동일하거나 또는 통합된 참조 부호로 기술된 부품 또는 객체는 개별, 복수 또는 모든 특징, 예를 들어 치수와 관련하여 동일할 수 있지만, 경우에 따라서는 설명에 의해 명시적으로 또는 암시적으로 대략 다르게 언급되지 않는 한, 상이하게 구현될 수도 있다.
실시예들이 다양한 방식으로 수정되고 변경될 수 있지만, 실시예들은 도면에서 예로서 도시되고, 여기에서 상세히 설명될 것이다. 그러나, 실시예를 각 개시된 형태로 제한하도록 의도하지 않고, 실시예를 오히려 본 발명의 영역에 있는 모든 기능적 및/또는 구조적 변형, 동등물 및 대안을 포함하는 것으로 이해되어야 한다. 전체 도면 설명에서 동일한 참조 부호는 동일하거나 또는 유사한 요소를 나타낸다.
다른 요소에 "연결된" 또는 "결합된" 것으로 지칭되는 요소는, 다른 요소에 직접 연결되거나 또는 결합될 수 있거나 또는 그 사이에 개재된 요소가 존재할 수도 있음을 유의해야 한다. 반면, 한 요소가 다른 요소에 "직접 연결된" 또는 "직접 결합된" 것으로 언급되면, 그 사이에 개재된 요소가 존재하지 않는다. 요소들 간의 관계를 설명하기 위해 사용된 다른 용어들도 유사한 방식으로 해석되어야 한다(예를 들어, "사이" 대 "그 사이에 직접", "인접한" 대 "직접 인접한" 등).
여기서 사용된 용어는 단지 특정 실시예를 설명하기 위한 것이며, 실시예를 제한하고자 하는 것은 아니다. 여기서 사용된 바와 같이, 단수 형태 "a", "an" 및 "the"는 문맥상 특별히 다르게 지시하지 않는 한 복수 형태를 포함하는 의미이다. 또한, 여기서 사용된 "갖는", "함유하는", "구비하는", "포함하는", "포함된" 및/또는 "구비된"과 같은 용어는 상기 특징, 정수, 단계, 동작 흐름, 요소 및/또는 부품의 존재를 언급하지만, 하나 이상의 특징, 정수, 단계, 동작 흐름, 요소, 부품 및/또는 그룹의 존재 또는 추가를 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 여기서 사용된 모든 용어(기술 및 과학 용어 포함)는 실시예가 속하는 기술 분야의 당업자가 통상적으로 부여하는 것과 동일한 의미를 갖는다. 또한, 표현, 예를 들어 일반적으로 사용되는 사전에 정의된 표현은 관련 기술의 맥락의 의미와 일치하는 의미로 해석되어야 하며, 여기서 명시적으로 정의되지 않는 한, 이상적인 또는 지나치게 형식적인 의미로 해석되어서는 안 된다.
끊임없는 정보의 홍수 시대에, 예를 들어 차량 탑승자에게 잠재적으로 흥미롭고 그리고/또는 관련이 있는 정보가 점점 더 많아지고 있다. 정보의 과부하를 막기 위해, 어떤 정보가 언제 누구에게 관심이 있는지 세심하게 필터링되어야 한다. 오늘날 네트워킹으로 인해 차량은 이론적으로 세계의 모든 정보를 갖는다. 이러한 정보를 적시에 올바른 사용자에게 보여주기 위해, 정보의 디스플레이를 향상시켜 주행 안전성을 향상시킬 수 있는데, 왜냐하면 예를 들어 시선 분산이 감소될 수 있기 때문이다.
이러한 정보의 예는, 예를 들어 지도 또는 네비게이션 어플리케이션에서 랜드 마크, 상점 및/또는 이벤트에 대응할 수 있는 역동적인 관심 지역 정보(Point of Interest)(POI)이다. 예를 들어, 종래의 관심 지역 정보는 예를 들어 제한된 정보 베이스에 기초하고, 검색이 이루어지는 단말기에 제한되며, 예를 들어 정보를 디스플레이하는 한 가지 방법만을 제공한다. 이러한 경우, 모든 이용 가능한 정보들이 이러한 상황에서 사용자에게 관련이 없을지라도, 예를 들어 모든 이용 가능한 관심 지역 정보 또는 정보의 세부 레벨이 항상 디스플레이될 수 있다.
여기서 이동 전화는 종종 현재의 컨텍스트(예를 들어, 사용자의 시야 방향)에 적응될 수 없는 정적 디스플레이 메커니즘을 갖는다. 또한 기존의 접근법에는 집단 데이터를 사용하여 추천 사항의 후속 결정이 등록되어 추가의 추천에 적용될 수 있게 하는 메커니즘, 예를 들어 이벤트가 디스플레이된 사람들 중 얼마나 많은 사람들이 실제로 이벤트에 참여했는지가 결여되어 있다.
도 1은 차량(100)용 장치(10)의 실시예의 블록 다이어그램을 도시한다. 적어도 일부 실시예에서 차량(100)은 예를 들어 육상 운송 수단, 선박, 항공기, 철도 차량, 도로 차량, 자동차, 오프로드 차량, 자동차 또는 트럭에 대응될 수 있다.
장치(10)는 적어도 하나의 입력 인터페이스(12)를 포함한다. 적어도 하나의 입력 인터페이스(12)는 모듈 내에서, 모듈들 사이에서 또는 상이한 엔티티들의 모듈들 사이에서 코드에 기초한 전기 신호와 같은 예를 들어 대략 디지털 비트값의 정보를 수신하기 위한 하나 이상의 입력부에 대응할 수 있다. 적어도 하나의 입력 인터페이스(12)는 예를 들어 컨트롤러 네트워크 버스(Controller Area Network Bus)(CAN Bus)와 같은 공통 데이터 버스에 대한 인터페이스 및/또는 예를 들어 무선 네트워크 및/또는 유선 네트워크와 같은 공통 통신 네트워크에 대한 인터페이스에 대응할 수 있다.
입력 인터페이스(12)는 적어도 하나의 센서 모듈(110)로부터 센서 데이터를 수신하도록 형성된다. 센서 데이터는 차량(100)의 적어도 하나의 탑승자의 거동에 관한 그리고/또는 차량(100)의 주행 상황에 관한 센서 정보를 포함한다.
적어도 하나의 센서 모듈(110)은 예를 들어 시각 센서, 음향 센서, 동작 센서, 주행 시간 센서(Time of Flight(ToF) Sensor), 생체 센서(신체 센서), 가속도 센서, 위치 센서, 위성 위치 확인 시스템(GPS) 센서, 근접 센서, 기상 센서 및 온도 센서의 그룹 중 적어도 하나의 요소를 포함할 수 있다. 일부 실시예에서, 센서 정보는 시각 센서 데이터, 음향 센서 데이터, 위치 센서 데이터, 가속도 센서 데이터, 주행 다이내믹 센서 데이터, 신체 센서 데이터, 주변 광 센서 데이터, 기상 센서 데이터 및 차량 센서 데이터의 그룹 중 적어도 하나의 요소에 기초할 수 있다. 일부 실시예에서, 적어도 하나의 센서 모듈은 차량(100) 외부의 적어도 하나의 센서 모듈 및/또는 차량 내부의 적어도 하나의 센서 모듈을 포함할 수 있다.
차량(100)의 적어도 하나의 탑승자의 거동에 관한 센서 정보는 예를 들어 비디오, 이미지 또는 동작 센서 데이터를 포함할 수 있고, 상기 데이터는 적어도 하나의 탑승자의 시야 방향, 표정, 제스처 및/또는 스트레스 정도를 검출하기 위해 이후 단계에서 예를 들어 분석될 수 있다. 차량(100)의 적어도 하나의 탑승자의 거동에 관한 센서 정보는 예를 들어 다음에 소개되는 제어 모듈(14)에 의해, 이후 단계에서 예를 들어 음성 언어, 표현, 소리 등에 대해 분석될 수 있는 음향 데이터를 또한 포함할 수 있다. 차량(100)의 주행 상황에 관한 센서 정보를 제공하기 위해, 예를 들어 리브, 터닝, 진입 및 불분명한 교차로에서와 같은 인지적으로 까다로운 활동의 경우와 같이 교통 인프라 구조 내에서 그리고 다른 차량에 대한 차량(100)의 위치를 이미징하기 위해, 가속도 센서, 위치 센서, 근접 센서, 기상 센서 및/또는 온도 센서의 데이터가 예를 들어 사용될 수 있다. 교통 인프라 구조는 예를 들어 도로, 길, 출구, 분기, 다리, 터널, 신호등, 표시판, 교차로 등을 포함할 수 있다.
또한 장치(10)는 제어 모듈(14)을 포함한다. 실시예에서 제어 모듈(14)은 임의의 컨트롤러 또는 프로세서 또는 프로그래밍 가능한 하드웨어 부품에 대응할 수 있다. 예를 들어 제어 모듈(14)은 대응하는 하드웨어 부품 상으로 프로그래밍되는 소프트웨어로서도 구현될 수 있다. 이와 관련하여, 제어 모듈(14)은 대응하게 적응된 소프트웨어를 포함하는 프로그래밍 가능한 하드웨어로서 구현될 수 있다. 여기서 디지털 신호 프로세서(DSPs)와 같은 임의의 프로세서가 사용될 수 있다. 이 경우 실시예는 특정한 타입의 프로세서에 제한되지 않는다. 제어 모듈(14)의 구현을 위해 임의의 프로세서 또는 복수의 프로세서도 또한 고려될 수 있다.
제어 모듈(14)은 센서 정보에 기초하여 차량 탑승자의 잠재적 정보 필요성을 결정하도록 형성된다.
적어도 일부 실시예에서, 잠재적 정보 필요성의 결정은 센서 정보의 분석을 포함할 수 있다. 센서 정보의 분석을 위해 제어 모듈(14)은 예를 들어 시야 방향, 지시 방향, 표정, 제스처 및/또는 스트레스 상태를 확인하도록 예를 들어 비디오, 이미지, 동작 및/또는 주행 시간 센서 데이터의 분석을 수행하도록 형성될 수 있다. 제어 모듈(14)은 예를 들어 비디오 및 주행 시간 센서 데이터에 기초하여 심층 분석(Depth Analysis)을 수행하고, 심층 분석에 기초하여 적어도 하나의 탑승자의 3차원 이미징을 확인하도록 형성될 수 있다. 3차원 이미징에 기초하여, 제어 모듈(14)은 예를 들어 적어도 하나의 탑승자의 시야 방향 및/또는 지시 동작을 확인할 수 있다. 제어 모듈(14)은 또한 적어도 하나의 탑승자의 표정 및/또는 제스처를 확인하기 위해 예를 들어 안면 인식, 안면 당사자의 인식 및 안면 근육 활동 부호화 체계(Facial Action Coding System)(FACS)에 기초하여 이미지 센서 데이터의 이미지 분석을 실행하도록 형성될 수 있다. 제어 모듈(14)은 또한 예를 들어 음량 분석에 의해 그리고/또는 음성 내용 분석을 통해 음향 센서 데이터를 분석하도록 형성될 수 있다. 또한 제어 모듈(14)은 예를 들어 상대적인 음성 정지의 분석을 통해 음성 내용 분석을 위해 연속적인 음성 성분을 분리하고, 연속적인 음성 성분을 음성 분석 서버에 제공하고, 예를 들어 이동 통신 네트워크를 통해 음성 분석 서버로부터 언급된 문장 또는 문장의 의미를 수신하도록 형성될 수 있다.
몇몇 실시예에서, 제어 모듈(14)은 또한 가속도, 주행 다이내믹, 주변 광, 기상 및 근접 센서 데이터에 기초하여, 예를 들어 교통 인프라 구조와 관련하여 그리고 위치 데이터 및 위치 센서 데이터에 기초하여 주행 상황을 결정하도록 형성될 수 있다. 제어 모듈(14)은 예를 들어 위험한 주행 상황과 관련된, 예를 들어 알고 있는 센서 데이터의 데이터 베이스에 기초하여, 패턴 인식에 기초하여 위험 주행 상황을 인식하도록 형성될 수 있다. 예를 들어 제어 모듈(14)은 주행 상황을 확인하기 위해 센서 정보 및 알고 있는 센서 데이터에 기초하여 단변수 또는 다변수 상관 분석을 수행하도록 형성될 수 있다. 제어 모듈(14)은 예를 들어 주행 상황에서 차량의 운전자가 필요로 하는 주의에 기초하여 검출된 주행 상황을 분류하도록 형성될 수 있다.
제어 모듈(14)은 적어도 하나의 탑승자의 거동 및/또는 주행 상황에 관한 분석된 센서 정보에 기초하여 적어도 하나의 탑승자의 잠재적 정보 필요성을 결정하도록 형성될 수 있다. 적어도 몇몇 실시예에서, 제어 모듈(14)은 센서 정보에 기초한 확률 함수에 기초하여 잠재적 정보 필요성을 결정하도록 형성될 수 있다.
적어도 일부 실시예에서, 제어 모듈(14)은 예를 들어 요구되는 주의에 기초한 상기 분류에 기초하여, 예를 들어 인식된 주행 상태에 기초한 잠재적 정보 필요성의 세부 레벨을 결정하도록 형성될 수 있다. 제어 모듈(14)은 예를 들어 주행 상황이 운전자의 높은 주의를 필요로 할 때, 잠재적 정보 필요성을 감소시킬 수 있다. 또한 제어 모듈(14)은 실제 주행 상황 및/또는 위치 센서 데이터 및/또는 위치 데이터에 기초하여, 예를 들어 네비게이션 정보 또는 실제로 볼 수 있는 건물 및/또는 교통 인프라 구조에 관한 정보와 같은 주행 상황에 관련될 수 있는 정보에 기초한 잠재적 정보 필요성을 결정하도록 형성될 수 있다. 예를 들어 제어 모듈(14)은 위치 데이터, 위치 센서 데이터 및/또는 차량의 주행 방향에 기초하여, 잠재적 정보 필요성, 예를 들면 건물 및/또는 교통 인프라 구조에 관한 정보에 대한 필요성을 결정하도록 형성될 수 있다.
몇몇 실시예에서, 제어 모듈(14)은 적어도 하나의 탑승자의 거동에 기초하여 잠재적 정보 필요성을 결정하도록 형성될 수 있다. 제어 모듈(14)은 예를 들어 하나 이상의 디스플레이 장치(120), 차량의 조작 요소에 대한 그리고/또는 차량의 주변의 건물 및/또는 교통 인프라 구조에 대한, 예를 들어 적어도 하나의 탑승자의 시야 방향 및/또는 지시 방향에 기초한 잠재적 정보 필요성을 결정하도록 형성될 수 있다. 제어 모듈(14)은 예를 들어 시야 방향 및/또는 지시 방향에 기초하여 건물, 교통 인프라 구조, 네비게이션 정보, 조작 요소 및 미디어 정보에 따른 잠재적 정보 필요성을 결정하도록 형성될 수 있다. 또한 제어 모듈(14)은 예를 들어, 적어도 하나의 탑승자의 표정, 제스처 및/또는 소리에 기초하여, 음악과 같은 재생되는 미디어에 관한 정보에 대한 잠재적 정보 필요성을 결정하도록 형성될 수 있다. 제어 모듈(14)은 예를 들어, 적어도 하나의 탑승자의 표정, 제스처 및/또는 소리에 기초하여 노래 가사 및/또는 노래에 관한 추가 정보에 대한 잠재적 정보 필요성을 결정하도록 형성될 수 있다. 예를 들어 적어도 한 명의 탑승자의 리드미컬한 트롬멜은 현재 재생중인 노래 또는 구매 가능성에 대한 추가적 정보에 잠재적 관심을 암시할 수 있다.
또한 제어 모듈(14)은 잠재적 정보 필요성에 대응하는 정보를 제공하도록 형성된다. 잠재적 정보 필요성에 대응하는 정보에는 예를 들어 차량(100)에 관한 정보, 차량(100)의 차량 상태에 관한 정보, 차량(100)의 위치에 관한 정보, 차량(100)의 주변에서 위치에 관한 정보, 차량(100)의 주변에서 이벤트에 관한 정보, 차량(100)의 미디어 재생 시스템의 미디어에 관한 정보 및 위치 데이터의 그룹 중 적어도 하나가 포함될 수 있다.
예를 들어 제어 모듈(14)은 잠재적 정보 필요성에 대응하는 정보를 제공하기 위해 잠재적 정보 필요성에 대응하는 정보를 요청하고 수신하도록 형성될 수 있다. 예를 들어 제어 모듈(14)은 이동 무선 인터페이스를 통해 잠재적 정보 필요성에 대응하는 정보를 요청하고 수신하도록 형성될 수 있다. 이동 무선 인터페이스는 이동 통신 네트워크, 예를 들어 UMTS(Universal Mobile Telecommunication System), LTE(Long Term Evolution) 또는 LTE-A(LTE-Advanced), 5세대 이동 통신 네트워크에 대한 인터페이스에 상응할 수 있거나, 또는 무선 근거리 통신망(Wireless Local Area Network)(WLAN)에 대한 인터페이스에 상응할 수 있다.
적어도 일부 실시예에서, 제어 모듈(14)은 예를 들어 필요한 전송 용량을 감소시키기 위해, 요구하는 정보를 잠재적 정보 필요성에 기초하도록 형성될 수 있다. 또한 몇몇 실시예에서, 제어 모듈(14)은 예를 들어 필요한 전송 용량을 감소시키기 위해, 적어도 하나의 탑승자의 적어도 하나의 선호도 프로파일에 기초하여 잠재적 관심을 결정하고 그리고/또는 제한하고, 그리고/또는 적어도 하나의 선호도 프로파일에 기초하여 정보를 요청하도록 형성될 수 있다. 여기서 예를 들어 선호도 프로파일은 적어도 하나의 탑승자의 관심, 기호, 관계 및/또는 이전 결정을 포함하는 데이터 집합에 대응할 수 있다. 선호도 프로파일은 예를 들어, 음식 기호도, 스포츠 및 음악 이벤트에 대한 관심, 스포츠 및/또는 예술 그룹 및/또는 예술 방향에 대한 관심을 포함할 수 있고 그리고/또는 표현된 정보의 원하는 세부 레벨에 대한 정보를 포함할 수 있다. 또한 일부 실시예에서, 선호도 프로파일은 정보의 표현에 대한 반응에 관한 정보를 포함할 수 있다.
적어도 일부 실시예에서, 잠재적 정보 필요성에 대응하는 정보는, 적어도 하나의 탑승자에게 실제로 관련이 있고 인식된 주행 상황에서 적어도 하나의 탑승자의 주의 필요성에 따라 차량의 안전성에 과잉으로 악영향을 미치지 않는 정보에 해당할 수 있다.
또한 몇몇 실시예에서 제어 모듈(14)은 센서 정보에 기초하여 잠재적 정보 필요성에 대응하는 정보의 세부 레벨을 적응성으로 조정하도록 형성될 수 있다. 예를 들어 제어 모듈(14)은 조정된 세부 레벨에 기초하여 잠재적 정보 필요성에 대응하는 정보를 요청하도록 형성될 수 있거나, 또는 제어 모듈(14)은 예를 들어 메타 데이터 및/또는 태그(tags)와 같은 텍스트의 구조적 특징에 기초하여 또는 전체 텍스트 분석에 기초하여 잠재적 정보 필요성에 대응하는 정보의 제공을 위해 이미 수신된 정보를 제한하도록 형성될 수 있다.
또한 제어 모듈(14)은 센서 정보에 기초하여 차량에서 잠재적 정보 필요성에 대응하는 정보의 표현 방식을 확인하도록 형성된다. 적어도 일부 실시예에서, 분배의 표현 방식은 하나 이상의 디스플레이 장치(120) 상에서 잠재적 정보 필요성에 대응하는 정보의 표현의 분포에 대응할 수 있다. 이 경우 예를 들어, 분포는 디스플레이 장치 상에서 잠재적 정보 필요성에 대응하는 정보 표현의 배치 또는 복수의 디스플레이 장치 상에서 잠재적 정보 필요성에 대응하는 정보의 표현의 할당에 대응할 수 있다.
적어도 일부 실시예에서, 제어 모듈(14)은 예를 들어 적어도 하나의 탑승자의 시야 방향에 기초하여 그리고/또는 인식된 주행 상황에 기초하여 표현 방식을 결정할 수 있다. 예를 들어 제어 모듈(14)은 네비게이션 지시에 관한 잠재적 정보 필요성의 경우 운전자의 시야 방향에서 디스플레이 장치 상에 네비게이션 지시의 표현을 배치할 수 있고 그리고/또는 제어 모듈(14)은 예를 들어 건물에 관한 잠재적 정보 필요성에 대응하는 정보를, 적어도 하나의 탑승자로부터 볼 때 건물과 동일한 시야 방향으로 위치하는 디스플레이 장치 상에 표현할 수 있다. 적어도 일부 실시예에서, 차량 내부에 복수의 탑승자가 있는 경우, 제어 모듈(14)은 잠재적 정보 필요성에 대응하는 정보의 표현을, 잠재적인 관심이 기초로 하는 거동을 하는 탑승자의 시야 방향의 디스플레이 장치 상에 배치하도록 형성될 수 있다.
적어도 일부 실시예에서, 제어 모듈(14)은 2개 이상의 중첩된 표현 레벨에 기초하여 표현 방식을 확인하도록 형성될 수 있다. 이 경우 표현 레벨은 예를 들어 광학적으로 병렬로 디스플레이되는 표현의 논리적 집합에 해당될 수 있다. 2개 표현 레벨이 중첩되면, 다른 표현 레벨 위에 논리적으로 배치된 표현 레벨은 이들 다른 표현 레벨을 적어도 부분적으로 커버할 수 있다. 일부 실시예에서, 상이한 표현 레벨 상에 정보의 표현이 병렬로 표현될 수 있거나, 또는 논리적으로 다른 표현 레벨 상에 배치된 표현이 다른 표현 레벨과 중첩될 수 있다. 적어도 일부 실시예에서, 2개 이상의 중첩된 표현 레벨은 평면도로 디스플레이될 수 있고, 즉 표현 레벨이 완전히 중첩되거나, 또는 표현 레벨이 예를 들어 서로 평행하게 그리고 서로 중첩되어 배치될 수 있고, 3차원 표현으로 디스플레이될 수 있다. 예를 들어 2개 이상의 중첩된 표현 레벨(영어로, 레이어(layer))은 동일한 디스플레이 장치 상에 표현될 수 있고, 여기서 표현 레벨은 다른 표현 레벨을 완전히 커버할 수 있거나(불투명한 표현 레벨) 또는 보완할 수 있다(투명한 배경의 표현 레벨). 디스플레이 장치는 예를 들어 비디오 또는 제어 신호에 기초하여 2개 이상의 표현 레벨을 표현하도록 형성될 수 있다.
적어도 일부 실시예에서, 2개 이상의 중첩된 표현 레벨 중 하나의 표현 레벨은 예를 들어 속도, 가속도, 주행 거리와 같은 차량의 기본 정보의 표현을 포함할 수 있고, 2개 이상의 중첩된 표현 레벨 중 적어도 하나의 다른 표현 레벨은 잠재적 정보 필요성에 대응하는 정보를 포함할 수 있다. 적어도 일부 실시예에서, 제어 모듈(14)은 센서 정보에 기초하여 잠재적 정보 필요성에 대응하는 정보의 표현을 포함하는 표현 레벨을 페이드 인 및 페이드 아웃하거나 또는 잠재적 정보 필요성에 대응하는 정보의 세부 레벨을 이러한 표현 레벨에 대해 조정하도록 형성될 수 있다.
또한 장치(10)는 차량(100)의 하나 이상의 디스플레이 장치(120)에 확인된 표현 방식에 따라 적어도 하나의 비디오 또는 제어 신호를 제공하기 위한 적어도 하나의 출력 인터페이스(16)를 포함한다. 적어도 일부 실시예에서, 제어 모듈(14)은 잠재적 정보 필요성에 대응하는 정보 및 표현 방식 및/또는 표현 레벨에 기초하여 비디오 또는 제어 신호를 계산하도록 형성될 수 있다. 비디오 또는 제어 신호는 예를 들어 전자, 광학 또는 무선 신호일 수 있다. 출력 인터페이스(16)는 예를 들어 정보(예를 들어 이미지의 형태임)를 재생하기 위해 각각의 디스플레이 장치[예를 들어 하나 이상의 디스플레이 장치(120)]에 의해 처리될 수 있는 포맷으로 비디오 신호 또는 제어 신호를 제공할 수 있다. 출력 인터페이스(16)는 예를 들어 디지털 비트 값으로 된 코드에 기초한 전기 신호와 같은 정보를 모듈 내에서, 모듈들 사이에서 또는 상이한 엔티티들의 모듈들 사이에서 전송하기 위한 하나 이상의 출력들에 대응할 수 있다. 제어 모듈(14)은 적어도 하나의 입력 인터페이스(12) 및 출력 인터페이스(16)에 결합된다. 하나 이상의 디스플레이 장치(120)는 정보 재생 시스템, 조합 디스플레이 시스템 및 프로젝션 기반 디스플레이 시스템의 그룹 중 적어도 하나의 요소를 포함할 수 있다.
적어도 일부 실시예에서, 제어 모듈(14)은 차량 대 차량 통신 데이터를 획득하도록 추가로 형성될 수 있다. 제어 모듈(14)은 또한 차량 대 차량 통신 데이터에 기초하여 잠재적 정보 필요성을 결정하도록 형성될 수 있다. 적어도 일부 실시예에서, 차량 대 차량 통신은 사고 및/또는 잼(jam)에 관한 정보와 같은 교통의 전개에 관한 정보를 포함할 수 있고, 제어 모듈(14)은 추가로 잠재적 정보 필요성이 교통의 전개에 관한 정보를 기초로 하도록 형성될 수 있다.
도 2는 차량(100)용 장치(10)의 실시예의 블록 다이어그램을 도시하며, 장치(10)는 메모리 모듈(18)을 더 포함한다. 장치(10)는 적어도 하나의 입력 인터페이스(12), 제어 모듈(14) 및 출력 인터페이스(16)를 더 포함한다. 제어 모듈(14)은 적어도 하나의 입력 인터페이스(12), 출력 인터페이스(16) 및 메모리 모듈(18)에 결합된다. 적어도 하나의 입력 인터페이스는 적어도 하나의 센서 모듈(110)로부터 센서 데이터를 수신하도록 형성되고, 출력 인터페이스(16)는 비디오 또는 제어 신호를 하나 이상의 디스플레이 장치(120)에 제공하도록 형성된다.
몇몇 실시예에서 메모리 모듈(18)은 예를 들어 하드 디스크, 플래시 메모리, 디스켓, 랜덤 액세스 메모리(RAM), 프로그래밍 가능한 읽기 전용 메모리(PROM), 소거 프로그래밍 가능한 읽기 전용 메모리(EPROM), 전자적으로 소거 프로그래밍 가능한 읽기 전용 메모리(EEPROM) 및 네트워크 메모리와 같은 예를 들어 자기 또는 광학 저장 매체와 같은 컴퓨터 판독 가능 저장 매체의 그룹 중 적어도 하나의 요소를 포함할 수 있다.
제어 모듈(14)은 센서 데이터에 기초하여 표현 방식에 대한 적어도 하나의 탑승자의 반응을 결정하여 메모리 모듈(18)을 통해 저장하도록 형성될 수 있다. 제어 모듈(14)은 또한 저장된 반응 및 적응성 학습 기능에 기초하여 표현 방식을 결정하도록 형성될 수 있다. 적어도 일부 실시예에서, 예를 들어 반응은 표현 방식의 수동 보정을 포함할 수 있고 그리고/또는 적어도 하나의 탑승자의 거동은 적어도 하나의 탑승자의 스트레스를 포함할 수 있다. 제어 모듈(14)은 예를 들어 패턴 인식에 의한 반응을 알고 있는 반응의 그룹과 비교하여, 반응을 분류하고 평가하도록 형성될 수 있다.
적어도 일부 실시예에서, 메모리 모듈(18)은 적어도 하나의 탑승자의 선호도 프로파일을 포함할 수 있다. 제어 모듈(14)은 적어도 하나의 선호도 프로파일에 기초하여 잠재적 정보 필요성 및/또는 표현 방식을 더 결정하도록 형성될 수 있다. 몇몇 실시예에서 제어 모듈(14)은 적어도 하나의 선호도 프로파일에 기초하여 잠재적 정보 필요성에 대응하는 정보를 수신 및/또는 요청하도록 형성될 수 있다. 제어 모듈(14)은 예를 들어 반응에 기초하여 선호도 프로파일을 생성 및/또는 조정하도록 형성될 수 있다.
예시적인 실시예에서, 잠재적 정보 필요성에 대응하는 정보는 차량의 주변의 이벤트에 관한 정보를 포함할 수 있다. 제어 모듈(14)은 적어도 하나의 선호도 프로파일에 기초하여 이벤트에 관한 정보를 수신하거나 요청하도록 형성될 수 있다.
적어도 일부 실시예에서, 잠재적 관심에 대응하는 정보는 예를 들어 세부 정보가 존재할 수 있는 지역 이벤트(콘서트, 스포츠 이벤트 등), 레스토랑, 클럽 등에 관한 데이터베이스에 기초할 수 있다(언제 이벤트가 열리는가, 장소는 어디인가, 식당에 얼마나 많은 좌석이 남아 있는가 등). 이러한 정보는 예를 들어 인터넷, 차량 대 차량 통신으로 수집된 데이터, 또는 차량 데이터 자체에서 불러올 수 있다.
이러한 데이터베이스는 예를 들어 세부 사용자 정보를 포함할 수 있는 선호도 프로파일을 기초로 하여 불러올 수 있다. 이러한 사용자 정보는 예를 들어 사용자의 기호(어떤 음악을 듣는지, 어떤 음식을 먹는지), 현재 일정(직장에 가는 중인지 또는 주말인지? 친구를 만나는지 또는 부모에게 가는지?) 또는 대략 가장 좋아하는 클럽과 같은 것을 포함할 수 있다. 선호도 프로파일에 기초하여 알고 있는(또는 검출된) 이벤트가 선택될 수 있고, 제어 모듈(14)은 잠재적 관심에 대응하는 정보를 수신하도록 형성될 수 있다.
적어도 일부 실시예에서, 적어도 하나의 선호도 프로파일은 캘린더 정보를 포함할 수 있다. 제어 모듈(14)은 캘린더 정보에 기초하여 이벤트에 관한 정보를 수신하거나 또는 요청하도록 형성될 수 있다.
이벤트에 관한 정보에는 이벤트의 가용성에 대한 정보가 포함될 수 있다. 제어 모듈(14)은 가용성에 기초하여 이벤트에 관한 정보를 수신하거나 또는 요청하도록 형성될 수 있다. 일부 실시예에서, 메모리 모듈(18)은 위치 데이터를 포함할 수 있고, 제어 모듈(14)은 위치 데이터에 기초하여 이벤트에 관한 정보를 수신하거나 또는 요청하도록 형성될 수 있다. 위치 데이터는 예를 들어 지도 데이터, 건물, 상점, 미식에 관한 정보 및/또는 경로 제한에 관한 정보를 포함할 수 있다.
위치 데이터를 기초로 하여, 이벤트는 예를 들어 거리, 차량 상태(주유하기 위해 우회로가 나은지 또는 다른 우회로로 가야 하는지? 차량이 현재 타이어로 자갈길을 계속 주행할 수 있는지?), 차량이 (예를 들어 미세 먼지 상태로 인해) 시내로 가도 되는지, 현재와 미래의 교통 상황이 어떤지 등에 기초하여 필터링될 수 있다.
또한 제어 모듈(14)은 선호도 프로파일에 기초하여 이벤트에 관한 정보를 요청하고, 이벤트의 인기도에 기초하여 필터링하거나 또는 (예를 들어 개인적으로 선호하는 밴드가 아니라면) 정보를 불러올 때 제한하도록 형성될 수 있다. 여기서 예를 들어 소셜 미디어의 정보를 사용하여, 이벤트의 인기도(트위터의 팬의 숫자)와 해당 이벤트의 대상 그룹에 대한 추론을 도출할 수 있다. 예를 들어, 덜 인기 있는 이벤트 또는 다른 대상 그룹의 이벤트가 처음부터 필터링될 수 있다.
제어 모듈(14)은 차량에서 이용 가능한 데이터, 차량 대 차량 통신 또는 차량 대 인프라 통신에 관한 다른 차량으로부터의 정보 및 페이스북, 현장 대리점, 기상 제공업체 등과 같은 다른 제공 업체로부터의 정보에 의한 인터넷의 누적된 정보에 기초하여 선호도 프로파일 및 차량 상태를 결정하도록 형성될 수 있다. 적어도 하나의 탑승자의 선호도 프로파일을 알 수 있으므로, 따라서 특정 이벤트 카테고리에 대한 관심일 수 있다. 곧 개최될 이벤트에 참여하기로 즉석에서 결정할 높은 가능성이 도출되거나 또는 그 주변에 있다면[차량 상태, 충분한 범위, 시간 부담이 없음(캘린더 정보), 재정 상황, 분위기(거동에 관한 센서 정보), 야외 이벤트 장소에 대한 날씨 상황 등], 적어도 하나의 탑승자에게 이벤트에 대한 정보(이벤트 정보, 시작, 종료, 위치, 인기도, 지도 가용성)가 디스플레이될 수 있다.
몇몇 실시예에서, 얼마나 많은 운전자가 유사한 상황에 있고, 따라서 즉석에서 이벤트 장소로 운전하기로 결정할 수 있는지를 중점적으로 알 수 있다. 이벤트에 관한 정보는 예를 들어 아직 사용 가능한 지도를 얻을 수 있는 기회가 어느 정도인지를 포함할 수 있다. 이는 예를 들어 현재 사용 가능한 지도, 운전자의 숫자를 기초로 하여 즉석에서의 관심을 보여줄 수 있고, 인기 수준도 계산될 수 있다.
운전자가 현재 자신의 지도를 판매하고자 하는 경우, 판매 운전자와 가장 가까이 위치하는 구매 운전자는 네비게이션을 통해 서로 탐색할 수 있으므로, 지도 교환을 위한 지점에서 만나게 된다.
도 3은 장치(10) 및 하나 이상의 디스플레이 장치(120)를 포함하는 차량(100)의 실시예의 블록 다이어그램을 도시한다. 장치(10)는 적어도 하나의 비디오 또는 제어 신호를 하나 이상의 디스플레이 장치(120)에 제공하도록 형성된다. 선택적으로, 차량(100)은 적어도 하나의 센서 모듈(110)을 더 포함한다. 하나 이상의 디스플레이 장치(120)는 정보 재생 시스템, 조합 디스플레이 시스템, 프로젝션 기반 디스플레이 시스템, 박막 트랜지스터(TFT) 스크린, 터치 감응성 스크린, 소위 터치 스크린 또는 헤드 업 디스플레이(Head Up Display)의 그룹 중 적어도 하나의 요소를 포함할 수 있고, 이들은 예를 들어 차량의 센터 콘솔에 또는 사용자가 볼 때 대시보드의 영역에서 차량의 핸들 후방에 배치된다.
예를 들어, 차량의 센터 콘솔에 포함될 수 있는 정보 재생 시스템은 출력 인터페이스(16)에 의해 제공된 비디오 또는 제어 신호를 디스플레이하도록 형성될 수 있다. 잠재적 관심에 대응하는 정보는 예를 들어 표현 레벨에 기초하여 정보 재생 시스템에서 새로운 표현 레벨로서 표현될 수 있다.
조합 디스플레이 시스템은 정보 재생 시스템과 세부 레벨이 상이하므로, 예를 들어 잠재적 관심에 대응하는 정보는 상이한 세부 레벨로 디스플레이될 수 있다.
헤드 업 디스플레이는 조합 디스플레이 시스템과 정보 재생 시스템 사이의 세부 레벨로 볼 수 있다. 잠재적 관심에 대응하는 정보는 운전자의 시야에 투사될 수 있다. 운전자가 주행 방향에 눈을 두고 있는 한, 잠재적 관심에 대응하는 정보의 표현은 회전 방향을 갖는 주행 시 정보 재생 시스템에 생성될 수 있다. 예를 들어 이러한 경우, 정보의 표현은 헤드 업 디스플레이에 집중될 수 있고, 정보 재생 시스템은 기본 정보만을 디스플레이 할 수 있다.
또 다른 가능성은 차량 전방의 도로 상으로의 컬러 프로젝션이다. 이러한 경우, 운전자에게는 예를 들어 잠재적 관심에 대응하는 정보가 낮은 세부 레벨로 디스플레이될 수 있다.
도 4는 차량(100)용 방법의 실시예의 흐름 다이어그램을 도시한다. 상기 방법은 적어도 하나의 센서 모듈(110)로부터 센서 데이터를 수신하는 단계(22)를 포함하고, 상기 센서 데이터는 차량(100)의 적어도 하나의 탑승자의 거동 및/또는 차량(100)의 주행 상황에 관한 센서 정보를 포함한다. 상기 방법은 또한 센서 정보에 기초하여 차량 탑승자의 잠재적 정보 필요성을 결정하는 단계(24)를 포함한다. 상기 방법은 또한 잠재적 정보 필요성에 대응하는 정보를 제공하는 단계(26)를 포함한다. 상기 방법은 또한 센서 정보에 기초하여 차량 내의 잠재적 정보 필요성에 대응하는 정보의 표현 방식을 확인하는 단계(28)를 포함한다. 상기 방법은 또한 차량의 하나 이상의 디스플레이 장치(120) 상에 확인된 표현 방식에 따라 적어도 하나의 비디오 또는 제어 신호를 제공하는 단계(30)를 포함한다.
다른 실시예는 컴퓨터 프로그램이 컴퓨터, 프로세서 또는 프로그래밍 가능한 하드웨어 부품 상에서 실행될 때, 전술한 방법들 중 적어도 하나를 수행하기 위한 상기 컴퓨터 프로그램에 관한 것이다. 또 다른 실시예는 기계 또는 컴퓨터 판독 가능하고, 전술한 방법들 중 하나를 수행하기 위해 프로그래밍 가능한 하드웨어 부품과 상호 작용할 수 있는 전자 판독 가능 제어 신호를 포함하는 디지털 저장 매체다.
전술한 설명, 이하의 청구항 및 첨부된 도면에 개시된 특징은 다양한 형태의 실시예의 실현을 위해 개별적으로 그리고 임의의 조합으로 중요할 수 있고 구현될 수 있다.
일부 양태가 장치와 관련해서 기술되었지만, 이러한 양태들은 대응하는 방법의 설명도 나타내므로, 장치의 블록 또는 구성 요소가 또한 대응하는 방법 단계 또는 방법 단계의 특징으로서 간주되어야 한다는 것이 자명하다. 유사하게, 방법 단계와 관련하여 또는 방법 단계로서 기술된 양태들은 대응하는 블록 또는 대응하는 장치의 상세 또는 특징의 설명을 나타낸다.
예를 들어, 실시예는 컨텍스트 의존성 정보 필터링, 정보 선택 및 표현 방식을 제공할 수 있다. 일부 실시예에서, 표현 레벨-표현 방식은 잠재적 관심에 대응하는 정보를 알려진 컨텍스트로 통합할 수 있다(완전히 새로 계산된 표현은 필요하지 않고, 변경을 포함하는 표현 레벨로 충분할 수 있다).
적어도 몇몇 실시예에서, 학습 알고리즘이 예를 들어 제어 모듈(14)에서, 어떤 정보가 언제(현재 위험한 상황에 있는가) 그리고 어디에서 사용자에게(또한 차량에 앉아 있는 모든 알고 있는 사람을 포함) 디스플레이되는지를 결정할 수 있다. 이러한 경우 제어 모듈(14)은 운전자의 상황에 적응성으로 반응하고, 가능하게는 정보의 손실 없이 정보의 홍수를 막을 수 있다.
특정 구현 요건들에 따라, 본 발명의 실시예는 하드웨어 또는 소프트웨어로 구현될 수 있다. 구현은 예를 들어 프로그래밍 가능한 하드웨어 부품과 상호 작용할 수 있거나 또는 각각의 방법이 수행되는 방식으로 상호 작용하는 전자 판독 가능 제어 신호가 저장되는 플로피 디스크, DVD, 블루레이 디스크, CD, ROM, PROM, EPROM, EEPROM 또는 플래시 메모리, 하드 디스크 또는 다른 자기 메모리 또는 광학 메모리와 같은 디지털 저장 매체를 사용하여 수행될 수 있다.
프로그래밍 가능한 하드웨어 부품은 프로세서, 중앙 처리 장치(CPU), 그래픽 처리 장치(GPU), 컴퓨터, 컴퓨터 시스템, ASIC(Application-Specific Integrated Circuit), 집적 회로(Integrated Circuit), SOC(System On Chip), 프로그래밍 가능한 로직 요소 또는 마이크로 프로세서를 갖는 필드 프로그래밍 가능 게이트 어레이(FPGA)(Field Programmable Gate Array)에 의해 형성될 수 있다.
따라서 디지털 저장 매체는 기계 또는 컴퓨터 판독 가능할 수 있다. 따라서, 일부 실시예는 여기에 설명된 방법 중 하나가 수행되도록 프로그래밍 가능한 컴퓨터 시스템 또는 프로그래밍 가능한 하드웨어 부품과 상호 작용할 수 있는 전자 판독 가능 제어 신호를 포함하는 데이터 캐리어를 포함한다. 따라서 실시예는 여기에 설명된 방법들 중 하나를 수행하기 위해 프로그램이 기록되어 있는 데이터 캐리어(또는 디지털 저장 매체 또는 컴퓨터 판독 가능 매체)이다.
일반적으로, 본 발명의 실시예들은 프로그램 코드를 갖는 프로그램, 펌웨어, 컴퓨터 프로그램 또는 컴퓨터 프로그램 제품으로서 또는 데이터로서 구현될 수 있으며, 프로그램이 프로세서 또는 프로그래밍 가능한 하드웨어 부품 상에서 실행될 때, 프로그램 코드 또는 데이터가 방법들 중 하나를 수행하도록 동작한다. 프로그램 코드 또는 데이터는 또한 예를 들어 기계 판독 가능 캐리어 또는 데이터 캐리어 상에 저장될 수 있다. 프로그램 코드 또는 데이터는 특히 소스 코드, 기계 코드 또는 바이트 코드 및 기타 중간 코드로도 사용할 수 있다.
또 다른 실시예는 또한 여기에 설명된 방법들 중 하나를 실행하기 위한 프로그램을 나타내는 데이터 스트림, 신호 시퀀스 또는 신호들의 시퀀스이다. 데이터 스트림, 신호 시퀀스 또는 신호들의 시퀀스는 예를 들어 데이터 통신 접속을 통해, 예를 들어 인터넷 또는 다른 네트워크를 통해 전송되도록 구성될 수 있다. 따라서, 실시예들은 또한 네트워크를 통한 전송 또는 데이터 통신 접속에 적합한 신호 시퀀스를 나타내는 데이터이며, 상기 데이터는 프로그램을 나타낸다.
예를 들어, 일 실시예에 따른 프로그램은 예를 들어 이러한 메모리 위치를 판독하거나 또는 이들 메모리 위치에 하나 이상의 데이터를 기록함으로써 실행 중 방법들 중 하나를 구현할 수 있으며, 이에 의해 트랜지스터 구조, 증폭기 구조 또는 다른 전기적, 광학적, 자기적 또는 다른 기능적 원리에 따라 동작하는 부품에서 필요한 경우 스위칭 동작 또는 다른 동작이 선택적으로 발생된다. 따라서 메모리 위치를 판독함으로써, 데이터, 값, 센서 값 또는 다른 정보가 프로그램에 의해 검출, 결정 또는 측정될 수 있다. 따라서 프로그램은 하나 이상의 메모리 위치의 판독에 의해 변수, 값, 측정 변수 및 다른 정보를 검출, 결정 또는 측정할 수 있을 뿐만 아니라, 하나 이상의 메모리 위치에의 기록을 통해 다른 장치, 기계 및 부품을 제어하여 작동을 발생시키고, 트리거링하고 또는 실행할 수 있다.
전술한 실시예는 본 발명의 원리를 설명하기 위한 것일 뿐이다. 본 명세서에 설명된 구성 및 세부 사항의 수정 및 변형은 당업자에게 명백할 것임은 자명하다. 따라서, 본 발명은 본 명세서의 실시예에 대한 설명 및 기술에 제공된 특정 세부 사항보다는 오히려 첨부된 청구항의 청구범위에 의해서만 제한되는 것으로 의도된다.
10 장치
12 적어도 하나의 입력 인터페이스
14 제어 모듈
16 출력 인터페이스
18 메모리 모듈
22 수신
24 결정
26 제공
28 확인
30 제공
100 차량
110 적어도 하나의 센서 모듈
120 하나 이상의 디스플레이 장치
12 적어도 하나의 입력 인터페이스
14 제어 모듈
16 출력 인터페이스
18 메모리 모듈
22 수신
24 결정
26 제공
28 확인
30 제공
100 차량
110 적어도 하나의 센서 모듈
120 하나 이상의 디스플레이 장치
Claims (10)
- 차량을 위한 장치에 있어서,
상기 차량의 내부에서 이미지 데이터 또는 오디오 데이터를 검출함으로써 상기 차량의 내부에서 상기 차량의 적어도 하나의 탑승자의 거동을 나타내는 센서 데이터를 감지하기 위한 적어도 하나의 센서 모듈과, 상기 차량의 주행 조건을 나타내는 센서 데이터를 감지하기 위한 적어도 하나의 센서 모듈을 포함하는 복수의 센서 모듈;
상기 복수의 센서 모듈로부터 상기 센서 데이터를 수신하는 적어도 하나의 입력 인터페이스;
제어 모듈로서,
상기 차량의 내부에서 상기 적어도 하나의 탑승자의 물리적인 움직임, 얼굴 표정 및 음성 중 적어도 하나를 나타내는 상기 차량의 내부에서 수집된 센서 데이터에 기초하여 상기 차량의 적어도 하나의 탑승자의 거동을 결정하고,
상기 차량의 성능 및 상기 차량 주위의 환경 조건을 나타내는 센서 데이터에 기초하여 상기 차량의 주행 조건을 결정하며,
적어도 하나의 입력 인터페이스를 통해 상기 복수의 센서 모듈로부터 수신된 센서 데이터에 기초하여 상기 적어도 하나의 차량 탑승자의 잠재적 정보 필요성을 결정하고,
상기 잠재적 정보 필요성에 따른 정보를 식별하며,
상기 적어도 하나의 입력 인터페이스를 통해 상기 복수의 센서 모듈로부터 수신된 센서 데이터에 기초하여 상기 차량에서 상기 잠재적 정보 필요성에 따라 식별된 정보의 표현 방식을 결정하고,
2개 이상의 중첩된 표현 레이어(representation layer)들에 기초하여 상기 표현 방식을 결정하며,
상기 센서 데이터에 기초하여 상기 잠재적 정보 필요성에 따른 상기 식별된 정보의 표현을 포함하는 상기 2개 이상의 중첩된 표현 레이어들을 페이드 인(fade in) 및 페이드 아웃(fade out)하도록 구성되는, 상기 제어 모듈; 및
상기 차량에 포함된 하나 이상의 디스플레이 장치로 상기 식별된 정보의 결정된 표현 방식에 따라 적어도 하나의 비디오 또는 제어 신호를 제공하도록 구성되는 적어도 하나의 출력 인터페이스
를 포함하는 차량을 위한 장치. - 제1항에 있어서,
상기 제어 모듈은 상기 잠재적 정보 필요성에 따른 상기 정보를 제공하고, 상기 잠재적 정보 필요성에 따른 상기 정보를 요청 및 수신하도록 구성된 것인 차량을 위한 장치. - 제2항에 있어서,
상기 제어 모듈은 이동 무선 인터페이스를 통해 상기 잠재적 정보 필요성에 따른 상기 정보를 요청 및 수신하도록 구성된 것인 차량을 위한 장치. - 삭제
- 제1항에 있어서,
상기 센서 데이터는 시각 센서 데이터, 음향 센서 데이터, 위치 센서 데이터, 가속도 센서 데이터, 주행 다이내믹 센서 데이터, 신체 센서 데이터, 주변 광 센서 데이터, 기상 센서 데이터 및 차량 센서 데이터의 그룹 중 적어도 하나의 요소에 기초하거나, 또는
상기 잠재적 정보 필요성에 따른 상기 정보는 상기 차량에 관한 정보, 상기 차량의 차량 상태에 관한 정보, 상기 차량의 위치에 관한 정보, 상기 차량의 환경 내 위치에 관한 정보, 상기 차량의 환경 내 이벤트에 관한 정보, 상기 차량의 미디어 재생 시스템의 미디어에 관한 정보, 및 위치 데이터의 그룹 중 적어도 하나의 요소를 포함할 수 있거나, 또는
상기 제어 모듈은 상기 센서 데이터에 기초하여 상기 잠재적 정보 필요성에 따른 상기 정보의 세부 레벨(detail degree)을 조정하도록 구성된 것인 차량을 위한 장치. - 제1항에 있어서,
상기 제어 모듈은 또한 차량 대 차량 통신 데이터를 수신하도록 구성되고,
상기 제어 모듈은 상기 차량 대 차량 통신 데이터에 또한 기초하여 상기 잠재적 정보 필요성을 결정하도록 구성되거나, 또는
상기 제어 모듈은 상기 센서 데이터에 기초한 확률 함수에 기초하여 상기 잠재적 정보 필요성을 결정하도록 구성된 것인 차량을 위한 장치. - 제1항에 있어서,
상기 차량을 위한 장치는 메모리 모듈을 더 포함하며,
상기 제어 모듈은, 상기 센서 데이터에 기초하여 상기 표현 방식에 대한 상기 적어도 하나의 탑승자의 반응을 결정하고 상기 메모리 모듈을 통해 상기 탑승자의 반응을 저장하도록 구성되고, 상기 제어 모듈은 또한 상기 저장된 반응 및 학습 기능에 기초하여 상기 표현 방식을 결정하도록 구성되거나, 또는
상기 메모리 모듈은 상기 적어도 하나의 탑승자의 적어도 하나의 선호도 프로파일을 포함하고, 상기 제어 모듈은 상기 적어도 하나의 선호도 프로파일에 더 기초하여 상기 잠재적 정보 필요성과 상기 표현 방식 중 적어도 하나를 결정하도록 구성된 것인 차량을 위한 장치. - 차량에 있어서,
정보 재생 시스템, 조합 디스플레이 시스템, 및 투사 기반 디스플레이 시스템으로 구성된 그룹 중 적어도 하나의 요소를 포함하는 하나 이상의 디스플레이 장치; 및
장치를 포함하고, 이 장치는,
상기 차량의 내부에서 이미지 데이터 또는 오디오 데이터를 검출함으로써 상기 차량의 내부에서 상기 차량의 적어도 하나의 탑승자의 거동을 나타내는 센서 데이터를 감지하기 위한 적어도 하나의 센서 모듈과, 상기 차량의 주행 조건을 나타내는 센서 데이터를 감지하기 위한 적어도 하나의 센서 모듈을 포함하는 복수의 센서 모듈;
상기 복수의 센서 모듈로부터 상기 센서 데이터를 수신하는 적어도 하나의 입력 인터페이스;
제어 모듈로서,
상기 차량의 내부에서 상기 적어도 하나의 탑승자의 물리적인 움직임, 얼굴 표정 및 음성 중 적어도 하나를 나타내는 상기 차량의 내부에서 수집된 센서 데이터에 기초하여 상기 차량의 적어도 하나의 탑승자의 거동을 결정하고,
상기 차량의 성능 및 상기 차량 주위의 환경 조건을 나타내는 센서 데이터에 기초하여 상기 차량의 주행 조건을 결정하며,
적어도 하나의 입력 인터페이스를 통해 상기 복수의 센서 모듈로부터 수신된 센서 데이터에 기초하여 상기 적어도 하나의 차량 탑승자의 잠재적 정보 필요성을 결정하고,
상기 잠재적 정보 필요성에 따른 정보를 식별하며,
상기 적어도 하나의 입력 인터페이스를 통해 상기 복수의 센서 모듈로부터 수신된 센서 데이터에 기초하여 상기 차량에서 상기 잠재적 정보 필요성에 따라 식별된 정보의 표현 방식을 결정하고,
2개 이상의 중첩된 표현 레이어들에 기초하여 상기 표현 방식을 결정하며,
상기 센서 데이터에 기초하여 상기 잠재적 정보 필요성에 따른 상기 식별된 정보의 표현을 포함하는 상기 2개 이상의 중첩된 표현 레이어들을 페이드 인 및 페이드 아웃하도록 구성되는, 상기 제어 모듈; 및
상기 차량에 포함된 하나 이상의 디스플레이 장치로 상기 식별된 정보의 결정된 표현 방식에 따라 적어도 하나의 비디오 또는 제어 신호를 제공하도록 구성되는 적어도 하나의 출력 인터페이스
를 포함한 것인 차량. - 차량을 위한 방법에 있어서,
복수의 센서 모듈 - 적어도 하나의 센서 모듈은 상기 차량의 내부에서 이미지 데이터 또는 오디오 데이터를 검출함으로써 상기 차량의 내부에서 상기 차량의 적어도 하나의 탑승자의 거동을 나타내는 센서 데이터를 감지하고, 적어도 하나의 센서 모듈은 상기 차량의 주행 조건을 나타내는 센서 데이터를 감지함 - 로부터 센서 데이터를 수신하는 단계;
상기 차량의 내부에서 상기 적어도 하나의 탑승자의 물리적인 움직임을 나타내는 상기 차량의 내부에서 수집된 센서 데이터에 기초하여 상기 차량의 적어도 하나의 탑승자의 거동을 결정하는 단계;
상기 차량의 성능 및 상기 차량 주위의 환경 조건을 나타내는 센서 데이터에 기초하여 차량의 주행 조건을 결정하는 단계;
상기 적어도 하나의 입력 인터페이스를 통해 상기 복수의 센서 모듈로부터 수신된 센서 데이터에 기초하여 상기 적어도 하나의 차량 탑승자의 잠재적 정보 필요성을 결정하는 단계;
상기 잠재적 정보 필요성에 따른 정보를 식별하는 단계;
상기 적어도 하나의 입력 인터페이스를 통해 상기 복수의 센서 모듈로부터 수신된 센서 데이터에 기초하여 상기 차량에서 상기 잠재적 정보 필요성에 따라 식별된 정보의 표현 방식을 결정하는 단계;
2개 이상의 중첩된 표현 레이어들에 기초하여 상기 표현 방식을 결정하는 단계;
상기 센서 데이터에 기초하여 상기 잠재적 정보 필요성에 따른 상기 식별된 정보의 표현을 포함하는 상기 2개 이상의 중첩된 표현 레이어들을 페이드 인 및 페이드 아웃하는 단계; 및
상기 차량에 포함된 하나 이상의 디스플레이 장치로 상기 식별된 정보의 결정된 표현 방식에 따라 적어도 하나의 비디오 또는 제어 신호를 제공하는 단계
를 포함하는 차량을 위한 방법. - 프로그래밍가능한 하드웨어 부품이 차량을 위한 방법을 실행하게 하는 컴퓨터 프로그램을 저장한 비일시적 컴퓨터 판독가능 매체에 있어서,
상기 방법은:
복수의 센서 모듈 - 적어도 하나의 센서 모듈은 상기 차량의 내부에서 이미지 데이터 또는 오디오 데이터를 검출함으로써 상기 차량의 내부에서 상기 차량의 적어도 하나의 탑승자의 거동을 나타내는 센서 데이터를 감지하고, 적어도 하나의 센서 모듈은 상기 차량의 주행 조건을 나타내는 센서 데이터를 감지함 - 로부터 센서 데이터를 수신하는 단계;
상기 차량의 내부에서 상기 적어도 하나의 탑승자의 물리적인 움직임을 나타내는 상기 차량의 내부에서 수집된 센서 데이터에 기초하여 상기 차량의 적어도 하나의 탑승자의 거동을 결정하는 단계;
상기 차량의 성능 및 상기 차량 주위의 환경 조건을 나타내는 센서 데이터에 기초하여 차량의 주행 조건을 결정하는 단계;
상기 적어도 하나의 입력 인터페이스를 통해 상기 복수의 센서 모듈로부터 수신된 센서 데이터에 기초하여 상기 적어도 하나의 차량 탑승자의 잠재적 정보 필요성을 결정하는 단계;
상기 잠재적 정보 필요성에 따른 정보를 식별하는 단계;
상기 적어도 하나의 입력 인터페이스를 통해 상기 복수의 센서 모듈로부터 수신된 센서 데이터에 기초하여 상기 차량에서 상기 잠재적 정보 필요성에 따라 식별된 정보의 표현 방식을 결정하는 단계;
2개 이상의 중첩된 표현 레이어들에 기초하여 상기 표현 방식을 결정하는 단계;
상기 센서 데이터에 기초하여 상기 잠재적 정보 필요성에 따른 상기 식별된 정보의 표현을 포함하는 상기 2개 이상의 중첩된 표현 레이어들을 페이드 인 및 페이드 아웃하는 단계; 및
상기 차량에 포함된 하나 이상의 디스플레이 장치로 상기 식별된 정보의 결정된 표현 방식에 따라 적어도 하나의 비디오 또는 제어 신호를 제공하는 단계
를 포함한 것인 비일시적 컴퓨터 판독가능 매체.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102015112637.0 | 2015-07-31 | ||
| DE102015112637.0A DE102015112637A1 (de) | 2015-07-31 | 2015-07-31 | Vorrichtung, Fahrzeug, Verfahren und Computerprogramm zur Berechnung zumindest eines Video- oder Steuersignals basierend auf Information entsprechend einem potentiellen Interesse |
| PCT/EP2016/068197 WO2017021318A1 (de) | 2015-07-31 | 2016-07-29 | Vorrichtung, fahrzeug, verfahren und computerprogramm zur berechnung zumindest eines video- oder steuersignals |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20180034602A KR20180034602A (ko) | 2018-04-04 |
| KR102099328B1 true KR102099328B1 (ko) | 2020-04-10 |
Family
ID=56682098
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020187005771A KR102099328B1 (ko) | 2015-07-31 | 2016-07-29 | 적어도 하나의 비디오 신호 또는 제어 신호를 계산하기 위한 장치, 차량, 방법 및 컴퓨터 프로그램 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US10464571B2 (ko) |
| KR (1) | KR102099328B1 (ko) |
| CN (1) | CN107848462B (ko) |
| DE (1) | DE102015112637A1 (ko) |
| WO (1) | WO2017021318A1 (ko) |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102016220549A1 (de) * | 2016-10-20 | 2018-04-26 | Robert Bosch Gmbh | Verfahren und Vorrichtung zum Unterstützen eines Fahrers beim Deaktivieren eines hochautomatisierten Fahrmodus eines Fahrzeugs |
| DE102017213241A1 (de) | 2017-08-01 | 2019-02-07 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren, Vorrichtung, mobiles Anwendergerät, Computerprogramm zur Steuerung eines Audiosystems eines Fahrzeugs |
| DE102018204941A1 (de) * | 2018-03-29 | 2019-10-02 | Volkswagen Aktiengesellschaft | Verfahren, Vorrichtung und computerlesbares Speichermedium mit Instruktionen zum Bereitstellen von Inhalten zur Anzeige für einen Insassen eines Kraftfahrzeugs |
| DE102018118057A1 (de) * | 2018-07-26 | 2020-01-30 | Valeo Schalter Und Sensoren Gmbh | System zur automatisch überwachten Fahrzeugzustandssignalisierung und Verfahren zur Überwachung einer Fahrzeugzustandssignalisierungsvorrichtung |
| KR20200034037A (ko) * | 2018-09-14 | 2020-03-31 | 현대자동차주식회사 | 차량의 주행 제어 장치 및 방법 |
| CN109359755A (zh) * | 2018-09-29 | 2019-02-19 | 百度在线网络技术（北京）有限公司 | 事件监测方法、装置、设备和存储介质 |
| JP7183864B2 (ja) * | 2019-02-26 | 2022-12-06 | トヨタ自動車株式会社 | 情報処理システム、プログラム、及び制御方法 |
| JP7147706B2 (ja) * | 2019-07-22 | 2022-10-05 | トヨタ自動車株式会社 | 乗物、情報処理システム、プログラム、および情報処理方法 |
| CN110598612B (zh) * | 2019-08-30 | 2023-06-09 | 深圳智慧林网络科技有限公司 | 基于移动终端的病人看护方法、移动终端和可读存储介质 |
| DE102020100045A1 (de) * | 2020-01-03 | 2021-07-08 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren und Fahrzeug zur Anpassung von Darstellungen auf Anzeigen in Fahrzeugen |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008123448A (ja) * | 2006-11-15 | 2008-05-29 | Toyota Motor Corp | ドライバ状態推定装置、サーバ、ドライバ情報収集装置及び運転者状態推定システム |
| WO2014174677A1 (ja) * | 2013-04-26 | 2014-10-30 | 三菱電機株式会社 | 車載装置、情報配信サーバ、および施設情報表示方法 |
Family Cites Families (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100569009B1 (ko) * | 2003-12-30 | 2006-04-07 | 현대자동차주식회사 | 차량용 정보 시스템의 사용성 평가 시스템 |
| DE102005012984A1 (de) * | 2005-03-21 | 2006-10-05 | Siemens Ag | Datenübertragungsvorrichtung |
| DE102005029444A1 (de) * | 2005-06-24 | 2006-12-28 | Robert Bosch Gmbh | Vorrichtung zum Unterstützen eines Führens eines Fahrzeugs und Verfahren zum Betreiben der Vorrichtung |
| US7813870B2 (en) | 2006-03-03 | 2010-10-12 | Inrix, Inc. | Dynamic time series prediction of future traffic conditions |
| DE102006024615B4 (de) | 2006-05-26 | 2018-08-09 | Volkswagen Ag | Verfahren zur Auswahl und Anzeige einer visuellen Darstellung für eine Bedienfunktion einer Bedieneinrichtung in einem Fahrzeug und Bedieneinrichtung |
| JP4985428B2 (ja) * | 2007-02-01 | 2012-07-25 | 株式会社デンソー | ドライバ管理装置および運行管理システム |
| DE102008012816A1 (de) * | 2008-03-06 | 2009-09-10 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren zur Erkennung von Fahrsituationen eines Kraftfahrzeugs |
| DE102008043755B4 (de) * | 2008-11-14 | 2022-08-25 | Robert Bosch Gmbh | Verfahren und Steuergerät zur Unterstützung eines Fahrers eines Fahrzeugs |
| US8649533B2 (en) * | 2009-10-02 | 2014-02-11 | Ford Global Technologies, Llc | Emotive advisory system acoustic environment |
| KR20110060546A (ko) | 2009-11-30 | 2011-06-08 | 현대자동차주식회사 | 지도 레이어를 부분적으로 갱신할 수 있는 내비게이션 시스템 및 그 방법 |
| CN103124662B (zh) * | 2011-07-11 | 2015-04-29 | 丰田自动车株式会社 | 车辆的紧急避险装置 |
| EP2555569B1 (en) * | 2011-08-04 | 2013-10-09 | Deutsche Telekom AG | Method and system for proactive and dynamic cross-layer optimization of data transmission to vehicles |
| DE102012021111A1 (de) * | 2012-10-26 | 2014-04-30 | Volkswagen Aktiengesellschaft | Informationswiedergabesystem und Verfahren zur Informationswiedergabe |
| DE102013223684A1 (de) * | 2013-11-20 | 2015-05-21 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren und Vorrichtung zum Geben von Empfehlungen für mehrere Fahrzeuginsassen |
| US9398397B2 (en) * | 2014-01-09 | 2016-07-19 | Ford Global Technologies, Llc | Secure manipulation of embedded modem connection settings through short messaging service communication |
| CN104598993B (zh) * | 2015-01-14 | 2017-11-03 | 南京信息工程大学 | 基于眨眼次数的驾驶员疲劳驾驶预测方法 |
-
2015
- 2015-07-31 DE DE102015112637.0A patent/DE102015112637A1/de not_active Ceased
-
2016
- 2016-07-29 WO PCT/EP2016/068197 patent/WO2017021318A1/de active Application Filing
- 2016-07-29 KR KR1020187005771A patent/KR102099328B1/ko active IP Right Grant
- 2016-07-29 CN CN201680045000.0A patent/CN107848462B/zh active Active
- 2016-07-29 US US15/747,241 patent/US10464571B2/en active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008123448A (ja) * | 2006-11-15 | 2008-05-29 | Toyota Motor Corp | ドライバ状態推定装置、サーバ、ドライバ情報収集装置及び運転者状態推定システム |
| WO2014174677A1 (ja) * | 2013-04-26 | 2014-10-30 | 三菱電機株式会社 | 車載装置、情報配信サーバ、および施設情報表示方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| DE102015112637A1 (de) | 2017-02-02 |
| US10464571B2 (en) | 2019-11-05 |
| CN107848462B (zh) | 2021-06-15 |
| US20190001992A1 (en) | 2019-01-03 |
| WO2017021318A1 (de) | 2017-02-09 |
| CN107848462A (zh) | 2018-03-27 |
| KR20180034602A (ko) | 2018-04-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102099328B1 (ko) | 적어도 하나의 비디오 신호 또는 제어 신호를 계산하기 위한 장치, 차량, 방법 및 컴퓨터 프로그램 | |
| JP6310531B2 (ja) | 自律走行車において拡張仮想現実コンテンツを提供するシステム及び方法 | |
| JP6456902B2 (ja) | リアルタイム交通情報に基づいて自律走行車においてコンテンツを提供するシステムおよび方法 | |
| JP6456901B2 (ja) | 自律走行車においてメディアコンテンツを提示するためのシステム及び方法 | |
| US11535262B2 (en) | Method and apparatus for using a passenger-based driving profile | |
| US20190394097A1 (en) | Vehicle application store for console | |
| US9651395B2 (en) | Navigation systems and associated methods | |
| US9098367B2 (en) | Self-configuring vehicle console application store | |
| JP2018101400A (ja) | 自律走行車の個人運転好みの認識方法及びシステム | |
| JP2018531385A6 (ja) | 自律走行車を運行させるための制御エラー補正計画方法 | |
| JP2018531385A (ja) | 自律走行車を運行させるための制御エラー補正計画方法 | |
| US9291474B2 (en) | System and method for providing global positioning system (GPS) feedback to a user | |
| US9771082B2 (en) | Reducing cognitive demand on a vehicle operator by generating passenger stimulus | |
| EP3620972A1 (en) | Method and apparatus for providing a user reaction user interface for generating a passenger-based driving profile | |
| EP3620971A1 (en) | Method and apparatus for generating a passenger-based driving profile | |
| EP3621007A1 (en) | Method and apparatus for selecting a vehicle using a passenger-based driving profile | |
| US11014577B2 (en) | Method and apparatus for presenting a feedforward cue in a user interface before an upcoming vehicle event occurs | |
| KR20190084164A (ko) | 주행 컨텍스트에 기반한 디스플레이 제어 방법 및 장치 | |
| KR102516674B1 (ko) | 내비게이션 기동과 연계할 관심지점(poi)을 선택하기 위한 시스템 및 방법 | |
| JP5471471B2 (ja) | 経路案内装置 | |
| US20180012118A1 (en) | Predictive visual and verbal mentoring | |
| US20220415321A1 (en) | Electronic device mounted in vehicle, and method of operating the same | |
| US10506049B2 (en) | Selecting media using vehicle information | |
| JP2022059958A (ja) | ナビゲーション装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| AMND | Amendment | ||
| E902 | Notification of reason for refusal | ||
| AMND | Amendment | ||
| E601 | Decision to refuse application | ||
| X091 | Application refused [patent] | ||
| AMND | Amendment | ||
| X701 | Decision to grant (after re-examination) |