KR102374234B1 - 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 및 그 운영 방법 - Google Patents
딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 및 그 운영 방법 Download PDFInfo
- Publication number
- KR102374234B1 KR102374234B1 KR1020200088542A KR20200088542A KR102374234B1 KR 102374234 B1 KR102374234 B1 KR 102374234B1 KR 1020200088542 A KR1020200088542 A KR 1020200088542A KR 20200088542 A KR20200088542 A KR 20200088542A KR 102374234 B1 KR102374234 B1 KR 102374234B1
- Authority
- KR
- South Korea
- Prior art keywords
- information
- vehicle
- module
- analysis
- detection
- Prior art date
Links
- 238000013135 deep learning Methods 0.000 title claims abstract description 30
- 238000011017 operating method Methods 0.000 title description 6
- 238000001514 detection method Methods 0.000 claims abstract description 43
- 238000004458 analytical method Methods 0.000 claims abstract description 39
- 238000007689 inspection Methods 0.000 claims abstract description 37
- 238000012544 monitoring process Methods 0.000 claims abstract description 14
- 238000002485 combustion reaction Methods 0.000 claims abstract description 11
- 238000012731 temporal analysis Methods 0.000 claims abstract description 6
- 238000000700 time series analysis Methods 0.000 claims abstract description 6
- 230000002159 abnormal effect Effects 0.000 claims description 7
- 238000000034 method Methods 0.000 abstract description 15
- 238000005516 engineering process Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000012937 correction Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000008520 organization Effects 0.000 description 3
- 239000000284 extract Substances 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 239000003921 oil Substances 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 206010039203 Road traffic accident Diseases 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Arrangement of adaptations of instruments
-
- B60K35/22—
-
- B60K35/26—
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W10/00—Conjoint control of vehicle sub-units of different type or different function
- B60W10/04—Conjoint control of vehicle sub-units of different type or different function including control of propulsion units
- B60W10/06—Conjoint control of vehicle sub-units of different type or different function including control of propulsion units including control of combustion engines
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W10/00—Conjoint control of vehicle sub-units of different type or different function
- B60W10/18—Conjoint control of vehicle sub-units of different type or different function including control of braking systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W10/00—Conjoint control of vehicle sub-units of different type or different function
- B60W10/20—Conjoint control of vehicle sub-units of different type or different function including control of steering systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/10—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W2050/0001—Details of the control system
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/143—Alarm means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/146—Display means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo or light sensitive means, e.g. infrared sensors
- B60W2420/403—Image sensing, e.g. optical camera
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/42—Image sensing, e.g. optical camera
Abstract
본 발명은 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 및 그 운영 방법에 관한 것으로서, 차량의 메인 제어 유닛이 인식한 상태정보, 차량의 센서들이 계측한 감지정보, 카메라에 의해 촬영된 영상정보, 및 운전자 또는 탑승자로부터 입력받은 조작정보를 수집하는 수집부; 상태정보, 감지정보, 영상정보 및 조작정보를 모니터링하여 시계열적인 분석정보를 생성하는 분석부; 분석정보와 대응하도록 차량의 내연기관, 조향기관, 제동기관 및 전자기기의 구동을 제어하되, 상태정보, 감지정보, 영상정보 또는 조작정보에 포함된 값이 기 설정된 범위를 벗어나는 경우, 해당 부품의 식별ID와 대응하는 점검정보를 생성하는 제어부; 및 조작정보와 대응하는 상태정보, 감지정보 또는 영상정보를 화면 또는 스피커를 통해 출력하고, 기 설정된 시나리오 또는 카테고리별 UX콘텐츠를 출력하며, 접속된 외부기기에 저장된 음원 또는 영상을 출력하는 출력부를 포함한다.
상기와 같은 본 발명에 따르면, 스마트카의 상태정보를 수집 및 분석하여 전자기기를 제어하는 사용자 경험기반의 디스플레이 장치를 제공함으로써, 운전자 또는 탑승자에게 다양한 UX 콘텐츠를 제공할 수 있다.
상기와 같은 본 발명에 따르면, 스마트카의 상태정보를 수집 및 분석하여 전자기기를 제어하는 사용자 경험기반의 디스플레이 장치를 제공함으로써, 운전자 또는 탑승자에게 다양한 UX 콘텐츠를 제공할 수 있다.
Description
본 발명은 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 및 그 운영 방법에 관한 것으로, 더욱 상세하게는 스마트카의 통신 데이터에 대한 수집, 분석 및 동작을 제어하고, 차량의 센서들이 계측한 상태정보 및 감지정보들을 딥러닝에 의한 학습값과 비교하여 신뢰도 보정을 통해 선별된 정보를 제공하며, 입력받은 조작정보와 대응하도록 사용자 경험(User experience, UX) 기반에 따른 디스플레이 시스템 및 그 운영 방법을 제공하는 기술에 관한 것이다.
스마트폰에 이어 스마트 TV, 스마트 홈, 스마트카, 스마트 콘텐츠 등 기존 오프라인 중심의 산업들이 새로운 생태계에 편입되면서 과거와는 전혀 다른 시장구조와 산업 형태로 변모하고 있다.
그중에 미래 자동차 ICT 융합 기술의 핵심인 스마트카(Smart Car) 기술은 기계 중심의 자동차 기술에 전기, 전자, 정보통신 기술을 융복합하여 교통사고를 획기적으로 저감하고, 탑승자의 만족을 극대화 시키는 자동차 기술이다.
이러한 스마트카는 자율주행 자동차와 커넥티드카를 포함하고 있으며, 운전자와 자동차, 자동차와 주변 환경 및 교통 인프라, 및 일상생활의 모든 요소를 유기적으로 연결하는 연결성(Connectivity)을 기반으로 교통안전 및 혼잡해소를 제공한다.
이처럼, 스마트카는 다양한 사용자 맞춤형 이동서비스 산업을 창출하는 ICT 융복합 미래자동차 산업이다. 하지만, 자율주행 및 커넥티드 분야에서는 운전자 중심의 연구에 집중되고 있으며, 운전석의 다양한 기능에 비하여 조수석의 커넥티드카 관련된 연구는 최근에 디지털 칵핏 개념으로 소개되고 있는 정도이다.
이에 본 출원인은 스마트카의 통신 데이터에 대한 수집, 분석 및 동작을 제어하고, 보조석 탑승자를 위한 사용자 경험 기반의 디스플레이 시스템 및 그 운영 방법을 제안하고자 한다.
본 발명의 목적은, 스마트카의 상태정보를 수집 및 분석하여 전자기기를 제어하는 사용자 경험기반의 디스플레이 장치를 제공함으로써, 운전자 또는 탑승자에게 UX 콘텐츠(엔터테이먼트, 정보검색, 정보전달, 차량정보, 인터넷검색, 뉴스 모니터링, 자료정리, 스마트폰 연동, 이메일, 전화 또는 문자서비스)를 제공하는데 있다.
본 발명의 목적은, 계측된 상태정보 및 감지정보들을 딥러닝에 의한 학습값과 비교하여 신뢰도를 보정하고, 신뢰도 보정에 따라 선별된 정보만을 화면을 통해 디스플레이 함으로써, 운전자 또는 탑승자에게 선별된 정보를 제공하는데 있다.
이러한 기술적 과제를 해결하기 위한 본 발명의 일 실시예는 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템으로서, 차량의 메인 제어 유닛이 인식한 상태정보, 차량의 센서들이 계측한 감지정보, 카메라에 의해 촬영된 영상정보, 및 운전자 또는 탑승자로부터 입력받은 조작정보를 수집하는 수집부; 상태정보, 감지정보, 영상정보 및 조작정보를 모니터링하여 시계열적인 분석정보를 생성하는 분석부; 분석정보와 대응하도록 차량의 내연기관, 조향기관, 제동기관 및 전자기기의 구동을 제어하되, 상태정보, 감지정보, 영상정보 또는 조작정보에 포함된 값이 기 설정된 범위를 벗어나는 경우, 해당 부품의 식별ID와 대응하는 점검정보를 생성하는 제어부; 및 조작정보와 대응하는 상태정보, 감지정보 또는 영상정보를 화면 또는 스피커를 통해 출력하고, 기 설정된 시나리오 또는 카테고리별 UX콘텐츠를 출력하며, 접속된 외부기기에 저장된 음원 또는 영상을 출력하는 출력부를 포함하는 것을 특징으로 한다.
바람직하게는, 수집부는 차량의 메인 제어 유닛으로부터 인식한 실시간 구동신호로부터 상태정보를 생성하는 감지모듈; 차량의 내부 또는 외부에 복수개로 구비되어 기 설정된 반경 이내에서의 물체, 차선 이탈, 안전벨트 착용 여부, 또는 조명장치의 on/off 중에 어느 하나를 계측하여 감지정보를 생성하는 센서모듈; 차량에 구비된 카메라의 촬영을 통해 설정된 조건에 부합하는 영상정보를 생성하는 촬영모듈; 및 운전자 또는 탑승자의 전자기기 조작에 의해 입력된 신호들을 수집하여 조작정보를 생성하는 조작모듈을 포함하는 것을 특징으로 한다.
분석부는, 상태정보, 감지정보, 영상정보 및 조작정보 각각에 포함된 부품에 대한 식별ID를 색인하고, 해당 식별ID가 발생한 시간, 및 빈도를 시계열적으로 분류하는 분석모듈; 상태정보 및 감지정보들에 포함된 값을 딥러닝에 의한 학습값과 비교하여 식별ID별로 오차값을 추출하되, 오차값이 설정된 기준 미만인 경우 신뢰도 조건을 충족하는 것으로 판단하여 분석정보를 생성하는 보정모듈; 및 상태정보에 기 설정된 범위를 벗어나는 이상신호가 포함된 경우, 이상신호를 발생시킨 부품과 대응하는 식별ID를 포함하는 점검정보를 생성하는 점검모듈을 포함하는 것을 특징으로 한다.
제어부는, 분석정보와 대응하도록 차량의 내연기관, 조향기관, 제동기관 및 전자기기 각각의 구동 상태를 모니터링하여 입력값과 출력값을 추출하는 모니터링 모듈; 입력값 대비 출력값의 차이가 기 설정된 범위를 벗어나는 경우, 해당 부품의 식별ID와 대응하는 부품에 대한 점검정보를 생성하는 점검모듈; 및 점검모듈로부터 인가받은 점검정보 및 식별ID와 대응하는 부품리스트를 색인하여 출력부로 인가하는 IoT모듈을 포함하는 것을 특징으로 한다.
출력부는, 조작정보와 대응하는 상태정보, 감지정보 또는 영상정보를 화면을 통해 디스플레이하고 스피커를 통해 출력하는 출력모듈; 및 제어부의 제어에 따라 운전자로부터 입력받은 조작정보와 대응하도록 시나리오 또는 카테고리별 UX콘텐츠를 출력하는 UX출력모듈을 포함하는 것을 특징으로 한다.
전술한 시스템을 기반으로 하는 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 운영 방법은, 수집부가 차량의 메인 제어 유닛(MCU)이 인식한 상태정보, 차량의 센서들이 계측한 감지정보, 카메라에 의해 촬영된 영상정보, 및 운전자 또는 탑승자로부터 입력받은 조작정보를 수집하는 (a) 단계; 분석부가 상태정보, 감지정보, 영상정보 및 조작정보를 모니터링하여 시계열적인 분석정보를 생성하는 (b) 단계; 제어부가 분석정보와 대응하도록 차량의 내연기관, 조향기관, 제동기관 및 전자기기의 구동을 제어하는 (c) 단계; 제어부가 상태정보, 감지정보, 영상정보 또는 조작정보에 포함된 값이 기 설정된 범위를 벗어나는지 여부를 판단하는 (d) 단계; (d) 단계의 판단결과, 기 설정된 범위를 벗어나는 경우, 제어부가 해당 부품의 식별ID와 대응하는 점검정보를 생성하고 점검정보와 대응하는 오류 코드와 함께 출력부로 인가하는 (e) 단계; 및 출력부가 점검정보를 인가받아 디스플레이중인 화면을 off 상태로 전환한 후 점검정보를 출력하는 (f) 단계를 포함하는 것을 특징으로 한다.
바람직하게는, (b) 단계 이후 출력부가 조작정보와 대응하는 상태정보, 감지정보 또는 영상정보를 화면 또는 스피커를 통해 출력하는 (g) 단계를 더 포함하는 것을 특징으로 한다.
(b) 단계 이후, 출력부가 조작정보와 대응하도록 기 설정된 시나리오 또는 카테고리별 UX콘텐츠를 출력하는 (h) 단계를 더 포함하는 것을 특징으로 한다.
상기와 같은 본 발명의 일 실시예에 따르면, 스마트카의 상태정보를 수집 및 분석하여 전자기기를 제어하는 사용자 경험 기반의 디스플레이 장치를 제공함으로써, 운전자 또는 탑승자에게 다양한 UX 콘텐츠를 제공하는 효과가 있다.
본 발명에 의하면, 계측된 상태정보 및 감지정보들을 딥러닝에 의한 학습값과 비교하여 신뢰도를 보정하고, 신뢰도 보정에 따라 선별된 정보만을 화면을 통해 디스플레이 함으로써, 운전자 또는 탑승자에게 선별된 정보를 제공하는 효과가 있다.
도 1은 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템을 도시한 블록도.
도 2는 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템의 수집부를 도시한 블록도.
도 3은 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템의 분석부를 도시한 블록도.
도 4는 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템의 제어부를 도시한 블록도.
도 5는 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템의 출력부를 도시한 블록도.
도 6은 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 운영 방법을 도시한 순서도.
도 7은 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 운영 방법의 제S602단계 이후 과정을 도시한 순서도.
도 8은 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 운영 방법의 제S602단계 이후의 또 다른 과정을 도시한 순서도.
도 9는 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 운영 방법의 제S604단계의 세부과정을 도시한 순서도.
도 2는 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템의 수집부를 도시한 블록도.
도 3은 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템의 분석부를 도시한 블록도.
도 4는 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템의 제어부를 도시한 블록도.
도 5는 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템의 출력부를 도시한 블록도.
도 6은 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 운영 방법을 도시한 순서도.
도 7은 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 운영 방법의 제S602단계 이후 과정을 도시한 순서도.
도 8은 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 운영 방법의 제S602단계 이후의 또 다른 과정을 도시한 순서도.
도 9는 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 운영 방법의 제S604단계의 세부과정을 도시한 순서도.
본 발명의 구체적인 특징 및 이점들은 첨부 도면에 의거한 다음의 상세한 설명으로 더욱 명백해질 것이다. 이에 앞서, 본 명세서 및 청구범위에 사용된 용어나 단어는 발명자가 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 그 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야 할 것이다. 또한, 본 발명에 관련된 공지 기능 및 그 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는, 그 구체적인 설명을 생략하였음에 유의해야 할 것이다.
도 1을 참조하면 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템(100)은, 차량의 메인 제어 유닛(MCU)이 인식한 상태정보, 차량의 센서들이 계측한 감지정보, 카메라에 의해 촬영된 영상정보, 및 운전자 또는 탑승자로부터 입력받은 조작정보를 수집하는 수집부(110)와, 수집부(110)로부터 인가받은 상태정보, 감지정보, 영상정보 및 조작정보를 모니터링하여 시계열적인 분석정보를 생성하는 분석부(120)와, 분석부(120)로부터 인가받은 분석정보와 대응하도록 차량의 내연기관, 조향기관, 제동기관 및 전자기기의 구동을 제어하되, 상기 상태정보, 감지정보, 영상정보 또는 조작정보에 포함된 값이 기 설정된 범위를 벗어나는 경우, 해당 부품의 식별ID와 대응하는 점검정보를 생성하고, 점검정보와 대응하는 오류 코드와 함께 출력부(140)로 인가하는 제어부(130), 및 제어부(130)의 제어에 따라 조작정보와 대응하는 상태정보, 감지정보 또는 영상정보를 화면 또는 스피커를 통해 출력하고, 기 설정된 시나리오 또는 카테고리별 UX콘텐츠를 출력하며, 접속된 외부기기에 저장된 음원 또는 영상을 출력하되, 제어부(130)로부터 점검정보를 인가받는 경우 디스플레이중인 화면을 off 상태로 전환한 후 점검정보를 출력하는 출력부(140)를 포함하여 구성된다.
이하에서는 그 구체적인 언급을 생략하겠으나, 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템(100)은 차량 내부의 글로브박스에 구비될 수 있으며, 이때 글로브박스 on/off시 접혀지도록 설계되거나 탈부착이 가능하도록 설계될 수 있다.
또한, 상태정보는 차량의 내연기관, 조향기관, 제동기관, 전자기기, 연료 및 오일상태 등 차량이 구동하는데 필수적으로 작동하는 부품들의 상태를 모니터링한 정보이며, 감지정보는 차량에 구비된 센서들이 물체를 감지한 정보로 거리값을 포함할 수 있고, 차량문, 안전벨트 및 조명의 on/off 여부에 대한 감지값과 실내외 및 각종 오일의 온도값을 포함한다.
또한, 영상정보는 전후방 및 측면에 구비된 카메라에 의해 촬영된 실시간 영상 이외에 위성 접속을 통해 촬영된 차량 주변영상을 포함하는 정보이고, 조작정보는 차량 내부 및 터치스크린에 구비된 각종 버튼에 대한 선택신호를 포함하는 것으로 이해함이 바람직하다.
그리고, UX콘텐츠는 엔터테이먼트, 내비게이션, DMB, 라디오, 정보검색, 정보전달, 차량정보 조회, 인터넷검색, 뉴스검색, 데이터정리, 스마트폰 연동, 이메일, 전화 또는 문자서비스 중에 어느 하나를 포함한다.
이하, 도 2 내지 도 5를 참조하여 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템(100)의 세부구성에 대해 살피면 아래와 같다.
먼저, 도 2를 참조하면, 수집부(110)는 차량의 MCU로부터 실시간 구동신호를 인식하여 상태정보를 생성하는 감지모듈(112)과, 차량의 내부 또는 외부에 복수개로 구비되어 기 설정된 반경 이내에서의 물체, 차선 이탈, 안전벨트 착용 여부, 또는 조명장치의 on/off 중에 어느 하나를 계측하여 감지정보를 생성하는 센서모듈(114)과, 차량에 구비된 카메라의 촬영을 통해 설정된 조건에 부합하는 영상정보를 생성하는 촬영모듈(116), 및 운전자 또는 탑승자의 전자기기 조작에 의해 입력된 신호들을 수집하여 조작정보를 생성하는 조작모듈(118)을 포함하여 구성된다.
여기서, 감지모듈(112)이 인식하는 구동신호는 엔진 출력에 따른 RPM, 차량의 주행속도, 엑셀러레이터 또는 브레이크 패달로 전가되는 압력 등이 포함될 수 있고, 촬영모듈(116)의 설정된 조건이란 차량의 주행, 정차 또는 주차 중에 어느 하나의 구동 조건을 포함하거나 입력된 촬영 시간 조건을 포함하는 것으로 이해함이 바람직하다.
도 3을 참조하면, 분석부(120)는 수집부(110)로부터 인가받은 상태정보, 감지정보, 영상정보 및 조작정보 각각에 포함된 부품에 대한 식별ID를 색인하고, 해당 식별ID가 발생한 시간, 및 빈도를 시계열적으로 분류하는 분석모듈(122)과, 분석모듈(122)로부터 인가받은 상태정보 및 감지정보들에 포함된 값을 딥러닝에 의한 학습값과 비교하여 식별ID별로 오차값을 추출하되, 오차값이 설정된 기준 미만인 경우 신뢰도 조건을 충족하는 것으로 판단하여 분석정보를 생성하고, 오차값이 설정된 기준 이상인 경우 해당 식별ID에 대한 상태정보 및 감지정보를 수집부(110)에 재요청하는 보정모듈(124), 및 보정모듈(124)로부터 신뢰도 조건이 충족된 상태정보를 인가받되, 상태정보에 기 설정된 범위를 벗어나는 이상신호가 포함된 경우, 이상신호를 발생시킨 부품과 대응하는 식별ID를 포함하는 점검정보를 생성하는 점검모듈(126)을 포함하여 구성된다.
이때, 이상신호는 상태정보에 포함된 RPM값이 설정된 값을 초과하거나, 감지정보에 포함된 센서값이 감지범위 미만이거나 초과하는 경우, 카메라가 동작하지 않거나 영상이 녹화되지 않는 경우, 또는 조작정보와 불일치한 구동이 감지되는 경우 등에 발생하는 신호인 것으로 이해함이 바람직하다.
도 4를 참조하면, 제어부(130)는 분석부(120)로부터 인가받은 분석정보와 대응하도록 차량의 내연기관, 조향기관, 제동기관 및 전자기기 각각의 구동 상태를 모니터링하여 입력값과 출력값을 추출하는 모니터링 모듈(132)과, 모니터링 모듈(132)로부터 인가받은 입력값 대비 출력값의 차이가 기 설정된 범위를 벗어나는 경우, 해당 부품의 식별ID와 대응하는 부품에 대한 점검정보를 생성하는 점검모듈(134), 및 점검모듈(134)로부터 인가받은 점검정보 및 식별ID와 대응하는 부품리스트를 색인하여 출력부(140)로 인가하는 IoT모듈(136)을 포함하여 구성된다.
이러한, 제어부(130)는 비상 상황시에도 계속적인 처리가 가능하도록 fail-safe system이 적용된 MCU 보드로 구성되며, 분석부(120)로부터 인가받은 분석정보와 대응하도록 차량의 내연기관, 조향기관, 제동기관 및 전자기기의 구동을 제어하도록 구성된다.
또한, 제어부(130)는 출력부(140)의 디스플레이 상태를 감지하되, 점검정보가 생성된 경우, 출력부(140)의 디스플레이중인 화면을 off 상태로 전환시키고, 점검정보를 출력하도록 제어한다.
아울러, 제어부(130)의 IoT모듈(136)은 차량의 내연기관, 조향기관, 제동기관 및 전자기기 각각의 구동 상태를 모니터링 결과, 점검정보 또는 식별ID와 대응하는 부품리스트 중에 어느 하나를 기 연동된 무선통신 채널과 접속된 관리자 단말로 전송하도록 구성된다. 이때 관리자 단말은 서버, PC, 스마트폰 또는 태블릿 중에 어느 하나의 장치로 구성될 수 있다.
도 5를 참조하면, 출력부(140)는 제어부(130)의 제어에 따라 조작정보와 대응하는 상태정보, 감지정보 또는 영상정보를 화면을 통해 디스플레이하고 스피커를 통해 출력하는 출력모듈(142), 및 제어부(130)의 제어에 따라 운전자로부터 입력받은 조작정보와 대응하도록 시나리오 또는 카테고리별 UX콘텐츠를 출력하는 UX출력모듈(144)을 포함하여 구성된다.
구체적으로, 출력부(140)의 출력모듈(142)은 운전자 또는 탑승자의 전자기기 조작에 의해 입력된 신호인 조작정보에 따라 차량에 구비된 각종 전자기기의 구동상태를 화면에 디스플레이하고, 전자기기 구동에 따른 정지영상 또는 동영상을 출력하게 된다.
또한, 출력모듈(142)은 경우에 따라 차량에 구비된 스피커를 통해 전자기기 구동에 따른 효과음을 출력하거나, 화면에 디스플레이되는 정지영상 또는 동영상에 대응하는 사운드를 출력할 수 있다.
그리고, UX출력모듈(144)은 운전자 또는 탑승자의 조작정보에 따라 지정된 시나리오 또는 카테고리를 저장하고, 저장된 시나리오 또는 카테고리에 부합하는 UX콘텐츠를 화면에 디스플레이하거나 스피커를 통해 출력하도록 구성된다.
예컨대, 설정된 시나리오가 회사까지의 주행경로 안내인 경우, UX출력모듈(144)이 입력받음과 동시에 해당 주행경로를 화면과 스피커를 통해 출력하도록 구동될 수 있다. 즉, 본 발명의 일 실시예에 따른 UX출력모듈(144)은 기억된 시나리오 또는 카테고리와 대응하는 UX콘텐츠를 복잡한 조작 절차 없이 화면이나 스피커를 통해 즉시 출력하도록 구성되어 운전자 또는 탑승자의 편의를 증대시키게 된다.
이러한 출력부(140)는 차량 내부의 글로브박스에 구비되는 것에 국한되지 않고, 차량에 구비된 의자 뒷면이나 차량 내부 상부면에 설치가 가능하도록 그 위치는 변경될 수 있으며, LCD, LED, OLED, OLCD, QLED 또는 QLCD 중에 어느 하나의 디스플레이 수단으로 구성된다.
이하 도 6을 참조하여 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 운영 방법에 대해 살피면 아래와 같다.
먼저, 수집부(110)가 차량의 메인 제어 유닛(MCU)이 인식한 상태정보, 차량의 센서들이 계측한 감지정보, 카메라에 의해 촬영된 영상정보, 및 운전자 또는 탑승자로부터 입력받은 조작정보를 수집한다(S602).
이어서, 분석부(120)가 상기 상태정보, 감지정보, 영상정보 및 조작정보를 모니터링하여 시계열적인 분석정보를 생성한다(S604).
뒤이어, 제어부(130)가 분석정보와 대응하도록 차량의 내연기관, 조향기관, 제동기관 및 전자기기의 구동을 제어한다(S606).
이어서, 제어부(130)가 상태정보, 감지정보, 영상정보 또는 조작정보 즉, 분석정보에 포함된 값이 기 설정된 범위를 벗어나는지 여부를 판단한다(S608).
제S608단계의 판단결과, 기 설정된 범위를 벗어나는 경우, 제어부(130)가 해당 부품의 식별ID와 대응하는 점검정보를 생성하고 점검정보와 대응하는 오류 코드와 함께 출력부(140)로 인가한다(S610).
그리고, 출력부(140)가 점검정보를 인가받아 디스플레이중인 화면을 off 상태로 전환한 후 점검정보를 출력한다(S612).
이하, 도 7을 참조하여 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 운영 방법의 제S602단계 이후 과정에 대해 살피면 아래와 같다.
제S602단계 이후, 출력부(140)가 조작정보와 대응하는 상태정보, 감지정보 또는 영상정보를 화면 또는 스피커를 통해 출력한다(S702).
이하, 도 8을 참조하여 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 운영 방법의 제S602단계 이후의 또 다른 과정에 대해 살피면 아래와 같다.
제S602단계 이후, 출력부(140)가 조작정보와 대응하도록 기 설정된 시나리오 또는 카테고리별 UX콘텐츠를 출력한다(S802).
그리고, 도 9를 참조하여 본 발명의 일 실시예에 따른 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 운영 방법의 제S604단계의 세부과정에 대해 살피면 아래와 같다.
제S602단계 이후, 분석부(120)가 상기 상태정보, 감지정보, 영상정보 및 조작정보 각각에 포함된 부품에 대한 식별ID를 색인한다(S902).
이어서, 분석부(120)가 색인한 식별ID에 대한 발생한 시간, 및 빈도를 시계열적으로 분류한다(S904).
뒤이어, 분석부(120)가 상태정보 및 감지정보들에 포함된 값을 딥러닝에 의한 학습값과 비교하여 식별ID별로 오차값을 추출한다(S906).
이어서, 분석부(120)가 추출한 오차값이 기 설정된 기준 미만인지 여부를 판단한다(S908).
제S908단계의 판단결과, 추출한 오차값이 기 설정된 기준 미만인 경우, 분석부(120)가 신뢰도 조건을 충족하는 것으로 판단하여 분석정보를 생성한다(S910).
제S908단계의 판단결과, 오차값이 설정된 기준 이상인 경우, 분석부(120)가 해당 식별ID에 대한 상태정보 및 감지정보를 수집부(110)에 재요청한다(S912).
이처럼 전술한바와 같은 본 발명의 일 실시예에 의하면, 스마트카의 상태정보를 수집 및 분석하여 전자기기를 제어하는 사용자 경험(User experience, UX)기반의 디스플레이 장치를 제공함으로써, 운전자 또는 탑승자에게 UX 콘텐츠(엔터테이먼트, 정보검색, 정보전달, 차량정보, 인터넷검색, 뉴스 모니터링, 자료정리, 스마트폰 연동, 이메일, 전화 또는 문자서비스)를 제공할 수 있다.
이상으로 본 발명의 기술적 사상을 예시하기 위한 바람직한 실시 예와 관련하여 설명하고 도시하였지만, 본 발명은 이와 같이 도시되고 설명된 그대로의 구성 및 작용에만 국한되는 것이 아니며, 기술적 사상의 범주를 일탈함이 없이 본 발명에 대해 다수의 변경 및 수정이 가능함을 당업자들은 잘 이해할 수 있을 것이다. 따라서 그러한 모든 적절한 변경 및 수정과 균등물들도 본 발명의 범위에 속하는 것으로 간주되어야 할 것이다.
100: 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템
110: 수집부
112: 차량상태 감지모듈 114: 센서모듈
116: 촬영모듈 118: 조작모듈
120: 분석부
122: 분석모듈 124: 보정모듈
126: 점검모듈
130: 제어부
132: 모니터링 모듈 134: 점검모듈
136: IoT모듈
140: 출력부
142: 출력모듈 144: UX출력모듈
110: 수집부
112: 차량상태 감지모듈 114: 센서모듈
116: 촬영모듈 118: 조작모듈
120: 분석부
122: 분석모듈 124: 보정모듈
126: 점검모듈
130: 제어부
132: 모니터링 모듈 134: 점검모듈
136: IoT모듈
140: 출력부
142: 출력모듈 144: UX출력모듈
Claims (8)
- 차량의 메인 제어 유닛이 인식한 상태정보, 차량의 센서들이 계측한 감지정보, 카메라에 의해 촬영된 영상정보, 및 운전자 또는 탑승자로부터 입력받은 조작정보를 수집하는 수집부;
상기 상태정보, 감지정보, 영상정보 및 조작정보를 모니터링하여 시계열적인 분석정보를 생성하되, 상태정보 및 감지정보들에 포함된 값을 딥러닝에 의한 학습값과 비교하여 식별ID별로 오차값을 추출하고, 추출된 오차값이 기 설정된 기준 미만인지 여부를 판단하여, 추출한 오차값이 기 설정된 기준 미만인 경우, 분석 신뢰도 조건을 충족하는 것으로 판단하여 분석정보를 생성하는 분석부;
상기 분석정보와 대응하도록 차량의 내연기관, 조향기관, 제동기관 및 전자기기의 구동을 제어하되, 상기 상태정보, 감지정보, 영상정보 또는 조작정보에 포함된 값이 기 설정된 범위를 벗어나는 경우, 해당 부품의 식별ID와 대응하는 점검정보를 생성하는 제어부; 및
조작정보와 대응하는 상태정보, 감지정보 또는 영상정보를 화면 또는 스피커를 통해 출력하고, 기 설정된 시나리오 또는 카테고리별 UX콘텐츠를 출력하며, 접속된 외부기기에 저장된 음원 또는 영상을 출력하는 출력부를 포함하되,
상기 수집부는,
차량의 메인 제어 유닛으로부터 인식한 실시간 구동신호로부터 상태정보를 생성하는 감지모듈과, 차량의 내부 또는 외부에 복수개로 구비되어 기 설정된 반경 이내에서의 물체, 차선 이탈, 안전벨트 착용 여부, 또는 조명장치의 on/off 중에 어느 하나를 계측하여 감지정보를 생성하는 센서모듈과, 차량에 구비된 카메라의 촬영을 통해 설정된 조건에 부합하는 영상정보를 생성하는 촬영모듈과, 운전자 또는 탑승자의 전자기기 조작에 의해 입력된 신호들을 수집하여 조작정보를 생성하는 조작모듈을 구비하고,
상기 분석부는,
상기 상태정보, 감지정보, 영상정보 및 조작정보 각각에 포함된 부품에 대한 식별ID를 색인하고, 해당 식별ID가 발생한 시간, 및 빈도를 시계열적으로 분류하여 수치화한 분석정보를 생성하는 분석모듈과, 상기 상태정보에 기 설정된 범위를 벗어나는 이상신호가 포함된 경우, 이상신호를 발생시킨 부품과 대응하는 식별ID를 포함하는 점검정보를 생성하는 점검모듈을 포함하고,
상기 제어부는,
상기 분석정보와 대응하도록 차량의 내연기관, 조향기관, 제동기관 및 전자기기 각각의 구동 상태를 모니터링하여 입력값과 출력값을 추출하는 모니터링 모듈과, 상기 입력값 대비 출력값의 차이가 기 설정된 범위를 벗어나는 경우, 해당 부품의 식별ID와 대응하는 부품에 대한 점검정보를 생성하는 점검모듈과, 상기 점검모듈로부터 인가받은 점검정보 및 식별ID와 대응하는 부품리스트를 색인하여 출력부로 인가하는 IoT모듈을 포함하는 것을 특징으로 하는 사용자 경험 기반의 차량 연동 디스플레이 시스템. - 삭제
- 삭제
- 삭제
- 제1항에 있어서,
상기 출력부는,
상기 조작정보와 대응하는 상태정보, 감지정보 또는 영상정보를 화면을 통해 디스플레이하고 스피커를 통해 출력하는 출력모듈; 및
상기 제어부의 제어에 따라 운전자로부터 입력받은 조작정보와 대응하도록 시나리오 또는 카테고리별 UX콘텐츠를 출력하는 UX출력모듈을
포함하는 것을 특징으로 하는 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템. - 삭제
- 삭제
- 삭제
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200088542A KR102374234B1 (ko) | 2020-07-17 | 2020-07-17 | 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 및 그 운영 방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200088542A KR102374234B1 (ko) | 2020-07-17 | 2020-07-17 | 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 및 그 운영 방법 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20220010657A KR20220010657A (ko) | 2022-01-26 |
| KR102374234B1 true KR102374234B1 (ko) | 2022-03-16 |
Family
ID=80051100
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020200088542A KR102374234B1 (ko) | 2020-07-17 | 2020-07-17 | 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 및 그 운영 방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102374234B1 (ko) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117261925B (zh) * | 2023-11-23 | 2024-01-23 | 润芯微科技(江苏)有限公司 | 一种基于单屏场景的副驾便捷智能交互系统及方法 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101752798B1 (ko) | 2015-09-10 | 2017-07-11 | 엘지전자 주식회사 | 차량 및 그 제어방법 |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20130009158A (ko) * | 2011-07-14 | 2013-01-23 | 에스케이플래닛 주식회사 | 안전운전 제공 방법, 이를 위한 장치 및 시스템 |
| KR102309316B1 (ko) | 2015-06-02 | 2021-10-05 | 엘지전자 주식회사 | 차량용 디스플레이 장치 및 이를 구비한 차량 |
| KR102529123B1 (ko) * | 2015-12-30 | 2023-05-09 | 한국전자통신연구원 | 차량 사고 방지 장치 및 방법 |
| KR102479540B1 (ko) * | 2017-12-21 | 2022-12-21 | 삼성전자주식회사 | 주행 컨텍스트에 기반한 디스플레이 제어 방법 및 장치 |
| KR102631160B1 (ko) * | 2019-07-11 | 2024-01-30 | 엘지전자 주식회사 | 차량 탑승자 상태 감지방법 및 차량 탑승자 상태 감지장치 |
-
2020
- 2020-07-17 KR KR1020200088542A patent/KR102374234B1/ko active IP Right Grant
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101752798B1 (ko) | 2015-09-10 | 2017-07-11 | 엘지전자 주식회사 | 차량 및 그 제어방법 |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20220010657A (ko) | 2022-01-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10115302B2 (en) | Trainable transceiver and camera systems and methods | |
| US9854085B2 (en) | Apparatus and method for controlling portable device in vehicle | |
| US10277892B2 (en) | Image transmitting device that captures an image when a braking operation of a vehicle is performed | |
| CN107054218B (zh) | 标识信息显示装置和方法 | |
| US10818106B2 (en) | System and method for pre-trip inspection of a tractor-trailer | |
| US20050267632A1 (en) | Vehicle diagnosis robot | |
| US20120313770A1 (en) | Driver assistance detection system | |
| CN107042824A (zh) | 用于检测车辆中的意外事件的系统和方法 | |
| KR101716604B1 (ko) | 시스템의 정보를 표시하기 위한 방법 및 장치 | |
| US20220089127A1 (en) | Information processing apparatus, program, computer readable recording medium, and information processing method | |
| US20200327317A1 (en) | Unmanned autonomous vehicle and method of controlling the same | |
| KR102374234B1 (ko) | 딥러닝 학습을 이용한 사용자 경험 기반의 차량 연동 디스플레이 시스템 및 그 운영 방법 | |
| KR101430881B1 (ko) | 카메라를 구비하여 차량의 동작 상태를 모니터링하기 위한 차량 모니터링 장치 | |
| KR102420342B1 (ko) | 자율주행차량이 혼재된 교통흐름 제어를 위한 교통흐름 제어 장치 및 이를 이용하는 방법 | |
| KR102185373B1 (ko) | 자동차용 안전 및 비상 신호 표시 시스템 | |
| CN105684062B (zh) | 用于提供关于临近车辆的事件的事件消息的方法和装置 | |
| KR102319383B1 (ko) | 블랙박스 영상을 이용하여 교통 법규 위반 차량을 자동으로 신고하는 장치 및 방법 | |
| KR20160128656A (ko) | 실시간 교통사고 정보 제공시스템 | |
| KR20220010656A (ko) | 사용자 경험 기반의 차량 연동 디스플레이 시스템 및 그 운영 방법 | |
| KR20150068680A (ko) | 스마트 주차 안내 단말기 및 시스템, 및 이를 이용한 스마트 주차 안내 방법 | |
| CN207241573U (zh) | 全面屏智能后视镜及汽车 | |
| CN112118417A (zh) | 车辆侧后方影像显示装置及方法 | |
| KR101832217B1 (ko) | 스마트카 컨버전 시스템 | |
| CN110853389B (zh) | 一种适用于无人物流车的路测监控系统 | |
| EP3855732B1 (en) | Image display system and image display mehtod |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |