KR102286569B1 - 스마트카의 시스루 디스플레이 제어 시스템 및 방법 - Google Patents

스마트카의 시스루 디스플레이 제어 시스템 및 방법 Download PDF

Info

Publication number
KR102286569B1
KR102286569B1 KR1020190150386A KR20190150386A KR102286569B1 KR 102286569 B1 KR102286569 B1 KR 102286569B1 KR 1020190150386 A KR1020190150386 A KR 1020190150386A KR 20190150386 A KR20190150386 A KR 20190150386A KR 102286569 B1 KR102286569 B1 KR 102286569B1
Authority
KR
South Korea
Prior art keywords
user
driving
information
smart car
see
Prior art date
Application number
KR1020190150386A
Other languages
English (en)
Other versions
KR102286569B9 (ko
KR20210062774A (ko
Inventor
김영민
김용광
송수현
정지훈
박지웅
Original Assignee
주식회사 이에스피
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 이에스피 filed Critical 주식회사 이에스피
Priority to KR1020190150386A priority Critical patent/KR102286569B1/ko
Publication of KR20210062774A publication Critical patent/KR20210062774A/ko
Application granted granted Critical
Publication of KR102286569B1 publication Critical patent/KR102286569B1/ko
Publication of KR102286569B9 publication Critical patent/KR102286569B9/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B60K35/81—Arrangements for controlling instruments for controlling displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/34—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating change of drive direction
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • B60R11/0229—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for displays, e.g. cathodic tubes
    • B60R11/0235—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for displays, e.g. cathodic tubes of flat type, e.g. LCD
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00—Conjoint control of vehicle sub-units of different type or different function
    • B60W10/24—Conjoint control of vehicle sub-units of different type or different function including control of energy storage means
    • B60W10/26—Conjoint control of vehicle sub-units of different type or different function including control of energy storage means for electrical energy, e.g. batteries or capacitors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/10—Path keeping
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/14—Adaptive cruise control
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W40/09—Driving style or behaviour
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00—Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001—Planning or execution of driving tasks
    • B60W60/0013—Planning or execution of driving tasks specially adapted for occupant comfort
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
    • B60R2001/1215—Mirror assemblies combined with other articles, e.g. clocks with information displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0872—Driver physiology
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146—Display means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00—Input parameters relating to overall vehicle dynamics
    • B60W2520/06—Direction of travel
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00—Input parameters relating to overall vehicle dynamics
    • B60W2520/10—Longitudinal speed
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/30—Driving style
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00—Input parameters relating to data
    • B60W2556/45—External transmission of data to or from the vehicle
    • B60W2556/50—External transmission of data to or from the vehicle of positioning data, e.g. GPS [Global Positioning System] data
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
    • Y02T10/00—Road transport of goods or passengers
    • Y02T10/60—Other road transportation technologies with climate change mitigation effect
    • Y02T10/70—Energy storage systems for electromobility, e.g. batteries
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
    • Y02T10/00—Road transport of goods or passengers
    • Y02T10/80—Technologies aiming to reduce greenhouse gasses emissions common to all road transportation technologies
    • Y02T10/84—Data processing systems or methods, management, administration

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Automation & Control Theory (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

스마트카의 시스루 디스플레이 제어 시스템 및 방법을 개시한다. 실시예에 따른 스마트카의 시스루 디스플레이 제어 시스템 및 방법은 스마트카 사용자의 행동 형태와 차량의 주행상황, 주행정보, 상태정보를 종합적으로 고려하여 스마트카에 장착된 시스루 멀티 스크린 중 디스플레이 영역을 추출하고, 컨텐츠 출력 세부정보를 최적 제어 함으로써, 스마트카에서의 디스플레이 효율을 향상시키고, 엔터테인먼트 정보 검색 및 정보 전달을 보다 편리하게 이용할 수 있도록 한다. 또한, 일반 주행모드에서 스마트 디스플레이의 트렌드 및 사용자 행동 분석 결과를 시스템에 반영하여 스마트카 디스플레이 시스템 성능 및 효율을 향상시킨다.

Description

스마트카의 시스루 디스플레이 제어 시스템 및 방법{SMART CAR SEE-THROUGH DISPLAY CONTROL SYSTEM AND METHOD THEREOF}
스마트카의 시스루 디스플레이 제어 시스템에 관한 것으로 구체적으로, 주행정보 및 차량 사용자의 위치 정보에 따라 스마트카의 멀티 스크린 중 시스루 디스플레이 영역을 선택하고 출력 컨텐츠의 세부정보를 설정하는 디스플레이 제어 시스템 및 방법에 관한 것이다.
본 명세서에서 달리 표시되지 않는 한, 이 섹션에 설명되는 내용들은 이 출원의 청구항들에 대한 종래 기술이 아니며, 이 섹션에 포함된다고 하여 종래 기술이라고 인정되는 것은 아니다.
최근 소비자가전박람회(CES, Consumer Electronics Show)나 모바일월드 콩그레스(MWC) 등 대표적인 정보통신기술(ICT) 관련 박람회에서 자동차 업체들이 전용 부스를 마련하고 최첨단 인포테인먼트(infotainment) 시스템을 선보이면서 스마트 카 산업이 부상하고 있다. 이러한 경향은 단지 자동차 업계에만 해당하는 것이 아니다. 칩셋, 솔루션 업체 등 스마트카에 관한 다양한 사업자가 대거 참여하면서 정보통신 기업들의 스마트카에 높은 관심을 보였다. 최근 스마트 카 산업은 여러 전문가로부터 ‘자동차가 향후 대표적인 스마트 단말로, 미래의 새로운 성장 산업을 견인할 것’이라는 기대감을 들게 하고 있다.
스마트 생태계의 개화는 자동차 산업뿐 아니라 관련 산업 전체에 새로운 비즈니스 기회를 제공할 것으로 기대된다. 초기의 스마트 카 시장은 자동차 산업 특성상 독립된 자체 생태계를 형성하며 진화할 것으로 보이지만, 스마트 기기 간 연결성이 확대됨에 따라 스마트폰 생태계와 유사한 특성을 지닐 것으로 예상된다. 실제로 모든 단말이 연결되는 스마트 환경에서 스마트카는 스마트폰, 태블릿PC, 스마트 TV에 이은 또 다른 스크린으로 진화하고 있다.
새로운 스크린으로서 자동차는 결국 새로운 스마트 기기로서 모바일 생태계적 구조를 가질 것이다. 모든 기기가 연결되고 클라우드를 기반으로 한 서비스가 활성화됨에 따라 스마트카도 멀티스크린(N-screen)의 중요한 구성 요소로 자리매김할 전망이다. 이런 측면에서 스마트카는 단기적으로는 스마트폰과 연동되는 다양한 차량 내 인포테인먼트(In-Vehicle Infortainment) 서비스를 제공하는 수준에서 시장이 형성될 것으로 보인다.
최근 출시된 스마트카는 자동차만의 특화된 서비스를 통해 안전하고 편안한 운전에 도움을 주고 텔레매틱스, 위치정보서비스(LBS) 등 지리 정보 서비스를 제공한다. 소셜네트워크서비스(SNS)나 게임, 멀티미디어 등 다양한 서비스를 이용할 수도 있다. 또한 서비스 제공 범위도 운전자 위주에서 동승자로 확대되고 있는 추세다. 다양한 인포테인먼트 서비스에 대한 수요가 증가하면서 차량의 멀티스크린 단말화도 진행되고 있다.
이처럼 자동차 선택 기준이 성능, 내구성, 디자인, 연비 등 하드웨어적 관점에서 점차 정보통신기술을 활용한 편의성이나 연결성 등으로 변화하고 있다. 따라서 스마트카는 네트워크, 모바일 기기 등과의 연동 강화로 차량 내 외부와 소통이 증대되고, 사용자인터페이스(UI) 개선으로 이용 편의성이 증대되는 추세다. 네트워크 연결 및 이를 통한 콘텐츠 소비를 통해 가치 증대를 경험한 소비자들로 인해 자동차의 커넥티드화도 필연적이다.
시장 수요 측면에서는 스마트폰의 다양한 서비스를 즐기던 고객이 자동차 안에서도 동일한 경험을 요구하고 있다. 이들에게는 자동차가 또 하나의 생활공간으로 인식되면서 스마트폰의 경험을 자동차로 전이하려는 욕구도 매우 큰 편이다. 실제로 최근 운전자들이 SNS, LBS, 멀티미디어 등 다양한 서비스 이용 경험을 차량이라는 물리적 공간에서도 소비하려는 욕구가 늘어나고 있다는 연구들이 많이 나오고 있다. 아울러, 시스루(see through) 디스플레이 및 터치 기술을 이용한 도어 트림에 관한 연구 등 최신 디스플레이 기술을 스마트카에 적용한 기술 개발이 활발하다.
1. 공개특허공보 제10-2017-0044471호 (2017.04.25.) 2. 공개특허공보 제10-2019-0123368호 (2019.11.01)
실시예에서는 차량 주행정보, 상태정보, 사용자 설정 및 사용자의 위치 정보에 따라 시스루 멀티 스크린 중 컨텐츠가 디스플레이 되는 영역을 선택하고, 디스플레이 영역에 출력되는 컨텐츠를 제어한다. 또한, 실시예에 따른 스마트카의 시스루 디스플레이 제어 시스템 및 방법은 디스플레이 활용 엔터테인먼트, 정보검색, 정보전달 시스템을 제공하고, 시스루 (See-through) 개념이 적용된 스마트카의 도어 트림 시스템을 제안한다. 아울러, 스마트카에서 스마트 디스플레이를 통한 사용자 행태분석(Focus group discuss, Persona, Customer journey map)결과에 따른 디스플레이 제어 방법을 제공하여 스마트카에서, 사용자의 개인 컨텐츠, 차량 상태 정보 및 주행지역의 지리정보와 텔레메틱스 등 다양한 컨텐츠를 편리하게 제공받을 수 있도록 한다.
실시예에 따른 스마트카의 시스루 디스플레이 제어 시스템은 스마트카 사용자의 위치 및 탑승위치와 시선, 제스처, 피로도를 포함하는 생체정보를 파악하여 사용자의 행동 의도와 주행과정과 연관된 사용자 다음 행동을 예측하는 사용자 행동형태정보 분석모듈; 네비게이션 및 스마트카에 장착된 센서와 카메라를 통해 스마트카의 주행 위치 및 주변주행 상황을 파악하는 주행상황 분석모듈; 주행상황과 사용자 제어 및 자율주행에 따른 차속, 주행상태, 기어상태, 주행방향을 포함하는 주행정보와 연료잔량, 배터리 충전량을 포함하는 차량 상태정보를 파악하는 차량상태정보 분석모듈; 및 사용자 행동형태정보, 차량 주행상황과 주행정보에 따라 스마트카에 설치된 멀티 스크린 중 컨텐츠를 디스플레이 영역을 선택하고, 선택된 디스플레이 영역에 차량 주행상황, 주행정보, 사용자 제어정보를 포함하는 컨텐츠를 출력하는 디스플레이 제어모듈; 을 포함한다.
다른 실시예에 따른 스마트카의 시스루 디스플레이 제어 시스템은 사용자 행동형태정보 분석모듈은 스마트카 사용자의 위치 및 탑승위치와 시선, 제스처, 피로도를 포함하는 생체정보를 파악하여 사용자의 행동 의도와 주행과정과 연관된 사용자 다음 행동을 예측하는 제1단계; 주행상황 분석모듈은 네비게이션 및 스마트카에 장착된 센서와 카메라를 통해 스마트카의 주행 위치 및 주변주행 상황을 파악하는 제2단계; 차량상태정보 분석모듈은 주행상황과 사용자 제어 및 자율주행에 따른 차속, 주행상태, 기어상태, 주행방향을 포함하는 주행정보와 연료잔량, 배터리 충전량을 포함하는 차량 상태정보를 파악하는 제3단계; 및 디스플레이 제어모듈은 사용자 행동형태정보, 차량 주행상황과 주행정보에 따라 스마트카에 설치된 멀티 스크린 중 컨텐츠를 디스플레이 영역을 선택하고, 선택된 디스플레이 영역에 차량 주행상황, 주행정보, 사용자 제어정보를 포함하는 컨텐츠를 출력하는 제4단계; 를 포함한다.
실시예에 따른 스마트카의 시스루 디스플레이 제어 시스템 및 방법은 스마트카 사용자의 행동 형태와 차량의 주행상황, 주행정보, 상태정보를 종합적으로 고려하여 스마트카에 장착된 시스루 멀티 스크린 중 디스플레이 영역을 추출하고, 컨텐츠 출력 세부정보를 최적 제어 함으로써, 스마트카에서의 디스플레이 효율을 향상시키고, 엔터테인먼트 정보 검색 및 정보 전달을 보다 편리하게 이용할 수 있도록 한다.
또한, 일반 주행모드에서 스마트 디스플레이의 트렌드 및 사용자 행동 분석 결과를 시스템에 반영하여 스마트카 디스플레이 시스템 성능 및 효율을 향상시킨다.
본 발명의 효과는 상기한 효과로 한정되는 것은 아니며, 본 발명의 상세한 설명 또는 특허청구범위에 기재된 발명의 구성으로부터 추론 가능한 모든 효과를 포함하는 것으로 이해되어야 한다.
도 1은 실시예에 따른 스마트카의 시스루 디스플레이 제어 시스템의 데이터 처리 블록을 나타낸 도면
도 2는 실시예에 따른 스마트카의 시스루 디스플레이 제어 시스템의 스마트카 제어 컨텐츠 출력 예를 나타낸 도면
도 3은 실시예에 따른 행동형태정보 분석모듈(100)의 데이터 처리 블록을 나타낸 도면
도 4는 실시예에 따른 디스플레이 제어모듈의 데이터 처리 구성을 나타낸 도면
도 5는 디스플레이 세부정보 설정에 따라 출력되는 컨텐츠 예를 나타낸 도면
도 6은 실시예에 따른 스마트카의 시스루 디스플레이 제어 방법의 데이터 처리 흐름을 나타낸 흐름도
도 7은 스마트카의 시스루 디스플레이 제어시스템의 구현 예를 나타낸 도면
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시 예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시 예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 도면부호는 동일 구성 요소를 지칭한다.
본 발명의 실시 예들을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명의 실시 예에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 실시예에 따른 스마트카의 시스루 디스플레이 제어 시스템의 데이터 처리 블록을 나타낸 도면이다.
도 1을 참조하면, 실시예에 따른 스마트카의 시스루 디스플레이 제어 시스템은 행동형태정보 분석모듈(100), 주행상황 분석모듈(200), 차량상태정보 분석모듈(300) 및 디스플레이 제어모듈(400)을 포함하여 구성될 수 있다. 본 명세서에서 사용되는 '모듈' 이라는 용어는 용어가 사용된 문맥에 따라서, 소프트웨어, 하드웨어 또는 그 조합을 포함할 수 있는 것으로 해석되어야 한다. 예를 들어, 소프트웨어는 기계어, 펌웨어(firmware), 임베디드코드(embedded code), 및 애플리케이션 소프트웨어일 수 있다. 또 다른 예로, 하드웨어는 회로, 프로세서, 컴퓨터, 집적 회로, 집적 회로 코어, 센서, 멤스(MEMS; Micro-Electro-Mechanical System), 수동 디바이스, 또는 그 조합일 수 있다.
사용자 행동형태정보 분석모듈(100)은 스마트카 사용 등록자인 사용자와 탑승자의 위치와 시선, 제스처, 생체정보를 파악하여 사용자의 행동 의도와 다음 행동을 예측한다. 예컨대, 사용자 행동형태정보 분석모듈(100)은 사용자 제스처에 따른 주행과정과 각각의 주행과정에서 예측되는 사용자의 제스쳐 및 시선정보 등의 데이터베이스를 미리 구축한다. 구체적으로, 주행 시작과정에서는 사용자의 시선이 클러스터 및 헤드업 디스플레이로 향하고, 사용자가 안전벨트를 착용하거나 네비게이션에 경로정보를 입력하는 등의 행동정보를 미리 구축할 수 있다. 즉, 실시예에서는 주행시작, 주행중, 주행종료 등의 과정에 대응되는 사용자 행동 형태와 제스처 순서를 데이터베이스에 미리 구축할 수 있다. 또한, 실시예에서는 사용자 별 행동 패턴을 파악하여 사용자 별로 특정 행동 이후 수행하는 다른 행동을 예측할 수 있다. 이는 스마트카를 이용하는 사용자의 특정 행동정보가 인식되는 경우, 주행 과정과 사용자 행동에 따라 사용자의 다음 행동을 미리 예측하고 예측에 대한 스마트카 제어 컨텐츠 및 다양한 컨텐츠를 적절한 위치에 출력하기 위해 구축하는 데이터이다. 예컨대, 수행시작 단계에서 안전벨트 착용 또는 네비게이션 입력 등의 행동정보가 설정되어 있고, 스마트카의 주행 시작단계에서 사용자가 안전벨트 매는 행동이 감지된 경우, 안전벨트가 설치된 좌측 디스플레이 영역에 차량 주행을 위한 초기 정보와 차량 설정 컨텐츠 등을 출력할 수 있도록 한다.
주행상황 분석모듈(200)은 네비게이션 및 스마트카에 장착된 센서와 카메라를 통해 스마트카의 주행 위치 및 주변주행 상황을 파악한다. 실시예에서 주행상황 분석모듈(200)은 차량에 설치된 센서와 카메라를 통해 차량 주변 모니터링 정보를 수집하고 차량의 주행경로에 따라 좌회전, 우회전, 직진, 후진 등의 주행경로와 차량 주변에 존재하는 객체 정보를 파악한다.
차량상태정보 분석모듈(300)은 주행상황과 사용자 제어 및 자율주행에 따른 차속, 주행상태, 기어상태, 주행방향을 포함하는 주행정보와 연료잔량, 배터리 충전량을 포함하는 차량 상태정보를 파악한다. 또한, 차량 상태정보에는 차량 주행정보 변화율과 연료나 배터리 부족, 경로 이탈 및 충돌과 같은 이상상황과 긴급상황에 대한 알림 정보가 포함될 수 있다.
디스플레이 제어모듈(400)은 사용자 행동행태정보, 차량 주행상황과 주행정보에 따라 스마트카에 설치된 멀티 스크린 중 디스플레이 영역을 선택하고, 선택된 디스플레이 영역에 차량 주행상황, 주행정보, 사용자 제어정보를 포함하는 스마트카 제어 컨텐츠를 출력한다. 실시예에 따른 스마트카는 스마트카의 칵핏, 도어트림 및 좌석에 구비된 스크린에 시스루 디스플레이 멀티스크린을 구비한다. 시스루 디스플레이 멀티 스크린은 투명한 유리에 문자와 도형 등 데이터를 띄워 사용자에게 스마트카 제어 정보를 제공한다. 실시예에서는 옵티컬시스루(Optical See-Through) 장치를 제공하여, 실제와 가상 세계의 중첩 되어 디스플레이 할 수 있다. 옵티컬 시스루 디스플레이는 사용자가 눈으로 밖을 보면서 투명 디스플레이에 표시된 가상 객체(정보)를 중첩해 볼 수 있고, 실시예에서 시스루 디스플레이의 투명도는 차량 주변환경의 명도와 사용자 시력에 따라 자동 설정될 수 있다.
도 2는 실시예에 따른 스마트카의 시스루 디스플레이 제어 시스템의 스마트카 제어 컨텐츠 출력 예를 나타낸 도면이다.
도 2의 (a)를 참조하면, 실시예에 따른 스마트카의 시스루 디스플레이 제어 시스템은 사용자의 위치에 따라 디스플레이 영역을 제어할 수 있다. 실시예에는 도 2의 (a)에 도시된 바와 같이, 사용자가 스마트카 탑승 전에 과정에서 차량 내부를 확인하려 하는 경우, 차량의 헤드업 디스플레이, 창문과 도어의 시스루 디스플레이 투명도를 조정하고, 디스플레이 영역을 확대하여 차량 내부 전체를 사용자가 확인할 수 있도록 한다.
또한, 도 2의 (b)를 참조하면, 스마트카의 시스루 디스플레이 제어 시스템은 스마트카에 탑승한 사용자가 여러 명이거나, 사용자가 스마트카를 자율주행 모드로 전환하고 뒷자리로 이동하는 경우, 사용자들의 인원수와 탑승위치에 따라 스마트카 제어 컨텐츠를 출력하는 디스플레이 영역을 조정할 수 있다. 또한, 실시예에서는 자율주행 모드에서 사용자의 스마트 디바이스와 연동하여 사용자가 확인하고자 하는 디지털 컨텐츠를 시스루 디스플레이 영역에 출력할 수 있다. 또한, 많은 사람이 탑승하는 스마트카에서는 좌석 위치에 따라 좌석 각각에 할당되는 디스플레이 영역을 각 좌석의 도어 트림 또는 앞 좌석의 스크린 등으로 설정할 수 있다.
도 2의 (c)를 참조하면, 실시예에 따른 스마트카의 시스루 디스플레이 제어 시스템은 차량 주행정보 또는 사용자 시선에 따라 인식하고자 하는 정보를 차량 도어 트림의 디스플레이 영역에 출력할 수 있다. 도 2의 (c)에 도시된 바와 같이, 실시예에서는 사용자가 오른쪽 차선의 후방에 접근한 차량을 확인하려고 우측 사이드 미러 방향으로 시선을 변경하거나, 우회전 방향 지시등을 작동시키거나, 주행 중인 경로 정보에서 우측 방향 전환이 필요한 것으로 파악되는 경우, 종래 우측 사이드 미러에서 비춰 보이던 우측 차선의 차량 모습을 우측 보조석의 도어 트림의 디스플레이 영역에 출력할 수 있다. 이때, 우측 차선에서 접근하는 차량과 사용자가 탑승한 스마트카 사이의 거리 및 후방객체의 시속, 끼어들기 적합 여부 등의 운전 가이드 정보가 함께 도어 트림의 시스루 디스플레이 영역에 출력될 수 있고, 주행중인 도로의 조도와 차량 내부의 밝기에 따라 도어 트림 디스플레이 영역에 출력되는 화면의 투명도, 선명도 등 세부정보가 자동 설정될 수 있다.
도 3은 실시예에 따른 행동형태정보 분석모듈(100)의 데이터 처리 블록을 나타낸 도면이다.
도 3을 참조하면, 실시예에 따른 행동 형태정보 분석모듈(100)은 센싱부(110), 비교부(130) 및 판단부(150)를 포함하여 구성될 수 있다. 센싱부(110)는 스마트카 탑승자 및 스마트카 시스템에 등록한 사용자의 제스쳐와 위치를 파악하고, 심박동, 시선정보, 피로도, 혈압 등의 생체정보를 센싱한다.
비교부(130)는 센싱부(110)에서 파악된 사용자의 제스처, 위치정보 및 생체정보를 기 저장된 사용자 행동 형태 정보와 비교한다. 판단부(150)는 비교 결과 및 스마트카의 상태정보에 따라 주행 시작, 종료, 주행 중 과 같은 주행 과정을 파악하고, 파악된 주행과정 따른 사용자의 다음 행동을 예측한다. 이후, 판단부(150)는 예측된 주행과정과 사용자의 다음행동에 대응하는 사용자가 필요할 것으로 예측되는 스마트카 제어 정보, 차량 상태정보 또는 사용자 단말에 저장된 사용자 개인 컨텐츠 등을 추출한다.
도 4는 실시예에 따른 디스플레이 제어모듈의 데이터 처리 구성을 나타낸 도면이고, 도 5는 디스플레이 세부정보 설정에 따라 출력되는 컨텐츠 예를 나타낸 도면이다.
도 4를 참조하면, 실시예에 따른 디스플레이 제어모듈은 정보수집부(410), 추출부(430) 및 설정부(450)를 포함하여 구성될 수 있다. 정보수집부(410)는 스마트카에 구비된 멀티 디스플레이 영역의 출력 제어 및 디스플레이 컨텐츠 제어를 위한 사용자 행동 형태정보, 사용자 행동 예측정보 및 차량 주행 정보를 수집한다. 추출부(430)는 수집된 사용자 행동 형태정보와, 행동 예측정보 및 차량 주행정보에 따라 시스루 디스플레이 영역에 출력될 스마트 카 제어 컨텐츠 또는 사용자 개인 컨텐츠를 추출한다. 설정부(450)는 출력될 스마트 카 제어 컨텐츠 또는 사용자 개인 컨텐츠의 세부 정보 및 스마트카에서 출력될 영역을 설정한다. 구체적으로 설정부(450)는 출력 컨텐츠의 글씨체, 색, 화면 투명도, 명도 등 출력컨텐츠의 디스플레이 품질 향상을 위한 세부 정보를 설정한다.
도 5는 출력 컨텐츠 세부정보에 따라 컨텐츠의 디자인, 사용자 인터페이스, 글자크기, 색, 선명도, 밝기 등이 다르게 설정되어 디스플레이 되는 예를 나타낸 도면으로, 도 5에 도시된 바와 같이, 실시예에서는 스마트카가 주행중인 지역의 날씨정보, 차량 도어 트림의 상태정보 등도 출력될 수 있다.
아울러, 설정부(450)는 사용자의 행동 예측 정보 및 시선 정보에 따라 출력컨텐츠가 디스플레이 될 영역을 설정한다. 예컨대, 설정부(450)는 운전석에 탑승한 사용자 시선이 좌측으로 감지되고, 예상 주행경로에서 좌회전 예정이거나 좌측 방향지시 등이 구동되는 경우, 좌측 도어 트림의 시스루 디스플레이 영역 또는 운전자의 좌측 디스플레이 영역을 주행정보 또는 사용자 개인 컨텐츠를 출력하는 영역으로 설정한다.
실시예에서 디스플레이 제어모듈(400)은 주행상황과 스마트카의 위치에 따라 제한속도, 스쿨 존 안내, 일방통행안내 등의 주행안내 정보를 사용자의 시선을 추적결과와 행동 예측 정보에 따른 디스플레이 영역에 출력할 수 있다. 또한, 사용자의 디지털 디바이스와 연동하여 사용자가 접근하기 희망하는 컨텐츠를 출력할 수 있다.
이하에서는 스마트카의 시스루 디스플레이 제어 방법에 대해서 차례로 설명한다. 실시예에 따른 스마트카의 시스루 디스플레이 제어 방법의 작용(기능)은 스마트카의 시스루 디스플레이 제어 시스템상의 기능과 본질적으로 같은 것이므로 도 1 내지 도 3과 중복되는 설명은 생략하도록 한다.
도 6은 실시예에 따른 스마트카의 시스루 디스플레이 제어 방법의 데이터 처리 흐름을 나타낸 흐름도이다.
S100 단계에서는 스마트카에 설치된 센서와 카메라에 의해 생성된 영상에서 사용자 위치, 행동 및 제스처와 시선을 포함하는 행동정보를 파악하고, 파악된 행동정보를 기 저장된 행동 행태 정보와 비교하여 사용자의 행동 형태정보를 분석하고, 사용자의 다음 행동을 예측한다. 예컨대, S100 단계에서는 사용자의 다음 시선이 머무를 영역 또는 다음 행동을 예측하여, 사용자의 시선 이동경로에 포함되는 디스플레이 영역에 출력 컨텐츠가 나타나도록 한다.
S200 단계에서는 스마트카의 위치, 주행도로 상태, 교통 상태 등 주행상황을 분석하고, 차속, 급정거 여부, 주행방향, 기어상태 등의 주행상황을 분석한다.
S300 단계에서는 주행상황정보, 차량 상태 정보 및 사용자 행동 형태 정보 분석결과에 따라 스마트카 제어 컨텐츠 및 사용자 개인 컨텐츠가 출력될 디스플레이 영역을 추출한다. 실시예에서 사용자 개인 컨텐츠는 캘린더, 스케줄, 문서, 인터넷 등 사용자의 스마트 디바이스와 연동되어 출력 가능한 모든 컨텐츠를 포함할 수 있다.
S400 단계에서는 시스루 디스플레이 영역에 출력될 컨텐츠의 출력될 출력 세부정보가 설정된다. 실시예에서 출력 세부정보에는 디스플레이 영역에 출력되는 객체의 크기, 글자 색, 진하기, 투명도 등의 세부 설정정보가 포함될 수 있다. 또한 S400 단계는 사용자의 디지털 단말과 연동되어 사용자의 개인 컨텐츠를 스마트카의 시스루 디스플레이 영역에 출력하는 경우, 추출된 디스플레이 영역의 크기 및 가로세로 비율에 대응하도록 개인 컨텐츠의 크기와 비율을 변환하는 과정이 포함될 수 있다.
S500 단계에서는 설정된 세부 정보에 따라 스마트카의 시스루 디스플레이 영역에서 스마트카 제어 컨텐츠, 차량 상태정보, 텔레메틱스정보 및 외부 환경 정보 컨텐츠, 개인 컨텐츠 등이 출력된다.
도 7은 스마트카의 시스루 디스플레이 제어시스템의 구현 예를 나타낸 도면이다.
도 7의 (a)에 도시된 바와 같이, 실시예에 따른 스마트카의 시스루 디스플레이 제어시스템은 스마트카 제어 컨텐츠, 차량 상태정보, 차량 주행정보, 차량 주변환경정보를 나타내는 컨텐츠 및 사용자의 스마트 폰에 저장된 사용자 개인 컨텐츠를 포함하는 다양한 시각적 객체를 스마트카에 포함된 시스루 디스플레이 영역에서 출력하여 사용자에게 제공할 수 있다.
도 7의 (b)에 도시된 바와 같이, 실시예에 따른 스마트카는 창문, 헤드업 디스플레이, 클러스터, 도어 트림, 좌석 등 차량 곳곳에 멀티스크린 및 시스루 디스플레이 영역을 구비하여, 사용자의 제스처, 행동 및 시선 등 생체 정보에 따라 사용자가 쉽게 인식할 수 있는 곳에 컨텐츠를 출력할 수 있다.
실시예에 따른 스마트카의 시스루 디스플레이 제어 시스템 및 방법은 스마트카 사용자의 행동 형태와 차량의 주행상황, 주행정보, 상태정보를 종합적으로 고려하여 스마트카에 장착된 시스루 멀티 스크린 중 디스플레이 영역을 추출하고, 컨텐츠 출력 세부정보를 최적 제어 함으로써, 스마트카에서의 디스플레이 효율을 향상시키고, 엔터테인먼트 정보 검색 및 정보 전달을 보다 편리하게 이용할 수 있도록 한다. 또한, 일반 주행모드에서 스마트 디스플레이의 트렌드 및 사용자 행동 분석 결과를 시스템에 반영하여 스마트카 디스플레이 시스템 성능 및 효율을 향상시킨다.
개시된 내용은 예시에 불과하며, 특허청구범위에서 청구하는 청구의 요지를 벗어나지 않고 당해 기술분야에서 통상의 지식을 가진 자에 의하여 다양하게 변경 실시될 수 있으므로, 개시된 내용의 보호범위는 상술한 특정의 실시예에 한정되지 않는다.

Claims (10)

  1. 스마트카의 시스루 디스플레이 제어 시스템에 있어서,
    스마트카 사용자의 위치 및 탑승위치와 시선, 제스처, 피로도를 포함하는 생체정보를 파악하여 사용자의 행동 의도와 주행과정과 연관된 사용자 다음 행동을 예측하는 사용자 행동형태정보 분석모듈;
    네비게이션 및 스마트카에 장착된 센서와 카메라를 통해 스마트카의 주행 위치 및 주변주행 상황을 파악하는 주행상황 분석모듈;
    주행상황과 사용자 제어 및 자율주행에 따른 차속, 주행상태, 기어상태, 주행방향을 포함하는 주행정보와 연료잔량, 배터리 충전량을 포함하는 차량 상태정보를 파악하는 차량상태정보 분석모듈; 및
    사용자 행동형태정보, 차량 주행상황과 주행정보에 따라 스마트카에 설치된 멀티 스크린 중 컨텐츠를 디스플레이 영역을 선택하고, 선택된 디스플레이 영역에 차량 주행상황, 주행정보, 사용자 제어정보를 포함하는 컨텐츠를 출력하는 디스플레이 제어모듈; 을 포함하고,
    상기 사용자 행동형태정보 분석모듈;은
    스마트카에 등록된 사용자의 스마트 단말과 연동되어 사용자의 위치를 파악하고, 탑승, 주행시작, 운전시작, 주행종료를 포함하는 기 저장된 주행과정과 각 주행과정에 포함된 사용자 행동형태정보와 센싱된 사용자의 행동정보를 비교하여, 비교 결과에 따라 사용자 행동형태정보를 파악하고 사용자의 다음 행동을 예측하고,
    상기 디스플레이 제어모듈;은
    예측된 사용자의 다음 행동과 위치정보에 따라 디스플레이 영역을 선택하고,
    차량 주행정보를 파악하여, 차량의 주행 방향 및 이동경로에 대응하는 시스루 디스플레이 영역을 추출하여 추출된 시스루 디스플레이 영역에 스마트 카 제어 컨텐츠를 출력하고, 좌측과 우측 도어 트림 중 사용자가 감지되는 방향의 도어 트림의 시스루 디스플레이 영역에 스마트카 제어 컨텐츠, 차량 상태정보 및 사용자의 스마트 단말과 연동된 컨텐츠 중 어느 하나를 출력하는 것을 특징으로 하는 스마트카의 시스루 디스플레이 제어 시스템.
  2. 제 1항에 있어서, 상기 스마트카의 시스루 디스플레이 제어 시스템은
    스마트카의 칵핏, 도어트림 및 차량좌석 스크린에 시스루 디스플레이 멀티스크린; 을 더 포함하는 것을 특징으로 하는 스마트카의 시스루 디스플레이 제어 시스템.
  3. 삭제
  4. 삭제
  5. 제 1항에 있어서, 상기 디스플레이 제어모듈;은
    스마트카에 탑승한 사용자의 시선정보, 제스쳐를 포함하는 행동정보를 파악하고 사용자 시선 이동경로에 포함되는 디스플레이 영역에 스마트카 제어 컨텐츠를 출력하는 것을 특징으로 하는 스마트카의 시스루 디스플레이 제어 시스템.
  6. 스마트카의 시스루 디스플레이 제어 시스템에 있어서,
    사용자 행동형태정보 분석모듈은 스마트카 사용자의 위치 및 탑승위치와 시선, 제스처, 피로도를 포함하는 생체정보를 파악하여 사용자의 행동 의도와 주행과정과 연관된 사용자 다음 행동을 예측하는 제1단계;
    주행상황 분석모듈은 네비게이션 및 스마트카에 장착된 센서와 카메라를 통해 스마트카의 주행 위치 및 주변주행 상황을 파악하는 제2단계;
    차량상태정보 분석모듈은 주행상황과 사용자 제어 및 자율주행에 따른 차속, 주행상태, 기어상태, 주행방향을 포함하는 주행정보와 연료잔량, 배터리 충전량을 포함하는 차량 상태정보를 파악하는 제3단계; 및
    디스플레이 제어모듈은 사용자 행동형태정보, 차량 주행상황과 주행정보에 따라 스마트카에 설치된 멀티 스크린 중 컨텐츠를 디스플레이 영역을 선택하고, 선택된 디스플레이 영역에 차량 주행상황, 주행정보, 사용자 제어정보를 포함하는 컨텐츠를 출력하는 제4단계; 를 포함하고,
    상기 제1단계;는
    스마트카에 등록된 사용자의 스마트 단말과 연동되어 사용자의 위치를 파악하고, 탑승, 주행시작, 운전시작, 주행종료를 포함하는 기 저장된 주행과정과 각 주행과정에 포함된 사용자 행동형태정보와 센싱된 사용자의 행동정보를 비교하여, 비교 결과에 따라 사용자 행동형태정보를 파악하고 사용자의 다음 행동을 예측하는 제1-1단계; 및
    상기 제어모듈에서 예측된 사용자의 다음 행동과 위치정보에 따라 디스플레이 영역을 선택하는 제1-2단계;를 포함하고,
    상기 제4단계; 는
    차량 주행정보를 파악하여, 차량의 주행 방향 및 이동경로에 대응하는 시스루 디스플레이 영역을 추출하여 추출된 시스루 디스플레이 영역에 스마트 카 제어 컨텐츠를 출력하는 제4-1단계; 및
    좌측과 우측 도어 트림 중 사용자가 감지되는 방향의 도어 트림의 시스루 디스플레이 영역에 스마트카 제어 컨텐츠, 차량 상태정보 및 사용자의 스마트 단말과 연동된 컨텐츠 중 어느 하나를 출력하는 제4-2단계;를 포함하는 것을 특징으로 하는 스마트카의 시스루 디스플레이 제어 방법.
  7. 삭제
  8. 삭제
  9. 제 6항에 있어서, 상기 제4단계; 는
    스마트카에 탑승한 사용자의 시선정보, 제스쳐를 포함하는 행동정보를 파악하고 사용자 시선 이동경로에 포함되는 디스플레이 영역에 스마트카 제어 컨텐츠를 출력하는 것을 특징으로 하는 스마트카의 시스루 디스플레이 제어 방법.
  10. 제 6항에 있어서, 상기 제4단계; 는
    스마트카의 주행방향, 주행 예측 경로, 및 좌우측 방향지시등 동작여부에 따라 좌측 또는 우측 사이드 미러에 나타나는 후방객체를 좌측 또는 우측 스마트카 도어 트림의 디스플레이 영역에 출력하는 것을 특징으로 하는 스마트카의 시스루 디스플레이 제어 방법.
KR1020190150386A 2019-11-21 2019-11-21 스마트카의 시스루 디스플레이 제어 시스템 및 방법 KR102286569B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190150386A KR102286569B1 (ko) 2019-11-21 2019-11-21 스마트카의 시스루 디스플레이 제어 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190150386A KR102286569B1 (ko) 2019-11-21 2019-11-21 스마트카의 시스루 디스플레이 제어 시스템 및 방법

Publications (3)

Publication Number Publication Date
KR20210062774A KR20210062774A (ko) 2021-06-01
KR102286569B1 true KR102286569B1 (ko) 2021-08-09
KR102286569B9 KR102286569B9 (ko) 2021-11-12

Family

ID=76375823

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190150386A KR102286569B1 (ko) 2019-11-21 2019-11-21 스마트카의 시스루 디스플레이 제어 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR102286569B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114415436A (zh) * 2022-02-25 2022-04-29 吉林大学 一种适用于智能汽车信息反馈的透明显示系统
CN117261925B (zh) * 2023-11-23 2024-01-23 润芯微科技(江苏)有限公司 一种基于单屏场景的副驾便捷智能交互系统及方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017208719A1 (ja) * 2016-06-02 2017-12-07 ソニー株式会社 表示制御装置及び表示制御方法、表示装置、並びに移動体装置
US20180352362A1 (en) 2016-02-12 2018-12-06 Bayerische Motoren Werke Aktiengesellschaft Seat-Optimized Reproduction of Entertainment for Autonomous Driving

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102124004B1 (ko) 2015-10-15 2020-06-17 삼성전자주식회사 터치 스크린 기반 이동 디바이스에 대한 잠금의 설정 및 해제 방법 및 그에 따른 이동 디바이스
KR20170059224A (ko) * 2015-11-20 2017-05-30 현대모비스 주식회사 운전자 시선 기반 안전운전 정보 제공 시스템 및 방법
DE102018204941A1 (de) * 2018-03-29 2019-10-02 Volkswagen Aktiengesellschaft Verfahren, Vorrichtung und computerlesbares Speichermedium mit Instruktionen zum Bereitstellen von Inhalten zur Anzeige für einen Insassen eines Kraftfahrzeugs
KR20190123368A (ko) 2018-04-10 2019-11-01 주식회사 이에스피 스마트 카 제어 및 디스플레이 시스템
KR20190104922A (ko) * 2019-08-21 2019-09-11 엘지전자 주식회사 자율주행 차량의 제어 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180352362A1 (en) 2016-02-12 2018-12-06 Bayerische Motoren Werke Aktiengesellschaft Seat-Optimized Reproduction of Entertainment for Autonomous Driving
WO2017208719A1 (ja) * 2016-06-02 2017-12-07 ソニー株式会社 表示制御装置及び表示制御方法、表示装置、並びに移動体装置

Also Published As

Publication number Publication date
KR102286569B9 (ko) 2021-11-12
KR20210062774A (ko) 2021-06-01

Similar Documents

Publication Publication Date Title
CN109416733B (zh) 便携式个性化
JP6551790B2 (ja) 運転支援方法およびそれを利用した運転支援装置、自動運転制御装置、車両、プログラム
US9596643B2 (en) Providing a user interface experience based on inferred vehicle state
JP6525888B2 (ja) コンテキストに基づいた車両ユーザインターフェースの再構成
KR101854633B1 (ko) 인터랙티브 차량 제어 시스템을 위한 통합된 웨어러블 용품
US7269504B2 (en) System and method for assigning a level of urgency to navigation cues
KR101730315B1 (ko) 영상을 공유하는 전자 기기 및 방법
US9902266B2 (en) Interactive vehicle window display system with personal convenience reminders
US20170329329A1 (en) Controlling autonomous-vehicle functions and output based on occupant position and attention
US20200117187A1 (en) Autonomous car decision override
CN112041215A (zh) 用于运行具有自动驾驶系统的机动车的方法和机动车
US20110145331A1 (en) Method and System for Communication with Vehicles
CN104094340A (zh) 可重新配置的个性化车辆显示器
KR20160057458A (ko) 사용자 식별 및 차량 기능 제어를 갖는 인터랙티브 차량 윈도우 디스플레이 시스템
WO2013074897A1 (en) Configurable vehicle console
KR102286569B1 (ko) 스마트카의 시스루 디스플레이 제어 시스템 및 방법
CN112525214B (zh) 一种地图卡片的交互方法、装置、车辆、可读介质
JP2023546266A (ja) 車両の運転者の視界における情報の表示を制御するためのデバイスおよび方法
KR101525351B1 (ko) 휴대용 단말기와 연동하는 차량의 표시 제어시스템
WO2020019231A1 (en) Apparatus and method for use with vehicle
Andreone et al. Beyond context-awareness: driver-vehicle-environment adaptivity. from the comunicar project to the aide concept
Nakrani Smart car technologies: a comprehensive study of the state of the art with analysis and trends
KR20220067606A (ko) 차량 내 전자 장치 및 차량 내 전자 장치에서 디스플레이 방법
KR20220010655A (ko) 주행모드 및 사용자 제어모션에 따른 자율주행 차량의 동적 칵핏 제어 시스템
KR102246498B1 (ko) 자율주행 차량용 칵핏모듈 및 디스플레이 모듈 위치제어 방법

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
G170 Re-publication after modification of scope of protection [patent]