KR102650178B1 - 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램 - Google Patents

가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램 Download PDF

Info

Publication number
KR102650178B1
KR102650178B1 KR1020240016702A KR20240016702A KR102650178B1 KR 102650178 B1 KR102650178 B1 KR 102650178B1 KR 1020240016702 A KR1020240016702 A KR 1020240016702A KR 20240016702 A KR20240016702 A KR 20240016702A KR 102650178 B1 KR102650178 B1 KR 102650178B1
Authority
KR
South Korea
Prior art keywords
virtual driver
vehicle
virtual
hologram
driver
Prior art date
Application number
KR1020240016702A
Other languages
English (en)
Other versions
KR20240018564A (ko
Inventor
유철종
Original Assignee
(주)다산지앤지
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)다산지앤지 filed Critical (주)다산지앤지
Priority to KR1020240016702A priority Critical patent/KR102650178B1/ko
Publication of KR20240018564A publication Critical patent/KR20240018564A/ko
Application granted granted Critical
Publication of KR102650178B1 publication Critical patent/KR102650178B1/ko

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00—Drive control systems specially adapted for autonomous road vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/211—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays producing three-dimensional [3D] effects, e.g. stereoscopic images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/85—Arrangements for transferring vehicle- or driver-related data
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00—Conjoint control of vehicle sub-units of different type or different function
    • B60W10/20—Conjoint control of vehicle sub-units of different type or different function including control of steering systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00—Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001—Planning or execution of driving tasks
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/148—Instrument input by voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/29—Holographic features
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0001—Details of the control system
    • B60W2050/0002—Automatic control, details of type of controller or control system architecture
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00—Input parameters relating to data
    • B60W2556/45—External transmission of data to or from the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00—Input parameters relating to data
    • B60W2556/45—External transmission of data to or from the vehicle
    • B60W2556/50—External transmission of data to or from the vehicle of positioning data, e.g. GPS [Global Positioning System] data

Landscapes

  • Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Automation & Control Theory (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)

Abstract

가상 운전자 서비스를 제공하는 장치는, 차량의 내부의 투영 영역에 가상 운전자에 대한 제 1 홀로그램을 출력하는 홀로그램 출력부, 상기 차량의 자율 주행을 위한 주행 정보를 도출하는 주행 정보 도출부 및 상기 주행 정보에 기초하여 상기 가상 운전자의 동작을 제어하는 가상 운전자 제어부를 포함하고, 상기 홀로그램 출력부는 상기 동작이 반영된 상기 가상 운전자에 대한 제 1 홀로그램을 출력하고, 상기 가상 운전자 제어부는 상기 주행 정보에 기초하여 상기 가상 운전자의 동작이 상기 차량의 조향 장치의 작동과 동기화되도록 상기 가상 운전자가 상기 조향 장치를 가상 조작하도록 상기 가상 운전자의 동작을 제어한다.

Description

가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램{APPARATUS, METHOD AND COMPUTER PROGRAM FOR PROVIDING VIRTUAL DIRVER SERVICE}
본 발명은 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램에 관한 것이다.
자율주행차(self-driving car)란, 운전자가 핸들과 가속페달, 브레이크 등을 조작하지 않아도 정밀한 지도, 위성항법시스템(GPS) 등 차량의 각종 센서를 이용하여 차량이 스스로 운행 상황을 파악함으로써, 목적지까지 주행하는 자동차를 의미한다.
자율주행차는 시스템이 운전에 관여하는 정도와 운전자가 차를 제어하는 방법에 따라 비자동화부터 완전 자동화까지 점진적인 자율 주행 기술 단계를 포함한다. 자율 주행 기술 단계는 총 6단계로 구성되며, 0단계는 비자동화, 1단계는 운전자 보조, 2단계는 부분 자동화, 3단계는 조건부 자동화, 4단계는 고도 자동화, 5단계는 완전 자동화로 구분된다.
이러한 자율 주행 기술과 관련하여, 선행기술인 한국공개특허 제2017-0054186호는 자율주행차량 제어 장치 및 그 방법을 개시하고 있다.
차량의 내부의 투영 영역에 가상 운전자에 대한 제 1 홀로그램을 출력하는 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램을 제공하고자 한다.
차량의 자율 주행을 위한 주행 정보를 도출하고, 주행 정보에 기초하여 가상 운전자의 동작을 제어하고, 동작이 반영된 가상 운전자에 대한 제 1 홀로그램을 출력하는 장치, 방법 및 컴퓨터 프로그램을 제공하고자 한다.
다만, 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.
상술한 기술적 과제를 달성하기 위한 수단으로서, 본 발명의 일 실시예는, 차량의 내부의 투영 영역에 가상 운전자에 대한 제 1 홀로그램을 출력하는 홀로그램 출력부, 상기 차량의 자율 주행을 위한 주행 정보를 도출하는 주행 정보 도출부 및 상기 주행 정보에 기초하여 상기 가상 운전자의 동작을 제어하는 가상 운전자 제어부를 포함하고, 상기 홀로그램 출력부는 상기 동작이 반영된 상기 가상 운전자에 대한 제 1 홀로그램을 출력하고, 상기 가상 운전자 제어부는 상기 주행 정보에 기초하여 상기 가상 운전자의 동작이 상기 차량의 조향 장치의 작동과 동기화되도록 상기 가상 운전자가 상기 조향 장치를 가상 조작하도록 상기 가상 운전자의 동작을 제어하는 것인 장치를 제공할 수 있다.
본 발명의 다른 실시예는, 차량의 내부의 투영 영역에 가상 운전자에 대한 제 1 홀로그램을 출력하는 단계, 상기 차량의 자율 주행을 위한 주행 정보를 도출하는 단계, 상기 주행 정보에 기초하여 상기 가상 운전자의 동작을 제어하는 단계 및 상기 동작이 반영된 상기 가상 운전자에 대한 제 1 홀로그램을 출력하는 단계를 포함하고, 상기 차량의 조향 장치가 상기 차량의 내부로 내장된 경우, 가상 조향 장치에 대한 제 2 홀로그램을 더 출력하는 단계를 더 포함하고, 상기 주행 정보에 기초하여 상기 가상 운전자의 동작이 상기 차량의 조향 장치의 작동과 동기화되어 상기 가상 운전자가 상기 조향 장치를 가상 조작하도록 상기 가상 운전자의 동작을 제어하는 단계를 더 포함하는 가상 운전자 서비스 제공 방법을 제공할 수 있다.
본 발명의 또 다른 실시예는, 컴퓨터 프로그램은 컴퓨팅 장치에 의해 실행될 경우, 차량의 내부의 투영 영역에 가상 운전자에 대한 제 1 홀로그램을 출력하고, 상기 차량의 자율 주행을 위한 주행 정보를 도출하고, 상기 주행 정보에 기초하여 상기 가상 운전자의 동작을 제어하고, 상기 동작이 반영된 상기 가상 운전자에 대한 제 1 홀로그램을 출력하도록 하는 명령어들의 시퀀스를 포함하고, 상기 차량의 조향 장치가 상기 차량의 내부로 내장된 경우, 가상 조향 장치에 대한 제 2 홀로그램을 더 출력하도록 하는 명령어들의 시퀀스를 더 포함하고, 상기 주행 정보에 기초하여 상기 가상 운전자의 동작이 상기 차량의 조향 장치의 작동과 동기화되어 상기 가상 운전자가 상기 조향 장치를 가상 조작하도록 상기 가상 운전자의 동작을 제어하도록 하는 명령어들의 시퀀스를 더 포함하는 매체에 저장된 컴퓨터 프로그램을 제공할 수 있다.
전술한 본 발명의 과제 해결 수단 중 어느 하나에 의하면, 차량의 내부의 투영 영역에 가상 운전자에 대한 제 1 홀로그램을 출력함으로써, 가상 운전자가 운전석에 정확하게 착석한 모습이 표현되도록 하는 장치, 방법 및 컴퓨터 프로그램을 제공하고자 한다.
차량의 주행 정보에 기초하여 가상 운전자의 동작을 제어함으로써, 차량의 동승석 또는 뒷좌석에 탑승한 탑승자에게 현재 차량이 주행 정보에 따라 올바르게 주행되고 있음을 인지하게 하는 장치, 방법 및 컴퓨터 프로그램을 제공하고자 한다.
도 1은 본 발명의 일 실시예에 따른 가상 운전자 서비스 제공 시스템의 구성도이다.
도 2는 본 발명의 일 실시예에 따른 가상 운전자 서비스 제공 장치의 구성도이다.
도 3은 본 발명의 일 실시예에 따른 장치가 제 1 홀로그램을 출력하는 과정을 설명하기 위한 예시적인 도면이다.
도 4는 본 발명의 일 실시예에 따른 장치가 제 1 및 제 2 홀로그램을 출력하는 과정을 설명하기 위한 예시적인 도면이다.
도 5는 본 발명의 일 실시예에 따른 가상 운전자 서비스 제공 장치에서 가상 운전자 서비스를 제공하는 방법의 순서도이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미하며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 명세서에 있어서 '부(部)'란, 하드웨어에 의해 실현되는 유닛(unit), 소프트웨어에 의해 실현되는 유닛, 양방을 이용하여 실현되는 유닛을 포함한다. 또한, 1 개의 유닛이 2 개 이상의 하드웨어를 이용하여 실현되어도 되고, 2 개 이상의 유닛이 1 개의 하드웨어에 의해 실현되어도 된다.
본 명세서에 있어서 단말 또는 디바이스가 수행하는 것으로 기술된 동작이나 기능 중 일부는 해당 단말 또는 디바이스와 연결된 서버에서 대신 수행될 수도 있다. 이와 마찬가지로, 서버가 수행하는 것으로 기술된 동작이나 기능 중 일부도 해당 서버와 연결된 단말 또는 디바이스에서 수행될 수도 있다.
이하 첨부된 도면을 참고하여 본 발명의 일 실시예를 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 가상 운전자 서비스 제공 시스템의 구성도이다. 도 1을 참조하면, 가상 운전자 서비스 제공 시스템(1)은 가상 운전자 서비스 제공 장치(110) 및 서버(미도시)를 포함할 수 있다. 가상 운전자 서비스 제공 시스템(1)은 차량 단말(120) 및 사용자 단말(125)을 더 포함할 수도 있다. 가상 운전자 서비스 제공 장치(110), 서버, 차량 단말(120) 및 사용자 단말(125)은 가상 운전자 서비스 제공 시스템(1)에 의하여 제어될 수 있는 구성요소들을 예시적으로 도시한 것이다.
도 1의 가상 운전자 서비스 제공 시스템(1)의 각 구성요소들은 일반적으로 네트워크(network)를 통해 연결된다. 예를 들어, 도 1에 도시된 바와 같이, 가상 운전자 서비스 제공 장치(110)는 서버, 차량 단말(120) 또는 사용자 단말(125)과 동시에 또는 시간 간격을 두고 연결될 수 있다.
네트워크는 단말들 및 서버들과 같은 각각의 노드 상호 간에 정보 교환이 가능한 연결 구조를 의미하는 것으로, 근거리 통신망(LAN: Local Area Network), 광역 통신망(WAN: Wide Area Network), 인터넷 (WWW: World Wide Web), 유무선 데이터 통신망, 전화망, 유무선 텔레비전 통신망 등을 포함한다. 무선 데이터 통신망의 일례에는 3G, 4G, 5G, WIMAX(World Interoperability for Microwave Access), 와이파이(Wi-Fi), 블루투스 통신, 적외선 통신, 초음파 통신, 가시광 통신(VLC: Visible Light Communication), 라이파이(LiFi) 등이 포함되나 이에 한정되지는 않는다.
가상 운전자 서비스 제공 장치(110)는 차량 단말(120)과 통신을 수행할 수 있다. 예를 들어, 가상 운전자 서비스 제공 장치(110)는 차량 단말(120)로부터 차량(100)의 자율 주행을 위한 내비게이션 정보를 수신할 수 있다. 여기서, 내비게이션 정보는 출발지, 경유지, 목적지, 목적지까지의 소요시간을 포함하는 경로 정보, 차량(100)이 자율 주행하도록 차량(100)을 제어하기 위한 차량 제어 정보, 도로 정보, 교통 정보 및 날씨 정보를 포함할 수 있다. 이 때, 차량 제어 정보는 예를 들어, 조향 장치(130)의 조향 타이밍, 조향 속도, 조향각, 가속 타이밍, 가속 정도, 가속 지속 시간, 제동 타이밍, 제동 정도, 제동 지속 시간 등의 직접 제어 정보 및 인접 차량의 위치와 속도, 차량(100)이 이동할 방향과 타이밍을 포함하는 간접 제어 정보를 포함할 수 있다.
가상 운전자 서비스 제공 장치(110)는 사용자 단말(125)과 통신을 수행할 수 있다. 가상 운전자 서비스 제공 장치(110)는 사용자 단말(125)로부터 가상 운전자(115)에 대한 설정 정보를 수신할 수 있다. 가상 운전자(115)에 대한 설정 정보는 예를 들어, 투영 영역의 위치 정보, 가상 운전자(115)의 자세 정보 및 신체 부위별 위치 정보, 캐릭터 정보 등을 포함할 수 있다. 예를 들어, 가상 운전자 서비스 제공 장치(110)는 사용자 단말(125)로부터 가상 운전자(115)의 상반신의 운전석 밀착 여부와 같이 가상 운전자(115)에 대한 자세 정보 및 가상 운전자(115)의 손의 위치 정보와 같이 가상 운전자(115)에 대한 각 신체 부위별 위치 정보를 수신할 수 있다.
가상 운전자 서비스 제공 장치(110)는 차량(100)의 내부의 투영 영역에 가상 운전자(115)에 대한 제 1 홀로그램을 출력할 수 있다. 여기서, 투영 영역은 차량(100)의 운전석 영역일 수 있다.
가상 운전자 서비스 제공 장치(110)는 수신한 설정 정보에 기초하여 투영 영역의 위치, 가상 운전자(115)의 자세 및 신체 부위별 위치를 조정할 수 있다. 예를 들어, 가상 운전자 서비스 제공 장치(110)는 설정 정보에 기초하여 투영 영역의 위치를 운전석의 중심으로 조정할 수 있다. 다른 예를 들어, 가상 운전자 서비스 제공 장치(110)는 가상 운전자(115)의 상반신이 운전석에 너무 밀착한 경우, 설정 정보에 기초하여 가상 운전자(115)의 상반신을 조향 장치(130)와 가까워지도록 가상 운전자(115)의 자세를 조정할 수 있다. 또 다른 예를 들어, 가상 운전자(115)의 손의 위치가 조향 장치(130)로부터 벗어난 경우, 가상 운전자 서비스 제공 장치(110)는 설정 정보에 기초하여 가상 운전자(115)의 손의 위치를 조향 장치(130) 상에 놓여지도록 조정할 수 있다.
가상 운전자 서비스 제공 장치(110)는 차량(100)의 자율 주행을 위한 내비게이션 정보에 기초하여 주행 정보를 도출할 수 있다. 예를 들어, 주행 정보는 조향 장치(130)의 조향 타이밍, 조향 속도, 조향각, 가속 타이밍, 가속 정도, 가속 지속 시간, 제동 타이밍, 제동 정도 및 제동 지속 시간을 포함할 수 있다.
가상 운전자 서비스 제공 장치(110)는 주행 정보에 기초하여 가상 운전자(115)의 동작을 제어할 수 있다. 예를 들어, 가상 운전자 서비스 제공 장치(110)는 주행 정보 및 조향 장치(130)의 위치에 기초하여 가상 운전자(115)가 조향 장치(130)를 가상 조작하도록 가상 운전자(115)의 동작을 제어할 수 있다. 여기서, 가상 조작이란 주행 정보에 기초하여 가상 운전자(115)의 동작이 조향 장치(130)의 작동과 동기화됨으로써, 가상 운전자(115)가 조향 장치(130)를 실제로 조작하는 모습처럼 보이도록 하는 것을 의미할 수 있다.
일 실시예에 따르면, 차량(100)에 내장된 조향 장치(130)가 노출되고, 가상 운전자 서비스 제공 장치(110)는 동작이 반영된 가상 운전자(115)에 대한 제 1 홀로그램을 출력할 수 있다. 이 때, 가상 운전자 서비스 제공 장치(110)는 제 1 홀로그램만을 출력하고, 후술하는 제 2 홀로그램은 출력하지 않을 수 있다.
일 실시예에 따르면, 가상 운전자 서비스 제공 장치(110)는 차량(100)의 조향 장치(130)가 차량(100)의 내부로 내장된 경우, 제 1 홀로그램뿐만 아니라 가상 조향 장치에 대한 제 2 홀로그램을 출력할 수 있다.
가상 운전자 서비스 제공 장치(110)는 주행 정보에 기초하여 가상 운전자(115)가 가상 조향 장치를 가상 조작하도록 가상 운전자(115)의 동작을 제어할 수 있다.
가상 운전자 서비스 제공 장치(110)는 차량(100)의 탑승자(105)가 발화한 음성을 인식하고, 인식된 음성에 기초하여 가상 운전자(115)가 탑승자(105)와 대화하도록 할 수 있다. 예를 들어, 가상 운전자 서비스 제공 장치(110)는 탑승자(105)가 발화한 음성을 인식한 경우, 인식된 음성을 서버(미도시)로 전송한 후, 서버(미도시)로부터 음성에 기초하여 도출된 답변을 수신할 수 있다.
가상 운전자 서비스 제공 장치(110)는 가상 운전자(115)에 대한 설정 정보에 기초하여 답변을 출력할 수 있다. 예를 들어, 가상 운전자 서비스 제공 장치(110)는 가상 운전자(115)에 대해 캐릭터 정보에 기초하여 답변을 출력할 수 있다. 여기서, 캐릭터 정보는 복수의 여성 캐릭터, 복수의 남성 캐릭터, 복수의 게임/동물 캐릭터 중 탑승자(105)에 의해 선택된 어느 하나의 캐릭터를 포함할 수 있다. 예를 들어, 가상 운전자(115)의 캐릭터 정보는 캐릭터별로 기설정된 손짓, 몸짓과 관련된 동작, 얼굴 표정, 말투 등에 따라 가상 운전자(115)의 캐릭터, 동작, 얼굴 표정, 말투 등이 각각 다르게 표현될 수 있다.
예를 들어, 복수의 여성 캐릭터 중 가상 운전자(115)에 대한 캐릭터가 여성 비서 캐릭터로 선택된 경우, 가상 운전자 서비스 제공 장치(110)는 공손한 말투, 사무적인 몸짓 및 얼굴 표정으로 표현되는 가상 운전자(115)가 탑승자(105)와 대화하도록 할 수 있다. 다른 예를 들어, 복수의 남성 캐릭터 중 가상 운전자(115)에 대한 캐릭터가 남성 보디카드 캐릭터로 선택된 경우, 가상 운전자 서비스 제공 장치(110)는 무뚝뚝한 말투, 정중한 몸짓 및 얼굴 표정으로 표현되는 가상 운전자(115)가 탑승자(105)와 대화하도록 할 수 있다. 또 다른 예를 들어, 복수의 게임/동물 캐릭터 중 가상 운전자(115)에 대한 캐릭터가 펭귄 캐릭터로 선택된 경우, 가상 운전자 서비스 제공 장치(110)는 귀여운 말투, 추임새, 톡톡튀는 개성적인 몸짓, 손짓 및 얼굴 표정으로 표현되는 가상 운전자(115)가 탑승자(105)와 대화하도록 할 수 있다. 차량 단말(120)은 가상 운전자 서비스 제공 장치(110)와 연동되어 통신을 수행할 수 있다.
차량 단말(120)은 차량(100)의 자율 주행을 위한 내비게이션 정보를 가상 운전자 서비스 제공 장치(110)로 전송할 수 있다. 이러한 차량 단말(120)은 내비게이션 장치, 차량(100)의 인포테인먼트 장치 등을 포함할 수 있다.
차량 단말(120)이 가상 운전자 서비스 제공 서비스를 지원하는 경우, 차량 단말(120)은 탑승자(105)로부터 가상 운전자(115)와 관련된 설정 정보를 입력받고, 입력된 가상 운전자(115)와 관련된 설정 정보는 가상 운전자 서비스 제공 장치(110)로 전송될 수 있다. 이 때, 가상 운전자(115)와 관련된 설정 정보는 서버(미도시)를 경유하여 가상 운전자 서비스 제공 장치(110)로 전송될 수 있다.
이와 달리, 차량 단말(120)이 가상 운전자 서비스를 지원하지 않는 경우, 사용자 단말(125)은 가상 운전자 서비스 제공 앱을 통해 탑승자(105)로부터 가상 운전자(115)와 관련된 설정 정보를 입력받고, 입력된 가상 운전자(115)와 관련된 설정 정보는 가상 운전자 서비스 제공 장치(110)로 전송될 수 있다. 이 때, 가상 운전자(115)와 관련된 설정 정보는 서버를 경유하여 가상 운전자 서비스 제공 장치(110)로 전송될 수 있다.
이러한 가상 운전자(115)의 설정 정보는 사용자 단말(125) 또는 차량 단말(120)에 설치된 가상 운전자 서비스 제공 앱을 통해 설정될 수 있다.
사용자 단말(125)은 가상 운전자(115)에 대한 캐릭터 정보, 성격, 의상 등을 설정할 수 있다. 여기서, 가상 운전자(115)의 캐릭터 정보, 성격, 의상 등은 가상 운전자 서비스 제공 앱에서 구매 또는 대여를 통해 탑승자(105)에 의해 설정될 수 있다. 예를 들어, 탑승자(105)는 사용자 단말(125)의 가상 운전자 서비스 제공 앱을 통해 복수의 캐릭터 중 여성 비서 캐릭터, 복수의 성격 중 톡톡튀는 성격, 복수의 의상 중 정장을 선택한 경우, 가상 운전자(115)가 정장을 착용한 여성 비서 캐릭터의 모습에 톡톡튀는 성격의 말투, 몸짓, 얼굴 표정 등이 적용되어 표현되도록 설정할 수 있다. 사용자 단말(125)은 차량(100)의 투영 영역의 위치, 가상 운전자(115)의 자세 및 신체 부위별 위치를 설정할 수 있다. 예를 들어, 사용자 단말(125)은 운전석에 위치한 가상 운전자(115)에 대한 대략적인 자세 및 위치를 설정할 수 있다. 이 때, 사용자 단말(125)은 투영 영역에 출력된 가상 운전자(115)에 대한 제 1 홀로그램을 보면서, 세부적으로 가상 운전자(115)의 각 신체부위별 위치(예를 들어, 손의 위치)를 설정할 수 있다. 이 때, 사용자 단말(125)은 설정한 가상 운전자(115)에 대한 자세 정보 및 위치 정보를 가상 운전자 서비스 제공 장치(110)로 전송할 수 있다.
도 2는 본 발명의 일 실시예에 따른 가상 운전자 서비스 제공 장치의 구성도이다. 도 2를 참조하면, 가상 운전자 서비스 제공 장치(110)는 통신부(210), 홀로그램 출력부(220), 조정부(230), 주행 정보 도출부(240), 가상 운전자 제어부(250) 및 대화 서비스 제공부(260)를 포함할 수 있다.
통신부(210)는 차량 단말(120) 또는 사용자 단말(125) 중 적어도 하나와 통신을 수행할 수 있다. 예를 들어, 통신부(210)는 사용자 단말(125)로부터 가상 운전자(115)에 대한 설정 정보를 수신할 수 있다. 여기서, 가상 운전자(115)와 관련된 설정 정보는 탑승자(105)에 의해 선택된 가상 운전자(115)에 대한 투영 영역의 위치 정보, 가상 운전자(115)의 자세 정보 및 신체 부위별 위치 정보, 캐릭터 정보 등을 포함할 수 있다.
통신부(210)는 사용자 단말(125) 또는 차량 단말(120)로부터 차량(100)의 자율 주행을 위한 내비게이션 정보를 수신할 수 있다. 여기서, 내비게이션 정보는 출발지, 경유지, 목적지, 목적지까지의 소요시간을 포함하는 경로 정보, 차량(100)이 자율 주행하도록 차량(100)을 제어하기 위한 차량 제어 정보, 도로 정보, 교통 정보 및 날씨 정보를 포함할 수 있다. 이 때, 차량 제어 정보는 예를 들어, 조향 장치(130)의 조향 타이밍, 조향 속도, 조향각, 가속 타이밍, 가속 정도, 가속 지속 시간, 제동 타이밍, 제동 정도, 제동 지속 시간 등의 직접 제어 정보 및 인접 차량의 위치와 속도, 차량(100)이 이동할 방향과 타이밍을 포함하는 간접 제어 정보를 포함할 수 있다.
홀로그램 출력부(220)는 차량(100)의 내부의 투영 영역에 가상 운전자(115)에 대한 제 1 홀로그램을 출력할 수 있다.
조정부(230)는 수신한 설정 정보에 기초하여 투영 영역의 위치, 가상 운전자(115)의 자세 및 신체 부위별 위치를 조정할 수 있다. 예를 들어, 조정부(230)는 설정 정보에 기초하여 투영 영역의 위치를 운전석의 중심으로 조정할 수 있다. 다른 예를 들어, 가상 운전자(115)의 상반신이 운전석에 밀착된 경우, 조정부(230)는 설정 정보에 기초하여 가상 운전자(115)의 상반신을 조향 장치(130)와 가까워지도록 가상 운전자(115)의 자세를 조정할 수 있다. 또 다른 예를 들어, 조정부(230)는 설정 정보에 기초하여 가상 운전자(115)의 손의 위치가 조향 장치(130)를 벗어난 경우, 가상 운전자(115)의 손의 위치가 조향 장치(130) 상에 놓여지도록 가상 운전자(115)에 대한 각 신체부위별 위치를 조정할 수 있다.
주행 정보 도출부(240)는 차량(100)의 자율 주행을 위한 내비게이션 정보에 기초하여 주행 정보를 도출할 수 있다.
가상 운전자 제어부(250)는 주행 정보 및 조향 장치(130)의 위치에 기초하여 가상 운전자(115)가 조향 장치(130)를 가상 조작하도록 가상 운전자(115)의 동작을 제어할 수 있다.
홀로그램 출력부(220)는 동작이 반영된 가상 운전자(115)에 대한 제 1 홀로그램을 출력할 수 있다. 이러한 제 1 홀로그램을 출력하는 과정에 대해서는 도 3을 통해 상세히 설명하도록 한다.
도 3은 본 발명의 일 실시예에 따른 장치가 제 1 홀로그램을 출력하는 과정을 설명하기 위한 예시적인 도면이다.
도 3을 참조하면, 차량(100)의 조향 장치(130)가 노출된 경우, 홀로그램 출력부(220)는 차량(100)의 내부의 투영 영역에 가상 운전자에 대한 제 1 홀로그램을 출력할 수 있다. 예를 들어, 홀로그램 출력부(220)는 사용자 단말(125)로부터 수신한 설정 정보에 기초하여 투영 영역의 위치 정보 및 가상 운전자(115)에 대해 설정된 자세 정보 및 신체 부위별 위치 정보에 기초하여 가상 운전자(115)의 머리, 몸통, 팔, 다리 등이 표현된 제 1 홀로그램을 출력할 수 있다.
주행 정보 도출부(240)는 차량(100)의 자율 주행을 위한 내비게이션 정보에 기초하여 주행 정보를 도출할 수 있다. 예를 들어, 현재 차량(100)의 위치가 강남역이고, 탑승자(105)가 광화문으로 이동하고자 하는 경우, 주행 정보 도출부(240)는 '출발지: 강남역', '목적지: 광화문'에 기초하여 조향 장치(130)의 조향 타이밍, 조향 속도, 조향각, 가속 타이밍, 가속 정도, 가속 지속 시간, 제동 타이밍, 제동 정도 및 제동 지속 시간 등을 도출할 수 있다.
가상 운전자 제어부(250)는 주행 정보에 기초하여 가상 운전자(115)의 동작을 제어할 수 있다. 여기서, 가상 운전자 제어부(250)는 주행 정보 및 조향 장치(130)의 위치에 기초하여 가상 운전자(115)가 조향 장치(130)를 가상 조작하도록 가상 운전자(115)의 동작을 제어할 수 있다. 여기서, 가상 조작이란 주행 정보에 기초하여 가상 운전자(115)의 동작이 조향 장치(130)의 작동과 동기화됨으로써, 가상 운전자(115)가 조향 장치(130)를 실제로 조작하는 모습처럼 보이도록 하는 것을 의미할 수 있다.
홀로그램 출력부(220)는 차량(100)에 내장된 조향 장치(130)가 노출되고, 동작이 반영된 가상 운전자(115)에 대한 제 1 홀로그램을 출력할 수 있다.
예를 들어, 가상 운전자 제어부(250)는 조향 장치(130)의 위치에 기초하여 가상 운전자(115)의 두 손이 조향 장치(130)를 쥐고 있는 모습이 표현되도록 가상 운전자(115)의 동작을 제어할 수 있다.
이후, 가상 운전자 제어부(250)는 차량(100)이 직진, 좌회전, 우회전, 유턴 등으로 주행할 경우, 차량(100)의 주행 정보 및 조향 장치(130)의 위치에 기초하여 가상 운전자(115)가 조향 장치(130)를 가상 조작하도록 가상 운전자(115)의 동작을 제어할 수 있다. 이 때, 가상 운전자(115)의 손의 동작은 차량(100)을 운전하는 동작으로, 주행 정보와 동기화되어 손 동작이 표현될 수 있다.
예를 들어, 차량(100)의 직진 주행이 예정된 경우, 가상 운전자 제어부(250)는 차량(100)의 주행 정보에 기초하여 가상 운전자(115)의 두 손이 조향 장치(130)를 쥐고 있는 모습으로 표현되도록 가상 운전자(115)의 동작을 제어할 수 있다. 다른 예를 들어, 차량(100)의 우회전(또는 좌회전)이 예정된 경우, 가상 운전자 제어부(250)는 차량(100)의 주행 정보에 기초하여 가상 운전자(115)가 조향 장치(130)를 우측 방향(또는 좌측 방향)으로 회전시키는 모습이 표현되도록 가상 운전자(115)의 동작을 제어할 수 있다. 또 다른 예를 들어, 차량(100)의 유턴(U-turn)이 예정된 경우, 가상 운전자 제어부(250)는 차량(100)의 주행 정보에 기초하여 가상 운전자(115)가 유턴을 위해 조향 장치(130)를 한 쪽 방향으로 끝까지 회전시키는 모습이 표현되도록 가상 운전자(115)의 동작을 제어할 수 있다. 또 다른 예를 들어, 차량(100)이 목적지에 도착한 경우, 가상 운전자 제어부(250)는 차량(100)의 주행 정보에 기초하여 가상 운전자(115)가 기어 노브(310)를 이용하여 차량(100)을 주차시키는 모습이 표현되도록 가상 운전자(115)의 동작을 제어할 수 있다.
다시 도 2로 돌아와서, 홀로그램 출력부(220)는 차량(100)의 조향 장치(130)가 차량(100)의 내부로 내장된 경우, 가상 조향 장치에 대한 제 2 홀로그램을 더 출력할 수 있다.
가상 운전자 제어부(250)는 주행 정보에 기초하여 가상 조향 장치를 가상 조작하도록 가상 운전자(115)의 동작을 제어할 수 있다.
홀로그램 출력부(220)는 동작이 반영된 가상 운전자(115)에 대한 제 1 홀로그램을 출력하고, 가상 조향 장치에 대한 제 2 홀로그램을 출력할 수 있다. 이러한 제 1 홀로그램 및 제 2 홀로그램을 출력하는 과정에 대해서는 도 4를 통해 상세히 설명하도록 한다.
도 4는 본 발명의 일 실시예에 따른 제 1 및 제 2 홀로그램을 출력하는 과정을 설명하기 위한 예시적인 도면이다.
홀로그램 출력부(220)는 차량(100)의 내부의 투영 영역에 가상 운전자(115) 에 대한 제 1 홀로그램을 출력할 수 있다. 예를 들어, 홀로그램 출력부(220)는 투영 영역의 위치 정보, 가상 운전자(115)에 대해 설정된 자세 정보 및 신체 부위별 위치 정보에 기초하여 가상 운전자(115)의 머리, 몸통, 팔, 다리 등이 표현되도록 제 1 홀로그램을 출력할 수 있다.
또한, 홀로그램 출력부(220)는 제 1 홀로그램뿐만 아니라, 가상 조향 장치(320)에 대한 제 2 홀로그램을 더 출력할 수 있다.
주행 정보 도출부(240)는 차량(100)의 자율 주행을 위한 내비게이션 정보에 기초하여 주행 정보를 도출할 수 있다. 예를 들어, 300m 전방에서 우회전을 해야 하는 경우, 주행 정보 도출부(240)는 조향 타이밍으로서 10초 뒤, 조향각으로서 조향 장치(130)를 90도의 조향각으로 조향한다는 주행 정보를 도출할 수 있다. 다른 예를 들어, 전방 차량이 급정거를 할 경우, 주행 정보 도출부(240)는 제동 타이밍으로서 즉시, 제동 정도로서 강하게 제동한다는 주행 정보를 도출할 수 있다.
가상 운전자 제어부(250)는 주행 정보에 기초하여 가상 운전자(115)가 가상 조향 장치(320)를 가상 조작하도록 가상 운전자(115)의 동작을 제어할 수 있다. 여기서, 가상 운전자 제어부(250)는 주행 정보 및 가상 조향 장치(320)의 위치에 기초하여 가상 운전자(115)가 가상 조향 장치(320)를 가상 조작하도록 가상 운전자(115)의 동작을 제어할 수 있다. 여기서, 가상 조작이란 주행 정보에 기초하여 가상 운전자(115)의 동작이 가상 조향 장치(320)의 작동과 동기화됨으로써, 가상 운전자(115)가 가상 조향 장치(320)를 실제로 조작하는 모습처럼 보이도록 하는 것을 의미할 수 있다.
홀로그램 출력부(220)는 조향 장치(130)가 차량(100)에 내장되고, 동작이 반영된 가상 운전자(115)에 대한 제 1 홀로그램을 출력할 수 있다.
예를 들어, 가상 운전자 제어부(250)는 가상 조향 장치(320)의 위치에 기초하여 가상 운전자(115)의 두 손이 가상 조향 장치(320)를 쥐고 있는 모습이 표현되도록 가상 운전자(115)의 동작을 제어할 수 있다.
이후, 가상 운전자 제어부(250)는 차량(100)이 직진, 좌회전, 우회전, 유턴 등으로 주행할 경우, 가상 운전자(115)가 차량(100)의 주행 정보에 기초하여 가상 조향 장치(320)를 가상 조작하도록 가상 운전자(115)의 동작을 제어할 수 있다.
예를 들어, 차량(100)의 직진 주행이 예정된 경우, 가상 운전자 제어부(250)는 차량(100)의 주행 정보 및 가상 조향 장치(320)의 위치에 기초하여 가상 운전자(115)의 두 손이 가상 조향 장치(320)를 쥐고 있는 모습으로 표현되도록 가상 운전자(115)의 동작을 제어할 수 있다. 다른 예를 들어, 차량(100)의 우회전(또는 좌회전)이 예정된 경우, 가상 운전자 제어부(250)는 차량(100)의 주행 정보 및 가상 조향 장치(320)의 위치에 기초하여 가상 운전자(115)가 가상 조향 장치(320)를 우측 방향(또는 좌측 방향)으로 회전시키는 모습이 표현되도록 가상 운전자(115)의 동작을 제어할 수 있다. 또 다른 예를 들어, 차량(100)의 유턴(U-turn)이 예정된 경우, 가상 운전자 제어부(250)는 차량(100)의 주행 정보 및 가상 조향 장치(320)의 위치에 기초하여 가상 운전자(115)가 가상 조향 장치(320)를 유턴을 위해 한 쪽 방향으로 끝까지 회전시키는 모습이 표현되도록 가상 운전자(115)의 동작을 제어할 수 있다. 또 다른 예를 들어, 차량(100)이 목적지에 도착한 경우, 가상 운전자 제어부(250)는 차량(100)의 주행 정보 및 가상 조향 장치(320)의 위치에 기초하여 가상 운전자(115)가 가상 기어 노브(330)를 이용하여 차량(100)을 주차시키는 모습이 표현되도록 가상 운전자(115)의 동작을 제어할 수 있다.
대화 서비스 제공부(260)는 차량(100)의 탑승자(105)가 발화한 음성을 인식하고, 인식된 음성에 기초하여 가상 운전자(115)가 탑승자(105)와 대화하도록 하는 서비스를 제공할 수 있다. 예를 들어, 대화 서비스 제공부(260)는 차량의 탑승자(105)가 발화한 음성을 인식한 경우, 통신부(210)를 통해 인식된 음성 데이터를 서버(미도시)로 전송하고, 서버(미도시)로부터 음성 데이터에 기초하여 도출된 답변을 수신할 수 있다.
대화 서비스 제공부(260)는 가상 운전자(115)에 대해 설정된 캐릭터 정보에 기초하여 답변을 출력할 수 있다. 여기서, 캐릭터 정보는 복수의 여성 캐릭터, 복수의 남성 캐릭터, 복수의 게임/동물 캐릭터 중 탑승자(105)에 의해 선택된 어느 하나의 캐릭터를 포함할 수 있다. 예를 들어, 이 때, 대화 서비스 제공부(260)는 가상 운전자(115)의 캐릭터 정보에 기초하여 캐릭터별로 기설정된 손짓, 몸짓과 관련된 동작, 얼굴 표정, 말투 등에 따라 가상 운전자(115)의 캐릭터, 동작, 얼굴 표정, 말투 등을 각각 다르게 표현하여 대화 서비스를 제공할 수 있다.
이 때, 대화 서비스 제공부(260)는 가상 운전자(115)의 입의 위치에 기초하여 가상 발화 위치를 설정하고, 설정된 가상 발화 위치에 기초하여 답변이 출력되도록 함으로써, 탑승자(105)가 가상 운전자(115)와 실제 대화하는 느낌을 받도록 할 수도 있다.
도 5는 본 발명의 일 실시예에 따른 가상 운전자 서비스 제공 장치에서 가상 운전자 서비스를 제공하는 방법의 순서도이다. 도 5에 도시된 가상 운전자 서비스 제공 장치(110)에서 가상 운전자 서비스를 제공하는 방법은 도 1 내지 도 4에 도시된 실시예에 따른 가상 운전자 서비스 제공 시스템(1)에 의해 시계열적으로 처리되는 단계들을 포함한다. 따라서, 이하 생략된 내용이라고 하더라도 도 1 내지 도 4에 도시된 실시예에 따른 가상 운전자 서비스 제공 장치(110)에서 가상 운전자 서비스를 제공하는 방법에도 적용된다.
단계 S510에서 가상 운전자 서비스 제공 장치(110)는 차량(100)의 내부의 투영 영역에 가상 운전자(115)에 대한 제 1 홀로그램을 출력할 수 있다.
단계 S520에서 가상 운전자 서비스 제공 장치(110)는 차량(100)의 자율 주행을 위한 내비게이션 정보에 기초하여 주행 정보를 도출할 수 있다.
단계 S530에서 가상 운전자 서비스 제공 장치(110)는 주행 정보에 기초하여 가상 운전자(115)의 동작을 제어할 수 있다.
단계 S540에서 가상 운전자 서비스 제공 장치(110)는 동작이 반영된 가상 운전자(115)에 대한 제 1 홀로그램을 출력할 수 있다.
상술한 설명에서, 단계 S510 내지 S540은 본 발명의 구현예에 따라서, 추가적인 단계들로 더 분할되거나, 더 적은 단계들로 조합될 수 있다. 또한, 일부 단계는 필요에 따라 생략될 수도 있고, 단계 간의 순서가 전환될 수도 있다.
도 1 내지 도 5를 통해 설명된 가상 운전자 서비스 제공 장치에서 가상 운전자 서비스를 제공하는 방법은 컴퓨터에 의해 실행되는 매체에 저장된 컴퓨터 프로그램 또는 컴퓨터에 의해 실행 가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 또한, 도 1 내지 도 5를 통해 설명된 가상 운전자 서비스 제공 장치에서 가상 운전자 서비스를 제공하는 방법은 컴퓨터에 의해 실행되는 매체에 저장된 컴퓨터 프로그램의 형태로도 구현될 수 있다.
컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체를 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
100: 차량
110: 가상 운전자 서비스 제공 장치
120: 차량 단말
125: 사용자 단말
210: 통신부
220: 홀로그램 출력부
230: 조정부
240: 주행 정보 도출부
250: 가상 운전자 제어부
260: 대화 서비스 제공부

Claims (13)

  1. 가상 운전자 서비스를 제공하는 장치에 있어서,
    차량의 내부의 투영 영역에 가상 운전자에 대한 제 1 홀로그램을 출력하는 홀로그램 출력부;
    상기 차량의 자율 주행을 위한 주행 정보를 도출하는 주행 정보 도출부; 및
    상기 주행 정보에 기초하여 상기 가상 운전자의 동작을 제어하는 가상 운전자 제어부를 포함하고,
    상기 홀로그램 출력부는 상기 동작이 반영된 상기 가상 운전자에 대한 제 1 홀로그램을 출력하고,
    상기 가상 운전자 제어부는 상기 주행 정보에 기초하여 상기 가상 운전자의 동작이 상기 차량의 조향 장치의 작동과 동기화되도록 상기 가상 운전자가 상기 조향 장치를 가상 조작하도록 상기 가상 운전자의 동작을 제어하는 것인, 장치.
  2. 제 1 항에 있어서,
    차량 단말 또는 사용자 단말 중 적어도 하나와 통신을 수행하는 통신부를 더 포함하는 것인, 장치.
  3. 제 2 항에 있어서,
    상기 통신부는 상기 사용자 단말로부터 상기 가상 운전자에 대한 설정 정보를 수신하는 것인, 장치.
  4. 제 3 항에 있어서,
    상기 수신한 설정 정보에 기초하여 상기 투영 영역의 위치, 상기 가상 운전자의 자세 및 신체 부위별 위치를 조정하는 조정부를 더 포함하는 것인, 장치.
  5. 제 2 항에 있어서,
    상기 통신부는 상기 사용자 단말 또는 상기 차량 단말 중 적어도 하나로부터 상기 차량의 자율 주행을 위한 내비게이션 정보를 수신하는 것인, 장치.
  6. 제 1 항에 있어서,
    서버로부터 상기 차량의 탑승자가 발화한 음성에 대한 답변을 수신하고, 상기 가상 운전자에 대해 설정된 캐릭터 정보에 기초하여 상기 수신된 답변을 출력함으로써 상기 가상 운전자가 상기 탑승자와 대화하도록 하는 대화 서비스 제공부를 더 포함하는 것인, 장치.
  7. 가상 운전자 서비스를 제공하는 방법에 있어서,
    차량의 내부의 투영 영역에 가상 운전자에 대한 제 1 홀로그램을 출력하는 단계;
    상기 차량의 자율 주행을 위한 주행 정보를 도출하는 단계;
    상기 주행 정보에 기초하여 상기 가상 운전자의 동작을 제어하는 단계; 및
    상기 동작이 반영된 상기 가상 운전자에 대한 제 1 홀로그램을 출력하는 단계
    를 포함하고,
    상기 차량의 조향 장치가 상기 차량의 내부로 내장된 경우,
    가상 조향 장치에 대한 제 2 홀로그램을 더 출력하는 단계를 더 포함하고,
    상기 주행 정보에 기초하여 상기 가상 운전자의 동작이 상기 차량의 조향 장치의 작동과 동기화되어 상기 가상 운전자가 상기 조향 장치를 가상 조작하도록 상기 가상 운전자의 동작을 제어하는 단계를 더 포함하는 것인, 가상 운전자 서비스 제공 방법.
  8. 제 7 항에 있어서,
    차량 단말 또는 사용자 단말 중 적어도 하나와 통신을 수행하는 단계를 더 포함하는 것인, 가상 운전자 서비스 제공 방법.
  9. 제 8 항에 있어서,
    상기 사용자 단말로부터 상기 가상 운전자에 대한 설정 정보를 수신하는 단계를 더 포함하는 것인, 가상 운전자 서비스 제공 방법.
  10. 제 9 항에 있어서,
    상기 수신한 설정 정보에 기초하여 상기 투영 영역의 위치, 상기 가상 운전자의 자세 및 신체 부위별 위치를 조정하는 단계를 더 포함하는 것인, 가상 운전자 서비스 제공 방법.
  11. 제 8 항에 있어서,
    상기 통신을 수행하는 단계는,
    상기 사용자 단말 또는 상기 차량 단말 중 적어도 하나로부터 상기 차량의 자율 주행을 위한 내비게이션 정보를 수신하는 단계를 포함하는 것인, 가상 운전자 서비스 제공 방법.
  12. 제 7 항에 있어서,
    서버로부터 상기 차량의 탑승자가 발화한 음성에 대한 답변을 수신하는 단계; 및
    상기 가상 운전자에 대해 설정된 캐릭터 정보에 기초하여 상기 수신된 답변을 출력함으로써 상기 가상 운전자가 상기 탑승자와 대화하도록 하는 단계를 더 포함하는 것인, 가상 운전자 서비스 제공 방법.
  13. 가상 운전자 서비스를 제공하는 명령어들의 시퀀스를 포함하는 매체에 저장된 컴퓨터 프로그램에 있어서,
    상기 컴퓨터 프로그램은 컴퓨팅 장치에 의해 실행될 경우,
    차량의 내부의 투영 영역에 가상 운전자에 대한 제 1 홀로그램을 출력하고,
    상기 차량의 자율 주행을 위한 주행 정보를 도출하고,
    상기 주행 정보에 기초하여 상기 가상 운전자의 동작을 제어하고,
    상기 동작이 반영된 상기 가상 운전자에 대한 제 1 홀로그램을 출력하도록 하는 명령어들의 시퀀스를 포함하고,
    상기 차량의 조향 장치가 상기 차량의 내부로 내장된 경우,
    가상 조향 장치에 대한 제 2 홀로그램을 더 출력하도록 하는 명령어들의 시퀀스를 더 포함하고,
    상기 주행 정보에 기초하여 상기 가상 운전자의 동작이 상기 차량의 조향 장치의 작동과 동기화되어 상기 가상 운전자가 상기 조향 장치를 가상 조작하도록 상기 가상 운전자의 동작을 제어하도록 하는 명령어들의 시퀀스를 더 포함하는, 매체에 저장된 컴퓨터 프로그램.
KR1020240016702A 2021-05-14 2024-02-02 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램 KR102650178B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020240016702A KR102650178B1 (ko) 2021-05-14 2024-02-02 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020210062322A KR102609600B1 (ko) 2021-05-14 2021-05-14 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램
KR1020230169932A KR102637764B1 (ko) 2021-05-14 2023-11-29 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램
KR1020240016702A KR102650178B1 (ko) 2021-05-14 2024-02-02 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020230169932A Division KR102637764B1 (ko) 2021-05-14 2023-11-29 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램

Publications (2)

Publication Number Publication Date
KR20240018564A KR20240018564A (ko) 2024-02-13
KR102650178B1 true KR102650178B1 (ko) 2024-03-22

Family

ID=84028397

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020210062322A KR102609600B1 (ko) 2021-05-14 2021-05-14 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램
KR1020230169932A KR102637764B1 (ko) 2021-05-14 2023-11-29 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램
KR1020240016702A KR102650178B1 (ko) 2021-05-14 2024-02-02 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020210062322A KR102609600B1 (ko) 2021-05-14 2021-05-14 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램
KR1020230169932A KR102637764B1 (ko) 2021-05-14 2023-11-29 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램

Country Status (5)

Country Link
US (1) US20240075814A1 (ko)
EP (1) EP4324714A1 (ko)
KR (3) KR102609600B1 (ko)
CN (1) CN117295648A (ko)
WO (1) WO2022239972A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102637748B1 (ko) * 2021-06-14 2024-02-20 (주)다산지앤지 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019011812A1 (de) * 2017-07-10 2019-01-17 Audi Ag Verfahren zum betreiben einer ausgabeeinrichtung eines kraftfahrzeugs, fahrerassistenzeinrichtung, und kraftfahrzeug

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140136288A (ko) * 2013-05-20 2014-11-28 노영희 사용자 참여형 테마파크 영상 제작 서비스 제공 시스템 및 방법
US11449146B2 (en) * 2015-06-10 2022-09-20 Wayne Patrick O'Brien Interactive holographic human-computer interface
KR20170054186A (ko) 2015-11-09 2017-05-17 현대자동차주식회사 자율주행차량 제어 장치 및 그 방법
US11107281B2 (en) * 2018-05-18 2021-08-31 Valeo Comfort And Driving Assistance Shared environment for vehicle occupant and remote user
KR20190135347A (ko) * 2018-05-28 2019-12-06 최준기 홀로그램을 이용한 차량용 가상 마네킹
JP2020154527A (ja) * 2019-03-19 2020-09-24 本田技研工業株式会社 車載装置、車載装置の制御方法、およびプログラム
US20210278840A1 (en) * 2019-06-04 2021-09-09 Lg Electronics Inc. Autonomous vehicle and control method thereof
KR102303412B1 (ko) * 2019-07-04 2021-09-27 한양대학교 에리카산학협력단 자율주행차량의 가상 조향 핸들 제공 시스템

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019011812A1 (de) * 2017-07-10 2019-01-17 Audi Ag Verfahren zum betreiben einer ausgabeeinrichtung eines kraftfahrzeugs, fahrerassistenzeinrichtung, und kraftfahrzeug

Also Published As

Publication number Publication date
KR20230169892A (ko) 2023-12-18
WO2022239972A1 (ko) 2022-11-17
US20240075814A1 (en) 2024-03-07
KR20220155495A (ko) 2022-11-23
KR102609600B1 (ko) 2023-12-06
KR20240018564A (ko) 2024-02-13
EP4324714A1 (en) 2024-02-21
KR102637764B1 (ko) 2024-02-20
CN117295648A (zh) 2023-12-26

Similar Documents

Publication Publication Date Title
KR102650178B1 (ko) 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램
US20170352267A1 (en) Systems for providing proactive infotainment at autonomous-driving vehicles
EP3339126B1 (en) Method and system to recognize individual driving preference for autonomous vehicles
JP3619380B2 (ja) 車載入出力装置
US10994612B2 (en) Agent system, agent control method, and storage medium
US11798552B2 (en) Agent device, agent control method, and program
KR102650177B1 (ko) 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말
JPWO2019124158A1 (ja) 情報処理装置、情報処理方法、プログラム、表示システム、及び移動体
JP2016137871A (ja) 車両用乗員感情対応制御装置
Sirkin et al. Eliciting conversation in robot vehicle interactions
US11697345B2 (en) Vehicle interaction system as well as corresponding vehicle and method
CN112297842A (zh) 具有多种显示模式的自动驾驶车辆
WO2022124164A1 (ja) 注目対象共有装置、注目対象共有方法
CN114067032A (zh) 一种车内全息卡通影像仿真交互方法
JP2020059401A (ja) 車両制御装置、車両制御方法、プログラム
CN115195743B (zh) 基于无人驾驶的车辆自动变道方法、装置、设备及介质
James Smart cars
CN115534850B (zh) 界面显示方法、电子设备、车辆及计算机程序产品
JP2024083068A (ja) 情報処理方法及び情報処理装置
Che et al. Interactive Design for Intelligent Vehicles in the Context of Smart City
Wang et al. Introduction to Intelligent Vehicle Human-Machine Interaction
Wang Human-Machine Interaction (HMI) Design for Intelligent Vehicles: From Human Factors Theory to Design Practice
JP2021099562A (ja) 制御装置およびプログラム
Wang et al. Human-Machine Interaction (HMI) Design for Intelligent Vehicles
JP2023019247A (ja) エージェント装置

Legal Events

Date Code Title Description
A107 Divisional application of patent
E701 Decision to grant or registration of patent right
GRNT Written decision to grant