KR102650177B1 - 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말 - Google Patents

가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말 Download PDF

Info

Publication number
KR102650177B1
KR102650177B1 KR1020240020588A KR20240020588A KR102650177B1 KR 102650177 B1 KR102650177 B1 KR 102650177B1 KR 1020240020588 A KR1020240020588 A KR 1020240020588A KR 20240020588 A KR20240020588 A KR 20240020588A KR 102650177 B1 KR102650177 B1 KR 102650177B1
Authority
KR
South Korea
Prior art keywords
virtual driver
vehicle
voice
conversation
information
Prior art date
Application number
KR1020240020588A
Other languages
English (en)
Other versions
KR20240023581A (ko
Inventor
유철종
Original Assignee
(주)다산지앤지
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)다산지앤지 filed Critical (주)다산지앤지
Priority to KR1020240020588A priority Critical patent/KR102650177B1/ko
Publication of KR20240023581A publication Critical patent/KR20240023581A/ko
Application granted granted Critical
Publication of KR102650177B1 publication Critical patent/KR102650177B1/ko

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/211—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays producing three-dimensional [3D] effects, e.g. stereoscopic images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00—Conjoint control of vehicle sub-units of different type or different function
    • B60W10/20—Conjoint control of vehicle sub-units of different type or different function including control of steering systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00—Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001—Planning or execution of driving tasks
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/29—Holographic features
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00—Input parameters relating to data
    • B60W2556/45—External transmission of data to or from the vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Automation & Control Theory (AREA)
  • Human Computer Interaction (AREA)
  • Navigation (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)

Abstract

차량의 자율 주행 중 가상 운전자 서비스를 제공하는 장치는 차량의 내부의 투영 영역에 기설정된 가상 운전자에 대한 홀로그램을 출력하는 홀로그램 출력부, 상기 차량의 탑승자가 발화한 음성을 인식하고, 상기 인식된 음성으로부터 도출된 답변에 기초하여 상기 가상 운전자와 상기 탑승자 간의 대화 서비스를 제공하는 대화 서비스 제공부 및 상기 차량의 자율 주행을 위한 차량 제어 정보에 기초하여 상기 가상 운전자의 동작을 제어하고, 상기 도출된 답변에 기초하여 상기 가상 운전자의 표정, 입 모양 및 동작 중 적어도 하나를 제어하는 가상 운전자 제어부를 포함하고, 상기 홀로그램 출력부는 상기 표정, 입 모양 및 동작 중 적어도 하나가 반영된 상기 가상 운전자에 대한 홀로그램을 출력한다.

Description

가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말{APPARATUS, METHOD AND USER DEVICE FOR PROVIDING VIRTUAL DIRVER SERVICE}
본 발명은 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말에 관한 것이다.
자율주행차(self-driving car)란, 운전자가 핸들과 가속페달, 브레이크 등을 조작하지 않아도 정밀한 지도, 위성항법시스템(GPS) 등 차량의 각종 센서를 이용하여 차량이 스스로 운행 상황을 파악함으로써, 목적지까지 주행하는 자동차를 의미한다.
자율주행차는 시스템이 운전에 관여하는 정도와 운전자가 차를 제어하는 방법에 따라 비자동화부터 완전 자동화까지 점진적인 자율 주행 기술 단계를 포함한다. 자율 주행 기술 단계는 총 6단계로 구성되며, 0단계는 비자동화, 1단계는 운전자 보조, 2단계는 부분 자동화, 3단계는 조건부 자동화, 4단계는 고도 자동화, 5단계는 완전 자동화로 구분된다.
이러한 자율 주행 기술과 관련하여, 선행기술인 한국공개특허 제2017-0054186호는 자율주행차량 제어 장치 및 그 방법을 개시하고 있다.
차량의 내부의 투영 영역에 기설정된 가상 운전자에 대한 홀로그램을 출력하는 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말을 제공하고자 한다.
차량의 탑승자가 발화한 음성을 인식하고, 인식된 음성으로부터 도출된 답변에 기초하여 가상 운전자와 탑승자 간의 대화 서비스를 제공하고, 도출된 답변에 기초하여 가상 운전자의 표정, 입 모양 및 동작 중 적어도 하나를 제어하고, 표정, 입 모양 및 동작 중 적어도 하나가 반영된 가상 운전자에 대한 홀로그램을 출력하는 장치, 방법 및 사용자 단말을 제공하고자 한다.
다만, 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.
상술한 기술적 과제를 달성하기 위한 수단으로서, 본 발명의 일 실시예는, 차량의 내부의 투영 영역에 기설정된 가상 운전자에 대한 홀로그램을 출력하는 홀로그램 출력부, 상기 차량의 탑승자가 발화한 음성을 인식하고, 상기 인식된 음성으로부터 도출된 답변에 기초하여 상기 가상 운전자와 상기 탑승자 간의 대화 서비스를 제공하는 대화 서비스 제공부 및 상기 차량의 자율 주행을 위한 차량 제어 정보에 기초하여 상기 가상 운전자의 동작을 제어하고, 상기 도출된 답변에 기초하여 상기 가상 운전자의 표정, 입 모양 및 동작 중 적어도 하나를 제어하는 가상 운전자 제어부를 포함하고, 상기 홀로그램 출력부는 상기 표정, 입 모양 및 동작 중 적어도 하나가 반영된 상기 가상 운전자에 대한 홀로그램을 출력하는 것인 장치를 제공할 수 있다.
본 발명의 다른 실시예는, 차량의 내부의 투영 영역에 기설정된 가상 운전자에 대한 홀로그램을 출력하는 단계, 상기 차량의 탑승자가 발화한 음성을 인식하고, 상기 인식된 음성으로부터 도출된 답변에 기초하여 상기 가상 운전자와 상기 탑승자 간의 대화 서비스를 제공하는 단계, 상기 차량의 자율 주행을 위한 차량 제어 정보에 기초하여 상기 가상 운전자의 동작을 제어하고, 상기 도출된 답변에 기초하여 상기 가상 운전자의 표정, 입 모양 및 동작 중 적어도 하나를 제어하는 단계 및 상기 표정, 입 모양 및 동작 중 적어도 하나가 반영된 상기 가상 운전자에 대한 홀로그램을 출력하는 단계를 포함하는 가상 운전자 서비스 제공 방법을 제공할 수 있다.
본 발명의 또 다른 실시예는, 컴퓨터 프로그램은 컴퓨팅 장치에 의해 실행될 경우, 차량의 내부 영역에 홀로그램으로 출력될 가상 운전자에 대한 설정 정보를 입력받는 입력부, 상기 입력된 가상 운전자에 대한 설정 정보를 가상 운전자 서비스 제공 장치로 전송하는 전송부를 포함하고, 상기 가상 운전자에 대한 설정 정보에 기초하여 상기 가상 운전자 서비스 제공 장치에 의해 상기 차량의 내부의 투영 영역에 상기 가상 운전자에 대한 홀로그램이 출력되고, 상기 차량의 탑승자가 발화된 음성이 인식되고, 상기 인식된 음성으로부터 도출된 답변에 기초하여 상기 가상 운전자와 상기 탑승자 간의 대화 서비스가 제공되고, 상기 차량의 자율 주행을 위한 차량 제어 정보에 기초하여 상기 가상 운전자의 동작을 제어하고, 상기 도출된 답변에 기초하여 상기 가상 운전자의 표정, 입모양 및 동작 중 적어도 하나가 제어되고, 상기 표정, 입 모양 및 동작 중 적어도 하나가 반영된 상기 가상 운전자에 대한 홀로그램이 출력되는 것인 사용자 단말을 제공할 수 있다.
상술한 과제 해결 수단은 단지 예시적인 것으로서, 본 발명을 제한하려는 의도로 해석되지 않아야 한다. 상술한 예시적인 실시예 외에도, 도면 및 발명의 상세한 설명에 기재된 추가적인 실시예가 존재할 수 있다.
전술한 본 발명의 과제 해결 수단 중 어느 하나에 의하면, 차량의 내부의 투영 영역에서 가상 운전자에 대한 홀로그램을 출력함으로써, 가상 운전자가 운전석에 정확하게 착석한 모습이 표현되도록 하는 장치, 방법 및 사용자 단말을 제공할 수 있다.
차량의 탑승자가 발화한 음성을 인식하고, 인식된 음성으로부터 도출된 답변에 기초하여 가상 운전자와 탑승자 간의 일상적인 대화, 주행 관련 대화, 탑승자의 정보와 관련된 대화 등을 수행하도록 대화 서비스를 제공하는 장치, 방법 및 사용자 단말을 제공할 수 있다.
탑승자의 음성으로부터 도출된 답변에 기초하여 가상 운전자의 표정, 입 모양 및 동작 등을 제어하도록 함으로써, 탑승자에게 실제 사람과 대화하듯이 가상 운전자와 자연스럽게 대화하는 느낌을 제공받도록 하는 장치, 방법 및 사용자 단말을 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 가상 운전자 서비스 제공 시스템의 구성도이다.
도 2는 본 발명의 일 실시예에 따른 사용자 단말의 구성도이다.
도 3a 내지 도 3e는 본 발명의 일 실시예에 따른 사용자 단말에서 가상 운전자에 대한 설정 정보를 입력받는 과정을 설명하기 위한 예시적인 도면이다.
도 4는 본 발명의 일 실시예에 따른 사용자 단말에서 차량의 자율 주행 중 가상 운전자 서비스를 제공하는 방법의 순서도이다.
도 5는 본 발명의 일 실시예에 따른 가상 운전자 서비스 제공 장치의 구성도이다.
도 6a 내지 도 6c는 본 발명의 일 실시예에 따른 가상 운전자 서비스 제공 장치에서 가상 운전자 서비스를 제공하는 과정을 설명하기 위한 예시적인 도면이다.
도 7은 본 발명의 일 실시예에 따른 가상 운전자 서비스 제공 장치에서 차량의 자율 주행 중 가상 운전자 서비스를 제공하는 방법의 순서도이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미하며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 명세서에 있어서 '부(部)'란, 하드웨어에 의해 실현되는 유닛(unit), 소프트웨어에 의해 실현되는 유닛, 양방을 이용하여 실현되는 유닛을 포함한다. 또한, 1 개의 유닛이 2 개 이상의 하드웨어를 이용하여 실현되어도 되고, 2 개 이상의 유닛이 1 개의 하드웨어에 의해 실현되어도 된다.
본 명세서에 있어서 단말 또는 디바이스가 수행하는 것으로 기술된 동작이나 기능 중 일부는 해당 단말 또는 디바이스와 연결된 서버에서 대신 수행될 수도 있다. 이와 마찬가지로, 서버가 수행하는 것으로 기술된 동작이나 기능 중 일부도 해당 서버와 연결된 단말 또는 디바이스에서 수행될 수도 있다.
이하 첨부된 도면을 참고하여 본 발명의 일 실시예를 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 가상 운전자 서비스 제공 시스템의 구성도이다. 도 1을 참조하면, 가상 운전자 서비스 제공 시스템(1)은 가상 운전자 서비스 제공 장치(110) 및 서버(미도시)를 포함할 수 있다. 가상 운전자 서비스 제공 시스템(1)은 차량 단말(120) 및 사용자 단말(125)을 더 포함할 수도 있다. 가상 운전자 서비스 제공 장치(110), 서버, 차량 단말(120) 및 사용자 단말(125)은 가상 운전자 서비스 제공 시스템(1)에 의하여 제어될 수 있는 구성요소들을 예시적으로 도시한 것이다.
도 1의 가상 운전자 서비스 제공 시스템(1)의 각 구성요소들은 일반적으로 네트워크(network)를 통해 연결된다. 예를 들어, 도 1에 도시된 바와 같이, 가상 운전자 서비스 제공 장치(110)는 서버, 차량 단말(120) 또는 사용자 단말(125)과 동시에 또는 시간 간격을 두고 연결될 수 있다.
네트워크는 단말들 및 서버들과 같은 각각의 노드 상호 간에 정보 교환이 가능한 연결 구조를 의미하는 것으로, 근거리 통신망(LAN: Local Area Network), 광역 통신망(WAN: Wide Area Network), 인터넷 (WWW: World Wide Web), 유무선 데이터 통신망, 전화망, 유무선 텔레비전 통신망 등을 포함한다. 무선 데이터 통신망의 일례에는 3G, 4G, 5G, WIMAX(World Interoperability for Microwave Access), 와이파이(Wi-Fi), 블루투스 통신, 적외선 통신, 초음파 통신, 가시광 통신(VLC: Visible Light Communication), 라이파이(LiFi) 등이 포함되나 이에 한정되지는 않는다.
가상 운전자 서비스 제공 장치(110)는 차량 단말(120)과 통신을 수행할 수 있다. 예를 들어, 가상 운전자 서비스 제공 장치(110)는 차량 단말(120)로부터 차량(100)의 자율 주행을 위한 내비게이션 정보를 수신할 수 있다. 여기서, 내비게이션 정보는 출발지, 경유지, 목적지, 목적지까지의 소요시간을 포함하는 경로 정보, 차량(100)이 자율 주행하도록 차량(100)을 제어하기 위한 차량 제어 정보, 도로 정보, 교통 정보 및 날씨 정보를 포함할 수 있다.
이 때, 차량 제어 정보는 예를 들어, 조향 장치(130)의 조향 타이밍, 조향 속도, 조향각, 가속 타이밍, 가속 정도, 가속 지속 시간, 제동 타이밍, 제동 정도, 제동 지속 시간 등의 직접 제어 정보 및 인접 차량의 위치와 속도, 차량(100)이 이동할 방향과 타이밍을 포함하는 간접 제어 정보를 포함할 수 있다.
가상 운전자 서비스 제공 장치(110)는 사용자 단말(125)과 통신을 수행할 수 있다.
예를 들어, 가상 운전자 서비스 제공 장치(110)는 사용자 단말(125)로부터 가상 운전자(115)에 대한 설정 정보를 수신할 수 있다. 여기서, 가상 운전자(115)에 대한 설정 정보는 예를 들어, 가상 운전자(115)의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 등을 포함할 수 있다.
예를 들어, 가상 운전자 서비스 제공 장치(110)는 사용자 단말(125)로부터 '여성 비서 캐릭터', '여성 음성', '공손한 말투', '사무적인 표정', '정장 의상' 등과 같은 설정 정보를 수신할 수 있다. 여기서, 가상 운전자의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 등은 사용자 단말(125)에 의해 구매 또는 소정 기간 동안 대여 가능한 것일 수 있다.
다른 예를 들어, 가상 운전자 서비스 제공 장치(110)는 사용자 단말(125)로부터 가상 운전자(115)에 대한 위치 정보를 수신할 수 있다. 여기서, 가상 운전자(115)에 대한 위치 정보는 예를 들어, 가상 운전자(115)의 투영 영역의 위치, 자세 정보, 신체 부위별 위치 정보 등을 포함할 수 있다.
가상 운전자 서비스 제공 장치(110)는 서버(미도시)와 통신을 수행할 수 있다. 예를 들어, 가상 운전자 서비스 제공 장치(110)는 서버(미도시)로부터 사용자 단말(125)에 의해 설정된 가상 운전자(115)에 대한 설정 정보를 수신할 수 있다. 예를 들어, 사용자 단말(125)에서 가상 운전자(115)에 대해 '여성 비서 캐릭터', '여성 음성', '공손한 말투', '사무적인 표정', '정장 의상' 등으로 설정하여 서버(미도시)로 전송한 경우, 가상 운전자 서비스 제공 장치(110)는 서버(미도시)로부터 가상 운전자(115)에 대한 설정 정보를 수신할 수 있다.
가상 운전자 서비스 제공 장치(110)는 차량(100)의 내부의 투영 영역에 기설정된 가상 운전자(115)에 대한 홀로그램을 출력할 수 있다. 예를 들어, 가상 운전자(115)에 대한 설정 정보가 '여성 비서 캐릭터', '의상: 정장' 등을 포함하는 경우, 가상 운전자 서비스 제공 장치(110)는 가상 운전자(115)에 대한 설정 정보에 기초하여 정장을 착용한 '여성 비서 캐릭터'에 대한 홀로그램을 출력할 수 있다.
가상 운전자 서비스 제공 장치(110)는 차량(100)의 탑승자(105)가 발화한 음성을 인식하고, 인식된 음성으로부터 도출된 답변에 기초하여 가상 운전자(115)와 탑승자(105) 간의 대화 서비스를 제공할 수 있다. 예를 들어, 가상 운전자 서비스 제공 장치(110)는 탑승자(105)가 발화한 음성을 인식한 경우, 인식된 음성을 서버(미도시)로 전송한 후, 서버(미도시)로부터 음성에 기초하여 도출된 답변을 수신할 수 있다.
예를 들어, 가상 운전자 서비스 제공 장치(110)는 차량(100)의 자율 주행 중 발생한 주행 정보, 경로 정보 및 날씨 정보 등에 기초하여 능동 대화를 시도할 수 있다. 예를 들어, 가상 운전자 서비스 제공 장치(110)는 출발지로부터 목적지까지의 주행 경로에 기초하여 직진/우회전/좌회전/U-턴 등의 주행 정보, 주변지 정보, 출발지 및 목적지의 날씨 정보, 도착 예정 정보 등에 대한 음성 대화를 탑승자(105)에게 제공할 수 있다.
다른 예를 들어, 가상 운전자 서비스 제공 장치(110)는 탑승자(105)의 상태 정보(예를 들어, 현재 행동, 피로도, 컨디션 등), 관심 정보 및 가상 운전자(115)와 탑승자(105) 간의 이전 대화 이력 정보 등에 기초하여 능동 대화를 시도할 수 있다.
가상 운전자 서비스 제공 장치(110)는 음성으로부터 도출된 답변을 가상 운전자(115)에 대한 설정 정보에 기초하여 음성 출력할 수 있다. 예를 들어, 가상 운전자 서비스 제공 장치(110)는 음성으로부터 도출된 답변을 가상 운전자(115)의 대화 능력, 성격, 음성, 말투 등을 적용하여 음성 출력할 수 있다.
여기서, 캐릭터는 복수의 여성 캐릭터, 복수의 남성 캐릭터, 복수의 게임 캐릭터, 복수의 만화 캐릭터, 복수의 동물 캐릭터, 복수의 연예인 캐릭터 중 탑승자(105)에 의해 선택된 어느 하나의 캐릭터를 포함할 수 있다. 예를 들어, 가상 운전자(115)의 캐릭터 정보는 캐릭터별로 기설정된 손짓, 몸짓과 관련된 동작, 얼굴 표정, 말투 등에 따라 가상 운전자(115)의 캐릭터, 동작, 얼굴 표정, 음성, 말투 등이 각각 다르게 표현될 수 있다.
가상 운전자 서비스 제공 장치(110)는 도출된 답변에 기초하여 가상 운전자(115)의 표정, 입 모양 및 동작 등을 제어할 수 있다.
예를 들어, 가상 운전자(115)에 대한 설정 정보가 '캐릭터: 여성 비서 캐릭터', '음성: 여성 음성', '말투: 공손한', '동작: 사무적인', '표정: 사무적인' 등을 포함하는 경우, 가상 운전자 서비스 제공 장치(110)는 '여성 비서 캐릭터'에 대한 홀로그램을 출력한 후, 공손한 말투, 사무적인 동작 및 얼굴 표정으로 표현되도록 '여성 비서 캐릭터'의 표정, 입 모양 및 동작 등을 제어하여 '여성 비서 캐릭터'를 통해 공손한 말투의 여성 음성으로 탑승자(105)와 대화를 수행하도록 할 수 있다.
다른 예를 들어, '캐릭터: 남성 보디가드 캐릭터', '음성; 남성 음성', '말투: 무뚝뚝한', '동작: 정중한', '표정: 정중한' 등을 포함하는 경우, 가상 운전자 서비스 제공 장치(110)는 '남성 보디가드 캐릭터'에 대한 홀로그램을 출력한 후, 정중한 동작 및 얼굴 표정으로 표현되도록 '남성 보디가드 캐릭터'의 표정, 입 모양 및 동작 등을 제어하여 '남성 보디가드 캐릭터'를 통해 무뚝뚝한 말투의 남성 음성으로 탑승자(105)와 대화를 수행하도록 할 수 있다.
또 다른 예를 들어, 가상 운전자(115)에 대한 설정 정보가 '캐릭터: 펭귄', '동작: 톡톡튀는 개성적인', '표정: 톡톡튀는 개성적인', '음성: 어린이 음성', '말투: 귀여운', '추임새 포함' 등을 포함하는 경우, 가상 운전자 서비스 제공 장치(110)는 '펭귄 캐릭터'에 대한 홀로그램을 출력한 후, 톡톡튀는 개성적인 동작 및 얼굴 표정으로 표현되도록 '펭귄 캐릭터'의 표정, 입 모양 및 동작 등을 제어하여 '펭귄 캐릭터'를 통해 추임새를 포함하는 귀여운 말투의 어린이 음성으로 탑승자(105)와 대화를 수행하도록 할 수 있다.
가상 운전자 서비스 제공 장치(110)는 내비게이션 정보 및 조향 장치(130)의 위치에 기초하여 가상 운전자(115)가 조향 장치(130)를 가상 조작하도록 가상 운전자(115)의 동작을 제어할 수 있다. 여기서, 가상 조작이란 주행 정보에 기초하여 가상 운전자(115)의 동작이 조향 장치(130)의 작동과 동기화됨으로써, 가상 운전자(115)가 조향 장치(130)를 실제로 조작하는 모습처럼 보이도록 하는 것을 의미할 수 있다.
가상 운전자 서비스 제공 장치(110)는 표정, 입 모양 및 동작 등이 반영된 가상 운전자(115)에 대한 홀로그램을 출력할 수 있다.
가상 운전자 서비스 제공 장치(110)는 수신한 설정 정보에 기초하여 가상 운전자(115)의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 등을 변경할 수 있다.
차량 단말(120)은 차량(100)의 자율 주행을 위한 내비게이션 정보를 가상 운전자 서비스 제공 장치(110)로 전송할 수 있다. 이러한 차량 단말(120)은 내비게이션 장치, 차량(100)의 인포테인먼트 장치 등을 포함할 수 있다.
차량 단말(120)이 가상 운전자 서비스 제공 서비스를 지원하는 경우, 차량 단말(120)은 탑승자(105)로부터 가상 운전자(115)와 관련된 설정 정보를 입력받고, 입력된 가상 운전자(115)와 관련된 설정 정보는 가상 운전자 서비스 제공 장치(110)로 전송될 수 있다. 이 때, 가상 운전자(115)와 관련된 설정 정보는 서버(미도시)를 경유하여 가상 운전자 서비스 제공 장치(110)로 전송될 수 있다.
이와 달리, 차량 단말(120)이 가상 운전자 서비스를 지원하지 않는 경우, 사용자 단말(125)은 가상 운전자 서비스 제공 앱을 통해 탑승자(105)로부터 가상 운전자(115)와 관련된 설정 정보를 입력받고, 입력된 가상 운전자(115)와 관련된 설정 정보는 가상 운전자 서비스 제공 장치(110)로 전송될 수 있다. 이 때, 가상 운전자(115)와 관련된 설정 정보는 서버를 경유하여 가상 운전자 서비스 제공 장치(110)로 전송될 수 있다.
이러한 가상 운전자(115)의 설정 정보는 사용자 단말(125) 또는 차량 단말(120)에 설치된 가상 운전자 서비스 제공 앱을 통해 설정될 수 있다.
서버(미도시)는 가상 운전자(115)에 대한 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 등의 구매 또는 대여를 위한 가상 운전자 꾸미기 샵을 사용자 단말(125)로 제공할 수 있다. 예를 들어, 사용자 단말(125)에서 가상 운전자 서비스 제공 앱을 통해 가상 운전자 꾸미기 샵에서 제공되는 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 등이 구매 또는 대여될 경우, 서버(미도시)는 사용자 단말(125)의 계정에 해당하는 인벤토리에 결제 또는 대여된 가상 운전자(115)에 대한 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 등의 정보를 저장하여 관리할 수 있다. 이 때, 서버(미도시)는 대여를 통해 사용자 단말(125)의 계정에 해당하는 인벤토리에 가상 운전자(115)에 대한 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 등의 정보가 저장된 경우, 해당 정보를 유효기간에 따라 관리할 수 있다.
서버(미도시)는 사용자 단말(125)로부터 사용자 단말(125)에 의해 설정된 가상 운전자(115)에 대한 설정 정보를 수신하고, 수신한 가상 운전자(115)에 대한 설정 정보를 가상 운전자 서비스 제공 장치(110)로 전송할 수 있다. 사용자 단말(125)은 가상 운전자(115)의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 등을 구매 또는 소정 기간 동안 대여하기 위한 결제를 수행할 수 있다.
사용자 단말(125)은 차량(100)의 내부 영역에 홀로그램으로 출력될 가상 운전자(115)에 대한 설정 정보를 입력받을 수 있다. 가상 운전자(115)에 대한 설정 정보는 예를 들어, 가상 운전자(115)의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 등을 포함할 수 있다. 예를 들어, 사용자 단말(125)은 탑승자(105)로부터 가상 운전자 서비스 제공 앱을 통해 복수의 캐릭터 중 여성 비서 캐릭터, 복수의 성격 중 톡톡튀는 성격, 복수의 의상 중 정장을 입력받을 수 있다.
사용자 단말(125)은 입력된 가상 운전자(115)에 대한 설정 정보를 가상 운전자 서비스 제공 장치(110)로 전송할 수 있다. 또는, 사용자 단말(125)은 입력된 가상 운전자(115)에 대한 설정 정보를 서버(미도시)로 전송할 수 있다. 이 때, 서버(미도시)로 전송된 가상 운전자(115)에 대한 설정 정보는 서버(미도시)에 의해 가상 운전자 서비스 제공 장치(110)로 전송될 수 있다.
사용자 단말(125)은 차량(100)의 내부 영역에 홀로그램으로 출력될 가상 운전자(115)에 대한 투영 영역의 위치, 자세, 신체 부위별 위치 등에 대한 위치 정보를 입력받을 수 있다.
예를 들어, 사용자 단말(125)은 탑승자(105)로부터 가상 운전자(115)의 상반신이 조향 장치(130)와 가까워지도록 가상 운전자(115)의 자세를 입력받을 수 있다. 다른 예를 들어, 사용자 단말(125)은 탑승자(105)로부터 가상 운전자(115)의 손의 위치가 조향 장치(130) 상에 놓여지도록 손의 위치를 입력받을 수 있다. 이 때, 사용자 단말(125)은 투영 영역에 출력된 가상 운전자(115)에 대한 홀로그램을 보면서, 세부적으로 가상 운전자(115)의 각 신체부위별 위치(예를 들어, 손의 위치)를 입력받을 수 있다.이러한 사용자 단말(125)은 가상 운전자 서비스 제공 앱의 실행이 가능한 모바일 단말, 리모컨 등을 포함할 수 있다.
도 2는 본 발명의 일 실시예에 따른 사용자 단말의 구성도이다. 도 2를 참조하면, 사용자 단말(125)은 입력부(210), 결제부(220) 및 전송부(230)를 포함할 수 있다. 여기서, 사용자 단말(125)은 가상 운전자 서비스 제공 앱이 실행될 수 있다.
입력부(210)는 차량(100)의 내부 영역에 홀로그램으로 출력될 가상 운전자(115)에 대한 설정 정보를 입력받을 수 있다. 가상 운전자(115)에 대한 설정 정보는 예를 들어, 가상 운전자(115)의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 등을 포함할 수 있다. 가상 운전자(115)에 대한 설정 정보를 입력받는 과정에 대해서는 도 3a 내지 도 3e를 통해 상세히 설명하도록 한다.
도 3a 내지 도 3e는 본 발명의 일 실시예에 따른 사용자 단말에서 가상 운전자에 대한 설정 정보를 입력받는 과정을 설명하기 위한 예시적인 도면이다. 이하에서, 캐릭터는 무료인 기본 캐릭터, 구매 또는 대여가 필요한 유료 캐릭터 등을 포함할 수 있다.
도 3a를 참조하면, 입력부(210)는 탑승자(105)로부터 가상 운전자 서비스 제공 앱을 통해 가상 운전자 설정 모드(300)로 진입하기 위한 입력을 입력받을 수 있다. 가상 운전자 설정 모드(300)는 예를 들어, 내 캐릭터 설정 모드(301), 여성 캐릭터 설정 모드(302), 남성 캐릭터 설정 모드(303), 게임 캐릭터 설정 모드(304), 만화 캐릭터 설정 모드(305) 및 동물 캐릭터 설정 모드(306), 연예인 캐릭터 설정 모드 등을 포함할 수 있다.
도 3b를 참조하면, 입력부(210)는 탑승자(105)로부터 '내 캐릭터 설정 모드'(301)를 입력받은 경우, 탑승자(105)로부터 탑승자(105)의 모습에 기초하여 생성된 탑승자 캐릭터에 대한 세부 설정을 입력받을 수 있다. 예를 들어, 입력부(210)는 탑승자(105)로부터 '내 음성 (311): 온(ON)', '내 동작(312): 온(ON)', '내 표정(313): 온(ON)'과 같이 탑승자 캐릭터에 대한 세부 설정을 입력받을 수 있다. 여기서, 탑승자 캐릭터에 대한 세부 설정이 '내 음성 (311): 온(ON)', '내 동작(312): 온(ON)', '내 표정(313): 온(ON)'으로 설정된 경우, '탑승자 캐릭터'에 대한 홀로그램이 출력되면서, '탑승자 캐릭터'는 탑승자(105)의 목소리, 동작, 표정 등이 모사되어 표현될 수 있다.
도 3c를 참조하면, 입력부(210)는 탑승자(105)로부터 '여성 캐릭터 설정 모드'(302)를 입력받은 경우, 탑승자(105)로부터 여성 캐릭터에 대한 선택 및 여성 캐릭터에 대한 세부 설정을 입력받을 수 있다. 예를 들어, 입력부(210)는 탑승자(105)로부터 복수의 여성 캐릭터(예를 들어, 여성 비서 캐릭터, 여대생 캐릭터, 엄마 캐릭터 등) 중 여성 비서 캐릭터(320)를 선택받을 수 있다. 이후, 입력부(210)는 탑승자(105)로부터 여성 비서 캐릭터(320)에 대한 '말투(321): 공손한', '성격(322): 사무적인', '의상(323): 비서 복장', '음성: 여성 음성' 등과 같이 여성 비서 캐릭터(320)에 대한 세부 설정을 입력받을 수 있다. 여기서, 여성 비서 캐릭터에 대한 세부 설정이 '음성: 여성 음성', '말투(321): 공손한', '성격(322): 사무적인', '의상(323): 비서 복장'으로 설정된 경우, 비서 복장을 한 '여성 비서 캐릭터'에 대한 홀로그램이 출력되면서, '여성 비서 캐릭터'는 여성 음성을 사용하며, 공손한 말투, 사무적인 성격으로 표현될 수 있다.
도 3d를 참조하면, 입력부(210)는 탑승자(105)로부터 '남성 캐릭터 설정 모드'(303)를 입력받은 경우, 탑승자(105)로부터 남성 캐릭터에 대한 선택 및 남성 캐릭터에 대한 세부 설정을 입력받을 수 있다. 예를 들어, 입력부(210)는 탑승자(105)로부터 복수의 남성 캐릭터(예를 들어, 남성 보디가드 캐릭터, 남성 학생 캐릭터, 아빠 캐릭터, 운동 선수 캐릭터 등) 중 남성 보디가드 캐릭터(330)를 선택받을 수 있다. 이후, 입력부(210)는 탑승자(105)로부터 남성 보디가드 캐릭터(330)에 대한 '말투(321): 무뚝뚝한', '성격(322): 정중한', '의상(323): 정장', '음성: 남성 음성' 등과 같이 남성 보디가드 캐릭터(330)에 대한 세부 설정을 입력받을 수 있다. 여기서, 남성 보디가드 캐릭터에 대한 세부 설정이 '음성: 남성 음성', '말투(321): 무뚝뚝한', '성격(322): 정중한', '의상(323): 정장'으로 설정된 경우, 정장 복장을 한 '남성 보디가드 캐릭터'에 대한 홀로그램이 출력되면서, '남성 보디가드 캐릭터'는 남성 음성을 사용하며, 무뚝뚝한 말투, 정중한 성격으로 표현될 수 있다.
도 3e를 참조하면, 가상 운전자(115)의 설정이 완료되면, 입력부(210)는 탑승자(105)로부터 구매하기 버튼(340) 또는 대여하기 버튼(341)을 입력받을 수 있다. 여기서, 구매하기 버튼(340)을 입력받은 경우, 탑승자(105)가 설정한 가상 운전자(115)는 기간 제한 없이 무제한으로 이용될 수 있으며, 대여하기 버튼(341)을 입력받은 경우, 탑승자(105)가 설정한 가상 운전자(115)는 소정 기간 동안에 한해 이용될 수 있다.
결제부(220)는 가상 운전자(115)의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 말투, 의상 중 적어도 하나를 구매 또는 소정 기간 동안 대여하기 위한 결제를 수행할 수 있다.
다시 도 2로 돌아와서, 입력부(210)는 가상 운전자(115)를 통해 제공될 부가 서비스 이용 여부에 대한 설정 정보를 입력받을 수 있다. 여기서, 부가 서비스는 전자책, 음악서비스, 주식 투자 정보, 부동산 정보 등을 포함하는 유료 컨텐츠일 수 있다. 예를 들어, 부가 서비스 이용 여부가 설정된 경우, 가상 운전자(115)를 통해 부가 서비스를 포함하는 대화 서비스가 제공될 수 있다.
전송부(230)는 입력된 가상 운전자(115)에 대한 설정 정보를 가상 운전자 서비스 제공 장치(110)로 전송할 수 있다. 또는, 전송부(230)는 입력된 가상 운전자(115)에 대한 설정 정보를 서버(미도시)로 전송할 수 있다. 이 때, 서버(미도시)로 전송된 가상 운전자(115)에 대한 설정 정보는 서버(미도시)에 의해 가상 운전자 서비스 제공 장치(110)로 전송될 수 있다.
이러한 과정을 통해, 탑승자(105)는 상황에 따라 차량(100)의 운전석에 위치할 캐릭터를 변경할 수 있다. 예를 들어, 사용자 단말(125)은 차량(100)에 혼자 있을 때, 야간 주행 시, 심심할 때, 여행갈 때, 비즈니스 목적의 동승자가 있을 때, 어린이를 포함하는 가족과 있을 때 등에 따라 캐릭터를 변경하여, 가상 운전자(115)를 통해 대화 서비스를 제공받을 수 있다.
도 4는 본 발명의 일 실시예에 따른 사용자 단말에서 차량의 자율 주행 중 가상 운전자 서비스를 제공하는 방법의 순서도이다. 도 4에 도시된 사용자 단말(125)에서 차량의 자율 주행 중 가상 운전자 서비스를 제공하는 방법은 도 1 내지 도 3e에 도시된 실시예에 따른 가상 운전자 서비스 제공 시스템(1)에 의해 시계열적으로 처리되는 단계들을 포함한다. 따라서, 이하 생략된 내용이라고 하더라도 도 1 내지 도 3e에 도시된 실시예에 따른 사용자 단말(125)에서 차량의 자율 주행 중 가상 운전자 서비스를 제공하는 방법에도 적용된다.
단계 S410에서 사용자 단말(125)은 차량(100)의 내부 영역에 홀로그램으로 출력될 가상 운전자(115)에 대한 설정 정보를 입력받을 수 있다.
단계 S420에서 사용자 단말(125)은 입력된 가상 운전자(115)에 대한 설정 정보를 가상 운전자 서비스 제공 장치(110)로 전송할 수 있다.
도 4에서는 도시되지 않았으나, 사용자 단말(125)은 입력된 가상 운전자(115)에 대한 설정 정보를 서버(미도시)로 전송할 수 있다.
상술한 설명에서, 단계 S410 내지 S420은 본 발명의 구현예에 따라서, 추가적인 단계들로 더 분할되거나, 더 적은 단계들로 조합될 수 있다. 또한, 일부 단계는 필요에 따라 생략될 수도 있고, 단계 간의 순서가 전환될 수도 있다.
도 5는 본 발명의 일 실시예에 따른 가상 운전자 서비스 제공 장치의 구성도이다. 도 5를 참조하면, 가상 운전자 서비스 제공 장치(110)는 통신부(510), 홀로그램 출력부(520), 대화 서비스 제공부(530), 가상 운전자 제어부(540) 및 가상 운전자 변경부(550)를 포함할 수 있다.
통신부(510)는 사용자 단말(125)과 통신을 수행할 수 있다. 예를 들어, 통신부(510)는 사용자 단말(125)로부터 가상 운전자(115)에 대한 설정 정보를 수신할 수 있다. 여기서, 가상 운전자(115)에 대한 설정 정보는 예를 들어, 가상 운전자(115)의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 등을 포함할 수 있다. 다른 예를 들어, 통신부(510)는 사용자 단말(125)로부터 가상 운전자(115)에 대한 위치 정보를 수신할 수 있다. 여기서, 가상 운전자(115)에 대한 위치 정보는 예를 들어, 가상 운전자(115)의 투영 영역의 위치, 자세 정보, 신체 부위별 위치 정보 등을 포함할 수 있다.
통신부(510)는 서버(미도시)와 통신을 수행할 수 있다. 예를 들어, 통신부(510)는 사용자 단말(125)에 의해 설정된 가상 운전자(115)에 대한 설정 정보를 서버(미도시)로부터 수신할 수 있다.
통신부(510)는 차량 단말(125)과 통신을 수행할 수 있다. 예를 들어, 통신부(510)는 차량 단말(120)로부터 차량(100)의 자율 주행을 위한 내비게이션 정보를 수신할 수 있다. 여기서, 내비게이션 정보는 출발지, 경유지, 목적지, 목적지까지의 소요시간을 포함하는 경로 정보, 차량(100)이 자율 주행하도록 차량(100)을 제어하기 위한 차량 제어 정보, 도로 정보, 교통 정보 및 날씨 정보를 포함할 수 있다. 이 때, 차량 제어 정보는 예를 들어, 조향 장치(130)의 조향 타이밍, 조향 속도, 조향각, 가속 타이밍, 가속 정도, 가속 지속 시간, 제동 타이밍, 제동 정도, 제동 지속 시간 등의 직접 제어 정보 및 인접 차량의 위치와 속도, 차량(100)이 이동할 방향과 타이밍을 포함하는 간접 제어 정보를 포함할 수 있다.
홀로그램 출력부(520)는 차량(100)의 내부의 투영 영역에 기설정된 가상 운전자(115)에 대한 홀로그램을 출력할 수 있다. 예를 들어, 가상 운전자(115)의 캐릭터가 '여성 비서 캐릭터'로 설정된 경우, 홀로그램 출력부(520)는 사용자 단말(125)로부터 수신한 설정 정보에 기초하여 투영 영역의 위치 정보 및 가상 운전자(115)에 대해 설정된 자세 정보 및 신체 부위별 위치 정보에 기초하여 가상 운전자(115)의 머리, 몸통, 팔, 다리 등이 표현된 '여성 비서 캐릭터'에 대한 홀로그램을 출력할 수 있다.
대화 서비스 제공부(530)는 차량(100)의 탑승자(105)가 발화한 음성을 인식하고, 인식된 음성으로부터 도출된 답변에 기초하여 가상 운전자(115)와 탑승자(105) 간의 대화 서비스를 제공할 수 있다. 예를 들어, 대화 서비스 제공부(530)는 차량(100)의 탑승자(105)가 발화한 음성을 인식한 경우, 통신부(510)를 통해 인식된 음성 데이터를 서버(미도시)로 전송하고, 서버(미도시)로부터 음성 데이터에 기초하여 도출된 답변을 수신할 수 있다.
대화 서비스 제공부(530)는 가상 운전자(115)에 대해 설정된 캐릭터에 기초하여 답변을 출력할 수 있다. 여기서, 캐릭터는 복수의 여성 캐릭터, 복수의 남성 캐릭터, 복수의 게임 캐릭터, 복수의 만화 캐릭터, 복수의 동물 캐릭터, 복수의 연예인 캐릭터 중 사용자 단말(125)에 의해 설정된 어느 하나의 캐릭터를 포함할 수 있다. 예를 들어, 대화 서비스 제공부(530)는 가상 운전자(115)의 캐릭터에 기초하여 캐릭터별로 기설정된 손짓, 몸짓과 관련된 동작, 얼굴 표정, 말투 등에 따라 가상 운전자(115)의 캐릭터, 동작, 얼굴 표정, 음성, 말투 등을 각각 다르게 표현하여 대화 서비스를 제공할 수 있다.
예를 들어, 대화 서비스 제공부(530)는 차량(100)의 자율 주행 중 발생한 주행 정보, 경로 정보 및 날씨 정보 등에 기초하여 능동 대화를 시도할 수 있다.
이하에서는, 차량(100)의 자율 주행 중 발생한 주행 정보, 경로 정보 및 날씨 정보 등에 기초하여 능동 대화를 시도하는 경우에 대해 설명하도록 한다. 예를 들어, 탑승자(105)가 "하이 홀로"와 같이 음성을 발화한 경우, 대화 서비스 제공부(530)는 탑승자(105)의 발화를 인식하여 대화 서비스를 개시할 수 있다. 이 때, 대화 서비스 제공부(530)는 "안녕하세요"와 같은 환영 인사를 수행한 후, "어디로 모실까요?"와 같이 차량(100)이 이동할 목적지가 어디인지를 탑승자(105)에게 질의할 수 있다. 이 때, 현재 차량(100)의 출발지가 '분당'이고, 탑승자(105)가 목적지를 "광화문"으로 음성을 발화한 경우, 대화 서비스 제공부(530)는 '출발지: 분당' 및 '목적지: 광화문'까지의 주행 정보, 경로 정보 및 날씨 정보 등에 기초하여 능동 대화를 시도할 수 있다.
예를 들어, 탑승자(105)가 "곧 우회전인가?"와 같은 음성을 발화한 경우, 대화 서비스 제공부(530)는 "한 블록 더 직진한 후, 우회전할 예정입니다"와 같이 주행 정보에 대한 대화를 제공할 수 있다.
다른 예를 들어, 탑승자(105)가 "도착 예정 시간은?"과 같은 음성을 발화한 경우, 대화 서비스 제공부(530)는 "도착 예정 시간은 7시50분입니다. 좀 막히네요"와 같이 목적지의 도착 예정 시간 및 도로 정체 정보에 대한 대화를 제공할 수 있다.
또 다른 예를 들어, 탑승자(105)가 "판교 아파트 33평형 가격 좀 알려줘"와 같은 음성을 발화한 경우, 대화 서비스 제공부(530)는 "판교 평균 33평형 아파트 가격은 xx억원입니다. 판교 AA 아파트 33평은 xx억원입니다"와 같이 주행 경로 상에 위치한 주변지에 대한 대화를 제공할 수 있다.
또 다른 예를 들어, 탑승자(105)가 "오늘 날씨 어때?"와 같은 음성을 발화한 경우, 대화 서비스 제공부(530)는 "현재 분당의 날씨는 맑음이며, 목적지인 광화문의 날씨는 흐림입니다"와 같이 출발지 및 목적지의 날씨에 대한 대화를 제공할 수 있다.
이외에도, 대화 서비스 제공부(530)는 차량(100)의 자율 주행과 관련된 음성 안내를 제공할 수도 있다. 예를 들어, 대화 서비스 제공부(530)는 "가는 길에 사고가 있어 도착 시간이 약 30분 정도 지연됩니다"와 같은 경로 정보에 대한 음성 안내를 제공할 수 있다. 다른 예를 들어, 대화 서비스 제공부(530)는 차량(100)이 목적지에 곧 도착할 예정인 경우, "도착 5분전입니다"와 같은 도착 예정 음성 안내를 제공하고, 차량(100)이 목적지에 도착한 경우, "도착하였습니다. 오늘도 수고하셨습니다"와 같은 도착 음성 안내를 제공할 수도 있다.
다른 예를 들어, 대화 서비스 제공부(530)는 탑승자(105)의 상태 정보, 관심 정보 및 가상 운전자(115)와 탑승자(105) 간의 대화 이력 정보 등에 기초하여 능동 대화를 시도할 수 있다.
이하에서는, 차량(100)의 탑승자(105)의 상태 정보, 관심 정보 및 가상 운전자(115)와 탑승자(105) 간의 대화 이력 정보 등에 기초하여 능동 대화를 시도하는 경우에 대해 설명하도록 한다.
예를 들어, 탑승자(105)가 회식 모임의 참석을 위해 차량(100)으로 이동 중인 경우, 대화 서비스 제공부(530)는 탑승자(105)로부터 "오늘 재미있는 건배사 없어?"와 같은 음성을 인식하고, 인식된 음성에 기초하여 "요즘 핫한 건배사는 XXX입니다"와 같은 대화를 제공할 수 있다.
다른 예를 들어, 대화 서비스 제공부(530)는 퇴근 후 차량(100)에 탑승한 탑승자(105)에게 "오늘 어떠셨나요?"와 같은 질의를 할 수 있으며, 탑승자(105)로부터 "오늘은 피곤하네. 술 때문에 속도 안좋고"와 같은 음성을 입력받을 수 있다. 이 때, 대화 서비스 제공부(530)가 "지난 번에 질문하셨던 위장 장애 관련 새로운 소식이 있는데 알려드릴까요?"와 같이 질의하면, 탑승자(105)로부터 "그래? 새로운 약이라도 나왔나?"와 같은 음성을 입력받아 탑승자(105)의 상태에 대한 능동적인 대화 서비스를 제공할 수 있다.
또 다른 예를 들어, 대화 서비스 제공부(530)는 탑승자(105)에게 "지난번 질문하셨던 판교 아파트 가격 동향 변경된 것이 있는데 알려드릴까요?"와 같은 질의를 할 수 있으며, 탑승자(105)로부터 "그래, 알려줘와 같은 음성을 입력받을 수 있다. 이 때, 대화 서비스 제공부(530)가 "판교 아파트 33평형 기준으로 OO억원으로, 지난주 대비 3% 상승되었습니다"와 같이 정보를 제공하여 탑승자(105)로부터 "그래? 집 값이 너무 오른다"와 같은 음성을 입력받은 경우, "관련 기사를 읽어드릴까요?"와 같은 답변을 제공함으로써, 가상 운전자(115)와 탑승자(105) 간의 이전 대화 이력 정보를 이용한 능동적인 대화 서비스를 제공할 수 있다.
대화 서비스 제공부(530)는 가상 운전자(115)의 입의 위치에 기초하여 가상 발화 위치를 설정하고, 설정된 가상 발화 위치에 기초하여 답변이 출력되도록 함으로써, 탑승자(105)가 가상 운전자(115)와 실제 대화하는 느낌을 받도록 할 수도 있다.
대화 서비스 제공부(530)는 부가 서비스가 적용된 대화 서비스를 제공할 수 있다. 여기서, 부가 서비스는 예를 들어, 전자책(예를 들어, 오디오북, TTS), 음악 서비스, 주식 투자 정보, 부동산 정보(예를 들어, 주행 경로 상의 주변지의 아파트 시세 정보) 등을 포함하는 유료 컨텐츠일 수 있다. 예를 들어, 대화 서비스 제공부(530)는 '나의 라임 오렌지 나무'와 같은 전자책의 내용을 가상 운전자(115)의 음성을 통해 출력할 수 있다. 다른 예를 들어, 대화 서비스 제공부(530)는 'AA전자' 주가와 같이 주식 투자 정보가 가상 운전자(115)의 음성을 통해 제공되도록 할 수 있다. 또 다른 예를 들어, 대화 서비스 제공부(530)는 '구로 아파트 33평형 아파트 시세'와 같이 부동산 정보가 가상 운전자(115)의 음성을 통해 제공되도록 할 수 있다.
가상 운전자 제어부(540)는 도출된 답변에 기초하여 가상 운전자(115)의 표정, 입 모양 및 동작 등을 제어할 수 있다. 예를 들어, 가상 운전자 제어부(540)는 도출된 답변에 대응하는 가상 운전자(115)의 표정, 입 모양 및 동작을 제어함으로써, 가상 운전자(115)가 실제 사람이 발화하듯이 하여, 탑승자(105)에게 실제 사람과 대화하는 듯한 느낌을 제공할 수 있다. 다른 예를 들어, 가상 운전자(115)의 캐릭터가 '탑승자 캐릭터'로 설정된 경우, 가상 운전자 제어부(540)는 도출된 답변에 기초하여 탑승자(105)의 표정, 입 모양 및 동작 등이 모사되도록 가상 운전자(115)의 표정, 입 모양 및 동작 등을 제어할 수 있다.
이 때, 가상 운전자 제어부(540)는 부가 서비스가 적용에 따라 가상 운전자(115)의 표정, 입 모양 및 동작 등을 제어할 수도 있다. 예를 들어, 가상 운전자 제어부(540)는 음악 앱의 연동을 통해 가상 운전자(115)가 노래를 따라부르듯이 표현되도록, 가상 운전자(115)의 입 모양이 제어할 수도 있다.
홀로그램 출력부(520)는 표정, 입 모양 및 동작 등이 반영된 가상 운전자(115)에 대한 홀로그램을 출력할 수 있다.
가상 운전자 제어부(540)는 내비게이션 정보 및 조향 장치(130)의 위치에 기초하여 가상 운전자(115)가 조향 장치(130)를 가상 조작하도록 가상 운전자(115)의 동작을 제어할 수 있다. 여기서, 가상 조작이란 주행 정보에 기초하여 가상 운전자(115)의 동작이 조향 장치(130)의 작동과 동기화됨으로써, 가상 운전자(115)가 조향 장치(130)를 실제로 조작하는 모습처럼 보이도록 하는 것을 의미할 수 있다.
예를 들어, 가상 운전자 제어부(540)는 조향 장치(130)의 위치에 기초하여 가상 운전자(115)의 두 손이 조향 장치(130)를 쥐고 있는 모습이 표현되도록 가상 운전자(115)의 동작을 제어할 수 있다.
이후, 가상 운전자 제어부(540)는 차량(100)이 직진, 좌회전, 우회전, 유턴 등으로 주행할 경우, 차량(100)의 주행 정보 및 조향 장치(130)의 위치에 기초하여 가상 운전자(115)가 조향 장치(130)를 가상 조작하도록 가상 운전자(115)의 동작을 제어할 수 있다. 이 때, 가상 운전자(115)의 손의 동작은 차량(100)을 운전하는 동작으로, 주행 정보와 동기화되어 손 동작이 표현될 수 있다.
예를 들어, 차량(100)의 직진 주행이 예정된 경우, 가상 운전자 제어부(540)는 차량(100)의 주행 정보에 기초하여 가상 운전자(115)의 두 손이 조향 장치(130)를 쥐고 있는 모습으로 표현되도록 가상 운전자(115)의 동작을 제어할 수 있다. 다른 예를 들어, 차량(100)의 우회전(또는 좌회전)이 예정된 경우, 가상 운전자 제어부(540)는 차량(100)의 주행 정보에 기초하여 가상 운전자(115)가 조향 장치(130)를 우측 방향(또는 좌측 방향)으로 회전시키는 모습이 표현되도록 가상 운전자(115)의 동작을 제어할 수 있다. 또 다른 예를 들어, 차량(100)의 유턴(U-turn)이 예정된 경우, 가상 운전자 제어부(540)는 차량(100)의 주행 정보에 기초하여 가상 운전자(115)가 유턴을 위해 조향 장치(130)를 한 쪽 방향으로 끝까지 회전시키는 모습이 표현되도록 가상 운전자(115)의 동작을 제어할 수 있다. 또 다른 예를 들어, 차량(100)이 목적지에 도착한 경우, 가상 운전자 제어부(250)는 차량(100)의 주행 정보에 기초하여 가상 운전자(115)가 기어 노브를 이용하여 차량(100)을 주차시키는 모습이 표현되도록 가상 운전자(115)의 동작을 제어할 수 있다.
가상 운전자 변경부(550)는 사용자 단말(125) 또는 서버(미도시)로부터 수신한 설정 정보에 기초하여 가상 운전자(115)의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 등을 변경할 수 있다. 여기서, 가상 운전자의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 등은 사용자 단말(125)에 의해 구매 또는 소정 기간 동안 대여 가능한 것일 수 있다.
도 6a 내지 도 6c는 본 발명의 일 실시예에 따른 가상 운전자 서비스 제공 장치에서 가상 운전자 서비스를 제공하는 과정을 설명하기 위한 예시적인 도면이다.
도 6a를 참조하면, 가상 운전자 서비스 제공 장치(110)는 사용자 단말(125) 또는 서버(미도시)로부터 수신한 가상 운전자(115)에 대한 설정 정보에 기초하여 차량(100)의 내부 투영 영역에 '탑승자 캐릭터'에 대한 홀로그램을 출력할 수 있다.
가상 운전자 서비스 제공 장치(110)는 탑승자(105)의 음성, 표정, 말투, 동작 등이 모사되도록 '탑승자 캐릭터'의 음성, 표정, 말투, 동작 등을 제어할 수 있다.
이러한 과정을 통해, 차량(100)의 운전석에 위치한 탑승자(105)와 동일한 얼굴을 한 가상 운전자(115)가 탑승자(105)의 음성, 표정, 말투, 동작을 그대로 재현하여 대화 서비스를 제공할 수 있다.
도 6b를 참조하면, 가상 운전자 서비스 제공 장치(110)는 사용자 단말(125) 또는 서버(미도시)로부터 수신한 가상 운전자(115)에 대한 설정 정보에 기초하여 차량(100)의 내부 투영 영역에 '여성 비서 캐릭터'에 대한 홀로그램을 출력할 수 있다.
가상 운전자 서비스 제공 장치(110)는 가상 운전자(115)에 대한 설정 정보에 기초하여 '여성 비서 캐릭터'가 사무적인 표정 및 동작을 수행하도록, '여성 비서 캐릭터'의 표정 및 동작 등을 제어할 수 있다. 이 때, 가상 운전자 서비스 제공 장치(110)는 '여성 비서 캐릭터'가 공손한 말투의 여성 음성으로 탑승자(105)와 대화를 수행하도록 하는 대화 서비스를 제공할 수 있다.
도 6c를 참조하면, 가상 운전자 서비스 제공 장치(110)는 사용자 단말(125) 또는 서버(미도시)로부터 수신한 가상 운전자(115)에 대한 설정 정보에 기초하여 차량(100)의 내부 투영 영역에 '남성 보디가드 캐릭터'에 대한 홀로그램을 출력할 수 있다.
가상 운전자 서비스 제공 장치(110)는 가상 운전자(115)에 대한 설정 정보에 기초하여 '남성 보디가드 캐릭터'가 정중한 표정 및 동작을 수행하도록, '남성 보디가드 캐릭터'의 표정 및 동작을 제어할 수 있다. 이 때, 가상 운전자 서비스 제공 장치(110)는 '남성 보디가드 캐릭터'가 무뚝뚝한 말투의 남성 음성으로 탑승자(105)와 대화를 수행하도록 하는 대화 서비스를 제공할 수 있다.
이외에도, 가상 운전자 서비스 제공 장치(110)는 사용자 단말(125) 또는 서버(미도시)로부터 수신한 가상 운전자(115)에 대한 설정 정보에 기초하여 차량(100)의 내부 투영 영역에 '펭귄 캐릭터'에 대한 홀로그램을 출력할 수 있다.
가상 운전자 서비스 제공 장치(110)는 가상 운전자(115)에 대한 설정 정보에 기초하여 '펭귄 캐릭터'가 톡톡튀는 개성적인 표정 및 동작을 수행하도록, '펭귄 캐릭터'의 표정 및 동작을 제어할 수 있다. 이 때, 가상 운전자 서비스 제공 장치(110)는 '펭귄 캐릭터'가 귀여운 말투의 어린이 음성으로 펭귄 캐릭터 특유의 추임새를 더하여 탑승자(105)와 대화를 수행하도록 하는 대화 서비스를 제공할 수 있다.
도 7은 본 발명의 일 실시예에 따른 가상 운전자 서비스 제공 장치에서 차량의 자율 주행 중 가상 운전자 서비스를 제공하는 방법의 순서도이다. 도 7에 도시된 가상 운전자 서비스 제공 장치(110)에서 차량의 자율 주행 중 가상 운전자 서비스를 제공하는 방법은 도 1 내지 도 6c에 도시된 실시예에 따른 가상 운전자 서비스 제공 시스템(1)에 의해 시계열적으로 처리되는 단계들을 포함한다. 따라서, 이하 생략된 내용이라고 하더라도 도 1 내지 도 6c에 도시된 실시예에 따른 가상 운전자 서비스 제공 장치(110)에서 차량의 자율 주행 중 가상 운전자 서비스를 제공하는 방법에도 적용된다.
S710에서 가상 운전자 서비스 제공 장치(110)는 차량(100)의 내부의 투영 영역에 기설정된 가상 운전자(115)에 대한 홀로그램을 출력할 수 있다.
S720에서 가상 운전자 서비스 제공 장치(110)는 차량(100)의 탑승자(105)가 발화한 음성을 인식하고, 인식된 음성으로부터 도출된 답변에 기초하여 가상 운전자(115)와 탑승자(105) 간의 대화 서비스를 제공할 수 있다.
S730에서 가상 운전자 서비스 제공 장치(110)는 도출된 답변에 기초하여 가상 운전자(115)의 표정, 입 모양 및 동작 중 적어도 하나를 제어할 수 있다.
S740에서 가상 운전자 서비스 제공 장치(110)는 표정, 입 모양 및 동작 중 적어도 하나가 반영된 가상 운전자(115)에 대한 홀로그램을 출력할 수 있다.
상술한 설명에서, 단계 S710 내지 S740은 본 발명의 구현예에 따라서, 추가적인 단계들로 더 분할되거나, 더 적은 단계들로 조합될 수 있다. 또한, 일부 단계는 필요에 따라 생략될 수도 있고, 단계 간의 순서가 전환될 수도 있다.
도 1 내지 도 7을 통해 설명된 사용자 단말 및 가상 운전자 서비스 제공 장치에서 차량의 자율 주행 중 가상 운전자 서비스를 제공하는 방법은 컴퓨터에 의해 실행되는 매체에 저장된 컴퓨터 프로그램 또는 컴퓨터에 의해 실행 가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 또한, 도 1 내지 도 7을 통해 설명된 사용자 단말 및 가상 운전자 서비스 제공 장치에서 차량의 자율 주행 중 가상 운전자 서비스를 제공하는 방법은 컴퓨터에 의해 실행되는 매체에 저장된 컴퓨터 프로그램의 형태로도 구현될 수 있다.
컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체를 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
100: 차량
110: 가상 운전자 서비스 제공 장치
120: 차량 단말
125: 사용자 단말
130: 조향 장치
210: 입력부
220: 결제부
230: 전송부
510: 통신부
520: 홀로그램 출력부
530: 대화 서비스 제공부
540: 가상 운전자 제어부
550: 가상 운전자 변경부

Claims (19)

  1. 차량의 자율 주행 중 가상 운전자 서비스를 제공하는 장치에 있어서,
    차량의 내부의 투영 영역에 기설정된 가상 운전자에 대한 홀로그램을 출력하는 홀로그램 출력부;
    상기 차량의 탑승자가 발화한 음성을 인식하고, 상기 인식된 음성으로부터 도출된 답변에 기초하여 상기 가상 운전자와 상기 탑승자 간의 대화 서비스를 제공하는 대화 서비스 제공부; 및
    상기 차량의 자율 주행을 위한 차량 제어 정보에 기초하여 상기 가상 운전자의 동작을 제어하고, 상기 도출된 답변에 기초하여 상기 가상 운전자의 표정, 입 모양 및 동작 중 적어도 하나를 제어하는 가상 운전자 제어부를 포함하고,
    상기 홀로그램 출력부는 상기 표정, 입 모양 및 동작 중 적어도 하나가 반영된 상기 가상 운전자에 대한 홀로그램을 출력하는 것인, 장치.
  2. 제 1 항에 있어서,
    차량 단말 또는 사용자 단말 중 적어도 하나와 통신을 수행하는 통신부를 더 포함하는 것인, 장치.
  3. 제 2 항에 있어서,
    상기 통신부는 상기 사용자 단말로부터 상기 가상 운전자에 대한 설정 정보를 수신하는 것인, 장치.
  4. 제 3 항에 있어서,
    상기 수신한 설정 정보에 기초하여 상기 가상 운전자의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 중 적어도 하나를 변경하는 가상 운전자 변경부를 더 포함하는 것인, 장치.
  5. 제 4 항에 있어서,
    상기 가상 운전자의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 중 적어도 하나는 상기 사용자 단말에 의해 구매 또는 소정 기간 동안 대여 가능한 것인, 장치.
  6. 제 1 항에 있어서,
    상기 대화 서비스 제공부는 상기 차량의 자율 주행 중 발생한 주행 정보, 경로 정보 및 날씨 정보 중 적어도 하나에 기초하여 능동 대화를 시도하는 것인, 장치.
  7. 제 1 항에 있어서,
    상기 대화 서비스 제공부는 상기 탑승자의 상태 정보, 관심 정보 및 상기 가상 운전자와 상기 탑승자 간의 대화 이력 정보 중 적어도 하나에 기초하여 능동 대화를 시도하는 것인, 장치.
  8. 제 1 항에 있어서,
    상기 차량 제어 정보는 조향 장치의 조향 타이밍, 조향 속도, 조향각, 가속 타이밍, 가속 정도, 가속 지속 시간, 제동 타이밍, 제동 정도, 제동 지속 시간 중 적어도 하나를 포함하는 것인, 장치.
  9. 장치에서 차량의 자율 주행 중 가상 운전자 서비스를 제공하는 방법에 있어서,
    차량의 내부의 투영 영역에 기설정된 가상 운전자에 대한 홀로그램을 출력하는 단계;
    상기 차량의 탑승자가 발화한 음성을 인식하고, 상기 인식된 음성으로부터 도출된 답변에 기초하여 상기 가상 운전자와 상기 탑승자 간의 대화 서비스를 제공하는 단계;
    상기 차량의 자율 주행을 위한 차량 제어 정보에 기초하여 상기 가상 운전자의 동작을 제어하고, 상기 도출된 답변에 기초하여 상기 가상 운전자의 표정, 입 모양 및 동작 중 적어도 하나를 제어하는 단계; 및
    상기 표정, 입 모양 및 동작 중 적어도 하나가 반영된 상기 가상 운전자에 대한 홀로그램을 출력하는 단계를 포함하는 것인, 가상 운전자 서비스 제공 방법.
  10. 제 9 항에 있어서,
    차량 단말 또는 사용자 단말 중 적어도 하나와 통신을 수행하는 단계를 더 포함하는 것인, 가상 운전자 서비스 제공 방법.
  11. 제 10 항에 있어서,
    상기 통신을 수행하는 단계는,
    상기 사용자 단말로부터 상기 가상 운전자에 대한 설정 정보를 수신하는 단계를 포함하는 것인, 가상 운전자 서비스 제공 방법.
  12. 제 11 항에 있어서,
    상기 수신한 설정 정보에 기초하여 상기 가상 운전자의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 중 적어도 하나를 변경하는 단계를 더 포함하는 것인, 가상 운전자 서비스 제공 방법.
  13. 제 12 항에 있어서,
    상기 가상 운전자의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 중 적어도 하나는 상기 사용자 단말에 의해 구매 또는 소정 기간 동안 대여 가능한 것인, 가상 운전자 서비스 제공 방법.
  14. 제 9 항에 있어서,
    상기 대화 서비스를 제공하는 단계는,
    상기 차량의 자율 주행 중 발생한 주행 정보, 경로 정보 및 날씨 정보 중 적어도 하나에 기초하여 능동 대화를 시도하는 단계를 포함하는 것인, 가상 운전자 서비스 제공 방법.
  15. 제 9 항에 있어서,
    상기 대화 서비스를 제공하는 단계는,
    상기 탑승자의 상태 정보, 관심 정보 및 상기 가상 운전자와 상기 탑승자 간의 대화 이력 정보 중 적어도 하나에 기초하여 능동 대화를 시도하는 단계를 포함하는 것인, 가상 운전자 서비스 제공 방법.
  16. 제 9 항에 있어서,
    차량 제어 정보는 조향 장치의 조향 타이밍, 조향 속도, 조향각, 가속 타이밍, 가속 정도, 가속 지속 시간, 제동 타이밍, 제동 정도, 제동 지속 시간 중 적어도 하나를 포함하는 것인, 가상 운전자 서비스 제공 방법.
  17. 차량의 자율 주행 중 가상 운전자 서비스를 제공하는 사용자 단말에 있어서,
    차량의 내부 영역에 홀로그램으로 출력될 가상 운전자에 대한 설정 정보를 입력받는 입력부;
    상기 입력된 가상 운전자에 대한 설정 정보를 가상 운전자 서비스 제공 장치로 전송하는 전송부를 포함하고,
    상기 가상 운전자에 대한 설정 정보에 기초하여 상기 가상 운전자 서비스 제공 장치에 의해 상기 차량의 내부의 투영 영역에 상기 가상 운전자에 대한 홀로그램이 출력되고,
    상기 차량의 탑승자가 발화된 음성이 인식되고, 상기 인식된 음성으로부터 도출된 답변에 기초하여 상기 가상 운전자와 상기 탑승자 간의 대화 서비스가 제공되고,
    상기 차량의 자율 주행을 위한 차량 제어 정보에 기초하여 상기 가상 운전자의 동작을 제어하고, 상기 도출된 답변에 기초하여 상기 가상 운전자의 표정, 입모양 및 동작 중 적어도 하나가 제어되고,
    상기 표정, 입 모양 및 동작 중 적어도 하나가 반영된 상기 가상 운전자에 대한 홀로그램이 출력되는 것인, 사용자 단말.
  18. 제 17 항에 있어서,
    상기 입력부는 상기 가상 운전자의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 중 적어도 하나에 대한 설정 정보를 입력받는 것인, 사용자 단말.
  19. 제 18 항에 있어서,
    상기 가상 운전자의 캐릭터, 대화 능력, 성격, 입 모양 정확도, 동작 정확도, 음성, 말투, 의상 중 적어도 하나를 구매 또는 소정 기간 동안 대여하기 위한 결제를 수행하는 결제부를 더 포함하는 것인, 사용자 단말.
KR1020240020588A 2021-06-14 2024-02-13 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말 KR102650177B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020240020588A KR102650177B1 (ko) 2021-06-14 2024-02-13 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020210076791A KR102637748B1 (ko) 2021-06-14 2021-06-14 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말
KR1020240020588A KR102650177B1 (ko) 2021-06-14 2024-02-13 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020210076791A Division KR102637748B1 (ko) 2021-06-14 2021-06-14 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말

Publications (2)

Publication Number Publication Date
KR20240023581A KR20240023581A (ko) 2024-02-22
KR102650177B1 true KR102650177B1 (ko) 2024-03-22

Family

ID=84578242

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020210076791A KR102637748B1 (ko) 2021-06-14 2021-06-14 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말
KR1020240020588A KR102650177B1 (ko) 2021-06-14 2024-02-13 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020210076791A KR102637748B1 (ko) 2021-06-14 2021-06-14 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말

Country Status (1)

Country Link
KR (2) KR102637748B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102637748B1 (ko) * 2021-06-14 2024-02-20 (주)다산지앤지 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018179786A1 (ja) * 2017-03-28 2018-10-04 株式会社村上開明堂 情報表示装置
JP2020075720A (ja) * 2017-06-16 2020-05-21 本田技研工業株式会社 エクスペリエンス提供システム、エクスペリエンス提供方法およびエクスペリエンス提供プログラム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021006359A1 (ko) * 2019-07-05 2021-01-14 엘지전자 주식회사 자율주행시스템에서 장난감 장치를 활용한 차량 제어 방법 및 이를 위한 장치
KR102609600B1 (ko) * 2021-05-14 2023-12-06 (주)다산지앤지 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램
KR102637748B1 (ko) * 2021-06-14 2024-02-20 (주)다산지앤지 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018179786A1 (ja) * 2017-03-28 2018-10-04 株式会社村上開明堂 情報表示装置
JP2020075720A (ja) * 2017-06-16 2020-05-21 本田技研工業株式会社 エクスペリエンス提供システム、エクスペリエンス提供方法およびエクスペリエンス提供プログラム

Also Published As

Publication number Publication date
KR20220167829A (ko) 2022-12-22
KR102637748B1 (ko) 2024-02-20
KR20240023581A (ko) 2024-02-22

Similar Documents

Publication Publication Date Title
KR102650177B1 (ko) 가상 운전자 서비스를 제공하는 장치, 방법 및 사용자 단말
Pearl Designing voice user interfaces: Principles of conversational experiences
CN107458325A (zh) 用于在自主驾驶运载工具处提供积极信息娱乐的系统
CN107465423A (zh) 用于实现与自主车辆的使用有关的相对标签的系统和方法
Williams et al. Towards leveraging the driver's mobile device for an intelligent, sociable in-car robotic assistant
JP6800249B2 (ja) 会話処理サーバー、会話処理サーバーの制御方法、及び端末
KR102650178B1 (ko) 가상 운전자 서비스를 제공하는 장치, 방법 및 컴퓨터 프로그램
WO2020118273A2 (en) Trip-configurable content
US20220099451A1 (en) Traveling route setting apparatus
DE102007037073A1 (de) Vorrichtung zur Informationsvermittlung
Karatas et al. Namida: Multiparty conversation based driving agents in futuristic vehicle
Kim et al. Guiding preferred driving style using voice in autonomous vehicles: An on-road wizard-of-oz study
JP7230752B2 (ja) 情報処理方法および情報処理装置
Asha et al. Designing Inclusive Interaction with Autonomous Vehicles for Older Passengers
Herrmann et al. What Matters
McGarry Teaching English as a second language: Giving new learners an everyday grammar
Martínez The Future of the Automotive Industry
JP7259680B2 (ja) 情報処理方法
Michels Keynote speech The user experience in tomorrow’s mobility
US20240095418A1 (en) System and method for an augmented-virtual reality driving simulator using a vehicle
US20200166365A1 (en) Navigation device, navigation information processing device, and navigation information acceptance device
JP7465302B2 (ja) 情報提供システム、情報提供システムの制御方法、及び情報提供システムの制御プログラム
WO2022124164A1 (ja) 注目対象共有装置、注目対象共有方法
Foen Exploring the human-car bond through an Affective Intelligent Driving Agent (AIDA)
Herrmann et al. Going Places, But Differently

Legal Events

Date Code Title Description
A107 Divisional application of patent
E701 Decision to grant or registration of patent right
GRNT Written decision to grant