CN111477224A - 一种人车虚拟交互系统 - Google Patents

一种人车虚拟交互系统 Download PDF

Info

Publication number
CN111477224A
CN111477224A CN202010206969.XA CN202010206969A CN111477224A CN 111477224 A CN111477224 A CN 111477224A CN 202010206969 A CN202010206969 A CN 202010206969A CN 111477224 A CN111477224 A CN 111477224A
Authority
CN
China
Prior art keywords
vehicle
content
audio
computing device
mounted computing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010206969.XA
Other languages
English (en)
Inventor
李彦奇
周凯
田鋆
王星皓
高士龙
张楠
马文峰
李英
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
FAW Bestune Car Co Ltd
Original Assignee
FAW Bestune Car Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by FAW Bestune Car Co Ltd filed Critical FAW Bestune Car Co Ltd
Priority to CN202010206969.XA priority Critical patent/CN111477224A/zh
Publication of CN111477224A publication Critical patent/CN111477224A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/28—Constructional details of speech recognition systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种人车虚拟交互系统，包括麦克风装置、车载计算装置、云服务装置、扬声器装置、车载显示装置；麦克风装置采集用户的语音音频传输给车载计算装置，车载计算装置将接收的用户音频转发给云服务装置，云服务装置解析用户的音频内容，并将解析结果发送给车载计算装置，车载计算装置根据音频内容自动处理并生成回复内容音频，将回复内容音频发送给扬声器装置播放；车载计算装置同时根据音频内容生成车载虚拟形象的动作、表情、内容指令，并将动作、表情、显示内容指令发送给车载显示装置，车载显示装置根据指令显示动作和表情、显示内容。

Description

一种人车虚拟交互系统
技术领域
本发明涉及一种汽车信息娱乐系统，尤其是涉及一种人车虚拟交互系统。
背景技术
传统汽车的人机交互系统，只能实现用户的语音指令交互，并且交互内容是一问一答式，交互维度单一，用户体验较差。
发明内容
为了解决现有技术存在的上述问题，本发明提供一种人车虚拟交互系统，可以进行用户与汽车的多维度互动和交互。
本发明的目的是通过以下技术方案实现的：
一种人车虚拟交互系统，包括麦克风装置、车载计算装置、云服务装置、扬声器装置、车载显示装置；麦克风装置采集用户的语音音频传输给车载计算装置，车载计算装置将接收的用户音频转发给云服务装置，云服务装置解析用户的音频内容，并将解析结果发送给车载计算装置，车载计算装置根据音频内容自动处理并生成回复内容音频，将回复内容音频发送给扬声器装置播放；车载计算装置同时根据音频内容生成车载虚拟形象的动作、表情、内容指令，并将动作、表情、显示内容指令发送给车载显示装置，车载显示装置根据指令显示动作和表情、显示内容。
进一步地，所述云服务装置包含语音语义识别模块，语音语义识别模块根据音频内容识别出对应的语义，将识别出的语义结果发送给车载计算装置。
进一步地，所述车载计算装置包含语音语义计算模块及虚拟形象内容计算模块；语音语义计算模块及虚拟形象内容计算模块之间进行数据互通；语音语义计算模块根据云服务装置识别出的语义在预置的语义数据库中搜索对应的回复内容，生成回复内容音频发送给扬声器装置；虚拟形象内容计算模块根据语音语义计算模块判断的回复内容，在其内置的虚拟形象形态数据库中识别对应的动作形态、表情形态及显示内容形态，并将识别结果发送给车载显示装置。
本发明通过针对用户声音内容的理解、虚拟形象的显示，与用户之间进行深度的互动，改善了用户体验。
附图说明
图1为本发明人车虚拟交互系统示意图；
图2为虚拟形象的示意图；
图3为车载显示装置的显示界面示意图；
图中：101—麦克风装置；102—车载计算装置；103—云服务装置；104-扬声器装置；105-车载显示装置。
具体实施方式
为使本发明要解决的技术问题、技术方案和优点更加清楚，下面将结合附图及具体实施例进行详细描述。
如图1所示，一种人车虚拟交互系统，包括麦克风装置101、车载计算装置102、云服务装置103、扬声器装置104、车载显示装置105。
麦克风装置101采集用户的语音音频传输给车载计算装置102，车载计算装置102将接收的用户音频转发给云服务装置103，云服务装置103解析用户的音频内容，并将解析结果发送给车载计算装置102，车载计算装置102根据音频内容自动处理并生成回复内容音频，将回复内容音频发送给扬声器装置104播放；车载计算装置102同时根据音频内容生成车载虚拟形象的动作、表情、内容指令，并将动作、表情、显示内容指令发送给车载显示装置105，车载显示装置105根据指令显示动作和表情、显示内容。
所述云服务装置103包含语音语义识别模块，语音语义识别模块根据音频内容识别出对应的语义，将识别出的语义结果发送给车载计算装置102。
所述车载计算装置102包含语音语义计算模块及虚拟形象内容计算模块，语音语义计算模块及虚拟形象内容计算模块之间进行数据互通。语音语义计算模块根据云服务装置103识别出的语义在预置的语义数据库中搜索对应的回复内容，生成回复内容音频发送给扬声器装置104；虚拟形象内容计算模块根据语音语义计算模块判断的回复内容，在其内置的虚拟形象形态数据库中识别对应的动作形态、表情形态及显示内容形态，并将识别结果发送给车载显示装置105。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明所述原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (3)

1.一种人车虚拟交互系统，其特征在于，包括麦克风装置、车载计算装置、云服务装置、扬声器装置、车载显示装置；麦克风装置采集用户的语音音频传输给车载计算装置，车载计算装置将接收的用户音频转发给云服务装置，云服务装置解析用户的音频内容，并将解析结果发送给车载计算装置，车载计算装置根据音频内容自动处理并生成回复内容音频，将回复内容音频发送给扬声器装置播放；车载计算装置同时根据音频内容生成车载虚拟形象的动作、表情、内容指令，并将动作、表情、显示内容指令发送给车载显示装置，车载显示装置根据指令显示动作和表情、显示内容。
2.如权利要求1所述的一种人车虚拟交互系统，其特征在于，所述云服务装置包含语音语义识别模块，语音语义识别模块根据音频内容识别出对应的语义，将识别出的语义结果发送给车载计算装置。
3.如权利要求1所述的一种人车虚拟交互系统，其特征在于，所述车载计算装置包含语音语义计算模块及虚拟形象内容计算模块；语音语义计算模块及虚拟形象内容计算模块之间进行数据互通；语音语义计算模块根据云服务装置识别出的语义在预置的语义数据库中搜索对应的回复内容，生成回复内容音频发送给扬声器装置；虚拟形象内容计算模块根据语音语义计算模块判断的回复内容，在其内置的虚拟形象形态数据库中识别对应的动作形态、表情形态及显示内容形态，并将识别结果发送给车载显示装置。
CN202010206969.XA 2020-03-23 2020-03-23 一种人车虚拟交互系统 Pending CN111477224A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010206969.XA CN111477224A (zh) 2020-03-23 2020-03-23 一种人车虚拟交互系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010206969.XA CN111477224A (zh) 2020-03-23 2020-03-23 一种人车虚拟交互系统

Publications (1)

Publication Number Publication Date
CN111477224A true CN111477224A (zh) 2020-07-31

Family

ID=71750332

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010206969.XA Pending CN111477224A (zh) 2020-03-23 2020-03-23 一种人车虚拟交互系统

Country Status (1)

Country Link
CN (1) CN111477224A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111767021A (zh) * 2020-06-28 2020-10-13 广州小鹏车联网科技有限公司 语音交互方法、车辆、服务器、系统和存储介质
CN112164128A (zh) * 2020-09-07 2021-01-01 广州汽车集团股份有限公司 一种车载多媒体的音乐可视化交互方法、计算机设备

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1501233A (zh) * 2002-11-13 2004-06-02 ���ǵ�����ʽ���� 使用家庭服务器的家庭机器人及其家庭网络系统
CN104123938A (zh) * 2013-04-29 2014-10-29 富泰华工业（深圳）有限公司 语音控制系统、电子装置及语音控制方法
CN106297785A (zh) * 2016-08-09 2017-01-04 董文亮 一种基于车联网的智能服务系统
CN107562195A (zh) * 2017-08-17 2018-01-09 英华达（南京）科技有限公司 人机交互方法及系统
CN108470533A (zh) * 2018-03-30 2018-08-31 南京七奇智能科技有限公司 基于虚拟人的增强型智能交互广告系统及装置
CN108717853A (zh) * 2018-05-09 2018-10-30 深圳艾比仿生机器人科技有限公司 一种人机语音交互方法、装置及存储介质
CN109065035A (zh) * 2018-09-06 2018-12-21 珠海格力电器股份有限公司 信息交互方法及装置
CN109429522A (zh) * 2016-12-06 2019-03-05 吉蒂机器人私人有限公司 语音交互方法、装置及系统
CN109859747A (zh) * 2018-12-29 2019-06-07 北京百度网讯科技有限公司 语音交互方法、设备以及存储介质
CN110223694A (zh) * 2019-06-26 2019-09-10 百度在线网络技术（北京）有限公司 语音处理方法、系统和装置
CN110588550A (zh) * 2019-09-08 2019-12-20 一汽轿车股份有限公司 一种基于人工智能的人机交互系统

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1501233A (zh) * 2002-11-13 2004-06-02 ���ǵ�����ʽ���� 使用家庭服务器的家庭机器人及其家庭网络系统
CN104123938A (zh) * 2013-04-29 2014-10-29 富泰华工业（深圳）有限公司 语音控制系统、电子装置及语音控制方法
CN106297785A (zh) * 2016-08-09 2017-01-04 董文亮 一种基于车联网的智能服务系统
CN109429522A (zh) * 2016-12-06 2019-03-05 吉蒂机器人私人有限公司 语音交互方法、装置及系统
CN107562195A (zh) * 2017-08-17 2018-01-09 英华达（南京）科技有限公司 人机交互方法及系统
CN108470533A (zh) * 2018-03-30 2018-08-31 南京七奇智能科技有限公司 基于虚拟人的增强型智能交互广告系统及装置
CN108717853A (zh) * 2018-05-09 2018-10-30 深圳艾比仿生机器人科技有限公司 一种人机语音交互方法、装置及存储介质
CN109065035A (zh) * 2018-09-06 2018-12-21 珠海格力电器股份有限公司 信息交互方法及装置
CN109859747A (zh) * 2018-12-29 2019-06-07 北京百度网讯科技有限公司 语音交互方法、设备以及存储介质
CN110223694A (zh) * 2019-06-26 2019-09-10 百度在线网络技术（北京）有限公司 语音处理方法、系统和装置
CN110588550A (zh) * 2019-09-08 2019-12-20 一汽轿车股份有限公司 一种基于人工智能的人机交互系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111767021A (zh) * 2020-06-28 2020-10-13 广州小鹏车联网科技有限公司 语音交互方法、车辆、服务器、系统和存储介质
CN112164128A (zh) * 2020-09-07 2021-01-01 广州汽车集团股份有限公司 一种车载多媒体的音乐可视化交互方法、计算机设备
CN112164128B (zh) * 2020-09-07 2024-06-11 广州汽车集团股份有限公司 一种车载多媒体的音乐可视化交互方法、计算机设备

Similar Documents

Publication Publication Date Title
JP2018151631A (ja) ドメイン曖昧性除去を含む音声対応システム
WO2009140884A1 (zh) 一种车载语音交互系统
CN111477224A (zh) 一种人车虚拟交互系统
US9891067B2 (en) Voice transmission starting system and starting method for vehicle
CN114103850A (zh) 一种实现汽车主动声增强的系统
CN103037014A (zh) 一种车载系统
US11508370B2 (en) On-board agent system, on-board agent system control method, and storage medium
CN210760611U (zh) 一种基于人工智能的人机交互系统
CN101645716B (zh) 一种具有语音识别功能的车载通讯系统及其识别方法
CN114523900A (zh) 一种集成行人警示音与引擎声浪功能的控制系统及方法
US11518398B2 (en) Agent system, agent server, method of controlling agent server, and storage medium
JP7239359B2 (ja) エージェント装置、エージェント装置の制御方法、およびプログラム
WO2023174243A1 (zh) 声道映射方法、装置、车载播放设备、车辆和存储介质
JP7266418B2 (ja) エージェント装置、エージェント装置の制御方法、およびプログラム
CN113571042B (zh) 一种用于车载式语音识别系统
CN110588550A (zh) 一种基于人工智能的人机交互系统
CN206734170U (zh) 一种电动车音效模拟器
Tchankue et al. Are mobile in-car communication systems feasible? a usability study
US11797261B2 (en) On-vehicle device, method of controlling on-vehicle device, and storage medium
US20200320997A1 (en) Agent apparatus, agent apparatus control method, and storage medium
JP7175221B2 (ja) エージェント装置、エージェント装置の制御方法、およびプログラム
CN209240980U (zh) 电动车声音模拟系统
Bühler et al. Safety and operating issues for mobile human-machine interfaces
CN111445908A (zh) 一种人车语音交互系统
CN107967308B (zh) 一种智能交互的处理方法、装置、设备和计算机存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200731

RJ01 Rejection of invention patent application after publication