CN111477224A - 一种人车虚拟交互系统 - Google Patents
一种人车虚拟交互系统 Download PDFInfo
- Publication number
- CN111477224A CN111477224A CN202010206969.XA CN202010206969A CN111477224A CN 111477224 A CN111477224 A CN 111477224A CN 202010206969 A CN202010206969 A CN 202010206969A CN 111477224 A CN111477224 A CN 111477224A
- Authority
- CN
- China
- Prior art keywords
- vehicle
- content
- audio
- computing device
- mounted computing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 18
- 238000000034 method Methods 0.000 claims abstract description 4
- 230000008569 process Effects 0.000 claims abstract description 4
- 230000000875 corresponding effect Effects 0.000 claims description 9
- 238000010586 diagram Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种人车虚拟交互系统,包括麦克风装置、车载计算装置、云服务装置、扬声器装置、车载显示装置;麦克风装置采集用户的语音音频传输给车载计算装置,车载计算装置将接收的用户音频转发给云服务装置,云服务装置解析用户的音频内容,并将解析结果发送给车载计算装置,车载计算装置根据音频内容自动处理并生成回复内容音频,将回复内容音频发送给扬声器装置播放;车载计算装置同时根据音频内容生成车载虚拟形象的动作、表情、内容指令,并将动作、表情、显示内容指令发送给车载显示装置,车载显示装置根据指令显示动作和表情、显示内容。
Description
技术领域
本发明涉及一种汽车信息娱乐系统,尤其是涉及一种人车虚拟交互系统。
背景技术
传统汽车的人机交互系统,只能实现用户的语音指令交互,并且交互内容是一问一答式,交互维度单一,用户体验较差。
发明内容
为了解决现有技术存在的上述问题,本发明提供一种人车虚拟交互系统,可以进行用户与汽车的多维度互动和交互。
本发明的目的是通过以下技术方案实现的:
一种人车虚拟交互系统,包括麦克风装置、车载计算装置、云服务装置、扬声器装置、车载显示装置;麦克风装置采集用户的语音音频传输给车载计算装置,车载计算装置将接收的用户音频转发给云服务装置,云服务装置解析用户的音频内容,并将解析结果发送给车载计算装置,车载计算装置根据音频内容自动处理并生成回复内容音频,将回复内容音频发送给扬声器装置播放;车载计算装置同时根据音频内容生成车载虚拟形象的动作、表情、内容指令,并将动作、表情、显示内容指令发送给车载显示装置,车载显示装置根据指令显示动作和表情、显示内容。
进一步地,所述云服务装置包含语音语义识别模块,语音语义识别模块根据音频内容识别出对应的语义,将识别出的语义结果发送给车载计算装置。
进一步地,所述车载计算装置包含语音语义计算模块及虚拟形象内容计算模块;语音语义计算模块及虚拟形象内容计算模块之间进行数据互通;语音语义计算模块根据云服务装置识别出的语义在预置的语义数据库中搜索对应的回复内容,生成回复内容音频发送给扬声器装置;虚拟形象内容计算模块根据语音语义计算模块判断的回复内容,在其内置的虚拟形象形态数据库中识别对应的动作形态、表情形态及显示内容形态,并将识别结果发送给车载显示装置。
本发明通过针对用户声音内容的理解、虚拟形象的显示,与用户之间进行深度的互动,改善了用户体验。
附图说明
图1为本发明人车虚拟交互系统示意图;
图2为虚拟形象的示意图;
图3为车载显示装置的显示界面示意图;
图中:101—麦克风装置;102—车载计算装置;103—云服务装置;104-扬声器装置;105-车载显示装置。
具体实施方式
为使本发明要解决的技术问题、技术方案和优点更加清楚,下面将结合附图及具体实施例进行详细描述。
如图1所示,一种人车虚拟交互系统,包括麦克风装置101、车载计算装置102、云服务装置103、扬声器装置104、车载显示装置105。
麦克风装置101采集用户的语音音频传输给车载计算装置102,车载计算装置102将接收的用户音频转发给云服务装置103,云服务装置103解析用户的音频内容,并将解析结果发送给车载计算装置102,车载计算装置102根据音频内容自动处理并生成回复内容音频,将回复内容音频发送给扬声器装置104播放;车载计算装置102同时根据音频内容生成车载虚拟形象的动作、表情、内容指令,并将动作、表情、显示内容指令发送给车载显示装置105,车载显示装置105根据指令显示动作和表情、显示内容。
所述云服务装置103包含语音语义识别模块,语音语义识别模块根据音频内容识别出对应的语义,将识别出的语义结果发送给车载计算装置102。
所述车载计算装置102包含语音语义计算模块及虚拟形象内容计算模块,语音语义计算模块及虚拟形象内容计算模块之间进行数据互通。语音语义计算模块根据云服务装置103识别出的语义在预置的语义数据库中搜索对应的回复内容,生成回复内容音频发送给扬声器装置104;虚拟形象内容计算模块根据语音语义计算模块判断的回复内容,在其内置的虚拟形象形态数据库中识别对应的动作形态、表情形态及显示内容形态,并将识别结果发送给车载显示装置105。
以上所述是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明所述原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (3)
1.一种人车虚拟交互系统,其特征在于,包括麦克风装置、车载计算装置、云服务装置、扬声器装置、车载显示装置;麦克风装置采集用户的语音音频传输给车载计算装置,车载计算装置将接收的用户音频转发给云服务装置,云服务装置解析用户的音频内容,并将解析结果发送给车载计算装置,车载计算装置根据音频内容自动处理并生成回复内容音频,将回复内容音频发送给扬声器装置播放;车载计算装置同时根据音频内容生成车载虚拟形象的动作、表情、内容指令,并将动作、表情、显示内容指令发送给车载显示装置,车载显示装置根据指令显示动作和表情、显示内容。
2.如权利要求1所述的一种人车虚拟交互系统,其特征在于,所述云服务装置包含语音语义识别模块,语音语义识别模块根据音频内容识别出对应的语义,将识别出的语义结果发送给车载计算装置。
3.如权利要求1所述的一种人车虚拟交互系统,其特征在于,所述车载计算装置包含语音语义计算模块及虚拟形象内容计算模块;语音语义计算模块及虚拟形象内容计算模块之间进行数据互通;语音语义计算模块根据云服务装置识别出的语义在预置的语义数据库中搜索对应的回复内容,生成回复内容音频发送给扬声器装置;虚拟形象内容计算模块根据语音语义计算模块判断的回复内容,在其内置的虚拟形象形态数据库中识别对应的动作形态、表情形态及显示内容形态,并将识别结果发送给车载显示装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010206969.XA CN111477224A (zh) | 2020-03-23 | 2020-03-23 | 一种人车虚拟交互系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010206969.XA CN111477224A (zh) | 2020-03-23 | 2020-03-23 | 一种人车虚拟交互系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111477224A true CN111477224A (zh) | 2020-07-31 |
Family
ID=71750332
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010206969.XA Pending CN111477224A (zh) | 2020-03-23 | 2020-03-23 | 一种人车虚拟交互系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111477224A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111767021A (zh) * | 2020-06-28 | 2020-10-13 | 广州小鹏车联网科技有限公司 | 语音交互方法、车辆、服务器、系统和存储介质 |
CN112164128A (zh) * | 2020-09-07 | 2021-01-01 | 广州汽车集团股份有限公司 | 一种车载多媒体的音乐可视化交互方法、计算机设备 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1501233A (zh) * | 2002-11-13 | 2004-06-02 | ���ǵ�����ʽ���� | 使用家庭服务器的家庭机器人及其家庭网络系统 |
CN104123938A (zh) * | 2013-04-29 | 2014-10-29 | 富泰华工业(深圳)有限公司 | 语音控制系统、电子装置及语音控制方法 |
CN106297785A (zh) * | 2016-08-09 | 2017-01-04 | 董文亮 | 一种基于车联网的智能服务系统 |
CN107562195A (zh) * | 2017-08-17 | 2018-01-09 | 英华达(南京)科技有限公司 | 人机交互方法及系统 |
CN108470533A (zh) * | 2018-03-30 | 2018-08-31 | 南京七奇智能科技有限公司 | 基于虚拟人的增强型智能交互广告系统及装置 |
CN108717853A (zh) * | 2018-05-09 | 2018-10-30 | 深圳艾比仿生机器人科技有限公司 | 一种人机语音交互方法、装置及存储介质 |
CN109065035A (zh) * | 2018-09-06 | 2018-12-21 | 珠海格力电器股份有限公司 | 信息交互方法及装置 |
CN109429522A (zh) * | 2016-12-06 | 2019-03-05 | 吉蒂机器人私人有限公司 | 语音交互方法、装置及系统 |
CN109859747A (zh) * | 2018-12-29 | 2019-06-07 | 北京百度网讯科技有限公司 | 语音交互方法、设备以及存储介质 |
CN110223694A (zh) * | 2019-06-26 | 2019-09-10 | 百度在线网络技术(北京)有限公司 | 语音处理方法、系统和装置 |
CN110588550A (zh) * | 2019-09-08 | 2019-12-20 | 一汽轿车股份有限公司 | 一种基于人工智能的人机交互系统 |
-
2020
- 2020-03-23 CN CN202010206969.XA patent/CN111477224A/zh active Pending
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1501233A (zh) * | 2002-11-13 | 2004-06-02 | ���ǵ�����ʽ���� | 使用家庭服务器的家庭机器人及其家庭网络系统 |
CN104123938A (zh) * | 2013-04-29 | 2014-10-29 | 富泰华工业(深圳)有限公司 | 语音控制系统、电子装置及语音控制方法 |
CN106297785A (zh) * | 2016-08-09 | 2017-01-04 | 董文亮 | 一种基于车联网的智能服务系统 |
CN109429522A (zh) * | 2016-12-06 | 2019-03-05 | 吉蒂机器人私人有限公司 | 语音交互方法、装置及系统 |
CN107562195A (zh) * | 2017-08-17 | 2018-01-09 | 英华达(南京)科技有限公司 | 人机交互方法及系统 |
CN108470533A (zh) * | 2018-03-30 | 2018-08-31 | 南京七奇智能科技有限公司 | 基于虚拟人的增强型智能交互广告系统及装置 |
CN108717853A (zh) * | 2018-05-09 | 2018-10-30 | 深圳艾比仿生机器人科技有限公司 | 一种人机语音交互方法、装置及存储介质 |
CN109065035A (zh) * | 2018-09-06 | 2018-12-21 | 珠海格力电器股份有限公司 | 信息交互方法及装置 |
CN109859747A (zh) * | 2018-12-29 | 2019-06-07 | 北京百度网讯科技有限公司 | 语音交互方法、设备以及存储介质 |
CN110223694A (zh) * | 2019-06-26 | 2019-09-10 | 百度在线网络技术(北京)有限公司 | 语音处理方法、系统和装置 |
CN110588550A (zh) * | 2019-09-08 | 2019-12-20 | 一汽轿车股份有限公司 | 一种基于人工智能的人机交互系统 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111767021A (zh) * | 2020-06-28 | 2020-10-13 | 广州小鹏车联网科技有限公司 | 语音交互方法、车辆、服务器、系统和存储介质 |
CN112164128A (zh) * | 2020-09-07 | 2021-01-01 | 广州汽车集团股份有限公司 | 一种车载多媒体的音乐可视化交互方法、计算机设备 |
CN112164128B (zh) * | 2020-09-07 | 2024-06-11 | 广州汽车集团股份有限公司 | 一种车载多媒体的音乐可视化交互方法、计算机设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2009140884A1 (zh) | 一种车载语音交互系统 | |
CN111477224A (zh) | 一种人车虚拟交互系统 | |
US9891067B2 (en) | Voice transmission starting system and starting method for vehicle | |
CN114103850B (zh) | 一种实现汽车主动声增强的系统 | |
CN110544478A (zh) | 驾驶舱智能远场语音交互的系统及方法 | |
US11508370B2 (en) | On-board agent system, on-board agent system control method, and storage medium | |
CN210760611U (zh) | 一种基于人工智能的人机交互系统 | |
CN101645716B (zh) | 一种具有语音识别功能的车载通讯系统及其识别方法 | |
CN114523900A (zh) | 一种集成行人警示音与引擎声浪功能的控制系统及方法 | |
US11518398B2 (en) | Agent system, agent server, method of controlling agent server, and storage medium | |
JP7239359B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
WO2023174243A1 (zh) | 声道映射方法、装置、车载播放设备、车辆和存储介质 | |
CN113571042B (zh) | 一种用于车载式语音识别系统 | |
CN110588550A (zh) | 一种基于人工智能的人机交互系统 | |
CN206734170U (zh) | 一种电动车音效模拟器 | |
Tchankue et al. | Are mobile in-car communication systems feasible? a usability study | |
JP2020131805A (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
US11797261B2 (en) | On-vehicle device, method of controlling on-vehicle device, and storage medium | |
US20200320997A1 (en) | Agent apparatus, agent apparatus control method, and storage medium | |
JP7175221B2 (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
CN206441536U (zh) | 一种基于人脸识别的主动语音助手 | |
CN209240980U (zh) | 电动车声音模拟系统 | |
Bühler et al. | Safety and operating issues for mobile human-machine interfaces | |
CN111445908A (zh) | 一种人车语音交互系统 | |
JP2020160285A (ja) | エージェント装置、情報提供方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200731 |
|
RJ01 | Rejection of invention patent application after publication |