CN103414720A - 交互式3d语音服务方法 - Google Patents
交互式3d语音服务方法 Download PDFInfo
- Publication number
- CN103414720A CN103414720A CN2013103611337A CN201310361133A CN103414720A CN 103414720 A CN103414720 A CN 103414720A CN 2013103611337 A CN2013103611337 A CN 2013103611337A CN 201310361133 A CN201310361133 A CN 201310361133A CN 103414720 A CN103414720 A CN 103414720A
- Authority
- CN
- China
- Prior art keywords
- voice
- module
- expression
- interactive
- service method
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
本发明涉及一种交互式3D语音服务方法，包括以下步骤：（1）通过用户终端采集用户的表情和语音并上传给服务器；（2）通过服务器接收、处理所述表情和语音，生成3D虚拟人物视频并发送给所述用户终端；（3）通过所述用户终端播放所述3D虚拟人物视频。本发明基于语音识别技术和3D虚拟人物技术，将其与电视机、家庭智能设备、移动智能终端等结合，通过采集用户的表情和语音，并根据该语音提取关键词，通过搜索得到与关键词对应的结果，并将该表情和语音赋予在3D虚拟人物模型上，形成3D虚拟人物视频并发送给用户终端，由用户终端播放和显示，完成用户的需求。
Description
技术领域
本发明涉及一种服务方法，尤其涉及一种交互式3D语音服务方法。
背景技术
在家庭中，由于网络电视可提供给用户的内容资源过多，有时为了收看一些特定的节目，不得不在大量的节目单中找寻，浪费了大量的时间，造成使用上的不便；另外，在很多公众场合，设置了一些用于信息查询的终端，其一般是由触摸屏和电脑一起构成，由用户通过触摸来进行查询或者用鼠标、键盘来查询，不能直接通过会话来进行信息查询，这对一些手部不灵活的人造成了很大的不便，使得服务缺乏人性化。
发明内容
本发明克服了现有技术的不足，提供一种使用便捷、反应快速的交互式3D语音服务方法。
为达到上述目的，本发明采用的技术方案为：一种交互式3D语音服务方法，包括以下步骤：
（1）通过用户终端采集用户的表情和语音并上传给服务器；
（2）通过服务器接收、处理所述表情和语音，生成3D虚拟人物视频并发送给所述用户终端；
（3）通过所述用户终端播放所述3D虚拟人物视频。
本发明一个较佳实施例中，交互式3D语音服务方法进一步包括所述步骤（1）具体包括通过摄像模块和语音模块采集用户的表情和语音，并由上传模块上传给所述服务器。
本发明一个较佳实施例中，交互式3D语音服务方法进一步包括所述上传模块通过无线网络将所述表情和语音发送给所述服务器。
本发明一个较佳实施例中，交互式3D语音服务方法进一步包括所述步骤（2）具体包括：
（2.1）通过表情接收模块和语音接收模块接收所述用户终端上传的表情和语音；
（2.2）通过表情处理处理模块和语音处理模块处理所述表情和语音；
（2.3）通过搜索模块进行搜索，并将搜索结果反馈给所述语音处理模块进行处理；
（2.4）通过表情重现模块和语音重现模块在3D虚拟人模型上重现用户的表情和根据所述搜索结果得到的语音。
本发明一个较佳实施例中，交互式3D语音服务方法进一步包括所述步骤（2.2）具体包括通过语音转文字模块提取所述语音的关键词并转换为文字形式的关键词。
本发明一个较佳实施例中，交互式3D语音服务方法进一步包括所述步骤（2.3）具体包括根据所述关键词在所述服务器的数据库中进行搜索，并将搜索结果反馈给文字转语音模块。
本发明一个较佳实施例中，交互式3D语音服务方法进一步包括所述步骤（2.3）具体包括根据所述关键词连接无线网络进行搜索，并将搜索结果反馈给文字转语音模块。
本发明一个较佳实施例中，交互式3D语音服务方法进一步包括所述步骤（3）具体包括通过所述用户终端的播放模块播放所述3D虚拟人物视频。
本发明解决了背景技术中存在的缺陷，本发明基于语音识别技术和3D虚拟人物技术，将其与电视机、家庭智能设备、移动智能终端等结合，通过采集用户的表情和语音，并根据该语音提取关键词，通过搜索得到与关键词对应的结果，并将该表情和语音赋予在3D虚拟人物模型上，形成3D虚拟人物视频并发送给用户终端，由用户终端播放和显示，完成用户的需求。
附图说明
下面结合附图和实施例对本发明进一步说明。
图1是本发明的优选实施例的流程图。
具体实施方式
现在结合附图和实施例对本发明作进一步详细的说明，这些附图均为简化的示意图，仅以示意方式说明本发明的基本结构，因此其仅显示与本发明有关的构成。
一种交互式3D语音服务方法，包括用户终端和服务器。其中，用户终端为智能电视机、电脑、智能手机、银行终端、医院终端等，用于采集用户的表情和语音并上传给服务器；服务器，用于接收、处理表情和语音，生成3D虚拟人物视频并发送给用户终端。
如图1所示，本发明的交互式3D语音服务方法包括以下步骤：
步骤1：在服务器内通过3D建模软件制作3D虚拟人模型；
步骤2：通过用户终端的摄像模块和语音模块采集用户的表情和语音，上传模块通过无线网络将该表情和语音上传给服务器；摄像模块可为摄像头，语音模块可为麦克风，该无线网络可以为红外、微波、WIFI或3G网络；
步骤3：通过服务器的表情接收模块和语音接收模块接收用户终端上传的用户的表情和语音；
步骤4：通过表情处理模块将用户的表情分割成由若干个单一五官或脸部肌肉位置组成的表情记录，例如眨眼、眼睛睁大、嘴巴鼓起等，通过语音处理模块内的语音转文字模块提取语音的关键词并转换为文字形式的关键词；
步骤5：根据文字形式的关键词在服务器的数据库中进行搜索，并将搜索结果反馈给语音处理模块内的文字转语音模块进行处理，得到语音形式的搜索结果，或者根据文字形式的关键词连接无线网络进行搜索，并将搜索结果反馈给语音处理模块内的文字转语音模块进行处理，得到语音形式的搜索结果；
步骤6：通过表情重现模块和语音重现模块在3D虚拟人模型上重现用户的表情和根据搜索结果得到的语音，3D虚拟人模型会做与用户相同的表情，同时说出搜索结果，形成3D虚拟人物视频；
步骤7：服务器通过无线网络将3D虚拟人视频发送给用户终端，并通过用户终端的播放模块播放该3D虚拟人物视频。
以上依据本发明的理想实施例为启示，通过上述的说明内容，相关人员完全可以在不偏离本项发明技术思想的范围内，进行多样的变更以及修改。本项发明的技术性范围并不局限于说明书上的内容，必须要根据权利要求范围来确定技术性范围。
Claims (8)
1.一种交互式3D语音服务方法，其特征在于，包括以下步骤：
（1）通过用户终端采集用户的表情和语音并上传给服务器；
（2）通过服务器接收、处理所述表情和语音，生成3D虚拟人物视频并发送给所述用户终端；
（3）通过所述用户终端播放所述3D虚拟人物视频。
2.根据权利要求1所述的交互式3D语音服务方法，其特征在于：所述步骤（1）具体包括通过摄像模块和语音模块采集用户的表情和语音，并由上传模块上传给所述服务器。
3.根据权利要求2所述的交互式3D语音服务方法，其特征在于：所述上传模块通过无线网络将所述表情和语音发送给所述服务器。
4.根据权利要求1所述的交互式3D语音服务方法，其特征在于，所述步骤（2）具体包括：
（2.1）通过表情接收模块和语音接收模块接收所述用户终端上传的表情和语音；
（2.2）通过表情处理处理模块和语音处理模块处理所述表情和语音；
（2.3）通过搜索模块进行搜索，并将搜索结果反馈给所述语音处理模块进行处理；
（2.4）通过表情重现模块和语音重现模块在3D虚拟人模型上重现用户的表情和根据所述搜索结果得到的语音。
5.根据权利要求4所述的交互式3D语音服务方法，其特征在于：所述步骤（2.2）具体包括通过语音转文字模块提取所述语音的关键词并转换为文字形式的关键词。
6.根据权利要求5所述的交互式3D语音服务方法，其特征在于：所述步骤（2.3）具体包括根据所述关键词在所述服务器的数据库中进行搜索，并将搜索结果反馈给文字转语音模块。
7.根据权利要求5所述的交互式3D语音服务方法，其特征在于：所述步骤（2.3）具体包括根据所述关键词连接无线网络进行搜索，并将搜索结果反馈给文字转语音模块。
8.根据权利要求1所述的交互式3D语音服务方法，其特征在于：所述步骤（3）具体包括通过所述用户终端的播放模块播放所述3D虚拟人物视频。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2013103611337A CN103414720A (zh) | 2013-08-19 | 2013-08-19 | 交互式3d语音服务方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2013103611337A CN103414720A (zh) | 2013-08-19 | 2013-08-19 | 交互式3d语音服务方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN103414720A true CN103414720A (zh) | 2013-11-27 |
Family
ID=49607706
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2013103611337A Pending CN103414720A (zh) | 2013-08-19 | 2013-08-19 | 交互式3d语音服务方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103414720A (zh) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104754112A (zh) * | 2013-12-31 | 2015-07-01 | 中兴通讯股份有限公司 | 用户信息获取方法及移动终端 |
| CN106531149A (zh) * | 2016-12-07 | 2017-03-22 | 腾讯科技（深圳）有限公司 | 信息处理方法及装置 |
| CN106681483A (zh) * | 2015-11-05 | 2017-05-17 | 芋头科技（杭州）有限公司 | 一种智能设备的交互方法及系统 |
| CN106710590A (zh) * | 2017-02-24 | 2017-05-24 | 广州幻境科技有限公司 | 基于虚拟现实环境的具有情感功能的语音交互系统及方法 |
| CN106921789A (zh) * | 2015-12-25 | 2017-07-04 | 美的集团股份有限公司 | 基于移动终端的家用电器控制系统、方法及家用电器 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1514399A (zh) * | 2002-11-25 | 2004-07-21 | ��˹���´﹫˾ | 用于健康监视和个人安全的成像方法和系统 |
| CN101187990A (zh) * | 2007-12-14 | 2008-05-28 | 华南理工大学 | 一种会话机器人系统 |
| CN101236598A (zh) * | 2007-12-28 | 2008-08-06 | 北京交通大学 | 基于多尺度总体变分商图像的独立分量分析人脸识别方法 |
| CN201289739Y (zh) * | 2008-11-18 | 2009-08-12 | 天津三星电子有限公司 | 自动表情识别遥控视频播放机 |
| CN202736475U (zh) * | 2011-12-08 | 2013-02-13 | 华南理工大学 | 一种聊天机器人 |
| CN103179437A (zh) * | 2013-03-15 | 2013-06-26 | 苏州跨界软件科技有限公司 | 虚拟人物视频录制及播放系统和方法 |
-
2013
- 2013-08-19 CN CN2013103611337A patent/CN103414720A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1514399A (zh) * | 2002-11-25 | 2004-07-21 | ��˹���´﹫˾ | 用于健康监视和个人安全的成像方法和系统 |
| CN101187990A (zh) * | 2007-12-14 | 2008-05-28 | 华南理工大学 | 一种会话机器人系统 |
| CN101236598A (zh) * | 2007-12-28 | 2008-08-06 | 北京交通大学 | 基于多尺度总体变分商图像的独立分量分析人脸识别方法 |
| CN201289739Y (zh) * | 2008-11-18 | 2009-08-12 | 天津三星电子有限公司 | 自动表情识别遥控视频播放机 |
| CN202736475U (zh) * | 2011-12-08 | 2013-02-13 | 华南理工大学 | 一种聊天机器人 |
| CN103179437A (zh) * | 2013-03-15 | 2013-06-26 | 苏州跨界软件科技有限公司 | 虚拟人物视频录制及播放系统和方法 |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104754112A (zh) * | 2013-12-31 | 2015-07-01 | 中兴通讯股份有限公司 | 用户信息获取方法及移动终端 |
| CN106681483A (zh) * | 2015-11-05 | 2017-05-17 | 芋头科技（杭州）有限公司 | 一种智能设备的交互方法及系统 |
| CN106921789A (zh) * | 2015-12-25 | 2017-07-04 | 美的集团股份有限公司 | 基于移动终端的家用电器控制系统、方法及家用电器 |
| CN106921789B (zh) * | 2015-12-25 | 2019-07-26 | 美的集团股份有限公司 | 基于移动终端的家用电器控制系统、方法及家用电器 |
| CN106531149A (zh) * | 2016-12-07 | 2017-03-22 | 腾讯科技（深圳）有限公司 | 信息处理方法及装置 |
| CN106531149B (zh) * | 2016-12-07 | 2018-02-23 | 腾讯科技（深圳）有限公司 | 信息处理方法及装置 |
| CN106710590A (zh) * | 2017-02-24 | 2017-05-24 | 广州幻境科技有限公司 | 基于虚拟现实环境的具有情感功能的语音交互系统及方法 |
| CN106710590B (zh) * | 2017-02-24 | 2023-05-30 | 广州幻境科技有限公司 | 基于虚拟现实环境的具有情感功能的语音交互系统及方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103428293A (zh) | 交互式3d语音服务系统 | |
| CN106331779B (zh) | 在播放视频过程中基于用户喜好推送主播的方法及系统 | |
| CN110459214B (zh) | 语音交互方法及装置 | |
| CN103093755B (zh) | 基于终端及互联网语音交互的网络家电控制方法及系统 | |
| US11409817B2 (en) | Display apparatus and method of controlling the same | |
| CN103730116A (zh) | 在智能手表上实现智能家居设备控制的系统及其方法 | |
| CN103414720A (zh) | 交互式3d语音服务方法 | |
| WO2020135161A1 (zh) | 视频播放跳转方法、系统及计算机可读存储介质 | |
| CN105161106A (zh) | 智能终端的语音控制方法、装置及电视机系统 | |
| CN103533391B (zh) | 一种声控式交互的双向互动数字电视盒系统的工作方法 | |
| KR20160104635A (ko) | 컨텍스트 정보에 기초하여 검색 결과들을 생성하기 위한 방법들, 시스템들 및 매체들 | |
| CN107864410B (zh) | 一种多媒体数据处理方法、装置、电子设备以及存储介质 | |
| CN104505091A (zh) | 人机语音交互方法及系统 | |
| CN110602516A (zh) | 基于视频直播的信息交互方法、装置及电子设备 | |
| CN110047497B (zh) | 背景音频信号滤除方法、装置及存储介质 | |
| CN103546790A (zh) | 基于移动终端与互动电视语言交互的方法及系统 | |
| CN103945140B (zh) | 视频字幕的生成方法及系统 | |
| CN103442280B (zh) | 实现分布式遥控的方法、装置及其电视端和移动终端 | |
| CN107809654A (zh) | 电视机系统及电视机控制方法 | |
| CN106407287A (zh) | 一种推送多媒体资源的方法及系统 | |
| TW201622427A (zh) | 一種基於圖像識別的電視節目識別方法和系統 | |
| CN104606882A (zh) | 一种体感游戏互动方法及系统 | |
| WO2019101099A1 (zh) | 视频节目识别方法、设备、终端、系统和存储介质 | |
| CN103269445B (zh) | 智能电视系统控制方法 | |
| CN107945071A (zh) | 一种远程教育系统及教育方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20131127 |
|
| RJ01 | Rejection of invention patent application after publication |