CN105719522A - 一种双客户端语音通信方法、装置及系统 - Google Patents
一种双客户端语音通信方法、装置及系统 Download PDFInfo
- Publication number
- CN105719522A CN105719522A CN201610049133.7A CN201610049133A CN105719522A CN 105719522 A CN105719522 A CN 105719522A CN 201610049133 A CN201610049133 A CN 201610049133A CN 105719522 A CN105719522 A CN 105719522A
- Authority
- CN
- China
- Prior art keywords
- terminal
- speech message
- server
- augmented reality
- application program
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/08—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
- G09B5/14—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations with provision for individual teacher-student communication
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明实施例提供了一种双客户端语音通信方法、装置及系统,属于语音通信技术领域。所述方法包括:捕获实体物件上的增强现实信息,显示出与所述增强现实信息对应的增强现实内容,将第一语音消息发送给服务器,以使所述服务器将所述第一语音消息转发给与所述第一终端相绑定的第二终端;接收所述服务器发送的第二语音消息,所述第二语音消息由与所述第一终端相绑定的第二终端所发出,在预存的动作表情指令数据库中查找出与所述第二语音消息对应的动作表情指令;播放所述第二语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。本发明使得第一终端的界面更加生动形象,且增加了第一终端用户和第二终端用户之间沟通的便捷性和趣味性。
Description
技术领域
本发明涉及语音通信技术领域,具体而言,涉及一种双客户端语音通信方法、装置及系统。
背景技术
增强现实,是通过计算机系统提供的信息增加用户对现实世界感知的技术,将虚拟的信息应用到真实世界,并将计算机生成的虚拟物体、场景或系统提示信息叠加到真实场景中,从而实现对现实的增强,其具有三个突出的特点:真实世界和虚拟世界的信息集成;具有实时交互性;在三维尺度空间中增添定位虚拟物体。在儿童教育中,如何加强家长和儿童之间的沟通互动至关重要,目前早教类的儿童软件,大部分只具有早教相关功能,但是不具有和家长沟通互动的能力,同时由于儿童端和家长端的应用软体一致,不能同时满足儿童和家长双方各自的需求。
发明内容
本发明实施例的目的在于提供一种双客户端语音通信方法、装置及系统,旨在有效改善上述问题。
本发明实施例是这样实现的:
第一方面,本发明较佳实施例提供了一种双客户端语音通信方法,应用于第一终端,所述方法包括:
扫描预先制作的实体物件并捕获所述实体物件上的图像信息,其中,所述图像信息包括增强现实信息;
提取所述增强现实信息,根据图像处理算法对所述增强现实信息进行图像处理得到增强现实内容,并显示所述增强现实内容,其中,所述增强现实内容包括与所述实体物件相对应的三维虚拟画面;
采集第一语音消息并将所述第一语音消息发送给一服务器以使所述服务器将所述第一语音消息转发给所述第二终端,并执行预存的倾听语音动作表情指令以显示一对应的三维虚拟画面;
接收所述服务器发送的第二语音消息,所述第二语音消息由与所述第一终端相绑定的第二终端所发出,在预存的动作表情指令数据库中查找出与所述第二语音消息对应的动作表情指令;
播放所述第二语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
第二方面,本发明较佳实施例提供了一种双客户端语音通信方法,应用于服务器,所述方法包括:
接收由所述第一终端发送的第三语音消息,并将所述第三语音消息转发给与所述第一终端相绑定的第二终端;
接收所述第二终端发送的第四语音消息,并将所述第四语音消息转发给与所述第二终端相绑定的第一终端,以使所述第一终端根据所述第四语音消息的内容在预存的动作表情指令数据库中查找出与所述第四语音消息对应的动作表情指令,播放所述第四语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
结合第二方面,本发明较佳实施例提供了第二方面的第一种可能的实施方式,其中,所述服务器中预存有第一应用程序和第二应用程序,所述第一终端通过与所述第一应用程序对应的下载链接下载所述第一应用程序,所述第二终端通过与所述第二应用程序对应的下载链接下载所述第二应用程序。
第三方面,本发明较佳实施例提供了一种双客户端语音通信方法,所述方法包括:
第一终端扫描预先制作的实体物件,并捕获所述实体物件上的图像信息,其中,所述图像信息包括增强现实信息;
所述第一终端提取所述增强现实信息,根据图像处理算法对所述增强现实信息进行图像处理得到增强现实内容,并显示所述增强现实内容,其中,所述增强现实内容包括与所述实体物件相对应的三维虚拟画面;
所述第一终端采集第五语音消息并将所述第五语音消息发送给一服务器以使所述服务器将所述第五语音消息转发给所述第二终端,并执行预存的倾听语音动作表情指令以显示一对应的三维虚拟画面;
所述服务器接收由所述第一终端发送的第五语音消息,并将所述第五语音消息转发给与所述第一终端相绑定的所述第二终端;
所述第二终端接收由所述服务器发送的第五语音消息,并向所述服务器发送与所述第五语音消息相对应的第六语音消息;
所述服务器接收由所述第二终端发送的第六语音消息,并将所述第六语音消息转发给与所述第二终端相绑定的所述第一终端;
所述第一终端接收由所述服务器转发的第六语音消息,在预存的动作表情指令数据库中查找出与所述第六语音消息对应的动作表情指令,播放所述第六语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
结合第三方面,本发明较佳实施例提供了第三方面的第一种可能的实施方式,其中,所述服务器中预存有第一应用程序和第二应用程序,所述第一终端通过与所述第一应用程序对应的下载链接下载所述第一应用程序,所述第二终端通过与所述第二应用程序对应的下载链接下载所述第二应用程序。
第四方面,本发明较佳实施例提供了一种双客户端语音通信装置,应用于第一终端,所述装置包括:
第一扫描单元,用于扫描预先制作的实体物件;
第一图像信息捕获单元,用于捕获所述实体物件上的图像信息,其中,所述图像信息包括增强现实信息;
第一显示单元,用于提取所述增强现实信息,根据图像处理算法对所述增强现实信息进行图像处理得到增强现实内容,并显示所述增强现实内容,其中,所述增强现实内容包括与所述实体物件相对应的三维虚拟画面;
第一发送单元,用于采集第一语音消息并将所述第一语音消息发送给一服务器以使所述服务器将所述第一语音消息转发给所述第二终端,并执行预存的倾听语音动作表情指令以显示一对应的三维虚拟画面;
第一接收单元,用于接收所述服务器发送的第二语音消息,所述第二语音消息由与所述第一终端相绑定的第二终端所发出,同时在预存的动作表情指令数据库中查找出与所述第二语音消息对应的动作表情指令,播放所述第二语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
第五方面,本发明较佳实施例提供了一种双客户端语音通信装置,应用于服务器,所述装置包括:
第一转发单元,用于接收由所述第一终端发送的第三语音消息,并将所述第三语音消息转发给与所述第一终端相绑定的第二终端;
第二转发单元,用于接收所述第二终端发送的第四语音消息,并将所述第四语音消息转发给与所述第二终端相绑定的第一终端,以使所述第一终端根据所述第四语音消息的内容在预存的动作表情指令数据库中查找出与所述第四语音消息对应的动作表情指令,播放所述第四语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
结合第五方面,本发明较佳实施例提供了第五方面的第一种可能的实施方式,其中,所述服务器中预存有第一应用程序和第二应用程序,所述第一终端通过与所述第一应用程序对应的下载链接下载所述第一应用程序,所述第二终端通过与所述第二应用程序对应的下载链接下载所述第二应用程序。
第六方面,本发明较佳实施例提供了一种双客户端语音通信系统,所述系统包括第一终端、第二终端和服务器,其中,所述第一终端包括第二扫描单元、第二图像信息捕获单元、第二显示单元、第二发送单元和第三接收单元;所述第二终端包括第二接收单元和第三发送单元;所述服务器包括第三转发单元和第四转发单元;
所述第二扫描单元,用于扫描预先制作的实体物件;
所述第二图像信息捕获单元,用于捕获所述实体物件上的图像信息,其中,所述图像信息包括增强现实信息;
所述第二显示单元,用于提取所述增强现实信息,根据图像处理算法对所述增强现实信息进行图像处理得到增强现实内容,并显示所述增强现实内容,其中,所述增强现实内容包括与所述实体物件相对应的三维虚拟画面;
所述第二发送单元,用于采集第五语音消息并将所述第五语音消息发送给一服务器以使所述服务器将所述第五语音消息转发给所述第二终端,并执行预存的倾听语音动作表情指令以显示一对应的三维虚拟画面;
所述第三转发单元,用于接收由所述第一终端发送的第五语音消息,并将所述第五语音消息转发给与所述第一终端相绑定的所述第二终端;
所述第二接收单元,用于接收由所述服务器发送的第五语音消息;
所述第三发送单元,用于向所述服务器发送与所述第五语音消息相对应的第六语音消息;
所述第四转发单元,用于接收由所述第二终端发送的第六语音消息,并将所述第六语音消息转发给与所述第二终端相绑定的所述第一终端;
所述第三接收单元,用于接收由所述服务器转发的第六语音消息,在预存的动作表情指令数据库中查找出与所述第六语音消息对应的动作表情指令,播放所述第六语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
结合第六方面,本发明较佳实施例提供了第一方面的第一种可能的实施方式,其中,所述服务器中预存有第一应用程序和第二应用程序,所述第一终端通过与所述第一应用程序对应的下载链接下载所述第一应用程序,所述第二终端通过与所述第二应用程序对应的下载链接下载所述第二应用程序。
与现有技术相比,本发明实施例提供的一种双客户端语音通信方法、装置及系统,通过将增强现实技术融入进语音通信系统中,使得第一终端的界面更加生动形象、易于操作,并且增加了第一终端用户和第二终端用户之间沟通互动的能力,另一方面,在第一终端和第二终端采用的应用程序不同,这样能很好地满足第一终端用户和第二终端用户双方各自的需求。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本发明的某些实施例,因此不应该看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1为本发明实施例提供的一种双客户端语音通信方法及装置的应用环境示意图。
图2为本发明实施例提供的一种第一终端的工作流程图。
图3为本发明实施例提供的一种服务器的工作流程图。
图4为本发明实施例提供的一种双客户端语音通信方法的工作流程图。
图5为本发明实施例提供的一种第一终端的结构框图。
图6为本发明实施例提供的一种服务器的结构框图。
图7为本发明实施例提供的一种系统交互的结构框图。
主要元件符号说明:
第一终端100;第二终端200;服务器300;
第一扫描单元401;第一图像信息捕获单元402;第一显示单元403;第一发送单元404;第一接收单元405;
第一转发单元501;第二转发单元502;
第二扫描单元601;第二图像信息捕获单元602;第二显示单元603;第二发送单元604;第三转发单元605;第二接收单元606;第三发送单元607;第四转发单元608;第三接收单元609。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。同时,在本发明的描述中,术语“第一”、“第二”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
本发明实施例所提供的双客户端语音通信方法、装置及系统应用于如图1所示的应用环境中。如图1所示,服务器300和第一终端100、第二终端200可通过网络进行数据通信和交互。第一终端100和第二终端200用于将数据通过网络发送到服务器300,服务器300用于将数据进行转发。所述第一终端100、第二终端200与服务器300通信连接构成一儿童早教系统。
实施例1
如图2所示,本发明较佳实施例提供了一种双客户端语音通信方法,应用于第一终端100,所述方法包括:
S101:第一终端100扫描预先制作的实体物件,并捕获所述实体物件上的图像信息,其中,所述图像信息包括增强现实信息。
具体地,所述第一终端100优选为由儿童使用的手持终端(简称儿童终端),所述儿童终端从服务器300上下载与所述儿童终端对应的应用程序并进行本地安装之后,通过扫描激活二维码,在联网状态下将经过所述扫描特定的激活二维码获得的信息发送给服务器300,其中,所述服务器300中预存有激活二维码库,当所述服务器300根据所述激活二维码库验证得出所述激活二维码合法时,所述儿童终端才能进行应用程序的后续操作。
其中,增强现实技术,它是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术,是把原本在现实世界的一定时间空间范围内很难体验到的实体信息(视觉信息,声音,味道,触觉等)通过电脑等科学技术,模拟仿真后再叠加,将虚拟的信息应用到真实世界,被人类感官所感知,从而达到超越现实的感官体验。真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在。另一方面,增强现实技术,不仅展现了真实世界的信息,而且将虚拟的信息同时显示出来,两种信息相互补充、叠加。在视觉化的增强现实中,用户利用头盔显示器,把真实世界与电脑图形多重合成在一起,便可以看到真实的世界围绕着它。然而增强现实信息的获取对于增强现实技术的应用至关重要。
S102:提取所述增强现实信息,根据图像处理算法对所述增强现实信息进行图像处理得到增强现实内容,并显示所述增强现实内容,其中,所述增强现实内容包括与所述实体物件相对应的三维虚拟画面。
具体地,所述儿童终端通过自带的摄像头对预先制作的实体物件进行扫描,并捕获所述实体物件上的图像信息,所述图像信息包括增强现实信息,所述实体物件为多个,不同的实体物件对应着不同的增强现实信息。所述儿童终端提取所述增强现实信息并根据预先设定的图像处理算法对所述增强现实信息进行处理并获得与所述增强现实信息相对应的增强现实内容,所述增强现实内容优选包括三维虚拟画面。
S103:采集第一语音消息并将所述第一语音消息发送给一服务器300以使所述服务器300将所述第一语音消息转发给所述第二终端200,并执行预存的倾听语音动作表情指令以显示一对应的三维虚拟画面。
具体地,所述儿童用户操作所述第一终端100中的声音采集器进行语音消息采集,所述第一终端100将采集的语音消息进行模数转换并根据内置的语音处理算法对所述语音消息进行处理,所述处理包括编码、调制和加密等,接着将经过处理后的所述语音消息通过网络发送给服务器300。
为了提高儿童终端界面的趣味性和生动性,优选声音采集器进行语音消息的采集时,在所述第一终端100上执行预存的倾听语音动作表情指令,并在所述第一终端100上对倾听语音动作表情进行三维虚拟画面的显示。
另一方面,所述服务器300将经过处理后的所述语音消息转发给与所述第一终端100相绑定的第二终端200,优选所述第二终端200为由成人使用的手持终端(简称成人终端)。其中,所述成人终端与所述儿童终端绑定的方案优选为:所述儿童终端在开启所述应用程序时,会生成一个唯一的二维码,所述成人终端通过摄像头扫描所述二维码并向所述服务器300发送添加所述儿童终端为好友的请求,同时所述服务器300响应于所述请求而向所述儿童终端发送验证信息,当儿童端接收并同意所述请求时,所述成人终端将成功与所述儿童终端绑定。
S104:接收所述服务器300发送的第二语音消息,所述第二语音消息由与所述第一终端100相绑定的第二终端200所发出,同时在预存的动作表情指令数据库中查找出与所述第二语音消息对应的动作表情指令。
具体地,所述成人终端接收到所述儿童终端发送的语音消息时,会将自身发出的语音消息进行处理之后发送给服务器300,所述服务器300接收由成人终端发送的语音消息并将所述语音消息转发给与所述成人终端相绑定的儿童终端。另一方面,所述儿童终端在接收到所述语音消息后,会在预存的动作表情指令数据库中查找出与所述语音消息相对应的动作表情指令。
S105:播放所述第二语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
所述儿童终端通过解密、解调和数模转换之后对所述语音消息进行还原并播放,同时执行查找出的与所述语音消息相对应的动作表情指令以显示一对应的三维虚拟画面。
实施例2
如图3所示,本发明较佳实施例提供了一种双客户端语音通信方法,应用于服务器300,所述方法包括:
S201:服务器300接收由所述第一终端100发送的第三语音消息,并将所述第三语音消息转发给与所述第一终端100相绑定的第二终端200。
具体地,所述第一终端100将经过处理后的语音消息发送给所述服务器300之后,所述服务器300接收所述语音消息并在联网的状态下将所述第三语音消息推送至所述第二终端200,其中,所述第二终端200与所述第一终端100相绑定。
S202:接收所述第二终端200发送的第四语音消息,并将所述第四语音消息转发给与所述第二终端200相绑定的第一终端100,以使所述第一终端100根据所述第四语音消息的内容在预存的动作表情指令数据库中查找出与所述第四语音消息对应的动作表情指令,播放所述第四语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
具体地,所述第二终端200接收到所述第一终端100发送的语音消息之后,若进行回应则会将应答语音消息发送给服务器300,所述服务器300将所述应答语音消息转发给与所述第二终端200相绑定的第一终端100,所述第一终端100接收到所述应答语音消息后,根据所述应答语音消息的内容在预存的动作表情指令数据库中查找出与所述应答语音消息对应的动作表情指令,并对所述应答语音消息进行播放同时显示执行所述动作表情指令的三维虚拟画面。
进一步地,所述服务器300中预存有第一应用程序和第二应用程序,所述第一终端100用户通过与所述第一应用程序对应的下载链接下载所述第一应用程序,所述第二终端200用户通过与所述第二应用程序对应的下载链接下载所述第二应用程序。
具体地,在所述服务器300中预存有适用于儿童终端的第一应用程序和适用于成人终端的第二应用程序,所述儿童终端向所述服务器300发出下载所述第一应用程序的请求,所述服务器300接受所述请求之后向所述儿童终端提供下载链接,所述儿童终端根据所述下载链接进行所述第一应用程序的获取并完成本地安装,所述成人终端下载所述第二应用程序的步骤与所述儿童终端类似。其中,所述第一应用程序和所述第二应用程序的交互界面、录制和显示语音消息的方式不同,以满足儿童和家长双方各自的需求。
实施例3
如图4所示,本发明较佳实施例提供了一种双客户端语音通信方法,所述方法包括:
S301:第一终端100扫描预先制作的实体物件,并捕获所述实体物件上的图像信息,其中,所述图像信息包括增强现实信息。
具体地,所述第一终端100优选为儿童终端,所述儿童终端首先从服务器300上下载对应的应用程序并进行本地安装之后,通过扫描特定的激活二维码,在联网状态下将经过所述扫描特定的激活二维码获得的信息发送给服务器300,其中,所述服务器300中预存有激活二维码库,当所述服务器300根据所述激活二维码库验证所述激活二维码合法时,所述儿童终端才能进行应用程序的后续操作。
S302:所述第一终端100提取所述增强现实信息,根据图像处理算法对所述增强现实信息进行图像处理得到增强现实内容,并显示所述增强现实内容,其中,所述增强现实内容包括与所述实体物件相对应的三维虚拟画面。
具体地,所述儿童终端通过自带的摄像头对预先制作的实体物件进行扫描,并捕获所述实体物件上的图像信息,所述图像信息包括增强现实信息,所述实体物件为多个,不同的实体物件对应着不同的增强现实信息。同时所述儿童终端提取所述增强现实信息并根据预先设定的图像处理算法对所述增强现实信息进行处理并获得与所述增强现实信息相对应的增强现实内容,所述增强现实内容优选为三维虚拟画面。
S303:所述第一终端100采集第五语音消息并将所述第五语音消息发送给一服务器300以使所述服务器300将所述第五语音消息转发给所述第二终端200,并执行预存的倾听语音动作表情指令以显示一对应的三维虚拟画面第一终端100服务器300。
具体地,所述儿童用户对着所述第一终端100的声音采集器发出语音消息,则所述第一终端100将采集的语音消息进行模数转换并根据内置的语音处理算法对所述语音消息进行处理,所述处理包括编码、调制和加密等,接着将经过处理后的所述语音消息通过网络发送给服务器300,同时在所述第一终端100上执行预存的倾听语音动作表情指令,并在所述第一终端100上进行三维虚拟画面的显示。另一方面,所述服务器300将经过处理后的所述语音消息转发给与所述第一终端100相绑定的第二终端200,优选所述第二终端200为成人终端。其中,所述成人终端与所述儿童终端绑定的方案优选为:所述儿童终端在开启所述应用程序时,会生成一个唯一的二维码,所述成人终端通过摄像头扫描所述二维码并向所述服务器300发送添加所述儿童终端为好友的请求,同时所述服务器300响应于所述请求而向所述儿童终端发送验证信息,当儿童端接收所述请求时,所述成人终端将成功与所述儿童终端绑定。
S304:所述服务器300接收由所述第一终端100发送的第五语音消息,并将所述第五语音消息转发给与所述第一终端100相绑定的所述第二终端200。
S305:所述第二终端200接收由所述服务器300发送的第五语音消息,并向所述服务器300发送与所述第五语音消息相对应的第六语音消息。
S306:所述服务器300接收由所述第二终端200发送的第六语音消息,并将所述第六语音消息转发给与所述第二终端200相绑定的所述第一终端100。
S307:所述第一终端100接收由所述服务器300转发的第六语音消息,在预存的动作表情指令数据库中查找出与所述第六语音消息对应的动作表情指令,播放所述第六语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
进一步地,所述服务器300中预存有第一应用程序和第二应用程序,所述第一终端100通过与所述第一应用程序对应的下载链接下载所述第一应用程序,所述第二终端200通过与所述第二应用程序对应的下载链接下载所述第二应用程序。
实施例4
本发明实施例提供了一种双客户端语音通信的装置,其实现原理及产生的技术效果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。
请参阅图5,本发明较佳实施例提供了一种双客户端语音通信装置,应用于第一终端100,所述双客户端语音通信装置包括:第一扫描单元301,第一图像信息捕获单元302,第一显示单元303,第一发送单元304,第一接收单元305。
其中,第一扫描单元301,用于扫描预先制作的实体物件。第一图像信息捕获单元302,用于捕获所述实体物件上的图像信息,其中,所述图像信息包括增强现实信息。第一显示单元303,用于提取所述增强现实信息,根据图像处理算法对所述增强现实信息进行图像处理得到增强现实内容,并显示所述增强现实内容,其中,所述增强现实内容包括与所述实体物件相对应的三维虚拟画面。第一发送单元104,用于采集第一语音消息并将所述第一语音消息发送给一服务器300以使所述服务器300将所述第一语音消息转发给所述第二终端200,并执行预存的倾听语音动作表情指令以显示一对应的三维虚拟画面。第一接收单元305,用于接收所述服务器300发送的第二语音消息,所述第二语音消息由与所述第一终端100相绑定的第二终端200所发出,同时在预存的动作表情指令数据库中查找出与所述第二语音消息对应的动作表情指令,播放所述第二语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
实施例5
本发明实施例提供了一种双客户端语音通信的装置,其实现原理及产生的技术效果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。
请参阅图6,本发明较佳实施例提供了一种双客户端语音通信装置,应用于服务器300,所述装置包括:第一转发单元501和第二转发单元502。
其中,第一转发单元501,用于接收由所述第一终端100发送的第三语音消息,并将所述第三语音消息转发给与所述第一终端100相绑定的第二终端200。第二转发单元502,用于接收所述第二终端200发送的第四语音消息,并将所述第四语音消息转发给与所述第二终端200相绑定的第一终端100,以使所述第一终端100根据所述第四语音消息的内容在预存的动作表情指令数据库中查找出与所述第四语音消息对应的动作表情指令,播放所述第四语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
进一步地,所述服务器300中预存有第一应用程序和第二应用程序,所述第一终端100用户通过与所述第一应用程序对应的下载链接下载所述第一应用程序,所述第二终端200用户通过与所述第二应用程序对应的下载链接下载所述第二应用程序。
实施例6
请参阅图7,本发明较佳实施例提供了一种双客户端语音通信系统,所述系统包括第一终端100、第二终端200和服务器300,其中,所述第一终端100包括第二扫描单元601、第二图像信息捕获单元602、第二显示单元603、第二发送单元604和第三接收单元609;所述第二终端200包括第二接收单元606和第三发送单元607;所述服务器300包括第三转发单元605和第四转发单元608。
第二扫描单元601,用于扫描预先制作的实体物件。第二图像信息捕获单元602,用于捕获所述实体物件上的图像信息,其中,所述图像信息包括增强现实信息。第二显示单元603,用于提取所述增强现实信息,根据图像处理算法对所述增强现实信息进行图像处理得到增强现实内容,并显示所述增强现实内容,其中,所述增强现实内容包括与所述实体物件相对应的三维虚拟画面。第二发送单元604,用于采集第五语音消息并将所述第五语音消息发送给一服务器300以使所述服务器300将所述第五语音消息转发给所述第二终端200,并执行预存的倾听语音动作表情指令以显示一对应的三维虚拟画面第一终端100服务器300。第三转发单元605,用于接收由所述第一终端100发送的第五语音消息,并将所述第五语音消息转发给与所述第一终端100相绑定的所述第二终端200。第二接收单元606,用于接收由所述服务器300发送的第五语音消息。第三发送单元607,用于向所述服务器300发送与所述第五语音消息相对应的第六语音消息。第四转发单元608,用于接收由所述第二终端200发送的第六语音消息,并将所述第六语音消息转发给与所述第二终端200相绑定的所述第一终端100。第三接收单元609,用于接收由所述服务器300转发的第六语音消息,在预存的动作表情指令数据库中查找出与所述第六语音消息对应的动作表情指令,播放所述第六语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
其中,所述第二扫描单元601、所述第二图像信息捕获单元602、所述第二显示单元603、所述第二发送单元604和所述第三接收单元609仅仅包含于所述第一终端100中;所述第二接收单元606和所述第三发送单元607仅仅包含于所述第二终端200中;所述第三转发单元605和所述第四转发单元608仅仅包含于所述服务器300中。
进一步地,所述服务器300中预存有第一应用程序和第二应用程序,所述第一终端100用户通过与所述第一应用程序对应的下载链接下载所述第一应用程序,所述第二终端200用户通过与所述第二应用程序对应的下载链接下载所述第二应用程序。
本发明较佳实施例提供的一种双客户端语音通信方法及其装置,通过将增强现实技术融入进语音通信系统中,使得儿童端的界面更加生动形象、易于操作,并且增加了家长和儿童之间沟通互动的能力,另一方面,在家长端和儿童端采用的应用程序不同,这样能很好地满足儿童和家长双方各自的需求。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本发明的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
另外,在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或两个以上模块集成形成一个独立的部分。
所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,RandomAccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。
Claims (10)
1.一种双客户端语音通信方法,应用于第一终端,其特征在于,所述方法包括:
扫描预先制作的实体物件并捕获所述实体物件上的图像信息,其中,所述图像信息包括增强现实信息;
提取所述增强现实信息,根据图像处理算法对所述增强现实信息进行图像处理得到增强现实内容,并显示所述增强现实内容,其中,所述增强现实内容包括与所述实体物件相对应的三维虚拟画面;
采集第一语音消息并将所述第一语音消息发送给一服务器以使所述服务器将所述第一语音消息转发给所述第二终端,并执行预存的倾听语音动作表情指令以显示一对应的三维虚拟画面;
接收所述服务器发送的第二语音消息,所述第二语音消息由与所述第一终端相绑定的第二终端所发出,在预存的动作表情指令数据库中查找出与所述第二语音消息对应的动作表情指令;
播放所述第二语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
2.一种双客户端语音通信方法,应用于服务器,其特征在于,所述方法包括:
接收由所述第一终端发送的第三语音消息,并将所述第三语音消息转发给与所述第一终端相绑定的第二终端;
接收所述第二终端发送的第四语音消息,并将所述第四语音消息转发给与所述第二终端相绑定的第一终端,以使所述第一终端根据所述第四语音消息的内容在预存的动作表情指令数据库中查找出与所述第四语音消息对应的动作表情指令,播放所述第四语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
3.根据权利要求2所述的双客户端语音通信方法,其特征在于,
所述服务器中预存有第一应用程序和第二应用程序,所述第一终端通过与所述第一应用程序对应的下载链接下载所述第一应用程序,所述第二终端通过与所述第二应用程序对应的下载链接下载所述第二应用程序。
4.一种双客户端语音通信方法,其特征在于,所述方法包括:
第一终端扫描预先制作的实体物件,并捕获所述实体物件上的图像信息,其中,所述图像信息包括增强现实信息;
所述第一终端提取所述增强现实信息,根据图像处理算法对所述增强现实信息进行图像处理得到增强现实内容,并显示所述增强现实内容,其中,所述增强现实内容包括与所述实体物件相对应的三维虚拟画面;
所述第一终端采集第五语音消息并将所述第五语音消息发送给一服务器以使所述服务器将所述第五语音消息转发给所述第二终端,并执行预存的倾听语音动作表情指令以显示一对应的三维虚拟画面;
所述服务器接收由所述第一终端发送的第五语音消息,并将所述第五语音消息转发给与所述第一终端相绑定的所述第二终端;
所述第二终端接收由所述服务器发送的第五语音消息,并向所述服务器发送与所述第五语音消息相对应的第六语音消息;
所述服务器接收由所述第二终端发送的第六语音消息,并将所述第六语音消息转发给与所述第二终端相绑定的所述第一终端;
所述第一终端接收由所述服务器转发的第六语音消息,在预存的动作表情指令数据库中查找出与所述第六语音消息对应的动作表情指令,播放所述第六语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
5.根据权利要求4所述的双客户端语音通信方法,其特征在于,所述方法还包括:
所述服务器中预存有第一应用程序和第二应用程序,所述第一终端通过与所述第一应用程序对应的下载链接下载所述第一应用程序,所述第二终端通过与所述第二应用程序对应的下载链接下载所述第二应用程序。
6.一种双客户端语音通信装置,应用于第一终端,其特征在于,所述装置包括:
第一扫描单元,用于扫描预先制作的实体物件;
第一图像信息捕获单元,用于捕获所述实体物件上的图像信息,其中,所述图像信息包括增强现实信息;
第一显示单元,用于提取所述增强现实信息,根据图像处理算法对所述增强现实信息进行图像处理得到增强现实内容,并显示所述增强现实内容,其中,所述增强现实内容包括与所述实体物件相对应的三维虚拟画面;
第一发送单元,用于采集第一语音消息并将所述第一语音消息发送给一服务器以使所述服务器将所述第一语音消息转发给所述第二终端,并执行预存的倾听语音动作表情指令以显示一对应的三维虚拟画面;
第一接收单元,用于接收所述服务器发送的第二语音消息,所述第二语音消息由与所述第一终端相绑定的第二终端所发出,同时在预存的动作表情指令数据库中查找出与所述第二语音消息对应的动作表情指令,播放所述第二语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
7.一种双客户端语音通信装置,应用于服务器,其特征在于,所述装置包括:
第一转发单元,用于接收由所述第一终端发送的第三语音消息,并将所述第三语音消息转发给与所述第一终端相绑定的第二终端;
第二转发单元,用于接收所述第二终端发送的第四语音消息,并将所述第四语音消息转发给与所述第二终端相绑定的第一终端,以使所述第一终端根据所述第四语音消息的内容在预存的动作表情指令数据库中查找出与所述第四语音消息对应的动作表情指令,播放所述第四语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
8.根据权利要求7所述的双客户端语音通信装置,其特征在于,
所述服务器中预存有第一应用程序和第二应用程序,所述第一终端通过与所述第一应用程序对应的下载链接下载所述第一应用程序,所述第二终端通过与所述第二应用程序对应的下载链接下载所述第二应用程序。
9.一种双客户端语音通信系统,其特征在于,所述系统包括第一终端、第二终端和服务器,其中,所述第一终端包括第二扫描单元、第二图像信息捕获单元、第二显示单元、第二发送单元和第三接收单元;所述第二终端包括第二接收单元和第三发送单元;所述服务器包括第三转发单元和第四转发单元;
所述第二扫描单元,用于扫描预先制作的实体物件;
所述第二图像信息捕获单元,用于捕获所述实体物件上的图像信息,其中,所述图像信息包括增强现实信息;
所述第二显示单元,用于提取所述增强现实信息,根据图像处理算法对所述增强现实信息进行图像处理得到增强现实内容,并显示所述增强现实内容,其中,所述增强现实内容包括与所述实体物件相对应的三维虚拟画面;
所述第二发送单元,用于采集第五语音消息并将所述第五语音消息发送给一服务器以使所述服务器将所述第五语音消息转发给所述第二终端,并执行预存的倾听语音动作表情指令以显示一对应的三维虚拟画面;
所述第三转发单元,用于接收由所述第一终端发送的第五语音消息,并将所述第五语音消息转发给与所述第一终端相绑定的所述第二终端;
所述第二接收单元,用于接收由所述服务器发送的第五语音消息;
所述第三发送单元,用于向所述服务器发送与所述第五语音消息相对应的第六语音消息;
所述第四转发单元,用于接收由所述第二终端发送的第六语音消息,并将所述第六语音消息转发给与所述第二终端相绑定的所述第一终端;
所述第三接收单元,用于接收由所述服务器转发的第六语音消息,在预存的动作表情指令数据库中查找出与所述第六语音消息对应的动作表情指令,播放所述第六语音消息并执行所述动作表情指令以显示一对应的三维虚拟画面。
10.根据权利要求9所述的双客户端语音通信装置,其特征在于,
所述服务器中预存有第一应用程序和第二应用程序,所述第一终端通过与所述第一应用程序对应的下载链接下载所述第一应用程序,所述第二终端通过与所述第二应用程序对应的下载链接下载所述第二应用程序。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610049133.7A CN105719522A (zh) | 2016-01-25 | 2016-01-25 | 一种双客户端语音通信方法、装置及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610049133.7A CN105719522A (zh) | 2016-01-25 | 2016-01-25 | 一种双客户端语音通信方法、装置及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105719522A true CN105719522A (zh) | 2016-06-29 |
Family
ID=56154107
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610049133.7A Pending CN105719522A (zh) | 2016-01-25 | 2016-01-25 | 一种双客户端语音通信方法、装置及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105719522A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106803921A (zh) * | 2017-03-20 | 2017-06-06 | 深圳市丰巨泰科电子有限公司 | 基于ar技术的即时音视频通信方法及装置 |
CN112947901A (zh) * | 2019-12-11 | 2021-06-11 | 中华电信股份有限公司 | 扩增实境的内容控制系统、方法及计算机存储介质 |
CN115802066A (zh) * | 2022-09-30 | 2023-03-14 | 天翼数字生活科技有限公司 | 一种基于网关的流媒体拉流方法及装置 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101551732A (zh) * | 2009-03-24 | 2009-10-07 | 上海水晶石信息技术有限公司 | 带有交互功能的增强现实的方法及其系统 |
CN101923791A (zh) * | 2010-05-31 | 2010-12-22 | 华中师范大学 | 一种利用增强现实技术与平面读物相结合的汉字学习方法 |
CN102509484A (zh) * | 2011-10-13 | 2012-06-20 | 苏州梦想人软件科技有限公司 | 一种基于增强现实技术的学习系统及其学习方法 |
CN103035135A (zh) * | 2012-11-27 | 2013-04-10 | 北京航空航天大学 | 基于增强现实技术的儿童认知系统及认知方法 |
US20130329000A1 (en) * | 2012-06-11 | 2013-12-12 | Gamil A. Cain | Providing spontaneous connection and interaction between local and remote interaction devices |
EP2731348A2 (en) * | 2012-11-13 | 2014-05-14 | Samsung Electronics Co., Ltd | Apparatus and method for providing social network service using augmented reality |
CN103797761A (zh) * | 2013-08-22 | 2014-05-14 | 华为技术有限公司 | 通信方法、客户端和终端 |
CN104575132A (zh) * | 2015-01-14 | 2015-04-29 | 蝶恋花动漫(天津)有限公司 | 基于自然图像识别与增强现实技术的互动教育方法和系统 |
CN104575130A (zh) * | 2014-11-07 | 2015-04-29 | 马振轩 | 增强现实技术的多图组合识别动画教育应用系统 |
CN204425391U (zh) * | 2014-12-11 | 2015-06-24 | 上海元趣信息技术有限公司 | 互动系统及客户端 |
CN105069754A (zh) * | 2015-08-05 | 2015-11-18 | 意科赛特数码科技(江苏)有限公司 | 基于在图像上无标记增强现实的系统和方法 |
-
2016
- 2016-01-25 CN CN201610049133.7A patent/CN105719522A/zh active Pending
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101551732A (zh) * | 2009-03-24 | 2009-10-07 | 上海水晶石信息技术有限公司 | 带有交互功能的增强现实的方法及其系统 |
CN101923791A (zh) * | 2010-05-31 | 2010-12-22 | 华中师范大学 | 一种利用增强现实技术与平面读物相结合的汉字学习方法 |
CN102509484A (zh) * | 2011-10-13 | 2012-06-20 | 苏州梦想人软件科技有限公司 | 一种基于增强现实技术的学习系统及其学习方法 |
US20130329000A1 (en) * | 2012-06-11 | 2013-12-12 | Gamil A. Cain | Providing spontaneous connection and interaction between local and remote interaction devices |
EP2731348A2 (en) * | 2012-11-13 | 2014-05-14 | Samsung Electronics Co., Ltd | Apparatus and method for providing social network service using augmented reality |
EP2731348A3 (en) * | 2012-11-13 | 2014-06-25 | Samsung Electronics Co., Ltd | Apparatus and method for providing social network service using augmented reality |
CN103035135A (zh) * | 2012-11-27 | 2013-04-10 | 北京航空航天大学 | 基于增强现实技术的儿童认知系统及认知方法 |
CN103797761A (zh) * | 2013-08-22 | 2014-05-14 | 华为技术有限公司 | 通信方法、客户端和终端 |
CN104575130A (zh) * | 2014-11-07 | 2015-04-29 | 马振轩 | 增强现实技术的多图组合识别动画教育应用系统 |
CN204425391U (zh) * | 2014-12-11 | 2015-06-24 | 上海元趣信息技术有限公司 | 互动系统及客户端 |
CN104575132A (zh) * | 2015-01-14 | 2015-04-29 | 蝶恋花动漫(天津)有限公司 | 基于自然图像识别与增强现实技术的互动教育方法和系统 |
CN105069754A (zh) * | 2015-08-05 | 2015-11-18 | 意科赛特数码科技(江苏)有限公司 | 基于在图像上无标记增强现实的系统和方法 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106803921A (zh) * | 2017-03-20 | 2017-06-06 | 深圳市丰巨泰科电子有限公司 | 基于ar技术的即时音视频通信方法及装置 |
CN112947901A (zh) * | 2019-12-11 | 2021-06-11 | 中华电信股份有限公司 | 扩增实境的内容控制系统、方法及计算机存储介质 |
CN115802066A (zh) * | 2022-09-30 | 2023-03-14 | 天翼数字生活科技有限公司 | 一种基于网关的流媒体拉流方法及装置 |
CN115802066B (zh) * | 2022-09-30 | 2024-03-08 | 天翼数字生活科技有限公司 | 一种基于网关的流媒体拉流方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110570698B (zh) | 一种在线教学控制方法、装置、存储介质以及终端 | |
CN105808056B (zh) | 一种基于二维码的媒体互动方法和系统 | |
KR102488530B1 (ko) | 동영상을 생성하기 위한 방법 및 장치 | |
CN105468142A (zh) | 基于增强现实技术的互动方法、系统和终端 | |
CN108322832B (zh) | 评论方法、装置、及电子设备 | |
CN104035953B (zh) | 用于跨不同装置的无缝内容导航的方法和系统 | |
CN106060662A (zh) | 通过弹幕建立社交关系的方法及装置 | |
JP2022500795A (ja) | アバターアニメーション | |
CN105719522A (zh) | 一种双客户端语音通信方法、装置及系统 | |
CN110516749A (zh) | 模型训练方法、视频处理方法、装置、介质和计算设备 | |
CN109862381A (zh) | 基于动态视频海报的推广方法、系统、装置和存储介质 | |
CN105117608A (zh) | 信息交互方法及装置 | |
CN104837065B (zh) | 电视终端与移动终端间的二维码信息共享方法及系统 | |
CN104270681B (zh) | 视频信息播放方法和装置 | |
CN105739690A (zh) | 一种双客户端控制方法、装置及系统 | |
CN105812813B (zh) | 一种授课视频压缩、播放方法及压缩、播放装置 | |
CN106792237A (zh) | 一种消息显示方法和系统 | |
JP6367748B2 (ja) | 認識装置、映像コンテンツ提示システム | |
JP6567461B2 (ja) | 認識装置、映像コンテンツ提示システム、プログラム | |
CN113018855B (zh) | 一种虚拟角色的动作切换方法和装置 | |
CN104021183A (zh) | 多设备交互方法及多设备交互系统 | |
JP2013232904A (ja) | 画像処理装置、画像処理プログラム及び画像処理方法 | |
CN106375825A (zh) | 一种图片生成处理方法、图片显示处理方法和装置 | |
JP5289527B2 (ja) | 画像処理装置、画像処理プログラム及び画像処理方法 | |
CN111221452B (zh) | 方案讲解控制方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20160629 |