CN108257218A - 信息交互控制方法、装置及设备 - Google Patents

信息交互控制方法、装置及设备 Download PDF

Info

Publication number
CN108257218A
CN108257218A CN201810043829.8A CN201810043829A CN108257218A CN 108257218 A CN108257218 A CN 108257218A CN 201810043829 A CN201810043829 A CN 201810043829A CN 108257218 A CN108257218 A CN 108257218A
Authority
CN
China
Prior art keywords
information
virtual
consulted
scene
voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810043829.8A
Other languages
English (en)
Inventor
孟兆旭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Net Letter Cloud Suit Mdt Infotech Ltd
Original Assignee
Beijing Net Letter Cloud Suit Mdt Infotech Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Net Letter Cloud Suit Mdt Infotech Ltd filed Critical Beijing Net Letter Cloud Suit Mdt Infotech Ltd
Priority to CN201810043829.8A priority Critical patent/CN108257218A/zh
Publication of CN108257218A publication Critical patent/CN108257218A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/01Customer relationship services

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Development Economics (AREA)
  • Marketing (AREA)
  • Computer Hardware Design (AREA)
  • Accounting & Taxation (AREA)
  • Computer Graphics (AREA)
  • Economics (AREA)
  • Finance (AREA)
  • Software Systems (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明实施例提供了一种信息交互控制方法、装置及终端,通过渲染被咨询对象的虚拟人物以及虚拟咨询场景,并利用采集到的真实环境信息,确定虚拟人物在虚拟咨询场景中的属性,如显示状态和/或显示位置等,从而在咨询对象终端显示屏上呈现出包含有虚拟被咨询对象的虚拟咨询场景,且该虚拟咨询场景内容与当前真实环境融为一体,给用户良好的视觉感受,之后,用户可以通过语音方式实现与该虚拟被咨询对象的交互,快速得到咨询结果,相对于文字回复方式,大大提高了咨询效率。

Description

信息交互控制方法、装置及设备
技术领域
本发明涉及通信技术领域,具体涉及一种信息交互控制方法、装置及计算设备。
背景技术
随着移动智能终端的广泛应用,移动终端正向功能增强化、多模化、定制化、平台开放化的方向发展,而针对手机等移动终端的应用程序服务即移动APP(APPlication),作为SNS(Social Networking Services,社交网络服务)新的开拓渠道,已在逐渐占领如金融、电商、游戏等各大行业市场。
以互联网金融类的APP为例,如今,用户使用手机等终端上安装的APP就能够实现在线投资理财,而且,当用户遇到问题,可以在线直接咨询客服,以便在客服解答、引导下完成投资理财操作,非常方便。
然而,目前市场上的客服服务中,通常是以文字方式回复用户问题,回复速度比较慢,往往也会出现用户无法理解客服回复内容,需要多次提问才能完成一次投资操作,降低了用户咨询效率。
发明内容
有鉴于此,本发明实施例提供一种信息交互控制方法、装置及终端,实现了与虚拟咨询场景中的虚拟被咨询对象的语音咨询交互,营造一种面对面咨询的气氛,提高了用户咨询效率。
为实现上述目的,本发明实施例提供如下技术方案:
本发明实施例提供了一种信息交互控制方法,所述方法包括:
接收到咨询请求,获取终端所在场景的真实环境信息;
利用所述真实环境信息,以及预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息,渲染并呈现包含有虚拟被咨询对象的虚拟咨询场景;
通过语音方式实现与所述虚拟被咨询对象的数据交互。
可选的,所述利用所述真实环境信息,以及预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息,渲染并呈现包含有虚拟被咨询对象的虚拟咨询场景,包括:
识别所述真实环境信息中的至少一个拍摄对象以及对应的当前拍摄属性信息;
调取预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息;
利用识别出的至少一个拍摄对象以及对应的当前拍摄属性信息,渲染被咨询对象的虚拟人物信息和虚拟咨询场景信息;
在当前界面呈现得到的包含有虚拟被咨询对象的虚拟咨询场景。
可选的,所述方法还包括:
追踪所述真实环境信息的变化信息;
利用所述变化信息,调整所述虚拟咨询场景中虚拟被咨询对象的显然状态或显示位置。
可选的,所述通过语音方式实现与所述虚拟被咨询对象的数据交互,包括:
采集咨询对象输出的语音咨询信息,并将所述语音咨询信息上传到服务器;
接收所述服务器反馈的解答信息,所述解答信息是所述服务器利用人工智能技术得到的;
控制所述虚拟被咨询对象通过语音方式输出所述解答信息。
可选的,所述将所述语音咨询信息上传到服务器,包括:
解析所述语音咨询信息,将得到的语音解析文件上传至服务器。
本发明实施例还提供了一种信息交互控制装置,所述装置包括:
信息获取模块,用于接收到咨询请求,获取终端所在场景的真实环境信息;
渲染模块,用于利用所述真实环境信息,以及预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息,渲染并呈现包含有虚拟被咨询对象的虚拟咨询场景;
语音交互模块,用于通过语音方式实现与所述虚拟被咨询对象的数据交互。
可选的,所述渲染模块包括:
识别单元,用于识别所述真实环境信息中的至少一个拍摄对象以及对应的当前拍摄属性信息;
信息调取单元,用于调取预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息;
渲染单元,用于利用识别出的至少一个拍摄对象以及对应的当前拍摄属性信息,渲染被咨询对象的虚拟人物信息和虚拟咨询场景信息;
呈现单元,用于在当前界面呈现得到的包含有虚拟被咨询对象的虚拟咨询场景。
可选的,所述装置还包括:
追踪模块,用于追踪所述真实环境信息的变化信息;
调整模块,用于利用所述变化信息,调整所述虚拟咨询场景中虚拟被咨询对象的显然状态或显示位置。
可选的,所述语音交互模块包括:
语音采集单元,用于采集咨询对象输出的语音咨询信息,并将所述语音咨询信息上传到服务器;
信息接收单元,用于接收所述服务器反馈的解答信息,所述解答信息是所述服务器利用人工智能技术得到的;
控制单元,用于控制所述虚拟被咨询对象通过语音方式输出所述解答信息。
本发明实施例还提供了一种终端,所述终端包括:
通信接口;显示器;
图像采集设备,用于采集终端所处场景的真实环境信息;
语音采集与播放设备;
存储器,用于存储实现如上所述的信息交互控制方法的程序,以及预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息;
处理器,用于加载并执行所述存储器存储的程序,包括:
接收到咨询请求,获取终端所在场景的真实环境信息;
利用所述真实环境信息,以及预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息,渲染并呈现包含有虚拟被咨询对象的虚拟咨询场景;
通过语音方式实现与所述虚拟被咨询对象的数据交互。
基于上述技术方案,本发明实施例提供了一种信息交互控制方法、装置及终端,通过渲染被咨询对象的虚拟人物以及虚拟咨询场景,并利用采集到的真实环境信息,确定虚拟人物在虚拟咨询场景中的属性,如显示状态和/或显示位置等,从而在咨询对象终端显示屏上呈现出包含有虚拟被咨询对象的虚拟咨询场景,且该虚拟咨询场景内容与当前真实环境融为一体,给用户良好的视觉感受,之后,用户可以通过语音方式实现与该虚拟被咨询对象的交互,快速得到咨询结果,相对于文字回复方式,大大提高了咨询效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的一种终端的硬件结构框图;
图2为本发明实施例提供的一种信息交互控制方法的流程图;
图3为本发明实施例提供的另一种信息交互控制方法的流程图;
图4为本发明实施例提供的一种虚拟咨询场景示意图;
图5为本发明实施例提供的一种信息交互控制装置的结构图;
图6为本发明实施例提供的另一种信息交互控制装置的结构图;
图7为本发明实施例提供的又一种信息交互控制装置的结构图;
图8为本发明实施例提供的又一种信息交互控制装置的结构图;
图9为本发明实施例提供的一种信息交互控制系统的结构图。
具体实施方式
基于此,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明实施例提供的信息交互控制方法可以应用于具有数据处理能力的终端,该终端可以是用户侧设置的PC(个人计算机)等终端设备;该终端可以通过装载功能与本发明实施例提供的信息交互控制方法相应的程序,实施本发明实施例提供的信息交互控制方法,该程序可以存储于计算设备的存储器中,并由处理器调用实现程序功能;
可选的,图1示出了本发明实施例提供的终端的硬件结构框图,参照图1,该终端可以包括:通信接口10,显示器20、图像采集设备30、语音采集与播放设备40、存储器50和处理器60;
在本发明实施例中,通信接口10,图像采集设备30、存储器40和处理器50的数量为至少一个,且通信接口10,显示器20、图像采集设备30、语音采集与播放设备40、存储器50和处理器60可以通过通信总线完成相互间的通信;
可选的,通信接口10可以为通信模块的接口,如GSM模块的接口、WIFI模块的接口等,本发明实施例对此不做限定;
显示器20可以包括触摸显示屏或非触摸显示屏,用来呈现宣传的虚拟咨询场景以及虚拟被咨询对象等。
图像采集设备30可以是摄像头,用来采集终端所处场景下的真实环境信息,当然,其可以是独立的设备,此时该终端可以不包括该图像采集设备或不启动图像采集设备,利用独立的的图像采集设备进行真实环境信息的采集,本发明实施例对真实环境信息的采集方式不作限定。
语音采集与播放设备40可以是麦克风,但并不局限于此。
处理器60可能是一个中央处理器CPU,或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit),或者是被配置成实施本发明实施例的一个或多个集成电路。
存储器50可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatilememory),例如至少一个磁盘存储器。
其中,存储器50存储有程序,处理器60调用存储器50所存储的程序可以实现本发明实施例提供的信息交互控制方法。
显然,图1所示终端的硬件结构仅是可选的,根据使用需要,还可以设置信息输入装置(键盘、鼠标等)、图形处理器等。
下面站在计算设备的角度,对本发明实施例提供的信息交互控制方法进行介绍,下文描述的方法步骤可以由计算设备执行相应的程序实施。
如图2所示,为本发明实施例提供的信息交互控制方法的流程图,该方法可以包括:
步骤S201,接收到咨询请求,获取终端所在场景的真实环境信息;
在本发明实施例中,以用户在某金融类客户端上进行投资为例,当用户遇到某些问题,希望与该客户端所属企业的客服进行咨询,通常可以在该客户端操作界面中,点击客服按钮,从而进入咨询界面,并在该咨询界面输入咨询问题,客服将会针对该咨询问题反馈相应的回复内容,帮助用户完成投资。
因此,上述咨询请求可以是用户点击客服按钮时生成的,用于指示客户端进入相应的咨询界面,并且,为了能够实现真实环境信息与虚拟世界的结合,本发明实施例此时可以触发图像采集设备进入工作状态,采集用户所在场景的真实环境信息。
可选的,终端接收到咨询请求时,才触发图像采集设备对所处场景的真实环境信息进行采集;或者,在用户触发终端生成咨询请求之前,可以先启动图像采集设备进行真实环境信息的采集,当接收到咨询请求时,再获取图像采集设备此时采集到的真实环境信息,这种是实现方式均适用于本发明实施例,但并不局限于这两种是是实现方法。
其中,图像采集设备可以是终端上的摄像头,也可以是其他独立设备,本发明实施例对此不作限定。
步骤S202,利用该真实环境信息,以及预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息,渲染并呈现包含有虚拟被咨询对象的虚拟咨询场景;
在本发明实施例中,希望能够以用户在真实环境中的拍摄视角变化、拍摄近景或远景的变化等拍摄属性变化信息,调整预设的被咨询对象的虚拟人物与虚拟咨询场景的位置关系,以及在终端显示屏上呈现的视角或场景大小的变化。
基于此,本发明实施例获取用户所在场景的真实环境信息后,可以识别其包含的至少一个拍摄对象,并确定每一个拍摄对象的当前拍摄属性信息,比如拍摄视角、近景拍摄或远景拍摄等,本发明对该拍摄对象的拍摄属性信息的内容不作限定,可以根据需要预先自定义设定需要提取的拍摄属性信息,也可以选择默认设置,本发明实施例对此不作限定。
可选的,本发明实施例还可以追踪该真实环境信息是否发生变化,若发生变化后,获取真实环境信息的变化信息,从而利用变化信息,动态调整被咨询对象的虚拟人物在虚拟咨询场景的属性,如显示状态或显示位置等。
步骤S203,通过语音方式实现与所述虚拟被咨询对象的数据交互。
在本发明实施例中,咨询对象(即用户)可以采用语音方式实现与虚拟被咨询对象之间的交互,提高了用户视听感受,对于用户提出问题即语音咨询信息,具体语音交互方式不作限定。
综上所述,本发明实施例通过渲染被咨询对象的虚拟人物以及虚拟咨询场景,并利用采集到的真实环境信息,确定虚拟人物在虚拟咨询场景中的属性,如显示状态和/或显示位置等,从而在咨询对象终端显示屏上呈现出包含有虚拟被咨询对象的虚拟咨询场景,且该虚拟咨询场景内容与当前真实环境融为一体,给用户良好的视觉感受,之后,用户可以通过语音方式实现与该虚拟被咨询对象的交互,快速得到咨询结果,相对于文字回复方式,大大提高了咨询效率。
如图3所示,为本发明实施例提供的另一种信息交互控制方法的流程图,该方法可以包括:
步骤S301,接收到咨询请求,获取终端所在场景的真实环境信息;
步骤S302,调取预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息;
本发明实施例可以利用虚拟现场技术,预先渲染三维的虚拟咨询场景以及被咨询对象的虚拟人物,并设计虚拟人物在该虚拟咨询场景中的多种动作效果,生成一个虚拟咨询场景文件导入终端中的客户端内容,这样,当用户在客户端上进行咨询时,可以直接调取所需的信息,完成三维虚拟咨询场景的展示。
需要说明,本发明实施例对预设的被咨询对象的虚拟人物形象以及虚拟场景均不作限定,且可以预设多个,由用户选择一种虚拟人物形象以及虚拟场景,还可以对获取的虚拟人物形象以及虚拟场景进行自定义修改,具体实现方法本实施例不作详述。
步骤S303,识别该真实环境信息中的至少一个拍摄对象以及对应的当前拍摄属性信息;
在本发明实施例中,为了使呈现的虚拟咨询场景与当前真实环境融为一体,可以根据真实环境中的拍摄对象,确定虚拟咨询场景的内容,以及虚拟被咨询对象在虚拟咨询场景中的动作,还可以根据拍摄对象的当前拍摄属性信息,确定呈现的虚拟被咨询对象的视角等等,给用户一种面对面交流的感觉。
需要说明,本发明实施例对如何识别真实环境信息中的至少一个拍摄对象以及对应的当前拍摄属性信息的方法不作限定。
可选的,在实际应用中,当图像采集设备位置发生变动时,能够识别出的拍摄对象可能会有所变化,且识别对象的当前拍摄属性信息也会相应改变,此时,希望利用变化后的拍摄对象及其变化后的拍摄属性信息,动态调整被咨询对象的虚拟人物在虚拟咨询场景的属性,如显示状态和/或显示位置等,从而使选择的虚拟咨询场景能够与用户所处真实环境结合,给用户更好体验。
举例说明:若从真实环境信息中识别出了桌椅,那么,虚拟咨询场景中的虚拟被咨询对象可以坐在椅子上,且该虚拟咨询场景中的桌子上还可以放着虚拟被咨询对象的电脑、茶杯等,与咨询对象进行交互。进一步地,若图像采集设备移动一段距离或拍摄视角变为椅子后面,将会使得实时采集的真实环境信息发生变化,终端识别出改变后,可以调整虚拟咨询场景中虚拟被咨询对象的显示角度,即呈现虚拟被咨询对象背部画面等等,本发明实施例在此不再一一举例。
步骤S304,利用识别出的至少一个拍摄对象以及对应的当前拍摄属性信息,渲染被咨询对象的虚拟人物信息和虚拟咨询场景信息;
步骤S305,在当前界面呈现得到的包含有虚拟被咨询对象的虚拟咨询场景;
步骤S306,采集咨询对象输出的语音咨询信息,并将该语音咨询信息上传到服务器;
在终端呈现虚拟咨询场景后,用户可以直接说出咨询问题,语音采集器得到相应的语音信号后,可以先对其进行解析,生成相应的语音解析文件,再上传服务器,以便服务器反馈对应的解答内容。本发明实施例对语音信号的解析方式不作限定。
步骤S307,接收服务器反馈的解答信息,控制该虚拟被咨询对象通过语音方式输出该解答信息。
在实际应用中,终端接收到解答信息后,可以通过语音方式播放出来,同时还可以控制当前界面呈现的虚拟被咨询对象的嘴型,营造出一种该解答信息是由虚拟被咨询对象说出的氛围,从而给用户一种与真实被咨询对象面对面咨询的感受,提高了咨询效率。
可选的,本发明实施例还可以利用识别出的真实环境信息中的拍摄对象后,可以据此调取对应的虚拟咨询场景信息进行渲染,从而得到与当前真实环境信息融合的虚拟咨询场景,但并不局限于上文描述的直接调取预设虚拟咨询场景信息,再利用识别出的拍摄对象及对应的属性特征信息进行渲染的方法。
综上,本发明实施例可以利用真实环境中的拍摄对象及其拍摄属性信息,实现对虚拟被咨询对象在虚拟咨询场景中的动作,以及虚拟咨询场景中的内容,从而使其能够与真实环境更加融合,改善用户视觉感受;而且,还能够利用服务器实现与该虚拟被咨询对象的语音交互,与现有文字回复方式相比,大大提高了咨询效率。
基于上述描述,若用户在使用金融类的APP进行投资过程中,有问题需要咨询客服,可以在登录该APP的手机界面上点击客服按钮,进入相应的咨询界面,并生成咨询请求,从而触发手机的摄像头采集当前场景的真实环境信息,并识别其包含的都有什么拍摄对象,比如咖啡馆场景、座椅等,确定这些拍摄对象是以什么拍摄角度进行拍摄,实现的是远景还是近景拍摄等等,从而据此确定虚拟咨询场景包含的虚拟对象,虚拟客服在该虚拟咨询场景中的动作,以及呈现在用户眼前的是虚拟客服的哪个视角等,如图4所示的虚拟咨询场景示意图,从而给用户一种与客服面对面交流的感受,且由于能够利用服务器,与该虚拟客服直接进行语音交流,大大提高了咨询效率。
下面对本发明实施例提供的信息交互控制装置进行介绍,下文描述的信息交互控制装置可以认为是,为实现本发明实施例提供的信息交互控制方法所需设置的程序模块架构。下文描述的信息交互控制装置内容可与上文描述的信息交互控制方法内容相互对应参照。
如图5所示,为本发明实施例提供的一种信息交互控制装置的结构图,该装置可以包括:
信息获取模块510,用于接收到咨询请求,获取终端所在场景的真实环境信息;
渲染模块520,用于利用所述真实环境信息,以及预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息,渲染并呈现包含有虚拟被咨询对象的虚拟咨询场景;
可选的,如图6所示,该渲染模块520可以包括:
识别单元521,用于识别所述真实环境信息中的至少一个拍摄对象以及对应的当前拍摄属性信息;
在本发明实施例中,可以采用swift语言实现实际场景的识别,具体实现过程不做详述。
信息调取单元522,用于调取预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息;
渲染单元523,用于利用识别出的至少一个拍摄对象以及对应的当前拍摄属性信息,渲染被咨询对象的虚拟人物信息和虚拟咨询场景信息;
呈现单元524,用于在当前界面呈现得到的包含有虚拟被咨询对象的虚拟咨询场景。
语音交互模块530,用于通过语音方式实现与所述虚拟被咨询对象的数据交互。
可选的,如图7所示,该语音交互模块530可以包括:
语音采集单元531,用于采集咨询对象输出的语音咨询信息,并将所述语音咨询信息上传到服务器;
在本发明实施例中,该语音采集单元531可以包括:
解析子单元,用于解析所述语音咨询信息,得到相应的语音解析文件;
数据传输子单元,用于将该语音解析文件上传至服务器。
信息接收单元532,用于接收所述服务器反馈的解答信息,所述解答信息是所述服务器利用人工智能技术得到的;
控制单元533,用于控制所述虚拟被咨询对象通过语音方式输出所述解答信息。
在上述各实施例的基础上,如图8所示,该装置还可以包括:
追踪模块540,用于追踪所述真实环境信息的变化信息;
可选的,该追踪模块540可以包括:
监测子单元,用于监测到所述真实环境信息发生变化,获取变化后的拍摄对象以及变化后的拍摄属性信息;
在实际应用中,该追踪模块也可以直接获取拍摄对象的变化轨迹信息,从而按照该变化轨迹信息,动态调整虚拟被咨询对象的显示状态和/或显示位置等属性。
调整模块550,用于利用所述变化信息,调整所述虚拟咨询场景中虚拟被咨询对象的显然状态或显示位置。
综上,本发明实施例通过渲染被咨询对象的虚拟人物以及虚拟咨询场景,并利用采集到的真实环境信息,确定虚拟人物在虚拟咨询场景中的属性,如显示状态和/或显示位置等,从而在咨询对象终端显示屏上呈现出包含有虚拟被咨询对象的虚拟咨询场景,且该虚拟咨询场景内容与当前真实环境融为一体,给用户良好的视觉感受,之后,用户可以通过语音方式实现与该虚拟被咨询对象的交互,快速得到咨询结果,相对于文字回复方式,大大提高了咨询效率。
结合上述图1所示的终端硬件结构图,本发明实施例还提供了一种终端,该终端可以包括:通信接口10,显示器20、图像采集设备30、语音采集与播放设备40、存储器50和处理器60。
其中,该终端中各硬件组成部分的解释部分可以参照上文相应部分的描述,本实施例在此不再赘述。
在本发明实施例中,存储器50可以存储实现如上所述的信息交互控制方法的程序,以及预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息。上述信息获取模块、渲染模块、语音交互模块、追踪模块以及调整模块等均作为程序模块存储在存储器中,由移动终端中的处理器执行存储在该存储器中的上述程序模块来实现相应功能。
存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flashRAM),存储器包括至少一个存储芯片。
处理器60中包含内核,由内核去存储器中调取相应的程序模块。内核可以设置一个或以上,通过调整内核参数来实现咨询对象与虚拟被咨询对象之间的语音交互,提高咨询效率。具体用于加载并执行所述存储器存储的程序,包括:
接收到咨询请求,获取终端所在场景的真实环境信息;
利用所述真实环境信息,以及预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息,渲染并呈现包含有虚拟被咨询对象的虚拟咨询场景;
通过语音方式实现与所述虚拟被咨询对象的数据交互。
可选的,处理器还可以执行实现以下步骤的程序:
识别所述真实环境信息中的至少一个拍摄对象以及对应的当前拍摄属性信息;
调取预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息;
利用识别出的至少一个拍摄对象以及对应的当前拍摄属性信息,渲染被咨询对象的虚拟人物信息和虚拟咨询场景信息;
在当前界面呈现得到的包含有虚拟被咨询对象的虚拟咨询场景。
可选的,处理器还可以执行实现以下步骤的程序:
追踪所述真实环境信息的变化信息;
利用所述变化信息,调整所述虚拟咨询场景中虚拟被咨询对象的显然状态或显示位置。
可选的,处理器还可以执行实现以下步骤的程序:
采集咨询对象输出的语音咨询信息,并将所述语音咨询信息上传到服务器;
接收所述服务器反馈的解答信息,所述解答信息是所述服务器利用人工智能技术得到的;
控制所述虚拟被咨询对象通过语音方式输出所述解答信息。
可选的,处理器还可以执行实现以下步骤的程序:
解析所述语音咨询信息,将得到的语音解析文件上传至服务器。
本发明实施例还提供了一种存储介质,其上存储有程序,该程序各侧装置中的处理器执行时,实现上述对应的信息交互控制方法。
本发明实施例还提供了一种处理器,该处理器用于运行程序,其中,该程序运行时执行信息交互控制方法。
本发明实施例还提供了一种信息交互控制系统,如图9所示,该系统可以包括客户端910以及服务器920,其中:
客户端910可以是安装在终端中的应用程序,如各种投资理财类的APP等,该终端可以是用户手机、平板电脑或笔记本电脑等用户设备,具体组成结构及其功能,可以参照上述终端实施例相应部分的描述,本实施例在此不再赘述。而关于该客户端910的组成结构可以参照上述装置实施例的描述。
服务器920可以是为该客户端920提供服务的服务设备,其可以是多台服务器组成的服务器集群,也可能是单台服务器。在本发明实施例中,服务器接收到客户端上传的语音解析文件后,可以通过PHP(Hypertext Preprocessor,超文本预处理器)语言实现对语音解析文件的接收,并通过人工智能技术解答问题,将得到解答文件即解答信息反馈至客户端进行语音播报。
其中,关于服务器对语音解析文件的处理方法不做限定。
最后需要说明,本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置和终端而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的核心思想或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种信息交互控制方法,其特征在于,包括:
接收到咨询请求,获取终端所在场景的真实环境信息;
利用所述真实环境信息,以及预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息,渲染并呈现包含有虚拟被咨询对象的虚拟咨询场景;
通过语音方式实现与所述虚拟被咨询对象的数据交互。
2.根据权利要求1所述的方法,其特征在于,所述利用所述真实环境信息,以及预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息,渲染并呈现包含有虚拟被咨询对象的虚拟咨询场景,包括:
识别所述真实环境信息中的至少一个拍摄对象以及对应的当前拍摄属性信息;
调取预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息;
利用识别出的至少一个拍摄对象以及对应的当前拍摄属性信息,渲染被咨询对象的虚拟人物信息和虚拟咨询场景信息;
在当前界面呈现得到的包含有虚拟被咨询对象的虚拟咨询场景。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
追踪所述真实环境信息的变化信息;
利用所述变化信息,调整所述虚拟咨询场景中虚拟被咨询对象的显然状态或显示位置。
4.根据权利要求1所述的方法,其特征在于,所述通过语音方式实现与所述虚拟被咨询对象的数据交互,包括:
采集咨询对象输出的语音咨询信息,并将所述语音咨询信息上传到服务器;
接收所述服务器反馈的解答信息,所述解答信息是所述服务器利用人工智能技术得到的;
控制所述虚拟被咨询对象通过语音方式输出所述解答信息。
5.根据权利要求4所述的方法,其特征在于,所述将所述语音咨询信息上传到服务器,包括:
解析所述语音咨询信息,将得到的语音解析文件上传至服务器。
6.一种信息交互控制装置,其特征在于,所述装置包括:
信息获取模块,用于接收到咨询请求,获取终端所在场景的真实环境信息;
渲染模块,用于利用所述真实环境信息,以及预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息,渲染并呈现包含有虚拟被咨询对象的虚拟咨询场景;
语音交互模块,用于通过语音方式实现与所述虚拟被咨询对象的数据交互。
7.根据权利要求6所述的装置,其特征在于,所述渲染模块包括:
识别单元,用于识别所述真实环境信息中的至少一个拍摄对象以及对应的当前拍摄属性信息;
信息调取单元,用于调取预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息;
渲染单元,用于利用识别出的至少一个拍摄对象以及对应的当前拍摄属性信息,渲染被咨询对象的虚拟人物信息和虚拟咨询场景信息;
呈现单元,用于在当前界面呈现得到的包含有虚拟被咨询对象的虚拟咨询场景。
8.根据权利要求6所述的装置,其特征在于,所述装置还包括:
追踪模块,用于追踪所述真实环境信息的变化信息;
调整模块,用于利用所述变化信息,调整所述虚拟咨询场景中虚拟被咨询对象的显然状态或显示位置。
9.根据权利要求6所述的装置,其特征在于,所述语音交互模块包括:
语音采集单元,用于采集咨询对象输出的语音咨询信息,并将所述语音咨询信息上传到服务器;
信息接收单元,用于接收所述服务器反馈的解答信息,所述解答信息是所述服务器利用人工智能技术得到的;
控制单元,用于控制所述虚拟被咨询对象通过语音方式输出所述解答信息。
10.一种终端,其特征在于,所述终端包括:
通信接口;显示器;
图像采集设备,用于采集终端所处场景的真实环境信息;
语音采集与播放设备;
存储器,用于存储实现如权利要求1-5任意一项所述的信息交互控制方法的程序,以及预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息;
处理器,用于加载并执行所述存储器存储的程序,包括:
接收到咨询请求,获取终端所在场景的真实环境信息;
利用所述真实环境信息,以及预设的被咨询对象的虚拟人物信息和虚拟咨询场景信息,渲染并呈现包含有虚拟被咨询对象的虚拟咨询场景;
通过语音方式实现与所述虚拟被咨询对象的数据交互。
CN201810043829.8A 2018-01-17 2018-01-17 信息交互控制方法、装置及设备 Pending CN108257218A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810043829.8A CN108257218A (zh) 2018-01-17 2018-01-17 信息交互控制方法、装置及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810043829.8A CN108257218A (zh) 2018-01-17 2018-01-17 信息交互控制方法、装置及设备

Publications (1)

Publication Number Publication Date
CN108257218A true CN108257218A (zh) 2018-07-06

Family

ID=62741189

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810043829.8A Pending CN108257218A (zh) 2018-01-17 2018-01-17 信息交互控制方法、装置及设备

Country Status (1)

Country Link
CN (1) CN108257218A (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109917917A (zh) * 2019-03-06 2019-06-21 南京七奇智能科技有限公司 一种虚拟人交互软件总线系统及其实现方法
CN110110056A (zh) * 2019-04-11 2019-08-09 重庆链脉网络科技有限公司 基于ai和智能合成的智能咨询系统及其应用方法
CN110120259A (zh) * 2019-04-11 2019-08-13 重庆链脉网络科技有限公司 智能咨询系统及其应用方法
CN110339570A (zh) * 2019-07-17 2019-10-18 网易(杭州)网络有限公司 信息的交互方法、装置、存储介质和电子装置
CN111045510A (zh) * 2018-10-15 2020-04-21 中国移动通信集团山东有限公司 基于增强现实的人机交互方法及系统
CN111522931A (zh) * 2020-04-22 2020-08-11 深圳创维-Rgb电子有限公司 基于虚拟人物的减压数据处理方法、显示设备及存储介质
CN111915819A (zh) * 2020-08-14 2020-11-10 中国工商银行股份有限公司 远程虚拟交互方法、装置及系统
CN113206989A (zh) * 2021-03-31 2021-08-03 聚好看科技股份有限公司 一种三维通信系统中人物模型的定位方法及设备
WO2023103380A1 (zh) * 2021-12-07 2023-06-15 达闼机器人股份有限公司 智能设备控制方法、装置、服务器和存储介质
CN116934180A (zh) * 2023-09-15 2023-10-24 恒实建设管理股份有限公司 全过程咨询信息管理方法、系统、装置及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103366610A (zh) * 2013-07-03 2013-10-23 熊剑明 基于增强现实的三维互动学习系统及方法
CN103489210A (zh) * 2013-09-06 2014-01-01 雷路德 一种虚拟人物主动联系系统及其方法
CN103500244A (zh) * 2013-09-06 2014-01-08 雷路德 一种虚拟朋友会话系统及其方法
US20170026893A1 (en) * 2004-11-03 2017-01-26 The Wilfred J. And Louisette G. Lagassey Irrevocable Trust, Roger J. Morgan, Trustee Modular intelligent transportation system
CN106372260A (zh) * 2016-10-25 2017-02-01 广州卓能信息科技有限公司 一种信息交互方法、装置及系统
CN107134011A (zh) * 2017-05-02 2017-09-05 湖北历拓网络科技有限公司 一种基于虚拟现实的智慧城市系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170026893A1 (en) * 2004-11-03 2017-01-26 The Wilfred J. And Louisette G. Lagassey Irrevocable Trust, Roger J. Morgan, Trustee Modular intelligent transportation system
CN103366610A (zh) * 2013-07-03 2013-10-23 熊剑明 基于增强现实的三维互动学习系统及方法
CN103489210A (zh) * 2013-09-06 2014-01-01 雷路德 一种虚拟人物主动联系系统及其方法
CN103500244A (zh) * 2013-09-06 2014-01-08 雷路德 一种虚拟朋友会话系统及其方法
CN106372260A (zh) * 2016-10-25 2017-02-01 广州卓能信息科技有限公司 一种信息交互方法、装置及系统
CN107134011A (zh) * 2017-05-02 2017-09-05 湖北历拓网络科技有限公司 一种基于虚拟现实的智慧城市系统

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111045510A (zh) * 2018-10-15 2020-04-21 中国移动通信集团山东有限公司 基于增强现实的人机交互方法及系统
CN109917917A (zh) * 2019-03-06 2019-06-21 南京七奇智能科技有限公司 一种虚拟人交互软件总线系统及其实现方法
CN110110056A (zh) * 2019-04-11 2019-08-09 重庆链脉网络科技有限公司 基于ai和智能合成的智能咨询系统及其应用方法
CN110120259A (zh) * 2019-04-11 2019-08-13 重庆链脉网络科技有限公司 智能咨询系统及其应用方法
CN110120259B (zh) * 2019-04-11 2021-09-03 重庆链脉网络科技有限公司 智能咨询系统及其应用方法
CN110339570A (zh) * 2019-07-17 2019-10-18 网易(杭州)网络有限公司 信息的交互方法、装置、存储介质和电子装置
CN111522931A (zh) * 2020-04-22 2020-08-11 深圳创维-Rgb电子有限公司 基于虚拟人物的减压数据处理方法、显示设备及存储介质
CN111915819A (zh) * 2020-08-14 2020-11-10 中国工商银行股份有限公司 远程虚拟交互方法、装置及系统
CN113206989A (zh) * 2021-03-31 2021-08-03 聚好看科技股份有限公司 一种三维通信系统中人物模型的定位方法及设备
WO2023103380A1 (zh) * 2021-12-07 2023-06-15 达闼机器人股份有限公司 智能设备控制方法、装置、服务器和存储介质
CN116934180A (zh) * 2023-09-15 2023-10-24 恒实建设管理股份有限公司 全过程咨询信息管理方法、系统、装置及存储介质
CN116934180B (zh) * 2023-09-15 2023-12-08 恒实建设管理股份有限公司 全过程咨询信息管理方法、系统、装置及存储介质

Similar Documents

Publication Publication Date Title
CN108257218A (zh) 信息交互控制方法、装置及设备
US10347028B2 (en) Method for sharing emotions through the creation of three-dimensional avatars and their interaction
US11670055B1 (en) Facial expression tracking during augmented and virtual reality sessions
CN108880983B (zh) 一种虚拟三维空间的语音实时处理方法及装置
CN108776917B (zh) 一种虚拟三维空间的同步处理方法及装置
CN112527115A (zh) 用户形象生成方法、相关装置及计算机程序产品
CN112820408B (zh) 手术操作风险确定方法、相关装置及计算机程序产品
US11182600B2 (en) Automatic selection of event video content
CN108985228A (zh) 应用于终端设备的信息生成方法和装置
CN110148191A (zh) 视频虚拟表情生成方法、装置及计算机可读存储介质
CN108765084B (zh) 一种虚拟三维空间的同步处理方法及装置
EP4254943A1 (en) Head-tracking based media selection for video communications in virtual environments
CN114463470A (zh) 虚拟空间浏览方法、装置、电子设备和可读存储介质
US11558440B1 (en) Simulate live video presentation in a recorded video
CN117632109A (zh) 虚拟数字助手构建方法、装置、电子设备以及存储介质
KR20160013536A (ko) 자발적인 콘텐츠 생산 및 확산을 통한 광고 시스템 및 그 방법
CN112272328B (zh) 弹幕推荐方法及相关装置
CN112714337A (zh) 视频处理方法、装置、电子设备和存储介质
CN115393484A (zh) 虚拟形象动画的生成方法、装置、电子设备和存储介质
CN113761281B (zh) 虚拟资源处理方法、装置、介质及电子设备
CN113223128B (zh) 用于生成图像的方法和装置
CN114140560A (zh) 动画生成方法、装置、设备和存储介质
CN113158058A (zh) 服务信息的发送方法及装置、接收方法及装置
CN112449249A (zh) 视频流处理方法及装置、电子设备及存储介质
CN113867874A (zh) 页面编辑及显示方法、装置、设备、计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180706

RJ01 Rejection of invention patent application after publication