CN117014640A - 数据展示方法、装置、设备、可读存储介质及程序产品 - Google Patents
数据展示方法、装置、设备、可读存储介质及程序产品 Download PDFInfo
- Publication number
- CN117014640A CN117014640A CN202210603763.XA CN202210603763A CN117014640A CN 117014640 A CN117014640 A CN 117014640A CN 202210603763 A CN202210603763 A CN 202210603763A CN 117014640 A CN117014640 A CN 117014640A
- Authority
- CN
- China
- Prior art keywords
- data
- virtual object
- page
- video stream
- target object
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 131
- 238000003860 storage Methods 0.000 title claims abstract description 31
- 230000003993 interaction Effects 0.000 claims abstract description 130
- 230000009471 action Effects 0.000 claims description 127
- 238000009877 rendering Methods 0.000 claims description 39
- 238000004891 communication Methods 0.000 claims description 38
- 238000012545 processing Methods 0.000 claims description 37
- 230000004044 response Effects 0.000 claims description 21
- 238000004590 computer program Methods 0.000 claims description 12
- 230000000763 evoking effect Effects 0.000 claims description 5
- 238000005516 engineering process Methods 0.000 abstract description 36
- 238000013473 artificial intelligence Methods 0.000 abstract description 14
- 238000003058 natural language processing Methods 0.000 abstract description 12
- 230000000875 corresponding effect Effects 0.000 description 56
- 239000000047 product Substances 0.000 description 54
- 238000010586 diagram Methods 0.000 description 23
- 230000008569 process Effects 0.000 description 19
- 230000006870 function Effects 0.000 description 18
- 238000006243 chemical reaction Methods 0.000 description 17
- 230000002452 interceptive effect Effects 0.000 description 17
- 230000006399 behavior Effects 0.000 description 13
- 230000001276 controlling effect Effects 0.000 description 12
- 230000000694 effects Effects 0.000 description 10
- 230000014509 gene expression Effects 0.000 description 9
- 238000007726 management method Methods 0.000 description 8
- 230000001960 triggered effect Effects 0.000 description 6
- 238000011160 research Methods 0.000 description 5
- 238000012795 verification Methods 0.000 description 5
- 230000009286 beneficial effect Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000007704 transition Effects 0.000 description 3
- 241000282326 Felis catus Species 0.000 description 2
- 230000032683 aging Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 238000004140 cleaning Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000037007 arousal Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000007795 chemical reaction product Substances 0.000 description 1
- 238000003776 cleavage reaction Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000002079 cooperative effect Effects 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000001747 exhibiting effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 238000004080 punching Methods 0.000 description 1
- 230000007017 scission Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 230000001932 seasonal effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请实施例提出了一种数据展示方法、装置、设备、可读存储介质及程序产品,可应用于人工智能、语音技术、自然语言处理技术、车载场景、辅助驾驶、直播平台等领域或场景,该方法包括:显示第一页面,第一页面包括需要被目标对象查看的目标物品;在第一页面中展示虚拟对象;通过虚拟对象输出第一视频流,第一视频流包括动作数据和语音数据中的一种或两种,第一视频流是基目标对象与虚拟对象之间针对目标物品的第一交互数据确定的。通过本申请实施例,可以利用虚拟对象与目标对象进行实时交互,提升目标对象的体验感。
Description
技术领域
本申请涉及计算机技术领域,具体涉及数据展示方法、数据展示装置、计算机设备、计算机可读存储介质以及计算机程序产品。
背景技术
随着直播行业的日益兴隆,产品导购模式已经从简单的产品图文介绍进阶到直播带货。在直播时段,对象可以通过在线直播获取产品信息,并与主播进行文字互动;但是直播不是随时随地都在进行,在非直播时段,对象只能通过生硬的产品图文介绍或访问产品链接进行产品了解,可互动性差。并且,由于对象访问具有随机性,商家无法做到实时在线接待对象,使得对象无法真正沉浸式了解产品价值,导致对象的体验感差,从而造成对象流失。
发明内容
本申请提供了一种数据展示方法、装置、设备、可读存储介质及程序产品,可以利用虚拟对象与目标对象进行实时交互,提升目标对象的体验感。
第一方面,本申请提供了一种数据展示方法,该方法包括:
显示第一页面,上述第一页面包括需要被目标对象查看的目标物品;
在上述第一页面中展示虚拟对象;
通过上述虚拟对象输出第一视频流,上述第一视频流包括动作数据和语音数据中的一种或两种,上述第一视频流是基于上述目标对象与上述虚拟对象之间针对上述目标物品的第一交互数据确定的。
第二方面,本申请提供了另一种数据展示方法,该方法包括:
接收第一终端设备发送的目标对象与虚拟对象之间针对目标物品的第一交互数据,上述第一终端设备显示有第一页面,上述第一页面包括上述虚拟对象和上述目标物品;
基于上述第一交互数据确定上述虚拟对象的第一视频流,上述第一视频流包括动作数据和语音数据中的一种或两种;
向上述第一终端设备发送上述第一视频流,以使得上述第一终端设备在上述第一页面中通过上述虚拟对象输出上述第一视频流。
第三方面,本申请提供了一种数据展示装置,该装置包括:
显示模块,用于显示第一页面,上述第一页面包括需要被目标对象查看的目标物品;
上述显示模块,还用于在上述第一页面中展示虚拟对象;
上述显示模块,还用于通过上述虚拟对象输出第一视频流,上述第一视频流包括动作数据和语音数据中的一种或两种,上述第一视频流是基于上述目标对象与上述虚拟对象之间针对上述目标物品的第一交互数据确定的。
第四方面,本申请提供了一种数据展示装置,该装置包括:
接收模块,用于接收第一终端设备发送的目标对象与虚拟对象之间针对目标物品的第一交互数据,上述第一终端设备显示有第一页面,上述第一页面包括上述虚拟对象和上述目标物品;
处理模块,用于基于上述第一交互数据确定上述虚拟对象的第一视频流,上述第一视频流包括动作数据和语音数据中的一种或两种;
上述处理模块,还用于向上述第一终端设备发送上述第一视频流,以使得上述第一终端设备在上述第一页面中通过上述虚拟对象输出上述第一视频流。
第五方面,本申请提供了一种计算机设备,包括:处理器、存储装置和通信接口,上述处理器、上述通信接口和上述存储装置相互连接,其中,上述存储装置存储有可执行程序代码,上述处理器用于调用上述可执行程序代码,用以实现上述的数据展示方法。
第六方面,本申请提供了一种计算机可读存储介质,上述计算机可读存储介质存储有计算机程序,上述计算机程序包括程序指令,上述程序指令被处理器执行,用以实现如上述的数据展示方法。
第七方面,本申请提供了一种计算机程序产品,上述计算机程序产品包括计算机程序或计算机指令,上述计算机程序或计算机指令被处理器执行,用以实现上述的数据展示方法。
本申请的有益效果如下:
本申请提出了一种在对象浏览页面展示虚拟对象的产品形态,该虚拟对象可以通过输出第一视频流的方式与对象进行互动,相比真实主播在进行直播时具有时限性的痛点,本申请所提出的虚拟对象直播方法可以随时随地的与对象进行交互。其中,第一视频流是基于对象与虚拟对象之间针对目标物品的第一交互数据确定的,使得虚拟对象可以在对象浏览的当前页面,根据对象的诸如语音等交互数据进行实时的反馈,直接与对象进行互动,从而与目标物品进行更好的结合,提高互动体验和趣味性。并且,第一视频流可以包括动作数据和语音数据,利用虚拟对象通过语音、动作等方式与目标对象进行实时交互,进一步提升了目标对象的体验感。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1A是本申请一个示例性实施例提供的一种图文展示的界面示意图;
图1B是本申请一个示例性实施例提供的一种直播展示的界面示意图;
图1C是本申请一个示例性实施例提供的一种数据展示系统的架构示意图;
图2是本申请一个示例性实施例提供的一种数据展示方法的流程示意图;
图3是本申请一个示例性实施例提供的一种基于虚拟对象的数据展示方法的界面示意图;
图4是本申请一个示例性实施例提供的另一种数据展示方法的流程示意图;
图5A是本申请一个示例性实施例提供的一种配置候选答复内容的界面示意图;
图5B是本申请一个示例性实施例提供的一种配置候选动作的界面示意图;
图5C是本申请一个示例性实施例提供的一种配置虚拟对象唤起条件的界面示意图;
图5D是本申请一个示例性实施例提供的一种数字人直播系统的框架图;
图5E是本申请一个示例性实施例提供的一种数字人直播系统的前端架构图;
图5F是本申请一个示例性实施例提供的一种数字人直播系统的后端架构图;
图5G是本申请一个示例性实施例提供的一种数字人直播系统的启动流程图;
图6是本申请一个示例性实施例提供的一种数据展示装置的示意框图;
图7是本申请一个示例性实施例提供的一种计算机设备的示意框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
需要说明的是,本申请实施例中所涉及到的“第一”、“第二”等描述仅用于描述目的,而不能理解为指示或者暗示其相对重要性或者隐含指明所指示的技术特征的数量。因此,限定有“第一”、“第二”的技术特征可以明示或者隐含的包括至少一个该特征。
为了更好地理解本申请实施例的方案,下面先对本申请实施例可能涉及的相关术语和概念进行介绍。
接待组件(WPA)是客户与企业建立联系的主要工具。通过接待组件,客户可快捷向客服发起咨询。企业可以把接待组件挂载在各主要渠道来全面触达客户。
自然语言处理技术(NLP,Natural Language Processing)是研究人与计算机交互的语言问题的一门学科。按照技术实现难度的不同,这类系统可以分成简单匹配式、模糊匹配式和段落理解式三种类型。
自动语音识别技术(Automatic Speech Recognition,ASR)是一种将人的语音转换为文本的技术。
本发明实施例可应用于人工智能、语音技术、自然语言处理技术、直播平台、车载场景、辅助驾驶等各种领域或场景,下面将对几个典型技术或场景进行介绍。
人工智能(Artificial Intelligence,AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能,感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。换句话说,人工智能是计算机科学的一个综合技术,它企图了解智能的实质,并生产出一种新的能以人类智能相似的方式做出反应的智能机器。人工智能也就是研究各种智能机器的设计原理与实现方法,使机器具有感知、推理与决策的功能。人工智能技术是一门综合学科,涉及领域广泛,既有硬件层面的技术也有软件层面的技术。人工智能基础技术一般包括如传感器、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、机器学习/深度学习等几大方向。本申请实施例提供的方案涉及人工智能技术下属的自然语言处理和语音技术,下面将对此进行叙述。
语音技术(Speech Technology)的关键技术有自动语音识别技术和语音合成技术以及声纹识别技术。让计算机能听、能看、能说、能感觉,是未来人机交互的发展方向,其中语音成为未来最被看好的人机交互方式之一。具体的,本申请提出的方法通过语音技术可以获取目标对象的语音数据,并对语音数据进行自动语音识别处理,进而得到对应的文本信息;通过语音技术将进行交互的文本内容转化为语音数据进行播放。通过上述方法可以实现目标对象与虚拟对象的实时语音交流,极大地提升了目标对象的体验感。
自然语言处理(Nature Language processing,NLP)是计算机科学领域与人工智能领域中的一个重要方向。它研究能实现人与计算机之间用自然语言进行有效通信的各种理论和方法。自然语言处理是一门融语言学、计算机科学、数学于一体的科学。因此,这一领域的研究将涉及自然语言,即人们日常使用的语言,所以它与语言学的研究有着密切的联系。自然语言处理技术通常包括文本处理、语义理解、机器翻译、机器人问答、知识图谱等技术。具体来说,本申请利用自然语言处理技术将获取到的目标对象的第一交互数据(例如文本数据、语音数据)进行数据清洗、语义识别等处理,最终得到目标对象的语义信息,从而针对性的输出交互内容,提高交互内容的准确性。
随着人工智能技术研究和进步,人工智能技术在多个领域展开研究和应用,例如常见的智能家居、智能穿戴设备、虚拟助理、智能音箱、智能营销、无人驾驶、自动驾驶、无人机、机器人、智能医疗、智能客服、车联网、自动驾驶、3D游戏等。随着技术的发展,人工智能技术将在更多的领域得到应用,并发挥越来越重要的价值。
随着直播行业的日益兴隆,产品导购模式已经从简单的产品图文介绍进阶到直播带货。
请参见图1A,该图为XX景点引导讲解,本场景为地图展示窗口结合音频进行景点介绍和引导。图中包括引导地图窗口101(包括景点A、景点B和景点C),景点信息展示窗口102,以及页面选择控件(包括防疫措施页面、景点页面、常设展览页面和发现页面对应的控件)。当对象点击某一景点(例如景点C)时,会在页面中展示该景点对应的景点信息展示窗口。其中,在景点信息展示窗口中包括景点名称(例如:景点C)、距离信息(例如:据您500公里)、景点介绍(例如:景点C是一个具有2000多年历史的文化古城,是目前保存最为完整的四大古城之一……)。
景点信息展示窗口中还包括多个功能控件,例如分享控件、收藏控件、前往控件、打卡控件和播报控件。当对象点击播报控件,可以收听该景点的语音介绍,提升使用体验。但是在上述场景下,没有真人主播为其进行绘声绘色的展示。并且,客户需要通过手动点击以进一步了解不同景点,从而导致使用体验差。
请参见图1B,该图为XX直播间直播带货的场景示意图,本场景为真人主播结合内容窗口进行导购。图中包括主播视频直播窗口103,产品展示窗口104,对话窗口105;对象可以在主播视频直播窗口103观看直播了解产品的真实效果;通过产品展示窗口104跳转到对应的产品页面进行进一步了解、购买等;通过对话窗口105与主播进行交流。图中还包括多个业务窗口,例如留言板窗口(图中展示为“欢迎来到直播间,喜欢的商品可以通过商品橱窗进行购买!”)、店铺活动窗口(图中展示为“[分享领券]邀请3人好友助力领券,助力成功限量领1000-100元优惠券……”)、优惠券窗口(图中展示为“满减优惠30代金券、40代金券、50代金券,点击领取”)。利用真人主播直播带货,客户可以通过主播讲解、产品展示窗口,以及其他业务窗口了解产品,并通过对话窗口与主播进行互动。
但是上述场景是具有局限性的,因为直播不是随时随地都在进行。在商家直播时段,客户可以通过在线直播获取产品信息,并与主播进行文字互动,但大多数时候商家不会直播,此时,客户只能通过生硬的产品图文介绍或访问产品链接进行产品了解,导致使用体验差。并且,由于客户访问具有随机性,商家无法做到实时的在线接待客户,使得客户无法真正沉浸式了解产品价值,此时客户很容易失去耐心转而离去,从而造成客户流失。
为了解决上述问题,本申请在对市场以及现有客户的需求情况进行调研,并结合自有产品的优势,提出了一种数字人直播的产品形态,该数字人(即虚拟对象)可以随时随地进行直播并与客户进行互动,解决现有方案无法随时随地直播并为客户解说产品的痛点。
具体的,本申请结合数字人和机器人,通过设置触发条件在产品页面触发数字人进行直播讲解,并允许客户在直播讲解的过程中与数字人进行交流。本申请保护数字人直播这种新的交互模式,并提供挂载能力,可以将数字人挂载在产品详情页、官网入口等,无需对象主动点击即可触发数字人,使得当前页面的数字人和产品本身得到更好的结合。
并且,通过管理员可以自定义数字人讲解话术、触发条件、交互答案等,能有效提升客户访问产品页面的能动性,使客户进入产品页面就能看到一个亲切的虚拟形象跃然纸上。同时,数字人还能结合产品,以及配合客户的提出的各种疑问、在页面上进行的操作等实时的做出反馈,让对象身临其境的体验一对一的直播解说服务,迅速拉进产品与客户的距离,从而提高对象转化率。实现胜真人的直播体验。
可以理解的是,在本申请的具体实施方式中,涉及到交互数据、访问信息等相关的数据,当本申请以上实施例运用到具体产品或技术中时,相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。
本申请将具体通过如下实施例进行说明。
请参阅图1C,该是本申请一个示例性实施例提供的一种数据展示系统的架构示意图。如图所示,该数据展示系统具体可以包括终端设备106和服务器107。其中,终端设备106和服务器107之间通过网络连接,比如,通过局域网、广域网、移动互联网等连接。操作者在终端设备106的浏览器或者客户端应用上进行页面访问、数据配置等操作。服务器107可以响应于该操作,为操作者提供对应的业务服务。
在本申请中,上述终端设备106至少可以包括第一终端设备和第二终端设备,第一终端设备可以是目标对象(即普通对象)进行操作的设备,第二终端设备可以是管理对象(即系统管理员)进行操作的设备。
具体的,下面是目标对象利用第一终端设备进行操作的具体场景下。目标对象通过第一终端设备访问第一页面;第一终端设备获取目标对象的第一交互数据,并将第一交互数据发送给服务器107;服务器107对第一交互数据进行分析,根据第一交互数据确定虚拟对象的第一视频流,并将第一视频流发送给第一终端设备;第一终端设备在接收到第一视频流后,利用虚拟对象展示第一视频流。
具体的,下面是管理对象(管理员)利用第二终端设备进行操作的具体场景下。管理对象通过第二终端设备访问配置界面;第二终端设备获取管理对象通过配置界面输入的配置数据,并将配置数据发送给服务器107;服务器107根据配置数据确定虚拟对象唤起条件、答复内容等数据,并将上述数据进行缓存,以便于服务器107后续对目标对象的第一交互数据进行数据分析,从而针对性的输出对应的视频流。
需要说明的是,第一终端设备和第二终端设备可以是同一计算机设备(例如计算机设备A),例如管理员在计算机设备A上进行虚拟对象的相关配置,并以对象身份在计算机设备A上进行虚拟对象的相关测试。
终端设备106也称为终端(Terminal)、对象设备(user equipment,UE)、接入终端、对象单元、移动设备、对象终端、无线通信设备、对象代理或对象装置。终端设备可以是智能家电、具有无线通信功能的手持设备(例如智能手机、平板电脑)、计算设备(例如个人电脑(personal computer,PC)、车载终端、智能语音交互设备、可穿戴设备或者其他智能装置等,但并不局限于此。
服务器107可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、内容分发网络(Content Delivery Network,CDN)、以及大数据和人工智能平台等基础云计算服务的云服务器。
可以理解的是,本申请实施例描述的系统的架构示意图是为了更加清楚的说明本申请实施例的技术方案,并不构成对于本申请实施例提供的技术方案的限定。例如,本申请中所述的终端设备106和服务器107可以为同一个计算机设备,以实现本申请中的相关方法。例如,本申请实施例所提供的访问方法除了可以由服务器107执行,还可以由不同于服务器107且能够与终端设备106和/或服务器107通信的其他服务器或服务器集群执行。本领域普通技术人员可知,图1C中的终端设备和服务器的数目仅仅是示意性的。根据业务实现需要,可以配置具有任意数目的终端设备和服务器。并且,随着系统架构的演变和新业务场景的出现,本申请实施例提供的技术方案对于类似的技术问题,同样适用。在后续实施例中,将以第一终端设备(或第二终端设备)指代上述终端设备106,以服务器指代上述服务器107,后续实施例中将不再赘述。
请参阅图2,图2是本申请一个示例性实施例提供的一种数据展示方法的流程示意图,以该方法应用于第一终端设备(指代图1C中的终端设备106)为例进行说明,该方法可包括以下步骤:
S201、显示第一页面,第一页面包括需要被目标对象查看的目标物品。
本申请实施例中,目标对象为对第一页面进行访问的对象,目标对象通过所在的终端设备(即第一终端设备)进行访问操作。第一页面中包括了目标对象查看的目标物品。
示例性的,第一页面可以是浏览器网页、应用软件页面、小程序页面等页面。目标对象可以通过第一页面对其中的目标物品(例如目标对象感兴趣的商品、景点、页面中的文本信息等)进行查看。
S202、在第一页面中展示虚拟对象。
本申请实施例中,虚拟对象是显示在第一页面中的一个虚拟角色,该虚拟角色可以向目标对象进行动作展示、语音播报等互动,使得目标对象在查看目标物品的过程中,通过虚拟对象直观形象的介绍了解目标物品,激发目标对象的兴趣,提升交互的趣味性和体验感。虚拟对象可以实现与目标对象进行实时的语音交流,为目标对象带来贴心的陪伴式购物体验,拉进对象距离,从而提高对象的转化率。
在一实施例中,在目标对象查看目标物品的过程中,虚拟对象可以向目标对象播放目标物品相关的语音内容,并通过动作进行协同展示(例如,当对象问:“你们的产品含有什么啊”,虚拟对象挥动右手,然后指向第一页面中目标物品的区域说:“我们的产品可以起到延缓衰老的功效”。)
在一实施例中,第一终端设备可以在检测到目标对象对第一页面进行访问时(例如通过打开第一页面),在第一页面展示虚拟对象。虚拟对象可以在第一页面的固定位置进行展示(例如页面右下角);也可以根据第一页面的具体情况在适当的位置进行展示(例如,第一终端设备获取第一页面的诸如背景区域、前景区域、文字区域等页面参数,通过页面参数确定诸如对第一页面的内容遮挡度最小的展示区域,并在展示区域展示虚拟角色)。目标对象也可以通过诸如点击虚拟对象并进行拖动的方式,调整虚拟对象在第一页面的展示位置。通过上述方法灵活的调整虚拟对象的展示位置以避免出现遮挡第一页面中的关键信息等情况,可以提高对象的浏览体验。
在一实施例中,为了在特定条件下向目标对象展示虚拟对象,第一终端设备还可以包括以下步骤。
(1)、获取目标对象的特征信息,特征信息包括对象标签、历史访问记录、对第一页面的访问信息中的一种或多种。
本申请实施例中,目标对象的特征信息可以是第一终端设备于第一页面采集得到的,或者由第一页面采集并发送给终端设备的。特征信息可以包括对象标签、历史访问记录、对第一页面的访问信息中的一种或多种。对象标签可以包括目标对象的属性,例如年龄、性别、所处区域等;历史访问记录可以包括目标对象以前浏览的页面等;对第一页面的访问信息可以包括目标对象在第一页面的停留时长、访问总时间、访问次数、目标对象在第一页面的点击区域以及点击区域被点击的次数、第一页面的访问页面信息等。
(2)、向服务器发送目标对象的特征信息,以使得服务器确定目标对象的特征信息是否满足虚拟对象唤起条件,虚拟对象唤起条件是基于通过第二终端设备展示的配置界面输入的配置数据确定的。
本申请实施例中,第一终端设备向服务器发送目标对象的特征信息,服务器可以判断目标对象的特征信息是否满足虚拟对象唤起条件。第二终端设备是管理对象(即管理员)所在的终端设备,管理员通过第二终端设备可以预先配置虚拟对象唤起条件。
(3)、接收服务器在目标对象的特征信息满足虚拟对象唤起条件的情况下,发送的图像渲染数据,图像渲染数据用于在第一页面中展示虚拟对象。
本申请实施例中,当服务器判断目标对象的特征信息满足虚拟对象唤起条件时,服务器向第一终端设备发送图像渲染数据,第一终端设备通过接收到的图像渲染数据在第一页面中展示虚拟对象。需要说明的是,图像渲染数据是视频流(直播流)形式的数据,以使得展示在第一页面上的虚拟对象是连续变化的(可以理解为第一终端设备在获取到图像渲染数据时,在第一页面上的虚拟对象以一段视频进行连续的播放);当第一终端设备接收到服务器发送的后续视频流数据时(例如第一视频流),通过第一页面的前端渲染引擎可以驱动虚拟对象执行后续视频流数据所指示的动作或播报语音。
在一实施例中,目标对象可以通过触发虚拟对象(例如通过长按、双击虚拟对象等方式)打开虚拟对象的设置界面,通过设置界面可以对虚拟对象的展示形象(例如卡通人的形象、卡通猫的形象等)、虚拟对象的属性(例如虚拟对象展示区域的大小、虚拟对象的透明度、虚拟对象的声音、虚拟对象静音与解除静音等)等虚拟对象数据进行设置,从而为对象带来个性化的观感体验,提升趣味性。需要说明的是,当对象通过虚拟对象的设置界面对虚拟对象数据进行设置之后,服务器可以获取该虚拟对象数据,从而基于重新设置后的虚拟对象数据推送对应的新数据流(例如,服务器向第一终端设备发送重新设置后的虚拟对象数据对应的图像渲染数据),以使第一种终端设备以新的虚拟对象形式(例如更改后的虚拟对象形象、更改后的虚拟对象声音等)进行展示。
通过上述方法灵活设置虚拟对象唤起条件,以使得虚拟对象可以在特定的场景或者业务环境中被触发。该方法可以降低在常规环境下虚拟对象的出场率,从而降低了服务器的运算压力,同时也保证了虚拟对象能够在诸如对象有意向的情况下出场,并与意向对象进行有效互动,提高对象转化率。
在一实施例中,管理员可以对虚拟对象唤起条件进行预先配置。配置界面包括多个配置区域,每个配置区域用于配置一种虚拟对象的唤起规则,例如促销引导规则(例如,针对地域来自X市的访客)、咨询引导规则(例如,针对来访次数大于3次的访客)、自定义规则等。其中,促销引导规则和咨询引导规则是服务器预先设置好条件类型的唤起规则,对象只需要对设置好的条件类型进行配置即可(例如,在促销引导规则中服务器设置好条件类型为【访问地域】,管理员只需要配置【访问地域】为X市即可)。当管理员点击自定义规则可以自由选择条件类型,并进行配置。例如,管理员选择条件类型【来访时间段】,并配置9:00-21:00(此时表示虚拟对象的其中一条触发条件是来访时间段为9:00-21:00);管理员选择条件类型【客户类型】,并配置会员(此时表示虚拟对象的其中一条触发条件是客户类型为会员),上述为管理员已添加的条件类型,管理员可以通过编辑控件编辑已添加的条件类型。管理员未添加的条件类型还可以包括诸如【访问地域】、【性别】等,管理员可以通过添加控件添加未添加的条件类型,并进行相关配置。通过上述自定义规则,提高了配置虚拟对象唤起条件的灵活性,从而使得虚拟对象能够在特定的场景下被触发,从而达到虚拟对象在唤起后能够与意向对象进行有效互动,进一步提高对象转化率。
在一实施例中,在第一页面中展示虚拟对象之后,第一终端设备还可以包括以下步骤。
(1)、从服务器获取第二视频流。
(2)、通过虚拟对象输出第二视频流,第二视频流为与目标物品相关的初始化视频流。
本申请实施例中,第一终端设备获取到的第二视频流是服务器通过获取第一页面的页面信息,生成的与目标物品相关的用以进行出场过渡的初始化视频流。通过第一终端设备上的虚拟对象输出第二视频流,以使得虚拟对象主动与对象进行互动,以便于为对象打开话题,拉进对象关系,从而引导对象深入地了解目标物品,提高对象转化率。
在一实施例中,第二视频流可以是用于虚拟对象展示出场动画,并主动与目标对象进行交互。当目标对象对第一页面(例如商品页面)进行访问时,通过虚拟对象输出第二视频流(例如,虚拟对象挥动双手,然后说:“您好啊,你看的这件商品最近正在八折促销,需要进一步了解它的参数吗”)。
S203、通过虚拟对象输出第一视频流,第一视频流包括动作数据和语音数据中的一种或两种,第一视频流是基于目标对象与虚拟对象之间针对目标物品的第一交互数据确定的。
本申请实施例中,第一视频流包括动作数据和语音数据中的一种或两种,也即是说,当第一视频流只包括动作数据时,虚拟对象可以通过动作数据在第一页面中执行动作数据指示的动作;当第一视频流只包括语音数据时,虚拟对象可以通过语音数据播报语音数据中的答复内容(此时虚拟对象的动作保持为在接收到第一数据流之前的状态);当第一视频流包括动作数据和语音数据时,上述通过虚拟对象输出第一视频流,可以根据以下步骤实现:控制虚拟对象在第一页面中执行动作数据指示的动作,并控制虚拟对象播报语音数据,也即是说虚拟对象可以在执行动作数据指示的动作的同时,播报语音数据中的答复内容。第一交互数据是目标对象与虚拟对象进行交互时产生的数据。通过上述方法,提高了虚拟对象在进行交互时,交互方式的可选择性。
在一实施例中,第一视频流是由服务器通过第一交互数据确定得到的,那么上述方法中第一终端设备还可以包括以下步骤。
(1)、获取目标对象与虚拟对象之间针对目标物品的第一交互数据。
(2)、向服务器发送第一交互数据,以使得服务器基于第一交互数据确定第一视频流。
(3)、接收服务器发送的第一视频流。
本申请实施例中,第一交互数据是由目标对象在第一终端设备与虚拟对象交互所产生的。例如目标对象对虚拟对象交流所产生的语音数据,或者目标对象输入的文本数据。第一视频流为服务器基于第一交互数据,从知识库中获取到的用于回应第一交互数据的回应数据,该回应数据通过虚拟对象以动作和语音等方式进行展现。上述方法使得对象可以选择通过语音或者文本方式与虚拟对象进行交流,提高了对象交互方式的可选择性。
在一实施例中,第一交互数据还可以是目标对象在与虚拟对象进行交互过程中对第一页面的访问信息,可以包括目标对象在第一页面的停留时长、访问总时间、访问次数、目标对象在第一页面的点击区域以及点击区域被点击的点击次数等。示例性的,当对象浏览的第一页面为抢红包页面时,虚拟对象播放:“抢红包开始啦”,并用双手做加油的动作;对象开始点击抢红包;第一终端设备将点击频率作为第一交互数据并发送给服务器;服务器通过点击频率确定对应的第一视频流,并发送给第一终端设备由虚拟对象进行展示(例如,当点击频率较慢时,虚拟对象播放:“要加油哦”,并用双手做加油的动作;当点击频率较快时,虚拟对象播放:“哇,你真棒”,并用右手做竖大拇指的动作)。
通过上述方法,可以使得虚拟对象与目标对象在当前页面直接互动,与目标物品进行更好的结合,并基于对象的访问信息进行实时反馈,实现胜真人的互动体验和趣味性。
在一实施例中,由于服务器可能无法从知识库中获取到与第一交互数据相匹配的视频流(此时,表示虚拟对象无法对目标对象所产生的第一交互数据进行答复),那么在上述接收服务器发送的第一视频流的过程中,第一终端设备还可以包括以下步骤。
(1)、若在预设时长内未接收到服务器发送的第一视频流,则在第一页面中展示信息录入区域。
(2)、获取目标对象通过信息录入区域录入的留言信息和目标通讯方式。
(3)、向服务器发送留言信息,以使得服务器确定留言信息对应的应答信息,并通过目标通讯方式向目标对象对应的第一终端设备发送应答信息。
本申请实施例中,信息录入区域用于目标对象输入留言信息(例如虚拟对象未能解答的内容)和目标通讯方式(例如,通过短信方式回复、通过电话方式答复等)。服务器根据留言信息确定对应的应答信息,并通过目标通讯方式向目标对象对应的第一终端设备发送应答信息。
在一实施例中,服务器可以将留言信息发送给人工客服后台,由人工客服后台匹配对应的解答人员,通过目标通讯方式为目标对象进行解答。
在一实施例中,留言信息可以是目标对象主动输入的,也可以是基于第一交互数据自动生成并展示在信息录入区域的(上述自动生成的内容是基于目标对象与虚拟对象进行交互时虚拟对象未能解答的交互数据生成的,作为参考的留言信息。目标对象可对上述自动生成的内容进行修改,从而更加清晰的表明观点,以便于服务器推送更加准确的应答信息),或者基于所述访问对象在所述留言窗口的输入信息生成的。通过虚拟对象结合留言的方式,可以使得在虚拟对象未能进行解答时,以留言方式利用人工客服进行解答,提高解答的成功率,从而提高对象的转换率。
在一实施例中,目标对象与虚拟对象之间的交互可以通过语音方式进行实时交流(具体的,通过第一终端设备上的实时收音装置获取目标对象的语音数据并发送给服务器,服务器根据语音数据确定包括回复语音和虚拟对象协同动作的第一视频流给第一终端设备,并由虚拟对象以动作和音频的方式输出该第一视频流,通过上述方法可以实现目标对象与虚拟对象之间的多轮交互)。目标对象与虚拟对象之间的交互也可以是目标对象通过输入文本内容与虚拟对象进行交流,虚拟对象以动作和音频的方式输出该第一视频流,或者通过文本展示的方法进行回复。
在一实施例中,第一页面中可以采用文本交互方式和音视频交互方式(包括通过第一终端设备上的收音设备获取目标对象的音频,或者通过视频采集设备获取目标对象的视频两种方式)。当采用文本交互方式时,服务器可以将通过文本交互方式输入的文本数据作为目标对象的第一交互数据。当采用音视频交互方式时,服务器可以从音视频数据中提取音频数据,并对音频数据进行自动语音识别处理,得到待处理文本,再将待处理文本作为目标对象的第一交互数据。
在一实施例中,每个对象唯一对应一个虚拟对象,那么上述方法中第一终端设备还可以包括以下步骤。
(1)、获取目标对象的目标对象标识。
(2)、创建目标对象对应的初始化视频流,目标对象标识对应唯一一个初始化视频流,初始化视频流携带虚拟对象标识,初始化视频流以虚拟人物的形式展现
(3)、将目标对象标识与虚拟对象标识的对应关系存入数据库。
通过上述,便于服务器通过目标对象标识快速从数据库中获取与目标对象标识匹配的虚拟对象标识所对应的视频流,提高数据流推送效率,保证对象良好的观感体验。
请参见图3,该图是本申请提供的一种基于虚拟对象的数据展示方法的界面示意图。该图对应的场景为对象浏览产品时的界面示意图,图中包括产品详情页(此时对象浏览的是官方商城页面中的首页页面,官方商城页面中还包括会员福利页面、折扣专区页面)。在首页页面中,包括目标物品(即2022新款商务笔记本)、立即购买控件、参数详情控件等。当对象浏览到该页面时,将在该页面中的某一区域(例如右下角)展示虚拟对象与对象进行动作展示、语音播报等互动。
本申请的有益效果如下:
本申请提出了一种在对象浏览页面展示虚拟对象的产品形态,该虚拟对象可以通过输出第一视频流的方式与对象进行互动,相比真实主播在进行直播时具有时限性的痛点,本申请所提出的虚拟对象直播方法可以随时随地的与对象进行交互。本申请的虚拟对象可以是显示在第一页面中的一个虚拟角色,该虚拟角色可以向目标对象进行动作展示、语音播报等互动,使得目标对象在查看目标物品的过程中,通过虚拟对象直观形象的介绍了解目标物品,激发目标对象的兴趣,提升交互的趣味性和体验感。虚拟对象可以实现与目标对象进行实时的语音交流,为目标对象带来贴心的陪伴式购物体验,拉进对象距离,从而提高对象的转化率。其中,第一视频流是基于对象与虚拟对象之间针对目标物品的第一交互数据确定的,使得虚拟对象可以在对象浏览的当前页面,根据对象的诸如语音等交互数据进行实时的反馈,直接与对象进行互动,从而与目标物品进行更好的结合。并且,第一视频流可以包括动作数据和语音数据,利用虚拟对象通过语音、动作等方式与目标对象进行实时交互,进一步提升了目标对象的体验感。
本申请还提出可以在第一终端设备上通过页面参数确定虚拟角色的展示区域,并可以通过点击虚拟对象并进行拖动的方式,调整虚拟对象在第一页面的展示位置,通过上述方法可以灵活的调整虚拟对象的展示位置以避免遮挡第一页面中的关键信息,提高了对象的浏览体验。对象可以对虚拟对象的展示形象(例如卡通人的形象、卡通猫的形象等)、虚拟对象的属性(例如虚拟对象展示区域的大小、虚拟对象的透明度、虚拟对象的声音、虚拟对象静音与解除静音等)进行设置,从而为对象带来个性化的观感体验,提升趣味性。
本申请还提出通过设置虚拟对象唤起条件,降低在常规环境下虚拟对象的出场率,从而降低了服务器的运算压力,同时也保证了虚拟对象能够在诸如对象有意向的情况下与意向对象进行有效互动,提高对象转化率。并且,管理员还可以通过自定义规则进行个性化配置,提高了配置虚拟对象唤起条件的灵活性,从而达到虚拟对象在唤起后能够与意向对象进行有效互动,进一步提高对象转化率。
本申请还提出,由虚拟对象输出与目标物品相关的用以进行出场过渡的初始化视频流,以使得虚拟对象主动与对象进行互动,以便于为对象打开话题,拉进对象关系,从而引导对象深入地了解目标物品。虚拟对象可以选择使用动作和语音中的一种或多种与对象进行交流,提高了虚拟对象交互方式的可选择性。并且,对象可以选择通过语音或者文本与虚拟对象进行交流,提高了对象交互方式的可选择性。
本申请还提出,当虚拟对象无法回答对象问题时,通过留言的方式利用客服解决虚拟对象未能解答的内容,提高解答的成功率,从而提高对象的转换率。并且,在留言过程中,留言可以是对象主动输入的,也可以是基于对象的第一交互数据由服务器自动生成作为参考的。对象可对上述自动生成的内容进行修改,从而更加清晰的表明观点,以便于服务器推送更加准确的应答信息。本申请还提出将目标对象标识与虚拟对象标识的对应关系存入数据库,便于服务器通过目标对象标识快速从数据库中获取与目标对象标识匹配的虚拟对象标识所对应的视频流,提高数据流推送效率,从而保证对象良好的观感体验。
请参阅图4,图4是本申请一个示例性实施例提供的一种数据展示方法的流程示意图,以该方法应用于服务器(指代图1C中的服务器102)为例进行说明,该方法可包括以下步骤:
S401、接收第一终端设备发送的目标对象与虚拟对象之间针对目标物品的第一交互数据,第一终端设备显示有第一页面,第一页面包括虚拟对象和目标物品。
S402、基于第一交互数据确定虚拟对象的第一视频流,第一视频流包括动作数据和语音数据中的一种或两种。
在一实施例中,上述基于第一交互数据确定虚拟对象的第一视频流可以通过以下步骤实现。
(1)、对第一交互数据进行语音识别处理和语义识别处理,得到识别结果。
在一实施例中,第一交互数据可以是第一终端设备获取到的目标对象的语音,服务器首先通过语音识别处理将获取到的目标对象的语音转换为文本数据。但是该语音对应的文本数据中可能会存在重复、冗余、歧义的部分(例如:“没事的,感谢感谢,没事的”),因此,服务器再对文本数据进行语义识别处理,用以获取该语音数据的语义(也即是识别结果),通过准确的识别结果进行答复内容的匹配处理,提高目标答复内容的准确度,并且上述方法可以减少知识库中的数据量,提高处理效率。
(2)、从知识库包括的多个候选答复内容中确定与识别结果相匹配的目标答复内容,并根据目标答复内容生成语音数据。
在一实施例中,知识库中包括多个候选答复内容,多个候选答复内容是预先配置的,当获取到第一交互数据对应的识别结果时,即可从预先配置的多个候选答复内容中确定与识别结果相匹配的目标答复内容,再将目标答复内容转换成语音数据,以使得在第一终端设备上由虚拟对象进行播报。
在一实施例中,与识别结果相匹配的目标答复内容的数量可以是多个,当数量为N个时,服务器根据N个目标答复内容生成对应N个目标答复内容的概括性提示语音数据。虚拟对象首先会播报概括性提示语音数据,并根据对象进一步交互选择想要了解的答复内容,生成对应的目标答复内容,以使得在第一终端设备上由虚拟对象进行播报。
示例性的,服务器确定出与识别结果相匹配的两个目标答复内容包括:[店铺促销活动,满两百减五十]和[该商品目前为七折促销],由于此时服务器暂时未判断出对象最想了解的内容,因此可以生成两个目标答复内容对应的概括性提示语音数据[您是想了解店铺优惠,还是商品折扣呢]。当对象交互并选择店铺优惠时,由虚拟对象播报“店铺促销活动,满两百减五十”。通过上述方法,可以提高虚拟对象输出交互内容的准确性,从而提升对象体验。
(3)、从动作库包括的多个候选动作中确定与识别结果相匹配的目标动作,并根据目标动作生成动作数据。
在一实施例中,动作库中包括多个候选动作,多个候选动作可以是管理员预先配置的,当服务器获取到第一交互数据对应的识别结果时,即可从预先配置的多个候选动作中确定与识别结果相匹配的目标动作,再根据目标动作确定动作数据,以使得在第一终端设备上由虚拟对象执行动作数据指示的动作(即执行目标动作)。
(4)、根据语音数据和动作数据确定虚拟对象的第一视频流,其中,语音数据用于控制虚拟对象播报目标答复内容,动作数据用于控制虚拟对象在第一页面中执行动作数据指示的动作。
在一实施例中,第一视频流可以包括动作数据,或者包括语音数据,或者包括动作数据和语音数据,提高了虚拟对象表现形式的丰富度。当第一视频流只包括动作数据时,虚拟对象可以通过动作数据在第一页面中执行动作数据指示的动作;当第一视频流只包括语音数据时,虚拟对象可以通过语音数据播报语音数据中的答复内容(此时虚拟对象的动作保持为在接收到第一数据流之前的状态);当第一视频流包括动作数据和语音数据时,虚拟对象可以在第一页面中执行动作数据指示的动作,并播报语音数据。通过动作和语音的结合,为对象带来生动形象的互动体验。
需要说明的是,上述多个候选答复内容、多个候选动作需要管理员在第二终端设备上进行配置。
请参见图5A,该图为管理员在第二终端设备上配置候选答复内容的界面示意图。管理员可以通过在该界面配置虚拟对象进行交互时的话术,用于在不同场景中和对象进行交流。图中包括问题编号(例如1、2、3、4……)以及问题编号所对应的表述方法(例如编号为1的问题的表述方法为“订单发货时间”,编号为6的问题的表述方法为“店铺活动”,编号为7的问题的表述方法为“发票丢失重开”)。当管理员点击问题编号或者对应的表述方法,即可对详细的答复内容进行查看、修改、删除、排版等操作。例如当管理员点击“店铺活动”时,服务器可以在配置候选答复内容的界面之上生成一个弹窗,该弹窗中包括答复内容(例如“店铺活动,JNBY微商城特卖会,活动预热时间为:11月1日-11月11日,[分享领券]邀请3人好友助力领券……”)以及多个功能控件(例如修改、删除、排版等功能控件),管理员可以通过点击任意功能控件进行相应的编辑操作。
需要说明的是,该图中“表述方法”列表中的内容可以指上述概括性提示语音数据,用于虚拟对象简要的提示对象;该图中“表述方法”对应的详细的答复内容可以指完整的目标答复内容,用于虚拟对象进行完整播报内容。
请参见图5B,该图为管理员在第二终端设备上配置候选动作的界面示意图。管理员可以通过在该界面配置虚拟对象进行交互时的动作,用于在不同场景中为对象进行动作展示。图中包括默认动作库(即服务器提供给管理员的动作库)和自定义动作库(即管理员自主配置的动作库)。在默认动作库和自定义动作库中,包括多个场景下的动作集合,例如入退场场景等。在每个场景中,包括多个不同表现形式的虚拟对象动作图像(例如,包括播报挥手1、播报挥手2、无播报挥手1、无播报挥手2等虚拟对象动作图像),以便于管理员进行直观地预览。当管理员点击虚拟对象动作图像,即可对详细的参数信息进行查看,以及对该动作进行编辑等操作。
S403、向第一终端设备发送第一视频流,以使得第一终端设备在第一页面中通过虚拟对象输出第一视频流。
在一实施例中,为了能够在特定条件下由第一终端设备向目标对象展示虚拟对象,服务器还可以包括以下步骤。
(1)、从第一终端设备获取目标对象的特征信息,特征信息包括对象标签、历史访问记录、对第一页面的访问信息中的一种或多种。
本申请实施例中,目标对象的特征信息可以是第一终端设备于第一页面采集得到的,或者由第一页面采集并发送给终端设备的。特征信息可以包括对象标签、历史访问记录、对第一页面的访问信息中的一种或多种。对象标签可以包括目标对象的属性,例如年龄、性别、所处区域等;历史访问记录可以包括目标对象的以前浏览的页面等;对第一页面的访问信息可以包括目标对象在第一页面的停留时长、访问总时间、访问次数、目标对象在第一页面的点击区域以及点击区域被点击的点击次数、第一页面的访问页面信息等。
(2)、确定目标对象的特征信息是否满足虚拟对象唤起条件,虚拟对象唤起条件是基于通过第二终端设备展示的配置界面输入的配置数据确定的。
本申请实施例中,第一终端设备向服务器发送目标对象的特征信息,服务器可以判断目标对象的特征信息是否满足虚拟对象唤起条件。第二终端设备是管理对象(即管理员)所在的终端设备,管理员通过第二终端设备可以预先配置虚拟对象唤起条件。
(3)、在目标对象的特征信息满足虚拟对象唤起条件的情况下,向第一终端设备发送的图像渲染数据,图像渲染数据用于在第一页面中展示虚拟对象。
本申请实施例中,当服务器判断目标对象的特征信息满足虚拟对象唤起条件时,服务器向第一终端设备发送图像渲染数据,第一终端设备通过接收到的图像渲染数据在第一页面中展示虚拟对象。需要说明的是,图像渲染数据是视频流(直播流)形式的数据,以使得展示在第一页面上的虚拟对象是连续变化的(可以理解为第一终端设备在获取到图像渲染数据时,在第一页面上的虚拟对象以一段视频进行连续的播放);当第一终端设备接收到服务器发送的后续视频流数据时(例如第一视频流),通过第一页面的前端渲染引擎可以驱动虚拟对象执行后续视频流数据所指示的动作或播报语音。
通过上述方法灵活设置虚拟对象唤起条件,以使得虚拟对象可以在特定的场景或者业务环境中被触发。该方法可以降低在常规环境下虚拟对象的出场率,从而降低了服务器的运算压力,同时也保证了虚拟对象能够在诸如对象有意向的情况下与意向对象进行有效互动,提高对象转化率。
在一实施例中,服务器还可以包括以下步骤。
(1)、确定第二视频流。
(2)、向第一终端设备发送第二视频流,以使得第一终端设备通过虚拟对象输出第二视频流,第二视频流为与目标物品相关的初始化视频流。
本申请实施例中,第二视频流为服务器通过获取第一页面的页面信息,生成的与目标物品相关的用以进行出场过渡的初始化视频流,通过虚拟对象输出第二视频流,以使得虚拟对象主动与对象进行互动,以便于为对象打开话题,拉进对象关系,从而引导对象深入地了解目标物品,提高对象转化率。
在一实施例中,当目标对象对第一页面(例如商品页面)进行访问时,通过虚拟对象输出第二视频流(例如,虚拟对象挥动双手,然后说:“您好啊,你看的这件商品最近正在八折促销,需要进一步了解一下它的参数吗”)。第二视频流可以是用于虚拟对象展示出场动画,并主动与目标对象进行交互。
在一实施例中,第一视频流是由服务器通过第一交互数据确定得到的,那么服务器还可以包括以下步骤。
(1)、从第一终端设备获取目标对象与虚拟对象之间针对目标物品的第一交互数据。
(2)、基于第一交互数据确定第一视频流。
(3)、向第一终端设备发送的第一视频流。
本申请实施例中,第一交互数据是由目标对象在第一终端设备与虚拟对象交互所产生的。例如目标对象对虚拟对象交流所产生的语音数据,或者目标对象输入的文本数据。第一视频流为服务器基于第一交互数据,从知识库中获取到的用于回应第一交互数据的回应数据,该回应数据通过虚拟对象以动作和语音等方式进行展现。上述方法使得对象可以选择通过语音或者文本与虚拟对象进行交流,提高了对象交互方式的可选择性。
在一实施例中,由于服务器可能无法从知识库中获取到与第一交互数据相匹配的视频流(此时,表示虚拟对象无法对目标对象所产生的第一交互数据进行答复),那么在上述接收服务器发送的第一视频流的过程中,还可以包括以下步骤。
(1)、获取第一终端设备发送的目标对象通过信息录入区域录入的留言信息和目标通讯方式。
(2)、确定留言信息对应的应答信息,并通过目标通讯方式向目标对象对应的第一终端设备发送应答信息。
本申请实施例中,信息录入区域用于目标对象输入留言信息(例如虚拟对象未能解答的内容)和目标通讯方式(例如,通过短信方式回复、通过电话方式答复等)。服务器根据留言信息确定对应的应答信息,并通过目标通讯方式向目标对象对应的第一终端设备发送应答信息。
其中,步骤S201-S203以第一终端设备为例对第一终端设备与服务器的交互进行了说明,步骤S401-S403以服务器为例与第一终端设备进行交互,具体实施方式参见前述实施例中步骤S201~S203的相关描述,此处不再赘述。
在一实施例中,上述第一页面包括虚拟对象,虚拟对象是由服务器在目标对象的特征信息满足虚拟对象唤起条件时生成的,图像渲染数据用于在第一终端设备上的第一页面中展示虚拟对象。那么上述方法中服务器还可以包括以下步骤。
(1)、接收第一终端设备发送的目标对象的特征信息,特征信息包括对象标签、历史访问记录、对第一页面的访问信息中的一种或多种。
(2)、若目标对象的特征信息满足虚拟对象唤起条件,则向第一终端设备发送图像渲染数据,图像渲染数据用于第一终端设备在第一页面中展示虚拟对象。
其中,上述步骤(1)-(2)的具体实施方式参见前述实施例中第一终端设备为了在特定条件下向目标对象展示虚拟对象的方法(即本申请步骤S202中实施例的相关描述),此处不再赘述。
在一实施例中,针对不同的对象,服务器可以生成相匹配的虚拟对象。那么上述方法中服务器还可以包括以下步骤。
(1)、从虚拟对象库中确定与目标对象的特征信息相匹配的虚拟对象。
(2)、生成虚拟对象的图像渲染数据。
在一实施例中,目标对象的特征信息可以包括对象标签、历史访问记录、对第一页面的访问信息中的一种或多种。相匹配的虚拟对象可以是虚拟对象的形象(例如男性形象或女性形象,又如夏装或冬装,又如长发或短发等)。虚拟对象库中存储有不同形象的虚拟对象,服务器可以从虚拟对象库中包括的多个候选虚拟对象中确定与目标对象的特征信息相匹配的虚拟对象,再生成虚拟对象的图像渲染数据,以使得在第一终端设备上以与目标对象的特征信息相匹配的虚拟对象进行展示。
示例性的,目标对象的特征信息包括[女性]、[青年],那么服务器可以根据上述特征信息,从虚拟对象库中确定一个形象为女性青年的虚拟对象。
在一实施例中,服务器还可以通过结合目标对象的特征信息和扩展信息,联合确定匹配的虚拟对象。示例性的,对象浏览的页面为服装页面,服务器通过[女性]、[青年]特征信息,并结合[当前的季节为夏季]这一扩展信息,从虚拟对象库中确定一个形象为穿着短裙的女性青年的虚拟对象,从而为对象带来更加符合实际情况的陪伴式购物体验,并为对象提供购买思路,从而提高对象转化率。
需要说明的是,上述服务器通过结合目标对象的特征信息和扩展信息联合确定匹配的虚拟对象的思路,也可用于服务器确定用于与对象进行交互的视频流(例如第一视频流、第二视频流等)的相关步骤中,本申请不再赘述。
在一实施例中,虚拟对象唤起条件需要管理员预先配置,那么上述方法中服务器还可以包括以下步骤。
(1)、接收第二终端设备发送的用于唤起虚拟对象的配置数据,配置数据是通过第二终端设备展示的配置界面输入的,配置界面包括一个或多个配置区域,每个配置区域用于配置一种虚拟对象的唤起规则。
(2)、基于配置数据确定虚拟对象唤起条件。
其中,第二终端设备为管理员进行配置操作时所在的终端设备。
在一实施例中,一种虚拟对象的唤起规则是一个允许虚拟对象出场展示的规则,一种虚拟对象的唤起规则中可以包括一个或多个子条件。例如管理员可以将对象访问第一页面作为一种虚拟对象的唤起规则(此时子条件为一个,即对象访问第一页面);管理员也可以将对象访问第一页面,并且停留时间超过预设值作为一种虚拟对象的唤起规则(此时子条件为两个,即对象访问第一页面,以及停留时间超过预设值);
请参见图5C,该图为配置虚拟对象唤起条件的界面示意图。管理员可以通过在该界面配置虚拟对象唤起条件,用于确定虚拟对象在不同场景中的触发时机。图中包括两个区域,效果预览区域和虚拟对象唤起规则配置区域。
在效果预览区域中展示虚拟对象,管理员可以在虚拟对象唤起规则配置区域配置虚拟对象唤起规则,在配置后点击快速创建控件以确认配置完成,服务器即可根据管理员输入的配置数据配置虚拟对象唤起规则。配置界面包括多个配置区域,每个配置区域用于配置一种虚拟对象的唤起规则,例如促销引导规则(例如,针对地域来自X市的访客)、咨询引导规则(例如,针对来访次数大于3次的访客)、自定义规则等。
其中,促销引导规则和咨询引导规则是服务器预先设置好条件类型的唤起规则,对象只需要对设置好的条件类型进行配置即可(例如,在促销引导规则中服务器设置好了条件类型为【访问地域】,管理员只需要配置【访问地域】为X市即可)。当管理员点击自定义规则可以自由选择条件类型,并进行配置。例如,管理员选择条件类型【来访时间段】,并配置9:00-21:00(此时表示虚拟对象的其中一条触发条件是来访时间段为9:00-21:00);管理员选择条件类型【客户类型】,并配置会员(此时表示虚拟对象的其中一条触发条件是客户类型为会员),上述为管理员已添加的条件类型,管理员可以通过编辑控件编辑已添加的条件类型。管理员未添加的条件类型还可以包括【访问地域】、【性别】等,管理员可以通过添加控件添加未添加的条件类型,并进行相关配置。通过上述自定义规则,提高了配置虚拟对象唤起条件的灵活性,从而使得虚拟对象能够在诸如有意向的情况下被触发,并与意向对象进行有效互动,从而提高对象转化率。
下面将结合一个对象浏览产品详情页的具体场景,进行说明。对象在浏览产品详情页的时候,根据之前配置的触发机制(即虚拟对象唤起条件)被触发后,进行展示并且发起互动。例如,触点配置项为:客户浏览到首页,数字人将出现并向对象打招呼,具体话术和动作配置项为:数字人挥动左手,并说:“你好,有什么可以帮助您的,我们推出的新产品可以有效延缓衰老”。对象问:“含有什么成分”,具体话术和动作配置项为:数字人挥动右手并指向产品图片说:“他含有A成分和B成分,可以起到延缓衰老的作用”。上述过程可以通过预先配置达到多轮问答。通过与企业的商品信息数据库打通,以精准定位和匹配的方式向对象介绍商品卖点,例如介绍适合的肤质、用法用量、产品搭配等,打造比真人客服更贴心更直接的陪伴式购物体验。
基于上述实施例中提供的方法,本申请结合数字人(用于输出动作和语音交互的虚拟对象)和问答机器人(用于确定答复内容的机器人),构建了一个数字人(虚拟对象)直播系统。具体的,本系统结合数字人、接待组件WPA、问答机器人的能力,可以让数字人对当前产品进行解说,并且和客户可以进行交互问答。从简单的文字展示加入音视频的数字人互动展示,增加了对象在页面(例如商品详情页)的转化率,并提升的产品介绍过程中的交互体验。下面将结合数字人(虚拟对象)直播系统对本申请提出的方法进行进一步说明。
请参见图5D,该图为数字人(虚拟对象)直播系统的框架图。本方案基于触点定义和对象与对话机器人(例如一问一答机器人,或一问多答机器人)进行交互。其中,触点定义是指预设的虚拟对象唤起条件;对象通过语音进行交互,在此过程中,系统通过自动语音识别技术将对象的语音转化为对应的文本,再由对话机器人通过自然语言处理语义识别技术等处理(例如进行关键词或动作的识别),以便于对话机器人根据识别结果从知识库中匹配答案。对话机器人再将识别结果发送数字人,以便于数字人进行对应的处理(例如,配置样式、动作等)。其中,数字人样式至少包括2D数字人或3D数字人。当数字人为2D数字人时,采用JS对象简谱(JavaScript Object Notation,JSON)方式进行数据交互;当数字人为3D数字人时,采用推流方式(指将采集阶段封包好的内容传输到服务器)进行数据交互。
本方案可以在web上实现,技术落实在产品页面介绍与直播互动上,能够灵活地在各大操作系统和平台展示。请参见图5E,该图是本申请提出的数字人(虚拟对象)直播系统的前端架构图,其中包括产品页面、会话模块、留言页面和留言模块。
在前端的产品页面中,包括获取文本消息功能模块和数字人功能模块。文本消息功能模块中包括接入逻辑、界面渲染、历史消息、录音及渲染、顺序及去重(对对象输入的文本消息进行预处理)、文本消息渲染等功能。在数字人功能模块中包括多种数字人业务功能,例如创建数字人失败时进行回退、对消息列表和输入状态的UI界面进行修改、对录音与视频静音的交互进行修改(例如当对象进行语音输入时对数字人进行静音处理)、添加视频流等功能。在产品页面中,通过文本消息功能模块创建数字人,文本消息功能模块通过文本消息的方式与websocket通信协议(一种在单个TCP连接上进行全双工通信的协议)建立联系。在会话模块中,包括两种交互方法(通过人工进行交互,以及通过机器人进行交互),任一种交互方法都可以通过数字人标识确定唯一对应的数字人。产品页面可以利用websocket通信协议通过文本消息的方式与会话模块进行数据交互,在会话模块中的数字人可以通过直播流的方式获取预先配置的已添加的视频流并进行交互展示。
在前端的留言页面中,包括获取配置数据、前端规则校验、渲染表单、后端校验(成功或失败)等功能;在留言页面对应的留言模块中,包括表单配置、留言保存、校验手机等功能。留言页面通过前端数据交互方式(Asynchronous Javascript And XML,ajax)与留言模块进行数据交互(例如进行表单获取和提交)。对象可以在产品页面通过点击弹出的方式触发留言页面,并通过留言页面给客服留言,以使得通过客服解决问答机器人未能回答的问题。
本方案通过websocket与后端进行通信,将文本消息或者动作发送给后端,后端再传递给数字人服务进行文本分析,最后得出对应的动作视频流来驱动前端数字人。因此,后端需要配合前端发送的动作去调用数字人服务,来驱动前端获取最新的视频流以进行展示。
请参见图5F,该图是本申请提出的数字人(虚拟对象)直播系统的后端架构图,本架构的主体包括对象浏览器、系统前端、客服后台、机器人后台、对话机器人和数字人服务。
系统前端为数字人(虚拟对象)直播系统的前台部分,通过运行在PC端、移动端等浏览器上展现给对象浏览的网页;客服后台为客服的管理后台,客服可以通过人工客服的形式为对象进行在线解答;机器人后台为管理对话机器人的管理后台,对话机器人通过智能化对话机器人的形式为对象进行在线解答(机器人后台主要用于管理知识库,包括词、答案等);对话机器人可以看做是上述智能化对话机器人(对话机器人主要用于从知识库中进行问答的答案匹配);数字人服务可以看作是本申请中用于在产品页面进行视频展示、语音播报的虚拟对象。关于对话机器人和数字人服务可以理解为,对话机器人主要负责交互过程中的答案匹配、数据计算等部分,数字人服务主要负责交互过程中的结果展示部分。
其中,本架构的中的对象浏览器和系统前端可以看作是一个整体,即前端。客服后台、机器人后台、对话机器人和数字人服务可以看作是一个整体,即后台。数字人服务可以包括前端部分和后台部分,数字人服务的前端部分可以包括在上述前端中,数字人服务的后端部分可以包括在上述后端中。
具体的,对象浏览器可以通过预配置的触点(即数字人的触发条件)触发数字人的接待组件(WPA),与后台建立连接(在此过程中,系统前端通过公共网关接口CGI在客服后台欲创建数字人,客服后台在校验配置后通过调用数字人服务创建数字人)。客服后台会获取到由数字人服务返回的携带数字人标识的视频流链接,并将视频流链接返回给系统前端,以及将数字人标识进行缓存;系统前端再通过调用浏览器打开视频流链接,以实现在对象浏览器的页面中展示数字人。当后续需要创建机器人时,通过系统前端创建机器人会话,并将数据发送给客服后台,再由客服后台将数据发送给机器人后台,最后由机器人后台在对话机器人创建会话。当系统前端发送消息时,系统前端首先与客服后台交互(发送c2b消息),客服后台再与机器人后台交互,机器人后台交互再与对话机器人交互,最后由对话机器人判断系统前端发送的消息的答案。
当对话机器人不能回答时,触发留言提示,通过机器人后台、客服后台和系统前端,最终由系统前端执行留言相关操作。在系统前端执行留言相关操作时,与客服后台交互(点击下发留言后台请求),以使得客服后台进行拼装、缓存key等操作。客服后台将留言信息返回给系统前端,并生成留言表单进行缓存。在客服后台将留言信息返回给系统前端后,系统前端与客服后台进行交互(例如点击发送手机验证码),在收到验证码时,向客服后台提交表单,并在客服后台生成留言表单进行缓存后读取表单缓存的数据。客服后台在获取到表单时,校验验证码是否正确,在正确的情况下将留言表单进行存储。
当对话机器人能够回答时,表示机器人命中答案,需要返回给前端时,通过机器人后台和客服后台,并由客服后台判断是否需要进行修改,并进行答案过滤。在上述处理结束后,通过客服后台获取数字人标识可以确定唯一的数字人,使得对话机器人将答案返回给数字人(即前端确认收到文本消息后,将答案发送给数字人,并携带数字人标识)。
在数字人处理阶段,数字人需要缓存数字人标识与视频流链接的关系,在使用时读取关系数据。当数字人接收到客服后台发送的携带数字人标识的答案时,将答案的文本转为对应语音数据,并以语音或者视频的形式推送给对象浏览器(视频流链接)。对象可以通过自动收音的方式输入语音(当停止收音时,将语音数据携带上数字人标识一并发送给数字人),通过系统前端和客服后台,最终实现对象与数字人的实时语音交互。
请参见图5G,该图为数字人(虚拟对象)直播系统的启动流程图。
对象进入产品页面后,前端将根据代码获取到访问者标识(visitorId),并发送给后端,通过后端服务获取数字人的唯一凭证,并根据该凭证订阅到后台中该对象唯一的数字人,同时建立websocket链接进行通信,通过上述方法,完成了数字人的初始化创建(即生成数字人)。当前端获取到对象行为时,通过事件派发模块进行事件上报,将事件发送给后端的数字人模块,并通过数字人模块输出视频流到前端的数字人展示模块,以实现在前端由数字人播放对应的视频流。
当对象在产品页面停留或者触发对应动作时,前端将搜集对象诸如点击行为、停留时长等行为并聚合清洗数据(例如对对象行为中重复、冗余的进行筛除等操作),同时获取诸如对象标签、购买信息等特征信息,将其和数字人唯一凭证发送给后端,后端服务会根据获取到的对象行为和特征信息进行分析,并推送与之对应的数字人视频流,前端再将获取到的动作视频流进行播放即可(在此过程中,前端中的事件派发模块通过对象行为利用websocket通信协议发送给后台用以确定对应的动作视频流,后台在收到数据后会向事件派发模块返回ack确认字符,最终使得后台驱动数字人向前端数字人视频流)。前端可以加以文字等形式辅助展示,达到犹如真人实时讲解的效果。
其中,对象行为可以包括对象标签、进入途径、停留时间、客户库信息、访问次数、历史访问记录、购买信息等。
需要说明的是,对于一些边界情况,例如对象进行了登出,账号进行了替换,或者反复进入页面,此时应该要对数字人的展示进行节流和防抖,或者及时停止该视频流的订阅。以免出现性能、隐私泄露等问题。
基于此,本申请提出的方法还可以包括以下步骤。
(1)、获取目标对象的风险行为信息,风险行为信息包括登出账号行为信息、替换账号行为信息、重复进入产品界面行为信息中的一个或多个;
(2)、当检测到风险行为信息满足虚拟对象关闭条件时,停止展示虚拟对象视频流。
通过上述方法,可以保证提高系统的安全性。
需要说明的是,本申请的本质是通过视频流与对象行为动作相结合,通过动作与视频的对应关系来驱动数字人进行播放展示。除了数字人的形式,将其他动作与其他展示形式相结合起来,也能够进行多元化的展示。例如将本申请中的视频流对应的数字人替换为平面的2D动画,并通过本申请实施例提供的方法利用对象动作行为来驱动对应动画进行诸如上下移动等也能实现对象和2D动画的互动。
需要说明的是,本申请主要是通过获取对象的交互数据并进行分析得到分析结果,并结合对象其他行为来驱动数字人做出对应动作。本申请也可以切换成与对象关联的任何其他信息来驱动数字人做出对应动作。例如,服务器通过结合目标对象的特征信息和扩展信息,联合确定匹配的虚拟对象。示例性的,对象浏览的页面为服装页面,服务器通过[女性]、[青年]特征信息,并结合[当前的季节为夏季]这一扩展信息(即上述对象关联的任何其他信息为对象进行访问时的季节信息),从虚拟对象库中确定一个形象为穿着短裙的女性青年的虚拟对象,从而为对象带来更加符合实际情况的陪伴式购物体验,并为对象提供购买思路,从而提高对象转化率。
本申请的有益效果如下:
本申请中的服务器首先接收对象的第一交互数据;然后基于第一交互数据确定虚拟对象的第一视频流,并向第一终端设备发送第一视频流,以使得第一终端设备输出第一视频流与对象进行交互。在确定第一视频流的过程中,需要对待处理的数据进行语音识别处理和语义识别处理,通过准确的识别结果进行答复内容的匹配处理,提高目标答复内容的准确度,并且上述方法可以减少知识库中的数据量,提高处理效率。
本申请还提出,服务器可以获取与识别结果相匹配的多个目标答复内容,服务器通过生成概括性提示语音数据,并虚拟对象首先播报概括性提示语音数据,并根据对象进一步交互选择想要了解的答复内容,再由服务器确定目标答复内容以用于虚拟对象进行播报。通过上述方法,可以提高虚拟对象输出交互内容的准确性,从而提升对象体验。
本申请还提出,第一视频流可以包括动作数据,或者包括语音数据,或者包括动作数据和语音数据,提高了虚拟对象表现形式的丰富度。当第一视频流包括动作数据和语音数据时,虚拟对象可以在第一页面中执行动作数据指示的动作,并播报语音数据。通过动作和语音的结合,为对象带来生动形象的互动体验。
本申请还提出,针对不同的对象,服务器可以通过分析目标对象的特征信息、结合诸如季节等扩展信息生成相匹配的虚拟对象,从而为对象带来更加符合实际情况的陪伴式购物体验,并为对象提供购买思路,提高对象转化率。通过与企业的商品信息数据库打通,以精准定位和匹配的方式向对象介绍商品卖点,例如介绍适合的肤质、用法用量、产品搭配等,打造比真人客服更贴心更直接的陪伴式购物体验。
本申请中的对象行为可以包括对象标签、进入途径、停留时间、客户库信息、访问次数、历史访问记录、购买信息等等,通过多样化的对象行为维度确定虚拟对象的反馈动作和语音,提高了场景的适用率。本申请还提出对于一些边界情况,例如对象进行了登出,账号进行了替换,或者反复进入页面,此时应该要对数字人的展示进行节流和防抖,或者及时停止该视频流的订阅。以免出现性能、隐私泄露等问题,保证系统的安全性。
请参阅图6,图6是本申请实施例提供的一种数据展示装置的示意框图。其中,该数据展示装置可以为第一终端设备(即目标对象进行操作的设备),具体可以包括:
显示模块601,用于显示第一页面,上述第一页面包括需要被目标对象查看的目标物品;
上述显示模块601,还用于在上述第一页面中展示虚拟对象;
上述显示模块601,还用于通过上述虚拟对象输出第一视频流,上述第一视频流包括动作数据和语音数据中的一种或两种,上述第一视频流是基于上述目标对象与上述虚拟对象之间针对上述目标物品的第一交互数据确定的。
可选的,上述第一视频流包括上述动作数据和上述语音数据,上述显示模块601在用于通过上述虚拟对象输出第一视频流时,具体用于:
控制上述虚拟对象在上述第一页面中执行上述动作数据指示的动作,并控制上述虚拟对象播报上述语音数据。
可选的,在上述第一页面中展示虚拟对象之后,上述显示模块601还用于:
从服务器获取第二视频流;
通过上述虚拟对象输出上述第二视频流,上述第二视频流为与上述目标物品相关的初始化视频流。
可选的,上述显示模块601还用于:
获取上述目标对象的特征信息,上述特征信息包括对象标签、历史访问记录、对上述第一页面的访问信息中的一种或多种;
向服务器发送上述目标对象的特征信息,以使得上述服务器确定上述目标对象的特征信息是否满足虚拟对象唤起条件,上述虚拟对象唤起条件是基于通过第二终端设备展示的配置界面输入的配置数据确定的;
接收上述服务器在上述目标对象的特征信息满足上述虚拟对象唤起条件的情况下,发送的图像渲染数据,上述图像渲染数据用于在上述第一页面中展示虚拟对象。
可选的,上述显示模块601还用于:
获取上述目标对象与上述虚拟对象之间针对上述目标物品的第一交互数据;
向服务器发送上述第一交互数据,以使得上述服务器基于上述第一交互数据确定第一视频流;
接收上述服务器发送的上述第一视频流。
可选的,上述显示模块601还用于:
若在预设时长内未接收到上述服务器发送的上述第一视频流,则在上述第一页面中展示信息录入区域;
获取上述目标对象通过上述信息录入区域录入的留言信息和目标通讯方式;
向上述服务器发送上述留言信息,以使得上述服务器确定上述留言信息对应的应答信息,并通过上述目标通讯方式向上述目标对象对应的第一终端设备发送上述应答信息。
该数据展示装置可以为与第一终端设备进行数据交互的服务器,具体可以包括:
接收模块602,用于接收第一终端设备发送的目标对象与虚拟对象之间针对目标物品的第一交互数据,上述第一终端设备显示有第一页面,上述第一页面包括上述虚拟对象和上述目标物品;
处理模块603,用于基于上述第一交互数据确定上述虚拟对象的第一视频流,上述第一视频流包括动作数据和语音数据中的一种或两种;
上述处理模块603,还用于向上述第一终端设备发送上述第一视频流,以使得上述第一终端设备在上述第一页面中通过上述虚拟对象输出上述第一视频流。
可选的,上述处理模块602还用于:
接收上述第一终端设备发送的上述目标对象的特征信息,上述特征信息包括对象标签、历史访问记录、对上述第一页面的访问信息中的一种或多种;
若上述目标对象的特征信息满足虚拟对象唤起条件,则向上述第一终端设备发送图像渲染数据,上述图像渲染数据用于上述第一终端设备在上述第一页面中展示虚拟对象。
可选的,上述处理模块602还用于:
从虚拟对象库中确定与上述目标对象的特征信息相匹配的虚拟对象;
生成上述虚拟对象的图像渲染数据。
可选的,上述处理模块602还用于:
接收第二终端设备发送的用于唤起虚拟对象的配置数据,上述配置数据是通过上述第二终端设备展示的配置界面输入的,上述配置界面包括一个或多个配置区域,每个配置区域用于配置一种虚拟对象的唤起规则;
基于上述配置数据确定虚拟对象唤起条件。
可选的,上述处理模块602在用于基于上述第一交互数据确定上述虚拟对象的第一视频流时,具体用于:
对上述第一交互数据进行语音识别处理和语义识别处理,得到识别结果;
从知识库包括的多个候选答复内容中确定与上述识别结果相匹配的目标答复内容,并根据上述目标答复内容生成语音数据;
从动作库包括的多个候选动作中确定与上述识别结果相匹配的目标动作,并根据上述目标动作生成动作数据;
根据上述语音数据和上述动作数据确定上述虚拟对象的第一视频流,其中,上述语音数据用于控制上述虚拟对象播报上述目标答复内容,上述动作数据用于控制上述虚拟对象在上述第一页面中执行上述动作数据指示的动作。
需要说明的是,本申请实施例的数据展示装置的各功能模块的功能可根据上述方法实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
请参阅图7,图7是本申请实施例提供的一种计算机设备的示意框图。如图所示的本实施例中的智能终端可以包括:处理器701、存储装置702以及通信接口703。上述处理器701、存储装置702以及通信接口703之间可以进行数据交互。
上述存储装置702可以包括易失性存储器(volatile memory),例如随机存取存储器(random-access memory,RAM);存储装置702也可以包括非易失性存储器(non-volatilememory),例如快闪存储器(flash memory),固态硬盘(solid-state drive,SSD)等;上述存储装置702还可以包括上述种类的存储器的组合。
上述处理器701可以是中央处理器(central processing unit,CPU)。在一个实施例中,上述处理器701还可以是图形处理器(Graphics Processing Unit,GPU)。上述处理器701也可以是由CPU和GPU的组合。
在一个实施例中,上述计算机设备可以为第一终端设备(即目标对象进行操作的设备),上述存储装置702用于存储程序指令,上述处理器701可以调用上述程序指令,执行如下操作:
显示第一页面,上述第一页面包括需要被目标对象查看的目标物品;
在上述第一页面中展示虚拟对象;
通过上述虚拟对象输出第一视频流,上述第一视频流包括动作数据和语音数据中的一种或两种,上述第一视频流是基于上述目标对象与上述虚拟对象之间针对上述目标物品的第一交互数据确定的。
可选的,上述第一视频流包括上述动作数据和上述语音数据,上述处理器701在用于通过上述虚拟对象输出第一视频流时,具体用于:
控制上述虚拟对象在上述第一页面中执行上述动作数据指示的动作,并控制上述虚拟对象播报上述语音数据。
可选的,在上述第一页面中展示虚拟对象之后,上述处理器701还用于:
从服务器获取第二视频流;
通过上述虚拟对象输出上述第二视频流,上述第二视频流为与上述目标物品相关的初始化视频流。
可选的,上述处理器701还用于:
获取上述目标对象的特征信息,上述特征信息包括对象标签、历史访问记录、对上述第一页面的访问信息中的一种或多种;
向服务器发送上述目标对象的特征信息,以使得上述服务器确定上述目标对象的特征信息是否满足虚拟对象唤起条件,上述虚拟对象唤起条件是基于通过第二终端设备展示的配置界面输入的配置数据确定的;
接收上述服务器在上述目标对象的特征信息满足上述虚拟对象唤起条件的情况下,发送的图像渲染数据,上述图像渲染数据用于在上述第一页面中展示虚拟对象。
可选的,上述处理器701还用于:
获取上述目标对象与上述虚拟对象之间针对上述目标物品的第一交互数据;
向服务器发送上述第一交互数据,以使得上述服务器基于上述第一交互数据确定第一视频流;
接收上述服务器发送的上述第一视频流。
可选的,上述处理器701还用于:
若在预设时长内未接收到上述服务器发送的上述第一视频流,则在上述第一页面中展示信息录入区域;
获取上述目标对象通过上述信息录入区域录入的留言信息和目标通讯方式;
向上述服务器发送上述留言信息,以使得上述服务器确定上述留言信息对应的应答信息,并通过上述目标通讯方式向上述目标对象对应的第一终端设备发送上述应答信息。
在一个实施例中,上述计算机设备可以为与第一终端设备进行数据交互的服务器,上述存储装置702用于存储程序指令,上述处理器701可以调用上述程序指令,执行如下操作:
接收第一终端设备发送的目标对象与虚拟对象之间针对目标物品的第一交互数据,上述第一终端设备显示有第一页面,上述第一页面包括上述虚拟对象和上述目标物品;
基于上述第一交互数据确定上述虚拟对象的第一视频流,上述第一视频流包括动作数据和语音数据中的一种或两种;
向上述第一终端设备发送上述第一视频流,以使得上述第一终端设备在上述第一页面中通过上述虚拟对象输出上述第一视频流。
可选的,上述处理器701还用于:
接收上述第一终端设备发送的上述目标对象的特征信息,上述特征信息包括对象标签、历史访问记录、对上述第一页面的访问信息中的一种或多种;
若上述目标对象的特征信息满足虚拟对象唤起条件,则向上述第一终端设备发送图像渲染数据,上述图像渲染数据用于上述第一终端设备在上述第一页面中展示虚拟对象。
可选的,上述处理器701还用于:
从虚拟对象库中确定与上述目标对象的特征信息相匹配的虚拟对象;
生成上述虚拟对象的图像渲染数据。
可选的,上述处理器701还用于:
接收第二终端设备发送的用于唤起虚拟对象的配置数据,上述配置数据是通过上述第二终端设备展示的配置界面输入的,上述配置界面包括一个或多个配置区域,每个配置区域用于配置一种虚拟对象的唤起规则;
基于上述配置数据确定虚拟对象唤起条件。
可选的,上述处理器701在用于基于上述第一交互数据确定上述虚拟对象的第一视频流时,具体用于:
对上述第一交互数据进行语音识别处理和语义识别处理,得到识别结果;
从知识库包括的多个候选答复内容中确定与上述识别结果相匹配的目标答复内容,并根据上述目标答复内容生成语音数据;
从动作库包括的多个候选动作中确定与上述识别结果相匹配的目标动作,并根据上述目标动作生成动作数据;
根据上述语音数据和上述动作数据确定上述虚拟对象的第一视频流,其中,上述语音数据用于控制上述虚拟对象播报上述目标答复内容,上述动作数据用于控制上述虚拟对象在上述第一页面中执行上述动作数据指示的动作。
具体实现中,本申请实施例中所描述的处理器701、存储装置702以及通信接口703可执行本申请实施例图2或图4提供的数据展示方法的相关实施例中所描述的实现方式,也可执行本申请实施例图6提供的数据展示装置的相关实施例中所描述的实现方式,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的方法、装置和系统,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的;例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式;例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
此外,这里需要指出的是:本申请实施例还提供了一种计算机可读存储介质,且计算机可读存储介质中存储有前文提及的数据展示装置所执行的计算机程序,且该计算机程序包括程序指令,当处理器执行上述程序指令时,能够执行前文图2、图4所对应实施例中的方法,因此,这里将不再进行赘述。另外,对采用相同方法的有益效果描述,也不再进行赘述。对于本申请所涉及的计算机可读存储介质实施例中未披露的技术细节,请参照本申请方法实施例的描述。作为示例,程序指令可以被部署在一个计算机设备上,或者在位于一个地点的多个计算机设备上执行,又或者,在分布在多个地点且通过通信网络互连的多个计算机设备上执行,分布在多个地点且通过通信网络互连的多个计算机设备可以组成区块链系统。
根据本申请的一个方面,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备可以执行前文图2、图4所对应实施例中的方法,因此,这里将不再进行赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,上述程序可存储于计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,上述存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random Access Memory,RAM)等。
以上所揭露的仅为本申请的部分实施例而已,当然不能以此来限定本申请之权利范围,本领域普通技术人员可以理解实现上述实施例的全部或部分流程,并依本申请权利要求所作的等同变化,仍属于发明所涵盖的范围。
Claims (15)
1.一种数据展示方法,其特征在于,所述方法包括:
显示第一页面,所述第一页面包括需要被目标对象查看的目标物品;
在所述第一页面中展示虚拟对象;
通过所述虚拟对象输出第一视频流,所述第一视频流包括动作数据和语音数据中的一种或两种,所述第一视频流是基于所述目标对象与所述虚拟对象之间针对所述目标物品的第一交互数据确定的。
2.根据权利要求1所述的方法,其特征在于,所述第一视频流包括所述动作数据和所述语音数据,所述通过所述虚拟对象输出第一视频流,包括:
控制所述虚拟对象在所述第一页面中执行所述动作数据指示的动作,并控制所述虚拟对象播报所述语音数据。
3.根据权利要求2所述的方法,其特征在于,所述在所述第一页面中展示虚拟对象之后,所述方法还包括:
从服务器获取第二视频流;
通过所述虚拟对象输出所述第二视频流,所述第二视频流为与所述目标物品相关的初始化视频流。
4.根据权利要求1-3中任一项所述的方法,其特征在于,所述方法还包括:
获取所述目标对象的特征信息,所述特征信息包括对象标签、历史访问记录、对所述第一页面的访问信息中的一种或多种;
向服务器发送所述目标对象的特征信息,以使得所述服务器确定所述目标对象的特征信息是否满足虚拟对象唤起条件,所述虚拟对象唤起条件是基于通过第二终端设备展示的配置界面输入的配置数据确定的;
接收所述服务器在所述目标对象的特征信息满足所述虚拟对象唤起条件的情况下,发送的图像渲染数据,所述图像渲染数据用于在所述第一页面中展示虚拟对象。
5.根据权利要求1-3中任一项所述的方法,其特征在于,所述方法还包括:
获取所述目标对象与所述虚拟对象之间针对所述目标物品的第一交互数据;
向服务器发送所述第一交互数据,以使得所述服务器基于所述第一交互数据确定第一视频流;
接收所述服务器发送的所述第一视频流。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
若在预设时长内未接收到所述服务器发送的所述第一视频流,则在所述第一页面中展示信息录入区域;
获取所述目标对象通过所述信息录入区域录入的留言信息和目标通讯方式;
向所述服务器发送所述留言信息,以使得所述服务器确定所述留言信息对应的应答信息,并通过所述目标通讯方式向所述目标对象对应的第一终端设备发送所述应答信息。
7.一种数据展示方法,其特征在于,所述方法包括:
接收第一终端设备发送的目标对象与虚拟对象之间针对目标物品的第一交互数据,所述第一终端设备显示有第一页面,所述第一页面包括所述虚拟对象和所述目标物品;
基于所述第一交互数据确定所述虚拟对象的第一视频流,所述第一视频流包括动作数据和语音数据中的一种或两种;
向所述第一终端设备发送所述第一视频流,以使得所述第一终端设备在所述第一页面中通过所述虚拟对象输出所述第一视频流。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
接收所述第一终端设备发送的所述目标对象的特征信息,所述特征信息包括对象标签、历史访问记录、对所述第一页面的访问信息中的一种或多种;
若所述目标对象的特征信息满足虚拟对象唤起条件,则向所述第一终端设备发送图像渲染数据,所述图像渲染数据用于所述第一终端设备在所述第一页面中展示虚拟对象。
9.根据权利要求8所述的方法,其特征在于,所述方法还包括:
从虚拟对象库中确定与所述目标对象的特征信息相匹配的虚拟对象;
生成所述虚拟对象的图像渲染数据。
10.根据权利要求7-9中任一项所述的方法,其特征在于,所述方法还包括:
接收第二终端设备发送的用于唤起虚拟对象的配置数据,所述配置数据是通过所述第二终端设备展示的配置界面输入的,所述配置界面包括一个或多个配置区域,每个配置区域用于配置一种虚拟对象的唤起规则;
基于所述配置数据确定虚拟对象唤起条件。
11.根据权利要求7-9中任一项所述的方法,其特征在于,所述基于所述第一交互数据确定所述虚拟对象的第一视频流,包括:
对所述第一交互数据进行语音识别处理和语义识别处理,得到识别结果;
从知识库包括的多个候选答复内容中确定与所述识别结果相匹配的目标答复内容,并根据所述目标答复内容生成语音数据;
从动作库包括的多个候选动作中确定与所述识别结果相匹配的目标动作,并根据所述目标动作生成动作数据;
根据所述语音数据和所述动作数据确定所述虚拟对象的第一视频流,其中,所述语音数据用于控制所述虚拟对象播报所述目标答复内容,所述动作数据用于控制所述虚拟对象在所述第一页面中执行所述动作数据指示的动作。
12.一种数据展示装置,其特征在于,包括用于实现如权利要求1-6中任一项所述的数据展示方法的模块,或者,包括用于实现如权利要求7-11中任一项所述的数据展示方法的模块。
13.一种计算机设备,其特征在于,包括:处理器、存储装置和通信接口,所述处理器、所述通信接口和所述存储装置相互连接,其中,所述存储装置存储有可执行程序代码,所述处理器用于调用所述可执行程序代码,用以实现如权利要求1-6中任一项所述的数据展示方法,或者,实现如权利要求7-11中任一项所述的数据展示方法。
14.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令被处理器执行,用以实现如权利要求1-6中任一项所述的数据展示方法,或者,实现如权利要求7-11中任一项所述的数据展示方法。
15.一种计算机程序产品,其特征在于,所述计算机程序产品包括计算机程序或计算机指令,所述计算机程序或计算机指令被处理器执行时,用以实现如权利要求1-6中任一项所述的数据展示方法,或者,实现如权利要求7-11中任一项所述的数据展示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210603763.XA CN117014640A (zh) | 2022-05-30 | 2022-05-30 | 数据展示方法、装置、设备、可读存储介质及程序产品 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210603763.XA CN117014640A (zh) | 2022-05-30 | 2022-05-30 | 数据展示方法、装置、设备、可读存储介质及程序产品 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117014640A true CN117014640A (zh) | 2023-11-07 |
Family
ID=88562401
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210603763.XA Pending CN117014640A (zh) | 2022-05-30 | 2022-05-30 | 数据展示方法、装置、设备、可读存储介质及程序产品 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117014640A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117391822A (zh) * | 2023-12-11 | 2024-01-12 | 中汽传媒(天津)有限公司 | 一种汽车营销的vr虚拟现实数字展示方法及系统 |
CN118227009A (zh) * | 2024-04-11 | 2024-06-21 | 北京达佳互联信息技术有限公司 | 基于虚拟形象的物品交互方法、装置及电子设备 |
-
2022
- 2022-05-30 CN CN202210603763.XA patent/CN117014640A/zh active Pending
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117391822A (zh) * | 2023-12-11 | 2024-01-12 | 中汽传媒(天津)有限公司 | 一种汽车营销的vr虚拟现实数字展示方法及系统 |
CN117391822B (zh) * | 2023-12-11 | 2024-03-15 | 中汽传媒(天津)有限公司 | 一种汽车营销的vr虚拟现实数字展示方法及系统 |
CN118227009A (zh) * | 2024-04-11 | 2024-06-21 | 北京达佳互联信息技术有限公司 | 基于虚拟形象的物品交互方法、装置及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20220070121A1 (en) | Method and apparatus to increase personalization and enhance chat experiences on the internet | |
US20190332400A1 (en) | System and method for cross-platform sharing of virtual assistants | |
CN107294837A (zh) | 采用虚拟机器人进行对话交互的方法和系统 | |
US20140122618A1 (en) | User-aided learning chatbot system and method | |
US20020052913A1 (en) | User support apparatus and system using agents | |
CN117014640A (zh) | 数据展示方法、装置、设备、可读存储介质及程序产品 | |
WO2019165877A1 (zh) | 消息推送方法、装置、设备及存储介质 | |
US20140122619A1 (en) | Chatbot system and method with interactive chat log | |
CN113766253A (zh) | 基于虚拟主播的直播方法、装置、设备及存储介质 | |
CN108475282B (zh) | 通信系统和通信控制方法 | |
CN113421143A (zh) | 辅助直播的处理方法、装置及电子设备 | |
CN112929253B (zh) | 一种虚拟形象交互方法和装置 | |
JP2002109361A (ja) | 広告表示方法および広告表示装置 | |
JP7124151B2 (ja) | 電子チャットインタフェースとの対話の改善 | |
CN112152901A (zh) | 一种虚拟形象控制方法、装置及电子设备 | |
CN108595420A (zh) | 一种优化人机交互的方法与系统 | |
CN116600152A (zh) | 虚拟主播直播方法、装置、设备及存储介质 | |
KR20130025277A (ko) | 메신저 서비스를 제공하는 방법 및 그 서버 | |
CN114244793B (zh) | 信息处理方法、装置、设备及存储介质 | |
CN113938697A (zh) | 直播间内的虚拟发言方法、装置及计算机设备 | |
CN101548276A (zh) | 用于嵌入式个性化通信的方法和系统 | |
CN117094690A (zh) | 信息处理方法、电子设备及存储介质 | |
CN116974364A (zh) | 社交互动方法、装置、电子设备、存储介质及程序产品 | |
RU2520394C1 (ru) | Способ распространения рекламных и информационных сообщений в сети интернет | |
KR102275336B1 (ko) | 단말의 메신저를 이용한 광고 방법 및 그 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |