CN116958354A - 一种虚拟现实的营销数字人系统 - Google Patents

一种虚拟现实的营销数字人系统 Download PDF

Info

Publication number
CN116958354A
CN116958354A CN202310999058.0A CN202310999058A CN116958354A CN 116958354 A CN116958354 A CN 116958354A CN 202310999058 A CN202310999058 A CN 202310999058A CN 116958354 A CN116958354 A CN 116958354A
Authority
CN
China
Prior art keywords
user
text
virtual reality
digital
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310999058.0A
Other languages
English (en)
Inventor
周开龙
张玥
刘俊
陈颖辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Qiangtong Intelligent Technology Co ltd
Original Assignee
Shanghai Qiangtong Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Qiangtong Intelligent Technology Co ltd filed Critical Shanghai Qiangtong Intelligent Technology Co ltd
Priority to CN202310999058.0A priority Critical patent/CN116958354A/zh
Publication of CN116958354A publication Critical patent/CN116958354A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • G06T13/403D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/279Recognition of textual entities
    • G06F40/289Phrasal analysis, e.g. finite state techniques or chunking
    • G06F40/295Named entity recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/30Semantic analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0631Item recommendations
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/02Feature extraction for speech recognition; Selection of recognition unit
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L15/18Speech classification or search using natural language modelling

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Business, Economics & Management (AREA)
  • Artificial Intelligence (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Development Economics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种虚拟现实的营销数字人系统,数字人系统的构成包括虚拟现实设备、3D建模和渲染单元、自然语言处理和语音识别单元、交互设计和用户体验单元以及数据分析和个性化推荐单元;自然语言处理和语音识别单元帮助建立的数字人角色理解用户的语言输入,进行自然对话,并作出相应的回应;数据分析和个性化推荐单元通过分析用户的行为和反馈数据,利用数字人对用户进行产品的定制推荐。本发明设计有数据分析和个性化推荐单元,这样在用户进行体验使用时,通过数据分析和个性化推荐单元通过分析用户的行为和反馈数据,利用数字人对用户进行产品的定制推荐,使得用户体验起来更加舒畅。

Description

一种虚拟现实的营销数字人系统
技术领域
本发明涉及虚拟营销领域,特别涉及一种虚拟现实的营销数字人系统。
背景技术
随着元宇宙、数字经济的出现,虚拟数字人的热度在持续高涨,并对营销市场形成了新的范式和格局。品牌将虚拟数字人变成了营销语言,在IP代言、短视频、直播等领域绽放光彩,虚拟数字人营销流行的背后是用户喜好、消费习惯与趋势的变化。
现有的虚拟现实营销数字人是搭载在虚拟现实设备处,其表现的形式多是通过3D模型建立数字人物形象,然后通过数字人物形象进行沉浸式的交互营销,但是现有的营销数字人形式,其营销的方式是固定设置的,即其不能够根据客户的需求进行对应客户需求的个性化设置,在交互营销的体验过程中,用户需要反复的进行初始形式的操作和设定,这样就使得用户需要不断的重复初始加载的内容,使得用户产生疲劳感,这样不利于进行营销活动的进行,同时也使得用户体验更加的繁琐。
发明内容
本发明的目的在于提供一种虚拟现实的营销数字人系统,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:一种虚拟现实的营销数字人系统,所述数字人系统的构成包括:虚拟现实设备、3D建模和渲染单元、自然语言处理和语音识别单元、交互设计和用户体验单元以及数据分析和个性化推荐单元;
所述虚拟现实设备用于提供用户与虚拟环境进行互动的接口;
所述3D建模和渲染单元用于使用计算机图形学技术创建虚拟环境和数字人角色;
所述自然语言处理和语音识别单元用于帮助建立的数字人角色理解用户的语言输入,进行自然对话,并作出相应的回应;
所述交互设计和用户体验单元用于建立数字人角色与用户之间的交互联系,使用户能够与数字人进行互动和沟通;
所述数据分析和个性化推荐单元用于通过分析用户的行为和反馈数据,利用数字人对用户进行产品的定制推荐。
优选的,所述虚拟现实设备包括头戴式显示器、手柄和触控器,所述头戴式显示器用于展示数字人角色和虚拟环境,所述手柄用于交互的操控,所述触控器用于连接交互设计和用户体验单元进行人机体感交互。
优选的,所述3D建模和渲染单元使用计算机图形学技术进行建模、纹理贴图和动画的设计。
优选的,所述自然语言处理和语音识别单元包括自然语言处理模块和语音识别模块,所述自然语言处理模块用于文本分类、命名实体识别、文本摘要、机器翻译、情感分析、问答系统、信息抽取和语义理解;
所述语音识别模块用于语音转文本、语音命令识别和说话人识别。
优选的,所述文本分类是根据文本的内容和特征将其分为不同的类别,所述命名实体识别是识别文本中的人名、地名和机构各类的具体实体,所述文本摘要是根据输入的文本生成摘要,提炼出关键信息,所述机器翻译是将其中一种语言的文本转换为另一种语言的文本,所述情感分析是分析文本中所表达的情绪和情感倾向,所述问答系统是回答用户提出的问题,从知识库或文档中找到相关答案,所述信息抽取是从文本中提取出结构化的信息,包括人名、时间和地点,所述语义理解是理解文本的具体含义和语义关系,包括词义消歧和语义角标注。
优选的,所述语音转文本是将用户的语音输入转换为可解的文本形式,所述语音命令识别是识别特定的语音命令并执行相应的操作,所述说话人识别是通过语音交流的语气和说话方式识别语音信号所对应的说话用户。
优选的,所述交互设计和用户体验单元的表现形式包括导航和布局、可视化设计、反馈和提示、交互元素和操作方式以及响应式设计。
优选的,所述导航和布局是对虚拟环境提供导航和布局,便于用户找到信息和功能,所述可视化设计结合颜色、图标、图片和字体进行界面设计,所述反馈和提示通过动画、弹出窗口和提示信息向用户传达操作结果或提醒用户注意事项,所述交互元素和操作方式结合虚拟现实设备以便用户能够完成任务,所述响应式设计结合虚拟现实设备能够适应不同的屏幕大小和分辨率。
优选的,所述交互设计和用户体验单元结合数据分析和个性化推荐单元进行用于个性化定制,包括人物形象、订单生成需求种类、产品价格区间以及产品货源地。
本发明的技术效果和优点:
本发明设计有数据分析和个性化推荐单元,这样在用户进行体验使用时,通过数据分析和个性化推荐单元通过分析用户的行为和反馈数据,利用数字人对用户进行产品的定制推荐,这样随着用户使用体验的次数增加,所累积的用户行为和反馈数据越多,进而能够更加精准的为用户提供定制推荐,使得用户体验起来更加舒畅。
附图说明
图1为本发明系统组成模块连接示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明提供了如图1所示的一种虚拟现实的营销数字人系统,数字人系统的构成包括虚拟现实设备、3D建模和渲染单元、自然语言处理和语音识别单元、交互设计和用户体验单元以及数据分析和个性化推荐单元;
虚拟现实设备用于提供用户与虚拟环境进行互动的接口;
具体的,虚拟现实设备包括头戴式显示器、手柄和触控器,头戴式显示器用于展示数字人角色和虚拟环境,手柄用于交互的操控,触控器用于连接交互设计和用户体验单元进行人机体感交互。
需要说明的是,头戴式显示器是最常见的虚拟现实设备,用户将其戴在头部,通过显示器将虚拟世界呈现在眼前。例如,Oculus Rift、HTC Vive、Sony PlayStation VR等。手柄/控制器用于与虚拟世界进行交互,可以通过手柄或控制器来操作和控制虚拟环境中的物体和动作。例如,Oculus Touch、HTC Vive控制器等。且在一些体感性强一些的虚拟设备中还配置有追踪设备用于追踪用户的位置和动作,以便在虚拟世界中实现身体的自由移动和交互。例如,追踪摄像头、追踪器等。数据手套/手部追踪器用于追踪用户手部的动作和手势,以实现更真实的手部交互。例如,Leap Motion手部追踪器等。模拟器:用于模拟特定场景或体验,例如飞行模拟器、驾驶模拟器等。全身追踪设备:用于追踪用户全身的动作和姿态,以实现更真实的身体交互。例如,全身追踪服、传感器等。这些设备的组合和使用方式可以根据不同的应用和需求进行调整和定制,以提供更丰富和沉浸式的虚拟现实体验。
3D建模和渲染单元用于使用计算机图形学技术创建虚拟环境和数字人角色;
具体的,3D建模和渲染单元用于使用计算机图形学技术进行建模、纹理贴图和动画的设计。
需要说明的是,计算机图形学技术包括建模和几何处理:包括创建和编辑三维模型的技术,如点、线、曲面和体素的表示方法,以及几何变换、曲线和曲面的生成等。渲染和光照:涉及将三维模型转化为二维图像的过程,包括光照模型、阴影、反射和折射等效果的模拟,以及光线追踪、光栅化和纹理映射等渲染算法。动画和模拟:涉及在时间上对图像进行变化和运动的技术,包括关键帧动画、插值、物理模拟和碰撞检测等。图像处理和合成:包括对图像进行滤波、增强、分割和合成等处理,以及图像压缩和编解码等技术。
自然语言处理和语音识别单元用于帮助建立的数字人角色理解用户的语言输入,进行自然对话,并作出相应的回应;
具体的,自然语言处理和语音识别单元包括自然语言处理模块和语音识别模块,自然语言处理模块用于文本分类、命名实体识别、文本摘要、机器翻译、情感分析、问答系统、信息抽取和语义理解;
进一步的,文本分类是根据文本的内容和特征将其分为不同的类别,命名实体识别是识别文本中的人名、地名和机构各类的具体实体,文本摘要是根据输入的文本生成摘要,提炼出关键信息,机器翻译是将其中一种语言的文本转换为另一种语言的文本,情感分析是分析文本中所表达的情绪和情感倾向,问答系统是回答用户提出的问题,从知识库或文档中找到相关答案,信息抽取是从文本中提取出结构化的信息,包括人名、时间和地点,语义理解是理解文本的具体含义和语义关系,包括词义消歧和语义角标注。
具体的,语音识别模块用于语音转文本、语音命令识别和说话人识别。
进一步的,语音转文本是将用户的语音输入转换为可解的文本形式,语音命令识别是识别特定的语音命令并执行相应的操作,说话人识别是通过语音交流的语气和说话方式识别语音信号所对应的说话用户。
交互设计和用户体验单元用于建立数字人角色与用户之间的交互联系,使用户能够与数字人进行互动和沟通;
具体的,交互设计和用户体验单元的表现形式包括导航和布局、可视化设计、反馈和提示、交互元素和操作方式以及响应式设计。
进一步的,导航和布局是对虚拟环境提供导航和布局,便于用户找到信息和功能,可视化设计结合颜色、图标、图片和字体进行界面设计,反馈和提示通过动画、弹出窗口和提示信息向用户传达操作结果或提醒用户注意事项,交互元素和操作方式结合虚拟现实设备以便用户能够完成任务,响应式设计结合虚拟现实设备能够适应不同的屏幕大小和分辨率。
需要说明的是,良好的交互设计应该能够提供清晰的导航和布局,使用户能够轻松找到所需的信息和功能。例如,使用易于理解和直观的菜单、标签和导航栏,以及合理的页面布局和结构。
虚拟营销系统的界面设计应该具有吸引力和美观性,以吸引用户的注意力并提升用户体验。使用合适的颜色、图标、图片和字体等元素,以及统一的视觉风格和品牌形象,可以增强用户对系统的好感度。
系统应该能够及时给用户提供反馈和提示,以便用户了解他们的操作是否成功或有任何错误。例如,使用动画、弹出窗口、提示信息等方式,向用户传达操作结果或提醒用户注意事项。
虚拟营销系统应该提供易于理解和使用的交互元素和操作方式,以便用户能够快速完成任务。例如,使用明确的按钮、链接和输入框等交互元素,以及简单直观的操作方式,如拖拽、点击和滑动等。
考虑到用户可能使用不同的设备和屏幕尺寸访问虚拟营销系统,良好的交互设计应该能够适应不同的屏幕大小和分辨率,并提供一致的用户体验。
数据分析和个性化推荐单元用于通过分析用户的行为和反馈数据,利用数字人对用户进行产品的定制推荐,以此能够增加营销效果。
具体的,交互设计和用户体验单元结合数据分析和个性化推荐单元进行用户个性化定制,包括人物形象、订单生成需求种类、产品价格区间以及产品货源地。
最后应说明的是:以上所述仅为本发明的优选实施例而已,并不用于限制本发明,尽管参照前述实施例对本发明进行了详细的说明,对于本领域的技术人员来说,其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (9)

1.一种虚拟现实的营销数字人系统,其特征在于,所述数字人系统的构成包括:虚拟现实设备、3D建模和渲染单元、自然语言处理和语音识别单元、交互设计和用户体验单元以及数据分析和个性化推荐单元;
所述虚拟现实设备用于提供用户与虚拟环境进行互动的接口;
所述3D建模和渲染单元用于使用计算机图形学技术创建虚拟环境和数字人角色;
所述自然语言处理和语音识别单元用于帮助建立的数字人角色理解用户的语言输入,进行自然对话,并作出相应的回应;
所述交互设计和用户体验单元用于建立数字人角色与用户之间的交互联系,使用户能够与数字人进行互动和沟通;
所述数据分析和个性化推荐单元用于通过分析用户的行为和反馈数据,利用数字人对用户进行产品的定制推荐。
2.根据权利要求1所述的一种虚拟现实的营销数字人系统,其特征在于,所述虚拟现实设备包括头戴式显示器、手柄和触控器,所述头戴式显示器用于展示数字人角色和虚拟环境,所述手柄用于交互的操控,所述触控器用于连接交互设计和用户体验单元进行人机体感交互。
3.根据权利要求1所述的一种虚拟现实的营销数字人系统,其特征在于,所述3D建模和渲染单元用于使用计算机图形学技术进行建模、纹理贴图和动画的设计。
4.根据权利要求1所述的一种虚拟现实的营销数字人系统,其特征在于,所述自然语言处理和语音识别单元包括自然语言处理模块和语音识别模块,所述自然语言处理模块用于文本分类、命名实体识别、文本摘要、机器翻译、情感分析、问答系统、信息抽取和语义理解;
所述语音识别模块用于语音转文本、语音命令识别和说话人识别。
5.根据权利要求4所述的一种虚拟现实的营销数字人系统,其特征在于,所述文本分类是根据文本的内容和特征将其分为不同的类别,所述命名实体识别是识别文本中的人名、地名和机构各类的具体实体,所述文本摘要是根据输入的文本生成摘要,提炼出关键信息,所述机器翻译是将其中一种语言的文本转换为另一种语言的文本,所述情感分析是分析文本中所表达的情绪和情感倾向,所述问答系统是回答用户提出的问题,从知识库或文档中找到相关答案,所述信息抽取是从文本中提取出结构化的信息,包括人名、时间和地点,所述语义理解是理解文本的具体含义和语义关系,包括词义消歧和语义角标注。
6.根据权利要求4所述的一种虚拟现实的营销数字人系统,其特征在于,所述语音转文本是将用户的语音输入转换为可解的文本形式,所述语音命令识别是识别特定的语音命令并执行相应的操作,所述说话人识别是通过语音交流的语气和说话方式识别语音信号所对应的说话用户。
7.根据权利要求1所述的一种虚拟现实的营销数字人系统,其特征在于,所述交互设计和用户体验单元的表现形式包括导航和布局、可视化设计、反馈和提示、交互元素和操作方式以及响应式设计。
8.根据权利要求7所述的一种虚拟现实的营销数字人系统,其特征在于,所述导航和布局是对虚拟环境提供导航和布局,便于用户找到信息和功能,所述可视化设计结合颜色、图标、图片和字体进行界面设计,所述反馈和提示通过动画、弹出窗口和提示信息向用户传达操作结果或提醒用户注意事项,所述交互元素和操作方式结合虚拟现实设备以便用户能够完成任务,所述响应式设计结合虚拟现实设备能够适应不同的屏幕大小和分辨率。
9.根据权利要求7所述的一种虚拟现实的营销数字人系统,其特征在于,所述交互设计和用户体验单元结合数据分析和个性化推荐单元用于个性化定制,包括人物形象、订单生成需求种类、产品价格区间以及产品货源地。
CN202310999058.0A 2023-08-09 2023-08-09 一种虚拟现实的营销数字人系统 Pending CN116958354A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310999058.0A CN116958354A (zh) 2023-08-09 2023-08-09 一种虚拟现实的营销数字人系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310999058.0A CN116958354A (zh) 2023-08-09 2023-08-09 一种虚拟现实的营销数字人系统

Publications (1)

Publication Number Publication Date
CN116958354A true CN116958354A (zh) 2023-10-27

Family

ID=88460344

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310999058.0A Pending CN116958354A (zh) 2023-08-09 2023-08-09 一种虚拟现实的营销数字人系统

Country Status (1)

Country Link
CN (1) CN116958354A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117391822A (zh) * 2023-12-11 2024-01-12 中汽传媒(天津)有限公司 一种汽车营销的vr虚拟现实数字展示方法及系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117391822A (zh) * 2023-12-11 2024-01-12 中汽传媒(天津)有限公司 一种汽车营销的vr虚拟现实数字展示方法及系统
CN117391822B (zh) * 2023-12-11 2024-03-15 中汽传媒(天津)有限公司 一种汽车营销的vr虚拟现实数字展示方法及系统

Similar Documents

Publication Publication Date Title
JP5616325B2 (ja) ユーザ命令に基づいて表示を変更する方法
US20190369742A1 (en) System and method for simulating an interactive immersive reality on an electronic device
Ha et al. Digilog book for temple bell tolling experience based on interactive augmented reality
US10444876B2 (en) Human-computer interface device and system
Aghajan et al. Human-centric interfaces for ambient intelligence
Kamel et al. Sketching images eyes-free: a grid-based dynamic drawing tool for the blind
Marcos et al. A realistic, virtual head for human–computer interaction
US11048375B2 (en) Multimodal 3D object interaction system
Benoit et al. Audio-visual and multimodal speech systems
CN112673400A (zh) 化身动画
CN116958354A (zh) 一种虚拟现实的营销数字人系统
CN113867531A (zh) 交互方法、装置、设备及计算机可读存储介质
JP2024016167A (ja) マシン相互作用
Turk Moving from guis to puis
Roth et al. An audio-haptic tool for non-visual image representation
Han et al. Connecting users to virtual worlds within MPEG-V standardization
Konanchuk et al. Synesthesia and virtual communication: aesthetic approaches to research
Norwood Digital drawing
Sun The Effect of Avatar Embodiment on Self-presence and User Experience for Sensory Control Virtual Reality System
Valli Natural interaction
US12032728B2 (en) Machine interaction
Nguyen et al. Immersive Technologies: A Critical Success Factor for Modern Retailers
Schäfer Improving Essential Interactions for Immersive Virtual Environments with Novel Hand Gesture Authoring Tools
Bowers et al. Navigation and Devices
Tang et al. A Mirror That Reflects, Augments and Learns

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination