CN111625666A - 一种虚拟景观展示方法及装置 - Google Patents

一种虚拟景观展示方法及装置 Download PDF

Info

Publication number
CN111625666A
CN111625666A CN202010491712.3A CN202010491712A CN111625666A CN 111625666 A CN111625666 A CN 111625666A CN 202010491712 A CN202010491712 A CN 202010491712A CN 111625666 A CN111625666 A CN 111625666A
Authority
CN
China
Prior art keywords
target
information
target users
relation
characteristic information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010491712.3A
Other languages
English (en)
Inventor
孙红亮
揭志伟
王子彬
刘小兵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Sensetime Intelligent Technology Co Ltd
Original Assignee
Shanghai Sensetime Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Sensetime Intelligent Technology Co Ltd filed Critical Shanghai Sensetime Intelligent Technology Co Ltd
Priority to CN202010491712.3A priority Critical patent/CN111625666A/zh
Publication of CN111625666A publication Critical patent/CN111625666A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53Querying
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174Facial expression recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/178Human faces, e.g. facial parts, sketches or expressions estimating age from face image; using age information for improving recognition

Abstract

本公开提供了一种虚拟景观展示方法及装置,包括:获取多个目标用户的关系特征信息;基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息;确定与所述目标关系信息相匹配的虚拟景观,并控制展示装置展示所述虚拟景观。

Description

一种虚拟景观展示方法及装置
技术领域
本公开涉及人工智能技术领域,具体而言,涉及一种虚拟景观展示方法及装置。
背景技术
展馆一般会通过电子屏幕展示动画的形式来对展馆相关的景观进行宣传,为提高展示效果,一般展馆会在电子屏幕中增加与用户之间的交互。然而,相关技术中的交互过程一般是用户手动触发电子屏幕,且不同用户触发电子屏幕所展示的内容是相同的,交互形式和展示内容都较为单一,交互效果较差。
发明内容
本公开实施例至少提供一种虚拟景观展示方法及装置。
第一方面,本公开实施例提供了一种虚拟景观展示方法,包括:
获取多个目标用户的关系特征信息;
基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息;
确定与所述目标关系信息相匹配的虚拟景观,并控制展示装置展示所述虚拟景观。
上述方法中,可以基于多个目标用户的属性特征信息,去匹配多个用户的目标关系信息,然后基于目标关系信息,去展示对应的虚拟景观,实现了多人同时与场馆之间的交互,不同的目标关系信息,对应展示的虚拟景观不同,丰富了交互的方式和展示内容,增强了交互效果。
一种可能的实施方式中,所述多个目标用户的关系特征信息包括以下信息中的至少一种:
分别对应的性别、性别是否相同、分别所属的年龄范围、表情特征匹配度、多个目标用户之间的交互性特征。
一种可能的实施方式中,所述基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息,包括:
将所述多个目标用户的关系特征信息输入至训练的第一神经网络中,得到所述多个目标用户的目标关系信息;其中,所述第一神经网络为基于携带有关系信息标签的样本关系特征信息训练得到的。
一种可能的实施方式中,所述获取多个目标用户的关系特征信息,包括:
在检测到相距设定距离范围内的多个目标用户的图像的情况下,基于所述多个目标用户的图像,确定所述多个目标用户的关系特征信息。
一种可能的实施方式中,所述基于所述多个目标用户的图像,确定所述多个目标用户的关系特征信息,包括:
获取包括所述多个目标用户的连续多张图像;
将所述连续多张图像输入至训练的第二神经网络中,提取所述关系特征信息;其中,所述第二神经网络为基于携带有关系特征信息标签的样本图像训练得到的。
一种可能的实施方式中,所述基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息,包括:
基于预先设置的映射关系库,查找与所述多个目标用户的关系特征信息匹配的目标关系信息。
一种可能的实施方式中,确定与所述目标关系信息相匹配的虚拟景观,包括:
从各类关系信息与虚拟景观之间的映射关系库中,确定与所述目标关系信息相匹配的目标虚拟景观;其中,不同的虚拟景观对应的虚拟景物类型和/或展示效果不同。
一种可能的实施方式中,控制展示装置展示所述虚拟景观,包括:
在与所述目标关系信息相匹配的虚拟景观为多个的情况下,将匹配的多个虚拟景观进行轮流展示、或者在所述展示装置的不同的位置区域分别进行展示。
第二方面,本公开实施例还提供一种虚拟景观展示装置,包括:
获取模块,用于获取多个目标用户的关系特征信息;
确定模块,用于基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息;
控制模块,用于确定与所述目标关系信息相匹配的虚拟景观,并控制展示装置展示所述虚拟景观。
一种可能的实施方式中,所述多个目标用户的关系特征信息包括以下信息中的至少一种:
分别对应的性别、性别是否相同、分别所属的年龄范围、表情特征匹配度、多个目标用户之间的交互性特征。
一种可能的实施方式中,所述确定模块在,在基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息时,用于:
将所述多个目标用户的关系特征信息输入至训练的第一神经网络中,得到所述多个目标用户的目标关系信息;其中,所述第一神经网络为基于携带有关系信息标签的样本关系特征信息训练得到的。
一种可能的实施方式中,所述获取模块,在获取多个目标用户的关系特征信息时,用于:
在检测到相距设定距离范围内的多个目标用户的图像的情况下,基于所述多个目标用户的图像,确定所述多个目标用户的关系特征信息。
一种可能的实施方式中,所述获取模块,在基于所述多个目标用户的图像,确定所述多个目标用户的关系特征信息时,用于:
获取包括所述多个目标用户的连续多张图像;
将所述连续多张图像输入至训练的第二神经网络中,提取所述关系特征信息;其中,所述第二神经网络为基于携带有关系特征信息标签的样本图像训练得到的。
一种可能的实施方式中,所述确定模块,在基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息时,用于:
基于预先设置的映射关系库,查找与所述多个目标用户的关系特征信息匹配的目标关系信息。
一种可能的实施方式中,所述控制模块,在确定与所述目标关系信息相匹配的虚拟景观时,用于:
从各类关系信息与虚拟景观之间的映射关系库中,确定与所述目标关系信息相匹配的目标虚拟景观;其中,不同的虚拟景观对应的虚拟景物类型和/或展示效果不同。
一种可能的实施方式中,所述控制模块,在控制展示装置展示所述虚拟景观时,用于:
在与所述目标关系信息相匹配的虚拟景观为多个的情况下,将匹配的多个虚拟景观进行轮流展示、或者在所述展示装置的不同的位置区域分别进行展示。
第三方面,本公开实施例还提供一种计算机设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当计算机设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行上述第一方面,或第一方面中任一种可能的实施方式中的步骤。
第四方面,本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述第一方面,或第一方面中任一种可能的实施方式中的步骤。
为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种虚拟景观展示方法的流程图;
图2示出了本公开实施例所提供的一种第二神经网络的训练方法的流程图;
图3示出了本公开实施例所提供的一种第一神经网络的训练方法的流程图;
图4示出了本公开实施例所提供的一种虚拟景观展示装置的架构示意图;
图5示出了本公开实施例所提供的计算机设备500的结构示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
相关技术中,用户在与展馆之间进行交互时,一般是需要用户用手去触发电子屏幕,且不同用户触发电子屏幕所展示的内容都是相同的,交互形式和展示内容都比较单一,展示效果较差。
基于此,本公开实施例提供了一种虚拟景观展示方法及装置,可以基于多个目标用户的属性特征信息,去匹配多个用户的目标关系信息,然后基于目标关系信息,去展示对应的虚拟景观,实现了多人同时与场馆之间的交互,不同的目标关系信息,对应展示的虚拟景观不同,丰富了交互的方式和展示内容,增强了交互效果。
针对以上方案所存在的缺陷,均是发明人在经过实践并仔细研究后得出的结果,因此,上述问题的发现过程以及下文中本公开针对上述问题所提出的解决方案,都应该是发明人在本公开过程中对本公开做出的贡献。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
为便于对本实施例进行理解,首先对本公开实施例所公开的一种虚拟景观展示方法进行详细介绍,本公开实施例所提供的虚拟景观展示方法的执行主体一般为具有一定计算能力的计算机设备,该计算机设备例如包括:终端设备或服务器或其它处理设备,终端设备可以为用户设备(User Equipment,UE)、移动设备、用户终端、终端、个人数字处理(Personal Digital Assistant,PDA)、计算设备等。
参见图1所示,为本公开实施例提供的一种虚拟景观展示方法的流程图,所述方法包括步骤101~步骤103,其中:
步骤101、获取多个目标用户的关系特征信息。
其中,多个目标用户的关系特征信息可以包括以下信息中的至少一种:
分别对应的性别、性别是否相同、分别所述的年龄范围、表情特征匹配度、多个目标用户之间的交互性特征。
其中,所述表情特征匹配度用于表示所述多个目标用户之间的表情特征之间的关联关系,具体的,在确定多个目标用户的表情特征匹配度时,可以先确定各个目标用户的表情特征,然后基于各个目标用户的表情特征,计算多个目标用户的表情特征匹配度。
所述多个目标用户之间的交互性特征用于表示所述多个目标用户之间产生的交互性动作,例如可以包括牵手、拥抱、搀扶、亲吻、摸头等。
在一种可能的实施方式中,在获取多个目标用户的关系特征信息时,在检测到相距设定距离范围内的多个目标用户的图像的情况下,再基于多个目标用户的图像,确定多个目标用户的关系特征信息。
具体的,可以先采集包括多个目标用户的图像,然后分别确定各个目标用户在图像中的距离,在检测到任意N个目标用户之间的距离,小于设定距离,则确定该N个目标用户的关系特征信息,其中N为正整数,N小于或等于图像中所包含的目标用户的个数。
其中,采集多个目标用户的图像的图像采集装置可以与执行本公开所提供的方法的电子设备连接,其连接方式包括但不仅限于有线连接、无线连接,其中,无线连接例如可以包括蓝牙连接、无线网络连接等。该图像采集装置的位置可以是固定的,因此,该图像采集装置所采集的图像对应的位置区域也是固定的。
进入目标检测区域的用户为目标用户,所述目标检测区域为图像采集装置所采集的图像对应的位置区域。具体实施中,图像采集装置可以实时采集目标检测区域的图像,然后传输至电子设备,电子设备可以实时对图像采集装置所采集的图像进行分析,以检测目标检测区域中是否包含目标用户。
在另外一种可能的实施方式中,目标检测区域中还可以设置红外检测装置,该红外检测装置与电子设备连接,通过红外检测装置检测目标检测区域中是否包含目标用户,当红外装置检测到目标检测区域中包含目标用户时,电子设备可以再控制图像采集装置采集目标检测区域的目标用户的人脸图像。
具体实施中,在基于多个目标用户的图像,确定多个目标用户的关系特征信息时,可以先获取包括多个目标用户的连续多张图像;然后将连续多张图像输入至训练的第二神经网络中,提取关系特征信息。其中,第二神经网络为基于携带有关系特征信息标签的样本图像训练得到的。
具体的,第二神经网络的训练过程可以参照图2所示,包括以下几个步骤:
步骤201、获取样本图像,所述样本图像携带有关系特征信息标签。
其中,所述关系特征信息标签用于表示所述样本图像中的多个目标用户之间的关联关系;所述获取样本图像,包括获取多张连续的样本图像。
步骤202、将所述样本图像输入至第二神经网络中,得到预测关系特征信息。
步骤203、基于预测关系特征信息和关系特征信息标签,计算本次训练过程中的损失值。
步骤204、判断本次训练过程中的损失值是否小于预设损失值。
若判断结果为是,则顺序执行步骤205;
若判断结果为否,则调整本次训练过程中的神经网络的网络参数,并返回执行步骤202。
步骤205、将本次训练过程中应用的神经网络确定为训练好的神经网络。
步骤102、基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息。
所述多个目标用户之间的目标关系信息用来描述多个目标用户之间的关系,示例性的目标关系信息可以包括朋友、情侣、父女、母女、爷孙等关系中的任意一种。
在一种可能的实施方式中,在基于多个目标用户的关系特征信息,确定多个目标用户之间的目标关系信息时,可以将多个目标用户的关系特征信息输入至训练的第一神经网络中,得到多个目标用户的目标关系信息,其中,第一神经网络是基于携带有关系信息标签的样本关系特征信息训练得到的。
具体的,第一神经网络在训练时,可以参照图3所示的方法,包括以下几个步骤:
步骤301、获取样本关系特征信息,所述样本关系特征信息携带有关系信息标签,所述关系信息标签用于描述所述样本关系特征信息对应的用户之间的关系。
步骤302、将样本关系特征信息输入至第一神经网络中,得到预测关系信息。
步骤303、基于关系信息标签和预测关系信息确定本次训练过程中的损失值。
步骤304、判断本次训练过程中的损失值是否小于预设损失值。
若判断结果为是,则顺序执行步骤305;
若判断结果为否,则调整本次训练过程中神经网络的网络参数,并返回执行步骤302。
步骤305、将本次训练过程中的第一神经网络确定为训练好的第一神经网络。
在另外一种可能的实施方式中,在基于多个目标用户的关系特征信息,确定多个目标用户之间的目标关系信息时,还可以基于预先设置的映射关系库,查找与多个目标用户的多个目标用户的关系特征信息匹配的目标关系信息。
预先设置的映射关系库中可以存储有不同的关系特征信息与关系信息之间的映射关系,示例性的,映射关系库中可以存储有如下表1所示的映射表:
表1
Figure BDA0002521317170000101
当检测到两个属于同一年龄分为且性别不同的目标用户,产生了牵手的交互性特征时,则确定这两个目标用户的关系信息为情侣。
步骤103、确定与所述目标关系信息相匹配的虚拟景观,并控制展示装置展示所述虚拟景观。
在一种可能的实施方式中,在确定与目标关系信息相匹配的虚拟景观时,可以从各类关系信息与虚拟景观之间的映射关系库中,确定与目标关系信息相匹配的目标虚拟景观;其中,不同的虚拟景观对应的虚拟景物类型和/或展示效果不同。
示例性的,对于关系信息母女和母子,其对应的虚拟景观可以是康乃馨开放的展示动画,对于关系信息情侣和夫妻,其对应的虚拟景观可以是玫瑰花开放的展示动画等。
另一示例,对于关系信息母女和母子,其对应的虚拟景观可以是小熊跳舞的展示动画,对于关系信息情侣和夫妻,其对应的虚拟景观可以是小熊拥抱的展示动画等。
在与所述目标关系信息相匹配的虚拟景观为多个的情况下,在控制展示装置展示虚拟景观时,可以将匹配的多个虚拟景观进行轮流展示,或者在展示装置的不同位置区域分别进行展示。
其中,所述展示与目标关系信息相匹配的虚拟景观可以是展示虚拟景物的展示动画,或者展示虚拟景物对应的图片,或者展示虚拟景物对应的特效信息。
在另外一种可能的实施方式中,若从图像中检测出多个目标关系信息,例如图像中包括一对母女和一对情侣,则在控制展示装置展示虚拟景观时,可以通过以下方法中的任意一种进行展示:
方法一、按照预先设置的虚拟景观展示优先级的顺序进行展示。
具体的,可以预先设置每种虚拟景观的展示优先级,在图像中检测出多个目标关系信息之后,可以分别确定每一种目标关系信息相匹配的虚拟景观的展示优先级,然后按基于展示优先级对各个目标关系对应的虚拟景观进行排序,并按照排序结果依次展示各个目标关系信息对应的虚拟景观。
方法二、按照各个目标关系信息对应的概率进行选择性展示。
在基于第一神经网络和多个目标用户的关系特征信息,确定该多个用户对应的目标关系信息时,第一神经网络除了输出各个目标用户的目标关系信息外,还输出该目标关系信息的概率,所述概率用于表示该多个目标用户之间的关系为目标关系信息的可能性。
当在图像中检测出多个目标关系信息时,可以分别确定每个目标关系信息对应的概率,然后选择对应的概率最大的目标关系信息相匹配的虚拟景观进行展示;或者按照每个目标关系信息对应的概率进行排序,然后根据排序结果,依次展示对应的目标关系信息相匹配的虚拟景观。
方法三、根据不同虚拟景观的展示位置,分别对虚拟景观进行展示。
具体的,针对每一个目标关系信息,可以根据该目标关系特征信息对应的多个目标用户在图像中的位置信息,确定虚拟景观在展示装置中的展示位置,在多个目标关系信息对应的虚拟景观的展示位置不存在重合区域时,可以控制展示装置分别在对应的展示位置处,同步展示各个展示位置对应的虚拟景观。
在多个目标关系信息对应的虚拟景观的展示位置存在重合区域时,可以基于预先设置的用于表述不同虚拟景观之间是否可以叠加展示的展示关系,确定各个目标关系信息对应的虚拟景观之间是否可以叠加展示,若可以叠加展示,则同步在对应的展示位置处,叠加展示多个目标关系信息对应的虚拟景观;若不可以叠加展示,则可以随机选择一个目标关系信息对应的虚拟景观进行展示。
在另外一种可能的实施方式中,当并未检测到多个目标用户之间的关系特征信息,或者基于多个目标用户之间的关系特征信息,并未确定出多个目标用户之间的目标关系信息时,展示装置上还可以展示指示多个目标用户做出预设交互动作的指示信息,例如可以指示目标用户进行拥抱或者进行牵手等,当检测出多个目标用户做出预设交互动作时,可以展示与预设交互动作对应的虚拟景观。
示例性的,若检测到图像中包括两个目标用户,两个目标用户之间没有任何的交互动作,则可以展示“请牵手以展示更多特效”的指示信息,若检测到这两个目标用户牵手,则可以展示预先设置的与牵手相匹配的虚拟景观,例如展示玫瑰花绽开的视频动画。
通过这种方法,可以增加多个目标用户之间的交互,以及多个目标用户与展示装置之间的交互过程,增加趣味性,提升展示效果。
本公开实施例提供的一种虚拟景观展示方法,可以基于多个目标用户的属性特征信息,去匹配多个用户的目标关系信息,然后基于目标关系信息,去展示对应的虚拟景观,实现了多人同时与场馆之间的交互,不同的目标关系信息,对应展示的虚拟景观不同,丰富了交互的方式和展示内容,增强了交互效果。
本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一发明构思,本公开实施例中还提供了与虚拟景观展示方法对应的虚拟景观展示装置,由于本公开实施例中的装置解决问题的原理与本公开实施例上述虚拟景观展示方法相似,因此装置的实施可以参见方法的实施,重复之处不再赘述。
参照图4所示,为本公开实施例提供的一种虚拟景观展示装置的架构示意图,所述装置包括:获取模块401、确定模块402、控制模块403;其中,
获取模块401,用于获取多个目标用户的关系特征信息;
确定模块402,用于基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息;
控制模块403,用于确定与所述目标关系信息相匹配的虚拟景观,并控制展示装置展示所述虚拟景观。
一种可能的实施方式中,所述多个目标用户的关系特征信息包括以下信息中的至少一种:
分别对应的性别、性别是否相同、分别所属的年龄范围、表情特征匹配度、多个目标用户之间的交互性特征。
一种可能的实施方式中,所述确定模块402在,在基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息时,用于:
将所述多个目标用户的关系特征信息输入至训练的第一神经网络中,得到所述多个目标用户的目标关系信息;其中,所述第一神经网络为基于携带有关系信息标签的样本关系特征信息训练得到的。
一种可能的实施方式中,所述获取模块401,在获取多个目标用户的关系特征信息时,用于:
在检测到相距设定距离范围内的多个目标用户的图像的情况下,基于所述多个目标用户的图像,确定所述多个目标用户的关系特征信息。
一种可能的实施方式中,所述获取模块401,在基于所述多个目标用户的图像,确定所述多个目标用户的关系特征信息时,用于:
获取包括所述多个目标用户的连续多张图像;
将所述连续多张图像输入至训练的第二神经网络中,提取所述关系特征信息;其中,所述第二神经网络为基于携带有关系特征信息标签的样本图像训练得到的。
一种可能的实施方式中,所述确定模块402,在基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息时,用于:
基于预先设置的映射关系库,查找与所述多个目标用户的关系特征信息匹配的目标关系信息。
一种可能的实施方式中,所述控制模块403,在确定与所述目标关系信息相匹配的虚拟景观时,用于:
从各类关系信息与虚拟景观之间的映射关系库中,确定与所述目标关系信息相匹配的目标虚拟景观;其中,不同的虚拟景观对应的虚拟景物类型和/或展示效果不同。
一种可能的实施方式中,所述控制模块403,在控制展示装置展示所述虚拟景观时,用于:
在与所述目标关系信息相匹配的虚拟景观为多个的情况下,将匹配的多个虚拟景观进行轮流展示、或者在所述展示装置的不同的位置区域分别进行展示。
通过上述装置,可以基于多个目标用户的属性特征信息,去匹配多个用户的目标关系信息,然后基于目标关系信息,去展示对应的虚拟景观,实现了多人同时与场馆之间的交互,不同的目标关系信息,对应展示的虚拟景观不同,丰富了交互的方式和展示内容,增强了交互效果。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明,这里不再详述。
基于同一技术构思,本申请实施例还提供了一种计算机设备。参照图5所示,为本申请实施例提供的计算机设备500的结构示意图,包括处理器501、存储器502、和总线503。其中,存储器502用于存储执行指令,包括内存5021和外部存储器5022;这里的内存5021也称内存储器,用于暂时存放处理器501中的运算数据,以及与硬盘等外部存储器5022交换的数据,处理器501通过内存5021与外部存储器5022进行数据交换,当计算机设备500运行时,处理器501与存储器502之间通过总线503通信,使得处理器501在执行以下指令:
获取多个目标用户的关系特征信息;
基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息;
确定与所述目标关系信息相匹配的虚拟景观,并控制展示装置展示所述虚拟景观。
本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述的虚拟景观展示方法的步骤。其中,该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例所提供的虚拟景观展示方法的计算机程序产品,包括存储了程序代码的计算机可读存储介质,所述程序代码包括的指令可用于执行上述方法实施例中所述的虚拟景观展示方法的步骤,具体可参见上述方法实施例,在此不再赘述。
本公开实施例还提供一种计算机程序,该计算机程序被处理器执行时实现前述实施例的任意一种方法。该计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software DevelopmentKit,SDK)等等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本公开的具体实施方式,用以说明本公开的技术方案,而非对其限制,本公开的保护范围并不局限于此,尽管参照前述实施例对本公开进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应所述以权利要求的保护范围为准。

Claims (11)

1.一种虚拟景观展示方法,其特征在于,包括:
获取多个目标用户的关系特征信息;
基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息;
确定与所述目标关系信息相匹配的虚拟景观,并控制展示装置展示所述虚拟景观。
2.根据权利要求1所述的方法,其特征在于,所述多个目标用户的关系特征信息包括以下信息中的至少一种:
分别对应的性别、性别是否相同、分别所属的年龄范围、表情特征匹配度、多个目标用户之间的交互性特征。
3.根据权利要求1或2所述的方法,其特征在于,所述基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息,包括:
将所述多个目标用户的关系特征信息输入至训练的第一神经网络中,得到所述多个目标用户的目标关系信息;其中,所述第一神经网络为基于携带有关系信息标签的样本关系特征信息训练得到的。
4.根据权利要求1~3任一所述的方法,其特征在于,所述获取多个目标用户的关系特征信息,包括:
在检测到相距设定距离范围内的多个目标用户的图像的情况下,基于所述多个目标用户的图像,确定所述多个目标用户的关系特征信息。
5.根据权利要求4所述的方法,其特征在于,所述基于所述多个目标用户的图像,确定所述多个目标用户的关系特征信息,包括:
获取包括所述多个目标用户的连续多张图像;
将所述连续多张图像输入至训练的第二神经网络中,提取所述关系特征信息;其中,所述第二神经网络为基于携带有关系特征信息标签的样本图像训练得到的。
6.根据权利要求5所述的方法,其特征在于,所述基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息,包括:
基于预先设置的映射关系库,查找与所述多个目标用户的关系特征信息匹配的目标关系信息。
7.根据权利要求1所述的方法,其特征在于,确定与所述目标关系信息相匹配的虚拟景观,包括:
从各类关系信息与虚拟景观之间的映射关系库中,确定与所述目标关系信息相匹配的目标虚拟景观;其中,不同的虚拟景观对应的虚拟景物类型和/或展示效果不同。
8.根据权利要求1所述的方法,其特征在于,控制展示装置展示所述虚拟景观,包括:
在与所述目标关系信息相匹配的虚拟景观为多个的情况下,将匹配的多个虚拟景观进行轮流展示、或者在所述展示装置的不同的位置区域分别进行展示。
9.一种虚拟景观展示装置,其特征在于,包括:
获取模块,用于获取多个目标用户的关系特征信息;
确定模块,用于基于所述多个目标用户的关系特征信息,确定所述多个目标用户之间的目标关系信息;
控制模块,用于确定与所述目标关系信息相匹配的虚拟景观,并控制展示装置展示所述虚拟景观。
10.一种计算机设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当计算机设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至8任一所述的虚拟景观展示方法的步骤。
11.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至8任意一项所述的虚拟景观展示方法的步骤。
CN202010491712.3A 2020-06-02 2020-06-02 一种虚拟景观展示方法及装置 Pending CN111625666A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010491712.3A CN111625666A (zh) 2020-06-02 2020-06-02 一种虚拟景观展示方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010491712.3A CN111625666A (zh) 2020-06-02 2020-06-02 一种虚拟景观展示方法及装置

Publications (1)

Publication Number Publication Date
CN111625666A true CN111625666A (zh) 2020-09-04

Family

ID=72272040

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010491712.3A Pending CN111625666A (zh) 2020-06-02 2020-06-02 一种虚拟景观展示方法及装置

Country Status (1)

Country Link
CN (1) CN111625666A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105893530A (zh) * 2016-03-30 2016-08-24 乐视控股(北京)有限公司 一种基于用户关系的多媒体推荐方法和装置
US20170061696A1 (en) * 2015-08-31 2017-03-02 Samsung Electronics Co., Ltd. Virtual reality display apparatus and display method thereof
CN108154398A (zh) * 2017-12-27 2018-06-12 广东欧珀移动通信有限公司 信息显示方法、装置、终端及存储介质
CN108280115A (zh) * 2017-10-24 2018-07-13 腾讯科技(深圳)有限公司 识别用户关系的方法及装置
CN108596735A (zh) * 2018-04-28 2018-09-28 北京旷视科技有限公司 信息推送方法、装置及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170061696A1 (en) * 2015-08-31 2017-03-02 Samsung Electronics Co., Ltd. Virtual reality display apparatus and display method thereof
CN105893530A (zh) * 2016-03-30 2016-08-24 乐视控股(北京)有限公司 一种基于用户关系的多媒体推荐方法和装置
CN108280115A (zh) * 2017-10-24 2018-07-13 腾讯科技(深圳)有限公司 识别用户关系的方法及装置
CN108154398A (zh) * 2017-12-27 2018-06-12 广东欧珀移动通信有限公司 信息显示方法、装置、终端及存储介质
CN108596735A (zh) * 2018-04-28 2018-09-28 北京旷视科技有限公司 信息推送方法、装置及系统

Similar Documents

Publication Publication Date Title
US11816773B2 (en) Music reactive animation of human characters
CN111638797A (zh) 一种展示控制方法及装置
CN111241340A (zh) 视频标签确定方法、装置、终端及存储介质
CN111640202A (zh) 一种ar场景特效生成的方法及装置
CN111643900A (zh) 一种展示画面控制方法、装置、电子设备和存储介质
KR20200141384A (ko) 입력영상데이터 기반 사용자 관심정보 획득방법, 장치 및 프로그램
CN111627117A (zh) 画像展示特效的调整方法、装置、电子设备及存储介质
CN111862341A (zh) 虚拟对象的驱动方法、装置、显示设备及计算机存储介质
WO2023246384A1 (zh) 搜索结果展示方法、装置、计算机设备及存储介质
CN111640193A (zh) 文字处理方法、装置、计算机设备及存储介质
CN116894711A (zh) 商品推荐理由生成方法及其装置、电子设备
CN112150349A (zh) 一种图像处理方法、装置、计算机设备及存储介质
CN111797850A (zh) 视频分类方法、装置、存储介质及电子设备
CN113487709A (zh) 一种特效展示方法、装置、计算机设备以及存储介质
CN111625100A (zh) 图画内容的呈现方法、装置、计算机设备及存储介质
CN111639613A (zh) 一种增强现实ar特效生成方法、装置及电子设备
CN106791091B (zh) 图像生成方法、装置和移动终端
CN111652971A (zh) 一种显示控制方法及装置
CN111652983A (zh) 一种增强现实ar特效生成方法、装置及设备
CN112991555B (zh) 数据展示方法、装置、设备以及存储介质
CN111665942A (zh) 一种ar特效触发展示方法、装置、电子设备和存储介质
CN117132690A (zh) 一种图像生成方法及相关装置
CN111640183A (zh) 一种ar数据展示控制方法及装置
CN109299378B (zh) 搜索结果的展示方法、装置、终端及存储介质
CN111638792A (zh) Ar效果的呈现方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination