CN117237576A - 一种元宇宙ktv服务方法及系统 - Google Patents
一种元宇宙ktv服务方法及系统 Download PDFInfo
- Publication number
- CN117237576A CN117237576A CN202311514603.9A CN202311514603A CN117237576A CN 117237576 A CN117237576 A CN 117237576A CN 202311514603 A CN202311514603 A CN 202311514603A CN 117237576 A CN117237576 A CN 117237576A
- Authority
- CN
- China
- Prior art keywords
- information
- user
- virtual
- image
- receiving
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000003993 interaction Effects 0.000 claims abstract description 44
- 230000004044 response Effects 0.000 claims abstract description 21
- 230000002452 interceptive effect Effects 0.000 claims description 22
- 230000000007 visual effect Effects 0.000 claims description 12
- 230000001815 facial effect Effects 0.000 claims description 7
- 210000003205 muscle Anatomy 0.000 claims description 6
- 230000000694 effects Effects 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 4
- 238000009825 accumulation Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012854 evaluation process Methods 0.000 description 1
- 239000003999 initiator Substances 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Landscapes
- Processing Or Creating Images (AREA)
Abstract
本发明涉及元宇宙交互技术领域,具体公开了一种元宇宙KTV服务方法及系统,所述方法包括根据用户信息创建虚拟形象;根据用户的请求及响应构建虚拟场景,基于虚拟场景接收用户输入的交互信息;基于所述交互信息将虚拟形象作为信息源插入虚拟场景,同步计算各个虚拟形象的接收信息,向对应的虚拟形象发送;定时统计虚拟场景中各个虚拟形象的投入度,根据所述投入度确定推送尺度,基于所述推送尺度推送当前虚拟场景。本发明通过获取音频信息和图像信息实时更新含有虚拟形象的虚拟场景,根据音频信息和图像信息实时判定虚拟场景的质量,根据质量高低确定推送资源量,为KTV活动提高了曝光度,满足了用户的潜意识需求,带来更好的体验。
Description
技术领域
本发明涉及建筑板材加工技术领域,具体是一种元宇宙KTV服务方法及系统。
背景技术
元宇宙KTV可以理解为一种音频交互的虚拟空间,它可以是私密包厢,类似于几个人的视频会议,也可以是面向多人的公开直播,一般情况下,人们由于专业性的问题,更加偏向于私密包厢,但是如果歌唱质量较高并且氛围较好时,很多人愿意甚至期待被别人知晓,也即,被推送给其他路人。这种功能在线下很难实现,但是在元宇宙KTV中,这种功能的实现过程非常容易,如何提高元宇宙KTV的曝光度是本发明技术方案想要解决的技术问题。
发明内容
本发明的目的在于提供一种元宇宙KTV服务方法及系统,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:
一种元宇宙KTV服务方法,所述方法包括:
接收用户授予的权限,根据所述权限获取用户信息,创建虚拟形象;
根据用户的请求及响应构建虚拟场景,基于虚拟场景接收用户输入的交互信息;其中,所述交互信息含有用户输入的主动信息和基于采集器确定的被动信息;
基于所述交互信息将虚拟形象作为信息源插入虚拟场景,同步计算各个虚拟形象的接收信息,向对应的虚拟形象发送;其中,所述接收信息为某一虚拟形象在另一虚拟形象的观察视角中的状态;
定时统计虚拟场景中各个虚拟形象的投入度,根据所述投入度确定推送尺度,基于所述推送尺度推送当前虚拟场景;
其中,所述投入度用于表征歌唱者的音频质量和观众的注意力集中程度。
作为本发明进一步的方案:所述接收用户授予的权限,根据所述权限获取用户信息,创建虚拟形象的步骤包括:
向用户发送权限需求表,基于权限需求表接收用户授予的权限;
根据所述权限获取用户信息,根据用户信息在预设的形象库中查询待选形象;
显示待选形象,接收用户输入的调节信息,得到虚拟形象,并同步创建与虚拟形象对应的存储库;
其中,所述用户信息包括生理数据及视觉数据;所述生理数据包括性别、年龄和肌肉含量;所述生理数据和所述视觉数据包括空集。
作为本发明进一步的方案:所述根据用户的请求及响应构建虚拟场景,基于虚拟场景接收用户输入的交互信息的步骤包括:
接收用户发送的含有目标用户的连接请求,将连接请求转发至目标用户,并实时开放接入端口;
基于所述接入端口实时接收目标用户的响应信息,构建虚拟场景;其中,所述虚拟场景中含有面向各个用户的调节端口;
基于预设的采集器实时获取预设时段内用户的交互信息,存储至对应的存储库中;其中,所述交互信息包括音频数据和图像数据,所述交互信息中含有绝对时刻。
作为本发明进一步的方案:所述基于所述交互信息将虚拟形象作为信息源插入虚拟场景,同步计算各个虚拟形象的接收信息,向对应的虚拟形象发送的步骤包括:
根据时间顺序遍历各个存储库中的图像数据,对所述图像数据进行识别,确定用户位姿,基于所述用户位姿实时更新虚拟形象;
根据时间顺序遍历各个存储库中的音频数据,对音频数据进行识别,确定虚拟形象作为信息源的时刻,并将对应时刻的音频数据作为源信息;
根据时间顺序统计所有虚拟形象及其源信息在各个时刻的状态;
实时获取各个虚拟形象的位置,基于位置计算任意两个虚拟形象的展示角度,基于所述展示角度修正虚拟形象的状态,得到两个虚拟形象的接收信息,并向对应的虚拟形象发送。
作为本发明进一步的方案:所述根据时间顺序遍历各个存储库中的图像数据,对所述图像数据进行识别,确定用户位姿,基于所述用户位姿实时更新虚拟形象的步骤包括:
将图像数据输入训练好的识别模型,定位用户的身体轮廓;
在身体轮廓中定位面部轮廓,在面部轮廓中定位眼部轮廓;其中,当任一轮廓定位失败时,在预设的默认位姿库中查询默认位姿,更新虚拟形象;
对眼部轮廓进行识别,计算用户的注视角度序列;
计算注视角度序列的差分,根据所述差分计算用户的专注度,根据所述专注度在预设的层级位姿库中查询用户位姿,更新虚拟形象;其中,所述层级位姿库含有用户位姿项及其级别项,不同级别的用户位姿的朝向不同。
作为本发明进一步的方案:所述定时统计虚拟场景中各个虚拟形象的投入度,根据所述投入度确定推送尺度,基于所述推送尺度推送当前虚拟场景的步骤包括:
比对各个时刻的源信息,定位歌唱者;
提取歌唱者的音频数据,与预设的标准音频进行比对,计算歌唱者的投入度;
遍历其他虚拟形象,读取专注度,作为投入度;其中,默认位姿对应的虚拟形象的专注度为最小值;
统计所有投入度,根据预设的对应关系确定推送尺度,基于推送迟度推送当前虚拟场景;所述推送尺度用于表征推送过程的资源投入量。
本发明技术方案还提供了一种元宇宙KTV服务系统,所述系统包括:
形象创建模块,用于接收用户授予的权限,根据所述权限获取用户信息,创建虚拟形象;
交互信息接收模块,用于根据用户的请求及响应构建虚拟场景,基于虚拟场景接收用户输入的交互信息;其中,所述交互信息含有用户输入的主动信息和基于采集器确定的被动信息;
形象更新模块,用于基于所述交互信息将虚拟形象作为信息源插入虚拟场景,同步计算各个虚拟形象的接收信息,向对应的虚拟形象发送;其中,所述接收信息为某一虚拟形象在另一虚拟形象的观察视角中的状态;
内容推送模块,用于定时统计虚拟场景中各个虚拟形象的投入度,根据所述投入度确定推送尺度,基于所述推送尺度推送当前虚拟场景;
其中,所述投入度用于表征歌唱者的音频质量和观众的注意力集中程度。
作为本发明进一步的方案:所述形象创建模块包括:
权限获取单元,用于向用户发送权限需求表,基于权限需求表接收用户授予的权限;
形象查询单元,用于根据所述权限获取用户信息,根据用户信息在预设的形象库中查询待选形象;
显示调节单元,用于显示待选形象,接收用户输入的调节信息,得到虚拟形象,并同步创建与虚拟形象对应的存储库;
其中,所述用户信息包括生理数据及视觉数据;所述生理数据包括性别、年龄和肌肉含量;所述生理数据和所述视觉数据包括空集。
作为本发明进一步的方案:所述交互信息接收模块包括:
请求转发单元,用于接收用户发送的含有目标用户的连接请求,将连接请求转发至目标用户,并实时开放接入端口;
响应接收单元,用于基于所述接入端口实时接收目标用户的响应信息,构建虚拟场景;其中,所述虚拟场景中含有面向各个用户的调节端口;
信息存储单元,用于基于预设的采集器实时获取预设时段内用户的交互信息,存储至对应的存储库中;其中,所述交互信息包括音频数据和图像数据,所述交互信息中含有绝对时刻。
作为本发明进一步的方案:所述形象更新模块包括:
图像识别单元,用于根据时间顺序遍历各个存储库中的图像数据,对所述图像数据进行识别,确定用户位姿,基于所述用户位姿实时更新虚拟形象;
音频识别单元,用于根据时间顺序遍历各个存储库中的音频数据,对音频数据进行识别,确定虚拟形象作为信息源的时刻,并将对应时刻的音频数据作为源信息;
状态统计单元,用于根据时间顺序统计所有虚拟形象及其源信息在各个时刻的状态;
状态修正单元,用于实时获取各个虚拟形象的位置,基于位置计算任意两个虚拟形象的展示角度,基于所述展示角度修正虚拟形象的状态,得到两个虚拟形象的接收信息,并向对应的虚拟形象发送。
与现有技术相比,本发明的有益效果是:本发明通过获取音频信息和图像信息实时更新含有虚拟形象的虚拟场景,在此基础上,根据音频信息和图像信息实时判定虚拟场景的质量,根据质量高低确定推送资源量,为KTV活动提高了曝光度,满足了用户的潜意识需求,带来更好的体验。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例。
图1为元宇宙KTV服务方法的流程框图。
图2为元宇宙KTV服务方法的第一子流程框图。
图3为元宇宙KTV服务方法的第二子流程框图。
图4为元宇宙KTV服务方法的第三子流程框图。
图5为元宇宙KTV服务方法的第四子流程框图。
图6为元宇宙KTV服务系统的组成结构框图。
具体实施方式
为了使本发明所要解决的技术问题、技术方案及有益效果更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
图1为元宇宙KTV服务方法的流程框图,本发明实施例中,一种元宇宙KTV服务方法,所述方法包括:
步骤S100:接收用户授予的权限,根据所述权限获取用户信息,创建虚拟形象;
虚拟形象基于用户的个人形象生成,因此,需要先获取用户信息,再创建虚拟形象,在这一过程中,用户信息属于用户的隐私,只有在用户授予权限的基础上,才能够获取得到。
步骤S200:根据用户的请求及响应构建虚拟场景,基于虚拟场景接收用户输入的交互信息;其中,所述交互信息含有用户输入的主动信息和基于采集器确定的被动信息;
由某一用户发起构建请求,构建一个虚拟包厢,虚拟包厢中的人员由发起者选取,一般在通讯录中,平台将发起请求向各个目标人员发送,接收目标人员的响应,进而构建虚拟场景;一旦目标人员响应,就代表授予权限,此时,平台可以根据采集器接收用户输入的交互信息。
在本发明技术方案的一个实例中,交互信息的种类包括两种,一种是用户主动输入的,比如某一个用户在唱歌时,发出的音频信息就是交互信息,还有一种是用户被动输入的,也即,用户的一些行为,是否面向歌唱者等,这些信息都会被采集,并在虚拟形象中显示。
步骤S300:基于所述交互信息将虚拟形象作为信息源插入虚拟场景,同步计算各个虚拟形象的接收信息,向对应的虚拟形象发送;其中,所述接收信息为某一虚拟形象在另一虚拟形象的观察视角中的状态;
每个时刻都会有交互信息,每个时刻的虚拟场景及其中的虚拟形象都会有一个独立的状态,这一状态在各个虚拟形象的视角下如何显示,就是步骤S300完成的功能;具体流程为:
根据交互信息确定每个时刻的虚拟场景及其中的虚拟形象,然后,根据虚拟形象间的位置关系,确定各个虚拟形象(与某个用户对应)的接收信息,所述接收信息就是该用户的设备接收到的展示信息。
步骤S400:定时统计虚拟场景中各个虚拟形象的投入度,根据所述投入度确定推送尺度,基于所述推送尺度推送当前虚拟场景;其中,所述投入度用于表征歌唱者的音频质量和观众的注意力集中程度;
步骤S400是本申请的重点所在,由平台对整个虚拟场景进行评估,评估歌唱者的同时,也评估观众,从而确定整个虚拟场景的氛围,进而进行推送,给一些其他观众;所述其他观众可以理解为元宇宙服务平台中的游客,或者一些想要进行KTV活动的用户;其中,评估过程同时评估歌唱者和观众,评估歌唱者的方式是评估音频质量,评估观众的方式是评估注意力集中程度,音频质量比对音频信息即可,注意力集中程度由交互信息确定。
图2为元宇宙KTV服务方法的第一子流程框图,所述接收用户授予的权限,根据所述权限获取用户信息,创建虚拟形象的步骤包括:
步骤S101:向用户发送权限需求表,基于权限需求表接收用户授予的权限;
步骤S102:根据所述权限获取用户信息,根据用户信息在预设的形象库中查询待选形象;
步骤S103:显示待选形象,接收用户输入的调节信息,得到虚拟形象,并同步创建与虚拟形象对应的存储库;
其中,所述用户信息包括生理数据及视觉数据;所述生理数据包括性别、年龄和肌肉含量;所述生理数据和所述视觉数据包括空集。
在本发明技术方案的一个实例中,对虚拟形象的创建过程进行了具体的限定,这一过程比较常规,可以类比于现有游戏中的“捏脸”过程,也即,先由用户信息快速选取一些相似的形象,作为待选形象,进而接收用户输入的调节信息,从而得到虚拟形象,在创建虚拟形象的同时,同步创建一个存储库,用户存储该用户的数据。
图3为元宇宙KTV服务方法的第二子流程框图,所述根据用户的请求及响应构建虚拟场景,基于虚拟场景接收用户输入的交互信息的步骤包括:
步骤S201:接收用户发送的含有目标用户的连接请求,将连接请求转发至目标用户,并实时开放接入端口;
步骤S202:基于所述接入端口实时接收目标用户的响应信息,构建虚拟场景;其中,所述虚拟场景中含有面向各个用户的调节端口;
步骤S203:基于预设的采集器实时获取预设时段内用户的交互信息,存储至对应的存储库中;其中,所述交互信息包括音频数据和图像数据,所述交互信息中含有绝对时刻。
在本发明技术方案的一个实例中,对交互信息的获取过程进行了限定,步骤S201和步骤S202是请求转发过程,根据用户的请求及其他用户的响应构建虚拟场景;然后,由采集器实时获取交互信息即可,存储位置就是构建虚拟形象过程中创建的存储库。
值得一提的是,所述采集器可以采用现有的摄像头,可以同时获取音频数据和图像数据。
图4为元宇宙KTV服务方法的第三子流程框图,所述基于所述交互信息将虚拟形象作为信息源插入虚拟场景,同步计算各个虚拟形象的接收信息,向对应的虚拟形象发送的步骤包括:
步骤S301:根据时间顺序遍历各个存储库中的图像数据,对所述图像数据进行识别,确定用户位姿,基于所述用户位姿实时更新虚拟形象;
步骤S302:根据时间顺序遍历各个存储库中的音频数据,对音频数据进行识别,确定虚拟形象作为信息源的时刻,并将对应时刻的音频数据作为源信息;
步骤S303:根据时间顺序统计所有虚拟形象及其源信息在各个时刻的状态;
步骤S304:实时获取各个虚拟形象的位置,基于位置计算任意两个虚拟形象的展示角度,基于所述展示角度修正虚拟形象的状态,得到两个虚拟形象的接收信息,并向对应的虚拟形象发送。
在本发明技术方案的一个实例中,对图像数据进行分析,可以确定用户的姿势,称为用户位姿,由用户位姿对虚拟形象进行更新,可以保证虚拟形象和用户实际情况的对应关系。
然后,对音频信息进行识别,可以判断哪些虚拟形象是信息源,一般情况下,信息源仅有一个歌唱者,但是在本发明技术方案中,非歌唱者之间也可以发出声音,比如暖场叫声等,此时,他们也是信息源,由于歌声和其他声音的特征非常明显,因此,对音频信息的幅值进行分析,即可分辩出谁是歌唱者。
最后,在更新后的虚拟形象中引入信息源的判断结果,即可确定每个时刻下,每个虚拟形象的状态;在此基础上,以每个虚拟形象为基准,在该虚拟形象的视角上,获取到的其他虚拟形象的状态,即为该虚拟形象接收信息;这一过程由位置关系确定,位置关系一经确定,视角转换关系即可确定。
作为本发明技术方案的一个优选实施例,所述根据时间顺序遍历各个存储库中的图像数据,对所述图像数据进行识别,确定用户位姿,基于所述用户位姿实时更新虚拟形象的步骤包括:
将图像数据输入训练好的识别模型,定位用户的身体轮廓;
在身体轮廓中定位面部轮廓,在面部轮廓中定位眼部轮廓;其中,当任一轮廓定位失败时,在预设的默认位姿库中查询默认位姿,更新虚拟形象;
对眼部轮廓进行识别,计算用户的注视角度序列;
计算注视角度序列的差分,根据所述差分计算用户的专注度,根据所述专注度在预设的层级位姿库中查询用户位姿,更新虚拟形象;其中,所述层级位姿库含有用户位姿项及其级别项,不同级别的用户位姿的朝向不同。
上述内容对用户位姿的识别过程进行了具体的限定,本申请中的识别过程是梯度式的识别过程,依次获取身体轮廓、面部轮廓及眼部轮廓,当获取到眼部轮廓后,对眼部轮廓进行识别,可以获取到用户的视线,称为注视角度序列;对注视角度序列进行识别,可以判断出该用户的专注度;其中一种对注视角度序列进行识别的方式是,计算该虚拟形象与当前歌唱者的角度,然后计算注视角度序列与该角度的差值累计,根据差值累计的反比,确定专注度。
在本发明技术方案的一个实例中,如果定位不到体轮廓、面部轮廓或眼部轮廓,就说明当前用户不在观看,这是对歌唱者的一种忽视,此时,专注度为零,但是,在更新虚拟形象时,如果直接更新,会影响歌唱者或其他观众的心态,在本申请中,采用一些默认的形象进行替换,用以保证整个虚拟场景的协调;其中,默认形象也可以采用当前所有虚拟形象的平均形象,这也是本申请中的一个小的创新点。
图5为元宇宙KTV服务方法的第四子流程框图,所述定时统计虚拟场景中各个虚拟形象的投入度,根据所述投入度确定推送尺度,基于所述推送尺度推送当前虚拟场景的步骤包括:
步骤S401:比对各个时刻的源信息,定位歌唱者;
步骤S402:提取歌唱者的音频数据,与预设的标准音频进行比对,计算歌唱者的投入度;
步骤S403:遍历其他虚拟形象,读取专注度,作为投入度;其中,默认位姿对应的虚拟形象的专注度为最小值;
步骤S404:统计所有投入度,根据预设的对应关系确定推送尺度,基于推送迟度推送当前虚拟场景;所述推送尺度用于表征推送过程的资源投入量。
上述内容是对步骤S400的进一步限定,首先,对音频信息进行识别,定位歌唱者,然后,比对音频信息与标准音频,可以计算出相似度,一般情况下,越相似被认为越好听,相应的,投入度也越高;在此基础上,结合上述内容中生成的专注度确定观众的投入度,统计所有人员的投入度,即可确定当前虚拟场景的投入资源量。
图6为元宇宙KTV服务系统的组成结构框图,本发明实施例中,一种元宇宙KTV服务系统,所述系统10包括:
形象创建模块11,用于接收用户授予的权限,根据所述权限获取用户信息,创建虚拟形象;
交互信息接收模块12,用于根据用户的请求及响应构建虚拟场景,基于虚拟场景接收用户输入的交互信息;其中,所述交互信息含有用户输入的主动信息和基于采集器确定的被动信息;
形象更新模块13,用于基于所述交互信息将虚拟形象作为信息源插入虚拟场景,同步计算各个虚拟形象的接收信息,向对应的虚拟形象发送;其中,所述接收信息为某一虚拟形象在另一虚拟形象的观察视角中的状态;
内容推送模块14,用于定时统计虚拟场景中各个虚拟形象的投入度,根据所述投入度确定推送尺度,基于所述推送尺度推送当前虚拟场景;
其中,所述投入度用于表征歌唱者的音频质量和观众的注意力集中程度。
进一步的,所述形象创建模块11包括:
权限获取单元,用于向用户发送权限需求表,基于权限需求表接收用户授予的权限;
形象查询单元,用于根据所述权限获取用户信息,根据用户信息在预设的形象库中查询待选形象;
显示调节单元,用于显示待选形象,接收用户输入的调节信息,得到虚拟形象,并同步创建与虚拟形象对应的存储库;
其中,所述用户信息包括生理数据及视觉数据;所述生理数据包括性别、年龄和肌肉含量;所述生理数据和所述视觉数据包括空集。
更进一步的,所述交互信息接收模块12包括:
请求转发单元,用于接收用户发送的含有目标用户的连接请求,将连接请求转发至目标用户,并实时开放接入端口;
响应接收单元,用于基于所述接入端口实时接收目标用户的响应信息,构建虚拟场景;其中,所述虚拟场景中含有面向各个用户的调节端口;
信息存储单元,用于基于预设的采集器实时获取预设时段内用户的交互信息,存储至对应的存储库中;其中,所述交互信息包括音频数据和图像数据,所述交互信息中含有绝对时刻。
此外,所述形象更新模块13包括:
图像识别单元,用于根据时间顺序遍历各个存储库中的图像数据,对所述图像数据进行识别,确定用户位姿,基于所述用户位姿实时更新虚拟形象;
音频识别单元,用于根据时间顺序遍历各个存储库中的音频数据,对音频数据进行识别,确定虚拟形象作为信息源的时刻,并将对应时刻的音频数据作为源信息;
状态统计单元,用于根据时间顺序统计所有虚拟形象及其源信息在各个时刻的状态;
状态修正单元,用于实时获取各个虚拟形象的位置,基于位置计算任意两个虚拟形象的展示角度,基于所述展示角度修正虚拟形象的状态,得到两个虚拟形象的接收信息,并向对应的虚拟形象发送。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种元宇宙KTV服务方法,其特征在于,所述方法包括:
接收用户授予的权限,根据所述权限获取用户信息,创建虚拟形象;
根据用户的请求及响应构建虚拟场景,基于虚拟场景接收用户输入的交互信息;其中,所述交互信息含有用户输入的主动信息和基于采集器确定的被动信息;
基于所述交互信息将虚拟形象作为信息源插入虚拟场景,同步计算各个虚拟形象的接收信息,向对应的虚拟形象发送;其中,所述接收信息为某一虚拟形象在另一虚拟形象的观察视角中的状态;
定时统计虚拟场景中各个虚拟形象的投入度,根据所述投入度确定推送尺度,基于所述推送尺度推送当前虚拟场景;
其中,所述投入度用于表征歌唱者的音频质量和观众的注意力集中程度。
2.根据权利要求1所述的元宇宙KTV服务方法,其特征在于,所述接收用户授予的权限,根据所述权限获取用户信息,创建虚拟形象的步骤包括:
向用户发送权限需求表,基于权限需求表接收用户授予的权限;
根据所述权限获取用户信息,根据用户信息在预设的形象库中查询待选形象;
显示待选形象,接收用户输入的调节信息,得到虚拟形象,并同步创建与虚拟形象对应的存储库;
其中,所述用户信息包括生理数据及视觉数据;所述生理数据包括性别、年龄和肌肉含量;所述生理数据和所述视觉数据包括空集。
3.根据权利要求1所述的元宇宙KTV服务方法,其特征在于,所述根据用户的请求及响应构建虚拟场景,基于虚拟场景接收用户输入的交互信息的步骤包括:
接收用户发送的含有目标用户的连接请求,将连接请求转发至目标用户,并实时开放接入端口;
基于所述接入端口实时接收目标用户的响应信息,构建虚拟场景;其中,所述虚拟场景中含有面向各个用户的调节端口;
基于预设的采集器实时获取预设时段内用户的交互信息,存储至对应的存储库中;其中,所述交互信息包括音频数据和图像数据,所述交互信息中含有绝对时刻。
4.根据权利要求3所述的元宇宙KTV服务方法,其特征在于,所述基于所述交互信息将虚拟形象作为信息源插入虚拟场景,同步计算各个虚拟形象的接收信息,向对应的虚拟形象发送的步骤包括:
根据时间顺序遍历各个存储库中的图像数据,对所述图像数据进行识别,确定用户位姿,基于所述用户位姿实时更新虚拟形象;
根据时间顺序遍历各个存储库中的音频数据,对音频数据进行识别,确定虚拟形象作为信息源的时刻,并将对应时刻的音频数据作为源信息;
根据时间顺序统计所有虚拟形象及其源信息在各个时刻的状态;
实时获取各个虚拟形象的位置,基于位置计算任意两个虚拟形象的展示角度,基于所述展示角度修正虚拟形象的状态,得到两个虚拟形象的接收信息,并向对应的虚拟形象发送。
5.根据权利要求4所述的元宇宙KTV服务方法,其特征在于,所述根据时间顺序遍历各个存储库中的图像数据,对所述图像数据进行识别,确定用户位姿,基于所述用户位姿实时更新虚拟形象的步骤包括:
将图像数据输入训练好的识别模型,定位用户的身体轮廓;
在身体轮廓中定位面部轮廓,在面部轮廓中定位眼部轮廓;其中,当任一轮廓定位失败时,在预设的默认位姿库中查询默认位姿,更新虚拟形象;
对眼部轮廓进行识别,计算用户的注视角度序列;
计算注视角度序列的差分,根据所述差分计算用户的专注度,根据所述专注度在预设的层级位姿库中查询用户位姿,更新虚拟形象;其中,所述层级位姿库含有用户位姿项及其级别项,不同级别的用户位姿的朝向不同。
6.根据权利要求5所述的元宇宙KTV服务方法,其特征在于,所述定时统计虚拟场景中各个虚拟形象的投入度,根据所述投入度确定推送尺度,基于所述推送尺度推送当前虚拟场景的步骤包括:
比对各个时刻的源信息,定位歌唱者;
提取歌唱者的音频数据,与预设的标准音频进行比对,计算歌唱者的投入度;
遍历其他虚拟形象,读取专注度,作为投入度;其中,默认位姿对应的虚拟形象的专注度为最小值;
统计所有投入度,根据预设的对应关系确定推送尺度,基于推送迟度推送当前虚拟场景;所述推送尺度用于表征推送过程的资源投入量。
7.一种元宇宙KTV服务系统,其特征在于,所述系统包括:
形象创建模块,用于接收用户授予的权限,根据所述权限获取用户信息,创建虚拟形象;
交互信息接收模块,用于根据用户的请求及响应构建虚拟场景,基于虚拟场景接收用户输入的交互信息;其中,所述交互信息含有用户输入的主动信息和基于采集器确定的被动信息;
形象更新模块,用于基于所述交互信息将虚拟形象作为信息源插入虚拟场景,同步计算各个虚拟形象的接收信息,向对应的虚拟形象发送;其中,所述接收信息为某一虚拟形象在另一虚拟形象的观察视角中的状态;
内容推送模块,用于定时统计虚拟场景中各个虚拟形象的投入度,根据所述投入度确定推送尺度,基于所述推送尺度推送当前虚拟场景;
其中,所述投入度用于表征歌唱者的音频质量和观众的注意力集中程度。
8.根据权利要求7所述的元宇宙KTV服务系统,其特征在于,所述形象创建模块包括:
权限获取单元,用于向用户发送权限需求表,基于权限需求表接收用户授予的权限;
形象查询单元,用于根据所述权限获取用户信息,根据用户信息在预设的形象库中查询待选形象;
显示调节单元,用于显示待选形象,接收用户输入的调节信息,得到虚拟形象,并同步创建与虚拟形象对应的存储库;
其中,所述用户信息包括生理数据及视觉数据;所述生理数据包括性别、年龄和肌肉含量;所述生理数据和所述视觉数据包括空集。
9.根据权利要求7所述的元宇宙KTV服务系统,其特征在于,所述交互信息接收模块包括:
请求转发单元,用于接收用户发送的含有目标用户的连接请求,将连接请求转发至目标用户,并实时开放接入端口;
响应接收单元,用于基于所述接入端口实时接收目标用户的响应信息,构建虚拟场景;其中,所述虚拟场景中含有面向各个用户的调节端口;
信息存储单元,用于基于预设的采集器实时获取预设时段内用户的交互信息,存储至对应的存储库中;其中,所述交互信息包括音频数据和图像数据,所述交互信息中含有绝对时刻。
10.根据权利要求9所述的元宇宙KTV服务系统,其特征在于,所述形象更新模块包括:
图像识别单元,用于根据时间顺序遍历各个存储库中的图像数据,对所述图像数据进行识别,确定用户位姿,基于所述用户位姿实时更新虚拟形象;
音频识别单元,用于根据时间顺序遍历各个存储库中的音频数据,对音频数据进行识别,确定虚拟形象作为信息源的时刻,并将对应时刻的音频数据作为源信息;
状态统计单元,用于根据时间顺序统计所有虚拟形象及其源信息在各个时刻的状态;
状态修正单元,用于实时获取各个虚拟形象的位置,基于位置计算任意两个虚拟形象的展示角度,基于所述展示角度修正虚拟形象的状态,得到两个虚拟形象的接收信息,并向对应的虚拟形象发送。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311514603.9A CN117237576A (zh) | 2023-11-15 | 2023-11-15 | 一种元宇宙ktv服务方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311514603.9A CN117237576A (zh) | 2023-11-15 | 2023-11-15 | 一种元宇宙ktv服务方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117237576A true CN117237576A (zh) | 2023-12-15 |
Family
ID=89093367
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311514603.9A Pending CN117237576A (zh) | 2023-11-15 | 2023-11-15 | 一种元宇宙ktv服务方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117237576A (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20080106676A (ko) * | 2007-06-04 | 2008-12-09 | 주식회사 케이티 | Vr 노래방 서비스 시스템 및 방법 |
US20100201693A1 (en) * | 2009-02-11 | 2010-08-12 | Disney Enterprises, Inc. | System and method for audience participation event with digital avatars |
CN106792214A (zh) * | 2016-12-12 | 2017-05-31 | 福建凯米网络科技有限公司 | 一种基于数字视听场所的直播互动方法和系统 |
CN111401217A (zh) * | 2020-03-12 | 2020-07-10 | 大众问问(北京)信息科技有限公司 | 一种驾驶员的注意力检测方法、装置及设备 |
CN111432226A (zh) * | 2020-03-27 | 2020-07-17 | 广州酷狗计算机科技有限公司 | 直播推荐方法、装置、服务器、终端及存储介质 |
CN115239916A (zh) * | 2021-04-22 | 2022-10-25 | 北京字节跳动网络技术有限公司 | 虚拟形象的互动方法、装置和设备 |
CN115657862A (zh) * | 2022-12-27 | 2023-01-31 | 海马云(天津)信息技术有限公司 | 虚拟ktv场景画面自动切换的方法、装置、存储介质及设备 |
-
2023
- 2023-11-15 CN CN202311514603.9A patent/CN117237576A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20080106676A (ko) * | 2007-06-04 | 2008-12-09 | 주식회사 케이티 | Vr 노래방 서비스 시스템 및 방법 |
US20100201693A1 (en) * | 2009-02-11 | 2010-08-12 | Disney Enterprises, Inc. | System and method for audience participation event with digital avatars |
CN106792214A (zh) * | 2016-12-12 | 2017-05-31 | 福建凯米网络科技有限公司 | 一种基于数字视听场所的直播互动方法和系统 |
CN111401217A (zh) * | 2020-03-12 | 2020-07-10 | 大众问问(北京)信息科技有限公司 | 一种驾驶员的注意力检测方法、装置及设备 |
CN111432226A (zh) * | 2020-03-27 | 2020-07-17 | 广州酷狗计算机科技有限公司 | 直播推荐方法、装置、服务器、终端及存储介质 |
CN115239916A (zh) * | 2021-04-22 | 2022-10-25 | 北京字节跳动网络技术有限公司 | 虚拟形象的互动方法、装置和设备 |
CN115657862A (zh) * | 2022-12-27 | 2023-01-31 | 海马云(天津)信息技术有限公司 | 虚拟ktv场景画面自动切换的方法、装置、存储介质及设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111556278B (zh) | 一种视频处理的方法、视频展示的方法、装置及存储介质 | |
CN103229174B (zh) | 显示控制装置、集成电路以及显示控制方法 | |
WO2016014233A1 (en) | Real-time immersive mediated reality experiences | |
KR101581921B1 (ko) | 학습 컨설팅 방법 및 장치 | |
JP2024524354A (ja) | 業務処理システム及び方法 | |
CN110636315A (zh) | 一种多人虚拟直播方法、装置、电子设备及存储介质 | |
CN108549859B (zh) | 多屏互动的网络教学方法以及装置 | |
CN112862639A (zh) | 一种基于大数据分析的在线教育方法及在线教育平台 | |
JP2009119112A (ja) | 動画表示システム、動画表示方法、およびコンピュータプログラム | |
CN109934150B (zh) | 一种会议参与度识别方法、装置、服务器和存储介质 | |
CN114846808B (zh) | 内容发布系统、内容发布方法以及存储介质 | |
EP3065396A1 (en) | Terminal, system, display method, and carrier medium | |
CN117237576A (zh) | 一种元宇宙ktv服务方法及系统 | |
CN109992722B (zh) | 一种构建互动空间的方法及装置 | |
Nishio et al. | Statistical validation of utility of head-mounted display projection-based experimental impression evaluation for sequential streetscapes | |
CN110516426A (zh) | 身份认证方法、认证终端、装置及可读存储介质 | |
JP2004199547A (ja) | 相互行為分析システム、及び相互行為分析プログラム | |
CN115937961A (zh) | 一种线上学习识别方法及设备 | |
CN115150651A (zh) | 在线视频分发支持方法和在线视频分发支持设备 | |
JP7069550B2 (ja) | 講義映像分析装置、講義映像分析システム、方法およびプログラム | |
US20200226379A1 (en) | Computer system, pavilion content changing method and program | |
Bohao et al. | User visual attention behavior analysis and experience improvement in virtual meeting | |
You et al. | Studying vision-based multiple-user interaction with in-home large displays | |
JP7198892B2 (ja) | 動画再生装置、動画再生方法、及び動画配信システム | |
CN115277620B (zh) | 一种社交应用处理方法和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |