CN107463251B - 一种信息处理方法、装置、系统和存储介质 - Google Patents

一种信息处理方法、装置、系统和存储介质 Download PDF

Info

Publication number
CN107463251B
CN107463251B CN201710571324.4A CN201710571324A CN107463251B CN 107463251 B CN107463251 B CN 107463251B CN 201710571324 A CN201710571324 A CN 201710571324A CN 107463251 B CN107463251 B CN 107463251B
Authority
CN
China
Prior art keywords
data
song
video
video data
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710571324.4A
Other languages
English (en)
Other versions
CN107463251A (zh
Inventor
廖宇
袁敏
钟咏
孙磊
孙颖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MIGU Music Co Ltd
Original Assignee
MIGU Music Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MIGU Music Co Ltd filed Critical MIGU Music Co Ltd
Priority to CN201710571324.4A priority Critical patent/CN107463251B/zh
Publication of CN107463251A publication Critical patent/CN107463251A/zh
Application granted granted Critical
Publication of CN107463251B publication Critical patent/CN107463251B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Abstract

本发明公开了一种信息处理方法,所述方法包括:确定待演唱歌曲的歌曲类型;获取与所述歌曲类型对应的虚拟现实VR第一视频数据;向VR设备输出VR第二视频数据;其中,所述VR视频第二数据为所述VR第一视频数据本身,或,所述VR第二视频数据根据所述VR第一视频数据确定。本发明还同时公开了一种信息处理装置、系统及存储介质。

Description

一种信息处理方法、装置、系统和存储介质
技术领域
本发明涉及信息显示技术,具体涉及一种信息处理方法、装置、系统和存储介质。
背景技术
现在市面上出现的一种可移动的迷你K歌房,由于其体积小巧,便于移动,且使用时间灵活,其使用地点也较为随意,一经推出便受到了广大用户的大量好评。然而,用户在使用现有的迷你K歌房进行K歌时,由于迷你K歌房的影音设备的功能较少,且K歌的空间较小,长时间使用所述迷你K歌房进行K歌时,容易带给用户一种压抑的感觉,大大降低了用户的使用体验。
发明内容
为解决现有存在的技术问题,本发明实施例期望提供一种信息处理方法、装置、系统和存储介质,能够通过虚拟现实(VR,Virtual Reality)视频中的虚拟场景,增大用户的视觉范围,使用户在使用迷你K歌房进行歌曲演唱时,不会觉得空间压抑。
本发明实施例的技术方案是这样实现的:
根据本发明实施例的一方面,提供一种信息处理方法,所述方法包括:
确定待演唱歌曲的歌曲类型;
获取与所述歌曲类型对应的虚拟现实VR第一视频数据;
向VR设备输出VR第二视频数据;
其中,所述VR视频第二数据为所述VR第一视频数据本身,或,所述VR第二视频数据根据所述VR第一视频数据确定。
上述方案中,获取与所述歌曲类型对应的VR第一视频数据,包括:
根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的目标VR视频数据,将所述目标VR视频数据作为所述VR第一视频数据;
或者,根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的、用于生成所述VR第一视频数据的待处理数据;将所述待处理数据生成所述VR第一视频数据。
上述方案中,将所述待处理数据生成所述VR第一视频数据,包括:
所述待处理数据为VR视频片段数据时,将所述VR视频片段数据进行组合,以得到作为所述VR第一视频数据的VR视频组合数据;
所述待处理数据为非VR视频片段数据时,将所述非VR视频片段数据进行图像分割,得到左眼数据和右眼数据;
将所述左眼数据和所述右眼数据合并成位置不同的数据,将所述位置不同的数据作为所述VR第一视频数据。
上述方案中,在向VR设备输出所述VR第二视频数据时,所述方法还包括:
接收歌词显示指令;
获取与所述歌词显示指令对应的歌词数据;
向所述VR设备输出所述歌词数据。
上述方案中,在向VR设备输出所述VR第二视频数据之后,所述方法还包括:
接收所述VR设备发送的用户眼球运动特征数据;其中,所述用户眼球运动特征数据包括眼睛注视点的位置数据,和/或,眼球相对头部的运动数据;
根据所述用户眼球运动特征数据,确定与所述用户眼球运动特征相匹配的显示内容调整指令;
向所述VR设备发送所述显示内容调整指令,以触发VR设备根据所述显示内容调整指令调整所述VR设备的显示内容。
根据本发明实施例的另一方面,提供一种信息处理装置,所述装置包括:确定单元、获取单元和输出单元;
其中,所述确定单元,用于确定待演唱歌曲的歌曲类型;
所述获取单元,用于获取与所述歌曲类型对应的VR第一视频数据;
所述输出单元,用于向VR设备输出VR第二视频数据;其中,所述VR视频第二数据为所述VR第一视频数据本身,或,所述VR第二视频数据根据所述VR第一视频数据确定。
上述方案中,所述获取单元,具体用于根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的目标VR视频数据,将所述目标VR视频数据作为所述VR第一视频数据;
或者,根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的、用于生成所述VR第一视频数据的待处理数据;利用所述待处理数据生成所述VR第一视频数据。
上述方案中,所述获取单元,具体用于当所述待处理数据为VR视频片段数据时,将所述VR视频片段数据进行组合,以得到作为所述VR第一视频数据的VR视频组合数据;当所述待处理数据为非VR视频片段数据时,将所述非VR视频片段数据以进行图像分割,得到左眼数据和右眼数据,将所述左眼数据和所述右眼数据合并成位置不同的数据,将所述位置不同的数据作为所述VR第一视频数据。
上述方案中,所述装置还包括:
接收单元,用于接收歌词显示指令;
所述获取单元,还用于获取与所述歌词显示指令对应的歌词数据;
所述输出单元,还用于向所述VR设备输出所述歌词数据。
上述方案中,所述接收单元,还用于接收所述VR设备发送的用户眼球运动特征数据;其中,所述用户眼球运动特征数据包括眼睛注视点的位置数据,和/或,眼球相对头部的运动数据;
所述确定单元,还用于根据所述用户眼球运动特征数据,确定与所述用户眼球运动特征相匹配的显示内容调整指令;
所述输出单元,还用于向所述VR设备发送所述显示内容调整指令,以触发VR设备根据所述显示内容调整指令调整所述VR设备的显示内容。
根据本发明实施例的再一方面,提供一种信息处理系统,所述系统包括:信息处理装置和VR设备;
其中,所述信息处理装置,用于确定待演唱歌曲的歌曲类型;获取与所述歌曲类型对应的VR第一视频数据;向所述VR设备输出VR第二视频数据;其中,所述VR视频第二数据为所述VR第一视频数据本身,或者,所述VR第二视频数据根据所述VR第一视频数据确定;
所述VR设备,用于接收所述VR第二视频数据,并向所述信息处理装置发送用户眼球运动特征数据;其中,所述用户眼球运动特征数据包括眼睛注视点的位置数据,和/或,眼球相对头部的运动数据,以触发所述信息处理装置根据所述用户眼球运动特征数据,确定与所述用户眼球运动特征相匹配的显示内容调整指令;并根据所述显示内容调整指令调整显示内容。
根据本发明实施例的再一方面,提供一种信息处理装置,所述信息处理装置包括:存储器、一个或多个处理器、以及一个或多个模块;
其中,所述一个或多个模块被存储在所述存储器中,并被配置成由所述一个或多个处理器执行,所述一个或多个模块包括用于执行上述方法的任一指令。
根据本发明实施例的再一方面,提供一种存储一个或多个程序的存储介质,所述一个或多个程序包括指令,所述指令由信息处理装置的一个或多个处理器执行时,使得所述信息处理装置执行根据上述的任一种方法。
本发明实施例提供的一种信息处理方法、装置、系统和存储介质,确定待演唱歌曲的歌曲类型;获取与所述歌曲类型对应的VR第一视频数据;向VR设备输出VR第二视频数据;其中,所述VR视频第二数据为所述VR第一视频数据本身,或,所述VR第二视频数据根据所述VR第一视频数据确定。如此,当用户使用VR设备进行歌曲演唱时,能够根据用户所演唱的歌曲类型,为用户提供不同的虚拟场景,使用户通过在虚拟场景中看到的影像,加大用户的视觉范围,从而给用户带来更为全面的感官体验。
附图说明
图1为本发明实施例一种信息处理方法的流程示意图;
图2为本发明实施例中点歌机和VR设备的连接结构示意图;
图3为本发明实施例一种信息处理装置的组成示意图;
图4为本发明实施例中另一种信息处理装置的结构示意图。
具体实施方式
下面结合附图对本发明的具体实施方式进行详细说明。应当理解的是,此处所描述的具体实施方式仅用于说明和解释本发明,并不用于限制本发明。
图1为本发明实施例一种信息处理方法的流程示意图;如图1所示,所述方法包括:
步骤101,确定待演唱歌曲的歌曲类型;
本发明实施例中,所述方法主要应用于信息处理装置,所述信息处理装置具体可以是迷你K歌房的点歌机,所述点歌机通过有线连接或无线连接的方式连接有VR设备。所述VR设备具体可以是智能眼镜或智能头盔等头显设备。且所述点歌机安装有卡拉OK点歌系统。
图2为本发明实施例中点歌机和VR设备的连接结构示意图;如图2所示,音乐房200中设置有点歌机201和VR设备202,其中,所述VR设备202为智能眼镜,所述点歌机201中安装有卡拉OK系统,所述点歌机201和所述VR设备202通过有线方式连接。
所述点歌机201的显示屏可为液晶显示屏、电子墨水显示屏或投影显示屏等。且所述点歌机201的显示屏显示的图像为二维图像。由于,所述显示屏发出的光线入射至用户的左眼和右眼时,左眼的光线和右眼的光线相位是一致的,因此,用户在所述点歌机201的显示屏看到的图像为二维图像。
而所述VR设备202中安装有透镜模组,通过所述透镜模组能够为用户呈现出与待演唱歌曲对应的虚拟场景,且每种虚拟场景对应一种歌曲类型。这里,所述歌曲类型可以是由卡拉OK点歌系统的运营人员预先根据歌曲的曲风、演唱版本、演唱歌手等特征确定。具体地,所述曲风包括轻音乐、摇滚、爵士以及古典等;所述演唱版本包括音乐短片(MV,MusicVideo)版本以及演唱会版本。其中,所述MV版本对应的数据是MV视频数据,所述MV视频数据可以是指存储在所述点歌机201对应的后台服务器中的视频数据,所述演唱会版本对应的数据是现场演唱会数据,所述现场演唱会数据可以是指所述点歌机201通过后台服务器从演唱会现场的VR录像设备中获取到的视频数据。
这里,对根据用户选取的歌曲以及选取的视频输出设备(点歌机或VR设备),确定所述歌曲对应的虚拟场景的技术实现进行举例:假如在所述点歌机201的后台服务器中存储的歌曲有“一无所有”、“光辉岁月”、“海阔天空”、“一直很安静”、“走路去钮约”,那么,当用户选择歌手“崔健”的歌曲“一无所有”,并且要求以VR设备202进行视频输出时,则所述VR设备202通过透镜模组为用户呈现出的虚拟场景是与曲风“摇滚”对应的节奏感较强、并且气氛比较热烈的场景;而当用户选择歌手“阿桑”的歌曲“一直很安静”,并且要求以VR设备202进行视频输出时,则所述VR设备202通过透镜模组为用户呈现出的虚拟场景是与曲风“轻音乐”对应的气氛比较轻柔的场景。具体所述虚拟场景的数据,可以存储在所述点歌机201的后台服务器中;也可以存储于所述点歌机201的本地。
这里,对根据不同的原唱歌手来确定歌曲类型进行举例。比如像《忘记你》这首歌,若卡拉OK点歌系统中有邓丽君,张学友,卢巧音等人唱的不同版本,则相应的歌曲类型至少可以有“邓丽君”类型、“张学友”类型和“卢巧音”类型。
本发明实施例中,还可以由卡拉OK点歌系统的运营人员预先根据为歌曲确定的类型,为歌曲分配类型标识,并将类型标识与歌曲的对应于该类型标识的视频数据对应存储于卡拉OK点歌系统中,以便后续可以根据歌曲的类型标识找到相应的视频数据。其中,所述类型标识,用以表示歌曲的类型。以下举例说明如何为歌曲分配类型标识,以及如何将类型标识和视频数据进行对应存储。
比如,对于歌曲《亲密爱人》,若卡拉OK点歌系统中存在该歌曲的演唱会版本,则可以为该首歌曲分配表示“演唱会”类型的标识“concert”。标识“concert”可以与该首歌曲的演唱会版本的视频数据,对应存储在卡拉OK点歌系统包含的存储空间中。当然,若卡拉OK点歌系统中还存在该歌曲的MV版本,则可以为该首歌曲分配表示“MV”类型的标识“mv”。标识“mv”可以与该歌曲的MV版本的视频数据,对应存储在卡拉OK点歌系统包含的存储空间中。
经过上述处理,可以对歌曲与类型标识建立如表1所示的下述映射关系。
歌曲名称 类型标识 视频数据
《亲密爱人》 Concert 《亲密爱人》的演唱会版本的视频数据
《亲密爱人》 mv 《亲密爱人》的MV版本的视频数据
…… …… ……
表1:
进一步举例:对于歌曲《梦中的婚礼》,如果卡拉OK点歌系统的运营人员为歌曲确定的类型是“轻音乐”,则卡拉OK点歌系统为所述歌曲《梦中的婚礼》分配的类型标识可以是“soft”,类型标识“soft”可以与歌曲《梦中的婚礼》的视频数据,对应存储在卡拉OK点歌系统包含的存储空间中;对于歌曲《北京北京》,卡拉OK点歌系统的运营人员为歌曲确定的类型是“摇滚”,则卡拉OK点歌系统为歌曲《北京北京》分配的类型标识可以是“rock”,类型标识“rock”与歌曲《北京北京》的视频数据对应存储在卡拉OK点歌系统包含的存储空间中;对于歌曲《玫瑰人生》,卡拉OK点歌系统的运营人员为歌曲确定的类型是“爵士”,则卡拉OK点歌系统为歌曲《玫瑰人生》分配的类型标识可以是“jazz”,类型标识“jazz”和歌曲《玫瑰人生》的视频数据对应存储在卡拉OK点歌系统包含的存储空间中;对于歌曲《关山月》,卡拉OK点歌系统的运营人员为歌曲确定的类型是“古典,则卡拉OK点歌系统为歌曲《关山月》分配的类型标识可以是“classical”,类型标识“classical”和歌曲《关山月》的视频数据对应存储在卡拉OK点歌系统包含的存储空间中。
经过上述处理,还可以对歌曲和类型标识建立如表2所示的下述映射关系。
Figure BDA0001349754230000081
表2:
本发明实施例中,表1和表2中所述的视频数据,可以是保存在卡拉OK点歌系统中的VR视频数据,也可以是保存在卡拉OK点歌系统中的二维图像对应的数据。当保存在卡拉OK点歌系统中的视频数据是VR视频数据时,则可以在用户请求播放VR视频时,由所述点歌机直接调用所述VR视频数据,并通过所述VR设备进行输出;当保存在卡拉OK点歌系统中的视频数据是二维图像对应的数据时,则在用户请求播放VR视频时,由所述点歌机将所述二维图像对应的数据分割成左眼图像数据和右眼图像数据,再将分割后的左眼数据和右眼数据合并成位置不同的数据后,作为所述VR视频数据通过所述VR设备进行输出。这里,由于所述VR设备发出的光线入射至用户的左眼和右眼的光线的相位是不一致的,因此,用户看到的画面是三维立体的。
本发明实施例中,在确定待演唱歌曲的歌曲类型时,具体可以通过检测用户对于点歌机的输入行为进行确定。所述输入行为包括:语音行为和触控行为。
下面对根据用户的输入行为确定待演唱歌曲的歌曲类型,进行举例说明:
示例1:当用户通过语音输入进行歌曲选择时,所述点歌机能够检测到所述用户的语音信号(下面,将所述语音信号称为第一语音信号),当所述点歌机检测到所述第一语音信号时,确定所述用户的输入行为是所述语音行为。然后,所述点歌机将所述第一语音信号解析成与所述第一语音信号对应的第一语音数据,并将所述第一语音数据与歌曲选择指令对应的文字数据进行匹配,根据匹配结果,确定所述语音数据与所述文字数据匹配成功时,确定所述语音行为触发的是歌曲选择指令。则在歌曲数据库中获取与所述歌曲选择指令对应的歌曲数据,并向用户输出所述歌曲数据(具体而言可以是根据所述歌曲数据进行相应信息的显示,以便用户获知)。这里,所述歌曲数据包括:歌曲名称和歌手名称。之后,所述点歌机继续检测当前用户的输入行为,确定当前检测到用户输入的第二语音信号时,将所述第二语音信号进行解析,得到第二语音数据,将所述第二语音数据与所述歌曲数据对应的数据进行匹配,根据匹配结果,确定所述第二语音数据与所述歌曲数据中至少一个歌手名称对应的数据匹配成功时,则在所述歌曲数据中提取与匹配成功的歌手名称数据对应的歌曲数据,根据提取的所述歌曲数据对应的歌曲类型数据,确定所述用户选取的待演唱歌曲的歌曲类型。
例如,通过关键词识别技术,将第一语音信号进行解析后,得到的第一语音数据:“披着,羊皮,狼”,则将所述第一语音数据“披着,羊皮,狼”与歌曲选择指令对应的文字数据进行匹配,根据匹配结果,确定所述歌曲选择指令对应的文字数据中包含有关键词“披着,羊皮,狼”时,确定当前用户的语音行为对应的是歌曲“披着羊皮的狼”的歌曲选择指令,然后在歌曲数据库中获取歌曲“披着羊皮的狼”的歌曲数据。根据获取到的歌曲“披着羊皮的狼”的歌曲数据对应的歌曲类型,确定所述歌曲“披着羊皮的狼”包含有两个歌曲版本,例如,包括歌手“谭咏麟”演唱的演唱会版本数据,和歌手“刀郎”演唱的MV版本数据。则继续对用户的输入行为进行检测。当用户通过语音输入,对歌手“谭咏麟”进行选择时,所述点歌机检测到所述用户的第二语音信号,则将所述第二语音信号进行解析,得到第二语音数据“谭、咏、麟”,将所述第二语音数据“谭、咏、麟”与所述歌曲数据中的歌手名称进行匹配,根据匹配结果,确定所述第二语音数据“谭、咏、麟”与所述歌曲数据中的歌手名称“谭咏麟”匹配时,则提取与歌手名称“谭咏麟”对应的版本数据。根据所述版本数据确定待演唱歌曲是演唱会版本。
示例2:当用户通过手指或触控笔在所述点歌机的显示屏上,通过触控的方式进行歌曲选择时,所述点歌机能够检测到触控信号(下面,将所述触控信号称为第一触控信号),当所述点歌机检测到所述触控信号时,确定所述用户的输入行为是触控行为。则所述点歌机获取所述用户对于所述显示屏的触控所产生的第一触控点位置数据,然后将所述第一触控点位置数据与歌曲选择指令对应的位置数据进行匹配,根据匹配结果,确定所述第一触控点位置数据与所述歌曲选择指令对应的至少一个位置数据匹配时,确定当前用户的触控行为触发的是所述歌曲选择指令。然后,在歌曲数据库中获取与所述歌曲选择指令对应的歌曲数据,并将所述歌曲数据向当前用户输出。之后,所述点歌机继续检测当前用户的输入行为,确定检测到所述用户输入的第二触控信号时,则获取所述用户对于显示屏所产生的第二触控点位置数据,将所述第二触控点位置数据与所述歌曲数据中,歌手名称对应的位置数据进行匹配,根据匹配结果,确定所述第二触控点位置数据与所述歌曲数据中,至少一个歌手名称的位置数据匹配成功时,在所述歌曲数据中,提取匹配成功的歌手对应的版本数据,根据提取的所述版本数据确定待演唱歌曲的歌曲类型。
步骤102,获取与所述歌曲类型对应的VR第一视频数据;
本发明实施例中,所述VR第一视频数据包括:VR视频数据和非VR视频数据,其中,所述非VR视频数据包括二维图像对应的数据。
具体地,获取与所述歌曲类型对应的VR第一视频数据,包括:
根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的目标VR视频数据,将所述目标VR视频数据作为所述VR第一视频数据;或者,根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的、用于生成所述VR第一视频数据的待处理数据;将所述待处理数据生成所述VR第一视频数据。
本发明实施例中,将所述待处理数据生成所述VR第一视频数据,包括:
所述待处理数据为VR视频片段数据时,将所述VR视频片段数据进行组合,以得到作为所述VR第一视频数据的VR视频组合数据;所述待处理数据为非VR视频片段数据时,将所述非VR视频片段数据以进行图像分割,得到左眼数据和右眼数据;将所述左眼数据和所述右眼数据合并成位置不同的数据,将所述位置不同的数据作为所述VR第一视频数据。
具体地,所述待处理数据是VR视频片段数据时,是通过现场演唱会中的VR录像设备对现场进行VR视频片段采集,这里,VR录像设备可以在现场采集多种不同类型的VR视频片段数据。例如,以演唱会现场上用户热烈气氛这一场景为例,“观众的欢呼喝彩”可以是一种VR视频片段、“观众起立挥手”也可以是一种VR视频片段,“观众挥动荧光棒”也可以是一种VR视频片段,“观众跟唱”也可以是一种VR视频片段。VR录像设备在现场采集到VR视频片段数据后,将采集到的所有的VR视频片段作为待处理数据,向所述迷你K歌房的后台服务器发送,所述后台服务器接收到所述VR视频片段后,将所述VR视频片段数据进行组合,以得到作为所述VR第一视频数据的VR视频组合数据。
步骤103,向VR设备输出VR第二视频数据;
本发明实施例中,所述VR视频第二数据为所述VR第一视频数据本身,或,所述VR第二视频数据根据所述VR第一视频数据确定。
例如,当所述点歌机的本地视频数据库中,存储有待演唱歌曲对应的VR视频数据时,则所述点歌机可以在本地视频数据库获取与待演唱歌曲对应的VR视频数据,并将获取到的所述VR视频数据作为所述VR视频第二数据向所述VR设备发送,而不需要所述点歌机再对待演唱歌曲对应的VR视频数据,进行VR视频数据的处理。从而能够提高数据的处理效率。
本发明实施例中,所述点歌机在向VR设备输出所述VR第二视频数据时,所述方法还包括:接收歌词显示指令;获取与所述歌词显示指令对应的歌词数据;将所述歌词数据向所述VR设备输出,所述VR设备在接收到所述歌词数据后,按照预设输出轨迹,依次显示歌词。
这里,所述预设输出轨迹可以是在所述用户的视觉空间的歌词显示框中,按照自左向右的输出轨迹,输出所述歌词数据;也可以是在所述歌词显示框中,按照自上向下的输出轨迹,输出所述歌词数据,方便用户在不熟悉歌词的情况下,用于向用户提示歌词,使得用户能够以更好的状态完成歌曲演唱。
本发明实施例中,所述点歌机和所述VR设备均可设置有歌词获取按键(可以是物理按键,也可以是虚拟按键),用户可以通过按压所述歌词获取按键,向所述点歌机发送歌词显示指令。例如,当前用户通过按压所述VR设备上的歌词获取按钮,所述VR设备检测到歌词获取信号时,向所述点歌机发送歌词显示指令,所述点歌机在接收到所述歌词显示指令时,从歌词数据库中获取所述待演唱歌曲对应的歌词数据,并将所述歌词数据加入到所述VR第二视频数据中,使得所述歌词数据的播放进度与所述VR第二视频数据的播放进度进行同步,之后,控制所述VR设备将所述歌词数据按照预设输出轨迹向用户输出。
本发明实施例中,所述点歌机在向VR设备输出所述VR第二视频数据之后,所述方法还包括:接收所述VR设备发送的用户眼球运动特征数据;其中,所述用户眼球运动特征数据包括眼睛注视点的位置数据,和/或,眼球相对头部的运动数据;根据所述用户眼球运动特征数据,确定与所述用户眼球运动特征相匹配的显示内容调整指令;向所述VR设备发送所述显示内容调整指令,以触发VR设备根据所述显示内容调整指令调整所述VR设备的显示内容。
具体地,所述VR设备在得到所述VR第二视频数据后,通过所述VR设备中的眼动仪,实时采集当前用户的眼睛注视点的位置数据,和/或,眼球相对头部的运动数据,并将所述眼睛注视点的位置数据,和/或,眼球相对头部的运动数据作为所述用户眼球运动特征数据,实时向所述处理装置发送。这里,所述眼动仪是一种能够跟踪测量眼球位置及眼球运动信息的一种设备。
本发明实施例中,所述显示内容调整指令,包括:视野调整指令、歌词字体调整指令、VR场景切换指令和歌曲切换指令。具体地,所述处理装置根据所述眼睛的眨动频率和/或眼球的移动角度,确定用户的眼球向左移动时,确定用户触发的显示内容调整指令为向左调整VR图像视野指令,则向所述VR设备发送所述向左调整VR图像视野指令,以触发VR设备根据所述向左调整VR图像视野指令,调整所述VR设备输出的VR第二视频数据;当所述处理装置根据所述眼睛的眨动频率和/或眼球的移动角度,确定用户的眼球向右移动时,确定对应的显示内容调整指令为向右调整VR图像视野指令,则向所述VR设备发送所述向右调整VR图像视野指令,以触发VR设备根据所述向右调整VR图像视野指令调整所述VR设备输出的VR第二视频数据;当所述处理装置根据所述眼睛的眨动频率和/或眼球的移动角度,确定用户的眼球以弧形角度转动时,确定对应的显示内容调整指令为VR场景切换指令,则向所述VR设备发送所述VR场景切换指令,以触发VR设备根据所述VR场景切换指令,切换所述VR设备当前输出的VR第二视频数据;当所述处理装置根据所述眼睛的眨动频率和/或眼球的移动角度,确定用户的双眼在预设时间内同时眨动两次或三次时(具体次数根据需要设定),确定对应的显示内容调整指令为确定当前VR场景指令,则向所述VR设备发送所述确定当前VR场景指令,以控制所述VR设备输出当前确定的VR第二视频数据;当所述处理装置根据所述眼睛的眨动频率和/或眼球的移动角度,确定用户的眼球在预设时间内处于静止的时间达到预设时间时,确定对应的显示内容调整指令为歌词字体调整指令,则向所述VR设备发送所述歌词字体调整指令,以触发VR设备根据所述歌词字体调整指令,调整所述VR设备输出的歌词数据的字体大小。当所述处理装置根据所述眼睛的眨动频率和/或眼球的移动角度,确定用户的左眼眨动时,获取左眼眨动的频率,确定所述左眼眨动的频率在预设频率范围内时,确定对应的显示内容调整指令为切换下一曲指令,则向所述VR设备发送所述切换下一曲指令,以控制所述VR设备将当前输出的VR第二视频数据切换到下一曲歌曲对应的VR第二视频数据。
本发明实施例中,所述点歌机还可以对歌曲数据库中存储的每首歌曲数据中重复两次以上的歌曲数据进行提取,并将提取的所述重复两次以上的所述歌曲数据标记为副歌数据,以及记录所述副歌数据的起始播放时间和结束播放时间。然后,所述点歌机在所述副歌数据的起始播放时间,设置表征观众喝彩欢呼场景的视频片段数据。当所述点歌机检测到当前歌曲数据的播放进度,到达所述副歌数据的起始播放时间时,则控制所述VR设备输出所述表征观众喝彩欢呼场景的视频片段数据。并通过耳麦向用户输出预先设置好的音频数据,例如,所述音频数据是现场录制的观众喝彩欢呼声,或者通过电子合成的观众声音在高潮部分进行跟唱的声音。从而达到为用户带来更好的演唱体验的效果。
图3为本发明实施例一种信息处理装置的组成示意图;如图3所示,所述装置包括:确定单元301、获取单元302和输出单元303;
其中,所述确定单元301,用于确定待演唱歌曲的歌曲类型;
所述获取单元302,用于获取与所述歌曲类型对应的VR第一视频数据;
所述输出单元303,用于向VR设备输出VR第二视频数据;其中,所述VR视频第二数据为所述VR第一视频数据本身,或,所述VR第二视频数据根据所述VR第一视频数据确定。
本发明实施例中,所述处理装置具体可以是迷你K歌房的点歌机,所述点歌机通过有线连接或无线连接的方式连接有VR设备。所述VR设备具体可以是智能眼镜、智能头盔等头显设备。且所述点歌机安装有卡拉OK点歌系统。具体点歌机和VR设备的连接结构如图2所示。
这里,所述VR设备中安装有透镜模组,通过所述透镜模组能够为用户呈现出虚拟场景,且每种虚拟场景对应一种歌曲类型。这里,所述歌曲类型可以是由卡拉OK点歌系统的运营人员预先根据歌曲的曲风、演唱版本、演唱歌手等特征确定。所述曲风包括轻音乐、摇滚、爵士以及古典等;所述演唱版本包括MV类型以及演唱会类型。其中,所述MV类型对应的MV视频数据是指存储在所述点歌机对应的后台服务器中的视频数据,所述演唱会类型对应的现场演唱会的数据是指所述点歌机通过后台服务器从演唱会现场的VR录像设备中获取到的视频数据。
这里,对根据不同的原唱歌手来确定歌曲类型进行举例。例如,像《忘记你》这首歌,若卡拉OK点歌系统中有邓丽君,张学友,卢巧音等人唱的不同版本,则相应的歌曲类型至少可以有“邓丽君”类型、“张学友”类型和“卢巧音”类型。
这里,对根据用户选取的歌曲以及选取的视频输出设备,确定所述歌曲对应的虚拟场景的技术实现进行举例:假如在服务器中存储的歌曲有“一无所有”、“光辉岁月”、“海阔天空”、“一直很安静”、“走路去钮约”,那么,当用户选择歌手“崔健”的歌曲“一无所有”,并且要求以VR视频格式进行播放时,则所述VR设备通过透镜模组为用户呈现出的虚拟场景是节奏感较强、并且气氛比较热烈的场景;而当用户选择歌手“阿桑”的歌曲“一直很安静”,并且要求以VR视频格式进行播放时,则所述VR设备通过透镜模组为用户呈现出的虚拟场景是气氛比较轻柔的场景。具体所述虚拟场景的数据,均存储在所述信息处理装置的后台服务器中;也可以存储于所述点歌机的本地。
本发明实施例中,还可以由卡拉OK点歌系统的运营人员预先根据为歌曲确定的类型,为歌曲分配类型标识,并将类型标识与歌曲的对应于该类型标识的视频数据对应存储于卡拉OK点歌系统中,以便后续可以根据歌曲的类型标识找到相应的视频数据。其中,所述类型标识,用以表示歌曲的类型。具体如何为歌曲分配类型标识,以及如何将类型标识和视频数据进行对应存储。请参照方法实施中的表1和表2所示。
本发明实施例中,所述确定单元301在确定待演唱歌曲的歌曲类型时,具体可以通过检测当前用户对于点歌机的输入行为,所述输入行为包括:语音行为和触控行为。具体地,当用户通过语音输入进行歌曲选择时,所述处理装置能够检测到所述用户的语音信号,这里,将所述语音信号称为第一语音信号。当所述处理装置检测到所述第一语音信号时,确定所述用户的输入行为是所述语音行为。然后,将所述第一语音信号解析成与所述语音信号对应的第一语音数据,并将所述第一语音数据与歌曲选择指令对应的文字数据进行匹配,所述确定单元301根据匹配结果,确定所述语音数据与所述文字数据中的关键词匹配成功时,确定当前用户的语音行为触发的是所述歌曲选择指令。之后,触发所述获取单元302,由所述获取单元302在歌曲数据库中获取所述歌曲选择指令所指示选择的歌曲数据,并根据所述歌曲数据,确定当前用户选择的歌曲类型。然后触发所述输出单元303将所述歌曲数据输出。这里,所述歌曲数据包括:歌曲名称和歌手名称。
之后,所述处理装置继续检测当前用户的输入行为,根据所述输入行为,确定当前检测到第二语音信号时,将所述第二语音信号进行解析,以得到第二语音数据。将所述第二语音数据与歌手名称对应的数据进行匹配,根据匹配结果,确定所述第二语音数据与至少一个所述歌手名称对应的数据匹配成功时,在所述歌曲数据中提取与匹配成功的歌手名称数据对应的歌曲类型数据。所述确定单元301具体根据提取的所述歌曲类型数据确定待演唱歌曲的歌曲类型。
例如,处理装置通过关键词识别技术,将第一语音信号进行解析后,得到的第一语音数据:“披着,羊皮,狼”,则将所述第一语音数据“披着,羊皮,狼”与歌曲选择指令对应的文字数据进行匹配,根据匹配结果,确定所述歌曲选择指令对应的文字数据中包含有关键词“披着,羊皮,狼”时,确定当前用户的语音行为对应的是歌曲“披着羊皮的狼”的选择指令,然后触发获取单元302在歌曲数据库中获取歌曲“披着羊皮的狼”的歌曲数据。确定单元301根据获取到的歌曲“披着羊皮的狼”的歌曲数据,确定所述歌曲“披着羊皮的狼”包含有两个版本的歌曲数据,例如,包括歌手“谭咏麟”演唱的演唱会版本数据,和歌手“刀郎”演唱的MV版本数据。
然后,处理装置继续对用户的语音输入进行检测。当用户通过语音输入,对歌手“谭咏麟”进行选择时,所述点歌机检测到第二语音信号,将所述第二语音信号进行解析,得到第二语音数据“谭、咏、麟”,将所述第二语音数据与所述歌曲数据中的歌手名称进行匹配,根据匹配结果,确定所述歌曲数据中的歌手名称有包含“谭、咏、麟”的数据时,则提取与歌手名称“谭咏麟”对应的版本数据。确定单元301根据所述版本数据确定待演唱歌曲是演唱会版本。
本发明实施例中,当用户通过手指或触控笔在所述处理装置的显示屏上,通过触控的方式进行歌曲选择时,所述处理装置能够在所述显示屏上检测到用于对于所述显示屏的触控所产生的触控信号,这里,将所述触控信号称为第一触控信号。当检测到所述第一触控信号时,确定所述用户的输入行为是所述触控行为,则将所述触控信号解析成与所述触控信号对应的触控点位置数据,然后将所述触控点位置数据与歌曲选择指令对应的位置数据进行匹配,确定单元301根据匹配结果,确定所述触控点位置数据与所述歌曲选择指令对应的至少一个位置数据匹配时,确定当前用户的触控行为触发的是所述歌曲选择指令。然后,触发所述获取单元302,由所述获取单元302在歌曲数据库中获取与所述触控点位置数据对应的歌曲数据,并由所述输出单元303将所述歌曲数据向用户输出。
在所述输出单元303将所述歌曲数据向用户输出后,所述处理装置继续检测当前用户的输入行为,根据所述输入行为,确定当前检测到第二触控信号时,将所述第二触控信号进行解析,以得到第二触控点位置数据。将所述第二触控点位置数据与所述歌曲数据中,歌手名称对应的位置数据进行匹配,所述确定单元301根据匹配结果,确定所述第二触控点位置数据与所述歌曲数据中,至少一个所述歌手名称对应的位置数据匹配成功时,在所述歌曲数据中提取与匹配成功的歌手名称数据对应的歌曲类型数据。所述确定单元301具体根据所提取的所述歌曲类型数据确定待演唱歌曲的歌曲类型。
本发明实施例中,所述获取单元302在所述待演唱歌曲对应的视频数据中,获取与所述歌曲类型对应的VR第一视频数据。这里,所述获取单元302获取到的所述VR第一视频数据包括:VR视频数据和非VR视频数据,其中,所述非VR视频数据包括二维图像对应的数据。
具体地,所述获取单元302根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的目标VR视频数据,将所述目标VR视频数据作为所述VR第一视频数据;或者,根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的、用于生成所述VR第一视频数据的待处理数据;利用所述待处理数据生成所述VR第一视频数据。
这里,所述获取单元302,具体还用于所述待处理数据为VR视频片段数据时,将所述VR视频片段数据进行组合,以得到作为所述VR第一视频数据的VR视频组合数据;所述待处理数据为非VR视频片段数据时,将所述非VR视频片段数据以进行图像分割,得到左眼数据和右眼数据,将分解后的左眼数据和右眼数据合并成位置不同的数据,以作为所述VR第一视频数据。
本发明实施例中,所述待处理数据是VR视频片段数据时,是通过现场演唱会中的VR录像设备进行VR视频片段采集,这里,VR录像设备可以采集多种不同类型的VR视频片段数据。这里,以演唱会上用户热烈气氛这一场景为例,“观众的欢呼喝彩”可以是一种VR视频片段、“观众起立挥手”也可以是一种VR视频片段,“观众挥动荧光棒”也可以是一种VR视频片段,“观众跟唱”也可以是一种VR视频片段。VR录像设备在现场采集到VR视频片段数据后,将采集到的所有的VR视频片段数据作为待处理数据,向所述处理装置发送,所述处理装置接收到所述VR视频片段后,将所述VR视频片段数据进行组合,以得到作为所述VR第一视频数据的VR视频组合数据。
本发明实施例中,所述获取单元302获取到的所述VR第一视频数据后,将所述VR第一视频数据作为VR第二视频数据向VR设备输出。或,根据所述VR第一视频数据确定所述VR第二视频数据后,向VR设备输出。
例如,当所述处理装置的本地视频数据库中,存储有待演唱歌曲对应的VR第一视频数据时,则所述处理装置可以在本地视频数据库获取与待演唱歌曲对应的VR第一视频数据,并将所述VR第一视频数据作为所述VR视频第二数据,向所述VR设备发送,而不需要所述处理装置再对待演唱歌曲的对应的VR第一视频数据,进行VR视频数据的处理。
本发明实施例中,所述处理装置还包括接收单元305,用于接收歌词显示指令;所述获取单元302,还用于获取所述歌词显示指令对应的歌词数据;所述输出单元303,具体还用于将所述歌词数据向所述VR设备输出。
这里,在所述输出单元303将所述歌词数据向所述VR设备输出后,由所述VR设备按照预设输出轨迹,依次显示歌词。具体地,所述预设输出轨迹可以是在所述用户的视觉空间的歌词显示框中,按照自左向右输出轨迹,输出所述歌词数据;也可以是在所述歌词显示框中,按照自上向下输出轨迹,输出所述歌词数据,方便用户在不熟悉歌词的情况下,用于向用户提示歌词,使得用户能够以更好的状态完成歌曲演唱。
具体地,所述处理装置和所述VR设备中均设置有歌词获取按键(可以是物理按键,也可以是虚拟按键),用户可以通过按压所述歌词获取按键,向所述处理装置发送歌词获取信号。例如,当前用户通过所述VR设备上的歌词获取按钮,向所述处理装置发送歌词显示指令,所述处理装置在检测到所述歌词显示指令时,从歌词数据库中获取所述待演唱歌曲对应的歌词数据,将与所述歌词数据加入到所述VR第二视频数据中,使得所述歌词数据的播放进度与所述VR第二视频数据的播放进度进行同步,之后,控制所述VR设备按照预设输出轨迹向用户输出所述歌词数据。
本发明实施例中,所述接收单元305还用于接收所述VR设备发送的用户眼球运动特征数据;其中,所述用户眼球运动特征数据包括眼睛注视点的位置数据,和/或,眼球相对头部的运动数据;所述确定单元301根据所述用户眼球运动特征数据,确定与所述用户眼球运动特征相匹配的显示内容调整指令;所述输出单元303用于向所述VR设备发送所述显示内容调整指令,以触发VR设备根据所述显示内容调整指令调整所述VR设备的显示内容。
具体地,所述VR设备在得到所述VR第二视频数据后,通过所述VR设备中的眼动仪,实时采集当前用户的眼睛注视点的位置数据,和/或,眼球相对头部的运动数据,将所述眼睛注视点的位置数据或者眼球相对头部的运动数据作为所述用户眼球运动特征数据,实时向所述处理装置发送。
本发明实施例中,所述显示内容调整指令包括:视野调整指令、歌词字体调整指令、VR场景切换指令和歌曲切换指令。具体地,所述确定单元301根据所述接收单元305接收到的所述眼睛的眨动频率和/或眼球的移动角度,确定用户的眼球向左移动时,确定用户触发的显示内容调整指令为向左调整VR图像视野指令,则触发所述输出单元303向所述VR设备发送所述向左调整VR图像视野指令,以触发VR设备根据所述向左调整VR图像视野指令调整所述VR设备输出的VR第二视频数据;所述确定单元301根据所述接收单元305接收到的所述眼睛的眨动频率和/或眼球的移动角度,确定用户的眼球向右移动时,确定对应的显示内容调整指令为向右调整VR图像视野指令,则触发所述输出单元303向所述VR设备发送所述向右调整VR图像视野指令,以触发VR设备根据所述向右调整VR图像视野指令,调整所述VR设备输出的VR第二视频数据;所述确定单元301根据所述接收单元310接收到的所述眼睛的眨动频率和/或眼球的移动角度,确定用户的眼球以弧形角度转动时,确定对应的显示内容调整指令为VR场景切换指令,则触发所述输出单元303向所述VR设备发送所述VR场景切换指令,以触发VR设备根据所述VR场景切换指令,切换所述VR设备当前输出的VR第二视频数据;所述确定单元301根据所述接收单元310接收到的所述眼睛的眨动频率和/或眼球的移动角度,确定用户的双眼在预设时间内同时眨动两次或三次时(具体次数根据需要设定),确定对应的显示内容调整指令为确定当前VR场景指令,则触发所述输出单元303向所述VR设备发送所述确定当前VR场景指令,控制所述VR设备输出当前确定的VR第二视频数据;所述确定单元301根据所述接收单元310接收到的所述眼睛的眨动频率和/或眼球的移动角度,确定用户的眼球在预设时间内处于静止的时间达到预设时间时,确定对应的显示内容调整指令为歌词字体调整指令,则触发所述输出单元303向所述VR设备发送所述歌词字体调整指令,以触发VR设备根据所述歌词字体调整指令,调整所述VR设备输出的歌词数据的字体大小。所述确定单元301根据所述接收单元310接收到的所述眼睛的眨动频率和/或眼球的移动角度,确定用户的左眼眨动时,触发所述获取单元302获取左眼眨动的频率,所述确定单元301确定所述左眼眨动的频率在预设频率范围内时,确定对应的显示内容调整指令为切换下一曲指令,则触发所述输出单元303向所述VR设备发送所述切换下一曲指令,控制所述VR设备将当前输出的VR第二视频数据切换到下一曲歌曲对应的VR第二视频数据。
本发明实施例中,所述处理装置还包括提取单元304。
所述提取单元304主要用于对所述VR视频数据中每首歌曲数据中重复两次以上的歌曲数据进行提取,将提取的重复两次以上的所述歌曲数据标记为副歌数据,并且记录所述副歌数据在对应的完整歌曲数据中的播放时间,所述播放时间包括:所述副歌数据的起始播放时间和结束播放时间。所述处理装置在所述副歌数据的起始播放时间,设置表征观众喝彩欢呼场景的视频片段数据,并且在当前用户演唱的歌曲进度达到所述歌曲的副歌数据的起始播放时间时,则控制所述VR设备输出所述表征观众喝彩欢呼场景的视频片段数据。并通过耳麦向用户输出预先设置好的音频数据,例如,所述音频数据是现场录制的观众喝彩欢呼声,或者通过电子合成的观众声音在高潮部分进行跟唱的声音。从而达到为用户带来更好的演唱体验的效果。
需要说明的是,上述实施例提供的信息处理装置,在进行信息处理时,仅以上述各程序模块的划分进行举例说明,实际应用中,可以根据需要而将上述处理分配由不同的程序模块完成,即将装置的内部结构划分成不同的程序模块,以完成以上描述的全部或者部分处理。并且,在实际应用中,所述确定单元301、获取单元302、输出单元303、提取单元304和接收单元305均可由位于信息处理装置中的中央处理器(CPU)、微处理器(MPU)、数字信号处理器(DSP)、或现场可编程门阵列(FPGA)等实现。
本发明实施例中,还提供一种信息处理系统,所述系统包括:信息处理装置和VR设备;
其中,所述信息处理装置,用于确定待演唱歌曲的歌曲类型;获取与所述歌曲类型对应的虚拟现实VR第一视频数据;向所述VR设备输出VR第二视频数据;其中,所述VR视频第二数据为所述VR第一视频数据本身,或者,所述VR第二视频数据根据所述VR第一视频数据确定;
所述VR设备,用于接收所述VR第二视频数据,并向所述信息处理装置发送用户眼球运动特征数据;其中,所述用户眼球运动特征数据包括眼睛注视点的位置数据,和/或,眼球相对头部的运动数据,以触发所述信息处理装置根据所述用户眼球运动特征数据,确定与所述用户眼球运动特征相匹配的显示内容调整指令;并根据所述显示内容调整指令调整显示内容。
这里,所述系统的示意图与图2所示的点歌机和VR设备的连接结构示意图相同,具体所述信息处理装置和VR设备的交互,可参照图2中点歌机与VR设备的交互描述。在图2中,所述信息处理装置为点歌机201。
图4为本发明实施例中另一种信息处理装置的结构示意图,如图4所示,所述信息处理装置包括:存储器401、一个或多个处理器402、以及一个或多个模块403;
其中,所述一个或多个模块403被存储在所述存储器401中,并被配置成由所述一个或多个处理器402执行,所述一个或多个处理器402在执行所述一个或多个模块403时,执行的指令包括:
确定待演唱歌曲的歌曲类型;
获取与所述歌曲类型对应的虚拟现实VR第一视频数据;
向VR设备输出VR第二视频数据;
其中,所述VR视频第二数据为所述VR第一视频数据本身,或,所述VR第二视频数据根据所述VR第一视频数据确定。
所述一个或多个处理器402在执行所述一个或多个模块403时,执行的指令还包括:
根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的目标VR视频数据,将所述目标VR视频数据作为所述VR第一视频数据;
或者,根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的、用于生成所述VR视频数据的待处理数据;将所述待处理数据生成所述VR第一视频数据。
所述一个或多个处理器402在执行所述一个或多个模块403时,执行的指令还包括:
检测到所述待处理数据为VR视频片段数据时,将所述VR视频片段数据进行组合,以得到作为所述VR第一视频数据的VR视频组合数据;
或者,检测到所述待处理数据为非VR视频片段数据时,将所述非VR视频片段数据以进行图像分割,得到左眼数据和右眼数据;将分解后的左眼数据和右眼数据合并成位置不同的数据,以作为所述VR第一视频数据。
所述一个或多个处理器402在执行所述一个或多个模块403时,执行的指令还包括:
接收歌词显示指令;
获取与所述歌词显示指令对应的歌词数据;
向所述VR设备输出所述歌词数据。
所述一个或多个处理器402在执行所述一个或多个模块403时,执行的指令还包括:
接收所述VR设备发送的用户眼球运动特征数据;其中,所述用户眼球运动特征数据包括眼睛注视点的位置数据,和/或,眼球相对头部的运动数据;
根据所述用户眼球运动特征数据,确定与所述用户眼球运动特征相匹配的显示内容调整指令;
向所述VR设备发送所述显示内容调整指令,以触发VR设备根据所述显示内容调整指令调整所述VR设备的显示内容。
本发明实施例还提供一种存储一个或多个程序的存储介质,所述一个或多个程序包括指令,所述指令由信息处理装置的一个或多个处理器执行时,执行:
确定待演唱歌曲的歌曲类型;
获取与所述歌曲类型对应的虚拟现实VR第一视频数据;
向VR设备输出VR第二视频数据;
其中,所述VR视频第二数据为所述VR第一视频数据本身,或,所述VR第二视频数据根据所述VR第一视频数据确定。
所述指令由信息处理装置的一个或多个处理器执行时,还执行:
根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的目标VR视频数据,将所述目标VR视频数据作为所述VR第一视频数据;
或者,根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的、用于生成所述VR视频数据的待处理数据;将所述待处理数据生成所述VR第一视频数据。
所述指令由信息处理装置的一个或多个处理器执行时,还执行:
检测到所述待处理数据为VR视频片段数据时,将所述VR视频片段数据进行组合,以得到作为所述VR第一视频数据的VR视频组合数据;
或者,检测到所述待处理数据为非VR视频片段数据时,将所述非VR视频片段数据以进行图像分割,得到左眼数据和右眼数据;将分解后的左眼数据和右眼数据合并成位置不同的数据,以作为所述VR第一视频数据。
所述指令由信息处理装置的一个或多个处理器执行时,还执行:
接收歌词显示指令;
获取与所述歌词显示指令对应的歌词数据;
向所述VR设备输出所述歌词数据。
所述指令由信息处理装置的一个或多个处理器执行时,还执行:
接收所述VR设备发送的用户眼球运动特征数据;其中,所述用户眼球运动特征数据包括眼睛注视点的位置数据,和/或,眼球相对头部的运动数据;
根据所述用户眼球运动特征数据,确定与所述用户眼球运动特征相匹配的显示内容调整指令;
向所述VR设备发送所述显示内容调整指令,以触发VR设备根据所述显示内容调整指令调整所述VR设备的显示内容。
这里,所述计算机可读存储介质可以是计算机程序的存储器,所述存储器可以是由任何类型的易失性或非易失性存储器可以是只读存储器(ROM,Read Only Memory)、可编程只读存储器(PROM,Programmable Read-Only Memory)、可擦除可编程只读存储器(EPROM,Erasable Programmable Read-Only Memory)、电可擦除可编程只读存储器(EEPROM,Electrically Erasable Programmable Read-Only Memory)、磁性随机存取存储器(FRAM,Ferromagnetic Random Access Memory)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(CD-ROM,Compact Disc Read-Only Memory);磁表面存储器可以是磁盘存储器或磁带存储器。易失性存储器可以是随机存取存储器(RAM,Random AccessMemory),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(SRAM,Static Random Access Memory)、同步静态随机存取存储器(SSRAM,Synchronous Static Random Access Memory)、动态随机存取存储器(DRAM,Dynamic Random Access Memory)、同步动态随机存取存储器(SDRAM,SynchronousDynamic Random Access Memory)、双倍数据速率同步动态随机存取存储器(DDRSDRAM,Double Data Rate Synchronous Dynamic Random Access Memory)、增强型同步动态随机存取存储器(ESDRAM,Enhanced Synchronous Dynamic Random Access Memory)、同步连接动态随机存取存储器(SLDRAM,SyncLink Dynamic Random Access Memory)、直接内存总线随机存取存储器(DRRAM,Direct Rambus Random Access Memory)。本发明实施例描述的存储器旨在包括但不限于这些和任意其它适合类型的存储器。
所述存储器用于存储各种类型的数据以支持信息处理装置的操作。这些数据的示例包括:用于在信息处理装置上操作的任何计算机程序,如操作系统和应用程序。其中,操作系统包含各种系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务。应用程序可以包含各种应用程序,例如媒体播放器(Media Player)、浏览器(Browser)等,用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序中。
上述计算机程序可由信息处理装置的处理器执行,以完成前述方法所述步骤。计算机可读存储介质可以是FRAM、ROM、PROM、EPROM、EEPROM、Flash Memory、磁表面存储器、光盘、或CD-ROM等存储器;也可以是包括上述存储器之一或任意组合的各种设备,如移动电话、计算机、平板设备、个人数字助理等。
所述处理器可以是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。所述处理器可以是通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本发明实施例所公开的方法步骤,可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于存储介质中,该存储介质位于存储器,处理器读取所述存储器中的信息,结合其硬件完成前述方法的步骤。
本发明是参照根据本发明实施例的方法、装置(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装所设置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。

Claims (13)

1.一种信息处理方法,其特征在于,所述方法包括:
确定待演唱歌曲的歌曲类型;
获取与所述歌曲类型对应的虚拟现实VR第一视频数据;
向VR设备输出VR第二视频数据;
所述获取与所述歌曲类型对应的虚拟现实VR第一视频数据,包括:
根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的目标VR视频数据,将所述目标VR视频数据与至少一个VR视频片段组合,生成所述VR第一视频数据;
其中,所述VR视频第二数据为所述VR第一视频数据本身,或,所述VR第二视频数据根据所述VR第一视频数据确定;所述至少一个VR视频片段包括:具备活跃气氛的属性的VR视频片段。
2.根据权利要求1所述的方法,其特征在于,所述获取与所述歌曲类型对应的VR第一视频数据,还包括:
根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的、用于生成所述VR第一视频数据的待处理数据;将所述待处理数据生成所述VR第一视频数据。
3.根据权利要求2所述的方法,其特征在于,将所述待处理数据生成所述VR第一视频数据,包括:
所述待处理数据为非VR视频片段数据时,将所述非VR视频片段数据进行图像分割,得到左眼数据和右眼数据;
将所述左眼数据和所述右眼数据合并成位置不同的数据,将所述位置不同的数据作为所述VR第一视频数据。
4.根据权利要求1所述的方法,其特征在于,在向VR设备输出所述VR第二视频数据时,所述方法还包括:
接收歌词显示指令;
获取与所述歌词显示指令对应的歌词数据;
向所述VR设备输出所述歌词数据。
5.根据权利要求1所述的方法,其特征在于,在向VR设备输出所述VR第二视频数据之后,所述方法还包括:
接收所述VR设备发送的用户眼球运动特征数据;其中,所述用户眼球运动特征数据包括眼睛注视点的位置数据,和/或,眼球相对头部的运动数据;
根据所述用户眼球运动特征数据,确定与所述用户眼球运动特征相匹配的显示内容调整指令;
向所述VR设备发送所述显示内容调整指令,以触发VR设备根据所述显示内容调整指令调整所述VR设备的显示内容。
6.一种信息处理装置,其特征在于,所述装置包括:确定单元、获取单元和输出单元;
其中,所述确定单元,用于确定待演唱歌曲的歌曲类型;
所述获取单元,用于获取与所述歌曲类型对应的VR第一视频数据;
所述获取单元,具体用于根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的目标VR视频数据,将所述目标VR视频数据与至少一个VR视频片段组合,生成所述VR第一视频数据;
所述输出单元,用于向VR设备输出VR第二视频数据;其中,所述VR视频第二数据为所述VR第一视频数据本身,或,所述VR第二视频数据根据所述VR第一视频数据确定;
其中,所述至少一个VR视频片段包括:具备活跃气氛的属性的VR视频片段。
7.根据权利要求6所述的装置,其特征在于,所述获取单元,具体用于:
根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的、用于生成所述VR第一视频数据的待处理数据;利用所述待处理数据生成所述VR第一视频数据。
8.根据权利要求7所述的装置,其特征在于,所述获取单元,具体用于当所述待处理数据为非VR视频片段数据时,将所述非VR视频片段数据以进行图像分割,得到左眼数据和右眼数据,将所述左眼数据和所述右眼数据合并成位置不同的数据,将所述位置不同的数据作为所述VR第一视频数据。
9.根据权利要求6所述的装置,其特征在于,所述装置还包括:
接收单元,用于接收歌词显示指令;
所述获取单元,还用于获取与所述歌词显示指令对应的歌词数据;
所述输出单元,还用于向所述VR设备输出所述歌词数据。
10.根据权利要求9所述的装置,其特征在于,所述接收单元,还用于接收所述VR设备发送的用户眼球运动特征数据;其中,所述用户眼球运动特征数据包括眼睛注视点的位置数据,和/或,眼球相对头部的运动数据;
所述确定单元,还用于根据所述用户眼球运动特征数据,确定与所述用户眼球运动特征相匹配的显示内容调整指令;
所述输出单元,还用于向所述VR设备发送所述显示内容调整指令,以触发VR设备根据所述显示内容调整指令调整所述VR设备的显示内容。
11.一种信息处理系统,其特征在于,所述系统包括:信息处理装置和VR设备;
其中,所述信息处理装置,用于确定待演唱歌曲的歌曲类型;获取与所述歌曲类型对应的VR第一视频数据;向所述VR设备输出VR第二视频数据;所述获取与所述歌曲类型对应的虚拟现实VR第一视频数据,包括:根据所述歌曲类型,从预先保存的VR视频数据中,获取与所述歌曲类型相对应的目标VR视频数据,将所述目标VR视频数据与至少一个VR视频片段组合,生成所述VR第一视频数据;其中,所述VR视频第二数据为所述VR第一视频数据本身,或者,所述VR第二视频数据根据所述VR第一视频数据确定;所述至少一个VR视频片段包括:具备活跃气氛的属性的VR视频片段;
所述VR设备,用于接收所述VR第二视频数据,并向所述信息处理装置发送用户眼球运动特征数据;其中,所述用户眼球运动特征数据包括眼睛注视点的位置数据,和/或,眼球相对头部的运动数据,以触发所述信息处理装置根据所述用户眼球运动特征数据,确定与所述用户眼球运动特征相匹配的显示内容调整指令;并根据所述显示内容调整指令调整显示内容。
12.一种信息处理装置,其特征在于,所述信息处理装置包括:存储器、一个或多个处理器、以及一个或多个模块;
其中,所述一个或多个模块被存储在所述存储器中,并被配置成由所述一个或多个处理器执行,所述一个或多个模块包括用于执行如权利要求1至5中任一所述方法的指令。
13.一种存储一个或多个程序的存储介质,其特征在于,所述一个或多个程序包括指令,所述指令由信息处理装置的一个或多个处理器执行时,使得所述信息处理装置执行根据权利要求1至5所述的方法中的任一方法。
CN201710571324.4A 2017-07-13 2017-07-13 一种信息处理方法、装置、系统和存储介质 Active CN107463251B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710571324.4A CN107463251B (zh) 2017-07-13 2017-07-13 一种信息处理方法、装置、系统和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710571324.4A CN107463251B (zh) 2017-07-13 2017-07-13 一种信息处理方法、装置、系统和存储介质

Publications (2)

Publication Number Publication Date
CN107463251A CN107463251A (zh) 2017-12-12
CN107463251B true CN107463251B (zh) 2020-12-22

Family

ID=60544189

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710571324.4A Active CN107463251B (zh) 2017-07-13 2017-07-13 一种信息处理方法、装置、系统和存储介质

Country Status (1)

Country Link
CN (1) CN107463251B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104603673A (zh) * 2012-09-03 2015-05-06 Smi创新传感技术有限公司 头戴式系统以及使用头戴式系统计算和渲染数字图像流的方法
CN205210819U (zh) * 2015-11-06 2016-05-04 深圳信息职业技术学院 虚拟现实人机交互终端
CN205451551U (zh) * 2016-01-05 2016-08-10 肖锦栋 一种语音识别驱动的增强现实人机交互视频语言学习系统
CN106345035A (zh) * 2016-09-08 2017-01-25 丘靖 一种基于虚拟现实的睡眠系统
CN106648083A (zh) * 2016-12-09 2017-05-10 广州华多网络科技有限公司 增强演奏场景合成控制方法及装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160133230A (ko) * 2015-05-12 2016-11-22 엘지전자 주식회사 이동 단말기

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104603673A (zh) * 2012-09-03 2015-05-06 Smi创新传感技术有限公司 头戴式系统以及使用头戴式系统计算和渲染数字图像流的方法
CN205210819U (zh) * 2015-11-06 2016-05-04 深圳信息职业技术学院 虚拟现实人机交互终端
CN205451551U (zh) * 2016-01-05 2016-08-10 肖锦栋 一种语音识别驱动的增强现实人机交互视频语言学习系统
CN106345035A (zh) * 2016-09-08 2017-01-25 丘靖 一种基于虚拟现实的睡眠系统
CN106648083A (zh) * 2016-12-09 2017-05-10 广州华多网络科技有限公司 增强演奏场景合成控制方法及装置

Also Published As

Publication number Publication date
CN107463251A (zh) 2017-12-12

Similar Documents

Publication Publication Date Title
US10002642B2 (en) Methods and devices for generating media items
US9607594B2 (en) Multimedia apparatus, music composing method thereof, and song correcting method thereof
US10120565B2 (en) Methods and devices for presenting interactive media items
US11043216B2 (en) Voice feedback for user interface of media playback device
CN112560605B (zh) 交互方法、装置、终端、服务器和存储介质
US20200243055A1 (en) Method and System for Musical Communication
KR20140116740A (ko) 안무 영상을 표시하는 디스플레이 장치 및 표시 방법
CN101796516A (zh) 导航系统和方法
CN111383669B (zh) 多媒体文件上传方法、装置、设备及计算机可读存储介质
KR20120081874A (ko) 증강 현실을 이용한 노래방 시스템 및 장치, 이의 노래방 서비스 방법
WO2017028686A1 (zh) 一种信息处理方法、终端设备及计算机存储介质
KR20120119725A (ko) 비디오 객체 탐색 장치, 비디오 객체 변형 장치 및 그 방법
CN112445395A (zh) 音乐片段的选取方法、装置、设备及存储介质
CN108920585A (zh) 音乐推荐的方法及装置、计算机可读存储介质
CN109616090B (zh) 多音轨序列生成方法、装置、设备及存储介质
KR20120129015A (ko) 어학 컨텐츠 생성 방법 및 이를 위한 단말기
JP2023534975A (ja) ユーザーインタラクションに基づく音楽再生方法、装置、機器及び記憶媒体
CN107463251B (zh) 一种信息处理方法、装置、系统和存储介质
CN112883223A (zh) 音频展示方法、装置、电子设备及计算机存储介质
KR20130076852A (ko) 어학 컨텐츠 생성 방법 및 이를 위한 단말기
JP2014123085A (ja) カラオケにおいて歌唱に合わせて視聴者が行う身体動作等をより有効に演出し提供する装置、方法、およびプログラム
Hamanaka Melody slot machine HD
US20230237981A1 (en) Method and apparatus for implementing virtual performance partner
TW201218755A (en) Video processing apparatus, video processing method, storage media and computer program product
CN110268467B (zh) 显示控制系统以及显示控制方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant