视频录制方法、视频播放方法、装置及计算机存储介质
技术领域
本发明涉及视频处理技术领域,尤其涉及一种视频录制方法、视频播放方法、装置及计算机存储介质。
背景技术
随着智能家居的迅猛发展,越来越多的智能家居设备进入到我们生活当中,为我们的生活带来舒适和便利。目前对智能家居的控制,还是停留在通过手机APP(Application,应用程序)进行远程控制,这种方式对于老人来说有些困难。而VR(VirtualReality,虚拟现实)设备的出现,为解决这一问题提供了很大的帮助。用户可以在虚拟场景中进行操作,就没有不会使用APP的烦恼了。但是,由于智能家居设备种类繁多、功能也很丰富,老人无法记住大量的操作方法,此时,用户可以录制对应的操作视频,以供老人后续学习查看。然而,目前基于VR设备进行视频录制时,是直接录制得到360°的全景视频,其视频数据的数据量通常较大,会占用较大的带宽,然而上传带宽是有限的,因而导致视频实时播放时很容易出现卡顿现象,影响视频播放效果。
发明内容
本发明的主要目的在于提供一种视频录制方法、视频播放方法、装置及计算机存储介质,旨在解决现有的基于VR设备录制得到的视频、在实时播放的过程中容易出现卡顿现象的问题。
为实现上述目的,本发明提供一种视频录制方法,所述视频录制方法包括:
在接收到视频录制请求时,根据所述视频录制请求获取目标VR场景,其中,所述目标VR场景中包括智能家居设备;
通过景深摄像头获取用户针对所述智能家居设备的操作图像序列,并获取视场角信息和用户姿态信息;
基于所述目标VR场景、所述操作图像序列、所述视场角信息和所述用户姿态信息,获取操作动作图像和操作位置信息;
将所述操作动作图像、所述操作位置信息、所述视场角信息及所述用户姿态信息与所述目标VR场景进行关联,并上传至预设服务器。
可选地,所述基于所述目标VR场景、所述操作图像序列、所述视场角信息和所述用户姿态信息,获取操作动作图像和操作位置信息的步骤包括:
从所述操作图像序列的各操作图像中分别提取出对应的操作动作图像;
根据所述目标VR场景、所述视场角信息和所述用户姿态信息,在所述目标VR场景中分别虚拟出与各操作动作图像对应的操作动作,得到对应的虚拟画面;
根据所述虚拟画面确定各操作动作对应的操作位置信息。
可选地,所述将所述操作动作图像、所述操作位置信息、所述视场角信息及所述用户姿态信息与所述目标VR场景进行关联,并上传至预设服务器的步骤之前,还包括:
获取所述目标VR场景中的目标智能家居设备,基于所述虚拟画面检测所述操作动作是否符合与所述目标智能家居设备对应的预设操作条件;
若符合,则控制所述目标智能家居设备执行对应的操作,并记录对应的操作结果;
所述将所述操作动作图像、所述操作位置信息、所述视场角信息及所述用户姿态信息与所述目标VR场景进行关联,并上传至预设服务器的步骤包括:
将所述操作动作图像、所述操作位置信息、所述视场角信息、所述用户姿态信息及所述操作结果、与所述目标VR场景进行关联,并上传至预设服务器。
可选地,所述控制所述目标智能家居设备执行对应的操作,并记录对应的操作结果的步骤之前,还包括:
控制所述目标智能家居设备生成对应的提示信息;
在接收到用户基于所述提示信息触发的操作确认指令时,所述控制所述目标智能家居设备执行对应的操作,并记录对应的操作结果的步骤包括:
控制所述目标智能家居设备执行对应的操作,并记录对应的操作过程和操作结果;
所述将所述操作动作图像、所述操作位置信息、所述视场角信息、所述用户姿态信息及所述操作结果、与所述目标VR场景进行关联,并上传至预设服务器的步骤包括:
将所述操作动作图像、所述操作位置信息、所述视场角信息、所述用户姿态信息、所述操作过程及所述操作结果、与所述目标VR场景进行关联,并上传至预设服务器。
可选地,所述从所述用户操作图像序列的各用户操作图像中分别提取出对应的操作动作图像的步骤之后,还包括:
获取各操作动作图像对应的采集时间;
基于所述采集时间在各操作动作图像中添加对应的时间戳,并将所述操作位置信息与对应的时间戳进行关联。
可选地,所述视频录制方法还包括:
在接收到VR场景构建请求时,根据所述VR场景构建请求获取对应的初始VR场景;
通过所述景深摄像头获取目标添加智能家居设备的设备位置信息,并获取目标添加智能家居设备的3D模型图;
基于所述设备位置信息将所述3D模型图添加至所述初始VR场景中,得到构建好的VR场景,并上传至所述预设服务器。
此外,为实现上述目的,本发明提供一种视频播放方法,所述视频播放方法包括:
在接收到视频播放请求时,根据所述视频播放请求获取目标VR场景;
获取与所述目标VR场景关联的操作动作图像、操作位置信息、视场角信息和用户姿态信息;
基于所述操作位置信息、所述视场角信息和所述用户姿态信息将所述操作动作图像叠加至所述目标VR场景中,以进行播放。
可选地,所述操作动作图像中包括时间戳,所述基于所述操作位置信息、所述视场角信息和所述用户姿态信息将所述操作动作图像叠加至所述目标VR场景中,以进行播放的步骤包括:
根据所述时间戳确定各操作动作图像对应的操作位置信息,并根据所述操作位置信息、所述视场角信息和所述用户姿态信息确定各操作动作图像在所述目标VR场景中的采集位置;
根据所述采集位置将各操作动作图像叠加至所述目标VR场景中,以进行播放。
此外,为实现上述目的,本发明还提供一种视频录制装置,所述视频录制装置包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的视频录制程序,所述视频录制程序被所述处理器执行时实现如上所述的视频录制方法的步骤。
此外,为实现上述目的,本发明还提供一种视频播放装置,所述视频播放装置包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的视频播放程序,所述视频播放程序被所述处理器执行时实现如上所述的视频播放方法的步骤。
此外,为实现上述目的,本发明还提供一种计算机存储介质,所述计算机存储介质上存储有视频录制程序和视频播放程序,所述视频录制程序被处理器执行时实现如上所述的视频录制方法的步骤,所述视频播放程序被处理器执行时实现如上所述的视频播放方法的步骤。
本发明提供一种视频录制方法、视频播放方法、装置及计算机存储介质,在接收到视频录制请求时,根据视频录制请求获取目标虚拟现实VR场景,其中,目标VR场景中包括智能家居设备;然后,通过景深摄像头获取用户针对智能家居设备的操作图像序列,并获取视场角信息和用户姿态信息;基于目标VR场景、操作图像序列、视场角信息和用户姿态信息,获取操作动作图像和操作位置信息;进而将操作动作图像、操作位置信息、视场角信息及用户姿态信息与目标VR场景进行关联,并上传至预设服务器。通过上述方式,在视频录制过程中,仅需保存用户操作的操作动作图像及对应的操作位置信息、视场角信息和用户姿态信息,进而上传至预设服务器,以供后续用户需要查看操作视频时进行下载调用,相比于现有技术中录制并存储完整的视频,本发明可大大减少数据传输量,节省带宽资源,在播放视频时,只需下载操作动作图像、操作位置信息、视场角信息和用户姿态信息,再与目标VR场景进行融合,即可进行播放,从而可减少视频播放时的卡顿现象,提升用户的观看体验。
附图说明
图1为本发明实施例方案涉及的硬件运行环境的终端结构示意图;
图2为本发明视频录制方法第一实施例的流程示意图;
图3为本发明视频录制方法第二实施例的流程示意图;
图4为本发明视频播放方法第一实施例的流程示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
参照图1,图1为本发明实施例方案涉及的硬件运行环境的终端结构示意图。
本发明实施例终端可以是VR(Virtual Reality,虚拟现实)设备。
如图1所示,该终端可以包括:处理器1001,例如CPU(Central Processing Unit,中央处理器),通信总线1002,用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真Wireless-Fidelity,Wi-Fi接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatilememory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
可选地,终端还可以包括景深摄像头、蓝牙模块、Wi-Fi模块等等。其中,景深摄像头除了能够获取平面图像以外,还可以获得拍摄对象的深度信息,也就是三维的位置和尺寸信息,使得整个计算系统获得环境和对象的三维立体数据。按技术分类,深度摄像头可分为以下三类主流技术:结构光、双目视觉和TOF(Time of flight,飞行时间)飞行时间法。
本领域技术人员可以理解,图1中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及视频录制程序。
在图1所示的终端中,网络接口1004主要用于连接后台服务器,与后台服务器进行数据通信;用户接口1003主要用于连接客户端,与客户端进行数据通信;而处理器1001可以用于调用存储器1005中存储的视频录制程序,并执行以下操作:
在接收到视频录制请求时,根据所述视频录制请求获取目标虚拟现实VR场景,其中,所述目标VR场景中包括智能家居设备;
通过景深摄像头获取用户针对所述智能家居设备的操作图像序列,并获取视场角信息和用户姿态信息;
基于所述目标VR场景、所述操作图像序列、所述视场角信息和所述用户姿态信息,获取操作动作图像和操作位置信息;
将所述操作动作图像、所述操作位置信息、所述视场角信息及所述用户姿态信息与所述目标VR场景进行关联,并上传至预设服务器。
进一步地,处理器1001可以调用存储器1005中存储的视频录制程序,还执行以下操作:
从所述操作图像序列的各操作图像中分别提取出对应的操作动作图像;
根据所述目标VR场景、所述视场角信息和所述用户姿态信息,在所述目标VR场景中分别虚拟出与各操作动作图像对应的操作动作,得到对应的虚拟画面;
根据所述虚拟画面确定各操作动作对应的操作位置信息。
进一步地,处理器1001可以调用存储器1005中存储的视频录制程序,还执行以下操作:
获取所述目标VR场景中的目标智能家居设备,基于所述虚拟画面检测所述操作动作是否符合与所述目标智能家居设备对应的预设操作条件;
若符合,则控制所述目标智能家居设备执行对应的操作,并记录对应的操作结果;
将所述操作动作图像、所述操作位置信息、所述视场角信息、所述用户姿态信息及所述操作结果、与所述目标VR场景进行关联,并上传至预设服务器。
进一步地,处理器1001可以调用存储器1005中存储的视频录制程序,还执行以下操作:
控制所述目标智能家居设备生成对应的提示信息;
在接收到用户基于所述提示信息触发的操作确认指令时,控制所述目标智能家居设备执行对应的操作,并记录对应的操作过程和操作结果;
将所述操作动作图像、所述操作位置信息、所述视场角信息、所述用户姿态信息、所述操作过程及所述操作结果、与所述目标VR场景进行关联,并上传至预设服务器。
进一步地,处理器1001可以调用存储器1005中存储的视频录制程序,还执行以下操作:
获取各操作动作图像对应的采集时间;
基于所述采集时间在各操作动作图像中添加对应的时间戳,并将所述操作位置信息与对应的时间戳进行关联。
进一步地,处理器1001可以调用存储器1005中存储的视频录制程序,还执行以下操作:
在接收到VR场景构建请求时,根据所述VR场景构建请求获取对应的初始VR场景;
通过所述景深摄像头获取目标添加智能家居设备的设备位置信息,并获取目标添加智能家居设备的3D模型图;
基于所述设备位置信息将所述3D模型图添加至所述初始VR场景中,得到构建好的VR场景,并上传至所述预设服务器。
所述存储器1005中还可以包括视频播放程序,处理器1001可以用于调用存储器1005中存储的视频播放程序,并执行以下操作:
在接收到视频播放请求时,根据所述视频播放请求获取目标VR场景;
获取与所述目标VR场景关联的操作动作图像、操作位置信息、视场角信息和用户姿态信息;
基于所述操作动作图像、所述操作位置信息、所述视场角信息和所述用户姿态信息和所述目标VR场景生成对应的基于所述目标VR场景的用户操作视频,并进行播放。
进一步地,所述操作动作图像中包括时间戳,处理器1001可以调用存储器1005中存储的视频播放程序,还执行以下操作:
根据所述时间戳确定各操作动作图像对应的操作位置信息,并根据所述操作位置信息、所述视场角信息和所述用户姿态信息确定各操作动作图像在所述目标VR场景中的采集位置;
根据所述采集位置和各操作动作图像在所述目标VR场景中生成对应的用户操作图像;
根据所述时间戳的先后顺序对各用户操作图像进行合并,生成对应的基于所述目标VR场景的用户操作视频。
基于上述硬件结构,提出本发明视频录制方法和视频播放方法各个实施例。
本发明提供一种视频录制方法。
参照图2,图2为本发明视频录制方法第一实施例的流程示意图。
在本实施例中,该视频录制方法包括:
步骤S10,在接收到视频录制请求时,根据所述视频录制请求获取目标VR场景,其中,所述目标VR场景中包括智能家居设备;
在本实施例中,该视频录制方法应用于VR(Virtual Reality,虚拟现实)设备,本发明实施例的终端为VR设备。本实施例中,以录制家居设备的操作视频为例进行说明。
当用户需要录制视频时,可以先选择对应的VR场景,例如,输入VR场景的名称,进而触发视频录制请求,此时,VR设备在接收到该视频录制请求时,根据该视频录制请求获取目标VR场景,其中,目标VR场景中包括智能家居设备。其中,该目标VR场景是预先构建好的,可存储在预设服务器中,以供用户下载调用,具体的VR场景构建过程可参照下述第三实施例,此处不作赘述。在获取到目标VR场景之后,则进行播放,使得用户可通过VR设备查看该目标VR场景。
步骤S20,通过景深摄像头获取用户针对所述智能家居设备的操作图像序列,并获取视场角信息和用户姿态信息;
然后,启动景深摄像头,以通过景深摄像头获取用户针对智能家居设备的操作图像序列,并获取视场角信息和用户姿态信息。其中,视场角信息包括水平视场角和垂直视场角,用户姿态信息包括但不限于用户的运动信息、头部转动信息,可通过VR设备中的6DoF(Six degrees of freedom tracking,六自由度追踪)传感器获取得到。操作图像序列包括多个用户操作图像、按拍摄时间依次排序。
步骤S30,基于所述目标VR场景、所述操作图像序列、所述视场角信息和所述用户姿态信息,获取操作动作图像和操作位置信息;
然后,基于目标VR场景、操作图像序列、视场角信息和用户姿态信息,获取操作动作图像和操作位置信息。具体的,步骤S20包括:
步骤a1,从所述操作图像序列的各操作图像中分别提取出对应的操作动作图像;
步骤a2,根据所述目标VR场景、所述视场角信息和所述用户姿态信息,在所述目标VR场景中分别虚拟出与各操作动作图像对应的操作动作,得到对应的虚拟画面;
步骤a3,根据所述虚拟画面确定各操作动作对应的操作位置信息。
具体的,操作动作图像和操作位置信息的获取过程如下:
先从操作图像序列的各操作图像中分别提取出对应的操作动作图像,即将各操作图像中的背景去除,得到仅包含用户动作的图像,即操作动作图像。
进而,根据目标VR场景、视场角信息和用户姿态信息,在目标VR场景中分别虚拟出与各操作动作图像对应的操作动作,得到对应的虚拟画面,从而根据虚拟画面确定各操作动作对应的操作位置信息。其中,操作位置信息可以包括但不限于轮廓位置信息、与目标VR场景中的设备的相对位置信息(如距离)。例如,操作图像序列为用户用手点击目标VR场景中的某一家居设备按钮而得到的,可以提取出手部的操作动作图像,进而可以根据目标VR场景、视场角信息和用户姿态信息确定出用户操作时的操作VR场景,进而在操作VR场景中虚拟出对应的手执行对应的操作动作,对应的,操作位置信息可以包括手部轮廓位置信息、点击的家居设备按钮的位置信息等。
可以理解,一个目标VR场景里可以包括一个或多个家居设备,在目标VR场景虚拟操作动作的过程中,是基于当前视野中的VR场景(即操作VR场景)进行虚拟构建,即对虚拟出针对当前视野中的家居设备的操作动作。
进一步地,在上述步骤a2之后,还可以包括:
步骤a4,获取各操作动作图像对应的采集时间;
步骤a5,基于所述采集时间在各操作动作图像中添加对应的时间戳,并将所述操作位置信息与对应的时间戳进行关联。
在提取出操作动作图像之后,获取各操作动作图像对应的采集时间,进而基于该采集时间在各操作动作图像中添加对应的时间戳,并将操作位置信息与对应的时间戳进行关联。其中,各操作动作图像对应的采集时间即为对应的用户操作图像的采集时间。通过对各操作动作图像添加时间戳,并将操作位置信息与对应的时间戳进行关联,可便于后续在视频生成过程,通过时间戳确定各操作动作图像对应的操作位置信息,继而生成用户操作视频,避免的操作动作图像与操作位置信息错乱、导致视频生成错误的情况发生。
步骤S40,将所述操作动作图像、所述操作位置信息、所述视场角信息及所述用户姿态信息与所述目标VR场景进行关联,并上传至预设服务器。
在获取到操作动作图像、操作位置信息、视场角信息和用户姿态信息之后,将操作动作图像、操作位置信息、视场角信息和用户姿态信息与目标VR场景进行关联,并将操作动作图像、操作位置信息、视场角信息和用户姿态信息上传至预设服务器,以供后续用户需要查看操作视频时进行下载调用。通过上述方式,在视频录制过程中,仅需保存用户操作的操作动作图像及对应的操作位置信息、视场角信息和用户姿态信息,即仅保存用户操作的关键信息,而无需录制并存储完整的视频,从而可大大减少数据传输量,节省带宽资源,在后续视频播放过程中,用户只需下载操作动作图像、操作位置信息、视场角信息和用户姿态信息,再与目标VR场景进行融合,即可进行播放,从而可减少视频播放时的卡顿现象,提升用户的观看体验。
本发明实施例提供一种视频录制方法,在接收到视频录制请求时,根据视频录制请求获取目标虚拟现实VR场景,其中,目标VR场景中包括智能家居设备;然后,通过景深摄像头获取用户针对智能家居设备的操作图像序列,并获取视场角信息和用户姿态信息;基于目标VR场景、操作图像序列、视场角信息和用户姿态信息,获取操作动作图像和操作位置信息;进而将操作动作图像、操作位置信息、视场角信息及用户姿态信息与目标VR场景进行关联,并上传至预设服务器。通过上述方式,在视频录制过程中,仅需保存用户操作的操作动作图像及对应的操作位置信息、视场角信息和用户姿态信息,进而上传至预设服务器,以供后续用户需要查看操作视频时进行下载调用,相比于现有技术中录制并存储完整的视频,本发明实施例可大大减少数据传输量,节省带宽资源,在播放视频时,只需下载操作动作图像、操作位置信息、视场角信息和用户姿态信息,再与目标VR场景进行融合,即可进行播放,从而可减少视频播放时的卡顿现象,提升用户的观看体验。
进一步地,基于上述第一实施例,提出本发明视频录制方法的第二实施例。参照图3,图3为本发明视频录制方法第二实施例的流程示意图。
在本实施例中,在步骤S40之前,该视频录制方法还包括:
步骤S50,获取所述目标VR场景中的目标智能家居设备,基于所述虚拟画面检测所述操作动作是否符合与所述目标智能家居设备对应的预设操作条件;
在本实施例中,在获取到操作动作图像和操作位置信息之后,还可以获取目标VR场景中的目标智能家居设备,进而基于虚拟画面检测操作动作是否符合与目标智能家居设备对应的预设操作条件。其中,预设操作条件是基于目标智能家居设备的各功能的触发方式预先设定的,可以包括一个或多个。在检测过程中,可以先基于虚拟画面获取用户动作、距离、时间等维度的信息,以用于检测是否符合预设操作条件。
若符合,则步骤S60,控制所述目标智能家居设备执行对应的操作,并记录对应的操作结果;
若检测到操作动作符合预设操作条件,则控制目标智能家居设备执行对应的操作,并记录对应的操作结果。可以理解,当预设操作条件包括多个时,则根据所符合的预设操作条件确定所需执行的操作,进而控制目标智能家居设备执行对应的操作,并记录对应的操作结果。
此时,步骤S40包括:
步骤S41,将所述操作动作图像、所述操作位置信息、所述视场角信息、所述用户姿态信息及所述操作结果、与所述目标VR场景进行关联,并上传至预设服务器。
此时,可将操作动作图像、操作位置信息、视场角信息、用户姿态信息及操作结果、与目标VR场景进行关联,进而在上传录制视频数据时,将操作动作图像、操作位置信息、视场角信息、用户姿态信息和操作结果上传至预设服务器,以供后续用户需要查看操作视频时进行下载调用。
本实施例中,通过记录对应的操作结果,并与操作动作图像、操作位置信息、视场角信息及用户姿态信息同时上传至预设服务器,以供后续用户需要查看操作视频时进行下载调用,可便于用户了解各操作动作所对应的操作结果。
进一步的,在记录操作结果的同时,还可以记录该操作过程(包括提示过程、确认过程)。对应的,在上述第二实施例中的步骤S60之前,该视频录制方法还可以包括:
控制所述目标智能家居设备生成对应的提示信息;
在接收到用户基于所述提示信息触发的操作确认指令时,所述步骤S60包括:控制所述目标智能家居设备执行对应的操作,并记录对应的操作过程和操作结果;
此时,步骤S41包括:将所述操作动作图像、所述操作位置信息、所述视场角信息、所述用户姿态信息、所述操作过程及所述操作结果、与所述目标VR场景进行关联,并上传至预设服务器。
在本实施例中,在检测到操作动作符合预设操作条件时,还可以控制目标智能家居设备生成对应的提示信息,以提示用户是否进行对应的操作,并在接收到用户基于该提示信息触发的操作确认指令时,再控制目标智能家居设备执行对应的操作,并记录对应的操作过程和操作结果。
然后,将操作动作图像、操作位置信息、视场角信息、用户姿态信息、操作结果及操作过程、与目标VR场景进行关联,进而在上传录制视频数据时,将操作动作图像、操作位置信息、、视场角信息、用户姿态信息、操作结果和操作过程上传至预设服务器,以供后续用户需要查看操作视频时进行下载调用。
本实施例中,通过记录对应的操作过程和操作结果,并与操作动作图像、操作位置信息、视场角信息及用户姿态信息同时上传至预设服务器,以供后续用户需要查看操作视频时进行下载调用,可便于用户了解各操作动作所对应的操作过程和操作结果。
进一步地,基于上述各实施例,提出本发明视频录制方法的第三实施例。
在本实施例中,在步骤S10之前,该视频录制方法还包括:
步骤A,在接收到VR场景构建请求时,根据所述VR场景构建请求获取对应的初始VR场景;
在本实施例中介绍了VR场景的构建过程,VR场景是预先构建好,并存储在预设服务器中的。在本实施例中,在接收到VR场景构建请求时,根据该VR场景构建请求获取对应的初始VR场景。其中,初始VR场景是预先通过3D建模得到的,可以是基于拍摄物理环境构建得到的。
步骤B,通过所述景深摄像头获取目标添加智能家居设备的设备位置信息,并获取目标添加智能家居设备的3D模型图;
然后,通过景深摄像头获取目标添加智能家居设备的设备位置信息,并获取目标添加智能家居设备的3D模型图。具体的,可以通过景深摄像头拍摄目标添加智能家居设备所在的区域,进而通过图像匹配技术确定该目标添加智能家居设备在初始VR场景中的位置信息,即设备位置信息。对于3D模型图的获取,可以接收用户输入的目标添加智能家居设备的品牌、型号等设备信息,从预设3D模型数据库中,获取得到的该目标添加智能家居设备的3D模型图;也可以通过扫描该目标添加智能家居设备上的二维码,从对应的官方渠道获取得到。
步骤C,基于所述设备位置信息将所述3D模型图添加至所述初始VR场景中,得到构建好的VR场景,并上传至所述预设服务器。
在获取得到目标添加智能家居设备的设备位置信息和3D模型图之后,基于设备位置信息将3D模型图添加至初始VR场景中,得到构建好的VR场景,并上传至预设服务器,以供后续用户需要查看操作视频时进行下载调用。
当然,可以理解,在具体实施时,并不限于上述这种VR场景构建方式。还可以通过人工建模的方式,直接构建出VR场景。
本发明还提供一种视频播放方法。
参照图4,图4为本发明视频播放方法第一实施例的流程示意图。
在本实施例中,该视频播放方法包括:
步骤S100,在接收到视频播放请求时,根据所述视频播放请求获取目标VR场景;
在本实施例中,当用户想要观看家居设备的操作视频教程时,可触发对应的视频播放请求,此时,VR设备在接收到视频播放请求时,先根据该视频播放请求获取目标VR场景。
步骤S200,获取与所述目标VR场景关联的操作动作图像、操作位置信息、视场角信息和用户姿态信息;
然后,获取与该目标VR场景关联的操作动作图像、操作位置信息、视场角信息和用户姿态信息。其中,操作动作图像、操作位置信息、视场角信息和用户姿态信息是在视频录制时获取得到的,操作动作图像为仅包含用户动作的图像,操作位置信息可以包括但不限于轮廓位置信息、与VR场景中的设备的相对位置信息(如距离),视场角信息包括水平视场角和垂直视场角,用户姿态信息包括但不限于用户的运动信息、头部转动信息,具体的获取过程可参照上述第一实施例。
当然,在具体实施例中,除操作动作图像、操作位置信息、视场角信息和用户姿态信息外,还可以包括操作结果、操作过程、时间戳等其他相关信息。
步骤S300,基于所述操作位置信息、所述视场角信息和所述用户姿态信息将所述操作动作图像叠加至所述目标VR场景中,以进行播放。
在获取到目标VR场景、操作动作图像、操作位置信息、视场角信息和用户姿态信息之后,基于操作位置信息、视场角信息和用户姿态信息将操作动作图像叠加至目标VR场景中,以进行播放,从而可以实现用户观看到智能家居设备的操作过程。
具体的,所述操作动作图像中包括时间戳,步骤S300包括:
步骤b1,根据所述时间戳确定各操作动作图像对应的操作位置信息,并根据所述操作位置信息、所述视场角信息和所述用户姿态信息确定各操作动作图像在所述目标VR场景中的采集位置;
步骤b2,根据所述采集位置将各操作动作图像叠加至所述目标VR场景中,以进行播放。
具体的,用户操作智能家居设备的操作视频的生成过程如下:
由于操作位置信息时与对应操作动作图像中的时间戳相关联的,因此,可以先根据操作动作图像中的时间戳,确定各操作动作图像对应的操作位置信息,然后,根据操作位置信息、视场角信息和用户姿态信息,确定各操作动作图像在目标VR场景中的采集位置;最后,根据采集位置将各操作动作图像叠加至目标VR场景中,以进行播放,可实现用户通过VR设备观看智能家居设备的操作视频。
需要说明的是,本实施例中的操作视频并不是真正意义上的视频,是基于VR场景和用户操作图像叠加得到的。也就是说,虽然VR场景的播放,将对应的图像叠加至VR场景的对应位置。
本发明实施例提供一种视频录制方法,在接收到视频播放请求时,根据视频播放请求获取目标VR场景;然后,获取与目标VR场景关联的操作动作图像、操作位置信息、视场角信息和用户姿态信息;进而基于操作位置信息、视场角信息和用户姿态信息将操作动作图像叠加至目标VR场景中,以进行播放。本发明实施例中,在视频播放过程中,通过分别获取目标VR场景及用户操作对应的操作动作图像、操作位置信息、视场角信息和用户姿态信息,进而基于操作位置信息、视场角信息和用户姿态信息、将操作动作图像与目标VR场景进行融合,即可实现用户通过VR设备观看智能家居设备的操作视频,通过上述方式,本发明实施例中可以在下载一目标VR场景后,针对该目标VR场景中各种用户操作,只需下载对应的操作动作图像、操作位置信息、视场角信息和用户姿态信息即可,相比于现有技术中需针对不同的操作需分别下载对应的完整用户操作视频,可大大减少数据下载量,节省带宽资源,从而可减少视频播放时的卡顿现象,提升用户的观看体验。
本发明还提供一种计算机存储介质,该计算机存储介质上存储有视频录制程序,所述视频录制程序被处理器执行时实现如以上任一项实施例所述的视频录制方法的步骤。
本发明计算机存储介质的具体实施例与上述视频录制方法各实施例基本相同,在此不作赘述。
本发明还提供一种计算机存储介质,该计算机存储介质上存储有视频播放程序,所述视频播放程序被处理器执行时实现如以上任一项实施例所述的视频播放方法的步骤。
本发明计算机存储介质的具体实施例与上述视频播放方法各实施例基本相同,在此不作赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。