CN111147890A

CN111147890A - Vr虚拟技术展示转码器的工作方法

Info

Publication number: CN111147890A
Application number: CN201811342921.0A
Authority: CN
Inventors: 陈曦
Original assignee: Shanghai Huiliu Culture Communication Co Ltd
Current assignee: Shanghai Huiliu Culture Communication Co Ltd
Priority date: 2018-11-05
Filing date: 2018-11-05
Publication date: 2020-05-12

Abstract

VR虚拟技术展示转码器的工作方法，包括以下操作步骤：A)、素材整理；B)、拼接全景视频；C)、视频存储；D)、云端编码，存储器上的全景拼接视频上传到云端编码服务器，编码格式为AV1视频编码；E)、云端编码服务器将全景拼接视频分别生成低分辨率视频和高分辨率视频；F)、将低分辨率视频和高分辨率视频进行视频混合剪辑；G)、VR展示校核，当校核不通过，重复步骤F)，当校核通过，进入下一步；H)、转码器转换完成。本发明实现了将客户各种复杂格式统一转换为虚拟系统需要的格式，实现了当用户转换观看模式时将低分辨率视角转换成为高分辨率视角；要求数据少，对硬件要求低，推广应用具有良好的经济效益和社会效益。

Description

VR虚拟技术展示转码器的工作方法

技术领域

本发明属于VR虚拟技术领域，特别涉及一种VR虚拟技术展示转码器的工作方法。

背景技术

虚拟现实(VR，Virtual Reality)技术是一种计算机仿真系统，通过对三维世界的模拟创造出一种崭新的交互系统。它利用计算机生成模拟环境，是一种多源信息融合的交互式三维动态视景和实体行为系统仿真，并使用户沉浸到该环境中。VR工作原理是用头盔或眼罩等设备阻断人眼与现实世界的连接，同时通过实时渲染的画面，营造出一个全新的、虚拟的世界。这种虚拟现实技术，可以使用户沉浸在特定的视听空间内，将传统的平面显示方式全息化、立体化，提升用户视听体验。VR行业发展历程进行了回顾：(1)概念萌芽期(1935—1961)。1935年，小说家Stanley Weinbaum在其小说中描述了一款VR眼镜，以眼镜为基础，包括视觉、嗅觉、触觉等全方位沉浸式体验的虚拟现实概念，这被认为是世界上率先提出虚拟现实概念的作品。(2)研发与军用阶段(1962—1993)。1962年，名为Sensorama的虚拟现实原型机被Morion Heilig研发出来，后来被用以虚拟现实的方式模拟飞行训练。这一阶段的VR技术仍仅限于研究阶段，并没有生产出能交付到使用者手上的产品。(3)产品迭代初期(1994—2015)。从1994年起，日本游戏公司Sega和任天堂分别针对游戏产业陆续推出Sega VR-1和Virtual Boy等产品，当时在业内引起不小的轰动。但因为设备成本高、内容应用水平一般，最终普及率不高。(4)产品成型爆发期(2016起)。随着HTC、索尼等一线大厂多年的付出和努力，这一阶段的产品拥有更亲民的定价、更强大的内容体验与交互手段，辅以强大的资本支持与市场推广，整个VR行业正式进入爆发成长期。

由于现有的视频，图片格式繁多，并且各有优势，但不是所有的格式都适合VR播放且通过互联网传播，互联网对媒体文件格式的要求趋向于压缩率高且效果好，对设备硬件要求低的格式，但客户手头的媒体资源，可能存在不同的格式(如jpg，png，tiff，mov，mp4等)各种的媒体格式，在完成制作VR视频内容后，需利用媒体平台的网络发给广大用户，而当前全景视频技术面临最大的挑战就是网络传输与压缩码率。随着互联网技术的不断发展，在网络中的1080P视频资源播放相对较为流畅，但如果要对2K/4K全景视频进行播放时，必须要其网络速率达到4M左右，否则在观看全景视频时，会出现经常性卡顿的问题，对于视频欣赏体验有着非常大的影响。在对全景视频进行压缩编译过程中，通常情况下会使用rectangular球面全景图格式作为常规格式。在进行3D360°全景图片处理时，通过是将左、右眼全景图片进行上下拼接，确保其长度与宽度比为1∶1；对于3D180°全景图片，主要是利用左、右眼全景图进行左右拼接，确保其长度与宽度比为2∶1。在南北极区域中，球面全景图有很多冗余像素情况，前些年，Facebook实现了全景多棱模型的构建，但在实际测试与应用过程中发现，其分辨率可以将用户不关注的画图进行分辨率降低处理，但存在当用户转换观看模式时将低分辨率视角无法转换成为高分辨率视角的技术缺陷。

2018年4月，由苹果、亚马逊、AMD、Adobe、ARM、思科、Facebook、Google、微软、英特尔、英伟达、Mozilla、Netflix等公司组成的开放媒体联盟(Alliance of Open Media，简称AOM)发布了新一代视频编码格式AV11.0，该视频编码格式能在任何终端设备及任何网络环境，轻量级处处可用，克服了H.265对客户端解码硬件水平的高要求。

如何实现将客户各种复杂格式统一转换为虚拟系统需要的格式，如何实现当用户转换观看模式时将低分辨率视角转换成为高分辨率视角，如何实现要求数据少，效果好，对硬件要求低的格式展示，成为急需解决的问题。

发明内容

本发明的目的是要解决上述技术问题，提供一种VR虚拟技术展示转码器的工作方法，实现将客户各种复杂格式统一转换为虚拟系统需要的格式，实现当用户转换观看模式时将低分辨率视角转换成为高分辨率视角，实现要求数据少，效果好，对硬件要求低的格式展示。

VR虚拟技术展示转码器的工作方法，包括素材、存储器、云端编码服务器，其特征在于：包括以下操作步骤：

A)、素材整理，素材包括照片、视频；

B)、拼接全景视频，将照片、视频进行全景拼接编辑；

C)、视频存储，将全景拼接视频存在存储器上；

D)、云端编码，存储器上的全景拼接视频上传到云端编码服务器，编码格式为AV1视频编码；

E)、云端编码服务器将全景拼接视频分别生成低分辨率视频和高分辨率视频；

F)、将低分辨率视频和高分辨率视频进行视频混合剪辑，保证了当用户转换观看模式时，低分辨率视角能转换成为高分辨率视角；

G)、VR展示校核，当校核不通过，重复步骤F)，当校核通过，进入下一步；

H)、转码器转换完成。

所述的步骤B)中，在拼接全景视频后，需要进行调色、拼缝修复、字幕的后期制作。

所述的步骤B)中，拼接全景视频需要进行拼缝及光照融合的处理。

本发明实现了将客户各种复杂格式统一转换为虚拟系统需要的格式，实现了当用户转换观看模式时将低分辨率视角转换成为高分辨率视角；通过免费开源的AV1超高清视频的编码压缩实现了更高比特率、更宽的色彩空间、更高的帧率，要求数据少，效果好，对硬件要求低，降低了成本，推广应用具有良好的经济效益和社会效益。

附图说明

图1是本发明的工作流程图。

具体实施方式

下面结合附图对本发明作进一步说明，但不作为对本发明的限制：

如图1所示，VR虚拟技术展示转码器的工作方法，包括素材、存储器、云端编码服务器，其特征在于：包括以下操作步骤：

A)、素材整理，素材包括照片、视频；

B)、拼接全景视频，将照片、视频进行全景拼接编辑；

C)、视频存储，将全景拼接视频存在存储器上；

D)、云端编码，存储器上的全景拼接视频上传到云端编码服务器，编码格式为AV1视频编码，实现了将客户各种复杂格式统一转换为虚拟系统需要的格式，通过免费开源的AV1超高清视频的编码压缩实现了更高比特率、更宽的色彩空间、更高的帧率，要求数据少，效果好，对硬件要求低，降低了成本；

H)、转码器转换完成；

所述的步骤B)中，在拼接全景视频后，需要进行调色、拼缝修复、字幕的后期制作；

上述实施例仅仅是为清楚地说明本发明所作的举例，而并非对实施方式的限定。对于所属领域的普通技术人员来说，在上述说明的基础上还可以做出其它不同形式的变化或变动，这里无需也无法对所有的实施方式予以穷举，而由此所引申出的显而易见的变化或变动仍处于本发明的保护范围之中。

Claims

1.VR虚拟技术展示转码器的工作方法，包括素材、存储器、云端编码服务器，其特征在于：包括以下操作步骤：

A)、素材整理，素材包括照片、视频；

B)、拼接全景视频，将照片、视频进行全景拼接编辑；

C)、视频存储，将全景拼接视频存在存储器上；

H)、转码器转换完成。

2.根据权利要求1所述的VR虚拟技术展示转码器的工作方法，其特征在于：所述的步骤B)中，在拼接全景视频后，需要进行调色、拼缝修复、字幕的后期制作。

3.根据权利要求1所述的VR虚拟技术展示转码器的工作方法，其特征在于：所述的步骤B)中，拼接全景视频需要进行拼缝及光照融合的处理。