CN106454321A - 全景视频的处理方法、装置及系统 - Google Patents

全景视频的处理方法、装置及系统 Download PDF

Info

Publication number
CN106454321A
CN106454321A CN201610952287.7A CN201610952287A CN106454321A CN 106454321 A CN106454321 A CN 106454321A CN 201610952287 A CN201610952287 A CN 201610952287A CN 106454321 A CN106454321 A CN 106454321A
Authority
CN
China
Prior art keywords
video
code check
area
picture
video area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610952287.7A
Other languages
English (en)
Inventor
刘洋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Autel Intelligent Aviation Technology Co Ltd
Original Assignee
Shenzhen Autel Intelligent Aviation Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Autel Intelligent Aviation Technology Co Ltd filed Critical Shenzhen Autel Intelligent Aviation Technology Co Ltd
Priority to CN201610952287.7A priority Critical patent/CN106454321A/zh
Publication of CN106454321A publication Critical patent/CN106454321A/zh
Priority to PCT/CN2017/107376 priority patent/WO2018077142A1/zh
Priority to US16/389,556 priority patent/US20190246104A1/en
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115—Selection of the code volume for a coding unit prior to coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164—Feedback from the receiver or from the transmission channel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167—Position within a video image, e.g. region of interest [ROI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440236—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by media transcoding, e.g. video is transformed into a slideshow of still pictures, audio is converted into text

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明实施方式公开了一种全景视频的处理方法、装置及系统，终端设备通过接收显示设备发送的分区参数，进而根据分区参数，确定全景视频画面中第一视频区域和第二视频区域，对第一视频区域内的视频数据按照第一码率处理，对第二视频区域内的视频数据按照第二码率处理，实现用户观察区域对应的图像按照高码率处理，用户非观察区域对应的图像按照低码率处理，确保在有限的信道带宽的情况下，提高显示设备与终端设备之间图像传输的实时性、提高用户观看到的视频图像的清晰度，增强用户体验。

Description

全景视频的处理方法、装置及系统
技术领域
本发明涉及全景图像处理技术领域，特别是涉及一种全景视频的处理方法、装置及系统。
背景技术
随着VR头戴显示设备以及飞行器的普及，通过飞行器携带的全景摄像模组捕捉高空场景中较大范围的图像信息，进而利用WiFi、蓝牙、Zigbee、移动通信等无线传输技术，将上述图像信息发送至VR头戴显示设备。现有技术中，通常对全景摄像模组拍摄的各个角度的图像进行拼接形成图像帧，进而将图像帧映射到构建的虚拟球体模型的球体表面，得到以球体模型来呈现的球面图像，通过VR头戴显示设备来观看球面图像所呈现出来的全景景观，提升用户的体验和沉浸感。
发明人在实现本发明的过程中发现：鉴于目前无线传输技术中信道带宽有限，将图像帧发送至VR头戴显示设备的过程中，很难通过VR头戴显示设备实时地显示球面图像。虽然能够通过降低码率、减少帧率的方式适应有限的信道带宽，以提高实时性，但是却以牺牲在VR头戴显示设备上看到的视频图像质量为代价，降低了用户的体验。
发明内容
本发明实施方式主要解决的技术问题是提供一种全景视频的处理方法、装置及系统，能够确保在有限的信道带宽的情况下，提高显示设备与终端设备之间图像传输的实时性、提高用户观看到的视频图像的清晰度。
第一方面，本发明实施例提供了一种全景视频的处理方法，包括：
接收显示设备发送的分区参数；
根据所述分区参数，确定全景视频画面中第一视频区域和第二视频区域；
对所述第一视频区域内的视频数据按照第一码率处理，对所述第二视频区域内的视频数据按照第二码率处理。
第二方面，本发明实施例提供了一种全景视频的处理装置，所述装置包括：
参数接收模块，用于接收显示设备发送的分区参数；
区域确定模块，用于根据所述分区参数，确定全景视频画面中第一视频区域和第二视频区域；
第一码率处理模块，用于对所述第一视频区域内的视频数据按照第一码率处理；
第二码率处理模块，用于对所述第二视频区域内的视频数据按照第二码率处理。
第三方面，本发明实施例提供了一种全景视频的处理方法，所述方法包括：
向终端设备发送分区参数；
接收终端设备根据所述分区参数反馈的全景视频画面，其中，所述全景视频画面包括第一视频区域和第二视频区域，所述第一视频区域内的视频数据按照第一码率处理，所述第二视频区域内的视频数据按照第二码率处理。
第三方面，本发明实施例提供了一种全景视频的处理装置，所述装置包括：
参数发送模块，用于向终端设备发送分区参数；
画面接收模块，用于接收终端设备根据所述分区参数反馈的全景视频画面，其中，所述全景视频画面包括第一视频区域和第二视频区域，所述第一视频区域内的视频数据按照第一码率处理，所述第二视频区域内的视频数据按照第二码率处理。
第四方面，本发明实施例提供了一种全景视频的处理系统，所述系统包括：
显示设备，用于向所述终端设备发送分区参数；
终端设备，用于根据所述分区参数，确定全景视频画面中第一视频区域和第二视频区域，并对所述第一视频区域内的视频数据按照第一码率处理，对所述第二视频区域内的视频数据按照第二码率处理。
本发明实施例提供的一种全景视频的处理方法、装置及系统，终端设备通过接收显示设备发送的分区参数，进而根据分区参数，确定全景视频画面中第一视频区域和第二视频区域，对第一视频区域内的视频数据按照第一码率处理，对第二视频区域内的视频数据按照第二码率处理，实现用户观察区域对应的图像按照高码率处理，用户非观察区域对应的图像按照低码率处理，确保在有限的信道带宽的情况下，提高显示设备与终端设备之间图像传输的实时性、提高用户观看到的视频图像的清晰度，增强用户体验。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例中所需要使用的附图作简单地介绍。显而易见地，下面所描述的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种全景视频的处理方法的流程图；
图2a和图2b是用户视角的朝向在球体模型内切换的示意图；
图3a和图3b是用户视角的范围对应全景视频画面中图像的变化示意图；
图4是本发明实施例提供的一种全景视频的处理装置的功能框图；
图5是本发明又一实施例提供的一种全景视频的处理装置的功能框图；
图6是本发明实施例提供的一种全景视频的处理方法的流程图；
图7是本发明实施例提供的一种全景视频的处理装置的功能框图；
图8是本发明又一实施例提供的一种全景视频的处理装置的功能框图；
图9是本发明实施例提供的一种全景视频的处理系统的示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。
此外，下面所描述的本发明各个实施方式中所涉及到的技术特征只要彼此之间未构成冲突就可以相互组合。
本发明实施例的全景视频的处理方法可以是基于与全景摄像模组通信连接的终端设备和显示设备之间的信息交互过程。全景摄像模组可以是由一个或者多个摄像头组成。终端设备可以是飞行器、相机、手机、平板电脑等，显示设备可以是VR头戴显示设备、电视机、投影设备等。终端设备将全景摄像模组采集的全景视频经过预设处理后以无线或有线传输的方式发送给显示设备进行显示，无线传输的方式包括但不限于Wifi、Bluetooth、ZigBee、移动数据通信等无线传输技术。
下面结合具体附图对本发明实施例作具体阐述。
如图1所示，本发明实施例提供了一种全景视频的处理方法，所述方法可以由终端设备执行，所述方法包括：
步骤11、接收显示设备发送的分区参数。
在本发明实施例中，以显示设备是VR头戴式显示设备为例，全景摄像模组拍摄全景视频画面，终端设备根据VR头戴式显示设备发送的分区参数反馈所述全景视频画面至VR头戴式显示设备。
用户佩戴VR头戴式显示设备时，为了能够观看全景视频画面的三维效果，如图2a所示，VR头戴式显示设备可以构建虚拟三维空间内的球体模型21，进而将全景视频画面映射到球体模型21的球体表面上，得到以球体模型21来展现的球面视频画面，实现把二维的全景视频画面模拟成三维的球面视频画面，以呈现给用户。
用户视角的切换可以实现向用户呈现球面视频画面中不同的区域，在用户视角的切换的实现方式上，包括但不限于如下两种方式：
第一种方式，佩戴VR头戴式显示设备的用户转动头部，VR头戴式显示设备的陀螺仪检测用户的头部转动，确定用户视角的方位，以便向用户呈现球面视频画面中用户视角朝向的区域，例如，由如图2a所示的用户视角朝向的区域切换到如图2b所示的用户视角朝向的区域。
第二种方式，佩戴VR头戴式显示设备的用户操作遥控器上的摇杆或按键，VR头戴式显示设备根据摇杆的摆动或按键的触发，即可向用户呈现球面视频画面中不同的区域。遥控器与VR头戴式显示设备可以是以无线或有线传输的方式进行通信。
需要说明的是，在用户视角的切换的实现方式上，可以采用上述第一种方式，也可以采用上述第二种方式，还也可以采用在第一种方式与第二种方式之间切换，以便供用户选择第一种方式或第二种方式。
在本发明实施例中，可以将球体模型的球体表面分成多个分区，分区的数量及各个分区的面积大小可以显示设备的显示屏视角大小进行适应性调整。图2a和图2b中以将球体模型21的球体表面分成六个分区为例，六个分区包括：A分区、B分区、C分区、D分区、E分区以及F分区，一个分区可以用于对应展现全景摄像模组中一个摄像头拍摄的区域画面。在一固定时刻，用户视角的范围能够涉及1～3个分区，根据用户视角的方位可以计算出用户视角的范围所涉及的分区位置，进而可以确定所涉及的分区编号。
步骤12、根据分区参数，确定全景视频画面中第一视频区域和第二视频区域。
作为一种可选的实施方式，分区参数可以是根据显示设备的用户视角所确定的全景视频画面的分区位置，如图2a所示，用户视角的范围涉及到C分区和D分区这两个区域，在切换用户视角后，如图2b所示，用户视角的范围涉及到B分区和C分区这两个区域。
作为一种可选的实施方式，分区参数包括第一标识信息以及第二标识信息。确定分区参数的步骤具体包括：
获取球面视频画面中与第一视频区域对应的图像的第一标识信息以及与第二视频区域对应的图像的第二标识信息。
将第一标识信息以及第二标识信息整合成分区参数。
在本可选实施方式中，全景视频画面中第一视频区域对应的球面视频画面中的图像具有第一标识信息，全景视频画面中第二视频区域对应的球面视频画面中的图像具有第二标识信息，能够通过第一标识信息和第二标识信息确定全景视频画面中第一视频区域和第二视频区域。
步骤13、对第一视频区域内的视频数据按照第一码率处理，对第二视频区域内的视频数据按照第二码率处理。
图3a是图2a中用户视角的范围对应全景视频画面中图像的示意图，图3b是图2b中用户视角的范围对应全景视频画面中图像的示意图。
在本发明实施例中，全景视频画面中的图像包括：a图像、b图像、c图像、d图像、e图像以及f图像。a图像、b图像、c图像、d图像、e图像以及f图像拼接后形成全景视频画面。a图像映射到A分区，b图像映射到B分区，c图像映射到C分区，d图像映射到D分区，e图像映射到E分区，f图像映射到F分区。
如图3a所示，用户视角的范围对应全景视频画面中的c图像和d图像这两个图像，在切换用户视角后，如图3b所示，用户视角的范围对应全景视频画面中的b图像和c图像这两个图像。
作为一种可选的实施方式，第一码率大于第二码率，第一视频区域包括用户视角的范围对应全景视频画面中的图像，第二视频区域包括全景视频画面中其他图像中的任意一个或多个图像。例如，如图3a所示，第一视频区域包括c图像和d图像，对第一视频区域内的图像按照第一码率处理；第二视频区域包括a图像、b图像、e图像以及f图像中任意一个或多个图像，对第二视频区域的图像按照第二码率处理。
作为一种可选的实施方式，第二码率大于第一码率，第二视频区域包括用户视角的范围对应全景视频画面中的图像，第一视频区域包括全景视频画面中其他图像中的任意一个或多个图像。对第一视频区域内的图像按照第一码率处理；对第二视频区域的图像按照第二码率处理。
本发明实施例提供的一种全景视频的处理方法，终端设备通过接收显示设备发送的分区参数，进而根据分区参数，确定全景视频画面中第一视频区域和第二视频区域，对第一视频区域内的视频数据按照第一码率处理，对第二视频区域内的视频数据按照第二码率处理，实现用户观察区域对应的图像按照高码率处理，用户非观察区域对应的图像按照低码率处理，确保在有限的信道带宽的情况下，提高显示设备与终端设备之间图像传输的实时性、提高用户观看到的视频图像的清晰度，增强用户体验。
作为一种可选的实施方式，上述对所述第一视频区域按照第一码率处理具体为：对第一视频区域内的视频数据按照第一码率进行压缩编码；上述对所述第二视频区域按照第二码率处理具体为：对第二视频区域内的视频数据按照第二码率进行压缩编码。终端设备将压缩编码后的视频码流可以通过无线传输的方式发送至显示设备，无线传输的方式包括但不限于Wifi、Bluetooth、ZigBee、移动数据通信等无线传输技术。终端设备将压缩编码后的视频码流也可以通过有线传输的方式发送至显示设备。
作为一种可选的实施方式，上述对第一视频区域按照第一码率处理具体为：确定拍摄第一视频区域的第一组摄像头，将第一组摄像头的输出码率设置为第一码率；上述对第二视频区域按照第二码率处理具体为：确定拍摄第二视频区域的第二组摄像头，将第二组摄像头的输出码率设置为第二码率。例如，如图3a所示，第一组摄像头包括拍摄c图像和d图像的摄像头，将第一组摄像头的输出码率设置为第一码率；第二组摄像头包括拍摄a图像、b图像、e图像以及f图像中任意一个或多个图像的摄像头，将第二组摄像头的输出码率设置为第二码率。
为了进一步降低对信道带宽的负载，假设用户视角的范围对应全景视频画面中第一视频区域，可以关闭拍摄第二视频区域的第二组摄像头；假设用户视角的范围对应全景视频画面中第二视频区域，可以关闭拍摄第一视频区域的第一组摄像头。
如图4所示，本发明实施例提供了一种全景视频的处理装置40，所述处理装置40包括：参数接收模块41、区域确定模块42、第一码率处理模块43和第二码率处理模块44。
参数接收模块41用于接收显示设备发送的分区参数。
所述分区参数为根据所述显示设备的用户视角所确定的全景视频图像分区的位置。
区域确定模块42用于根据分区参数，确定全景视频画面中第一视频区域和第二视频区域。
第一码率处理模块43用于对第一视频区域内的视频数据按照第一码率处理。
具体的，第一码率处理模块用于对第一视频区域内的视频数据按照第一码率进行压缩编码；或者，第一码率处理模块用于确定拍摄第一视频区域的第一组摄像头，将第一组摄像头的输出码率设置为第一码率。
第二码率处理模块44用于对第二视频区域内的视频数据按照第二码率处理。
具体的，第二码率处理模块用于对第二视频区域内的视频数据按照第二码率进行压缩编码；或者，第二码率处理模块用于确定拍摄第二视频区域的第二组摄像头，将第二组摄像头的输出码率设置为第二码率。
在本发明实施例中，对参数接收模块41、区域确定模块42、第一码率处理模块43以及第二码率处理模块44的解释说明请参考对上述步骤11、步骤12以及步骤13的解释说明。
本发明实施例提供的一种全景视频的处理装置，通过接收模块接收显示设备发送的分区参数，进而区域确定模块根据分区参数，确定全景视频画面中第一视频区域和第二视频区域，第一码率处理模块对第一视频区域内的视频数据按照第一码率处理，第二码率处理模块对第二视频区域内的视频数据按照第二码率处理，实现用户观察区域对应的图像按照高码率处理，用户非观察区域对应的图像按照低码率处理，确保在有限的信道带宽的情况下，提高显示设备与终端设备之间图像传输的实时性、提高用户观看到的视频图像的清晰度，增强用户体验。
如图5所示，本发明又一实施例提供了一种全景视频的处理装置50，所述处理装置50包括：参数接收模块51、区域确定模块52、第一码率处理模块53、第二码率处理模块54以及码流发送模块55。
参数接收模块51用于接收显示设备发送的分区参数。
区域确定模块52用于根据分区参数，确定全景视频画面中第一视频区域和第二视频区域。
第一码率处理模块53用于对第一视频区域内的视频数据按照第一码率进行压缩编码。
第二码率处理模块54用于对第二视频区域内的视频数据按照第二码率进行压缩编码。
码流发送模块55用于将压缩编码后的视频码流通过无线传输的方式发送至显示设备。
在本发明实施例中，对参数接收模块51、区域确定模块52、第一码率处理模块53、第二码率处理模块54以及码流发送模块55的解释说明请参考对上述步骤11、步骤12以及步骤13的解释说明。
本发明实施例提供的一种全景视频的处理装置，通过接收模块51接收显示设备发送的分区参数，进而区域确定模块52根据分区参数，确定全景视频画面中第一视频区域和第二视频区域，第一码率处理模块对第一视频区域内的视频数据按照第一码率进行压缩编码，第二码率处理模块对第二视频区域内的视频数据按照第二码率进行压缩编码，码流发送模块将压缩编码后的视频码流通过无线传输的方式发送至显示设备，确保在有限的信道带宽的情况下，提高显示设备与终端设备之间图像无线传输的实时性、提高用户观看到的视频图像的清晰度，增强用户体验。
如图6所示，本发明实施例提供了一种全景视频的处理方法，所述方法由显示设备执行，所述方法包括：
步骤61、向终端设备发送分区参数。
步骤62、接收终端设备根据分区参数反馈的全景视频画面，其中，全景视频画面包括第一视频区域和第二视频区域，第一视频区域内的视频数据按照第一码率处理，第二视频区域内的视频数据按照第二码率处理。
在本发明实施例中，以终端设备是飞行器，以显示设备是VR头戴式显示设备为例，全景摄像模组拍摄全景视频画面，终端设备根据VR头戴式显示设备发送的分区参数反馈全景视频画面至VR头戴式显示设备。
用户佩戴VR头戴式显示设备时，为了能够观看全景视频画面的三维效果，在步骤62之后，还包括如下步骤：
构建虚拟三维空间内的球体模型；
将全景视频画面映射到球体模型的球体表面上，得到以球体模型来展现的球面视频画面。
如图2a所示，VR头戴式显示设备可以构建虚拟三维空间内的球体模型21，进而将全景视频画面映射到球体模型21的球体表面上，得到以球体模型21来展现的球面视频画面，实现把二维的全景视频画面模拟成三维的球面视频画面，以呈现给用户。
用户视角的切换可以实现向用户呈现球面视频画面中不同的区域，在用户视角的切换的实现方式上，包括但不限于如下两种方式：
第一种方式，佩戴VR头戴式显示设备的用户转动头部，VR头戴式显示设备的陀螺仪检测用户的头部转动，确定用户视角的方位，以便向用户呈现球面视频画面中用户视角朝向的区域，例如，由如图2a所示的用户视角朝向的区域切换到如图2b所示的用户视角朝向的区域。
第二种方式，佩戴VR头戴式显示设备的用户操作遥控器上的摇杆或按键，VR头戴式显示设备根据摇杆的摆动或按键的触发，即可向用户呈现球面视频画面中不同的区域。遥控器与VR头戴式显示设备可以是以无线或有线传输的方式进行通信。
需要说明的是，在用户视角的切换的实现方式上，可以采用上述第一种方式，也可以采用上述第二种方式，还也可以采用在第一种方式与第二种方式之间切换，以便供用户选择第一种方式或第二种方式。
在本发明实施例中，可以将球体模型的球体表面分成多个分区，分区的数量及各个分区的面积大小可以显示设备的显示屏视角大小进行适应性调整。图2a和图2b中以将球体模型21的球体表面分成六个分区为例，六个分区包括：A分区、B分区、C分区、D分区、E分区以及F分区，一个分区可以用于对应展现全景摄像模组中一个摄像头拍摄的区域画面。在一固定时刻，用户视角的范围能够涉及1～3个分区，根据用户视角的方位可以计算出用户视角的范围所涉及的分区位置，进而可以确定所涉及的分区编号。
作为一种可选的实施方式，分区参数可以是根据显示设备的用户视角所确定的全景视频画面的分区位置，如图2a所示，用户视角的范围涉及到C分区和D分区这两个区域，在切换用户视角后，如图2b所示，用户视角的范围涉及到B分区和C分区这两个区域。
作为一种可选的实施方式，分区参数包括第一标识信息以及第二标识信息。在步骤62之后，还包括如下步骤：
获取球面视频画面中与第一视频区域对应的图像的第一标识信息以及与第二视频区域对应的图像的第二标识信息。
将第一标识信息以及第二标识信息整合成分区参数。
在本可选实施方式中，全景视频画面中第一视频区域对应的球面视频画面中的图像具有第一标识信息，全景视频画面中第二视频区域对应的球面视频画面中的图像具有第二标识信息，能够通过第一标识信息和第二标识信息确定全景视频画面中第一视频区域和第二视频区域。
将第一标识信息以及第二标识信息整合成分区参数。
图3a是图2a中用户视角的范围对应全景视频画面中图像的示意图，图3b是图2b中用户视角的范围对应全景视频画面中图像的示意图。
在本发明实施例中，全景视频画面中的图像包括：a图像、b图像、c图像、d图像、e图像以及f图像。a图像、b图像、c图像、d图像、e图像以及f图像拼接后形成全景视频画面。a图像映射到A分区，b图像映射到B分区，c图像映射到C分区，d图像映射到D分区，e图像映射到E分区，f图像映射到F分区。
如图3a所示，用户视角的范围对应全景视频画面中的c图像和d图像这两个图像，在切换用户视角后，如图3b所示，用户视角的范围对应全景视频画面中的b图像和c图像这两个图像。
作为一种可选的实施方式，第一码率大于第二码率，第一视频区域包括用户视角的范围对应全景视频画面中的图像，第二视频区域包括全景视频画面中其他图像中的任意一个或多个图像。例如，如图3a所示，第一视频区域包括c图像和d图像，对第一视频区域内的图像按照第一码率处理；第二视频区域包括a图像、b图像、e图像以及f图像中任意一个或多个图像，对第二视频区域的图像按照第二码率处理。
作为一种可选的实施方式，第二码率大于第一码率，第二视频区域包括用户视角的范围对应全景视频画面中的图像，第一视频区域包括全景视频画面中其他图像中的任意一个或多个图像。对第一视频区域内的图像按照第一码率处理；对第二视频区域的图像按照第二码率处理。
在步骤62之后，还包括如下步骤：
显示球面视频画面中与第一视频区域对应的图像或与第二视频区域对应的图像。
发明实施例提供的一种全景视频的处理方法，通过向终端设备发送分区参数，接收终端设备根据分区参数反馈的全景视频画面，其中，全景视频画面包括第一视频区域和第二视频区域，第一视频区域内的视频数据按照第一码率处理，第二视频区域内的视频数据按照第二码率处理，确保在有限的信道带宽的情况下，提高显示设备与终端设备之间图像传输的实时性、提高用户观看到的视频图像的清晰度，增强用户体验。
如图7所示，本发明实施例提供了一种全景视频的处理装置70，所述处理装置70包括：参数发送模块71和画面接收模块72。
参数发送模块71用于向终端设备发送分区参数。
画面接收模块72用于接收终端设备根据分区参数反馈的全景视频画面，其中，全景视频画面包括第一视频区域和第二视频区域，第一视频区域内的视频数据按照第一码率处理，第二视频区域内的视频数据按照第二码率处理。
在本发明实施例中，对参数发送模块71和画面接收模块72的解释说明请参考对上述步骤61、步骤62的解释说明。
发明实施例提供的一种全景视频的处理装置，通过参数发送模块向终端设备发送分区参数，画面接收模块接收终端设备根据分区参数反馈的全景视频画面，其中，全景视频画面包括第一视频区域和第二视频区域，第一视频区域内的视频数据按照第一码率处理，第二视频区域内的视频数据按照第二码率处理，确保在有限的信道带宽的情况下，提高显示设备与终端设备之间图像传输的实时性、提高用户观看到的视频图像的清晰度，增强用户体验。
如图8所示，本发明又一实施例提供了一种全景视频的处理装置80，所述处理装置80包括：参数发送模块81、画面接收模块82、模型构建模块83、画面映射模块84、标识信息获取模块85、整合模块86、显示模块87。
参数发送模块81用于向终端设备发送分区参数。
画面接收模块82用于接收终端设备根据分区参数反馈的全景视频画面，其中，全景视频画面包括第一视频区域和第二视频区域，第一视频区域内的视频数据按照第一码率处理，第二视频区域内的视频数据按照第二码率处理。
模型构建模块83用于构建虚拟三维空间内的球体模型。
画面映射模块84用于将全景视频画面映射到球体模型的球体表面上，得到以球体模型来展现的球面视频画面。
标识信息获取模块85用于获取球面视频画面中与第一视频区域对应的图像的第一标识信息以及与第二视频区域对应的图像的第二标识信息。
整合模块86用于将第一标识信息以及第二标识信息整合成分区参数。
显示模块87用于显示球面视频画面中与第一视频区域对应的图像或与第二视频区域对应的图像。
在本发明实施例中，对参数发送模块81、画面接收模块82、模型构建模块83、画面映射模块84、标识信息获取模块85、整合模块86、显示模块87的解释说明请参考对上述步骤61、步骤62的解释说明。
如图9所示，本发明实施例提供了一种全景视频的处理系统90，所述系统包括：显示设备91和终端设备92。终端设备可以是飞行器、相机、手机、平板电脑等，显示设备可以是VR头戴显示设备、电视机、投影设备等。
显示设备91用于向终端设备发送分区参数。
作为一种可选的实施方式，分区参数可以是根据显示设备的用户视角所确定的全景视频画面的分区位置。
作为一种可选的实施方式，分区参数包括第一标识信息以及第二标识信息。确定分区参数的步骤具体包括：
获取球面视频画面中与第一视频区域对应的图像的第一标识信息以及与第二视频区域对应的图像的第二标识信息。
将第一标识信息以及第二标识信息整合成分区参数。
终端设备92用于根据分区参数，确定全景视频画面中第一视频区域和第二视频区域，并对第一视频区域内的视频数据按照第一码率处理，对第二视频区域内的视频数据按照第二码率处理。
作为一种可选的实施方式，第一码率大于第二码率，第一视频区域包括用户视角的范围对应全景视频画面中的图像，第二视频区域包括全景视频画面中其他图像中的任意一个或多个图像。例如，如图3a所示，第一视频区域包括c图像和d图像，对第一视频区域内的图像按照第一码率处理；第二视频区域包括a图像、b图像、e图像以及f图像中任意一个或多个图像，对第二视频区域的图像按照第二码率处理。
作为一种可选的实施方式，第二码率大于第一码率，第二视频区域包括用户视角的范围对应全景视频画面中的图像，第一视频区域包括全景视频画面中其他图像中的任意一个或多个图像。对第一视频区域内的图像按照第一码率处理；对第二视频区域的图像按照第二码率处理。
本发明实施例提供的一种全景视频的处理系统，通过显示设备向向终端设备发送分区参数，终端设备根据分区参数，确定全景视频画面中第一视频区域和第二视频区域，并对第一视频区域内的视频数据按照第一码率处理，对第二视频区域内的视频数据按照第二码率处理，确保在有限的信道带宽的情况下，提高显示设备与终端设备之间图像传输的实时性、提高用户观看到的视频图像的清晰度，增强用户体验。
本领域普通技术人员可以理解实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取存储器(RAM，Random AccessMemory)、磁盘或光盘等。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (21)

1.一种全景视频的处理方法，其特征在于，包括：
接收显示设备发送的分区参数；
根据所述分区参数，确定全景视频画面中第一视频区域和第二视频区域；
对所述第一视频区域内的视频数据按照第一码率处理，对所述第二视频区域内的视频数据按照第二码率处理。
2.根据权利要求1所述的全景视频的处理方法，其特征在于，所述分区参数为根据所述显示设备的用户视角所确定的全景视频画面的分区位置。
3.根据权利要求1或2所述的全景视频的处理方法，其特征在于，所述对所述第一视频区域按照第一码率处理，对所述第二视频区域按照第二码率处理，具体为：
对所述第一视频区域内的视频数据按照第一码率进行压缩编码；
对所述第二视频区域内的视频数据按照第二码率进行压缩编码。
4.根据权利要求3所述的全景视频的处理方法，其特征在于，还包括：
将压缩编码后的视频码流通过无线传输的方式发送至所述显示设备。
5.根据权利要求1或2所述的全景视频的处理方法，其特征在于，所述对所述第一视频区域按照第一码率处理，对所述第二视频区域按照第二码率处理，具体为：
确定拍摄第一视频区域的第一组摄像头，将所述第一组摄像头的输出码率设置为第一码率；以及，
确定拍摄第二视频区域的第二组摄像头，将所述第二组摄像头的输出码率设置为第二码率。
6.一种全景视频的处理装置，其特征在于，所述装置包括：
参数接收模块，用于接收显示设备发送的分区参数；
区域确定模块，用于根据所述分区参数，确定全景视频画面中第一视频区域和第二视频区域；
第一码率处理模块，用于对所述第一视频区域内的视频数据按照第一码率处理；
第二码率处理模块，用于对所述第二视频区域内的视频数据按照第二码率处理。
7.根据权利要求6所述的装置，其特征在于，所述分区参数为根据所述显示设备的用户视角所确定的全景视频图像分区的位置。
8.根据权利要求6或7所述的装置，其特征在于，
所述第一码率处理模块用于对所述第一视频区域内的视频数据按照第一码率进行压缩编码；
所述第二码率处理模块用于对所述第二视频区域内的视频数据按照第二码率进行压缩编码。
9.根据权利要求8所述的装置，其特征在于，所述装置还包括：
码流发送模块，用于将压缩编码后的视频码流通过无线传输的方式发送至所述显示设备。
10.根据权利要求6或7所述的装置，其特征在于，
所述第一码率处理模块用于确定拍摄第一视频区域的第一组摄像头，将所述第一组摄像头的输出码率设置为第一码率；
所述第二码率处理模块用于确定拍摄第二视频区域的第二组摄像头，将所述第二组摄像头的输出码率设置为第二码率。
11.一种全景视频的处理方法，其特征在于，所述方法包括：
向终端设备发送分区参数；
接收终端设备根据所述分区参数反馈的全景视频画面，其中，所述全景视频画面包括第一视频区域和第二视频区域，所述第一视频区域内的视频数据按照第一码率处理，所述第二视频区域内的视频数据按照第二码率处理。
12.根据权利要求11所述的方法，其特征在于，在接收终端设备根据所述分区参数反馈的全景视频画面的步骤之后，所述方法还包括：
构建虚拟三维空间内的球体模型；
将所述全景视频画面映射到所述球体模型的球体表面上，得到以球体模型来展现的球面视频画面。
13.根据权利要求12所述的方法，其特征在于，所述分区参数为根据用户视角所确定的全景视频画面的分区位置。
14.根据权利要求12所述的方法，其特征在于，在将所述全景视频画面映射到所述球体模型的球体表面上，得到以球体模型来展现的球面视频画面的步骤之后，所述方法还包括：
获取所述球面视频画面中与第一视频区域对应的图像的第一标识信息以及与第二视频区域对应的图像的第二标识信息；
将所述第一标识信息以及所述第二标识信息整合成所述分区参数。
15.根据权利要求12-14中任一所述的方法，其特征在于，在接收终端设备根据所述分区参数反馈的全景视频画面的步骤之后，所述方法还包括：
显示所述球面视频画面中与第一视频区域对应的图像或与第二视频区域对应的图像。
16.一种全景视频的处理装置，其特征在于，所述装置包括：
参数发送模块，用于向终端设备发送分区参数；
画面接收模块，用于接收终端设备根据所述分区参数反馈的全景视频画面，其中，所述全景视频画面包括第一视频区域和第二视频区域，所述第一视频区域内的视频数据按照第一码率处理，所述第二视频区域内的视频数据按照第二码率处理。
17.根据权利要求16所述的装置，其特征在于，所述装置还包括：
模型构建模块，用于构建虚拟三维空间内的球体模型；
画面映射模块，用于将所述全景视频画面映射到所述球体模型的球体表面上，得到以球体模型来展现的球面视频画面。
18.根据权利要求17所述的装置，其特征在于，所述分区参数为根据用户视角所确定的全景视频画面的分区位置。
19.根据权利要求17所述的装置，其特征在于，所述装置还包括：
标识信息获取模块，用于获取所述球面视频画面中与第一视频区域对应的图像的第一标识信息以及与第二视频区域对应的图像的第二标识信息；
整合模块，用于将所述第一标识信息以及所述第二标识信息整合成所述分区参数。
20.根据权利要求17-19中任一所述的装置，其特征在于，所述装置还包括：
显示模块，用于显示所述球面视频画面中与第一视频区域对应的图像或与第二视频区域对应的图像。
21.一种全景视频的处理系统，其特征在于，所述系统包括：
显示设备，用于向所述终端设备发送分区参数；
终端设备，用于根据所述分区参数，确定全景视频画面中第一视频区域和第二视频区域，并对所述第一视频区域内的视频数据按照第一码率处理，对所述第二视频区域内的视频数据按照第二码率处理。
CN201610952287.7A 2016-10-26 2016-10-26 全景视频的处理方法、装置及系统 Pending CN106454321A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201610952287.7A CN106454321A (zh) 2016-10-26 2016-10-26 全景视频的处理方法、装置及系统
PCT/CN2017/107376 WO2018077142A1 (zh) 2016-10-26 2017-10-23 全景视频的处理方法、装置及系统
US16/389,556 US20190246104A1 (en) 2016-10-26 2019-04-19 Panoramic video processing method, device and system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610952287.7A CN106454321A (zh) 2016-10-26 2016-10-26 全景视频的处理方法、装置及系统

Publications (1)

Publication Number Publication Date
CN106454321A true CN106454321A (zh) 2017-02-22

Family

ID=58179315

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610952287.7A Pending CN106454321A (zh) 2016-10-26 2016-10-26 全景视频的处理方法、装置及系统

Country Status (3)

Country Link
US (1) US20190246104A1 (zh)
CN (1) CN106454321A (zh)
WO (1) WO2018077142A1 (zh)

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106911902A (zh) * 2017-03-15 2017-06-30 微鲸科技有限公司 视频图像传输方法、接收方法及装置
CN106954093A (zh) * 2017-03-15 2017-07-14 北京小米移动软件有限公司 全景视频处理方法、装置及系统
CN106961622A (zh) * 2017-03-30 2017-07-18 联想(北京)有限公司 一种显示处理方法及装置
CN107087145A (zh) * 2017-06-02 2017-08-22 深圳市本道科技有限公司 多路视频进行360度全景视频显示的方法及装置
CN107123080A (zh) * 2017-03-29 2017-09-01 北京疯景科技有限公司 显示全景内容的方法及装置
CN107396077A (zh) * 2017-08-23 2017-11-24 深圳看到科技有限公司 虚拟现实全景视频流投影方法和设备
CN107395984A (zh) * 2017-08-25 2017-11-24 北京佰才邦技术有限公司 一种视频传输的方法及装置
CN107529064A (zh) * 2017-09-04 2017-12-29 北京理工大学 一种基于vr终端反馈的自适应编码方法
WO2018077142A1 (zh) * 2016-10-26 2018-05-03 深圳市道通智能航空技术有限公司 全景视频的处理方法、装置及系统
CN108401183A (zh) * 2018-03-06 2018-08-14 深圳市赛亿科技开发有限公司 Vr全景视频显示的实现方法和系统、vr服务器
CN108513119A (zh) * 2017-02-27 2018-09-07 阿里巴巴集团控股有限公司 图像的映射、处理方法、装置和机器可读介质
CN108668138A (zh) * 2017-03-28 2018-10-16 华为技术有限公司 一种视频下载方法以及用户终端
CN108833929A (zh) * 2018-06-26 2018-11-16 曜宇航空科技（上海）有限公司 一种全景视频的播放方法和播放系统
WO2018223839A1 (en) * 2017-06-08 2018-12-13 Huawei Technologies Co., Ltd. A method and system for transmitting virtual reality (vr) content
CN109218836A (zh) * 2017-06-30 2019-01-15 华为技术有限公司 一种视频处理方法及其设备
CN109429062A (zh) * 2017-08-22 2019-03-05 阿里巴巴集团控股有限公司 金字塔模型的处理方法和装置、图像编码方法和装置
CN109634427A (zh) * 2018-12-24 2019-04-16 陕西圆周率文教科技有限公司 基于头部追踪的ar眼镜控制系统及控制方法
CN109698952A (zh) * 2017-10-23 2019-04-30 腾讯科技（深圳）有限公司 全景视频图像的播放方法、装置、存储介质及电子装置
CN109756540A (zh) * 2017-11-06 2019-05-14 中国移动通信有限公司研究院 一种全景视频传输方法、装置和计算机可读存储介质
CN111447457A (zh) * 2020-03-25 2020-07-24 咪咕文化科技有限公司 直播视频处理方法、装置及存储介质
CN112399187A (zh) * 2019-08-13 2021-02-23 华为技术有限公司 一种数据传输的方法以及装置
CN112541858A (zh) * 2019-09-20 2021-03-23 华为技术有限公司 视频图像的增强方法、装置、设备、芯片及存储介质
CN112752032A (zh) * 2019-10-31 2021-05-04 华为技术有限公司 一种全景视频生成方法、视频采集方法与相关装置
CN113518249A (zh) * 2020-04-10 2021-10-19 华为技术有限公司 一种远端图像处理方法及装置
WO2022253017A1 (zh) * 2021-06-02 2022-12-08 影石创新科技股份有限公司 无人机的控制方法及控制系统

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102598082B1 (ko) * 2016-10-28 2023-11-03 삼성전자주식회사 영상 표시 장치, 모바일 장치 및 그 동작방법
CN110266714B (zh) * 2019-06-28 2020-04-21 合肥工业大学 一种QoE驱动下的VR视频自适应采集与传输方法
CN117768669A (zh) * 2022-09-19 2024-03-26 腾讯科技（深圳）有限公司 一种数据传输的方法、装置、电子设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101534436A (zh) * 2008-03-11 2009-09-16 深圳市融合视讯科技有限公司 一种视频图像宏块级自适应码率分配方法
CN102984495A (zh) * 2012-12-06 2013-03-20 北京小米科技有限责任公司 一种视频图像的处理方法及装置
CN104767992A (zh) * 2015-04-13 2015-07-08 北京集创北方科技有限公司 头戴式显示系统及影像低频宽传输方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150312575A1 (en) * 2012-04-16 2015-10-29 New Cinema, LLC Advanced video coding method, system, apparatus, and storage medium
CN103458238B (zh) * 2012-11-14 2016-06-15 深圳信息职业技术学院 一种结合视觉感知的可伸缩视频码率控制方法、装置
CN104980740A (zh) * 2014-04-08 2015-10-14 富士通株式会社 图像处理方法、装置和电子设备
CN105635624B (zh) * 2014-10-27 2019-05-03 华为技术有限公司 视频图像的处理方法、设备及系统
WO2016073986A1 (en) * 2014-11-07 2016-05-12 Eye Labs, LLC Visual stabilization system for head-mounted displays
US10362290B2 (en) * 2015-02-17 2019-07-23 Nextvr Inc. Methods and apparatus for processing content based on viewing information and/or communicating content
US10468066B2 (en) * 2015-09-23 2019-11-05 Nokia Technologies Oy Video content selection
US10291910B2 (en) * 2016-02-12 2019-05-14 Gopro, Inc. Systems and methods for spatially adaptive video encoding
US20180027241A1 (en) * 2016-07-20 2018-01-25 Mediatek Inc. Method and Apparatus for Multi-Level Region-of-Interest Video Coding
US10142540B1 (en) * 2016-07-26 2018-11-27 360fly, Inc. Panoramic video cameras, camera systems, and methods that provide data stream management for control and image streams in multi-camera environment with object tracking
CN106454321A (zh) * 2016-10-26 2017-02-22 深圳市道通智能航空技术有限公司 全景视频的处理方法、装置及系统
US10623634B2 (en) * 2017-04-17 2020-04-14 Intel Corporation Systems and methods for 360 video capture and display based on eye tracking including gaze based warnings and eye accommodation matching

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101534436A (zh) * 2008-03-11 2009-09-16 深圳市融合视讯科技有限公司 一种视频图像宏块级自适应码率分配方法
CN102984495A (zh) * 2012-12-06 2013-03-20 北京小米科技有限责任公司 一种视频图像的处理方法及装置
CN104767992A (zh) * 2015-04-13 2015-07-08 北京集创北方科技有限公司 头戴式显示系统及影像低频宽传输方法

Cited By (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018077142A1 (zh) * 2016-10-26 2018-05-03 深圳市道通智能航空技术有限公司 全景视频的处理方法、装置及系统
TWI739937B (zh) * 2017-02-27 2021-09-21 香港商阿里巴巴集團服務有限公司 用於影像映射的方法、裝置和機器可讀媒體
US10674078B2 (en) 2017-02-27 2020-06-02 Alibaba Group Holding Limited Image mapping and processing method, apparatus and machine-readable media
CN108513119A (zh) * 2017-02-27 2018-09-07 阿里巴巴集团控股有限公司 图像的映射、处理方法、装置和机器可读介质
CN106954093A (zh) * 2017-03-15 2017-07-14 北京小米移动软件有限公司 全景视频处理方法、装置及系统
CN106954093B (zh) * 2017-03-15 2020-12-04 北京小米移动软件有限公司 全景视频处理方法、装置及系统
CN106911902B (zh) * 2017-03-15 2020-01-07 微鲸科技有限公司 视频图像传输方法、接收方法及装置
CN106911902A (zh) * 2017-03-15 2017-06-30 微鲸科技有限公司 视频图像传输方法、接收方法及装置
CN108668138A (zh) * 2017-03-28 2018-10-16 华为技术有限公司 一种视频下载方法以及用户终端
CN107123080A (zh) * 2017-03-29 2017-09-01 北京疯景科技有限公司 显示全景内容的方法及装置
CN106961622A (zh) * 2017-03-30 2017-07-18 联想(北京)有限公司 一种显示处理方法及装置
CN107087145A (zh) * 2017-06-02 2017-08-22 深圳市本道科技有限公司 多路视频进行360度全景视频显示的方法及装置
US10477105B2 (en) 2017-06-08 2019-11-12 Futurewei Technologies, Inc. Method and system for transmitting virtual reality (VR) content
CN110622506B (zh) * 2017-06-08 2021-02-12 华为技术有限公司 发送虚拟现实(vr)内容的方法和系统
WO2018223839A1 (en) * 2017-06-08 2018-12-13 Huawei Technologies Co., Ltd. A method and system for transmitting virtual reality (vr) content
CN112887843A (zh) * 2017-06-08 2021-06-01 华为技术有限公司 发送虚拟现实（vr）内容的方法和系统
CN112887843B (zh) * 2017-06-08 2022-08-26 华为技术有限公司 发送虚拟现实(vr)内容的方法和系统
CN110622506A (zh) * 2017-06-08 2019-12-27 华为技术有限公司 发送虚拟现实(vr)内容的方法和系统
CN109218836A (zh) * 2017-06-30 2019-01-15 华为技术有限公司 一种视频处理方法及其设备
CN109218836B (zh) * 2017-06-30 2021-02-26 华为技术有限公司 一种视频处理方法及其设备
CN109429062A (zh) * 2017-08-22 2019-03-05 阿里巴巴集团控股有限公司 金字塔模型的处理方法和装置、图像编码方法和装置
CN107396077B (zh) * 2017-08-23 2022-04-08 深圳看到科技有限公司 虚拟现实全景视频流投影方法和设备
CN107396077A (zh) * 2017-08-23 2017-11-24 深圳看到科技有限公司 虚拟现实全景视频流投影方法和设备
WO2019037365A1 (zh) * 2017-08-23 2019-02-28 深圳看到科技有限公司 虚拟现实全景视频流投影方法和设备
CN107395984A (zh) * 2017-08-25 2017-11-24 北京佰才邦技术有限公司 一种视频传输的方法及装置
CN107529064A (zh) * 2017-09-04 2017-12-29 北京理工大学 一种基于vr终端反馈的自适应编码方法
CN109698952B (zh) * 2017-10-23 2020-09-29 腾讯科技（深圳）有限公司 全景视频图像的播放方法、装置、存储介质及电子装置
CN109698952A (zh) * 2017-10-23 2019-04-30 腾讯科技（深圳）有限公司 全景视频图像的播放方法、装置、存储介质及电子装置
CN109756540A (zh) * 2017-11-06 2019-05-14 中国移动通信有限公司研究院 一种全景视频传输方法、装置和计算机可读存储介质
CN109756540B (zh) * 2017-11-06 2021-09-14 中国移动通信有限公司研究院 一种全景视频传输方法、装置和计算机可读存储介质
CN108401183A (zh) * 2018-03-06 2018-08-14 深圳市赛亿科技开发有限公司 Vr全景视频显示的实现方法和系统、vr服务器
CN108833929A (zh) * 2018-06-26 2018-11-16 曜宇航空科技（上海）有限公司 一种全景视频的播放方法和播放系统
CN109634427A (zh) * 2018-12-24 2019-04-16 陕西圆周率文教科技有限公司 基于头部追踪的ar眼镜控制系统及控制方法
CN109634427B (zh) * 2018-12-24 2022-06-14 陕西圆周率文教科技有限公司 基于头部追踪的ar眼镜控制系统及控制方法
CN112399187A (zh) * 2019-08-13 2021-02-23 华为技术有限公司 一种数据传输的方法以及装置
WO2021052040A1 (zh) * 2019-09-20 2021-03-25 华为技术有限公司 视频图像的增强方法、装置、设备、芯片及存储介质
CN112541858A (zh) * 2019-09-20 2021-03-23 华为技术有限公司 视频图像的增强方法、装置、设备、芯片及存储介质
WO2021083293A1 (zh) * 2019-10-31 2021-05-06 华为技术有限公司 一种全景视频生成方法、视频采集方法与相关装置
CN112752032A (zh) * 2019-10-31 2021-05-04 华为技术有限公司 一种全景视频生成方法、视频采集方法与相关装置
CN112752032B (zh) * 2019-10-31 2023-01-06 华为技术有限公司 一种全景视频生成方法、视频采集方法与相关装置
CN111447457A (zh) * 2020-03-25 2020-07-24 咪咕文化科技有限公司 直播视频处理方法、装置及存储介质
CN113518249A (zh) * 2020-04-10 2021-10-19 华为技术有限公司 一种远端图像处理方法及装置
CN113518249B (zh) * 2020-04-10 2023-03-10 华为技术有限公司 一种远端图像处理方法及装置
WO2022253017A1 (zh) * 2021-06-02 2022-12-08 影石创新科技股份有限公司 无人机的控制方法及控制系统

Also Published As

Publication number Publication date
US20190246104A1 (en) 2019-08-08
WO2018077142A1 (zh) 2018-05-03

Similar Documents

Publication Publication Date Title
CN106454321A (zh) 全景视频的处理方法、装置及系统
US11671712B2 (en) Apparatus and methods for image encoding using spatially weighted encoding quality parameters
US11363240B2 (en) System and method for augmented reality multi-view telepresence
US10757423B2 (en) Apparatus and methods for compressing video content using adaptive projection selection
EP3443749B1 (en) Systems and methods for video processing and display
CN101002471B (zh) 对图像编码的方法和设备及对图像数据解码的方法和设备
CN109644279A (zh) 用于用信号通知360度视频信息的方法和系统
CN108769646A (zh) 三维视频通信方法及系统、电子装置、服务器和可读存储介质
CN108307182A (zh) 一种基于虚拟现实技术的网络交互共享体验系统和方法
CN101391147B (zh) 远程控制的机器人游戏系统
CN104364754A (zh) 信息处理设备、信息处理方法及程序
CN116134809A (zh) 用于传输3d xr媒体数据的方法和设备
CN107332977B (zh) 增强现实的方法及增强现实设备
CN102595164A (zh) 一种视频图像发送方法、装置及系统
CN104866261B (zh) 一种信息处理方法和装置
CN108632597A (zh) 三维视频通信方法及系统、电子装置和可读存储介质
WO2019048733A1 (en) TRANSMISSION OF VIDEO CONTENT BASED ON FEEDBACK
CN107371012A (zh) 一种vr图像处理和显示方法及装置
KR20140066547A (ko) 위치기반의 컨텐츠 제공방법 및 그 장치
CN106657977B (zh) 具有全景摄像功能的虚拟现实设备和全景视频通话方法
US20230410443A1 (en) Method and device for rendering content in mobile communication system
CN109479147B (zh) 用于时间视点间预测的方法及技术设备
CN206542523U (zh) 基于无人机的眼镜视觉系统
CN112541858A (zh) 视频图像的增强方法、装置、设备、芯片及存储介质
CN104581122A (zh) 三维图像的生成方法、装置、系统及移动终端

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170222