CN109155838A - 用于通过转码呈现视频的系统和方法 - Google Patents

用于通过转码呈现视频的系统和方法 Download PDF

Info

Publication number
CN109155838A
CN109155838A CN201680085682.8A CN201680085682A CN109155838A CN 109155838 A CN109155838 A CN 109155838A CN 201680085682 A CN201680085682 A CN 201680085682A CN 109155838 A CN109155838 A CN 109155838A
Authority
CN
China
Prior art keywords
bit stream
video
context
transcoding
imaging system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201680085682.8A
Other languages
English (en)
Inventor
白高平
梁泰文
钟文辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SZ DJI Technology Co Ltd
Shenzhen Dajiang Innovations Technology Co Ltd
Original Assignee
Shenzhen Dajiang Innovations Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Dajiang Innovations Technology Co Ltd filed Critical Shenzhen Dajiang Innovations Technology Co Ltd
Publication of CN109155838A publication Critical patent/CN109155838A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440236—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by media transcoding, e.g. video is transformed into a slideshow of still pictures, audio is converted into text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/04—Protocols for data compression, e.g. ROHC
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

一种用于支持远程装置的系统及其制造和使用方法。该系统包括与成像装置相关联的成像处理器，该成像处理器可以获得视频剪辑并对视频剪辑的视频内容转码以用远程装置呈现。该成像处理器可以从存储介质中获取视频剪辑、提取视频内容并对视频内容转码以便于将视频内容传输到远程装置。该成像处理器还通过从视频剪辑中提取或通过从另一源输入来获取视频剪辑的上下文信息。该上下文信息可以被转码或不被转码，以与转码后的视频内容合并以生成合成视频内容。该系统还包括远程装置，用于呈现复合视频内容并调整成像处理器的转码参数。该系统可以有利地简化支撑系统的结构。

Description

用于通过转码呈现视频的系统和方法
版权声明
本专利文件的公开的一部分包含受到版权保护的材料。版权所有者不反对任何人对专利文献或专利公开(如它出现在专利和商标局的专利文件或记录中)的传真复制，但在其他方面保留所有版权。
技术领域
所公开的实施例总体上涉及成像系统，更具体地但不排他地涉及用于经由远程装置呈现视频的系统和方法。
背景技术
当前可用的远程视频呈现方法要求复杂的硬件配置以支持实时解码，这导致用相机实现这些方法的成本较高。此外，解码后的YUV比特率要求高带宽，因此不便于传输和存储。
鉴于上述原因，需要由远程装置以低成本经由无线连接呈现视频剪辑的系统和方法。
发明内容
根据这里公开的第一方面，提出了一种用于支持远程呈现的方法，所述方法包括：
由成像处理器获取视频剪辑；以及
对视频剪辑的视频内容转码以通过远程装置呈现视频剪辑。
在所公开的方法的示例性实施例中，获取视频剪辑包括从存储介质加载包括视频剪辑的视频文件。
在所公开的方法的另一示例性实施例中，获取视频剪辑包括从视频剪辑中提取视频内容。
在所公开的方法的另一示例性实施例中，转码包括对视频剪辑的视频内容解码以生成第一视频比特流。
在所公开的方法的另一示例性实施例中，转码包括对第一视频比特流进行下变换以生成第二视频比特流。
在所公开的方法的另一示例性实施例中，对第一视频比特流进行下变换包括：减小第一视频比特流的比特率以生成第二视频比特流。
在所公开的方法的另一示例性实施例中，减小比特率包括减小视频内容的分辨率。
在所公开的方法的另一示例性实施例中，减小比特率包括减小视频内容的每秒帧速率。
在所公开的方法的另一示例性实施例中，转码包括对第二视频比特流进行编码以生成第三视频比特流。
在所公开的方法的另一示例性实施例中，编码包括用远程装置的应用(“APP”)可识别的协议对第二视频比特流进行编码。
所公开的方法的示例性实施例还包括：传输第三视频比特流以合并视频剪辑的上下文信息。
所公开的方法的示例性实施例还包括：传输上下文信息以与第三视频比特流合并。
在所公开的方法的另一示例性实施例中，传输上下文信息包括对视频剪辑的上下文信息进行解码以生成第一上下文比特流。
在所公开的方法的另一示例性实施例中，传输上下文信息包括基于第一上下文比特流来生成辅助上下文比特流。
在所公开的方法的另一示例性实施例中，传输包括对第一上下文比特流进行转码。
在所公开的方法的另一示例性实施例中，对上下文信息进行转码包括对第一上下文比特流进行下变换以生成第二上下文比特流。
在所公开的方法的另一示例性实施例中，对第一上下文比特流进行下变换包括：减小第一上下文比特流的采样率和/或第一上下文比特流的每秒比特率。
在所公开的方法的另一示例性实施例中，转码包括对第二上下文比特流进行编码以生成辅助上下文比特流。
所公开的方法的示例性实施例还包括：将第三视频比特流和辅助上下文比特流合并以生成用于传输的合成比特流。
在所公开的方法的另一示例性实施例中，合并包括对合成比特流中的第三视频比特流和辅助上下文比特流进行同步。
在所公开的方法的另一示例性实施例中，当成像处理器没有在捕获图像时，执行获取视频剪辑和/或对视频剪辑的视频内容进行转码。
所公开的方法的示例性实施例还包括经由所选的传输介质传输合成比特流。
在所公开的方法的另一示例性实施例中，传输合成比特流包括经由通用串行总线(“USB”)和/或媒体接口(“MI”)端口来传输合成比特流。
在所公开的方法的另一示例性实施例中，传输合成比特流包括向运行应用(“APP”)的远程装置传输合成比特流。
在所公开的方法的另一示例性实施例中，传输合成比特流包括经由无线通信连接和/或有线通信连接来传输合成比特流。
在所公开的方法的另一示例性实施例中，呈现包括经由远程装置呈现合成比特流。
在所公开的方法的另一示例性实施例中，呈现合成比特流包括以快进模式或快退模式呈现合成比特流。
所公开的方法的示例性实施例还包括：基于所述呈现来更新成像处理器的一个或多个配置参数。
在所公开的方法的另一示例性实施例中，成像处理器与位于无人机(“UAV”)上的成像装置相关联。
根据在此公开的另一方面，提出了一种计算机程序产品，包括用于支持将远程装置配置为执行根据所公开的方法的前述实施例中的任何一个的传输过程的指令。
根据这里公开的另一方面，提出了一种用于配置空中成像装置的系统，所述系统包括：
成像装置，操作用于：
捕获视频文件以存储到存储介质中；以及
通过转码从存储介质发送视频文件；以及
远程装置，操作用于：
接收正在传输的视频文件的内容；以及
基于接收到的内容来调整空中成像装置的配置。
根据这里公开的另一方面，提出了一种用于支持远程呈现的成像系统，所述成像系统包括：
成像处理器，操作用于：
获取视频剪辑；以及
对视频剪辑的视频内容进行转码以通过远程装置呈现视频剪辑。
所公开的系统的示例性实施例还包括用于将视频剪辑存储为视频文件的存储介质。
在所公开的系统的一个示例性实施例中，成像处理器被配置为从视频剪辑中提取视频内容。
在所公开的系统的另一示例性实施例中，成像处理器被配置为对视频剪辑的视频内容进行解码以生成第一视频比特流。
在所公开的系统的另一示例性实施例中，通过对第一视频比特流进行下变换以生成第二视频比特流，对视频剪辑转码。
在所公开的系统的另一示例性实施例中，通过减小第一视频比特流的比特率以生成第二视频比特流，对第一视频比特流进行下变换。
在所公开的系统的另一示例性实施例中，通过减小视频内容的分辨率来减小第一视频比特流的。
在所公开的系统的另一示例性实施例中，通过减小视频内容的每秒帧速率来减小第一视频比特流的比特率。
在所公开的系统的另一示例性实施例中，成像处理器被配置为对第二视频比特流进行编码以生成第三视频比特流。
在所公开的系统的另一示例性实施例中，用远程装置的应用(“APP”)可识别的协议来对第二视频比特流进行编码。
在所公开的系统的另一示例性实施例中，成像处理器被配置为传输第三视频比特流用于合并视频剪辑的上下文信息。
在所公开的系统的另一示例性实施例中，成像处理器被配置为传输用于与第三视频比特流进行合并的上下文信息。
在所公开的系统的另一示例性实施例中，成像处理器被配置为对视频剪辑的上下文信息进行解码以生成第一上下文比特流。
在所公开的系统的另一示例性实施例中，成像处理器被配置为基于第一上下文比特流来生成辅助上下文比特流。
在所公开的系统的另一示例性实施例中，成像处理器被配置为通过对第一上下文比特流进行下变换以生成第二上下文比特流，对上下文信息进行转码。
在所公开的系统的另一示例性实施例中，通过减小第一上下文比特流的采样率和/或第一上下文比特流的每秒比特率，对第一上下文比特流进行下变换。
在所公开的系统的另一示例性实施例中，成像处理器被配置为对第二上下文比特流进行编码以生成辅助上下文比特流。
在所公开的系统的另一示例性实施例中，成像处理器被配置为传输用于合并第三视频比特流的辅助上下文比特流。
在所公开的系统的另一示例性实施例中，成像处理器被配置为合并第三视频比特流和辅助上下文比特流以生成合成比特流。
在所公开的系统的另一示例性实施例中，成像处理器被配置为对合成比特流中的第三视频比特流和第二上下文比特流进行同步。
在所公开的系统的另一示例性实施例中，成像处理器被配置为当成像装置没有在捕获图像时，获取视频剪辑的视频内容和/或对视频剪辑的视频内容进行转码。
在所公开的系统的另一示例性实施例中，成像处理器被配置为经由传输介质传输合成比特流。
在所公开的系统的另一示例性实施例中，传输介质经由通用串行总线(“USB”)和/或媒体接口(“MI”)端口传输合成比特流。
在所公开的系统的另一示例性实施例中，传输介质被配置为将合成比特流传输到运行应用(“APP”)的远程装置。
在所公开的系统的另一示例性实施例中，传输介质是无线连接或有线连接。
所公开的系统的示例性实施例还包括被配置为经由APP呈现合成比特流的远程装置。
在所公开的系统的另一示例性实施例中，远程装置被配置为以快进模式或快退模式呈现合成比特流。
在所公开的系统的另一示例性实施例中，远程装置被配置为基于包含在合成比特流中的上下文信息来更新成像处理器的一个或多个配置参数。
在所公开的系统的另一示例性实施例中，成像处理器和/或存储介质位于无人机(“UAV”)上。
根据本文公开的另一方面，提出了一种用于针对远程装置处理视频的方法，包括：
经由第一通信路径传输视频的视频内容，以及
经由与所述第一通信路径分开的第二通信路径传输所述视频的上下文信息。
在所公开的方法的示例性实施例中，传输上下文信息包括传输与视频内容相关联的上下文信息。
所公开的方法的示例性实施例还包括：从存储装置获取包括视频内容的视频文件。
在所公开的方法的另一示例性实施例中，获取包括将来自存储介质的视频文件加载到成像处理器。
所公开的系统的示例性实施例还包括：提取视频文件的上下文信息。
在所公开的方法的另一示例性实施例中，提取上下文信息包括提取音频数据、字幕数据、环境数据和/或配置数据。
在所公开的方法的另一示例性实施例中，传输上下文信息包括基于上下文信息来生成辅助上下文比特流。
在所公开的方法的另一示例性实施例中，传输上下文信息包括对上下文信息进行转码。
在所公开的方法的另一示例性实施例中，对上下文信息进行转码包括对上下文信息进行解码以生成第一上下文比特流。
在所公开的方法的另一示例性实施例中，对上下文信息进行转码还包括对第一上下文比特流进行下变换以生成第二上下文比特流。
在所公开的方法的另一示例性实施例中，对第一上下文比特流进行下变换包括：减小第一上下文比特流的比特率。
在所公开的方法的另一示例性实施例中，减小比特率包括减小第二上下文比特流的每秒比特率。
在所公开的方法的另一示例性实施例中，减小比特率包括减小第二上下文比特流的采样率。
在所公开的方法的另一示例性实施例中，转码包括对第二上下文比特流进行编码以生成辅助上下文比特流。
在所公开的方法的另一示例性实施例中，编码包括利用对比特流进行压缩的协议对第二上下文比特流进行编码。
在所公开的方法的另一示例性实施例中，编码包括利用由远程装置的应用(“APP”)识别的协议进行编码以生成辅助上下文比特流。
在所公开的方法的另一示例性实施例中，传输视频内容包括从视频文件中提取视频内容。
在所公开的方法的另一示例性实施例中，传输视频内容还包括对视频内容转码以生成编码后的视频比特流。
所公开的方法的示例性实施例还包括：将编码后的视频比特流和辅助上下文比特流合并以生成合成比特流。
在所公开的方法的另一示例性实施例中，合并包括同步编码后的视频比特流和辅助上下文比特流以生成合成比特流。
在所公开的方法的另一示例性实施例中，同步编码后的视频比特流和辅助上下文比特流包括：将编码后的视频比特流的数据分组的首部信息与辅助上下文比特流的数据分组的首部信息进行匹配。
在所公开的方法的另一示例性实施例中，匹配首部信息包括匹配编码后的视频比特流的数据分组的时间戳或序列号和/或辅助上下文比特流的数据分组的时间戳或序列号。
所公开的方法的示例性实施例还包括经由显示器来呈现合成比特流。
在所公开的方法的另一示例性实施例中，呈现合成比特流包括用远程装置的APP进行呈现。
在所公开的方法的另一示例性实施例中，呈现合成比特流包括以快进模式或快退模式呈现合成比特流。
在所公开的方法的另一示例性实施例中，将成像装置定位在无人机(“UAV”)上，其中成像处理器与成像装置相关联。
所公开的方法的示例性实施例还包括将视频文件存储到位于UAV上的存储介质中。
根据在此公开的另一方面，提出了一种计算机程序产品，包括用于针对被配置为执行根据所公开的方法的前述实施例中的任何一个的传输过程的远程装置传输视频的指令。
根据这里公开的另一方面，提出了一种无人机(UAV)，包括：
一个或多个推进单元，被配置为提供提升力；
存储介质，用于存储视频文件；以及
成像装置，包括：
成像处理器，操作用于：
将捕获的视频剪辑存储到存储介质中；以及
通过分开的通信路径传输视频文件的视频内容和上下文信息。
根据本文公开的另一方面，提出了一种用于针对远程装置处理视频的成像系统，包括：
一个或多个处理器，单独地或共同地被配置为：
经由第一通信路径来传输视频内容，以及
经由与所述第一通信路径分开的第二通信路径传输上下文信息。
在所公开的系统的一个示例性实施例中，上下文信息与视频内容相关联。
在所公开的系统的另一示例性实施例中，所述一个或多个处理器被配置为获取视频文件。
在所公开的系统的另一示例性实施例中，视频文件从存储介质被加载到成像系统的一个或多个处理器。
在所公开的系统的另一示例性实施例中，所述一个或多个处理器被配置为提取视频文件的上下文信息。
在所公开的系统的另一示例性实施例中，上下文信息包括音频数据、字幕数据、环境数据和配置数据中的至少一个。
在所公开的系统的另一示例性实施例中，所述一个或多个处理器被配置为基于所述上下文信息来生成辅助上下文比特流。
在所公开的系统的另一示例性实施例中，所述一个或多个处理器被配置为对上下文信息进行转码。
在所公开的系统的另一示例性实施例中，所述一个或多个处理器被配置为对所述上下文信息进行解码以生成第一上下文比特流。
在所公开的系统的另一示例性实施例中，所述一个或多个处理器被配置为对第一上下文比特流进行下变换以生成第二上下文比特流。
在所公开的系统的另一示例性实施例中，所述一个或多个处理器被配置为通过减小第一上下文比特流的比特率，对第一上下文比特流进行下变换。
在所公开的系统的另一示例性实施例中，所述一个或多个处理器被配置为通过减小第二上下文比特流的每秒比特率来减小比特率。
在所公开的系统的另一示例性实施例中，所述一个或多个处理器被配置为通过减小第二上下文比特流的采样率来减小比特率。
在所公开的系统的另一示例性实施例中，所述一个或多个处理器被配置为对第二上下文比特流进行编码以生成辅助上下文比特流。
在所公开的系统的另一示例性实施例中，用对比特流进行压缩的协议对第二上下文比特流进行编码。
所公开的系统的示例性实施例还包括用由远程装置的应用(“APP”)识别的协议对第二上下文比特流进行编码以生成辅助上下文比特流。
在所公开的系统的另一示例性实施例中，所述一个或多个处理器被配置为从视频文件提取视频内容。
在所公开的系统的另一示例性实施例中，所述一个或多个处理器被配置为对视频内容转码以生成编码后的视频比特流。
在所公开的系统的另一示例性实施例中，所述一个或多个处理器被配置为将编码后的视频比特流与辅助上下文比特流组合。
在所公开的系统的另一示例性实施例中，以同步的方式将编码后的视频比特流与辅助上下文比特流合并以生成合成比特流。
在所公开的系统的另一示例性实施例中，所述一个或多个处理器被配置为通过将编码后的视频比特流的数据分组的首部信息与辅助上下文比特流的数据分组的首部信息进行匹配，同步编码后的视频比特流和辅助上下文比特流。
在所公开的系统的另一示例性实施例中，将所述首部信息与编码后的视频比特流的数据分组的时间戳或序列号以及辅助上下文比特流的数据分组的时间戳或序列号进行匹配。
在所公开的系统的另一示例性实施例中，经由显示器呈现合成比特流。
在所公开的系统的另一示例性实施例中，显示器是远程装置的APP。
在所公开的系统的另一示例性实施例中，显示器被配置为以快进模式或快退模式呈现合成比特流。
在所公开的系统的另一示例性实施例中，所述一个或多个处理器位于无人机(“UAV”)上。
在所公开的系统的另一示例性实施例中，存储介质位于UAV上。
根据这里公开的另一方面，提出了一种用于支持远程视频显示的方法，所述方法包括：
接收正在发送的视频文件的内容；以及
基于接收到的内容来调整成像处理器的配置。
在所公开的方法的示例性实施例中，接收内容包括接收视频文件的视频内容和/或接收视频文件的上下文信息。
在所公开的方法的另一示例性实施例中，接收视频内容包括接收转码后的视频内容和/或转码后的上下文信息。
在所公开的方法的另一示例性实施例中，对视频内容和/或上下文信息转码以传输视频文件。
在所公开的方法的另一示例性实施例中，对视频内容进行转码包括对视频内容转码以生成视频比特流。
在所公开的方法的另一示例性实施例中，对上下文信息进行转码包括对上下文信息进行转码以生成上下文比特流。
在所公开的方法的另一示例性实施例中，对上下文信息进行转码包括旁路上下文信息的转码以生成上下文比特流。
所公开的方法的示例性实施例还包括：将视频比特流和上下文比特流合并以生成合成比特流。
在所公开的方法的另一示例性实施例中，合并包括同步视频比特流和上下文比特流以生成合成比特流。
在所公开的方法的另一示例性实施例中，接收视频文件包括向远程装置传输合成比特流。
在所公开的方法的另一示例性实施例中，传输合成比特流包括经由无线连接或有线连接将合成比特流传输到远程装置。
在所公开的方法的另一示例性实施例中，调整配置包括基于包含在合成比特流中的接收到的上下文信息，更新成像处理器的一个或多个配置参数。
所公开的方法的示例性实施例还包括经由远程装置的应用(“APP”)来呈现合成比特流。
在所公开的方法的另一示例性实施例中，调整配置包括基于所呈现的内容，更新成像处理器的一个或多个配置参数。
在所公开的方法的另一示例性实施例中，更新配置参数包括更新成像处理器的转码参数。
在所公开的方法的另一示例性实施例中，更新转码参数包括改变转码的分辨率、每秒帧数、颜色和每秒比特率中的至少一个。
在所公开的方法的另一示例性实施例中，更新转码参数包括改变上下文比特流的每秒比特率、压缩率、压缩格式或采样率的至少一个。
在所公开的方法的另一示例性实施例中，成像处理器位于无人机(“UAV”)上。
根据本文公开的另一方面，提出了一种计算机程序产品，包括用于配置成像处理器的指令，其中远程装置被配置为执行根据所公开的方法的前述实施例中的任何一个的传输过程。
根据这里公开的另一方面，提出了一种用于支持远程视频显示的系统，所述系统包括：
成像装置，包括：
成像处理器，通过转码来发送视频文件；以及
远程装置，操作用于：
接收正在发送的视频文件的内容，以及
基于接收到的内容来调整成像处理器的配置。
在所公开的系统的示例性实施例中，远程装置被配置为接收视频文件的视频内容和/或视频文件的上下文信息。
所公开的系统的示例性实施例还包括成像装置，被配置为：
捕获用于存储到视频文件中的视频；以及
对视频内容和/或上下文信息进行转码。
在所公开的系统的示例性实施例中，成像装置包括一个或多个处理器，被配置为：
处理所捕获的视频，以存储在视频文件中；以及
对视频内容和/或上下文信息转码，以传输视频文件。
在所公开的系统的示例性实施例中，所述一个或多个处理器在不同的时间期间进行捕获或转码。
在所公开的系统的示例性实施例中，所述一个或多个处理器被配置为对视频内容进行转码以生成视频比特流。
在所公开的系统的示例性实施例中，所述一个或多个处理器被配置为对上下文信息进行转码以生成上下文比特流。
在所公开的系统的示例性实施例中，所述一个或一个以上处理器被配置为旁路所述上下文信息以生成上下文比特流。
在所公开的系统的示例性实施例中，所述一个或多个处理器被配置为组合视频比特流和上下文比特流以生成合成比特流。
在所公开的系统的示例性实施例中，所述一个或多个处理器被配置为同步所述视频比特流和所述上下文比特流以生成合成比特流。
在所公开的系统的示例性实施例中，合成比特流被传输到远程装置。
在所公开的系统的示例性实施例中，合成比特流经由无线连接或有线连接被传输到远程装置。
所公开的系统的示例性实施例还包括远程装置，远程装置被配置为：通过基于包含在合成比特流内的接收的上下文信息来更新一个或多个处理器的一个或多个配置参数，调整配置。
在所公开的系统的示例性实施例中，远程装置被配置为经由应用(“APP”)呈现合成比特流。
在所公开的系统的示例性实施例中，远程装置被配置为基于所呈现的内容来更新一个或多个处理器的配置参数。
在所公开的系统的示例性实施例中，配置参数包括一个或多个处理器的转码参数。
在所公开的系统的一个示例性实施例中，转码参数包括转码的分辨率、每秒帧数、颜色和每秒比特率中的至少一个。
在所公开的系统的一个示例性实施例中，转码参数包括上下文比特流的每秒比特率、压缩率、压缩格式或采样率中的至少一个。
在所公开的系统的一个示例性实施例中，成像处理器位于无人机(“UAV”)上。
所述系统可以有利地利用成像处理器的现有性能，例如成像装置的ISP的性能，以通过对视频剪辑的视频内容和/或上下文信息转码来促进视频剪辑的传输。成像处理器可以在成像装置没有拍摄图像时进行传输。这样的系统可以使用成像处理器的现有性能来减小传输的带宽需求，从而缓解通过无线连接传输视频剪辑时的瓶颈问题。
附图说明
图1是示出了包括成像装置、传输介质和远程装置的成像系统的实施例的示例性框图，其中所述成像装置具有用于对视频剪辑转码的图像信号处理器(“ISP”)，并且远程装置用于呈现视频剪辑。
图2是示出了经由远程装置呈现视频剪辑的方法的实施例的示例性顶级流程图，其中获取视频剪辑并对视频剪辑的视频内容转码。
图3是示出了图2的方法的备选实施例的示例性流程图，其中通过加载视频文件并从视频剪辑中提取视频内容来获取视频剪辑。
图4是示出了图2的方法的另一备选实施例的另一示例流程图，其中通过对视频内容进行解码、下变换和编码来对其转码。
图5是示出了图4的方法的另一备选实施例的示例性流程图，其中通过减小分辨率和/或减小每秒帧速率，对视频内容进行下变换。
图6是示出了图2的方法的一个备选实施例的另一示例流程图，其中传输转码后的视频内容以便与上下文信息进行合并。
图7是示出了图6的方法的一个备选实施例的另一示例流程图，其中将视频内容和上下文信息进行合并以生成合成视频内容。
图8是示出了图7的方法的一个备选实施例的另一示例流程图，其中对视频剪辑的上下文信息转码并传输以便与视频内容进行合并。
图9是示出了图8的方法的另一备选实施例的另一示例流程图，其中当合并视频内容和上下文信息时使之同步。
图10是示出了图2的方法的另一备选实施例的示例流程图，其中传输并呈现所述合成视频内容。
图11是示出了图2的方法的另一备选实施例的另一示例性流程图，其中基于所呈现的合成视频内容来更新转码配置。
图12是示出了包括用于捕获视频剪辑的成像装置和用于存储视频剪辑的存储介质的成像系统的实施例的示例性顶级框图。
图13是示出了图12的成像系统的备选实施例的示例性框图，其中所述视频剪辑被传送给远程装置以供呈现。
图14是图示了图12的成像系统的另一备选实施例的另一示例性框图，其中成像系统包括用于分开处理视频内容和上下文信息的ISP以及用于合并视频内容与上下文信息以便传输到远程装置的合并器。
图15是图示了图14的成像系统的备选实施例的另一示例性框图，其中上下文信息处理模块对上下文信息进行解码、下变换和编码。
图16是图示了图14的系统的另一备选实施例的另一示例性框图，其中上下文信息处理模块使用旁路以合并所述上下文信息与所述转码后的视频内容。
图17是示出了图14的系统的另一备选实施例的示例性框图，其中存储介质独立于视频内容源提供上下文信息，并且其中从成像装置外部合并视频内容和上下文信息。
图18是示出了图12的成像系统的实施例的示例性示意图，其中所述成像装置位于移动平台上。
应该注意的是，附图并未按比例绘制，并且出于说明目的，在整个附图中类似结构或功能的元件通常用类似的附图标记来表示。还应该注意的是，附图只是为了便于描述优选实施例。附图没有示出所描述的实施例的每个方面，并且不限制本公开的范围。
具体实施方式
在当前可用的呈现系统中(例如用无人机(“UAV”)系统和其他遥控相机系统的空中成像)，通常应用无线传输来传输视频。但是，这样的系统由于传输带宽不足而容易受到传输瓶颈的影响。尽管一些系统在传输视频之前通过经由HDMI或BT 656端口实现比特率减小来尝试减轻瓶颈问题，但是这样的系统需要额外的中央处理单元(“CPU”)，导致更大的复杂性和更高的实施成本。
由于当前可用的远程呈现解决方案需要昂贵的硬件并且可能导致通信瓶颈，所以用于在成像装置的可用资源的辅助下呈现视频剪辑的系统和方法有利地可以缓解通信瓶颈并提供用于提供针对移动平台(诸如，无人机(“UAV”))的远程呈现功能的基础。根据一个实施例，可以通过如图1所示的示例性系统200来实现该结果。
转到图1，成像系统200被图示为包括成像装置800、传输介质700和远程装置900。成像装置800可以与成像处理器相关联，成像处理器可以包括单独或共同操作的一个或多个处理器。在图1中，成像处理器被示出为图像信号处理器(“ISP”)320。在图1中，ISP 320可以在811从存储介质600读取视频剪辑的视频内容。下面将参考图14和17提供关于存储介质600的附加详情。ISP 320可以通过任何常规的方式从存储介质600读取视频剪辑的视频内容。
尽管仅出于说明的目的示出和描述为从存储介质600读取视频内容，但是ISP 320可以从任何其他合适的源读取视频内容，或通过从视频剪辑中提取视频内容来获取视频内容。
ISP 320可以包括用于对视频内容进行转码的转码模块830。转码模块830可以是由ISP 320执行的软件程序，或可以包括硬件、软件、固件或其组合。转码模块830可以经由参考图14和图17所示和所述的步骤来对视频内容进行转码。视频内容在转码模块830之后比在转码模块830之前具有更低的比特率，由此，当进行传输时可以节省带宽。
在一些实施例中，在821处，ISP 320可以从存储介质600读取视频剪辑的上下文信息。ISP 320可以通过任何常规的方式从存储介质600读取视频剪辑的上下文信息。备选地和/或附加地，ISP 320可以从任何其他合适的源读取上下文信息，或通过从视频剪辑中提取上下文信息来获取上下文信息。
ISP 320可以包括可以是由ISP 320执行的软件程序的合并器820，或可以包括硬件、软件、固件或其组合。合并器820可以将转码后的视频内容与上下文信息合并以生成组合后的视频比特流。关于合并器820和组合后的视频比特流的附加细节将在下面参照图14提供。
组合后的视频比特流可以经由传输介质700传输到用于呈现视频剪辑的移动装置900。尽管出于说明的目的而示出和描述为对视频内容进行转码，但ISP 320可以可选地对上下文信息进行转码。由于视频内容的比特率减小和/或上下文信息的比特率减小，系统200可以有利地缓解传输介质700的通信瓶颈。
转到图2，方法100可以使得视频剪辑能够经由远程装置900呈现。该视频剪辑被示为由ISP 320获取并转码。在图2中，在120处，ISP 320可以检索或以其他方式获取视频剪辑。ISP 320可以与具有捕获静止图像和/或运动图像(或视频剪辑)能力的任何类型的成像装置800(图12中所示)相关联。ISP 320优选地具有图像处理能力。示例性的图像处理能力可以包括但不限于解码、编码和/或下变换功能。在一些实施例中，ISP 320可以在不捕获图像时获取视频剪辑。在其他一些实施例中，无论ISP 320所关联的成像装置800是否正在捕获图像，ISP 320都可以获取视频剪辑。
视频剪辑可以包含在由成像装置800捕获的视频文件和/或从任何其他源获得的(例如由另一成像装置800捕获的)视频文件中。视频文件可以以与成像装置800相兼容的格式存在诸如存储介质600(图9所示)的存储装置中。视频剪辑可以包括视频内容和/或与视频内容相关联的上下文信息。这样的上下文信息可以包括但不限于音频内容和/或元数据。元数据可以包括但不限于自动收集的视频元数据(诸如，光圈、快门速度、位置坐标、全球定位系统(“GPS”)坐标等)以及手写信息(例如，对话或会话的抄本以及其他文字描述)。在一些实施例中，视频内容可以被包含在视频文件中。上下文信息可以至少部分地包括在视频文件中和/或包括在一些其他资源中。例如，可以从视频内容中分离地捕获和/或存储音频数据和/或字幕。
为了经由远程装置900呈现视频剪辑的目的，可以将视频剪辑转换成可与远程装置900相兼容的格式，且可以将视频剪辑传输到远程装置900。ISP 320优选地具有强大的图像处理能力，并且可以利用这些能力来转换视频剪辑。例如，如果ISP 320包括强大的编码和/或解码能力，则ISP 320可以有利地通过解码和/或编码能力将视频剪辑的格式转换成可与远程装置900相兼容的格式。ISP 320还可以减小视频剪辑的大小，以便在对视频剪辑进行解码和编码的同时传输该视频剪辑。
如图2所示，视频剪辑的视频内容可以在150被转码。可以对视频剪辑的视频内容转码，例如，以缩小视频剪辑的大小以便于传输视频剪辑。如上所述，视频剪辑可以由两个部分组成：视频内容以及视频内容的上下文信息。在包括两个部分的一些实施例中，视频内容可以包括比上下文信息多得多的容量。因此，缩小视频内容的大小可以部分地和/或全部地减小用于传输视频剪辑的比特率。在一些实施例中，可以分开处理视频内容和上下文信息，并且仅对视频内容转码以便减小视频剪辑的比特率。对视频内容转码例如可以包括对视频内容进行解码、下变换(downscaling)和/或编码操作。
可以经由远程装置900呈现转码后的视频内容和/或上下文信息。远程装置900可以是安装用于呈现视频内容和/或上下文信息的应用(“APP”)的任何类型的装置。这种装置可以包括但不限于任何远程装置，诸如，智能电话、个人数字助理(或PDA)、笔记本或可以执行APP并可以呈现视频内容和/或上下文信息的任何其他类型的计算装置。APP可以为用户提供优化的用户界面，其可以向用户呈现更好的操作体验。在一些实施例中，远程装置900可以以多种呈现模式之一来呈现视频内容和/或上下文信息，包括但不限于快进模式和/或快退模式。
尽管仅出于说明的目的而仅示出和描述了对视频内容的转码，但是可以对上下文信息进行转码以减小视频剪辑的大小以促进传输。
图3示出了方法100的备选实施例。转到图3，可以通过在122处从存储介质600加载视频文件来获取图2的视频剪辑，并且在124处可以从视频剪辑中提取视频内容。在图3中，在122处，可以通过从存储介质600读取包含视频剪辑的视频文件，将视频剪辑加载到ISP320(图2中示出)。可以以任何常规方式读取视频文件，包括部分地和/或全部地读取该文件，和/或读取该视频文件作为比特流。
在124处，可以从视频剪辑中提取视频内容。可以在读取视频文件的同时执行从视频剪辑中提取视频内容。备选地和/或附加地，可以在部分地和/或全部地将视频剪辑读入ISP 320中时执行视频内容的提取。可以以任何合适的方式执行视频内容的提取。提取后的视频内容可以是ISP 320可识别的编码格式。
尽管出于说明的目的而示出和描述为视频剪辑是从存储介质600加载的，但是可以从其他源(例如，从用于捕获视频剪辑的另一成像装置800)获取该视频剪辑。
图4示出了示例性方法100的备选实施例。转到图4，图2的视频内容被示出为通过进行解码、下变换和编码而转码。如本文所示和描述地，由ISP 320获取的视频剪辑可以存储在存储介质700(图14中示出)上的视频文件中。可以根据公开协议和/或专有协议，以编码和/或压缩格式存储视频剪辑，以节省存储介质700中的存储空间，同时保持视频剪辑的感知质量。示例性公开协议可以包括但不限于MPEG-4部分10协议或高级视频编码(“H.264”)协议。
在图4中，在152处，可以对视频内容进行解码以生成第一视频比特流211。有利地，例如，可以当正读取视频内容和/或正提取视频内容时对视频内容进行解码。第一视频比特流211可以是恢复后的原始视频数据的比特流。如本文所述，ISP 320优选地具有对视频剪辑或视频剪辑的视频内容编码和/或解码的强大能力。因此，可以由ISP 320(具体地，经由ISP 320)对视频剪辑进行解码。
第一视频比特流211可以具有高比特率。例如，H.264协议的高清1080p视频的比特率可以为5000kbps，标准清晰度480p视频的比特率可以为2500kbps，且低清晰度360p的比特率可以为1200kbps。无线连接可能是用于传输具有如此高比特率的视频剪辑的瓶颈。因此，在一些实施例中，可以在对视频剪辑进行解码的同时减小视频剪辑的比特率。
在154处，在对视频剪辑的视频内容进行解码以生成第一视频比特流211之后，第一视频比特流211可以被下变换以减小第一视频比特流211的比特率或数据大小，从而生成第二视频比特流212。在一些实施例中，可以通过例如减小视频内容的分辨率或减小视频内容的每秒帧速率，对第一视频比特流211进行下变换。例如，第二视频比特流212的比特率可以比第一视频比特流211的比特率小几倍。作为示例性示例，从高清1080p视频到低清晰度360p视频的减小可以将比特率从5000kbps减小到1200kbps。类似地，每秒帧速率的减小可以导致视频剪辑的比特率的线性减小。
尽管出于说明的目的而示出和描述为在视频内容的编码之后对视频内容进行下变换，但是可以在任何合适的时刻执行下变换步骤154，例如，在正执行解码步骤152的同时。
在一些实施例中，比特率减小可以经由某些转码参数(诸如，分辨率的减小率和/或每秒帧速率的减小率)来配置。可以通过这种转码参数调整视频呈现结果的质量和/或连续性。在其他一些实施例中，当以快进模式或快退模式呈现视频时，可以调整转码参数。
可以在156处对下变换后的第二视频比特流212编码，以生成可以进一步促进视频剪辑的传输的第三视频比特流213。可以根据远程装置900的视频观看APP(图13中示出)可识别的协议来对第二视频比特流213编码。尽管出于说明的目的而示出和描述为仅使用APP来呈现视频剪辑，但是可以经由任何合适的设备呈现该视频剪辑。下面将参照图14来讨论关于呈现装置的附加详情。
图5示出了示例性方法100的备选实施例。转向图5，可以通过减小第一视频比特流211的分辨率或减小每秒帧速率来对视频剪辑的视频内容进行下变换。如图5所示，可以通过在131处减小第一视频比特流211的分辨率，或在132处减小第一视频比特流211的每秒帧速率，来减小第一视频比特流211的比特率。
在131处，可以通过降低第一视频比特流211的分辨率来减小第一视频比特流211的比特率。数字视频剪辑的分辨率(也称为呈现分辨率)是包含在视频剪辑中的每个帧的区别像素的数量。分辨率可以表示为可以在帧中呈现的每个维度中的预定像素数量，其可以表示为以像素为单位的宽乘高。作为示例性示例，高清晰度视频可以具有1024×768的分辨率，这意味着帧的宽度可以是1024个像素且帧的高度可以是768个像素。出于呈现视频剪辑的目的，可以将分辨率减小到例如320×240，以牺牲图像质量为代价。
可以以任何常规的方式执行分辨率的减小。第一视频比特流211的分辨率的减小可以导致第一视频比特流211的比特率的减小。在备选实施例中，可以用作为转码参数的一部分的分辨率参数集来调整分辨率减小。备选地和/或附加地，可以以手动或自动方式来调整任一方向和/或两个方向上的减小率。
在132处，可以通过降低每秒帧速率来减小第一视频比特流211的比特率。每秒帧速率(也被称为帧速率或帧频率)是成像装置可以呈现连续帧的频率。例如，视频剪辑可以具有20FPS(帧每秒)到90FPS的示例性每秒帧速率，其可以被减小到例如10FPS到30FPS。
可以以任何常规方式降低每秒帧速率。类似分辨率减小，第一视频比特流211的每秒帧速率的减小可以导致第一视频比特流211的比特率的减小。在一个备选实施例中，作为转码参数的一部分，可以以手动或自动方式用每秒帧参数集来调整每秒帧速率的减小。
尽管出于说明的目的而示出和描述为通过降低分辨率或每秒帧速率来减小比特率，但是也可以通过减小分辨率和每秒帧速率的组合来减小第一视频比特流211的比特率。备选地和/或附加地，可以应用用于减小第一视频比特流211的比特率的任何其他方法，例如，任何可应用的压缩方法。
图6示出了示例性方法100的备选实施例。转到图6，可以传输转码后的视频内容以与其他内容合并。在一些实施例中，其他内容可以是视频剪辑的上下文信息，其可以被存储为视频剪辑的一部分或从其它源获取。转码后的视频内容可以是第三视频比特流213的格式。
如图6所示，可以在160处传输第三视频比特流213以与上下文信息合并。第三视频比特流213可以在ISP 320处和/或与其相邻的位置处与上下文信息合并。在一些实施例中，第三视频比特流213和上下文信息可以在ISP 320处合并，合并后的比特流(例如，合成比特流411)可以经由传输介质700(图14整体示出)传输到远程装置900。传输介质700可以是能够执行传输的任何类型的介质，包括但不限于有线连接、无线连接、例如互联网的任何类型的网络等。
在备选实施例中，第三视频比特流213和上下文信息可以在单独的通信信道中从ISP 320传输到远程装置900。在备选实施例中，可以利用不同于ISP 320的选定设备(未示出)合并第三视频比特流213和上下文信息。
可以根据公开协议或专有协议来传输第三视频比特流213。这样的协议可以包括但不限于实时消息传输协议(“RTMP”)协议或实时流传输协议(“RTSP”)协议或任何合适的专有传输协议。
图7示出了示例性方法100的备选实施例。转向图7，第三比特流213和辅助上下文比特流313可以被合并以生成合成比特流411。如图7所示，可以在160处传输第三视频比特流213以与辅助上下文比特流313合并。如这里所示出和描述地，可以通过对视频剪辑的视频内容转码来获取第三视频比特流213。第三视频比特流213可以具有与辅助上下文比特流313的合并相兼容的格式。
在130处，可以传输辅助上下文比特流313以与第三视频比特流213合并。辅助上下文比特流313可以表示视频剪辑的上下文信息，并且可以是通过对上下文信息进行转码或通过直接传输上下文信息来获取的。在170处，通过合并诸如传输流分组编辑器(“TSPE”)等的任何适用比特流工具来创建合成比特流411。
在170处，可以手动或自动地触发所述合并。在成像装置800被布置在UAV 901(图18中共同示出)或任何其他类型的移动平台上的配置中，可以在UAV 901上或通过地面设备执行第三视频比特流213和辅助上下文比特流313的合并。尽管出于说明目的而示出和描述了所述合并可以是手动或自动触发的，但是优选的是整个过程是可以被控制的和/或以自动方式操作的。
图8示出了方法100的备选实施例。转到图8，可以在130处对视频剪辑的上下文信息进行转码和传输，以与第三视频比特流213合并。在图8中，可以在161处提取视频剪辑的上下文信息以创建第一上下文比特流311。可以通过任何常规的方式来提取上下文信息。尽管出于说明的目的而示出并描述为从视频剪辑中提取上下文信息，但是也可以从其他源获取上下文信息，例如，通过用键盘手动输入字幕或通过自动收集成像数据等。
在163处，可以对第一上下文比特流311转码以创建第二上下文比特流312。可以通过减小第一上下文比特流311的比特率，以参考图2-4示出并描述的相似方式来对第一上下文比特流311进行转码。可以根据视频内容的比特率的减小来执行对第一上下文比特流311的比特率的减小。例如，当应用每秒帧速率的减小时，第一上下文比特流311的比特率的减小可以遵循视频内容的减小的相应减小率。
在165处，可以通过对第二上下文比特流312编码来生成辅助上下文比特流313。辅助上下文比特流313可以被传输到辅助上下文比特流313可以遇到第三视频比特流213(图6中示出)的位置，以便与第三视频比特流213合并。
尽管出于说明的目的而示出并描述为应用类似的方法来减小第一上下文比特流311的比特率，但是可以通过其他可应用的方法来减小第一上下文比特流311的比特率，例如，从上下文信息中去除不必要的信息。尽管出于说明的目的而示出和描述为对第一上下文比特流311转码，然而在一些实施例中，可以可选地在163处传输上下文信息以便与第三视频比特流213直接合并，从而对第一上下文比特流311转码。
图9示出了方法100的备选实施例。转向图9，在170处，视频剪辑的视频内容和上下文信息可以在被合并时进行同步。如参照图8示出和描述地，在172处，视频内容可以是第三视频比特流213的形式，且上下文信息可以是辅助上下文比特流313的形式。第三视频比特流213和辅助上下文比特流313都可以具有特定类型的匹配标记，诸如，用于彼此之间进行匹配的时间戳。
第三视频比特流213的时间戳可以是表示时间(例如，记录视频剪辑的时间)的字符序列。时间戳可以沿着第三视频比特流213均匀地或不均匀地分布，以确保与辅助上下文比特流313的满意匹配。为了本公开的目的，时间戳可以是绝对时间戳或相对时间戳。备选地和/或附加地，辅助上下文比特流313的时间戳可以以与第三视频比特流213的时间戳相同或不同的方式分布，以确保与第三视频比特流213的满意匹配。
例如，在172处，可以通过将第三视频比特流213的时间戳与辅助上下文比特流313的时间戳进行匹配，对第三视频比特流213和辅助上下文比特流313进行同步。在175处，可以以参考图7的合成比特流411示出和描述的类似方式将第三视频比特流213和辅助上下文比特流313的匹配部分进行组合(或合并)，以形成合成比特流411。
尽管出于说明的目的而示出并描述为使用时间戳，但是第三视频比特流213和辅助上下文比特流313可以与诸如分组标签的任何其他合适形式的匹配标签同步。
图10示出了示例性方法100的另一备选实施例。转向图10，可以在160、130处传输第三视频比特流213和辅助比特流313，以在170处合并视频内容和上下文信息以生成合成比特流411。在180处，可以将在170处生成的合成比特流411传输到远程装置900以供呈现。在图10中，在170处，可以将在160处传输的第三比特流213和在130处传输的辅助上下文比特流313合并以生成合成比特流411。换言之，合成比特流411可以包含视频内容和上下文信息。
在180处，可以经由诸如有线通信连接、无线通信连接、网络连接等的任何传输介质700(图14中示出)将合成比特流411传输到远程装置900。可以根据公开协议或专有协议(包括但不限于实时消息传输协议(“RTMP”)协议或实时流传输协议(“RTSP”)协议、任何合适的专有传输协议等)来传输合成比特流411。
远程装置900可以运行能够呈现合成比特流411的视频应用(“APP”)。APP可以为用户提供优化的用户界面，其可以向用户呈现更好的操作体验。在一些实施例中，远程装置900可以以快进模式和/或快退模式呈现合成比特流411。远程装置900可以是智能手机、笔记本等。这种APP可以包括任何应用，包括但不限于BS播放器、MX播放器、Dice播放器等。在210处，可以将合成比特流411呈现给能够更新ISP 320的用于转码的配置设置的用户(未知)。在一些实施例中，可以根据远程装置900的操作来更新该配置设置。
尽管出于说明的目的而示出和描述为呈现用于更新配置的合成比特流411，但是可以仅基于上下文信息来更新配置，和/或可以基于上下文信息以自动方式执行该处理。
图11示出了示例性方法100的另一备选实施例。转向图11，可以基于所呈现的合成视频内容来更新转码配置。在图11中，在190处，可以经由例如远程装置900(图14中示出)呈现合成比特流411。如这里示出和描述地，在210处，所呈现的信息可以用于更新用于对视频内容和/或上下文信息进行转码的配置。
用于转码的配置可以包括但不限于分辨率减小率和/或针对每秒帧速率的减小率。可以在221处基于所呈现的信息的分辨率质量来调整分辨率减小率。例如，当分辨率质量不满意时，可以减小分辨率减小率，且反之亦然。类似地，在222处，可以基于所呈现的信息和/或实时呈现操作(例如，快进操作或快退操作)的连续性，调整每秒帧速率的减小率。例如，当所呈现的信息的连续性不令人满意时，可以减小每秒帧速率的减小率，反之亦然。
可以经由安装在远程装置900上的另一APP或经由诸如可以控制成像装置800和/或UAV 901(如图18所示)的控制器的其他设备来更新配置。尽管出于说明的目的而示出和描述为调整针对视频内容的转码配置，但是也可以基于所呈现的信息来更新上下文信息的处理配置，例如，在一些实施例中，可以打开或关闭对上下文信息的转码。
图12示出了成像系统200的示例性实施例。参考图12，成像系统200包括成像装置800和存储介质600。成像系统200优选地可以被配置为执行上面参照图1-10讨论的方法100。如图12所示，成像装置800可以与成像处理器相关联，成像处理器可以包括单独或共同操作的一个或多个处理器。在图12中，成像处理器被示出为图像信号处理器(“ISP”)320。可以将ISP 320设置为与存储介质600通信。成像装置800可以捕获视频剪辑以便存储到存储介质600中。成像装置800可以包括具有捕获静止图像或运动图像(或视频剪辑)的能力的任何类型的成像装置，包括但不限于自然光相机、激光相机、红外相机、超声相机等。。
成像装置800被示出为包括传感器310和ISP 320。传感器310可以适用于捕获可以形成视频剪辑的图像。传感器310可以捕获图像并将图像作为原始视频数据315传输到ISP320。ISP 320可以包括用于将原始视频数据315编码成比特流335的编码器330。编码器330可以与ISP 320分离，和/或如图12所示，可以至少部分地与ISP 320集成。编码后的比特流335可以被存储在存储介质600中，成为包含代表编码后的比特流335的视频剪辑的视频文件。
由成像装置800捕获的视频剪辑通常可以是高分辨率的。因此，编码器330可以根据能够处理高分辨率图像数据的协议(诸如，MPEG-4部分10、高级视频编码(“H.264”)或高效视频编码(HEVC)标准下的任何协议，包括但不限于MPEG-H部分2和ITU-T H.265等)来对视频剪辑进行编码。如本文示出和描述地，在一些实施例中，ISP 320可以在编码和/或解码视频剪辑方面具有强大的能力。
编码后的比特流335可以被存储到存储介质600中。存储介质600可以以任何方式被附接到成像装置800或与成像装置800相关联。存储介质600可以是能够由成像装置800访问的任何类型的存储介质，包括但不限于，安全数字卡(“SD”)、嵌入式多媒体卡(“eMMC”)、固态驱动器(“SSD”)、USB盘或任何其他类型的移动盘等。存储介质600可以具有足够的存储容量和/或足够的速度来存储视频剪辑并用于由成像装置800访问视频剪辑。
尽管出于说明的目的而示出和描述为包括编码器，但是编码器330可以包括ISP320中运行的软件模块和/或软件程序，或可以包括硬件、软件、固件或其组合。
图13示出了装置200的另一示例性实施例。转到图13，存储的视频剪辑可以从存储介质600传输到远程装置900以供呈现。在图13中，当成像装置800未在捕获视频剪辑时，成像装置800的ISP 320可以用于促进传输所存储的视频剪辑。
由所述成像装置800捕获的或存储在存储介质600中的来自另一源的视频剪辑可以由与成像装置800相关联的ISP 320获取，作为编码后的视频内容702。ISP 320可以包括能够对视频剪辑的内容进行解码的解码器420。换言之，解码器420可以至少部分地与成像装置800的ISP 320集成。解码后的内容可以作为解码后的视频比特流422被传递给另一处理器430以供进一步处理。处理器430可以是专用图像处理器并被示出为在成像装置800的外部。成像装置800可以包括用于将解码后的内容传递给处理器430的特定端口(未示出)。特定端口可以包括但不限于高清多媒体接口(“HDMI”)端口或BT.656(也称为ITU656)接口等。
处理器430可以与能够对解码后的内容编码以生成编码后的视频比特流436的编码器435相关联。编码器435可以与处理器430分离，和/或如图13所示，可以至少部分地与处理器430集成。编码器435可以根据与安装在远程装置900上的视频应用程序(“APP”)兼容的任何协议对解码后的内容编码。根据APP的特性，这些协议可以包括但不限于第3代合作伙伴计划(“3GPP”)、运动图像专家组(“MPEG4”)、实时流传输协议(“RTSP”)、Flash Lite、Mobiclip等。
编码后的视频比特流436可以经由传输介质700被传输到远程装置900。传输介质700可以是任何类型的有线和/或无线通信连接或任何类型的网络连接。安装在远程装置900上的APP可以用于在正传输编码后的视频比特流436的同时经由编码后的视频比特流436呈现视频剪辑。在一个实施例中，远程装置900可以包括用于呈现视频剪辑的视频显示器(未示出)。
尽管出于说明的目的而示出和描述为编码器435与成像装置800相分离，但是编码器435可以至少部分地与和成像装置800相关联的ISP 320集成。
图14示出了示例性成像系统200的备选实施例。转向图14，将成像装置800示出为包括ISP 320以分别处理视频剪辑的视频内容和上下文信息。ISP 320可以对存储在存储介质600中的视频剪辑的视频内容转码，并且可以将视频内容与处理过的上下文信息合并，以传输到远程装置900。存储介质600可以是用于存储视频剪辑的任何存储装置，包括但不限于，安全数字卡(“SD”)、嵌入式多媒体卡(“eMMC”)、固态驱动器(“SSD”)、USB盘或任何其他类型的移动盘等。存储介质600可以包括能够由[SP 320访问的任何存储介质。
视频剪辑可以包括由成像装置800捕获的一个或多个图像，并且可以包含视频内容和上下文信息二者，诸如，音频内容和/或其他元数据。元数据可以包括但不限于自动收集的视频元数据(诸如，光圈、快门速度、位置坐标、GPS坐标等)以及手写信息(例如，对话或会话的抄本以及其他文字描述)。
存储介质600可以以上面参照图12的存储介质600所描述的方式被附接到成像装置800和/或与成像装置800通信关联。成像装置800可以是如参照图12示出和描述的任何类型的成像装置。成像装置800可以与成像处理器相关联，成像处理器可以包括单独或共同操作的一个或多个处理器，以执行本文所述的功能。如图14所示，成像处理器被示出为ISP320。成像装置800优选地可以执行多个成像功能。例如，成像装置800可以捕获静止图像或运动图像(或视频剪辑)。备选地和/或附加地，ISP 320或成像装置800可以促进传输视频剪辑，诸如存储在存储介质600中的视频剪辑。
当传输所选的视频剪辑时，ISP 320可以通过读取702从存储介质600中获取所选的视频剪辑。视频剪辑可以作为文档被部分地或全部地读入到ISP 320中，或作为比特流读入到ISP 320中。ISP 320可以执行诸如提取模块810的软件程序以将视频剪辑的视频内容与视频剪辑的上下文信息分开。视频剪辑的视频内容可以是能够被传递到解码模块815的视频内容811的形式。视频内容811可以是比特流或文件的格式。
解码模块815可以是由ISP 320执行的软件程序，或可以包括硬件、软件、固件或其组合。解码模块815可以根据预定的协议来对视频内容811解码。优选地，预定协议是用于对视频内容编码的相同协议。解码模块815可以对视频内容811解码以生成第一视频比特流211。第一视频比特流211可以被传递到下变换模块816。
下变换模块816可以是由ISP 320执行的软件程序，或可以包括硬件、软件、固件或其组合。下变换模块816可以对第一视频比特流211进行下变换以生成第二视频比特流212。下变换模块816可以通过减小第一视频比特流211的比特率和/或每秒比特率来对第一视频比特流211进行下变换。可以通过减小第一视频比特流211的分辨率和/或通过减小第一视频比特流211的采样率或每秒帧速率来减小第一视频比特流211的比特率。第二视频比特流212可以被传递给编码模块817。
编码模块817可以是由ISP 320执行的软件程序，或可以包括硬件、软件、固件或其组合。编码模块817可以对第二视频比特流212编码以生成第三视频比特流213。编码模块817可以根据可与远程装置900和/或远程装置900上运行的APP兼容的协议来对第二视频比特流212编码。这样的协议可以包括但不限于第3代合作伙伴计划(“3GPP”)、运动图像专家组(“MPEG4”)、实时流传输协议(“RTSP”)、Flash Lite、Mo biclip等。由于下变换，第三视频比特流213可以具有比第一视频比特流211低得多的每秒比特率。第三视频比特流213可以被传递给合并器820。
合并器820可以是由ISP 320执行的软件程序，或可以包括硬件、软件、固件或其组合。合并器820可以将视频剪辑的第三视频比特流213与辅助上下文比特流313形式的上下文信息合并以生成合成比特流411。当合并第三视频比特流213与辅助上下文比特流313时，合并器820可以通过以参考图9示出和描述的方式匹配沿着两个比特流213、313分配的时间戳，来同步第三视频比特流213与辅助上下文比特流313。
尽管出于说明的目的而示出并描述为使用时间戳，但是第三视频比特流213和辅助上下文比特流313可以利用诸如分组标签的任何其他形式的匹配标签来同步。尽管出于说明的目的示出和描述为由ISP 320执行的软件程序，但是合并器820可以是独立于成像装置800的单独处理模块。
合成比特流411可以经由传输介质700被传输到远程装置900。传输介质700可以是任何类型的有线和/或无线通信连接或任何类型的网络连接。安装在远程装置900上的APP可以用于在正传输编码后的视频比特流411的同时通过呈现合成比特流411来呈现视频剪辑。
尽管出于说明的目的而示出和描述为用在远程装置900上运行的APP呈现合成比特流411，但是可以用任何合适的浏览器呈现合成比特流411，诸如，以任何硬件、固件、或硬件和固件的组合运行的任何可应用视频浏览器。
图15示出了成像系统200的备选实施例。参考图15，示出了示例性上下文信息处理模块823。上下文信息处理模块823可以按照上述方式对上下文信息进行转码。图15的上下文信息处理模块823被示出为接收上下文内容821并包括解码模块833、下变换模块835和编码模块837。在图15中，视频剪辑的上下文信息可以是上下文内容821的形式，其可以是比特流或文件。
上下文内容821可以被传递给解码模块833。解码模块833可以是由ISP 320执行的软件程序，或可以包括硬件、软件、固件或其组合。解码模块833可以根据预定的协议来对上下文内容821解码。预定协议优选地与用于对上下文信息编码的协议相同。解码模块833可以对上下文内容821解码以生成第一上下文比特流311。第一上下文比特流311可以被传递到下变换模块835。
下变换模块835可以是由ISP 320执行的软件程序，或可以包括硬件、软件、固件或其组合。下变换模块835可以对第一上下文比特流311进行下变换以生成第二上下文比特流312。下变换模块835可以例如通过减小第一上下文比特流311的每秒比特率来对第一视频比特流311进行下变换。第二上下文比特流312可以被传递到编码模块837。
编码模块837可以是由ISP 320执行的软件程序，或可以包括硬件、软件、固件或其组合。编码模块837可以对第二上下文比特流312编码以生成辅助上下文比特流313。编码模块837可以例如根据可兼容用于与第三视频比特流213(如图14所示)相组合的协议来对第二上下文比特流312编码。如参照图14示出和描述地，辅助上下文比特流313可以被传递到用于与第三视频比特流213合并的合并器820。
图16示出了示例性系统200的备选实施例。转到图16，成像系统200被示为包括具有旁路(bypass)831的上下文信息处理模块823。旁路831可以允许上下文信息绕过上下文信息处理模块823的转码模块833、835、837(如图15所示)。通过绕过转码模块833、835、837，旁路831可以使上下文信息能够与转码后的视频内容合并。如图16所示，上下文内容821可以经由旁路831被传递到合并器820(图14中所示)。由此，上下文内容821可以包括未被转码的辅助上下文比特流313。
在一些实施例中，视频内容可以包括比上下文信息更多的容量。因此，视频内容的尺寸减小可以非常有助于促进经由通信连接特别是无线通信连接进行的传输。相反，上下文信息的尺寸减小可以是不必要的。为此，上下文信息处理模块823的转码操作可以是不必要的且因此可以经由旁路831被旁路。
图17示出了示例性系统200的另一备选实施例。转向图17，存储介质600独立于视频内容源提供上下文信息。备选地和/或附加地，从成像装置800外部合并视频内容和上下文信息。在图17中，可以将视频剪辑的视频内容存储在存储介质600中。可以以参照图14的存储介质600示出和描述的方式来提供存储介质600。可以从不同信道获取上下文信息，例如从存储在存储介质600上的另一文件获取。上下文信息可以包括但不限于音频内容和/或其他元数据，其他元数据包括但不限于自动收集的视频元数据(诸如，光圈、快门速度、位置坐标、GPS坐标等)以及手写信息(例如，对话或会话的抄本以及其他文字描述)。
在图17中，可以由ISP 320获取视频剪辑的视频内容作为视频内容811。可以按照参照图14示出和描述的方式对视频内容811转码以生成第三视频比特流213。为了对视频内容811转码，成像装置800的ISP 320可以执行解码模块815来对视频内容811解码并生成第一视频比特流211。ISP 320可以执行下变换模块816以对第一视频比特流211进行下变换以生成第二视频比特流212。ISP 320可以执行编码模块817以对第二视频比特流212编码从而生成可以被传输到合并器820的第三视频比特流213。
视频剪辑的上下文信息可以被包含为与包含视频内容的文件分离并被存储在存储介质600中的文件。ISP 320可以直接从存储介质600读取上下文信息，作为上下文内容821。ISP 320可以执行上下文信息处理模块823以处理上下文内容821并生成辅助上下文比特流313，其中辅助上下文比特流313可以被传输给用于与第三视频比特流213合并的合并器820。上下文信息处理模块823可以以参考图15示出和描述的方式对上下文内容821转码，或以参照图16示出和描述的方式绕开上下文内容821。
尽管出于说明的目的而示出和描述为上下文信息被包含在存储在存储介质600中的文件内，但是可以将上下文信息存储在单独的存储介质中或从单独的源捕获，例如，来自麦克风(未示出)的音频内容或来自键盘(未示出)的字幕信息等。
如图17所示，合并器820可以是由不同于成像装置800的ISP 320的处理器430执行的程序。处理器430可以设置在移动平台901上(如图18所示)，或设置在地面装置上。当处理器430设置在地面装置中时，处理器430可以是远程装置900的一部分，即，远程装置900的处理器可以执行合并器820的功能。
如果如图17所示合并器820与远程装置900分离，则合并器820可以将第三视频比特流213与辅助上下文比特流313合并以生成合成比特流411。合成比特流411可以经由所选传输介质700被传输到远程装置900。合成比特流411可以通过远程装置900的APP以多种模式之一进行呈现，包括但不限于显示模式、快进模式和快退模式。可以基于所呈现的信息手动地或自动地调整ISP 320的至少一个参数。
尽管出于说明的目的而示出和描述为经由ISP 320将视频内容和上下文信息两者传输到合并器820，但是可以从其他源(例如，从麦克风或键盘等)向合并器820传输上下文信息。
图18示出了用于传输图14或图17的视频剪辑的系统300的实施例。转到图18，成像装置800位于可以与远程装置900通信的移动平台901上。在一个实施例中，远程装置900可以包括地面远程装置。如图18所示，移动平台901可以包括诸如UAV的航空移动平台，且可以为成像装置800提供平台以从地面上方捕获静止图像或运动图像(或视频剪辑)。
移动平台901可以包括用于向UAV提供提升力的多个推进单元，例如，螺旋桨911。移动平台901可以具有能够与成像装置800耦接的机身910。如本文示出和描述地，存储介质600(图14中所示)可以附接到成像装置800或与成像装置800通信关联。当存储介质600与成像装置800的ISP 320(图14中所示)通信关联时，存储介质600可以被设置在移动平台901上的适当位置处，例如，在主体910上或在其中。
如本文示出和描述地，合并器820可以是由成像装置800的ISP 320执行的程序，或可以由不同于ISP 320的处理器430(图17中所示)执行。在后者的情况下，处理器430可以设置在移动平台901上或设置在地面装置中。换言之，合并器820可以是由远程装置900执行的程序。在一些实施例中，第三视频比特流213和辅助上下文比特流313可以经由单独的信道被传输到远程装置900；因此，比特流213、313可以通过远程装置900合并以生成合成比特流411。
可以经由远程装置900呈现合成比特流411。所呈现的内容(特别是上下文信息)可以用作调整ISP 320的配置设置(诸如用于对视频内容和/或上下文信息进行转码的参数)的基础。可以由操作员手动执行或由远程装置900自动执行所述调整。仅出于说明的目的示出和描述了远程装置900。在一些实施例中，可以经由诸如笔记本、膝上型计算机、台式计算机等的任何合适装置来呈现合成比特流411和/或调整配置设置。
尽管出于说明的目的而示出和描述为使用合并器来合并两个比特流814、822，但是远程装置900可以仅基于上下文信息来调整用于转码的配置。
所公开的实施例存在各种修改和备选形式，并且其具体示例已经通过示例在附图中示出并且在本文进行了详细描述。然而，应该理解的是，所公开的实施例不限于所公开的特定形式或方法，相反，本公开将覆盖所有的修改、等同物和备选方案。

Claims (154)

1.一种用于支持远程呈现的方法，包括：
由成像处理器获取视频剪辑；以及
对视频剪辑的视频内容转码以通过远程装置呈现视频剪辑。
2.根据权利要求1所述的方法，其中所述获取视频剪辑包括从存储介质加载包括视频剪辑的视频文件。
3.根据权利要求1或权利要求2所述的方法，其中所述获取视频剪辑包括从视频剪辑中提取视频内容。
4.根据权利要求3所述的方法，其中所述转码包括对视频剪辑的视频内容进行解码以生成第一视频比特流。
5.根据权利要求4所述的方法，其中所述转码包括对第一视频比特流进行下变换以生成第二视频比特流。
6.根据权利要求5所述的方法，其中所述对第一视频比特流进行下变换包括：减小第一视频比特流的比特率以生成第二视频比特流。
7.根据权利要求6所述的方法，其中所述减小比特率包括减小视频内容的分辨率。
8.根据权利要求6或权利要求7所述的方法，其中所述减小比特率包括减小视频内容的每秒帧速率。
9.根据权利要求6-8中任一项所述的方法，其中所述转码包括对第二视频比特流进行编码以生成第三视频比特流。
10.根据权利要求9所述的方法，其中所述编码包括用远程装置的应用(“APP”)可识别的协议对第二视频比特流进行编码。
11.根据权利要求9或权利要求10所述的方法，还包括：传输第三视频比特流用于合并视频剪辑的上下文信息。
12.根据权利要求11所述的方法，还包括：传输上下文信息用于与第三视频比特流合并。
13.根据权利要求12所述的方法，其中所述传输上下文信息包括对视频剪辑的上下文信息进行解码以生成第一上下文比特流。
14.根据权利要求13所述的方法，其中所述传输上下文信息包括基于第一上下文比特流来生成辅助上下文比特流。
15.根据权利要求11所述的方法，其中所述传输包括对第一上下文比特流进行转码。
16.根据权利要求15所述的方法，其中所述对上下文信息进行转码包括对第一上下文比特流进行下变换以生成第二上下文比特流。
17.根据权利要求16所述的方法，其中所述对第一上下文比特流进行下变换包括：减小第一上下文比特流的采样率和/或第一上下文比特流的每秒比特率。
18.根据权利要求16或权利要求17所述的方法，其中所述转码包括对第二上下文比特流进行编码以生成辅助上下文比特流。
19.根据权利要求18所述的方法，还包括：将第三视频比特流和辅助上下文比特流合并以生成用于传输的合成比特流。
20.根据权利要求19所述的方法，其中所述合并包括对合成比特流中的第三视频比特流和辅助上下文比特流进行同步。
21.根据权利要求1-20中任一项所述的方法，其中当成像处理器没有在捕获图像时，执行所述获取视频剪辑和/或所述对视频剪辑的视频内容进行转码。
22.根据权利要求20或权利要求21所述的方法，还包括经由所选的传输介质传输合成比特流。
23.根据权利要求22所述的方法，其中所述传输合成比特流包括经由通用串行总线(“USB”)和/或媒体接口(“MI”)端口来传输合成比特流。
24.根据权利要求23所述的方法，其中所述传输合成比特流包括向运行应用(“APP”)的远程装置传输合成比特流。
25.根据权利要求24所述的方法，其中所述传输合成比特流包括经由无线通信连接和/或有线通信连接来传输合成比特流。
26.根据权利要求25所述的方法，其中所述呈现包括经由远程装置呈现所述合成比特流。
27.根据权利要求26所述的方法，其中所述呈现合成比特流包括以快进模式或快退模式呈现合成比特流。
28.根据权利要求27所述的方法，还包括：基于所述呈现来更新成像处理器的一个或多个配置参数。
29.根据权利要求1-28中任一项所述的方法，其中所述成像处理器与位于无人机(“UAV”)上的成像装置相关联。
30.一种计算机程序产品，包括用于支持将远程装置配置为执行根据权利要求1-29中任一项所述的传输过程的指令。
31.一种用于配置空中成像装置的系统，包括：
成像装置，操作用于：
捕获视频文件以存储到存储介质中；以及
通过转码从存储介质发送视频文件；以及
远程装置，操作用于：
接收所发送的视频文件的内容，以及
基于接收到的内容来调整所述空中成像装置的配置。
32.一种用于支持远程呈现的成像系统，包括：
成像处理器，操作用于：
获取视频剪辑；以及
对视频剪辑的视频内容进行转码以通过远程装置呈现视频剪辑。
33.根据权利要求32所述的成像系统，还包括用于将视频剪辑存储为视频文件的存储介质。
34.根据权利要求33所述的成像系统，其中所述成像处理器被配置为从视频剪辑中提取视频内容。
35.根据权利要求34所述的成像系统，其中所述成像处理器被配置为对视频剪辑的视频内容进行解码以生成第一视频比特流。
36.根据权利要求35所述的成像系统，其中通过对第一视频比特流进行下变换以生成第二视频比特流，对视频剪辑进行转码。
37.根据权利要求36所述的成像系统，其中通过减小第一视频比特流的比特率以生成第二视频比特流，对视频内容进行下变换。
38.根据权利要求37所述的成像系统，其中通过减小视频内容的分辨率来减小第一视频比特流的比特率。
39.根据权利要求37或权利要求38所述的成像系统，其中通过减小视频内容的每秒帧速率来减小第一视频比特流的比特率。
40.根据权利要求37-39中任一项所述的成像系统，其中所述成像处理器被配置为对第二视频比特流进行编码以生成第三视频比特流。
41.根据权利要求40所述的成像系统，其中用远程装置的应用(“APP”)可识别的协议来对第二视频比特流进行编码。
42.根据权利要求40或权利要求41所述的成像系统，其中所述成像处理器被配置为传输第三视频比特流用于合并视频剪辑的上下文信息。
43.根据权利要求42所述的成像系统，其中所述成像处理器被配置为传输上下文信息用于与第三视频比特流进行合并。
44.根据权利要求43所述的成像系统，其中所述成像处理器被配置为对视频剪辑的上下文信息进行解码以生成第一上下文比特流。
45.根据权利要求44所述的成像系统，其中所述成像处理器被配置为基于第一上下文比特流来生成辅助上下文比特流。
46.根据权利要求45所述的成像系统，其中所述成像处理器被配置为通过对第一上下文比特流进行下变换以生成第二上下文比特流，对上下文信息进行转码。
47.根据权利要求46所述的成像系统，其中通过减小第一上下文比特流的采样率和/或第一上下文比特流的每秒比特率，对第一上下文比特流进行下变换。
48.根据权利要求47所述的成像系统，其中所述成像处理器被配置为对第二上下文比特流进行编码以生成辅助上下文比特流。
49.根据权利要求48所述的成像系统，其中所述成像处理器被配置为传输辅助上下文比特流用于合并第三视频比特流。
50.根据权利要求48或权利要求49所述的成像系统，其中所述成像处理器被配置为合并第三视频比特流和辅助上下文比特流以生成合成比特流。
51.根据权利要求50所述的成像系统，其中所述成像处理器被配置为对合成比特流中的第三视频比特流和第二上下文比特流进行同步。
52.根据权利要51所述的成像系统，其中所述成像处理器被配置为：当成像装置没有在捕获图像时，获取视频剪辑的视频内容和/或对视频剪辑的视频内容进行转码。
53.根据权利要求52所述的成像系统，其中所述成像处理器被配置为经由传输介质传输合成比特流。
54.根据权利要求53所述的成像系统，其中所述传输介质经由通用串行总线(“USB”)和/或媒体接口(“MI”)端口传输合成比特流。
55.根据权利要求54所述的成像系统，其中所述传输介质被配置为向运行应用(“APP”)的远程装置传输合成比特流。
56.根据权利要求55所述的成像系统，其中所述传输介质是无线连接或有线连接。
57.根据权利要求56所述的成像系统，还包括被配置为经由APP呈现合成比特流的远程装置。
58.根据权利要求57所述的成像系统，其中所述远程装置被配置为以快进模式或快退模式呈现合成比特流。
59.根据权利要求58所述的成像系统，其中所述远程装置被配置为基于包含在合成比特流中的上下文信息来更新所述成像处理器的一个或多个配置参数。
60.根据权利要求32-59中任一项所述的成像系统，其中所述成像处理器和/或存储介质位于无人机(“UAV”)上。
61.一种用于针对远程装置处理视频的方法，包括：
经由第一通信路径传输视频的视频内容，以及
经由与所述第一通信路径分开的第二通信路径传输所述视频的上下文信息。
62.根据权利要求61所述的方法，其中所述传输上下文信息包括传输与视频内容相关联的上下文信息。
63.根据权利要求61或权利要求62所述的方法，还包括：从存储装置获取包括视频内容的视频文件。
64.根据权利要求63所述的方法，其中所述获取包括将视频文件从存储介质加载到成像处理器。
65.根据权利要求63或权利要求64所述的方法，还包括：提取视频文件的上下文信息。
66.根据权利要求65所述的方法，其中所述提取上下文信息包括提取音频数据、字幕数据、环境数据和/或配置数据。
67.根据权利要求62-66中任一项所述的方法，其中所述传输上下文信息包括基于上下文信息来生成辅助上下文比特流。
68.根据权利要求61-67中任一项所述的方法，其中所述传输上下文信息包括对上下文信息进行转码。
69.根据权利要求68所述的方法，其中所述对上下文信息进行转码包括对上下文信息进行解码以生成第一上下文比特流。
70.根据权利要求69所述的方法，其中所述对上下文信息进行转码还包括对第一上下文比特流进行下变换以生成第二上下文比特流。
71.根据权利要求70所述的方法，其中所述对第一上下文比特流进行下变换包括：减小第一上下文比特流的比特率。
72.根据权利要求71所述的方法，其中所述减小比特率包括减小第二上下文比特流的每秒比特率。
73.根据权利要求71或权利要求72所述的方法，其中所述减小比特率包括减小第二上下文比特流的采样率。
74.根据权利要求68-73中任一项所述的方法，其中所述转码包括对第二上下文比特流进行编码以生成辅助上下文比特流。
75.根据权利要求74所述的方法，其中所述编码包括利用对比特流进行压缩的协议对第二上下文比特流进行编码。
76.根据权利要求74或权利要求75所述的方法，其中所述编码包括利用由远程装置的应用(“APP”)识别的协议进行编码以生成辅助上下文比特流。
77.根据权利要求61-76中任一项所述的方法，其中所述传输视频内容包括从视频文件提取视频内容。
78.根据权利要求77所述的方法，其中所述传输视频内容还包括对视频内容进行转码以生成编码后的视频比特流。
79.根据权利要求78所述的方法，还包括：将编码后的视频比特流和辅助上下文比特流合并以生成合成比特流。
80.根据权利要求79所述的方法，其中所述合并包括将编码后的视频比特流和辅助上下文比特流进行同步以生成合成比特流。
81.根据权利要求80所述的方法，其中所述将编码后的视频比特流和辅助上下文比特流进行同步包括：将编码后的视频比特流的数据分组的首部信息与辅助上下文比特流的数据分组的首部信息进行匹配。
82.根据权利要求81所述的方法，其中所述匹配首部信息包括将编码后的视频比特流的数据分组的时间戳或序列号和/或辅助上下文比特流的数据分组的时间戳或序列号进行匹配。
83.根据权利要求75-82中任一项所述的方法，还包括：经由显示器呈现合成比特流。
84.根据权利要求83所述的方法，其中所述呈现合成比特流包括用远程装置的APP进行呈现。
85.根据权利要求83或权利要求84所述的方法，其中所述呈现合成比特流包括以快进模式或快退模式呈现合成比特流。
86.根据权利要求85所述的方法，还包括：将成像装置定位在无人机(“UAV”)上，其中成像处理器与成像装置相关联。
87.根据权利要求86所述的方法，还包括将视频文件存储到位于UAV上的存储介质中。
88.一种计算机程序产品，包括用于针对远程装置传输视频的指令，其中所述远程装置被配置为执行根据权利要求61-87中任一项所述的传输过程。
89.一种无人机(UAV)，包括：
一个或多个推进单元，被配置为提供提升力；
存储介质，用于存储视频文件；以及
成像装置，包括：
成像处理器，操作用于：
将捕获的视频剪辑存储到存储介质中；以及
通过分开的通信路径传输视频文件的视频内容和上下文信息。
90.一种用于针对远程装置处理视频的成像系统，包括：
一个或多个处理器，单独地或共同地被配置为：
经由第一通信路径来传输视频内容，以及
经由与所述第一通信路径分开的第二通信路径传输上下文信息。
91.根据权利要求90所述的成像系统，其中所述上下文信息与视频内容相关联。
92.根据权利要求90或权利要求91所述的成像系统，其中所述一个或多个处理器被配置为获取视频文件。
93.根据权利要求92所述的成像系统，其中所述视频文件从存储介质被加载到所述成像系统的所述一个或多个处理器。
94.根据权利要求90-93中任一项所述的成像系统，其中所述一个或多个处理器被配置为提取视频文件的上下文信息。
95.根据权利要求94所述的成像系统，其中所述上下文信息包括音频数据、字幕数据、环境数据和配置数据中的至少一个。
96.根据权利要求90-95中任一项所述的成像系统，其中所述一个或多个处理器被配置为基于上下文信息生成辅助上下文比特流。
97.根据权利要求90-95中任一项所述的成像系统，其中所述一个或多个处理器被配置为对上下文信息进行转码。
98.根据权利要求97所述的成像系统，其中所述一个或多个处理器被配置为对所述上下文信息进行解码以生成第一上下文比特流。
99.根据权利要求98所述的成像系统，其中所述一个或多个处理器被配置为对第一上下文比特流进行下变换以生成第二上下文比特流。
100.根据权利要求99所述的成像系统，其中所述一个或多个处理器被配置为：通过减小第一上下文比特流的比特率，对第一上下文比特流进行下变换。
101.根据权利要求100所述的成像系统，其中所述一个或多个处理器被配置为通过减小第二上下文比特流的每秒比特率来减小比特率。
102.根据权利要求101所述的成像系统，其中所述一个或多个处理器被配置为通过减小第二上下文比特流的采样率来减小比特率。
103.根据权利要求98-102中任一项所述的成像系统，其中所述一个或多个处理器被配置为对第二上下文比特流进行编码以生成辅助上下文比特流。
104.根据权利要求103所述的成像系统，其中用对比特流进行压缩的协议对第二上下文比特流进行编码。
105.根据权利要求96或权利要求104所述的成像系统，其中用由远程装置的应用(“APP”)识别的协议对第二上下文比特流进行编码，以生成辅助上下文比特流。
106.根据权利要求90-105中任一项所述的成像系统，其中所述一个或多个处理器被配置为从视频文件提取视频内容。
107.根据权利要求106所述的成像系统，其中所述一个或多个处理器被配置为对视频内容进行转码以生成编码后的视频比特流。
108.根据权利要求107所述的成像系统，其中所述一个或多个处理器被配置为将编码后的视频比特流与辅助上下文比特流组合。
109.根据权利要求108所述的成像系统，其中以同步的方式合并编码后的视频比特流与辅助上下文比特流，以生成合成比特流。
110.根据权利要求109所述的成像系统，其中所述一个或多个处理器被配置为：通过将编码后的视频比特流的数据分组的首部信息与辅助上下文比特流的数据分组的首部信息进行匹配，对编码后的视频比特流和辅助上下文比特流进行同步。
111.根据权利要求110所述的成像系统，其中将所述首部信息与编码后的视频比特流的数据分组的时间戳或序列号以及辅助上下文比特流的数据分组的时间戳或序列号进行匹配。
112.根据权利要求108-111中任一项所述的成像系统，其中所述合成比特流经由显示器来呈现。
113.根据权利要求112所述的成像系统，其中所述显示器是远程装置的APP。
114.根据权利要求111或权利要求112所述的成像系统，其中所述显示器被配置为以快进模式或快退模式呈现合成比特流。
115.根据权利要求114所述的成像系统，其中所述一个或多个处理器位于无人机(“UAV”)上。
116.根据权利要求115所述的成像系统，其中所述存储介质位于UAV上。
117.一种用于支持远程视频显示的方法，包括：
接收所传输的视频文件的内容；以及
基于接收到的内容来调整成像处理器的配置。
118.根据权利要求117所述的方法，其中所述接收内容包括接收视频文件的视频内容和/或接收视频文件的上下文信息。
119.根据权利要求118所述的方法，其中所述接收视频内容包括接收转码后的视频内容和/或转码后的上下文信息。
120.根据权利要求119所述的方法，其中对视频内容和/或上下文信息进行转码以传输视频文件。
121.根据权利要求120所述的方法，其中所述对视频内容进行转码包括对视频内容进行转码以生成视频比特流。
122.根据权利要求121所述的方法，其中所述对上下文信息进行转码包括对上下文信息进行转码以生成上下文比特流。
123.根据权利要求122所述的方法，其中所述对上下文信息进行转码包括：旁路对上下文信息的转码以生成上下文比特流。
124.根据权利要求122或权利要求123所述的方法，还包括：将视频比特流和上下文比特流合并以生成合成比特流。
125.根据权利要求124所述的方法，其中所述合并包括对视频比特流和上下文比特流进行同步以生成合成比特流。
126.根据权利要求125所述的方法，其中所述接收视频文件包括向远程装置传输合成比特流。
127.根据权利要求126所述的方法，其中所述传输合成比特流包括经由无线连接或有线连接向远程装置传输合成比特流。
128.根据权利要求127所述的方法，其中所述调整配置包括：基于包含在合成比特流中的接收到的上下文信息，更新成像处理器的一个或多个配置参数。
129.根据权利要求128所述的方法，还包括经由远程装置的应用(“APP”)来呈现合成比特流。
130.根据权利要求129所述的方法，其中所述调整配置包括：基于所呈现的内容，更新成像处理器的一个或多个配置参数。
131.根据权利要求130所述的方法，其中所述更新配置参数包括更新成像处理器的转码参数。
132.根据权利要求131所述的方法，其中所述更新转码参数包括改变所述转码的分辨率、每秒帧数、颜色和每秒比特率中的至少一个。
133.根据权利要求132所述的方法，其中所述更新转码参数包括改变上下文比特流的每秒比特率、压缩率、压缩格式或采样率中的至少一个。
134.根据权利要求117-133中任一项所述的方法，其中所述成像处理器位于无人机(“UAV”)上。
135.一种计算机程序产品，包括用于用远程装置配置成像处理器的指令，其中所述远程装置被配置为执行根据权利要求117-134中任一项所述的传送过程。
136.一种用于支持远程视频显示的系统，包括：
成像装置，包括：
成像处理器，通过转码来发送视频文件；以及
远程装置，操作用于：
接收所发送的视频文件的内容，以及
基于接收到的内容来调整所述成像处理器的配置。
137.根据权利要求136所述的系统，其中所述远程装置被配置为接收视频文件的视频内容和/或视频文件的上下文信息。
138.根据权利要求137所述的系统，还包括：成像装置，被配置为：
捕获视频以存储到视频文件中；以及
对视频内容和/或上下文信息进行转码。
139.根据权利要求138所述的系统，其中所述成像装置包括一个或多个处理器，所述一个或多个处理器被配置为：
处理所捕获的视频，以存储在视频文件中；以及
对视频内容和/或上下文信息进行转码以传输所述视频文件。
140.根据权利要求139所述的系统，其中所述一个或多个处理器在不同的时间期间进行捕获或转码。
141.根据权利要求140所述的系统，其中所述一个或多个处理器被配置为对视频内容进行转码以生成视频比特流。
142.根据权利要求141所述的系统，其中所述一个或多个处理器被配置为对上下文信息进行转码以生成上下文比特流。
143.根据权利要求142所述的系统，其中所述一个或多个处理器被配置为：旁路上下文信息以生成上下文比特流。
144.根据权利要求142或权利要求143所述的系统，其中所述一个或多个处理器被配置为：组合视频比特流和上下文比特流以生成合成比特流。
145.根据权利要求144所述的系统，其中所述一个或多个处理器被配置为：对所述视频比特流和所述上下文比特流进行同步以生成合成比特流。
146.根据权利要求145所述的系统，其中向远程装置传输所述合成比特流。
147.根据权利要求146所述的系统，其中所述合成比特流经由无线连接或有线连接向远程装置传输。
148.根据权利要求147所述的系统，还包括远程装置，所述远程装置被配置为：通过基于包含在合成比特流内的所接收的上下文信息来更新一个或多个处理器的一个或多个配置参数来调整配置。
149.根据权利要求148所述的系统，其中所述远程装置被配置为经由应用(“APP”)来呈现合成比特流。
150.根据权利要求148或权利要求149所述的系统，其中所述远程装置被配置为基于所呈现的内容来更新一个或多个处理器的配置参数。
151.根据权利要求149或权利要求150所述的系统，其中所述配置参数包括所述一个或多个处理器的转码参数。
152.根据权利要求151所述的系统，其中所述转码参数包括所述转码的分辨率、每秒帧数、颜色和每秒比特率中的至少一个。
153.根据权利要求152所述的系统，其中所述转码参数包括上下文比特流的每秒比特率、压缩率、压缩格式或采样率中的至少一个。
154.根据权利要求136-153中任一项所述的系统，其中所述成像装置位于无人机(“UAV”)上。
CN201680085682.8A 2016-05-13 2016-05-13 用于通过转码呈现视频的系统和方法 Pending CN109155838A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2016/082045 WO2017193374A1 (en) 2016-05-13 2016-05-13 System and method for presenting a video via transcode

Publications (1)

Publication Number Publication Date
CN109155838A true CN109155838A (zh) 2019-01-04

Family

ID=60266943

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680085682.8A Pending CN109155838A (zh) 2016-05-13 2016-05-13 用于通过转码呈现视频的系统和方法

Country Status (3)

Country Link
US (1) US11197058B2 (zh)
CN (1) CN109155838A (zh)
WO (1) WO2017193374A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7331831B2 (ja) * 2018-03-15 2023-08-23 ソニーグループ株式会社 画像処理装置および方法
CN109218744B (zh) * 2018-10-17 2019-11-22 华中科技大学 一种基于drl的比特率自适应无人机视频流传输方法

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1538696A (zh) * 2003-10-24 2004-10-20 清华大学 一种支持大容量用户的多路实时视频网关及其应用方法
US20070229680A1 (en) * 2006-03-30 2007-10-04 Jai Pulnix, Inc. Resolution proportional digital zoom
US7460148B1 (en) * 2003-02-19 2008-12-02 Rockwell Collins, Inc. Near real-time dissemination of surveillance video
CN101448152A (zh) * 2007-11-28 2009-06-03 深圳华为通信技术有限公司 多路视频处理方法及系统、终端和媒体服务器
CN101778285A (zh) * 2010-02-09 2010-07-14 中国电信股份有限公司 一种音视频信号无线传输系统及其方法
CN102342066A (zh) * 2009-03-06 2012-02-01 阿尔卡特朗讯公司 实时多媒体流处理带宽管理
CN102484712A (zh) * 2009-09-10 2012-05-30 苹果公司 用于数字视频记录器的视频编辑和重新格式化
US20130162822A1 (en) * 2011-12-27 2013-06-27 Hon Hai Precision Industry Co., Ltd. Computing device and method for controlling unmanned aerial vehicle to capture images
CN103475856A (zh) * 2013-07-11 2013-12-25 国家广播电影电视总局广播科学研究院 应用于广电网络的视频监控系统
CN103596065A (zh) * 2012-08-03 2014-02-19 英特尔公司 装置定向能力交换信令和多媒体内容的服务器适应性修改
CN104219500A (zh) * 2014-08-27 2014-12-17 天津市中信互联科技有限公司 监控视频直播的装置和方法
CN104639914A (zh) * 2015-02-16 2015-05-20 国网安徽省电力公司铜陵供电公司 一种用于高压线绝缘子成像与污秽检测的装置及方法
CN204515536U (zh) * 2015-04-21 2015-07-29 吉林大学 一种基于四旋翼的自主巡航拍摄系统
CN105242686A (zh) * 2015-11-13 2016-01-13 南京衡创天伟无人机技术有限公司 一种无人机航拍系统和航拍方法
CN105532008A (zh) * 2013-08-29 2016-04-27 Vid拓展公司 用户自适应的视频电话

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9258575B2 (en) * 2011-02-18 2016-02-09 Charter Communications Operating, Llc Cloud based location shifting service
US9167276B2 (en) * 2012-12-28 2015-10-20 Turner Broadcasting System, Inc. Method and system for providing and handling product and service discounts, and location based services (LBS) in an automatic content recognition based system
EP2946495B1 (en) * 2013-01-21 2017-05-17 Dolby Laboratories Licensing Corporation Encoding and decoding a bitstream based on a level of trust
CN105120136A (zh) * 2015-09-01 2015-12-02 杨珊珊 基于无人飞行器的拍摄装置及其拍摄处理方法

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7460148B1 (en) * 2003-02-19 2008-12-02 Rockwell Collins, Inc. Near real-time dissemination of surveillance video
CN1538696A (zh) * 2003-10-24 2004-10-20 清华大学 一种支持大容量用户的多路实时视频网关及其应用方法
US20070229680A1 (en) * 2006-03-30 2007-10-04 Jai Pulnix, Inc. Resolution proportional digital zoom
CN101448152A (zh) * 2007-11-28 2009-06-03 深圳华为通信技术有限公司 多路视频处理方法及系统、终端和媒体服务器
CN102342066A (zh) * 2009-03-06 2012-02-01 阿尔卡特朗讯公司 实时多媒体流处理带宽管理
CN104952470A (zh) * 2009-09-10 2015-09-30 苹果公司 用于数字视频记录器的视频格式
CN102484712A (zh) * 2009-09-10 2012-05-30 苹果公司 用于数字视频记录器的视频编辑和重新格式化
CN101778285A (zh) * 2010-02-09 2010-07-14 中国电信股份有限公司 一种音视频信号无线传输系统及其方法
US20130162822A1 (en) * 2011-12-27 2013-06-27 Hon Hai Precision Industry Co., Ltd. Computing device and method for controlling unmanned aerial vehicle to capture images
CN103596065A (zh) * 2012-08-03 2014-02-19 英特尔公司 装置定向能力交换信令和多媒体内容的服务器适应性修改
CN103475856A (zh) * 2013-07-11 2013-12-25 国家广播电影电视总局广播科学研究院 应用于广电网络的视频监控系统
CN105532008A (zh) * 2013-08-29 2016-04-27 Vid拓展公司 用户自适应的视频电话
CN104219500A (zh) * 2014-08-27 2014-12-17 天津市中信互联科技有限公司 监控视频直播的装置和方法
CN104639914A (zh) * 2015-02-16 2015-05-20 国网安徽省电力公司铜陵供电公司 一种用于高压线绝缘子成像与污秽检测的装置及方法
CN204515536U (zh) * 2015-04-21 2015-07-29 吉林大学 一种基于四旋翼的自主巡航拍摄系统
CN105242686A (zh) * 2015-11-13 2016-01-13 南京衡创天伟无人机技术有限公司 一种无人机航拍系统和航拍方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
万刚: "《无人机测绘技术及应用》", 31 December 2015, 测绘出版社 *
潘瑞芳: "《泛动漫创意与人才培养研究》", 31 October 2010, 中国广播电视出版社 *

Also Published As

Publication number Publication date
US20190075357A1 (en) 2019-03-07
US11197058B2 (en) 2021-12-07
WO2017193374A1 (en) 2017-11-16

Similar Documents

Publication Publication Date Title
US10652558B2 (en) Apparatus and methods for video compression using multi-resolution scalable coding
JP6658931B2 (ja) 情報処理装置および方法
RU2741507C1 (ru) Устройство и способ для кодирования и декодирования видео
CN109792548A (zh) 用于处理360度视频数据的方法和系统
US8639046B2 (en) Method and system for scalable multi-user interactive visualization
JP5700703B2 (ja) 映像復号装置、映像送受信システム、映像復号方法及び映像送受信方法
CN113170238A (zh) 用于视频编码和解码的装置、方法和计算机程序
US20180270486A1 (en) Method and apparatus for packaging and streaming of virtual reality (vr) media content
KR102134049B1 (ko) 화상 처리 장치 및 방법
EP3434021B1 (en) Method, apparatus and stream of formatting an immersive video for legacy and immersive rendering devices
US10313728B2 (en) Information processing apparatus and information processing method
US11310560B2 (en) Bitstream merger and extractor
KR20190140902A (ko) 360도 비디오의 영역 정보 전달 방법 및 장치
KR101861929B1 (ko) 관심 영역을 고려한 가상 현실 서비스 제공
US10165303B2 (en) Content streaming system and method
CN109155838A (zh) 用于通过转码呈现视频的系统和方法
KR101941789B1 (ko) 뷰포트와 타일 크기에 기초한 가상 현실 비디오 전송
KR102183895B1 (ko) 가상 현실 비디오 스트리밍에서의 관심영역 타일 인덱싱
EP3668081A1 (en) Transmission device, transmission method, reception device, reception method and imaging device
EP4375947A1 (en) Point cloud data transmission device, point cloud data transmission method, point cloud data reception device, and point cloud data reception method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination