CN103797805A - 使用变更区域的媒体编码 - Google Patents

使用变更区域的媒体编码 Download PDF

Info

Publication number
CN103797805A
CN103797805A CN201380001941.0A CN201380001941A CN103797805A CN 103797805 A CN103797805 A CN 103797805A CN 201380001941 A CN201380001941 A CN 201380001941A CN 103797805 A CN103797805 A CN 103797805A
Authority
CN
China
Prior art keywords
change
region
location value
frame
regional location
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380001941.0A
Other languages
English (en)
Other versions
CN103797805B (zh
Inventor
C·C·王
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN103797805A publication Critical patent/CN103797805A/zh
Application granted granted Critical
Publication of CN103797805B publication Critical patent/CN103797805B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/507—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction using conditional replenishment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/87—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving scene cut or scene change detection in combination with video compression

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

用于使用变更区域的媒体编码的方法和系统。方法包括检测计算设备的桌面的变更区域和静态部分。可以确定变更区域的量。可以响应于变更区域的量对变更区域编码。

Description

使用变更区域的媒体编码
技术领域
本发明一般地涉及媒体编码。更具体地，本发明涉及使用变更区域的媒体编码。
背景技术
计算设备的各种使用包括显示的一部分为静态而显示的其它部分为活动的情景。例如，无线显示（WiDi）是通过它电子设备的桌面无线地在远程显示上渲染的技术。例如，平板机设备可以将它桌面上的所有图像发送到电视以渲染。WiDi的典型使用可以包括web浏览器和视频聊天上的在线视频回放。这些使用中的每一个涉及为静态的显示的一部分，而显示的另一部分可以专用于web浏览器或视频聊天上的视频编码。在其它示例中，参与视频会议包括为静态的显示的一部分，和专用于渲染其他视频会议参与者的图像的显示的另一部分。在任何事件中，WiDi和视频会议的使用可以消耗相对大量的功率，因为来自显示将被渲染的图像通常被编码、解码和处理。
附图说明
图1A是根据实施例的web浏览器中的媒体编码的图；
图1B是根据实施例的视频会议的媒体编码的图；
图2是根据实施例的可以用来提供使用变更区域的媒体编码的计算设备的框图；
图3是根据实施例的可以用来提供使用变更区域的媒体编码的WiDi架构的示意图；
图4是根据实施例的示出使用变更区域的媒体编码的过程流程的框图；
图5是根据实施例的示出使用变更区域的媒体编码的方法的过程流程图；
图6A是根据实施例的示出使用变更区域的媒体编码的方法的过程流程图；
图6B是根据实施例的示出使用变更区域的媒体编码的方法的过程流程图；以及
图7是根据实施例的示出存储用于使用变更区域的媒体编码的代码的有形、非瞬态、计算机可读介质的框图；
图8是用于实现共享的物理存储器的示例系统的框图；以及
图9是图8中的系统可以体现于其中的小形状因子设备的示意图。
贯穿本公开和各附图使用相同的附图标记来引用类似的组件和特征。100系列标号指的是最初在图1中所找到的特征，200系列的标号指的是最初在图200中找到的特征，依此类推。
具体实施方式
如以上讨论的，WiDi是通过它计算设备的显示上的图像无线地渲染在远程显示上的技术。计算设备的显示可以称为桌面，并可以包括桌面上的各种位置中的数个图标和应用。WiDi的传统实现对桌面的整个内容编码、无线地将所编码的桌面发送到另一设备、然后解码并处理整个桌面以便将桌面渲染在诸如电视或计算机监视器之类的另一显示上。使用WiDi技术处理整个桌面可以消耗大量功率。另外，使用传统WiDi技术处理整个桌面可以消耗大量的图形处理单元（GPU）时间和网络带宽的大部分。类似地，视频会议可以通过对由整个桌面合成的数据流进行解码、编码和处理而渲染在计算设备上。处理视频会议的整个桌面可以消耗大量的GPU时间和网络带宽的大部分。GPU瓶颈和缺少网络带宽都可以对在视频会议或WiDi会话期间渲染桌面中的等待时间做出贡献。相应地，此处描述的实施例涉及使用变更区域的媒体编码。媒体的动态内容可以发送给显示用于和变更区域位置值一起渲染。
使用变更区域是其中桌面区分成数个区域的图像渲染技术。如此处使用的，区域指任何大小或形状的桌面的地区。例如，区域可以是矩形形状的。区域可以在各种间隔从桌面获得。区域可以是变更区域，其中区域中的一个或多个像素和与该区域相同大小和形状并与该区域在桌面上的同一位置中的前一区域相比已经变更了。当区域是矩形的且矩形包含任何变更像素时，可以称为脏矩形。在实施例中，每个变更区域可以写到缓冲区中以便与桌面的静态部分合成并渲染。
在实施例中，预定数量的像素的变更可以指示变更区域。变更像素是像素的任何值的变更，包括但不限于，地址、强度、颜色或其任何组合。预定数量的像素可以是用于确定变更区域的阈值。阈值可以是任何数量的像素。例如，阈值可以指示区域中的百分之十或更多的像素应变更以便使该区域成为变更区域。相应地，如果区域中少于百分之十的像素变更了，则该区域可以不被认为是变更区域。以此方式，当区域中已经变更了的变更像素的数量大于预定阈值时可以检测到变更区域。例如，阈值在显示优质图形的应用中（诸如高清晰度回放）可以较低。当执行高清晰度回放时，阈值可以用使得高清晰度回放可以在使用变更区域对回放编码时实现的方式来选择。另外，在关心功率节省的实施例中，阈值可以用使设备能在使用变更区域对回放编码时节省功率的方式设置。
图1A是根据实施例的web浏览器100中的媒体编码的图。Web浏览器100包括渲染由用户选择的视频的地区102。地区102可以是单个区域或者地区102可以包括数个区域，如上所述。当地区102播放由用户选择的视频时Web浏览器100的剩余组件通常是固定的。相应地，当地区102由于媒体回放而变更时到地区104中的其它视频的链接通常保持不变。而且，当媒体在地区102中播放时地区102下方的地区106中的文章保持不变。如此处使用的，媒体回放指任何动态内容，诸如在线视频广播或视频会议图像。另外，类似于地区102，web浏览器100的剩余组件可以形成web浏览器100的单个区域或数个区域。在实施例中，区域可以包括连续或非连续的像素。
一般地，计算设备上的媒体回放包括专用于媒体回放并因此随时间而变更且是动态的地区，诸如地区102。例如，视频聊天应用使本地用户能使用计算设备的相机和话筒与远程用户交谈。将远程用户的图像或视频渲染给本地用户的地区响应于远程用户的各种位置一直在变更。显示的剩余部分，包括计算设备的背景和视频聊天应用的其它部分，通常是静态的。在另一示例中，演示应用可以使一个或多个用户能连接到电子演示。在电子演示期间，一个或多个用户可以与在演示期间渲染的幻灯片交互。渲染幻灯片的图像的地区一直在变更，而显示的剩余部分是静态的。
图1B是根据实施例的有视频会议的桌面110的媒体编码的图。桌面110包括渲染在视频会议期间呈现的文档、幻灯片、图像和视频的地区112。地区112可以是单个区域或者地区112可以包括数个区域。当地区112响应于在视频会议期间呈现的信息而变更时桌面110的剩余组件通常是固定的。例如，附图标记114处的图标在视频会议呈现在地区112期间基本是静态的。桌面110的剩余组件可以形成桌面110的单个区域或数个区域。
在以下描述和权利要求书中，可以使用术语“耦合”和“连接”及它们的派生词。应理解，这些术语不旨在互为同义词。相反，在特定实施例中，“连接”可以用来指示两个或更多元素互相有直接的物理或电气接触。“耦合”可以意味着两个或更多元素有直接的物理或电气接触。然而，术语“耦合”还可以意味着两个或更多元素互相不直接接触，而仍互相合作或交互。
一些实施例可以用硬件、固件和软件之一或其组合来实现。一些实施例还可以实现为存储在机器可读介质上的指令，其可以由计算平台读取并执行以执行此处所描述的操作。机器可读介质可以包括任何用于以可由机器（例如计算机）读取的形式存储或传输信息的机制。例如，机器可读介质可以包括只读存储器（ROM）；随机存取存储器（RAM）；磁盘存储介质；光存储介质；闪存设备；或电、光、声或其它形式的传播信号，例如载波、红外信号、数字信号；或发送和/或接收信号的接口，及其它。
实施例是实现或示例。说明书中对“实施例”、“一个实施例”、“一些实施例”、“各种实施例”或“其它实施例”的引用意味着结合实施例描述的特定特征、结构或特性包括在本发明的至少一些实施例但不必是全部实施例中。“实施例”、“一个实施例”或“一些实施例”的各种出现不必都指相同的实施例。来自一个实施例的元素或方面可以与另一实施例的元素或方面组合。
不是此处描述和示出的所有组件、特征、结构、特性等都需要包括在特定实施例或多个实施例中。例如如果说明书陈述组件、特征、结构或特性“可以”、“可”、“能够”、“能”被包括，则该特定组件、特征、结构或特性不要求被包括。如果说明书或权利要求书引用“一”或“一个”元素，这不意味着仅存在一个元素。如果说明书或权利要求书引用“附加”元素，这并不排除存在多于一个附加元素。
应注意，尽管一些实施例是参考特定实现描述的，根据一些实施例其它实现也是可能的。另外，在附图中示出和/或此处描述的电路元素或其它特征的安排和/或顺序不需要以所示或描述的特定方式安排。根据一些实施例许多其它安排是可能的。
在图中示出的每个系统中，一些情况中的元素可以每个都有相同的附图标号或不同的附图标号以表明所表示的元素可以是不同和/或类似的。然而，元素可以足够灵活到具有不同的实现并与此处所示或描述的系统的一些或全部一起工作。图中示出的各种元素可以是相同的或不同的。哪个称为第一元素和哪个称为第二元素是随机的。
图2是根据实施例的可以用来提供使用变更区域的媒体编码的计算设备200的框图。计算设备200可以是，例如，膝上型计算机、台式计算机、平板计算机、移动设备、服务器、或蜂窝电话，及其它。计算设备200可以包括配置为执行所存储的指令的中央处理单元（CPU）202，和存储可由CPU202执行的指令的存储器设备204。CPU202可以是单核处理器、多核处理器、计算集群、或任何数量的其它配置。而且，计算设备200可以包括多于一个的CPU202。由CPU202执行的指令可以用来实现使用变更区域的媒体编码。存储器设备204可以包括随机存取存储器（RAM）、只读存储器（ROM）、闪存、或任何其他合适的存储器系统。例如，存储器设备204可以包括动态随机存取存储器（DRAM）。
计算设备200还可以包括图形处理单元（GPU）206。如所示，CPU202可以通过总线208连接到GPU206。GPU206可以配置为执行计算设备200中的任何数量的图形操作。例如，GPU206可以配置为渲染或操纵将显示给计算设备200的用户的图形图像、图形帧、视频等。GPU206还可以包括一个或多个引擎，诸如引擎210和引擎212。引擎是可以用于并行处理发送到GPU的数据的GPU的组件。尽管示出了两个GPU引擎，但GPU可以包含任何数量的引擎。在实施例中，引擎210或引擎212是可以用来在视频会议或WiDi期间将桌面的静态部分与桌面的动态地区合成起来的组合引擎。
计算设备200还可包括一个或多个相机214。相机214可以用来捕捉视频或图像用于各种使用，诸如视频会议和视频聊天应用。另外，计算设备200包括可以用来捕捉声音用于各种使用（诸如视频会议和视频聊天应用）的话筒216。CPU202可以通过总线208连接到使用配置为将计算设备200连接到一个或多个I/O设备220的I/O设备接口218的其它输入/输出（I/O）组件。I/O设备220可以包括，例如，键盘和定点设备，其中定点设备可以包括触摸垫或触摸屏，及其它。相机214、话筒216和I/O设备220可以是计算系统200的内置组件，或者可以是外部连接到计算设备200的设备。
CPU202还可以通过总线208链接到配置为将计算设备200连接到显示设备224的显示接口222。显示设备224可以包括是计算设备200的内置组件的显示屏幕。显示设备224还可以包括外部连接到计算设备200的计算机监视器、电视、或投影仪及其它。
存储器设备204可以包括一个或多个驱动器。驱动器使一块硬件或应用能与计算设备200的操作系统、应用或其它硬件通信。如此处使用的，通信的能力包括数据从一个格式到另一个格式的转换，或任何促进数据在硬件或软件组件之间的处理或传输的技术。例如，计算设备200可以包括图形驱动器226、媒体驱动器228和WiFi驱动器230。图形驱动器226使GPU能与操作系统和各种应用通信，而媒体驱动器228使媒体应用能与操作系统和各种应用通信。WiFi驱动器230使操作系统能与负责去往或来自计算设备200的无线传输的硬件和应用通信。
计算设备200还可以包括存储232。存储232是物理存储器，诸如硬盘驱动器、光盘驱动器、拇指型驱动器、驱动器阵列、或其任何组合。存储232还可以包括远程存储驱动器。存储还可以包括一个或多个媒体应用234。媒体应用234包括但不限于，视频回放应用、视频聊天应用、视频会议应用和演示应用。在示例中，媒体驱动器228可以包括用来调度检测来自媒体应用234的任何变更区域的间隔的计时器。另外，在示例中，媒体应用234可以由媒体驱动器228轮询以便在各种间隔检测来自媒体应用234的任何变更区域。而且，在示例中，变更区域在各种时间间隔被检测到时由媒体应用234推送到媒体驱动器228。当在各种间隔检测到变更区域时，还可以由媒体驱动器228从媒体应用234拉取变更区域。
来自媒体应用234的媒体回放可以和桌面的其它内容一起发送给流管理器236。流管理器236可以管理桌面的编码、解码和合成。在实施例中，流管理器226可以获得每个变更区域的位置值。
存储232还可以包括中间件238和WiDi应用240。中间件238可以用来对变更区域编码并计算变更区域的位置值。WiDi应用可以准备编码的变更区域和它们的位置值以无线地发送到远程适配器242。远程适配器可以物理地与计算设备200分开。在实施例中，远程适配器242是另一计算设备。网络接口控制器（NIC）244可以配置为将计算设备200连接到网络246。网络246可以是有线网络、无线网络或蜂窝网络。网络246可以是任何广域网（WAN）、任何局域网（LAN）、或因特网、及其它。例如，网络246可以是3GPP LTE网络或WiFi网络。在实施例中，远程适配器242可以使用NIC244和网络246从计算设备200获得编码的变更区域。
远程适配器242可以包含GPU248。GPU248可以包括合成引擎250。在实施例中，合成引擎250可以使用变更区域位置值将变更区域与静态部分合成。静态部分包括不包括变更区域的桌面地区。合成的变更区域和静态部分可以在远程设备252上渲染。在实施例中，远程适配器242和远程设备252可以是同一组件。
图2的框图不旨在指示计算设备200将包括图2中示出的所有组件。而且，取决于具体实现的细节，计算设备200可以包括任何数量的图2中未示出的附加组件。
图3是根据实施例的可以用于使用变更区域的媒体编码的WiDi架构300的示意图。类似标记的项目现在参考图2予以描述。WiDi架构300包括支持使用变更区域的媒体编码的硬件302。硬件可以包括但不限于CPU202和GPU206（图2）。图形驱动器226使硬件能与其它硬件和各种应用通信。硬件合成器304或桌面合成引擎306或其任何组合，可以确定桌面的哪些区域变更了。在实施例中，硬件合成器304可以是出自Open HandsetAlliance的Android操作系统中的硬件抽象层（HAL）的硬件合成器。而且，在实施例中，桌面合成引擎306可以是出自微软的Windows操作系统的桌面合成管理器或桌面窗口管理器。此外，在实施例中，诸如固定功能单元、视频编码器或场景变更检测硬件单元之类的各种硬件可以用来确定变更区域。
相应地，硬件合成器304、桌面合成引擎306、固定功能单元、视频编码器或场景变更检测硬件单元可以用来获得变更区域。在实施例中，桌面的当前区域可以与从桌面获得的之前的区域相比较。区域可以通过推送、拉取、轮询而获得，或如上讨论的在调度间隔从WiDi流管理器236发送到硬件合成器304、桌面合成引擎306、固定功能单元、视频编码器或场景变更检测硬件单元。如果在桌面的当前区域和之前从WiDi流管理器236发送的同一区域之间有变更，则区域变更了。在实施例中，区域还可以与变更像素的预定阈值相比较。如果已经变更了的像素的数量大于预定阈值，则区域可被认为是变更区域。响应于检测到变更区域，硬件合成器304、桌面合成引擎306、固定功能单元、视频编码器或场景变更检测硬件单元可以将变更区域位置值发送到流管理器236。
WiDi流管理器236管理由中间件238执行的合成和编码。在实施例中，WiDi流管理器与中间件238通信以获得变更区域的图像信息，这可以包括要编码的像素。图像信息相对应于经由硬件合成器304、桌面合成引擎306、固定功能单元、视频编码器、场景变更检测硬件单元或其任何组合的一个或多个获得的变更区域的变更区域位置值。在实施例中，变更区域的图像信息形成视频表面。如此处使用的，视频表面是用来在桌面上渲染视频或其它媒体的显示的动态部分。
中间件238可以通过WiDi流管理器236从媒体应用234获得桌面上的图像信息。例如，媒体应用234可以根据诸如那些出自运动图象专家组（MPEG）或H.264之类的视频标准来压缩视频回放。MPEG和H.264视频标准可以通过逐帧处理视频和使用各种编码算法来压缩视频。中间件238可以使用解码器308来对视频解码。
中间件238还可以包括按WiDi流管理器236指导地处理视频的视频处理器310。视频处理可以包括通过缩放视频或变更视频的颜色空间来增强解码的视频。例如，视频可以从用于回放的较高解析度缩放到用于回放的较低解析度。在实施例中，媒体应用234是视频会议应用，且中间件238包括将从视频会议应用接收的动态部分与桌面的静态部分合成的合成器312。所合成的动态部分和静态部分可以在诸如计算设备200（图2）之类的计算设备上渲染。
中间件238可以使用编码器314对变更区域编码。在实施例中，中间件238包括组合图像数据与音频数据的多路复用器316。中间件238还可以准备变更区域供在框318处使用发送器318传输到远程适配器。WiFi驱动器230可以使诸如NIC244（图2）之类的硬件能使用中间件238和WiDi应用程序240发送编码的变更区域和它们的变更区域位置值。
图4是根据实施例的示出使用变更区域的媒体编码的数据流的框图400。客户机设备402包含可以使用诸如计算设备200（图2）之类的计算设备而发生的数据流，而远程设备404包含可以使用远程适配器242或远程设备252（图2）而发生的数据流。在实施例中，使用变更区域的媒体编码使用计算设备而无需使用WiDi而发生。
压缩视频406可以从诸如媒体应用234（图2）之类的媒体编码应用获得。压缩视频可以在框408处解码。如以上讨论的，压缩视频可以使用中间件228（图2）解码。解码视频可以包括来自媒体编码的视频表面和背景表面两者。如以上讨论的，视频表面是随时间变更的桌面的动态区域。作为对比，桌面表面是随时间保持固定的桌面的静态区域。视频表面410可以通过如以上参考图3描述的从中间件238取回变更区域而获得。
视频表面410可以在框412处编码。在实施例中，编码视频表面发送到缓冲区414并随后在框416处发送到远程设备404。远程设备可以在框418处对视频表面解码。可以在420处处理视频表面410与静态桌面表面422。视频处理可以包括但不限于视频的缩放、旋转和去噪。静态桌面表面422包括不脏并且之前已经发送到远程设备404的区域。视频表面410和静态桌面表面422可以在框424处合成为一个图像。媒体编码可以发送给显示252以便在显示上渲染。
图5是根据实施例的示出用于使用变更区域的媒体编码的方法500的过程流程图。在各种实施例中，方法500可以在诸如计算设备200之类的计算设备上执行。在其它实施例中，方法500可以使用诸如以上参考图4讨论的WiDi架构400之类的WiDi架构而执行。
在框502处，检测到变更区域和桌面的静态区域。如此处讨论的，变更区域可以由硬件合成器304或桌面合成引擎306（图3）检测。在实施例中，变更区域可以使用媒体驱动器检测。而且，如以上讨论的，变更区域可以是脏矩形。在框504处，可以确定变更区域的量。变更区域的量可以表示阈值。在实施例中，如果变更区域的数量超过了阈值，则整个显示应被合成和渲染。在框506处，对每个帧的变更区域编码。在实施例中，将每个变更区域和相对应的变更区域位置值发送到合成引擎，且可以对编码的变更区域进行解码。变更区域可以使用它们的变更区域位置值与静态部分合成。合成引擎可以位于远程适配器上，或者合成引擎可以是检测变更区域的计算设备的组件。而且，在实施例中，一个或多个变更区域和它们的变更区域位置值可以使用诸如因特网之类的网络发送到另一计算设备。
图6A和6B是根据实施例的示出用于使用变更区域的媒体编码的方法600的过程流程图。在各种实施例中，方法600可以在诸如计算设备200之类的计算设备上执行。在其它实施例中，方法600可以使用诸如以上参考图4讨论的WiDi架构400之类的WiDi架构而执行。
方法600在框602通过确定是否有任何变更区域而开始。在实施例中，变更区域可以在媒体编码的视频表面或媒体编码的桌面表面中检测到。如果没有变更区域，则过程流程保持在框602处直到检测到变更区域。当视频表面或桌面表面中的变更区域发生时，过程流程继续到框604。
在框604处，确定是否有多于n个区域是脏的。n的值可以预先确定，并表示变更区域的阈值量。如果多于n个区域是脏的，这可以指示用户已经调整了窗口大小或关闭了媒体应用。在有多于n个区域脏的情况中，整个显示应被合成和渲染。相应地，如果多于n个区域是脏的，则过程流程继续到框606。如果少于n个区域是脏的，则过程流程继续到框610。
在框606处，合成整个桌面。在实施例中，桌面的变更区域是通过检查背面缓冲区而检测的。背面缓冲区可以包括与静态部分相关联的图像信息。桌面的变更区域和变更区域位置一起可以发送到远程适配器。当已经变更的变更区域的量大于阈值量n时可以合成整个桌面。在框608处，整个桌面使用内部编码的帧（I-frame）或预测图片帧（P-frame）编码。当桌面使用I-frame编码时，每个单独帧在编码中完全指定。因此，I-frame传递整个图像信息而不使用来自先前帧的数据。每个I-frame可以看作媒体编码的完整静态图像。当桌面使用P-frame编码时，对当前帧和前一帧之间的变更编码。图像的未变更的像素不编码，且帧被编码时依赖于来自先前帧的一些图像信息。
在框610处，对每个变更区域计算变更区域位置值。在框612处，确定当前帧的每个变更区域的位置值是否与来自前一帧的区域位置值相同。如果当前帧的变更区域的位置值匹配前一帧中的区域的位置值，则当前帧的变更区域可以使用I-frame或者P-frame任何一个来编码。在此情景中，I-frame或P-frame任何一个都可以用来对当前帧的变更区域编码，因为每个变更区域具有位于同一位置的前一帧中的前一区域。结果是，前一帧包含每个区域在每个位置处的图像信息。相应地，当前帧的变更区域可以完全指定，如同根据I-frame编码或当前帧的变更区域可以依赖于来自前一帧的图像信息并使用P-frame编码的情况。
因此，当当前帧的变更区域的位置值匹配前一帧中的区域的位置值时，编码可以使用一个或多个I-frame完全指定，或者编码依赖于来自前一帧的信息使用一个或多个P-frame。然而，如果任何变更区域的位置值不匹配任何来自前一帧的区域的位置值，则当前帧的变更区域将使用一个或多个I-frame编码，因为前一帧不包含与当前帧的每个区域相对应的图像信息。相应地，如果对当前帧的变更区域计算的位置值与前一帧的区域的位置值相同，则过程流程继续到框608，其中帧的变更区域如以上讨论的使用I-frame或P-frame编码。如果对变更区域计算的位置值与前一变更区域的不相同，则过程流程继续到框614。
在框614处，使用I-frame对帧的变更区域编码。在框616处，确定有变更区域的每个帧是否已经编码了。如果有变更区域的每个帧未经编码，则过程流程返回到框612。如果有变更区域的每个帧已经编码了，则过程流程继续到框618。
在框618处，将编码的帧与相关的音频组合。在框620处，将编码的帧、相关的音频和变更区域位置值发送到远程适配器。在实施例中，编码的帧可以是加密的。例如，某些DVD可以包括需要在媒体编码被发送以前加密媒体编码的安全特征。来自DVD的视频编码在传输以前加密，否则传输可以失败。在框622处，如以上讨论的对编码的帧和音频解码。在实施例中，对编码的帧解密。在框624处，确定在解码的帧中是否存在变更区域。变更区域可以通过变更区域位置值的存在而检测。如果存在变更区域，则过程流程继续到框626。如果不存在变更区域，则过程流程继续到框628。
在框626处，如以上讨论的使用变更区域位置值将编码的帧与静态桌面合成。在框628处，编码的帧和静态桌面可以在远程设备上渲染。
图5和6的过程流程图不旨在指示方法500和600的框要以任何特定顺序执行或者所有框要被包括在每个情况中。而且，取决于具体实现的细节，方法500和600中可以包括任何数量的附加框。
图7是根据实施例的示出存储用于使用变更区域的媒体编码的代码的有形非瞬态计算机可读介质700的框图。有形非瞬态计算机可读介质700可以由处理器702通过计算机总线704访问。此外，有形非瞬态计算机可读介质700可以包括配置为指导处理器702执行此处所描述的方法的代码。
此处讨论的各种软件组件可以存储在一个或多个有形非瞬态计算机可读介质700上，如图7所示。例如，管理模块706可以配置为检测媒体编码中的变更区域。编码模块708可以配置为对变更区域编码。此外，传输模块710可以配置为将变更区域和他们的变更区域位置发送到远程适配器。解码模块712可以配置为对变更区域解码。合成模块714可以配置为使用变更区域位置值将变更区域与静态部分合成。
图7的框图不旨在指示有形非瞬态计算机可读介质700将包括图7中示出的所有组件。此外，取决于具体实现的细节，有形非瞬态计算机可读介质700可以包括任何数量的图7中未示出的附加组件。
图8是用于实现共享的物理存储器的示例性系统800的框图。类似标记的项目将参照图2、3和4描述。在一些实施例中，系统800是媒体系统。另外，系统800可以合并进个人计算机（PC）、膝上型计算机、超级膝上型计算机、平板机、触摸垫、便携式计算机、手持式计算机、掌上型计算机、个人数字助理（PDA）、蜂窝电话、组合蜂窝电话/PDA、电视、智能设备（例如智能电话、智能平板机或智能电视）、移动互联网设备（MID）、消息收发设备、数据通信设备等。
在各种实施例中，系统800包括耦合到显示804的平台802。平台802可以从内容设备接收内容，内容设备诸如内容服务设备806或内容递送设备808或其它类似内容源。包括一个或多个导航特征的导航控制器810可以用来与例如平台802和/或显示804交互。下面将更详细地描述这些组件中的每一个。
平台802可以包括芯片组812、中央处理单元（CPU）202、存储器设备204、存储设备232、图形子系统814、应用816和无线电818的任何组合。芯片组812可以提供CPU102、存储器设备204、存储设备120、图形子系统814、应用816和无线电818之间的互通信。例如，芯片组812可以包括能够提供与存储设备232的互通信的存储适配器（未示出）。
CPU102可以实现为复杂指令集计算机（CISC）或精简指令集计算机（RISC）处理器、x86指令集兼容的处理器、多核、或任何其它微处理器或中央处理单元（CPU）。在一些实施例中，CPU102包括双核处理器、双核移动处理器等。
存储器设备204可以实现为易失性存储器设备，诸如但不限于，随机存取存储器（RAM）、动态随机存取存储器（DRAM）或静态RAM（SRAM）。存储设备232可以实现为非易失性存储设备，诸如但不限于，磁盘驱动器、光盘驱动器、磁带驱动器、内部存储设备、附连存储设备、闪存、电池备用SDRAM（异步DRAM）和/或网络可访问存储设备。在一些实施例中，例如，存储设备232包括在包括多个硬盘驱动器时增加对有价值的数字媒体的存储性能增强保护的技术。
图形子系统814可以执行诸如用于显示的静态或视频图像的处理。例如，图形子系统814可以包括诸如GPU206（图2）之类的图形处理单元（GPU）、或视觉处理单元（VPU）。可以使用模拟或数字接口将图形子系统814和显示804通信地耦合。例如，接口可以是高清晰度多媒体接口、显示端口、无线HDMI和/或符合无线HD的技术中的任何一个。图形子系统814可以集成进CPU102或芯片组812中。替换性地，图形子系统814可以是通信地耦合到芯片组812的独立卡。
此处描述的图形和/或视频处理技术可以用各种硬件架构实现。例如，图形和/或视频功能可以集成在芯片组812中。替换性地，可以使用离散图形和/或视频处理器。如又一实施例，图形和/或视频功能可以通过通用处理器（包括多核处理器）来实现。在又一实施例中，功能可以在消费电子设备中实现。
无线电818可以包括一个或多个能够使用各种适合的无线通信技术发送和接收信号的无线电。这些技术可以涉及跨一个或多个无线网络的通信。示例性无线网络包括无线局域网（WLAN）、无线个人区域网（WPAN）、无线城域网（WMAN）、蜂窝网络、卫星网络等。在跨这些网络的通信中，无线电818可以根据一个或多个适用的标准的任何版本操作。
显示804可以包括任何电视型监视器或显示。例如，显示804可以包括计算机显示屏、触摸屏显示、视频监视器、电视等。显示804可以是数字的和/或模拟的。在一些实施例中，显示804是全息显示。显示804还可以是可以接收视觉投影的透明表面。这样的投影可以传递各种形式的信息、图像、物体等。例如，这样的投影可以是移动增强现实（MAR）应用的视觉覆盖。在一个或多个应用816的控制下，平台802可以在显示804上显示用户接口820。
内容服务设备806可以由任何国家的、国际的或独立服务主存，并因此经由例如因特网对平台802是可访问的。内容服务设备806可以耦合到平台802和/或显示804。平台802和/或内容服务设备806可以耦合到网络246以将媒体信息去往和来自网络246通信（例如发送和/或接收）。内容递送设备808还可以耦合到平台802和/或显示804。
内容服务设备806可以包括有线电视盒、个人计算机、网络、电话或能够递送数字信息的启用因特网的设备。另外，内容服务设备806可以包括任何其它能够单向地或双向地在内容提供者和平台802或显示804之间经由网络246或直接地传达内容的类似设备。应理解，内容可以经由网络246单向地和/或双向地去往和来自系统800中的任何一个组件和内容提供者通信。内容的示例可以包括任何媒体信息，包括例如视频、音乐、医疗和游戏信息等。
内容服务设备806可以接收诸如有线电视节目之类的内容，包括媒体信息、数字信息或其它内容。内容提供者的示例可包括任何有线或卫星电视或无线电或因特网内容提供者，及其它。
在一些实施例中，平台802从包括一个或多个导航特征的导航控制器810接收控制信号。导航控制器810的导航特征可以用来与例如用户接口820交互。导航控制器810可以是定点设备，其可以是允许用户将空间（例如连续的和多维的）数据输入进计算机的计算机硬件组件（具体而言，人机接口设备）。诸如图形用户接口（GUI）之类的许多系统和电视机和监视器允许用户使用物理姿势控制计算机或电视机并向计算机或电视机提供数据。物理姿势包括但不限于面部表示、面部动作、各种肢体动作、身体动作、身体语言或其任何组合。这样的物理姿势可以被识别并转换成命令或指令。
导航控制器810的导航特征的动作可以通过指针、光标、焦点环或显示在显示804上的其它视觉指示符的动作而在显示804上回显。例如，在应用816的控制下，位于导航控制器810上的导航特征可以映射到显示在用户接口820上的虚拟导航特征。在一些实施例中，导航控制器810可以不是单独的组件，而是可以集成进平台802和/或显示804中。
系统800可以包括驱动器（未示出），驱动器包括使用户在初始启动之后用按钮的触摸（当启用时，例如）能立即打开和关闭平台802的技术。当平台被“关闭”时，程序逻辑可以允许平台802将内容流传输到内容适配器或其它内容服务设备806或内容递送设备808。另外，芯片组812可以包括支持例如5.1环绕声音频和/或高清晰度9.1环绕声音频的硬件和/或软件。驱动器可以包括用于集成图形平台的图形驱动器。在一些实施例中，图形驱动器包括外围组件互连快速（PCIe）图形卡。
在各种实施例中，系统800中示出的任何一个或多个组件都可以是集成的。例如，平台802和内容服务设备806可以是集成的；平台802和内容递送设备808可以是集成的；或者平台802、内容服务设备806和内容递送设备808可以是集成的。在一些实施例中，平台802和显示804是集成的单元。例如，显示804和内容服务设备806可以是集成的，或者显示804和内容递送设备808可以是集成的。
系统800可以实现为无线系统或有线系统。当实现为无线系统时，系统800可以包括适合于通过无线共享介质（诸如一个或多个天线、发送器、接收器、收发器、放大器、过滤器、控制逻辑等）通信的组件和接口。无线共享介质的示例可以包括无线频谱的部分，诸如RF频谱。当实现为有线系统时，系统800可以包括适合于通过有线通信介质（诸如输入/输出（I/O）适配器、将I/O适配器与相对应的有线通信介质连接的物理连接器、网络接口卡（NIC）、盘控制器、视频控制器、音频控制器等）通信的组件和接口。有线通信介质的示例可以包括导线、电缆、金属线、印刷电路板（PCB）、背板、交换光纤、半导体材料、双绞线、同轴电缆、光纤等。
平台802可以建立一个或多个逻辑或物理信道以传达信息。信息可以包括媒体信息和控制信息。媒体信息可以指任何表示为用户准备的内容的数据。内容的示例可以包括，例如，来自语音对话的数据、视频会议、流视频、电子邮件（email）消息、语音邮件消息、字母数字符号、图形、图像、视频、文本等。来自语音对话的数据可以是，例如，发言信息、沉默期、背景噪音、舒适噪音、音质等。控制信息可以指任何表示为自动系统准备的命令、指令或控制字的数据。例如，控制信息可以用来路由媒体信息通过系统，或指令节点以预定的方式处理媒体信息。然而实施例不限于图8中示出或描述的元素或上下文。
图9是图8中的系统800可以体现于其中的小形式因子设备900的示意图。类似标记的项目现在参考图8予以描述。例如，在一些实施例中，设备900实现为具有无线能力的移动计算设备。移动计算设备可以指任何具有处理系统和移动电力源或供应（例如诸如一个或多个电池）的设备。
如以上描述的，移动计算设备的示例可以包括个人计算机（PC）、膝上型计算机、超级膝上型计算机、平板机、触摸垫、便携式计算机、手持式计算机、掌上型计算机、个人数字助理（PDA）、蜂窝电话、组合蜂窝电话/PDA、电视、智能设备（例如智能电话、智能平板机或智能电视）、移动互联网设备（MID）、消息收发设备、数据通信设备等。
移动计算设备的示例还可以包括安排为由人佩戴的计算机，诸如腕式计算机、指式计算机、环式计算机、眼镜计算机、带扣计算机、臂环计算机、鞋式计算机、衣式计算机或任何其它适合类型的可佩戴计算机。例如，移动计算设备可以实现为能够执行计算机应用及语音通信和/或数据通信的智能电话。尽管一些实施例可以用作为示例实现为智能电话的移动计算设备描述，但应理解，其它实施例也可以使用其它无线移动计算设备实现。
如图9中所示，设备900可以包括外壳902、显示904、输入/输出（I/O）设备906和天线908。设备900还可以包括导航特征910。显示904可以包括用于显示适合于移动计算设备的信息的任何适合的显示单元。I/O设备906可以包括用于将信息输入进移动计算设备的任何适合的I/O设备。例如，I/O设备906可以包括字母数字键盘、数字小键盘、触摸垫、输入建、按钮、开关、翘板开关、话筒、扬声器、语音识别设备和软件等。信息还可以通过话筒的方式输入进设备900中。这样的信息可以通过语音识别设备数字化。
示例1
此处描述了用于使用变更区域的媒体编码的方法。方法包括检测桌面的任何变更区域和静态部分。变更区域可以被编码并与它们的变更区域位置值一起发送给合成引擎。变更区域可以被解码并使用变更区域位置值与静态部分合成。
可以将变更区域和变更区域位置值发送给位于远程适配器上的合成引擎。另外，可以对变更区域加密和解密。而且，合成引擎可以位于检测到桌面的变更区域和静态部分的计算设备上。在实施例中，变更区域可以通过检查背面缓冲区来检测，且可以将变更区域和变更区域位置发送给远程适配器。
编码可以包括如果变更区域位置值不匹配先前的变更区域位置值时根据I-frame编码。编码还可以包括如果变更区域位置值匹配先前的变更区域位置时根据I-frame或P-frame编码。方法还可包括迭代地编码、解码和合成多个变更区域。另外，媒体应用可以使用轮询、推送、拉取或计时器来合成图像信息。
示例2
此处描述了计算设备。计算设备包括配置为执行所存储的指令的中央处理单元（CPU）和存储指令的存储设备。存储设备包括处理器可执行代码，其当由CPU执行时被配置为检测计算设备的桌面的任何区域和静态部分。可以对变更区域编码。另外，可以将变更区域和它们的位置值发送给合成引擎。变更区域可以被解码并使用变更区域位置值与静态部分合成。
处理器可执行代码可以配置为加密和解密变更区域。合成引擎可以位于远程适配器上，且变更区域可以在远程适配器处解码。计算设备可以配置为通过检查背面缓冲区来检测变更区域，且可以将变更区域和变更区域位置值发送给远程适配器。计算设备还可以配置为如果变更区域位置值不匹配先前的变更区域位置值时根据I-frame编码。计算设备还可以配置为如果变更区域位置值匹配先前的变更区域位置值时根据I-frame或P-frame编码。计算设备还可以配置为迭代地编码、解码和合成多个变更区域。另外，计算设备还可以配置为轮询、推送、拉取或使用计时器来合成来自媒体应用的图像信息。计算设备还可以包括无线电和显示，且无线电和显示可以至少通信地耦合到中央处理单元。
示例3
此处描述了至少一种具有存储于其中的指令的非瞬态机器可读介质。响应于在计算设备上执行，指令导致计算设备检测计算设备的桌面的任何变更区域和静态部分。可以对变更区域编码。指令还可以导致计算设备将变更区域和它们的变更区域位置值发送到合成引擎。变更区域可以被解码并使用变更区域位置值与桌面的静态部分合成。
可以将变更区域和它们的变更区域位置值发送到合成引擎，且合成引擎可以位于远程适配器上。可以在远程适配器处对变更区域解码。另外，可以对变更区域加密和解密。
应理解，前述示例中的细节可以用在一个或多个实施例中任何地方。例如，以上描述的计算设备的所有可选特征还可以相关于此处描述的方法或计算机可读介质的任何一个而实现。而且，尽管此处可能使用了流程图和/或状态图来描述实施例，本发明不限于那些图或此处的相对应描述。例如，流程不需要移动通过每个示出的框或状态或者按如此处示出和描绘的严格相同的顺序。
本发明不限于此处列出的特定细节。实际上，受益于本公开的本领域内技术人员将理解，许多来自前述描述和附图的其它变体可以在本发明的范围之内进行。相应地，是包括其任何修改的权利要求书定义了本发明的范围。

Claims (23)

1.一种用于使用变更区域的媒体编码的方法，所述方法包括：
检测计算设备的桌面的任何变更区域和静态部分；
确定变更区域的量；以及
响应于所述变更区域的量对所述变更区域编码。
2.如权利要求1所述的方法，其特征在于，包括：
将所述变更区域和变更区域位置值发送到合成引擎；
对所述变更区域解码；以及
使用所述变更区域位置值将所述变更区域与所述桌面的静态部分合成。
3.如权利要求1所述的方法，其特征在于，每个变更区域是在区域内的变更像素的数量大于预定阈值时检测到的。
4.如权利要求1所述的方法，其特征在于，包括：
将所述变更区域和任何变更区域位置值发送到合成引擎，其中所述合成引擎位于远程适配器上；以及
在所述远程适配器处对所述变更区域解码。
5.如权利要求1所述的方法，其特征在于，所述合成引擎位于检测到所述桌面的所述变更区域和所述静态部分的所述计算设备上。
6.如权利要求1所述的方法，其特征在于，还包括：
通过检查背面缓冲区检测所述变更区域；
将所述变更区域和任何变更区域位置发送到远程适配器。
7.如权利要求1所述的方法，其特征在于，包括响应于变更区域位置值不匹配先前的变更区域位置值根据I-frame进行编码。
8.如权利要求1所述的方法，其特征在于，包括响应于变更区域位置值匹配先前的变更区域位置值根据I-frame或P-frame进行编码。
9.如权利要求1所述的方法，其特征在于，包括迭代地检测、确定和编码变更区域。
10.一种计算设备，所述设备包括：
配置为检测桌面的任何变更区域和静态部分的检测器；
配置为执行所存储的指令的中央处理单元（CPU）和存储指令的存储设备，其中所述存储设备包括处理器可执行代码，所述代码在由所述CPU执行时被配置为：
确定变更区域的量；以及
配置为响应于所述变更区域的量对所述变更区域编码的编码器。
11.如权利要求10所述的计算设备，其特征在于，所述处理器可执行代码在由所述CPU执行时被配置为：
将所述变更区域和变更区域位置值发送到合成引擎；
对所述变更区域解码；以及
使用所述变更区域位置值将所述变更区域与所述桌面的静态部分合成。
12.如权利要求10所述的计算设备，其特征在于，每个变更区域是在区域内的变更像素的数量大于预定阈值时检测到的。
13.如权利要求10所述的计算设备，其特征在于，所述处理器可执行代码在由所述CPU执行时被配置为：
将所述变更区域和任何变更区域位置值发送到合成引擎，其中所述合成引擎位于远程适配器上；以及
在所述远程适配器处对所述变更区域解码。
14.如权利要求10所述的计算设备，其特征在于，还包括合成引擎。
15.如权利要求10所述的计算设备，其特征在于，所述计算设备被配置为：
通过检查背面缓冲区检测所述变更区域；
将所述变更区域和任何变更区域位置值发送到远程适配器。
16.如权利要求10所述的计算设备，其特征在于，所述计算设备被配置为响应于变更区域位置值不匹配先前的变更区域位置值根据I-frame进行编码。
17.如权利要求10所述的计算设备，其特征在于，所述计算设备被配置为响应于变更区域位置值匹配先前的变更区域位置值根据I-frame或P-frame进行编码。
18.如权利要求10所述的计算设备，其特征在于，所述计算设备被配置为迭代地检测、确定和编码变更区域。
19.如权利要求10所述的计算设备，其特征在于，所述计算设备被配置为轮询、推送、拉取或使用计时器来合成来自媒体应用的图像信息。
20.如权利要求10所述的计算设备，其特征在于，还包括无线电和显示，所述无线电和显示至少通信地耦合到所述中央处理单元。
21.具有指令存储于其中的至少一种机器可读介质，所述指令响应于在计算设备上的执行导致所述计算设备：
检测所述计算设备的桌面的任何变更区域和静态部分；
确定变更区域的量；以及
响应于所述变更区域的量对所述变更区域编码。
22.如权利要求21所述的至少一种机器可读介质，所述介质具有指令存储于其中，所述指令响应于在计算设备上的执行导致所述计算设备：
将所述变更区域和变更区域位置值发送到合成引擎；
对所述变更区域解码；以及
使用所述变更区域位置值将所述变更区域与所述桌面的静态部分合成。
23.如权利要求21所述的至少一种机器可读介质，其特征在于，每个变更区域是在区域内的变更像素的数量大于预定阈值时检测到的。
CN201380001941.0A 2012-08-07 2013-06-13 使用变更区域的媒体编码 Active CN103797805B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/568,703 US9424660B2 (en) 2012-08-07 2012-08-07 Media encoding using changed regions
US13/568,703 2012-08-07
PCT/US2013/045662 WO2014025452A1 (en) 2012-08-07 2013-06-13 Media encoding using changed regions

Publications (2)

Publication Number Publication Date
CN103797805A true CN103797805A (zh) 2014-05-14
CN103797805B CN103797805B (zh) 2018-02-23

Family

ID=50065874

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380001941.0A Active CN103797805B (zh) 2012-08-07 2013-06-13 使用变更区域的媒体编码

Country Status (6)

Country Link
US (2) US9424660B2 (zh)
EP (1) EP2883360A4 (zh)
JP (1) JP2014528209A (zh)
KR (1) KR101646958B1 (zh)
CN (1) CN103797805B (zh)
WO (1) WO2014025452A1 (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9424660B2 (en) 2012-08-07 2016-08-23 Intel Corporation Media encoding using changed regions
US9024995B2 (en) * 2012-08-09 2015-05-05 Samsung Electronics Co., Ltd. Video calling using a remote camera device to stream video to a local endpoint host acting as a proxy
US9232177B2 (en) * 2013-07-12 2016-01-05 Intel Corporation Video chat data processing
KR102143618B1 (ko) * 2014-01-17 2020-08-11 삼성전자주식회사 프레임률 제어 방법 및 그 전자 장치
EP3177024B1 (en) * 2014-07-30 2020-02-26 Sk Planet Co., Ltd. Apparatus for cloud streaming service
US9872028B2 (en) * 2015-06-26 2018-01-16 Intel Corporation Wireless display adaptations and optimizations based on unfiltered and regional feedback
US20170105023A1 (en) * 2015-10-08 2017-04-13 Qualcomm Incorporated Signaling of updated video regions
CN105681791B (zh) * 2016-01-18 2019-03-26 武汉理工大学 自适应远程桌面传输方法与系统
JP6907888B2 (ja) * 2017-10-30 2021-07-21 富士通株式会社 情報処理システム、情報処理装置および情報処理プログラム
CN111369561B (zh) * 2020-05-26 2020-09-08 北京小米移动软件有限公司 图像处理方法及装置、电子设备、存储介质
KR20220005274A (ko) * 2020-07-06 2022-01-13 삼성전자주식회사 전자 장치에서 무선 통신 효율을 개선하기 위한 방법 및 그 장치
CN117280378A (zh) 2021-07-13 2023-12-22 三星电子株式会社 用于在图形显示器上渲染差分视频的系统和方法
CN114897918B (zh) * 2022-07-13 2022-09-27 南通同欧智能装备科技有限公司 基于人工智能的光伏清洁机器人毛刷功率调整方法及系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070122039A (ko) * 2006-06-23 2007-12-28 주식회사 케이티프리텔 무선 서비스 페이지 제공 방법 및 시스템
CN201226563Y (zh) * 2008-05-26 2009-04-22 北京银河伟业数字技术有限公司 画面分割的视频输入装置
US20100118972A1 (en) * 2008-11-10 2010-05-13 Activevideo Networks, Inc. System, Method, and Computer Program Product for Translating an Element of a Static Encoded Image in the Encoded Domain
KR101017866B1 (ko) * 2010-09-08 2011-03-04 주식회사 텔레칩스 네비게이션을 이용한 휴대단말기 제어 방법
US20110141133A1 (en) * 2009-12-10 2011-06-16 Microsoft Corporation Real-Time Compression With GPU/CPU
US20110150433A1 (en) * 2009-12-22 2011-06-23 Albert Alexandrov Systems and methods for video-aware screen capture and compression
US20120154426A1 (en) * 2008-04-17 2012-06-21 Microsoft Corporation Displaying User Interface Elements Having Transparent Effects

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06153180A (ja) * 1992-09-16 1994-05-31 Fujitsu Ltd 画像データ符号化方法及び装置
US6438575B1 (en) 2000-06-07 2002-08-20 Clickmarks, Inc. System, method, and article of manufacture for wireless enablement of the world wide web using a wireless gateway
US7852342B2 (en) 2004-10-14 2010-12-14 Microsoft Corporation Remote client graphics rendering
TWI295438B (en) 2005-05-11 2008-04-01 Newsoft Technology Corp Method, system and receiving apparatus for transmitting screen frame from one to many terminals
CN2824474Y (zh) 2005-10-19 2006-10-04 吉乐宝科技股份有限公司 无线汽车显示装置
US8487956B2 (en) * 2005-11-29 2013-07-16 Kyocera Corporation Communication terminal, system and display method to adaptively update a displayed image
US8115708B2 (en) 2005-12-02 2012-02-14 Intel Corporation System and method for the prevention of display burn-in
US8428125B2 (en) * 2006-12-22 2013-04-23 Qualcomm Incorporated Techniques for content adaptive video frame slicing and non-uniform access unit coding
US7865572B2 (en) 2007-01-08 2011-01-04 Mspot, Inc. Method and apparatus for transferring digital content from a personal computer to a mobile handset
GB0703695D0 (en) 2007-02-26 2007-04-04 The Technology Partnership Plc A Device for Receiving Digital Broadcasts
US20090097546A1 (en) * 2007-10-10 2009-04-16 Chang-Hyun Lee System and method for enhanced video communication using real-time scene-change detection for control of moving-picture encoding data rate
JP5446878B2 (ja) 2008-02-14 2014-03-19 日本電気株式会社 更新領域検出装置
US8533313B2 (en) 2008-10-01 2013-09-10 Binu Pty Ltd Systems, methods, and computer readable media for providing applications style functionality to a user
CN101404752A (zh) 2008-10-13 2009-04-08 深圳创维－Rgb电子有限公司 一种用于局域网内的视频点播系统
US8687702B2 (en) 2008-10-27 2014-04-01 Advanced Micro Devices, Inc. Remote transmission and display of video data using standard H.264-based video codecs
US8254704B2 (en) 2008-10-30 2012-08-28 Microsoft Corporation Remote computing platforms providing high-fidelity display and interactivity for clients
JP2010171876A (ja) 2009-01-26 2010-08-05 Yamaha Corp 通信装置及び通信システム
CN101964860A (zh) 2009-07-23 2011-02-02 孙博雅 家庭影院服务器
US20110099591A1 (en) 2009-10-28 2011-04-28 Men Long Secure wireless pairing of digital tv short-range transmitter and receiver
JP5723888B2 (ja) 2009-12-04 2015-05-27 ソニック アイピー， インコーポレイテッド 基本ビットストリーム暗号材料伝送システムおよび方法
CN102148843A (zh) 2010-02-05 2011-08-10 腾讯科技（深圳）有限公司 异步下载系统及方法
JP5471903B2 (ja) 2010-07-01 2014-04-16 富士通株式会社 情報処理装置、画像送信プログラム及び画像表示方法
US20120042275A1 (en) 2010-08-10 2012-02-16 Microsoft Corporation Cloning specific windows on a wireless display surface
JP5720211B2 (ja) 2010-12-03 2015-05-20 富士通株式会社 情報処理装置、情報処理方法および情報処理プログラム
CN102377823B (zh) 2011-10-18 2013-12-25 北京优朋普乐科技有限公司 一种通过滑屏实现多屏多用户之间互动分享的方法及系统
US20140010367A1 (en) 2012-07-05 2014-01-09 Changliang Wang Systems and methods for providing content to a wireless display screen
US9424660B2 (en) 2012-08-07 2016-08-23 Intel Corporation Media encoding using changed regions
WO2014029076A1 (en) 2012-08-21 2014-02-27 Intel Corporation Widi cloud mode

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070122039A (ko) * 2006-06-23 2007-12-28 주식회사 케이티프리텔 무선 서비스 페이지 제공 방법 및 시스템
US20120154426A1 (en) * 2008-04-17 2012-06-21 Microsoft Corporation Displaying User Interface Elements Having Transparent Effects
CN201226563Y (zh) * 2008-05-26 2009-04-22 北京银河伟业数字技术有限公司 画面分割的视频输入装置
US20100118972A1 (en) * 2008-11-10 2010-05-13 Activevideo Networks, Inc. System, Method, and Computer Program Product for Translating an Element of a Static Encoded Image in the Encoded Domain
US20110141133A1 (en) * 2009-12-10 2011-06-16 Microsoft Corporation Real-Time Compression With GPU/CPU
US20110150433A1 (en) * 2009-12-22 2011-06-23 Albert Alexandrov Systems and methods for video-aware screen capture and compression
KR101017866B1 (ko) * 2010-09-08 2011-03-04 주식회사 텔레칩스 네비게이션을 이용한 휴대단말기 제어 방법

Also Published As

Publication number Publication date
CN103797805B (zh) 2018-02-23
EP2883360A4 (en) 2016-04-13
US10257510B2 (en) 2019-04-09
JP2014528209A (ja) 2014-10-23
KR101646958B1 (ko) 2016-08-09
KR20140044840A (ko) 2014-04-15
US9424660B2 (en) 2016-08-23
EP2883360A1 (en) 2015-06-17
WO2014025452A1 (en) 2014-02-13
US20160353101A1 (en) 2016-12-01
US20140043358A1 (en) 2014-02-13

Similar Documents

Publication Publication Date Title
CN103797805A (zh) 使用变更区域的媒体编码
TWI528787B (zh) 用於管理視訊串流之技術
TWI513316B (zh) 轉碼視頻資料之技術
CN103416002B (zh) 视频位流中的渲染定向信息
KR20190015093A (ko) 향상된 비디오 코딩을 위한 참조 프레임 재투영
CN107920251A (zh) 基于观看者到显示器的距离来调整视频质量的方法和系统
CN103577269A (zh) 媒体工作负荷调度器
CN109196865B (zh) 一种数据处理方法、终端以及存储介质
CN109845275A (zh) 用于视场虚拟现实流传输的会话控制支持的方法和装置
CN105025349B (zh) 加密的投屏
KR102566276B1 (ko) 원격 단말을 위한 몰입형 원격 회의 및 텔레프레즌스를 위한 오버레이 처리용 파라미터
US20110314173A1 (en) System and method for mirroring a portable device over remote display
US20220172440A1 (en) Extended field of view generation for split-rendering for virtual reality streaming
KR20140099299A (ko) 프레임 레벨 등급에 근거한 비디오 콘텐츠의 재생
US20240153148A1 (en) Partial access metadata for video-based point cloud compression data
CN111010588A (zh) 直播处理方法、装置、存储介质及设备
CN104429045B (zh) 用于WiDi云模式的方法和装置
CN111478915A (zh) 直播数据的推流方法、装置、终端及存储介质
US11212442B2 (en) Creation and display of a 360 degree looping video file
CN116170629A (zh) 一种传输码流的方法、电子设备及计算机可读存储介质
TWI539795B (zh) 使用變化區域的媒體編碼
US20240022700A1 (en) Immersive display controller interface
US20220109856A1 (en) Access of essential video coding (evc) slices in a file
CN117671198A (zh) 图像处理方法、装置、设备、存储介质及程序产品
CN116761021A (zh) 图像处理方法和电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant