CN107258086B - 针对汇显示器的静态帧图像质量改进的方法、装置及系统 - Google Patents

针对汇显示器的静态帧图像质量改进的方法、装置及系统 Download PDF

Info

Publication number
CN107258086B
CN107258086B CN201680011013.6A CN201680011013A CN107258086B CN 107258086 B CN107258086 B CN 107258086B CN 201680011013 A CN201680011013 A CN 201680011013A CN 107258086 B CN107258086 B CN 107258086B
Authority
CN
China
Prior art keywords
frame
image frame
display
image
sink
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201680011013.6A
Other languages
English (en)
Other versions
CN107258086A (zh
Inventor
S·J·劳伦斯
R·安咖迪玛尼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN107258086A publication Critical patent/CN107258086A/zh
Application granted granted Critical
Publication of CN107258086B publication Critical patent/CN107258086B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006—Details of the interface to the display terminal
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39—Control of the bit-mapped memory
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/363—Graphics controllers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4408—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video stream encryption, e.g. re-encrypting a decrypted video stream for redistribution in a home network
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/02—Handling of images in compressed format, e.g. JPEG, MPEG
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/12—Frame memory handling
    • G09G2360/127—Updating a frame memory using a transfer of data from a source area to a destination area
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/18—Use of a frame buffer in a display terminal, inclusive of the display panel
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/10—Use of a protocol of communication by packets in interfaces along the display data pipeline
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/12—Use of DVI or HDMI protocol in interfaces along the display data pipeline
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/16—Use of wireless transmission of display information

Abstract

描述了一种或多种用于改进具有在汇显示器上的帧缓冲器中相对较长驻留时间的静态图像帧的质量的系统、装置、方法以及计算机可读介质。在压缩数据信道链接源和汇的情况下，所述源可以对附加帧数据进行编码以用于改进由汇显示器呈现的静态帧的质量。显示源可以以标称质量对帧数据进行编码并且传输所述压缩帧数据的分组流。在没有及时的帧缓冲器更新的情况下，所述显示源对附加信息进行编码以用于改进现有静态帧的表示的图像质量。显示汇设备以标称图像质量呈现所述帧的第一表示，并且在随后接收到所述帧质量改进数据之后即以所述改进的图像质量呈现所述帧的第二表示。

Description

针对汇显示器的静态帧图像质量改进的方法、装置及系统
优先权声明
本申请要求于2015年3月18日提交的名称为“STATIC FRAME IMAGE QUALITYIMPROVEMENT FOR SINK DISPLAYS(针对汇显示器的静态帧图像质量改进)”的美国非临时专利申请序列号14/661,991的优先权，并且所述美国非临时专利申请通过引用以其全文结合在此用于所有目的。
背景技术
在无线或有线数据信道带宽不足的情况下，可以对图像帧进行编码，以便以未压缩格式及时地发送帧数据。根据可用信道比特率，可以对给出的帧进行压缩以便提供较高或较低质量的表示。
随着移动设备的增长以及无线网络的盛行，无线显示能力正处于快速增长。在无线显示技术中，源设备与汇(sink)显示设备之间的无线链路代替了计算机和监视器之间的典型的数据线。无线显示协议通常是对等的或“直连的”，并且大多数的使用模型具有传输有待由一个或多个外部显示器或监视器接收并显示的媒体内容的可移动设备。例如在典型的屏幕录制应用中，智能电话无线地耦合至一个或多个外部监视器、显示面板、电视、投影仪等。
已经制定出用于通过具有足够带宽的无线局域网传输经压缩图形/视频数据和音频数据流的无线显示规范(例如，由Intel公司制定的WiDi v3.5、以及来自Wi-Fi联盟的Miracast程序的Wi-Fi Display v1.0或WFD)。例如，当前利用WiFi技术(例如，2.4GHz和5GHz无线电频带)的无线显示技术能够流送经编码的全高清(HD)视频数据以及高保真音频数据(例如，5.1环绕声)。
在许多应用和用例中，从源到汇的帧更新可能突发地到达，其中，根据可变的显示缓冲器更新频率，一些帧比其他帧持续显示缓冲器更长时间。例如，在将源设备上活动的GUI屏幕录制至汇显示设备的情况下，如果在源设备上执行的图形栈仅在需要时将GUI的新帧渲染至显示缓冲器以适应场景变化(例如，光标移动等)，则可节省源设备功率。然后，给出的帧可以在显示缓冲器中持续多个屏幕刷新周期。因此，源向汇显示设备提供这种静态帧的方式可以影响用户对源和汇设备的感知和体验。
附图说明
在附图中通过举例而非限制的方式展示了在此所描述的材料。为了图示的简明和清晰，图中所展示的元件不一定按比例绘制。例如，为清楚起见，一些元件的尺寸相对于其他元件可能被放大了。进一步，在认为适当的情况下，在附图之间对参考标记加以重复以表示相应的或相似的元件。在附图中：
图1A是示意图，根据一些实施例描绘了包括静态帧质量改进模块的源设备；
图1B是示意图，根据一些实施例描绘了包括与汇显示设备无线地链接的源设备的无线显示系统；
图2A是流程图，根据一些实施例描绘了一种用于静态帧质量改进的方法；
图2B是流程图，根据一些实施例描绘了一种用于通过对一个或多个附加 P帧进行编码而迭代地改进静态帧质量的方法；
图3A、3B、3C和3D是简图，根据一些实施例展示了帧生成、源呈现、压缩以及汇呈现；
图4A和4B是示意图，根据一些实施例展示了在在PSR-IQ模式和正常模式期间从源设备处传输或由汇设备接收的一系列图像帧；
图5是示意图，根据一些实施例展示了一种用于从PSR-IQ模式返回至正常源/汇模式的方法；
图6是根据实施例的可在PSR-IQ模式下操作的源设备的功能框图；
图7是根据一些实施例的数据处理系统的框图；
图8是根据一些实施例的包括PSR-IQ模块的示例性超低功率系统的简图；并且
图9是根据一些实施例安排的示例性移动手持平台的简图。
具体实施方式
参照附图描述一个或多个实施例。虽然对特定配置和安排进行了详细的描绘和讨论，但应理解，这仅出于说明目的来进行。相关领域的技术人员将认识到，在不背离本描述的精神和范围的情况下其他配置和安排是可能的。将对相关领域的技术人员明显的是，在此描述的技术和/或安排可以在在此详细描述的系统和应用之外的各种各样的其他系统和应用中被采用。
在以下详细的说明书中对附图进行参照，所述附图形成说明书的一部分并且展示了示例性实施例。进一步，应当理解，在不背离要求保护的主题的范围的情况下，可以利用其他实施例并且可以做出结构和/或逻辑变化。因此，以下详细说明不应以限制的含义来理解并且要求保护的主题的范围仅由所附权利要求书及其等效物来限定。
在以下描述中，陈述了许多细节，然而，将对本领域技术人员明显的是，实施例可以在没有限制特定细节的情况下被实践。以框图形式而非详细地示出了众所周知的方法和设备，以避免模糊更显著的方面。贯穿本说明书对“实施例(an embodiment)”或“一个实施例(one embodiment)”的引用意味着在至少一个实施例中包括了与所述实施例结合描述的具体特征、结构、功能或特性。因此，贯穿本说明书在各处出现的短语“在实施例中(in anembodiment)”或在“在一个实施例中(in one embodiment)”并非必须指同一个实施例。此外，在实施例的上下文中描述的具体特征、结构、功能或特性可以用任何适当的方式组合在一个或多个实施例中。例如，第一实施例可以与第二实施例在任何地方进行组合，其中，与这两个实施例相关联的具体特征、结构、功能或特性不相互排斥。
如在示例性实施例和所附的权利要求的说明中所使用的，除非上下文明确表明其他，否则单数形式“一(a)”、“一个(an)”和“所述(the)”旨在用于同样包括复数形式。还将理解的是，如在此使用的术语“和/或”指代并且包括相关联的列举项的一个或多个项的任何和所有可能组合。
如贯穿说明书并且在权利要求书中使用的，由术语“的至少一个(at least oneof)”或“的一个或多个(one or more of)”联接的项列表可以意味着所例举的项的任何组合。例如，短语“A、B或C中的至少一项”可意指A；B； C；A和B；A和C；B和C；或A、B和C。
术语“耦合”和“连接”连同其衍生词在此可以用于描述部件之间的功能关系或结构关系。应当理解，这些术语并非旨在作为彼此的同义词。相反，在具体实施例中，“连接”可以用于指示两个或更多个元件彼此直接进行物理的、光学的或电学的接触。“耦合”可以用于指示两个或更多个元件彼此进行直接的或间接的(在它们之间具有介入元件)物理的、光学的或电学的接触，和/ 或指示两个或更多个元件彼此合作或交互(例如，由于因果关系的原因)。
就对计算机存储器内的数据比特进行的操作的算法和符号表示而言，呈现在此提供的详细说明书的一些部分。如从以下讨论中明显的是，除非另外特别声明，否则应认识到，贯穿本说明书，使用如“运算(calculating)”、“计算(computing)”、“确定(determining)”、“估计(estimating)”、“存储(storing)”、“收集(collecting)”“显示(displaying)”、“接收(receiving)”、“合并(consolidating)”、“生成(generating)”、“更新(updating)”等术语的讨论是指计算机系统或类似电子计算设备的动作和过程，所述计算机系统或类似电子计算设备对表示为计算机系统的包括寄存器和存储器的电路中的物理(电子)量的数据进行操纵并且将其转换成类似地表示为计算机系统存储器或寄存器或其他此类信息存储设备、传输或显示设备中的物理量的其他数据。
虽然以下描述阐述可以在如例如片上系统(SoC)架构的架构中显现，在此描述的技术和/或安排的实施方式不局限于具体的架构和/或计算系统，并且出于类似目的可以由任何架构和/或计算系统实现。采用例如多个集成电路(IC) 芯片和/或封装体、和/或各种计算设备和/或消费电子产品(CE)设备(如机顶盒、智能电话等)的各架构可以实现在此描述的技术和/或安排。此外，虽然以下描述可以阐述许多特定的细节(如逻辑实现、系统部件的类型和内在关系、逻辑划分/集成选择等)，但要求保护的主题可以在没有所述特定细节的情况下被实践。此外，可以不详细示出某些材料(如，例如，控制结构和完整的软件指令序列)，以便不模糊在此公开的材料。
在此公开的材料的某些部分可以是在硬件(例如，如图像处理器中的逻辑电路)中实现的。某些其他部分可以在硬件、固件、软件、或其任何组合中实现。在此公开的至少部分材料还可以被实现为存储于机器可读介质上的指令，所述指令可以被一个或多个处理器(图形处理器和/或中央处理器)读取或执行。机器可读介质可以包括用于存储或传输具有由机器(例如，计算设备)可读的形式的信息的任何介质和/或机制。例如，机器可读介质可包括：只读存储器 (ROM)；随机存取存储器(RAM)；磁盘存储介质；光存储介质；闪存设备；电气、光学、声学或其他类似的非瞬态、有形介质。
源设备通常有能力进入面板自刷新(PSR)模式，在所述面板自刷新模式下，在没有图像帧缓冲器更新的情况下，源显示器屏幕将在多个刷新周期上重复地表示静态帧。同样地，当源由需要数据压缩的信道(如但不限于无线连接 (例如，WiDi))链接至汇时，在没有另外的图像帧缓冲器更新的情况下，源可以进入PSR模式并且暂停经编码帧传输至汇。在源停止帧传输的情况下，汇可以继续渲染和/或显示由源发送至汇的最后一帧(例如，最后帧的汇显示器自刷新)。然而，因为汇接收经编码的帧数据，任何给出帧的表示的质量都可以是相对低的图像质量，这在扩展的帧持续性的情况下对用户来说是显而易见的。
以下描述了用于改进具有在汇显示帧缓冲器中相对较长驻留时间的静态图像(图形)帧的质量的示例性系统、方法以及计算机可读介质。在压缩数据信道链接源和汇的情况下，所述源可以对附加帧数据进行编码以用于改进由汇显示器呈现的静态帧的质量。如在此所使用的，在汇上的“静态”帧表示由源生成和/或存储(例如，存储于源帧缓冲器中)的单个帧。依据本文的一些实施例，从用户的角度来看，在帧由汇设备呈现的持续时间内对静态帧进行的增量改进保留了静态帧的持续性质(例如，汇显示帧具有为在源设备上静态地保持的同一场景的表现)。然而，利用将质量改进传输至汇的静态帧来至少部分地回填在源与汇之间的场景变化数据传输中的瞬时下降。同样地，用户可以感知在汇显示器上的与呈现在源显示器上的未压缩表示更密切匹配的静态场景。
在一些实施例中，显示源以标称图像质量对帧进行编码并且传输包括压缩帧数据的有效载荷的分组流。在没有及时的帧缓冲器更新的情况下，显示源对附加信息进行编码以改进当前静态帧的表示的质量。显示汇设备以标称图像质量来呈现静态帧的第一表示，并且在随后接收到帧质量改进数据之后即以改进的图像质量来呈现静态帧的第二表示。通过对在源设备处的最后的编码帧的数据进行适当地补充，接收设备仅需要与标准化编解码兼容，从而使得显示设备能够独立于由源设备实现的静态图像质量改进算法。
图1A是示意图，根据一些实施例描绘了包括静态帧质量改进模块109的源设备105。源设备105进一步包括耦合至帧缓冲器110的帧缓冲器控制器107。帧缓冲器110可以具有任何已知的帧缓冲器架构，如但不限于双重(乒乓)缓冲器、三重缓冲器等。帧缓冲器控制器107用于将屏幕变化通知或“翻转”输出至帧缓冲器110。源设备105进一步包括帧数据编码器122。编码器122用于从帧缓冲器108中接收或获取数字图像或图形帧。编码器122用于输出表示输入帧的原始压缩(编码)数字图像(图形)帧数据流。对所述流进行分组生成了压缩帧数据有效载荷140以供传输至汇设备150。
编码器122继续处于“正常”操作模式，直到静态帧质量改进模块109 确定或检测到帧在缓冲器110中已经持续了足够长的时间，以便有资格作为“静态”帧。在一些实施例中，帧持续性是通过监测输出屏幕变化通知来量化的。例如，如果在阈值期间内尚未发生屏幕变化通知，则当前存储在帧缓冲器110 上的帧被视为静态帧。不管采用的静态帧检测技术如何，在检测到静态帧状态的情况下，静态帧质量改进模块109进入“改进质量”(IQ)操作模式。当处于IQ模式时，模块109向编码器122输出控制信号以使得对静态帧的表示进行编码的附加数据作为附加压缩帧有效载荷140而在源处生成和/或发送至汇设备。
因此，源设备105以两种模式进行操作：当帧缓冲器更新满足预定频率阈值时以正常模式操作，并且当帧缓冲器更新不能满足所述阈值时以IQ模式进行操作。当处于IQ模式时，由编码器122输出的质量改进数据用于增加对静态帧的表示进行编码的比特数量。在正常模式期间输出的一个或多个压缩帧有效载荷140在帧被确定为静态之前提供标称质量的初始帧表示的示例性实施例中，在IQ模式期间输出一个或多个附加压缩帧有效载荷140以在帧被确定为静态之后提供更高质量的后续帧表示。
图1B是示意图，根据一些实施例描绘了无线显示系统102，无线显示系统包括与汇显示设备150无线链接的源设备105的一个示例性实现方式。在源与汇显示器之间通过电线导管发送压缩视频帧数据的类似架构可以用于替代性系统。在系统102中，通过用虚线展示的无线链路将源设备105直接地耦合或“配对”至显示(汇)设备150。源设备105可以是可操作用于编码和无线地传输数据的任何设备。在展示性实施例中，源设备105执行可操作用于实现用户界面(UI)104的操作系统(OS)106，可以通过所述用户界面来接收用户输入。OS106通信地耦合至图形栈108。图形栈108可以包括一个和多个图形流水线模块，可以在图形帧中使用本领域中已知的任何技术通过所述图形流水线模块来渲染图形对象。例如，图形栈108可以由源装置105执行以生成图形图元和/或顶点，执行顶点着色、镶嵌、纹理和/或像素着色。在一些实施例中，图形栈108进一步包括帧缓冲器控制器。图形栈108可以将渲染的图形帧输出至帧缓冲器110。
在所展示的实施例中，帧缓冲器110的输出耦合至显示面板116的输入，所述显示面板在一个实施例中是源设备105的嵌入式显示器。在正常操作模式期间，写入帧缓冲器110的更新被输出至显示面板116。源设备进一步包括面板自刷新(PSR)控制模块114，所述控制模块可操作用于在源PSR模式期间响应于从图形栈108输出的图形帧中的暂停而利用存储于帧缓存器110中的静态帧来刷新显示面板116的输出。在正常模式或PSR模式下，可以以某些显示刷新速率(例如，其可以在30Hz与1kHz之间变化)来刷新显示面板116。
帧缓冲器110的输出进一步耦合至编码器122。在说明性实施例中，编码器122是传输协议栈120的可操作用于实现和/或遵循一个或多个无线高清媒体接口(HDMI)协议的一部分，如但不限于无线家庭数字接口(WHDI)、无线显示(WiDi)、Wi-Fi直连、Miracast、WirelessHD或无线千兆比特联盟(WiGig) 认证程序。
编码器122用于输出作为由图形栈108生成的帧的表示的压缩图形帧数据流。编码器122可以实现已知执行转换、量化、运动补偿预测、环路滤波等中的一项或多项的任何编解码。在一些实施例中，编码器122遵循由运动图像专家组(MPEG)维护的一条或多条规范(如但不限于MPEG-1(1993)、MPEG-2 (1995)、MPEG-4(1998))、以及相关联的国际标准化组织/国际电工委员会联合技术委员会(ISO/IEC)规范。在一些示例性实施例中，编码器122遵循H.264/MPEG-4AVC标准、HEVC标准、VP8标准、VP9标准规范中的一条或多条。
编码器122的输出耦合至包括用于重构或存储参考帧表示的解码器和图片缓冲器124的本地解码环路上。编码器122的输出进一步耦合至多路复用器 126的输入，所述多路复用器用于将由编码器122生成的一个或多个经编码的基础流处理成更高级的分组流。在一些实施例中，多路复用器126将分组基础流编码成MPEG程序流(MPS)，或更有利地，编码成MPEG传输流(MTS)。在进一步的实施例中，根据实时协议(RTP)、用户数据报协议(UDP)以及网络互连协议(IP)中的一者或多者对MTS进行封装，因为实施例在本上下文中不受限制。例如，在一些RTP实施例中，网络抽象层(NAL)编码器(未描绘)接收MTS并且生成适合于无线传输的网络抽象层单元(NAL单元)。
将多路复用器126的输出耦合至无线发射机(Tx)或收发器(Tx/Rx)128，所述无线发射机或收发器被耦合用于接收经编码的流数据并且向汇设备输出表示所述经编码的流数据的无线信号。无线收发器128可以利用已知适用于直接传送(例如对等)数据流以供在汇设备上进行实时呈现的目的的任何频带。在一些示例性实施例中，无线收发器105可在2.4GHz和/或5GHz频带中操作(例如，Wi-Fi 802.11n)。在一些其他的示例性实施例中，无线收发器可在 60GHz频带中操作。
在源设备105处于正常模式的时间段期间，传输协议栈120还用于在正常模式下进行操作。在正常模式期间，输出至显示缓冲器110并且翻转至传输协议栈120的图形帧数据将被编码、分组和传输。源设备105进一步包括PSR 改进质量(IQ)模块130，所述模块可以被实现为传输协议栈120的一部分、或实现为离散控制器。在一些实施例中，PSR-IQ模块130用于针对源设备105 处于“PSR”模式下的时间的至少一部分实现PSR-IQ策略132中所限定的参数和/或算法。当PSR-IQ策略132起作用时，传输协议栈120在这里被称为“PSR-IQ”模式下进行操作。当处于PSR-IQ模式时，传输协议栈120用于通过编码、分组并输出附加图形帧数据(在此被称为“静态帧IQ数据”)来提高已在正常模式下传输最后一帧的质量。对于当源设备105处在PSR模式但 PSR-IQ策略132未起作用时的任何时间段，传输协议栈120以在此简单地称作“PSR”的模式操作。在PSR模式期间，不通过传输协议栈120对任何图形帧数据进行编码、分组或传输。
在一些实施例中，PSR-IQ策略132响应于源设备105进入PSR模式而由 PSR-IQ模块130实现。在实施例中，可以实现PSR-IQ策略132，直到源设备 105退出PSR模式，从而返回到正常模式(即，图形栈108输出新帧至帧缓冲器110以用于进行呈现)。在进一步的实施例中，可以实现PSR-IQ策略132，直到或者源设备105退出PSR模式，或者直到对最后正常传输的帧的质量的改进被视为完成，并且传输协议栈120相应地进入PSR模式。
如图1B中进一步展示的，汇显示设备150在无线流送会话期间通过无线收发器1621通信地耦合至源设备105。无线收发器162可以利用任何频带以及与收发器128的协议兼容的无线通信协议。来自无线收发器162的输出耦合至解多路复用器164的输入，所述解多路复用器用于将封装的分组流处理成传送至解码器166的压缩数据输入。解多路复用器164包括用于从分组的A/V流中解封装并提取音频和视频有效载荷的逻辑。解码器166可以利用任何与编码器 122的编解码相兼容的编解码来生成被传送至汇显示流水线的帧数据的表示。在所展示的实施例中，汇显示流水线包括帧缓冲器182和显示面板184，所述显示面板可以是汇设备150的嵌入式显示器。
在正常操作模式期间，利用由接收协议栈160输出的屏幕变化通知来更新帧缓冲器182。在一些实施例中，汇设备150进一步包括可在汇PSR模式期间操作的PSR控制模块115。在从接收协议栈160输出的图形帧暂停的情况下， PSR控制模块115用于利用存储于帧缓冲器182中的静态帧来刷新显示面板 184的输出。在正常模式或PSR模式下，可以以某个显示刷新速率(例如，其可以在30Hz与120Hz之间变化)来刷新显示面板184。
图2A是流程图，根据一些实施例描绘了一种用于进行无线显示静态帧质量改进的方法201。在展示性实施例中，方法201由无线显示系统102(图1B) 执行。然而，在其他的实施例中，方法201由具有替代性架构的源设备和/或汇设备实现。方法201开始于在操作204处源105例如响应于诱使场景变化计算的用户活动而生成图形帧。在操作206处，源显示面板显示在操作204处生成的帧。将这些相同帧中的一个或多个翻转至传输协议栈以用于在操作208处进行编码。在一些实施例中，利用任何已知技术将多个帧编码为图像组(GOP)。同样在操作208(图2A)处,再次根据已知技术将压缩帧进一步编码成传输流和/或实时流。在操作210处通过链路(例如，无线)将表示GOP的分组流送至汇150。操作204、206、208、210都在当源105处于正常模式205时执行。在操作211处，汇150对接收到的分组有效载荷进行解码，并且对应于GOP 的重构帧在操作213处被显示。图4A是示意图，根据一些实施例展示了在 PSR-IQ和正常模式期间从源设备传输和/或由汇设备接收的一系列图像帧。在图4A中的示例性GOP包括帧内编码帧(I帧)，之后为8个帧间预测帧(P 帧)。
返回图2A，方法201继续：源显示器在操作212处执行静态刷新，并且源105进入PSR模式207。在一个示例中，源OS检测到屏幕不活动并且停止向图形驱动器发送屏幕变化通知。图形驱动器进而停止向显示缓冲器传输协议栈发送屏幕变化通知。在静态刷新操作212期间，在操作204处生成的最后一帧继续驻留在显示缓冲器中。在一些实施例中，PSR模式207基于超过预定阈值持续时长的屏幕变化通知中的暂停。作为响应，传输协议栈在操作214处进入PSR模式，并且没有任何进一步的帧数据被编码、分组和/或传输离开源设备105。在没有附加帧的传输的情况下，汇设备150执行静态刷新操作215，其中，操作213处所显示的最后一帧被保留在汇显示缓冲器中并且被利用以某个标称速率周期性地刷新汇显示面板直到所述源处的场景发生变化，并且所述源切换出PSR模式207并且返回到正常模式205。
方法201继续：在操作216处，传输协议栈进入PSR-IQ模式。在一些实施例中，响应于源设备105在PSR模式207下保持某个预定时间段(例如，源帧缓冲器已经有50毫秒至100毫秒未被更新)而进入PSR-IQ模式。一旦处于 PSR-IQ模式，则在操作218处对静态帧IQ数据进行编码。静态帧IQ数据可以包括与发送至汇的最后合成帧相关联的任何附加数据，所述附加数据可以由汇150解码，并且其可以改进最后一帧的图像质量。在一些实施例中，静态帧 IQ数据包括进一步对与由最后合成帧所编码的场景相同的场景进行编码的一个或多个P帧。图2B是流程图，根据一些实施例描绘了一种用于通过对一个或多个附加P帧进行编码来迭代改进静态帧质量的方法202。方法202开始于操作250，在所述操作中，从本地帧缓冲器存取或接收静态帧F(例如，通过图形流水线输出)。在操作255处通过本地解码环路传送最后的编码帧以生成最后帧表示Fi。然后将未经编码帧F与帧表示Fi相比较，并且在操作260处利用任何已知技术来确定残差。然后可以应用预定准则来确定是否将在操作 265处执行附加P帧编码，或者，如果相反，则方法202将结束。如果存在足够的差异(例如在质量方面)，则在操作265处以包括更高频率分量的方式对静态帧F和/或残差F-Fi进行编码。然后，在操作270处向传输栈输出此后续编码帧Fi+1。方法202可以迭代，直至满足结束标准。
在图4A中进一步展示的示例性实施例中，最后一帧415是P帧，并且静态帧IQ数据包括另一个P帧420。尤其是，P帧420是在正常模式期间最后输出的相同图像帧。换言之，P帧420与存储于源显示缓冲器中由最后一帧415 表示的静态图形帧相关联。在一些实施例中，P帧420包括在最后一帧415中不存在的高频分量。例如，P帧415可以包括低频率分量的粗糙图像数据，同时P帧420包括较高频率的精细图像数据。高频分量可以通过任何已知技术来确定。在一个示例中，包括在P帧420中的高频数据与变换系数相关联，其中，所述系数在对最后一帧415进行编码期间下降。在一些实施例中，在P帧420 中编码的数据采用基于对最后一帧415(例如，图1B中在图像缓冲器124中被本地解码和存储)的重构与存储于源显示缓冲器(例如，图1B中的帧缓冲器110)中的静态帧进行比较所编码的残差的形式。
返回图2A，方法201在操作220处继续，在所述操作中，静态帧IQ分组被流送至汇150。在操作221处解码流送的分组，并且将更新后的具有改进质量的最后一帧输出至汇显示缓冲器并且在操作233处显示。此更新后的具有改进质量的最后一帧然后驻留在汇显示缓冲器中，并且在操作225处被静态地刷新。
在一些实施例中，静态帧IQ数据被多次发送，其中，每个附加静态帧IQ 数据集合递增地改进在汇设备处的静态帧表示的质量。例如在方法201中，在操作222处，对附加静态帧IQ数据进行编码。在一些实施例中，静态帧IQ数据传输的每次迭代包括发送一个最后合成帧的一个附加P帧以进一步改进汇静态图像的质量。因此，在图4A中进一步展示的示例性实施例中，静态帧IQ 数据进一步包括P帧425。尤其是，P帧425再次是在正常模式期间最后输出的图像帧的表示。换言之，P帧425还与存储于源显示缓冲器中的由最后一帧 415表示的静态图像帧相关联。在一些实施例中，P帧425包括在最后一帧415 和P帧420中不存在的高频分量。例如，高频数据可以与变换系数相关联，其中，变换系数在静态帧415的编码期间下降，并且也在P帧420的编码中不存在。在一些实施例中，在P帧425中编码的数据采用基于对最后一帧415的重构与存储于显示缓冲器中的静态帧进行比较所编码的残差的形式。
在一些实施例中，在进入PSR-IQ模式之后即发送最后帧IQ分组的突发以用于针对给出的带宽或功率约束尽可能快地改进静态图像的质量。例如在图 4A中，可以以突发的方式发送P帧420和425。在一些其他的实施例中，在进入PSR-IQ模式之后，当PSR-IQ模式活动时，周期性地发送最后帧IQ分组(例如，可以在预定延迟之间连续地发送P帧420和425)。可以在时间上间隔开对静态帧的周期性质量改进以便采用对用户透明的方式改进静态帧质量，和/ 或对传输质量改进所需的带宽和/或功率进行计量，和/或简化静态帧质量改进逻辑的实现方式。在一些实施例中，以突发或周期性地方式发送静态帧IQ数据，直到达到汇显示器上的期望质量，或直到源退出PSR模式，无论首先满足哪个条件。
在一些实施例中，静态帧IQ分组独立地对在正常模式期间传输的最后一帧进行重新编码。在PSR-IQ期间进行的重新编码操作是利用与在正常模式操作期间采用的编码器参数不同的编码器参数来执行的。任何已知影响帧表示质量的编码器参数可以被修改以便改进作为静态帧IQ分组被发送至汇的静态帧表示的质量。进一步参照图2A，在操作208处，可以以第一比特率对GOP进行编码，并且，在操作218处，以第二比特率(例如，更高)至少对静态帧进行重新编码。在一个这种实施例中，在操作208处采用第一量化参数(QP)值，并且在操作218处，利用第二QP值(例如，小于在操作208处所采用的)至少对静态帧进行重新编码以保留更大空间细节和高频分量。其他编码器参数 (如但不限于量化表、运动分区参数、去块参数和传输参数)可以在静态帧的正常模式帧编码与PSR-IQ模式重新编码之间变化。
在一些实施例中，传输/接收协议栈被配置用于执行可扩展视频译码 (SVC)。例如，源设备的编码器可以遵循H.264/MPEG-4压缩标准的附录G。在一些SVC实施例中，对高质量帧比特流进行编码，并且此高质量流的仅一个或多个子集比特流在正常操作模式期间由原设备根据在正常操作期间源与汇之间的可用比特率进行传输。例如，进一步参照图2A，在操作208处，将 GOP编码成多层遵循SVC的流。在操作210处，至少将比特流的提供标称质量水平的基本层传输至汇设备150。在操作210处可以根据标称质量水平来传输一个或多个增强层。然后在操作211、213处解码并显示所述一个或多个层。在一些实施例中，在操作208处生成的所述多层遵循SVC的流例如被存储于源设备处的圆形缓冲器中。在操作212处进入PSR模式(或在操作216处进入 PSR-IQ模式)之后，在操作220处，对缓冲的SVC编码流进行处理，并且一个或多个附加增强层比特流被作为静态帧IQ分组而进行传输。在一些这种实施例中，至少对最后发送的来自GOP的静态帧进行编码的基本层和一个或多个附加增强层都在操作220处被传输。因此，在一些实施例中，在操作220处发送的静态帧IQ分组承载多层遵循SVC的流的比在操作210处发送的更加增强的版本(具有更大数量的分级层)。因此，由于在源处新帧更新中的暂停导致在源105与汇150之间的带宽需求下降，可以以更高质量水平重新传输最后传输的SVC比特流的尾端以改进在汇处的静态帧表示。
图3A、3B、3C和3D是曲线图，根据一些实施例进一步展示了帧生成、源呈现、压缩和汇呈现的时序；在图3A至3D中展示的帧可能由实践方法201 (图2A)导致。首先参照图3A，最前面的帧n-3和n-2由源设备图形流水线以高帧速率(“高FR”)生成。接下来的帧n-1和n由源设备以低帧速率生成。在帧n与n+1之间暂停帧生成。在这段时间内，图形流水线可以处于空闲和/或处于待机模式。在暂停之后，生成图像帧n+1和n+m。
接下来参照图3B，在由虚线表示的等待周期后，源设备显示器呈现最前面的图像帧n-3和n-2。在示例性的实施例中，源显示器刷新速率跟踪帧生成速率，从而使得帧n-3和n-2与高刷新速率(“高RR”)相关联。接下来，由源显示器以更低的、标称刷新速率来输出帧n＝1和n。响应于帧生成中的暂停，当源处于PSR模式时重复地刷新帧n。在重新开始帧缓冲器更新之后，退出PSR模式并且输出最后一帧n+1。
图3C进一步展示了在正常模式207(图2A)期间对被控制为第一比特率的最前面的帧n-3和n-2的压缩。由于所述帧生成采用相对高的帧速率，一个或多个帧n-3和n-2的比特率可以相对低以维持目标平均比特率。响应于相对低帧速率，接下来的帧n-1和n可以具有更高比特率。在PSR-IQ模式期间，在退出PSR-IQ模式之前对帧n IQ数据进行编码至少一次以用于重新开始正常模式下对最后一帧n+1进行编码。在图3C中展示了对帧n的两次编码(n'和 n")。
图3D进一步展示了由汇显示面板呈现的帧。如所示出的，显示面板具有可变刷新速率的能力，例如，被设置以匹配显示缓冲器更新并且避免帧撕裂和 /或断续。以第一高刷新速率显示帧n-3和n-2，接着以更低刷新速率显示帧n-1 和n。在一段时间后，在由汇显示器自刷新静态帧n之前或之后，帧n PSR-IQ 数据到达汇。对帧n PSR-IQ数据进行解码，并且利用具有与帧n相同的场景 (图像)但具有更高质量表示的帧n'来更新汇显示缓冲器。随后，如果任何附加帧n PSR-IQ数据到达汇，则再次被解码并且被写出至提供相同场景的甚至更高质量表示的汇显示缓冲器(例如，如帧n")。稍后某一时间，在源帧生成恢复之后，在汇处对帧n+1进行解码。在静态帧持续时长相当大(例如，在企业背景中的呈现期间)的一些实施例中，用户可以容易地感知高质量静态图像 n'(n")。
在图4A和4B两个图中示出了GOP传输机制。在PSR-IQ模式期间，传输帧420、425以改进显示在汇设备上的静态图像的质量。在正常模式下，示例性GOP包括I帧，接着是8个P帧。采用P帧形式来发送静态帧PSR-IQ数据，从而继续正常模式结束之前所发送的最后不完全的GOP。因此，在汇解码器处，在正常模式期间采用相同的GOP结构之后，可以容易地对静态帧PSR-IQ 进行解码。图4A展示了一些实施例：其中，在重新开始正常模式操作之后，在恢复GOP 401中I帧作为第一个帧进行发送。不管最后GOP内最后一帧的位置如何而利用I帧来更新汇确保了将在汇显示器上充分地呈现可能在源上触发返回正常模式的任何场景变化。根据PSR-IQ模式的持续时长，利用另一个 I帧恢复可能会或者可能不会在源与汇之间的网络链路上施加增大的比特率需求。如果是，则源编码器率控制器可以在必要时根据已知技术限制在恢复GOP 401中的I帧和/或其他帧的图像质量。图4B展示了替代性实施例：其中，在重新开始正常模式操作之后，在恢复GOP 402中P帧作为第一个帧发送。利用另一个P帧来更新汇以完成最后GOP确保了将不会存在通过发送静态帧 PSR-IQ数据施加的任何质量/比特率限制。然而，当实践恢复模式时，在场景变化的汇呈现情景中可能会存在限制。
在一些实施例中，选择从PSR-IQ模式进行“I帧优先”或“P帧优先”恢复取决于静态帧与当源返回正常模式时待发送至汇的新图形(图像)帧之间的场景变化数量。图5是示意图，根据一些实施例展示了一种用于从PSR-IQ模式返回至正常源模式的方法501。在一个示例中，方法501由源设备实现，并且更具体地是通过通信协议栈实现。在进一步实施例中，PSR-IQ模块310(图 1B)用于执行方法501。
方法501在操作505处以生成新的源帧数据开始。例如，在一个实施例中，图形流水线从待机或空闲期唤醒并且开始以标称帧速率向源帧缓冲器输出帧。作为响应，PSR-IQ模式结束。在操作510处，确定待传输至汇的第一新帧与静态帧之间的变化量。可以在操作510处应用任何已知场景变化量化，因为实施例在此方面中不受限制。将变化量与预定阈值进行比较。响应于变化满足阈值，在操作515处将新数据至少编码为I帧。在操作515处，还可以利用任何已知场景变化帧编码算法例如来选择足够低的QP。响应于变化不能满足阈值，在操作520处将新数据编码为P帧。
图6是功能框图，根据实施例进一步展示了无线显示源平台205。源平台 205包括图形处理器501。在示例性实施例中，图形处理器501实现图形(视频)帧编码器122和图形栈108。平台205进一步包括处理器650，所述处理器可以包括一个或多个逻辑处理器核。在一些有利的SOC实施例中，处理器 605和图形处理器501被集成到单个芯片上。在一些异构实施例中，处理器605 通过子系统驱动器615与图像处理器501接口连接。平台205进一步包括例如采用任何LCD或LED技术的显示面板150。
在所述示例性实施例中，处理器650将PSR-IQ模块130实现为例如传输协议栈的模块(未描绘)。处理器650进一步实现多路复用器126(例如，同样作为传输协议栈的一部分)。响应于由PSR-IQ模块130发出的命令，可以由编码器122将由图形栈108输出的帧处理成压缩形式。可以通过软件或硬件、或利用硬件与软件两者的组合来实现结合了显示面板150进入面板自刷模式而进行的对PSR-IQ数据的编码和发送。对于纯硬件实现方式，可以由固定功能逻辑来实现PSR-IQ模块130。对于软件实现方式，可以利用任何已知的可编程处理器(如处理器650的核)来实现逻辑PSR-IQ模块130。根据实施例，采用在处理器650的用户或内核空间中实例化的软件来实现PSR-IQ模块130 和多路复用器126。替代性地，具有固定的或半可编程逻辑电路系统的数字信号处理器/向量处理器可以实现PSR-IQ模块130和多路复用器126中的一个或多个，并且实现传输协议栈的任何其他模块。
在一些实施例中，处理器650包括一个或多个(可编程)逻辑电路以用于执行一种用于改进通过实时无线协议(如但不限于WFD或WiDi)流送的静态帧质量的方法的一个或多个阶段。例如，根据上述一些实施例，处理器650可以执行方法201(图2A)。在一些实施例中，处理器650用于访问存储于主存储器610中的PSR更新策略501，并且用于基于最后发送至汇的静态帧的表示与由源呈现的静态帧中的差异来确定PSR-IQ数据。在一些实施例中，处理器 650在实例化软件栈的内核空间中执行一种或多种编码帧分组算法。在一些实施例中，处理器650采用包括在子系统驱动器615中的图形处理器驱动器以用于触发图像帧生成和/或帧编码。在一些实施例中，利用存储在计算机可读介质上的指令来对处理器650进行编程以用于使得所述处理器执行一个或多个静态帧质量改进方法，例如，如在本文别处描述的所述方法中的任何一种。
如在图6中进一步展示的，PSR-IQ数据帧可以由无线收发器128输出。在一个示例性实施例中，输出PSR-IQ数据帧被写入电子存储器(例如，DDR 等)。存储器620可以是单独的或者是主存储器610的一部分。无线收发器128 基本上可以如在本文别处所描述的那样用于将所输出的PSR-IQ数据帧传送 (例如，根据实时流送协议)至接收汇150。
图7用框图表示了数据处理系统700，实施数据处理系统可被利用来对帧进行生成和编码以便传送PSR-IQ帧。数据处理系统700包括一个或多个处理器702以及一个或多个图形处理器708，并且可以在单处理器桌面系统、多处理器工作站系统、或具有大量处理器702或处理器核707的服务器系统中来实现。在另一个实施例中，数据处理系统700是用于移动式、手持式、或嵌入式设备的片上系统(SoC)集成电路。
数据处理系统700的实施例可包括或并入基于服务器的游戏平台、游戏控制台，包括游戏与媒体控制台、移动游戏控制台、手持式游戏控制台、或在线游戏控制台。在一些实施例中，数据处理系统700是移动设备、智能电话、平板计算设备或移动互联网设备。数据处理系统700还可包括可穿戴设备(诸如智能手表可穿戴设备、智能眼镜设备、增强现实设备、或虚拟现实设备)、与所述可穿戴设备耦合、或者集成在所述可穿戴设备中。在一些实施例中，数据处理系统700是电视或机顶盒设备，所述电视或机顶盒设备具有一个或多个处理器702以及由一个或多个图形处理器708生成的图形界面。
在一些实施例中，所述一个或多个处理器702每个包括用于处理指令的一个或多个处理器核707，所述指令在被执行时执行系统和用户软件的操作。在一些实施例中，所述一个或多个处理器核707中的每个处理器核被配置成用于处理特定的指令集709。在一些实施例中，指令集709可以促进复杂指令集计算(CISC)、精简指令集计算(RISC)、或经由超长指令字(VLIW)的计算。多个处理器核707可以各自处理不同的指令集709，所述指令集可以包括用于促进对其他指令集进行仿真的指令。处理器核707还可以包括其他处理设备，如数字信号处理器(DSP)。
在一些实施例中，处理器702包括高速缓存存储器704。取决于架构，处理器702可具有单个内部高速缓存或多级内部高速缓存。在一些实施例中，在处理器702的各部件之间共享所述高速缓存存储器。在一些实施例中，处理器 702还使用外部高速缓存(例如，3级(L3)高速缓存或末级高速缓存(LLC)) (未示出)，可以使用已知的高速缓存一致性技术在所述处理器核707之中共享所述外部高速缓存。寄存器组706附加地包括在处理器702中，所述处理器可以包括用于存储不同类型数据的不同类型的寄存器(例如，整数寄存器、浮点寄存器、状态寄存器、和指令指针寄存器)。一些寄存器可以是通用寄存器，而其他寄存器可以专用于处理器702的设计。
在一些实施例中，处理器702耦合至处理器总线710，所述处理器总线用于在处理器702与系统700内的其他部件之间传输数据信号。系统700具有‘中枢’系统架构，包括存储器控制器中枢716和输入输出(I/O)控制器中枢730。存储器控制器中枢716促进存储器设备与系统700的其他部件之间的通信，而 I/O控制器中枢(ICH)730经由本地I/O总线提供与I/O设备的连接。
存储器设备720可以是动态随机存取存储器(DRAM)设备、静态随机存取存储器(SRAM)设备、闪存设备、或具有合适的性能用作处理存储器的某个其他存储器设备。存储器720可以存储数据722和指令721，以供在处理器 702执行过程时使用。存储控制器中枢716还与可选的外部图形处理器712耦合，所述可选的外部图形处理器可以于处理器702中与所述一个或多个图形处理器708通信，从而执行图形和媒体操作。
在一些实施例中，ICH 730使得外围部件经由高速I/O总线连接至存储器 720和处理器702。I/O外围部件包括音频控制器746、固件接口728、无线收发器726(例如，Wi-Fi、蓝牙)、数据存储设备724(例如，硬盘驱动器、闪存等)、以及用于将传统(例如，个人系统2(PS/2))设备耦合至所述系统的传统I/O控制器。一个或多个通用串行总线(USB)控制器742连接输入设备，比如键盘和鼠标744组合。网络控制器734还可以耦合至ICH 730。在一些实施例中，高性能网络控制器(未示出)耦合至处理器总线710。
图8是根据一个或多个实施例的示例性超低功率系统800的简图。尽管系统800不限于本上下文，系统800可以是可移动设备。系统800可以并入可穿戴计算设备、膝上型计算机、平板机、触摸板、手持式计算机、掌上型计算机、蜂窝电话、智能设备(例如，智能电话、智能平板机或移动电视)、移动互联网设备(MID)、消息设备、数据通信设备等。系统800还可以是基础设施设备。例如，系统800可以并入大尺寸电视、机顶盒、台式计算机或其他家用或商用网络设备中。
系统800包括设备平台802，所述设备平台可以实现以上在图1至图6的上下文中描述的所述帧编码、分组以及无线传输方法的全部或子集。在各示例性实施例中，例如，如在本文别处所描述的，中央处理器810执行PSR-IQ数据流控制以及MTS多路复用。例如，如在本文别处所描述的，处理器801包括实现PSR-IQ模块130的逻辑电路系统。在一些实施例中，一个或多个计算机可读介质可以存储指令，所述指令当由CPU 810和/或视频处理器815执行时使所述(多个)处理器执行在本文别处描述的图像数据生成、编码和/或 PSR-IQ数据帧传输中的一项或多项。由视频处理器815输出的一个或多个图像数据帧然后可以通过无线电818传输。
在实施例中，设备平台802耦合至人类接口设备(HID)820。平台802 可以利用CM110来收集原始图像数据，所述原始图像数据被处理并输出到 HID 820。包括一个或多个导航特征的导航控制器850可以用于例如与设备平台802和/或HID 820进行交互。在实施例中，HID 820可以包括经由无线电 818和/或网络860耦合至平台802的任何监视器或显示器。HID 820可以包括例如计算机显示屏、触摸屏显示器、视频监控器、类电视设备和/或电视机。
在实施例中，设备平台802可以包括CM 110、芯片组805、处理器810、 815、存储器/存储设备812、应用816和/或无线电818的任意组合。芯片组805 可以提供在处理器810、815、存储器812、视频处理器815、应用816、或无线电818之间的相互通信。
一个或多个处理器810、815可以被实现为一个或多个复杂指令集计算机 (CISC)或精简指令集计算机(RISC)处理器；x86指令集兼容处理器、多核或任何其它微处理器或中央处理单元(CPU)。
存储器812可被实现为易失性存储器设备，如但不限于随机存取存储器 (RAM)、动态随机存取存储器(DRAM)、或静态RAM(SRAM)。存储器812还可以被实现为非易失性存储设备，诸如但不限于：闪存、电池备用 SDRAM(异步DRAM)、磁性存储器、相变存储器等。
无线电818可以包括能够使用各种适当的无线通信技术发射并接收信号的一个或多个无线电。这类技术可以涉及跨一个或多个无线网络的通信。示例无线网络包括(但不限于)无线局域网(WLAN)、无线个人局域网(WPAN)、无线城域网(WMAN)、蜂窝网和卫星网。在跨这种网络进行通信时，无线电 618可以根据任何版本中的一个或多个可适用标准进行操作。
在实施例中，系统800可以被实现为无线系统、有线系统、或两者的组合。当被实现为无线系统时，系统800可以包括适合于通过如一个或多个天线、发送器、接收器、收发器、放大器、滤光器、控制逻辑等的无线共享介质进行通信的组件和接口。无线共享介质的示例可以包括无线频谱部分，如RF频谱等。当被实现为有线系统时，系统800可以包括适用于通过有线通信介质(如输入 /输出(I/O)适配器、利用相应有线通信介质连接I/O适配器的物理连接器、网络接口卡(NIC)、光盘控制器、视频控制器、音频控制器等)进行通信的组件和接口。有线通信介质的示例可以包括导线、电缆、金属引线、印刷电路板(PCB)、背板、交换光纤、半导体材料、双绞线、同轴电缆、光纤等。
如上所述，系统800可以用变化的物理风格或形成因数来体现。图9进一步展示了可以用其具体化平台802和/或系统800的可移动手持设备900的实施例。在实施例中，例如，设备900可以被实现为具有无线能力的移动计算手持设备。如图9所示，移动手持设备900可以包括具有前面901和背面902的壳体。设备900包括显示器904、输入/输出(I/O)设备906、和集成天线908。设备900还可以包括导航特征912。显示器904可以包括适合于移动计算设备的用于显示信息的任何适当的显示单元。I/O设备906可以包括用于将信息输入移动计算设备中的任何适当的I/O设备。I/O设备906的示例可以包括字母数字键盘、数字小键盘、触摸板、输入建、按钮、开关、麦克风、扬声器、话音识别设备和软件等。信息还可以借助于麦克风(未示出)被输入设备900中或者可以由话音识别设备数字化。实施例并不局限于本上下文中。至少集成到前面901和/或背面902的是摄像模块910(例如，包括一个或多个透镜、孔和成像传感器)。
如以上例示的，可以使用硬件元件、软件元件或两者的组合实现在此描述的实施例。硬件元件或模块的示例包括：处理器、微处理器、电路、电路元件 (例如，晶体管、电阻器、电容器、电感器等)、集成电路、专用集成电路(ASIC)、可编程逻辑器件(PLD)、数字信号处理器(DSP)、现场可编程门阵列(FPGA)、逻辑门、寄存器、半导体器件、芯片、微芯片、芯片组等。软件元件或模块的示例包括：应用、计算机程序、应用程序、系统程序、机器程序、操作系统软件、中间件、固件、例程、子例程、函数、方法、过程、软件接口、应用程序接口(API)、指令集、计算代码、计算机代码、代码段、计算机代码段、数据字、值、符号、或其任意组合。判定是否是使用硬件元件和/或软件元件来实现实施例可以根据针对设计选择所考虑的任意数量的因数而变化，如但不限于：期望的计算速率、功率水平、耐热性、处理周期预算、输入数据速率、输出数据速率、存储器资源、数据总线速度以及其他设计或性能约束。
与在此所描述的示例性实施例一致的无线显示静态帧质量改进以及 PSR-IQ数据传输方法可以在各种硬件架构、单元设计或“IP核”中来实现。
至少一个实施例的一个或多个方面可以通过存储在机器可读存储介质上的代表性指令来实现。这类指令在由机器对其进行执行的过程中可以完全地或至少部分地驻留在主存储器内和/或在处理器内，存储指令的主存储器和处理器部分然后还组成机器可读存储介质。可编程逻辑电路可以具有由实现计算机可读介质的处理器配置的寄存器、状态机等。这种如所编程的逻辑电路系统然后可以被理解为被物理地转换成落入在此所描述的至少某些实施例的范围内的系统。表示处理器内的各种逻辑的指令当被机器读取时，还可以致使机器制造遵循在此描述的架构的逻辑和/或执行在此所描述的技术。被称为元件设计或 IP核的这种表示可以存储在有形的、机器可读的介质上或被供应至不同的消费者或制造设施以加载到实际上制造逻辑的制造机器或处理器中。
虽然已经参照实施例描述了在此阐述的某些特征，并非旨在用于在限制性意义上解释本说明书。因此，本公开涉及的对本领域技术人员而言明显的对本文描述的实施方式以及其他实施方式的各种修改被视为是在本公开的精神和范围内。
以下段落简要描述了一些示例性实施例。
在一个或多个第一实施例中，一种图像帧显示源装置包括：图像帧处理流水线，用于生成图像帧以供显示；发射机，耦合在所述图像帧处理流水线的下游以用于将所述图像帧中的第一图像帧的第一经编码表示流送至显示设备；以及静态图像质量改进模块，用于在未于预定时间内生成第二图像帧的情况下启动流送对所述图像帧进行编码的附加数据。
在第一实施例的进一步方案中，所述附加数据对所述图像帧的第二表示的信息进行编码，所述第二表示具有比所述第一经编码表示更高的质量。
在上文刚刚描述的实施例的进一步方案中，所述装置进一步包括显示缓冲器，所述显示缓冲器耦合至所述帧处理流水线的输出端，所述显示缓冲器用于在面板自刷新(PSR)模式期间存储所述图像帧，并且所述附加数据对在所述图像帧中存在但在所述第一经编码表示中不存在的高频分量进行编码。
在上文刚描述的实施例的进一步方案中，所述装置进一步包括源显示面板，所述源显示面板用于在所述PSR模式期间静态地刷新所述第一图像帧；以及图像帧编码器，所述图像帧编码器耦合至所述质量改进模块和所述显示缓冲器，所述图像帧编码器用于对存储于所述显示缓冲器中的所述图像帧与所述第一经编码表示之间的残差进行编码。
在第一实施例的进一步方案中，所述第一经编码表示包括第一I帧或P帧，并且所述附加数据包括第二P帧。
在上文刚刚描述的实施例的进一步方案中，所述第二P帧对在所述图像帧中存在但在所述第一经编码表示中不存在的高频分量进行编码，所述附加数据进一步包括在所述第二P帧之后传输的第三P帧，所述第三P帧对在所述图像帧中存在但在所述第二经编码表示中不存在的高频分量进行编码。
在第一实施例的进一步方案中，其中，所述图像帧处理流水线用于生成第二图像帧，并且所述质量改进模块用于响应于所述第二图像帧的输出而终止流送所述附加数据。
在第一实施例的进一步方案中，其中，所述质量改进模块用于强制将所述第二图像帧编码成I帧或场景变化帧而不管所述图像帧在图片组(GOP)内的位置如何。
在第一实施例的进一步方案中，所述附加数据包括对所述第一图像帧的重新编码。
在第一实施例的进一步方案中，其中，所述第一经编码表示包括可扩展视频译码(SVC)流的基本层，并且所述附加数据包括用于所述SVC流的一个或多个增强层。
在一个或多个第二实施例中，一种无线显示系统包括：如第一实施例中任一项所述的所述源装置，所述源装置用于通过无线传输协议进行流送；以及汇装置，所述汇装置用于在汇显示面板上呈现所述图像帧的第一表示；用于对所述附加数据进行解码；并且用于基于至少所述附加数据而在所述汇显示面板上呈现所述图像帧的第二表示。
在第二实施例的进一步方案中，所述汇显示面板用于自刷新所述图像帧的所述第二表示直到从所述源装置接收到第二图像帧为止。
在一个或多个第三实施例中，一种用于改进呈现在汇显示器上的静态帧的质量的方法包括：生成图像帧以供显示；将所述第一图像帧的第一经编码表示流送至显示设备；以及在未于预定时间内生成第二图像帧的情况下流送对所述图像帧进行编码的附加数据。
在第三实施例的进一步方案中，所述方法进一步包括：在面板自刷新(PSR 模式期间存储所述图像帧；以及所述附加数据对在所述图像帧中存在但在第一经编码表示中不存在的高频分量进行编码。
在上文刚刚描述的第三实施例的进一步方案中，所述方法进一步包括：在所述PSR模式期间静态地刷新所述第一帧；以及对存储于所述显示缓冲器中的所述图像帧与所述第一经编码表示之间的残差进行编码。
在上文刚刚描述的第三实施例的进一步方案中，所述第一经编码表示包括第一I帧或P帧，并且所述附加数据包括对在所述图像帧中存在但在所述第一编码中不存在的高频分量进行编码的第二P帧，并且所述方法进一步包括在所述第二P帧之后传输第三P帧，所述第三P帧对在所述图像帧中存在但在所述第二经编码表示中不存在的高频分量进行编码
在上文刚刚描述的第三实施例的进一步方案中，所述方法进一步包括：将所述第一经编码表示编码成可扩展视频译码(SVC)流的至少一个基本层；以及将所述附加数据编码成所述SVC流的一个或多个增强层。
在一个或多个第四实施例中，一种或多种计算机可读介质包括存储在其上的指令，所述指令当由处理系统执行时使所述系统执行所述第三实施例中的任何一个实施例。
在一个或多个第五实施例中，一种设备包括：用于执行所述第三实施例中的任何一个实施例的装置。
在一个或多个第六实施例中，一种或多种计算机可读介质包括存储在其上的指令，所述指令当由处理系统执行时，使所述系统执行包括以下各项的方法：生成图像帧以供显示；将所述第一图像帧的第一经编码表示流送至显示设备；以及在未于预定时间内生成第二图像帧的情况下流送对所述图像帧进行编码的附加数据。
在第六实施例的进一步方案中，所述介质进一步包括存储在其上的指令，所述指令当由所述处理系统执行时，使所述系统执行包括以下各项的方法：在面板自刷新(PSR)模式期间存储所述图像帧；以及对存储于所述显示缓冲器中的所述图像帧与所述第一经编码表示之间的残差进行编码，其中，所述残差包括在所述图像帧中存在但在所述第一经编码表示中不存在的高频分量。
将理解的是，实施例不限于如此描述的示例性实施例，而是可以用在不偏离所附权利要求的范围之内的修改和变化来实现。例如，以上实施例可以包括特征的特定组合。然而，以上实施例不局限于此方面，并且在实施例中，以上实施例可以包括仅采取这类特征的子集、采取这类特征的不同顺序、采取这类特征的不同组合和/或采取除了明确例举的那些特征之外的附加特征。因此，范围连同被授予权利的所述权利要求书的等效物的全部范围应参照所附权利要求书来确定。

Claims (16)

1.一种图像帧显示源装置，包括：
图像帧处理流水线，用于生成图像帧以供显示；
发射机，耦合在所述图像帧处理流水线的下游以用于将第一图像帧的第一经编码表示流送至显示设备；
显示缓冲器，耦合至所述帧处理流水线的输出，所述显示缓冲器用于在面板自刷新PSR模式期间存储所述图像帧；
源显示面板，所述源显示面板用于在所述面板自刷新PSR模式期间静态地刷新所述第一图像帧；
图像帧编码器，所述图像帧编码器耦合至所述静态图像质量改进模块和所述显示缓冲器，所述图像帧编码器用于对存储于所述显示缓冲器中的所述图像帧与所述第一经编码表示之间的残差进行编码；以及
静态图像质量改进模块，用于在未于预定时间内生成第二图像帧的情况下启动流送对所述图像帧进行编码的附加数据，其中所述附加数据包括经编码的残差。
2.如权利要求1所述的装置，其中，所述附加数据对用于所述图像帧的第二表示的信息进行编码，所述第二表示具有比所述第一经编码表示更高的质量。
3.如权利要求2所述的装置，进一步包括：
其中，所述附加数据对在所述图像帧中存在但在所述第一经编码表示中不存在的高频分量进行编码。
4.如权利要求3所述的装置，其中，所述第一经编码表示包括第一I帧或P帧，并且所述附加数据包括第二P帧。
5.如权利要求4所述的装置，其中：
所述第二P帧对在所述图像帧中存在但在所述第一经编码表示中不存在的高频分量进行编码；
所述附加数据进一步包括在所述第二P帧之后传输的第三P帧；并且
所述第三P帧对在所述图像帧中存在但在第二经编码表示中不存在的高频分量进行编码。
6.如权利要求1所述的装置，其中：
所述图像帧处理流水线用于生成第二图像帧；并且
所述静态图像质量改进模块用于响应于所述第二图像帧的输出而终止流送所述附加数据。
7.如权利要求6所述的装置，其中，所述静态图像质量改进模块用于强制将所述第二图像帧编码成I帧或场景变化帧而不管所述图像帧在图片组GOP内的位置如何。
8.如权利要求2所述的装置，其中，所述附加数据包括对所述第一图像帧的重新编码。
9.如权利要求2所述的装置，其中：
所述第一经编码表示包括可扩展视频译码SVC流的基本层；并且
所述附加数据包括用于所述可扩展视频译码SVC流的一个或多个增强层。
10.一种无线显示系统，包括：
如权利要求1所述的源装置，所述源装置用于通过无线传输协议进行流送；以及
汇装置，用于：
在汇显示面板上呈现所述图像帧的第一表示；
对所述附加数据进行解码；以及
基于至少所述附加数据，在所述汇显示面板上呈现所述图像帧的第二表示。
11.如权利要求10所述的显示系统，其中，所述汇显示面板用于自刷新所述图像帧的所述第二表示直到从所述源装置接收到第二图像帧为止。
12.一种用于改进呈现在汇显示器上的静态图像质量的方法，所述方法包括：
生成图像帧以供显示；将第一图像帧的第一经编码表示流送至显示设备；
在面板自刷新PSR模式期间将所述图像帧存储在显示缓冲器中；
在面板自刷新PSR模式期间刷新所述图像帧；
对存储于显示缓冲器中的所述图像帧与所述第一经编码表示之间的残差进行编码；以及
在未于预定时间内生成第二图像帧的情况下，流送对所述图像帧进行编码的附加数据，其中所述附加数据包括经编码的残差。
13.如权利要求12所述的方法，
其中，所述附加数据对在所述图像帧中存在但在所述第一经编码表示中不存在的高频分量进行编码。
14.如权利要求12所述的方法，其中：
所述第一经编码表示包括第一I帧或P帧，并且所述附加数据包括对在所述图像帧中存在但在所述第一经编码表示中不存在的高频分量进行编码的第二P帧；并且
其中，所述方法进一步包括：在所述第二P帧之后传输第三P帧，所述第三P帧对在所述图像帧中存在但在第二经编码表示中不存在的高频分量进行编码。
15.如权利要求12所述的方法，进一步包括：
将所述第一经编码表示编码成至少可扩展视频译码SVC流的基本层；以及
将所述附加数据编码成所述可扩展视频译码SVC流的一个或多个增强层。
16.一种或多种计算机可读介质，包括存储于所述计算机可读介质上的指令，所述指令当由处理系统执行时使所述处理系统执行如权利要求12至15所述的方法中的任一种方法。
CN201680011013.6A 2015-03-18 2016-02-17 针对汇显示器的静态帧图像质量改进的方法、装置及系统 Expired - Fee Related CN107258086B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/661,991 2015-03-18
US14/661,991 US9589543B2 (en) 2015-03-18 2015-03-18 Static frame image quality improvement for sink displays
PCT/US2016/018319 WO2016148823A1 (en) 2015-03-18 2016-02-17 Static frame image quality improvement for sink displays

Publications (2)

Publication Number Publication Date
CN107258086A CN107258086A (zh) 2017-10-17
CN107258086B true CN107258086B (zh) 2021-07-30

Family

ID=56920230

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680011013.6A Expired - Fee Related CN107258086B (zh) 2015-03-18 2016-02-17 针对汇显示器的静态帧图像质量改进的方法、装置及系统

Country Status (4)

Country Link
US (1) US9589543B2 (zh)
CN (1) CN107258086B (zh)
TW (1) TWI610564B (zh)
WO (1) WO2016148823A1 (zh)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8879858B1 (en) * 2013-10-01 2014-11-04 Gopro, Inc. Multi-channel bit packing engine
CN104683713A (zh) * 2015-03-20 2015-06-03 北京京东方多媒体科技有限公司 视频信号无线发射器、接收器、传输系统和显示系统
US20170092210A1 (en) * 2015-09-25 2017-03-30 Apple Inc. Devices and methods for mitigating variable refresh rate charge imbalance
WO2017204744A1 (en) * 2016-05-23 2017-11-30 Razer (Asia-Pacific) Pte. Ltd. Wearable devices and methods for manufacturing a wearable device
US10523867B2 (en) * 2016-06-10 2019-12-31 Apple Inc. Methods and apparatus for multi-lane mapping, link training and lower power modes for a high speed bus interface
US20180130443A1 (en) * 2016-11-04 2018-05-10 Nausheen Ansari Techniques for managing transmission and display of a display data stream
US10613814B2 (en) * 2018-01-10 2020-04-07 Intel Corporation Low latency wireless display
US11034286B2 (en) 2018-09-10 2021-06-15 Lumileds Holding B.V. Adaptive headlamp system for vehicles
US11107386B2 (en) 2018-09-10 2021-08-31 Lumileds Llc Pixel diagnostics with a bypass mode
US10932336B2 (en) 2018-09-10 2021-02-23 Lumileds Llc High speed image refresh system
US11521298B2 (en) 2018-09-10 2022-12-06 Lumileds Llc Large LED array with reduced data management
US10643572B2 (en) * 2018-09-11 2020-05-05 Apple Inc. Electronic display frame pre-notification systems and methods
TWI826530B (zh) 2018-10-19 2023-12-21 荷蘭商露明控股公司 驅動發射器陣列之方法及發射器陣列裝置
US10955903B2 (en) * 2018-12-21 2021-03-23 Intel Corporation Low power advertising mode for sequential image presentation
CN112717370B (zh) * 2019-03-18 2023-07-14 荣耀终端有限公司 一种控制方法和电子设备
US10863183B2 (en) 2019-06-27 2020-12-08 Intel Corporation Dynamic caching of a video stream
US11062674B2 (en) * 2019-06-28 2021-07-13 Intel Corporation Combined panel self-refresh (PSR) and adaptive synchronization systems and methods
WO2022037498A1 (zh) * 2020-08-20 2022-02-24 于江鸿 数据处理的方法和系统
CN113066139A (zh) * 2021-03-26 2021-07-02 西安万像电子科技有限公司 图片处理方法和装置、存储介质及电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102428698A (zh) * 2009-03-23 2012-04-25 生命力有限公司 基于来自客户端设备的反馈信息压缩视频帧或其部分的系统及方法
CN103561268A (zh) * 2010-12-29 2014-02-05 中国移动通信集团公司 视频监控图像编码方法及装置

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5781196A (en) * 1990-10-19 1998-07-14 Eidos Plc Of The Boat House Video compression by extracting pixel changes exceeding thresholds
JPH07322252A (ja) * 1994-05-23 1995-12-08 Canon Inc 画像符号化装置
US6108447A (en) * 1998-03-26 2000-08-22 Intel Corporation Method and apparatus for estimating frame rate for data rate control
AU2001267581A1 (en) * 2000-07-15 2002-01-30 Filippo Costanzo Audio-video data switching and viewing system
AUPR212600A0 (en) * 2000-12-18 2001-01-25 Canon Kabushiki Kaisha Efficient video coding
US20030161398A1 (en) * 2002-02-21 2003-08-28 Meir Feder Improving static picture quality in compressed video
US8964830B2 (en) * 2002-12-10 2015-02-24 Ol2, Inc. System and method for multi-stream video compression using multiple encoding formats
US7092002B2 (en) * 2003-09-19 2006-08-15 Applied Minds, Inc. Systems and method for enhancing teleconferencing collaboration
US8139090B2 (en) * 2005-03-10 2012-03-20 Mitsubishi Electric Corporation Image processor, image processing method, and image display device
US7616821B2 (en) * 2005-07-19 2009-11-10 International Business Machines Corporation Methods for transitioning compression levels in a streaming image system
JP2008211379A (ja) 2007-02-23 2008-09-11 Fujitsu Ltd 表示制御プログラムおよび携帯端末装置
TWI354979B (en) * 2007-07-06 2011-12-21 Au Optronics Corp Over-driving device
DE102008059028B4 (de) 2008-10-02 2021-12-02 Rohde & Schwarz GmbH & Co. Kommanditgesellschaft Verfahren und Vorrichtung zur Erzeugung eines Transportdatenstroms mit Bilddaten
US9185439B2 (en) 2010-07-15 2015-11-10 Qualcomm Incorporated Signaling data for multiplexing video components
US8704732B2 (en) 2010-09-29 2014-04-22 Qualcomm Incorporated Image synchronization for multiple displays
US20120183039A1 (en) * 2011-01-13 2012-07-19 Qualcomm Incorporated Coding static video data with a baseline encoder
US9503771B2 (en) 2011-02-04 2016-11-22 Qualcomm Incorporated Low latency wireless display for graphics
US20120206461A1 (en) * 2011-02-10 2012-08-16 David Wyatt Method and apparatus for controlling a self-refreshing display device coupled to a graphics controller
CN102543023B (zh) * 2012-01-10 2014-04-02 硅谷数模半导体（北京）有限公司 接收设备、视频刷新频率的控制方法、装置及系统
TWI508041B (zh) * 2013-01-18 2015-11-11 Novatek Microelectronics Corp 時序控制電路、影像驅動裝置、影像顯示系統及顯示驅動方法
KR102057502B1 (ko) * 2013-03-07 2020-01-22 삼성전자주식회사 디스플레이 드라이브 집적회로 및 영상 표시 시스템
US9620064B2 (en) * 2013-03-13 2017-04-11 Apple Inc. Compensation methods for display brightness change associated with reduced refresh rate
US9836437B2 (en) 2013-03-15 2017-12-05 Google Llc Screencasting for multi-screen applications
US9432667B2 (en) * 2013-06-11 2016-08-30 Qualcomm Incorporated Processing bitstream constraints relating to inter-layer prediction types in multi-layer video coding
US9826015B2 (en) 2013-09-04 2017-11-21 Qualcomm Incorporated Dynamic and automatic control of latency buffering for audio/video streaming
US9786255B2 (en) * 2014-05-30 2017-10-10 Nvidia Corporation Dynamic frame repetition in a variable refresh rate system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102428698A (zh) * 2009-03-23 2012-04-25 生命力有限公司 基于来自客户端设备的反馈信息压缩视频帧或其部分的系统及方法
CN103561268A (zh) * 2010-12-29 2014-02-05 中国移动通信集团公司 视频监控图像编码方法及装置

Also Published As

Publication number Publication date
CN107258086A (zh) 2017-10-17
TWI610564B (zh) 2018-01-01
WO2016148823A1 (en) 2016-09-22
US20160275919A1 (en) 2016-09-22
US9589543B2 (en) 2017-03-07
TW201703538A (zh) 2017-01-16

Similar Documents

Publication Publication Date Title
CN107258086B (zh) 针对汇显示器的静态帧图像质量改进的方法、装置及系统
US10951914B2 (en) Reliable large group of pictures (GOP) file streaming to wireless displays
KR101634500B1 (ko) 미디어 작업부하 스케줄러
CN106028066B (zh) 分布式媒体流同步控制
CN106416251B (zh) 基于感知质量的可缩放视频编码速率适配
TWI513316B (zh) 轉碼視頻資料之技術
CN107079192B (zh) 使用压缩视频流的动态屏幕上显示
US10080019B2 (en) Parallel encoding for wireless displays
US20160088298A1 (en) Video coding rate control including target bitrate and quality control
KR20150024398A (ko) 크기 기반 변환 유닛 컨텍스트 도출
JP6621827B2 (ja) 無線リンク状態に基づくビデオ復号化待ち時間調整、並びにビデオ復号化誤りの隠蔽のための、古いパケットのリプレイ
WO2010144488A2 (en) Dual-mode compression of images and videos for reliable real-time transmission
KR20150070313A (ko) 다수의 독립 코딩 스트림들 사이에서 공유된 모션 추정을 포함하는 비디오 코딩
JP6060394B2 (ja) クロスレイヤー・クロスチャネル残差予測
KR20210064116A (ko) 전송 제어 비디오 코딩
US10547839B2 (en) Block level rate distortion optimized quantization
WO2021237474A1 (zh) 视频传输方法、装置和系统
US11968380B2 (en) Encoding and decoding video
US20200329250A1 (en) Encoding and Decoding Video

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210730

Termination date: 20220217