CN104244013A - 显示单元上所渲染的视频数据的一部分的预测性增强 - Google Patents

显示单元上所渲染的视频数据的一部分的预测性增强 Download PDF

Info

Publication number
CN104244013A
CN104244013A CN201410240149.7A CN201410240149A CN104244013A CN 104244013 A CN104244013 A CN 104244013A CN 201410240149 A CN201410240149 A CN 201410240149A CN 104244013 A CN104244013 A CN 104244013A
Authority
CN
China
Prior art keywords
video
data processing
frame
processing equipment
display unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410240149.7A
Other languages
English (en)
Other versions
CN104244013B (zh
Inventor
尼雷施·莫尔
阿奴普·拉蒂
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nvidia Corp
Original Assignee
Nvidia Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nvidia Corp filed Critical Nvidia Corp
Publication of CN104244013A publication Critical patent/CN104244013A/zh
Application granted granted Critical
Publication of CN104244013B publication Critical patent/CN104244013B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406—Control of illumination source
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39—Control of the bit-mapped memory
    • G09G5/395—Arrangements specially adapted for transferring the contents of the bit-mapped memory to the screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/144—Movement detection
    • H04N5/145—Movement estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/20—Circuitry for controlling amplitude response
    • H04N5/205—Circuitry for controlling amplitude response for correcting amplitude versus frequency characteristic
    • H04N5/208—Circuitry for controlling amplitude response for correcting amplitude versus frequency characteristic for compensating for attenuation of high frequency components, e.g. crispening, aperture distortion correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/012—Conversion between an interlaced and a progressive signal
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/14—Solving problems related to the presentation of information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/12—Frame memory handling

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

显示单元上所渲染的视频数据的一部分的预测性增强。方法包括通过数据处理设备的可通信地耦连到存储器的处理器来预测在与数据处理设备相关联的显示单元上渲染视频帧期间数据处理设备的用户有可能聚焦到的视频帧的部分。视频帧是经解码的视频数据的一部分。方法还包括在预测视频帧的部分之后，通过处理器在显示单元上以与视频帧的其他部分相比增强的水平来渲染视频帧的部分。

Description

显示单元上所渲染的视频数据的一部分的预测性增强
技术领域
本公开总体涉及视频后处理(post-processing)，并且更具体地涉及与数据处理设备相关联的显示单元上所渲染的视频数据的一部分的预测性增强的方法、设备和/或系统。
背景技术
数据处理设备(例如，台式计算机、膝上型计算机、笔记本电脑、上网本、诸如移动电话的移动设备)可以在与其相关联的显示单元(例如液晶显示器(LCD))上渲染视频数据。为了增强观看视频数据期间的用户体验，数据处理设备可以执行一个或多个后处理算法以适当调整视频质量。一个或多个后处理算法的执行可能计算上开销很高，导致视频丢帧(frame-drop)。尽管执行一个或多个后处理算法来增强用户体验，但所述视频丢帧仍可能不利于用户体验。
发明内容
公开了与数据处理设备相关联的显示单元上所渲染的视频数据的一部分的预测性增强的方法、设备和/或系统。
在一方面，方法包括通过数据处理设备的可通信地耦连到存储器的处理器来预测在与数据处理设备相关联的显示单元上渲染视频帧期间数据处理设备的用户有可能聚焦到的视频帧的部分。视频帧是经解码的视频数据的一部分。方法还包括，在预测视频帧的部分之后，通过处理器在显示单元上以与视频帧的其他部分相比增强的水平来渲染视频帧的部分。
在另一方面，公开了通过数据处理设备可读的、并包括具体化在其中的通过数据处理设备可执行的指令的非暂时性介质。非暂时性介质包括通过数据处理设备的可通信地耦连到存储器的处理器来预测在与数据处理设备相关联的显示单元上渲染视频帧期间数据处理设备的用户有可能聚焦到的视频帧的部分的指令。视频帧是经解码的视频数据的一部分。非暂时性介质还包括，在预测视频帧的部分之后，通过处理器在显示单元上以与视频帧的其他部分相比增强的水平来渲染视频帧的部分的指令。
在又一方面，数据处理设备包括存储器、显示单元和可通信地耦连到存储器的处理器，所述存储器在其中具有经解码的视频数据。处理器配置为执行指令以：预测在显示单元上渲染经解码的视频数据的视频帧期间数据处理设备的用户有可能聚焦到的视频帧的部分，以及在预测视频帧的部分之后，在显示单元上以与视频帧的其他部分相比增强的水平来渲染视频帧的部分。
本文所公开的方法和系统可以以用于达成各方面的任何手段加以实现，并且可以以具体化指令集的非暂时性机器可读介质的形式加以执行，该指令集当由机器执行时使机器实施本文所公开的任何操作。
根据附图以及根据下面的详细描述，其他特征将是显而易见的。
附图说明
本发明的实施例通过示例而非限制的方式示出在附图的示图中，其中相似参考指示类似元件，并且其中：
图1是根据一个或多个实施例的数据处理设备的示意图。
图2是根据一个或多个实施例的、要在图1的数据处理设备的显示单元上渲染的、用户最有可能聚焦到的视频数据的部分的示意图。
图3是根据一个或多个实施例的、驱动程序组件与图1的数字处理设备的处理器和/或显示单元之间的交互的示意图。
图4是根据一个或多个实施例的、详述与图1的数据处理设备相关联的显示单元上所渲染的视频数据的一部分的预测性增强所涉及的操作的过程流程图。
所呈现的实施例的其他特征将从附图以及从以下详细描述显而易见。
具体实施方式
如下所述的示范性实施例可以用来提供与数据处理设备相关联的显示单元上所渲染的视频数据的一部分的预测性增强的方法、设备和/或系统。虽然已参考具体的示范性实施例描述了所呈现的实施例，但显而易见的是可对这些实施例进行各种修改和改变，而不脱离各实施例的较宽的精神和范围。
图1示出了根据一个或多个实施例的数据处理设备100。在一个或多个实施例中，数据处理设备100可以是膝上型计算机、台式计算机、笔记本电脑、上网本、平板电脑或诸如移动电话的移动设备。其他形式的数据处理设备100在本文所论述的示例性实施例的范围内。在一个或多个实施例中，数据处理设备100可以包括可通信地耦连到存储器104(例如易失性存储器和/或非易失性存储器)的处理器102(例如中央处理单元(CPU)、图形处理单元(GPU))；存储器104可以包括配置为可通过处理器102寻址的存储位置。
在一个或多个实施例中，数据处理设备100的存储器104可以在其中包括视频数据116(例如视频数据116可被下载并在存储器104中本地存储；视频数据116(例如视频流、文件)可以传送自数据源)。在一个或多个实施例中，处理器102可以对视频数据116实施适当的处理(例如数据转换)以使其能够在与数据处理设备100相关联的显示单元112上进行渲染；图1将显示单元112示出为与处理器102接合。在一个或多个实施例中，处理器102可以执行解码器引擎120(例如指令集)以在视频数据116被渲染之前对其进行解码。在一个或多个实施例中，后处理引擎130也可以在处理器102上执行；后处理引擎130可以配置为接收解码器引擎120的输出，并且在其在显示单元112上被渲染之前对其实施适当的处理，以降低整个数据处理设备100的功耗，如下所述。
数据处理设备100的用户150可能主要将注意力集中到显示单元112上其视场的一小部分。用户视觉可利用其眼睛的视网膜中央凹(fovea)来聚焦到视场的一小部分。视场的其余部分可以通过周围视觉被覆盖；周围视觉可能主要负责运动检测并且可能对视场中的细节不是非常敏感。换言之，用户150可能不会注意到通过周围视觉所覆盖的视场的大部分中的精细细节(例如颜色细节、表示视频帧的像素之间的强度水平过渡的边缘)。在一个或多个实施例中，可以在经解码的视频数据116的后处理期间利用前述人类视觉(或者用户视觉)的特性，以导致功率节约。
在一个或多个替代实施例中，后处理引擎130可以是解码器引擎120的一部分；图1仅出于示例目的而分开地示出后处理引擎130和解码器引擎120。图1还示出了与视频帧1221-N(例如示出为视频数据116的一部分)相关联的参数(例如视频参数140)，其存储在存储器104中。本文所论述的示例性实施例可以增强视场的一小部分内的视频参数140，以提供功率节约。
图2示出了根据一个或多个实施例的、要在显示单元112上被渲染的、用户150最有可能聚焦到的视频数据116的部分202。在一个或多个实施例中，为了确定视频数据116的视频帧1221-N的部分202，可以通过处理器102分析与视频帧1221-N相关联的运动矢量190。在一个或多个实施例中，运动矢量190可以基于视频帧1221-N的宏块在一个或多个参考视频帧1221-N上的位置来表示所述宏块。在一个或多个实施例中，处理器102可以分析运动矢量190以检测/估计视频帧1221-N的与高活动性(例如高于阈值的活动性)相关联的部分(例如，部分202)。由于用户150最有可能聚焦到显示单元112的具有高活动性的“屏幕上”区域，因此可以基于运动矢量190的高幅值和/或其高密度来确定部分202。
应该注意，上述的部分202的确定不限于对运动矢量190进行分析。在视频数据116是电影的示范性场景中，用户150最有可能聚焦到说话者(例如电影中的主角)。因此，可以(例如通过处理器102)通过分析视频帧1221-N的音频内容来确定部分202。在一个或多个实施例中，可以基于从先前的执行/处理所收集的数据来进一步提高部分202的确定的精度。
在一个或多个实施例中，在渲染经解码的视频帧1221-N之前，处理器102可以配置为在其上应用后处理算法198(或者后处理算法集198；后处理算法示出为后处理引擎130的一部分)，以增强与部分202相关联的视频质量。在一个或多个实施例中，后处理算法198可以包含诸如降噪、边缘增强、动态的颜色/对比度调整、软件处理放大器(procamp)调整以及去隔行和/或视频参数140(例如分辨率)的缩放/增强的元素。后处理算法198的其他元素在本文所论述的示例性实施例的范围内。
在一个或多个实施例中，可以通过与处理器102和/或显示单元112相关联的驱动程序组件(例如，指令集；以下将描述)来发起部分202的估计/检测和/或以增强的水平进行的部分202的渲染。在一个或多个实施例中，可以不要求后处理算法198应用于完整的视频帧1221-N；由于用户150可能不会察觉视频帧1221-N的经增强的部分202和视频帧1221-N的非增强的部分之间的差别，因此其仅仅应用于部分202可能就足够了。在一个或多个实施例中，显示单元112的用户最有可能聚焦到的区域的大小可以取决于显示单元112的大小而变化。对于诸如平板电脑和智能电话的手持设备，前述的聚焦区域可以与用户150的视场的大小相当；因此，以上所论述的处理的有效性可随着显示单元112大小的增大而增大。
应该注意，对整个视频帧1221-N执行复杂的后处理算法198可能受限于诸如处理能力的因素，从而导致丢帧。由于复杂性局限于部分202，所以示例性实施例提供执行复杂的后处理算法198而没有前述问题的手段。替代地，复杂的后处理算法198可以应用于部分202，并且不那么复杂的后处理算法198可以应用到视频帧1221-N的其他部分。
另外，应该注意上述增强视频质量不限于以增强的水平渲染部分202。在示范性实施例中，可以以正常操作模式渲染部分202，并且可以以降低的水平渲染视频帧1221-N的其他部分。这样的变化在本文所论述的示例性实施例的范围内。此外，以增强的水平渲染部分202包括，与在显示单元112的“屏幕”上的对应区域/部分增大其背光164的强度水平相关联的处理。图1将背光164的背光驱动程序电路162示出为与处理器102接合。一经检测/估计出部分202，处理器102可以配置为传送控制信号到背光驱动程序电路162，以增大用于与部分202相对应的“屏幕上”部分的背光164的强度水平。替代地，背光驱动程序电路162可以维持用于与部分202相对应的“屏幕上”部分的背光164的强度水平并且降低用于其他部分的强度。
图3示出了根据一个或多个实施例的、驱动程序组件302与处理器102和/或显示单元112之间的交互。在一个或多个实施例中，驱动程序组件302可以配置为发起部分202的检测/估计和/或在显示单元112上以增强的水平进行的部分202的渲染。触发前述过程的示范性场景可以包括用户150将数据处理设备100从交流电(AC)操作模式切换到其电池操作模式。可以通过处理器102结合驱动程序组件302检测前述切换。替代地，处理器102可以配置为周期性地轮询数据处理设备100的电池以得到其操作模式(或者，处理器102可以通过在数据处理设备100上执行的操作系统188来获得操作模式)。一旦通过驱动程序组件302结合处理器102检测到电池模式，就可以发起上述处理。
另外，用户150可以通过数据处理设备100上所提供的物理按钮和/或在数据处理设备上执行的应用(例如示出为存储器104的一部分的多媒体应用196)的用户界面来发起上述处理。在一个或多个实施例中，驱动程序组件302可以与在数据处理设备100上执行的操作系统188(例如也示出为存储器104的一部分)和/或多媒体应用196封装在一起。此外，与驱动程序组件302和/或后处理算法198相关联的指令可以有形地具体化在可通过数据处理设备100读取的非暂时性介质(例如压缩光盘(CD)、数字视频光盘(DVD)、蓝光光盘、硬盘驱动器；适当的指令可以下载到硬盘驱动器)上。
图4示出了根据一个或多个实施例的、详述与数据处理设备100相关联的显示单元112上所渲染的视频数据116的部分202的预测性增强所涉及的操作的过程流程图。在一个或多个实施例中，操作402可以涉及通过处理器102来预测在显示单元112上渲染视频帧1221-N期间用户150有可能聚焦到的视频帧1221-N的部分202。在一个或多个实施例中，视频帧1221-N可以是经解码的视频数据116的一部分。在一个或多个实施例中，操作404随后可以涉及在预测视频帧1221-N的部分202之后，通过处理器102在显示单元112上以与视频帧1221-N的其他部分相比增强的水平来渲染视频帧1221-N的部分202。
虽然已参考具体的示范性实施例描述了所呈现的实施例，但将显而易见的是可对这些实施例进行各种修改和改变，而不脱离各实施例的较宽的精神和范围。例如，本文所描述的各种设备和模块可以使用硬件电路(例如基于CMOS的逻辑电路)、固件、软件或者硬件、固件和(例如具体化在非暂时性机器可读介质中的)软件的任何组合来使能和操作。例如，可以使用晶体管、逻辑门和电子电路(例如专用集成电路(ASIC)和/或数字信号处理器(DSP)电路)来具体化各种电子结构和方法。
此外，将理解的是，本文所公开的各种操作、过程和方法可以具体化在与数据处理系统(例如数据处理设备100)兼容的非暂时性机器可读介质和/或机器可访问介质中。因此，说明书和附图将被认为是例示性而非限制性的意义。

Claims (20)

1.一种方法，包括
通过数据处理设备的可通信地耦连到存储器的处理器来预测在与所述数据处理设备相关联的显示单元上渲染视频帧期间所述数据处理设备的用户有可能聚焦到的所述视频帧的部分，所述视频帧是经解码的视频数据的一部分；以及
在所述视频帧的所述部分的所述预测之后，通过所述处理器在所述显示单元上以与所述视频帧的其他部分相比增强的水平来渲染所述视频帧的所述部分。
2.根据权利要求1所述的方法，包括通过下列中的至少一个来预测所述视频帧的所述部分：
分析与所述视频帧相关联的运动矢量以确定高于阈值的活动性；以及
分析与所述视频帧相关联的音频内容。
3.根据权利要求1所述的方法，其中以所述增强的水平来渲染所述视频帧的所述部分包括下列中的至少一个：
通过下列中的至少一个来增强与所述部分相关联的视频质量：降噪、边缘增强、动态颜色调整、动态对比度调整、软件处理放大器调整、去隔行和缩放与所述部分相关联的至少一个视频参数；
传送控制信号到所述显示单元的背光的背光驱动程序电路，以调整与所述视频帧的所述部分和所述视频帧的所述其他部分中的至少一个相对应的所述背光的强度水平；以及
维持与所述视频帧的所述部分相关联的所述视频质量并且降低与所述视频帧的所述其他部分相关联的视频质量。
4.根据权利要求1所述的方法，进一步包括通过与所述处理器和所述显示单元中的至少一个相关联的驱动程序组件来发起所述部分的所述预测和以所述增强的水平进行的所述部分的所述渲染中的至少一个。
5.根据权利要求4所述的方法，包括通过下列中的至少一个来提供所述驱动程序组件：将其与在所述数据处理设备上执行的操作系统封装在一起和将其与在所述数据处理设备上执行的应用封装在一起。
6.根据权利要求4所述的方法，进一步包括根据下列中的至少一个来触发所述预测和所述渲染中的所述至少一个的所述发起：检测到所述数据处理设备的电池模式操作、所述用户按压所述数据处理设备上的物理按钮以及通过在所述数据处理设备上执行的多媒体应用的用户界面的用户发起。
7.根据权利要求1所述的方法，进一步包括基于从与其相关联的先前的执行所收集的数据来提高所述预测的精度。
8.一种非暂时性介质，其通过数据处理设备是可读的并且包括具体化在其中的、通过所述数据处理设备可执行的指令，包括：
通过所述数据处理设备的可通信地耦连到存储器的处理器来预测在与所述数据处理设备相关联的显示单元上渲染视频帧期间所述数据处理设备的用户有可能聚焦到的所述视频帧的部分的指令，所述视频帧是经解码的视频数据的一部分；以及
在所述视频帧的所述部分的所述预测之后，通过所述处理器在所述显示单元上以与所述视频帧的其他部分相比增强的水平来渲染所述视频帧的所述部分的指令。
9.根据权利要求8所述的非暂时性介质，包括通过下列中的至少一个来预测所述视频帧的所述部分的指令：
分析与所述视频帧相关联的运动矢量以确定高于阈值的活动性；以及
分析与所述视频帧相关联的音频内容。
10.根据权利要求8所述的非暂时性介质，其中以所述增强的水平来渲染所述视频帧的所述部分的指令包括下列中的至少一个：
通过下列中的至少一个来增强与所述部分相关联的视频质量的指令：降噪、边缘增强、动态颜色调整、动态对比度调整、软件处理放大器调整、去隔行和缩放与所述部分相关联的至少一个视频参数；
传送控制信号到所述显示单元的背光的背光驱动程序电路，以调整与所述视频帧的所述部分和所述视频帧的所述其他部分中的至少一个相对应的所述背光的强度水平的指令；以及
维持与所述视频帧的所述部分相关联的所述视频质量并且降低与所述视频帧的所述其他部分相关联的视频质量的指令。
11.根据权利要求8所述的非暂时性介质，进一步包括通过与所述处理器和所述显示单元中的至少一个相关联的驱动程序组件来发起所述部分的所述预测和以所述增强的水平进行的所述部分的所述渲染中的至少一个的指令。
12.根据权利要求11所述的非暂时性介质，进一步包括根据下列中的至少一个来触发所述预测和所述渲染中的所述至少一个的所述发起的指令：检测到所述数据处理设备的电池模式操作、所述用户按压所述数据处理设备上的物理按钮和通过在所述数据处理设备上执行的多媒体应用的用户界面的用户发起。
13.根据权利要求8所述的非暂时性介质，进一步包括基于从与其相关联的先前的执行所收集的数据来提高所述预测的精度的指令。
14.一种数据处理设备，包括：
存储器，其在其中包括经解码的视频数据；
显示单元；以及
处理器，其可通信地耦连到所述存储器，所述处理器配置为执行指令以：
预测在所述显示单元上渲染所述经解码的视频数据的视频帧期间所述数据处理设备的用户有可能聚焦到的所述视频帧的部分；以及
在所述视频帧的所述部分的所述预测之后，在所述显示单元上以与所述视频帧的其他部分相比增强的水平来渲染所述视频帧的所述部分。
15.根据权利要求14所述的数据处理设备，其中所述处理器配置为通过下列中的至少一个来预测所述视频帧的所述部分：
分析与所述视频帧相关联的运动矢量以确定高于阈值的活动性；以及
分析与所述视频帧相关联的音频内容。
16.根据权利要求14所述的数据处理设备，其中所述处理器配置为通过下列中的至少一个来以所述增强的水平渲染所述视频帧的所述部分：
通过下列中的至少一个来增强与所述部分相关联的视频质量：降噪、边缘增强、动态颜色调整、动态对比度调整、软件处理放大器调整、去隔行和缩放与所述部分相关联的至少一个视频参数；
传送控制信号到所述显示单元的背光的背光驱动程序电路，以调整与所述视频帧的所述部分和所述视频帧的所述其他部分中的至少一个相对应的所述背光的强度水平；以及
维持与所述视频帧的所述部分相关联的所述视频质量并且降低与所述视频帧的所述其他部分相关联的视频质量。
17.根据权利要求14所述的数据处理设备，进一步包括与所述处理器和所述显示单元中的至少一个相关联的驱动程序组件，以发起所述部分的所述预测和以所述增强的水平进行的所述部分的所述渲染中的至少一个。
18.根据权利要求17所述的数据处理设备，其中所述驱动程序组件为下列中的至少一个：与在所述数据处理设备上执行的操作系统封装在一起和与在所述数据处理设备上执行的应用封装在一起。
19.根据权利要求17所述的数据处理设备，其中根据下列中的至少一个来触发所述预测和所述渲染中的所述至少一个的所述发起：检测到所述数据处理设备的电池模式操作、所述用户按压所述数据处理设备上的物理按钮以及通过在所述数据处理设备上执行的多媒体应用的用户界面的用户发起。
20.根据权利要求14所述的数据处理设备，其中所述处理器进一步配置为执行指令以基于从与其相关联的先前的执行所收集的数据来提高所述预测的精度。
CN201410240149.7A 2013-06-07 2014-05-30 显示单元上所渲染的视频数据的一部分的预测性增强 Active CN104244013B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/912,221 2013-06-07
US13/912,221 US9300933B2 (en) 2013-06-07 2013-06-07 Predictive enhancement of a portion of video data rendered on a display unit associated with a data processing device

Publications (2)

Publication Number Publication Date
CN104244013A true CN104244013A (zh) 2014-12-24
CN104244013B CN104244013B (zh) 2018-02-02

Family

ID=52005201

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410240149.7A Active CN104244013B (zh) 2013-06-07 2014-05-30 显示单元上所渲染的视频数据的一部分的预测性增强

Country Status (4)

Country Link
US (1) US9300933B2 (zh)
CN (1) CN104244013B (zh)
DE (1) DE102013021989B4 (zh)
TW (1) TW201447809A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107038743A (zh) * 2016-01-13 2017-08-11 罗克韦尔柯林斯公司 采用动态控制的采样提高渲染性能

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102644126B1 (ko) * 2018-11-16 2024-03-07 삼성전자주식회사 영상 처리 장치 및 그 동작 방법

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1032821A (ja) * 1996-07-15 1998-02-03 Nec Corp Ｍｐｅｇ符号化画像データ復号装置
US6078349A (en) * 1995-06-07 2000-06-20 Compaq Computer Corporation Process and system for increasing the display resolution of a point-to-point video transmission relative to the actual amount of video data sent
US20100039618A1 (en) * 2008-08-15 2010-02-18 Imotions - Emotion Technology A/S System and method for identifying the existence and position of text in visual media content and for determining a subject's interactions with the text
CN101785046A (zh) * 2007-08-19 2010-07-21 环弓有限公司 穿在手指上的装置和相关使用方法
US20110267422A1 (en) * 2010-04-30 2011-11-03 International Business Machines Corporation Multi-participant audio/video communication system with participant role indicator
CN102270422A (zh) * 2010-06-01 2011-12-07 三星电子株式会社 显示设备
CN102737599A (zh) * 2011-04-01 2012-10-17 索尼公司 显示单元和显示方法

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5481275A (en) 1992-11-02 1996-01-02 The 3Do Company Resolution enhancement for video display using multi-line interpolation
US6466624B1 (en) 1998-10-28 2002-10-15 Pixonics, Llc Video decoder with bit stream based enhancements
US6940905B2 (en) * 2000-09-22 2005-09-06 Koninklijke Philips Electronics N.V. Double-loop motion-compensation fine granular scalability
JP4153202B2 (ja) * 2001-12-25 2008-09-24 松下電器産業株式会社 映像符号化装置
JP4413504B2 (ja) 2003-02-13 2010-02-10 株式会社東芝 医用画像処理装置、医用画像処理方法および医用画像処理プログラム
US8330831B2 (en) 2003-08-05 2012-12-11 DigitalOptics Corporation Europe Limited Method of gathering visual meta data using a reference image
US8582660B2 (en) * 2006-04-13 2013-11-12 Qualcomm Incorporated Selective video frame rate upconversion
US8345756B2 (en) 2006-08-31 2013-01-01 Ati Technologies, Inc. Method and system for parallel intra-prediction decoding of video data
WO2008028334A1 (en) * 2006-09-01 2008-03-13 Thomson Licensing Method and device for adaptive video presentation
KR101408698B1 (ko) * 2007-07-31 2014-06-18 삼성전자주식회사 가중치 예측을 이용한 영상 부호화, 복호화 방법 및 장치
US20110210931A1 (en) * 2007-08-19 2011-09-01 Ringbow Ltd. Finger-worn device and interaction methods and communication methods
US7952596B2 (en) * 2008-02-11 2011-05-31 Sony Ericsson Mobile Communications Ab Electronic devices that pan/zoom displayed sub-area within video frames in response to movement therein
US8130257B2 (en) * 2008-06-27 2012-03-06 Microsoft Corporation Speaker and person backlighting for improved AEC and AGC
US8314767B2 (en) 2008-08-30 2012-11-20 Sharp Laboratories Of America, Inc. Methods and systems for reducing view-angle-induced color shift
US8325280B2 (en) 2009-08-06 2012-12-04 Freescale Semiconductor, Inc. Dynamic compensation of display backlight by adaptively adjusting a scaling factor based on motion
WO2012101723A1 (ja) * 2011-01-26 2012-08-02 パナソニック株式会社 関節領域表示装置、関節領域検出装置、関節領域帰属度算出装置、関節状領域帰属度算出装置および関節領域表示方法
US20130009980A1 (en) * 2011-07-07 2013-01-10 Ati Technologies Ulc Viewing-focus oriented image processing
US8990843B2 (en) * 2012-10-26 2015-03-24 Mobitv, Inc. Eye tracking based defocusing
US20140316543A1 (en) * 2013-04-19 2014-10-23 Qualcomm Incorporated Configuring audio for a coordinated display session between a plurality of proximate client devices

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6078349A (en) * 1995-06-07 2000-06-20 Compaq Computer Corporation Process and system for increasing the display resolution of a point-to-point video transmission relative to the actual amount of video data sent
JPH1032821A (ja) * 1996-07-15 1998-02-03 Nec Corp Ｍｐｅｇ符号化画像データ復号装置
CN101785046A (zh) * 2007-08-19 2010-07-21 环弓有限公司 穿在手指上的装置和相关使用方法
US20100039618A1 (en) * 2008-08-15 2010-02-18 Imotions - Emotion Technology A/S System and method for identifying the existence and position of text in visual media content and for determining a subject's interactions with the text
US20110267422A1 (en) * 2010-04-30 2011-11-03 International Business Machines Corporation Multi-participant audio/video communication system with participant role indicator
CN102270422A (zh) * 2010-06-01 2011-12-07 三星电子株式会社 显示设备
CN102737599A (zh) * 2011-04-01 2012-10-17 索尼公司 显示单元和显示方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107038743A (zh) * 2016-01-13 2017-08-11 罗克韦尔柯林斯公司 采用动态控制的采样提高渲染性能
CN107038743B (zh) * 2016-01-13 2020-02-18 罗克韦尔柯林斯公司 采用动态控制的采样提高渲染性能

Also Published As

Publication number Publication date
TW201447809A (zh) 2014-12-16
US9300933B2 (en) 2016-03-29
US20140362296A1 (en) 2014-12-11
DE102013021989B4 (de) 2019-10-10
DE102013021989A1 (de) 2014-12-11
CN104244013B (zh) 2018-02-02

Similar Documents

Publication Publication Date Title
US10949073B2 (en) Dynamic adjustment of a user interface
US9437165B2 (en) Power-efficient control of display data configured to be rendered on a display unit of a data processing device
US9906772B2 (en) Method for performing multi-camera capturing control of an electronic device, and associated apparatus
WO2020062924A1 (zh) 视频增强控制方法、装置、电子设备及存储介质
US20140341530A1 (en) Leveraging an existing sensor of a data processing device to effect a distance based dynamic modification of a video frame parameter
US20110035665A1 (en) Digital imaging processing apparatus, method of controlling the same, and recording medium storing program to execute the method
JP2005223765A5 (zh)
CN113168038B (zh) 一种显示图像的方法、装置
JP2006050326A (ja) 情報処理装置および同装置のシーンチェンジ検出方法
US20210281911A1 (en) Video enhancement control method, device, electronic device, and storage medium
CN107332992B (zh) 一种视频播放方法及移动终端
EP3660823A1 (en) Method and device for video enhancement, and electronic device using the same
JP6903150B2 (ja) ディスプレイ装置及びその制御方法
US10015307B2 (en) Electronic device and usage control method
CN104244013A (zh) 显示单元上所渲染的视频数据的一部分的预测性增强
JP2021034008A (ja) プロセッサチップ及びその制御方法
JP2009177603A (ja) 情報処理装置および表示制御方法
US20150062436A1 (en) Method for video recording and electronic device thereof
JP2014052494A (ja) 画像表示装置、画像表示装置の制御方法、画像表示装置の制御プログラムおよびその制御プログラムを記録した記録媒体
US9576337B2 (en) Image processing apparatus and control method thereof
US8538190B2 (en) Apparatus, method, and recording medium for reduced noise image processing
CN107608589B (zh) 一种视频制作方法及移动终端
KR20140033695A (ko) 디스플레이장치 및 그 제어방법
CN109218803B (zh) 视频增强控制方法、装置以及电子设备
JP2000350115A (ja) 画像処理装置および方法、並びに媒体

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant