CN108353198B - 用于提供功率节省媒体内容的方法和装置 - Google Patents

用于提供功率节省媒体内容的方法和装置 Download PDF

Info

Publication number
CN108353198B
CN108353198B CN201680062061.8A CN201680062061A CN108353198B CN 108353198 B CN108353198 B CN 108353198B CN 201680062061 A CN201680062061 A CN 201680062061A CN 108353198 B CN108353198 B CN 108353198B
Authority
CN
China
Prior art keywords
media content
media
speed
segment
power consumption
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680062061.8A
Other languages
English (en)
Other versions
CN108353198A (zh
Inventor
M.F.拉姆赖奇
T.E.霍尔兰德
C.A.勒费夫尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
InterDigital Madison Patent Holdings SAS
Original Assignee
InterDigital Madison Patent Holdings SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by InterDigital Madison Patent Holdings SAS filed Critical InterDigital Madison Patent Holdings SAS
Publication of CN108353198A publication Critical patent/CN108353198A/zh
Application granted granted Critical
Publication of CN108353198B publication Critical patent/CN108353198B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4436Power management, e.g. shutting down unused components of the receiver
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8543Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

描述了提供媒体内容的功率节省信息的方法(1000),包括:接收(1010)包括多个媒体片段的媒体内容,确定(1020)所述多个媒体片段中的媒体片段的功率消耗指示符,基于所述媒体片段的功率消耗指示符来确定(1030)所述媒体片段的功率节省信息,以及提供(1040)所述功率节省信息。描述了接收媒体内容的功率节省信息的方法(1100),包括:接收(1110)媒体内容中的媒体片段的功率节省信息,将所述功率节省信息应用(1120)于所述媒体片段,以生成功率调整的媒体内容,以及提供(1130)所述功率调整的媒体内容。还提供了用于提供(110,200)和用于接收(120,200,250)媒体内容的功率节省信息的等同装置。

Description

用于提供功率节省媒体内容的方法和装置
相关申请的交叉引用
本申请要求于2015年9月15日提交的标题为“METHODS,SYSTEMS AND APPARATUSFOR PROVIDING POWER SAVING MEDIA CONTENT”的美国临时专利申请No.62/218679的权益和优先权,其内容通过针对所有目的引用其整体而在此明确并入。
技术领域
本公开通常涉及媒体内容处理。具体而言,本公开涉及能量节省内容和/或用于在观看内容时节约功率消耗的元数据。
背景技术
在此描述的任何背景信息旨在向读者介绍可能与下面描述的本实施例有关的技术的各方面。相信该讨论有助于向读者提供背景信息,以便于更好地理解本公开的各方面。因此,应理解,这些陈述要在该角度上来阅读。
许多现代电视和显示设备显示不同明亮度的内容并且使功率动态地变化。在正常的观看条件下,典型的液晶显示器(LCD)电视接收器可能消耗150瓦的功率。大约一半的功率消耗是由于显示器的背光。许多背光是区域可调光的,通过调暗黑暗场景区中的背光来允许对比度增强。当使用区域可调光背光时,显示器消耗的功率取决于区域明亮度。例如,全白场景可能消耗150瓦,全黑场景75瓦,全灰场景110瓦。具有屏幕的左侧黑色且右侧白色的场景可能消耗110瓦。
目前许多TV还提供能量节省模式,其降低总体背光明亮度,而不考虑场景内容。然而,这些设备并不根据节目内容、预期未来场景或者知道电力公用事业条件来节省功率。因此,它们在其降低功率消耗的能力方面受到限制。因此,存在对解决以上讨论的问题并提供有效技术以进一步降低电视接收器或者其他有线或无线视频处理设备中的功率消耗的需要。本公开涉及这样的技术。
发明内容
根据本公开的一方面,提供了一种提供媒体内容的功率节省信息的方法,所述方法包括:接收包括多个媒体片段的媒体内容,确定所述多个媒体片段中的媒体片段的功率消耗指示符,基于所述媒体片段的功率消耗指示符来确定所述媒体片段的功率节省信息,以及提供所述功率节省信息。
根据本公开的一方面,一种用于提供媒体内容的功率节省信息的装置,所述装置包括与至少一个输入/输出接口通信的处理器,以及与所述处理器通信的至少一个存储器,所述处理器被配置为:接收包括多个媒体片段的媒体内容,确定所述多个媒体片段中的媒体片段的功率消耗指示符,基于所述媒体片段的功率消耗指示符来确定所述媒体片段的功率节省信息,以及提供所述功率节省信息。
根据本公开的一方面,一种接收媒体内容的功率节省信息的方法,所述方法包括:接收媒体内容中的媒体片段的功率节省信息,将所述功率节省信息应用于所述媒体片段,以生成功率调整的媒体内容,以及提供所述功率调整的媒体内容。
根据本公开的一方面,一种用于接收媒体内容的功率节省信息的装置,所述装置包括与至少一个输入/输出接口通信的处理器,以及与所述处理器通信的至少一个存储器,所述处理器被配置为:接收媒体内容中的媒体片段的功率节省信息,将所述功率节省信息应用于所述媒体片段,以生成功率调整的媒体内容,以及提供所述功率调整的媒体内容。
根据参照附图进行的对示例性实施例的以下详细描述,将使本公开的附加特征和优点明显。
附图说明
根据下面简要描述的以下示例性附图可以更好地理解本公开:
图1图示了根据本公开的实施例的示例性系统的示意图。
图2A图示了根据本公开的实施例的示例性装置的示意图。
图2B图示了根据本公开的实施例的示例性接收器系统的示意图。
图3图示了根据本公开的实施例的示例性系统的示意图。
图4A图示了根据本公开的实施例的示例性方法的流程图。
图4B图示了根据本公开的实施例的示例性方法的流程图。
图5图示了根据本公开的实施例的媒体内容的经修改的播出时间确定的示例性绘制图。
图6图示了根据本公开的实施例的速度修改传递函数的示例性图。
图7A图示了根据本公开的实施例的媒体内容的经修改的播出时间确定的示例性绘制图。
图7B图示了根据本公开的实施例的具有经修改的播出时间的媒体内容的示例性绘制图。
图8A图示了根据本公开的实施例的媒体内容的经修改的播出时间确定的示例性绘制图。
图8B图示了根据本公开的实施例的具有经修改的播出时间的媒体内容的示例性绘制图。
图9图示了根据本公开的实施例的接收器缓冲器等级随时间的示例性绘制图。
图10图示了根据本公开的实施例的提供媒体内容的功率节省信息的示例性方法的流程图。
图11图示了根据本公开的实施例的接收媒体内容的功率节省信息的示例性方法的流程图。
具体实施方式
应理解,图中所示的元件可以以各种形式的硬件、软件或其组合来实现。优选地,这些元件在一个或多个适当编程的通用设备上以硬件和软件的组合来实现,该通用设备可以包括处理器、存储器和输入/输出接口。在此,短语“耦合”被定义为意指直接连接到或者通过一个或多个中间组件间接连接。这样的中间组件可以包括基于硬件的组件和基于软件的组件。
本描述说明了本公开的原理。因此将理解,本领域技术人员将能够设计各种布置,该布置尽管未在此明确描述或示出,但是体现本公开的原理并包括在其范围内。
在此叙述的所有示例和条件语言旨在用于教育目的,以帮助读者理解本公开的原理和发明人为促进技术而贡献的概念,并且要被解释为不限于这样具体叙述的示例和条件。
此外,在此叙述本公开的原理、方面和实施例的所有陈述以及本公开的具体示例旨在涵盖其结构等同物和功能等同物。另外,旨在这样的等同物包括当前已知的等同物以及将来开发的等同物,即,所开发的执行相同功能而不考虑结构的任何元件。
因此,例如,本领域技术人员将理解,在此呈现的框图表示体现本公开原理的说明性电路的概念视图。类似地,将理解,任何流程图表、流程图、状态转换图、伪代码等都表示可以在计算机可读介质中基本表示并由计算机或处理器执行的各种处理,无论这样的计算机或处理器是否明确示出。
可以通过使用专用硬件以及能够与适当软件相关联地执行软件的硬件来提供图中所示的各种元件的功能。当由处理器提供时,功能可以由单个专用处理器、单个共享处理器或多个单独的处理器(其中的一些处理器可以共享)来提供。此外,术语“处理器”或“控制器”的明确使用不应被解释为专指能够执行软件的硬件,而是可以隐含地包括但不限于数字信号处理器(DSP)硬件、用于存储软件的只读存储器(ROM)、随机存取存储器(RAM)、和非易失性储存器。
还可以包括常规和/或定制的其他硬件。类似地,图中所示的任何切换仅仅是概念性的。它们的功能可以通过程序逻辑的操作、通过专用逻辑、通过程序控制和专用逻辑的交互来执行,或者甚至手动执行,特定技术可以由实现者选择,如从上下文更具体理解的那样。
在在此的权利要求中,表达为用于执行指定功能的部件的任何元件旨在涵盖执行该功能的任何方式,包括例如a)执行该功能的电路元件的组合,或者b)任何形式的软件,因此包括固件、微代码等等,与用于执行该软件适当电路组合以执行该功能。由这样的权利要求限定的本公开在于以下事实,即,由各种所述部件提供的功能以权利要求所要求的方式组合和集合在一起。因此认为可以提供这些功能的任何部件都等同于在此所示的那些部件。
本公开的一方面涉及针对在显示或提供媒体内容时预期、预测或估计要使用的功率确定功率节省或功率优化。如在此所使用的,“功率节省”可以被定义为包括降低功率和/或能量的消耗。功率节省还可以指代媒体内容的“绿色”或节能版本。功率节省还可以指代基于消耗负载和/或基础设施的功率优化。例如,可以基于最终用户装置或设备处的预期、预测或估计的内容功率使用来确定功率。
本公开的一方面涉及确定媒体内容和/或媒体内容片段或子单元的功率消耗。由此,如在此所讨论的,功率消耗或功率确定参考预期、预测或估计的功率消耗和/或由装置和/或系统进行的使用。估计的功率消耗可以是例如基于诸如亮度之类的内容属性的测量的功率消耗指示符。
如在此所使用的,“媒体内容”可以被定义为包括任何类型的媒体,包括从任何源接收的任何类型的音频、视频和/或图像媒体内容。例如,“媒体内容”可以包括互联网内容、流式服务(例如,M-GO、Netflix、Hulu、亚马逊)、记录的视频内容、视频点播内容、广播的内容、电视内容、电视节目(或编排)、广告、商业广告、音乐、电影、视频剪辑、交互式游戏、基于网络的娱乐应用、以及其他媒体资产。媒体资产可以包括任何和所有种类的数字媒体格式,诸如音频文件、图像文件或视频文件。
本公开的一方面涉及在提供媒体内容时(例如,在最终用户设备处显示或播放媒体内容时)降低功率消耗。本公开的一方面涉及修改或提供选项来修改媒体内容速度,即,加快或减慢呈现时间。在一个实施例中,可以通过缩放每个视频帧的持续时间(或者等同地,每个比特的数据)来修改速度。在一个实施例中,增加(或减少)速度可以等同于相对于针对内容中的相同帧数的媒体内容的原始或接收的帧速率来增加(或减少)呈现比特或帧速率(即,栅格帧速率)。例如,播出速度修改在传统媒体广播中具有先例,因为以24帧每秒(f/s)的帧速率拍摄的运动图片以25f/s显示在欧洲相位交替光(PAL)和连续彩色电视(SECAM)广播电视系统上。这表示4.2%的恒定加快,并且在没有音频时间尺度修改的情况下进行。取决于媒体内容,更高速度变化可能没有明显影响。音频可能会被处理为调整音调(pitch),以提高用户理解加速和减速的音频内容的能力。音调调整可以防止音频在回放速度增加的情况下听起来很高音调,并且可以防止音频在回放速度减少的情况下听起来很低音调。
在一个实施例中,还可以通过减少或增加视频帧的数量来修改媒体内容速度。如果呈现速率(帧或比特率)与接收或原始的速率相同,则减慢媒体内容可以等同于帧数的增加。可以通过帧的内插或重复来完成帧数的增加。类似地,如果呈现速率与接收或原始的速率相同,则加快媒体内容可以等同于帧数的减少。可以通过丢弃帧或者以附加滤波纠正失真来丢弃帧(后者也称为抽取)来完成帧数的减少。例如,媒体内容片段的呈现或播出时间可以降低10%,使得对于原始媒体内容片段中的每10个帧,仅提供9个帧。在另一示例中,媒体内容片段的呈现或播出时间可以增加10%,使得对于原始媒体内容片段中的每10个帧,经由内插或重复提供11个帧。
在一个实施例中,可以同时修改内容中的帧速率和帧数,以便修改媒体内容的速度。例如,帧速率可以增加并且帧数可以减少,以便加快内容。或者帧速率可以减少并且帧数可以增加,以便减慢内容。其他组合可能有不同的结果。
本公开的一方面涉及基于媒体内容片段的功率消耗指示来修改媒体内容的片段的播出时间。
本公开的一方面涉及基于媒体内容速度的功率节省。本公开的一方面涉及基于自适应地修改提供媒体内容的速度的功率节省。本公开的一方面涉及基于适配于媒体内容的媒体内容速度修改的功率节省。可以基于切片、基于逐帧、基于胶片帧、基于图片组(GOP)、基于视频场景、或者基于任何其他媒体片段来执行速度修改(例如,更快或更慢的速度)。本公开的一方面涉及基于媒体内容功率考虑来增加或减少提供媒体内容的速度。本公开的一方面涉及基于修改媒体内容片段的速度的功率节省。本公开的一方面涉及基于相对于相同媒体内容的其他片段来修改媒体内容片段的速度的功率节省。
本公开的一方面涉及基于内容信息来确定速度范围或边界(例如,最大速度和/或最小速度)。例如,可以基于媒体场景内容、对话、媒体内容地理位置(媒体内容中描绘的位置或正在观看媒体内容的位置)、偏好或观看容限(例如,可以观察媒体内容的最大小时数)中的一个或多个来确定速度范围。
在一个实施例中,可以通过修改显示或播放视频片段的速度,即,视频片段的播出时间,来实现功率节省。例如,功率节省可以基于加快高功率视频片段,其中加快的量被限制在所确定的最大速度边界内。在另一实施例中,功率节省可以基于减慢低功率视频片段,其中减慢的量被限制在所确定的最小速度边界内。在一个实施例中,可以在保持基本相同的视频总持续时间的同时实现功率节省。
本公开的一方面涉及媒体内容的预处理。例如,可以在内容服务器处对媒体内容进行预处理,以便确定功率节省指示符。在一个实施例中,可以在视频服务器处对视频进行预处理,以确定功率消耗参数。服务器处的预处理可以提供服务器的更高计算能力、更高精度的益处以及处理整个程序的能力,以便保证基本相同的总节目持续时间。
本公开的一方面涉及确定媒体内容的功率节省版本。例如,本公开的一方面涉及确定媒体内容(例如,节目、视频)的多个版本。一个版本可以是包括原始媒体内容的正常版本,而一个或多个版本可以是原始媒体内容的功率节省版本。在一个实施例中,功率节省版本可以具有与原始媒体内容不同的持续时间。在一个实施例中,功率节省版本可以具有与原始媒体内容基本相同的总持续时间,但是可以针对各种场景具有不同的速度。基本相同的总持续时间可以意味着在原始媒体内容持续时间的百分比值以内的媒体内容总持续时间。在一个实施例中,百分比值可以是原始媒体内容持续时间的+/-5%。在一个实施例中,媒体内容播出单元(例如,机顶盒、电视、平板、智能电话、计算机等)可以在多个功率节省版本之间动态地切换(例如,通过基于用户输入在媒体内容片段的版本之间切换)。在另一实施例中,媒体内容提供单元可以在媒体内容片段的功率版本之间自动转换。可以在接收设备处基于(例如,每个用户的)能量消耗简档或者其他能量参数(例如,一天中的时间、电力成本、能量消耗简档、总能量消耗、家中的总能量消耗)来选择媒体内容版本。在一个实施例中,媒体内容的功率节省版本可以与传统媒体内容一起提供(例如,通过流媒体网站,诸如Netflix、亚马逊、M-GO和其他流式提供商)。每个功率节省版本可以包括用于指示不同媒体内容速度的指示符。这些指示符可以与对应的媒体内容一起编码/解码。在一个实施例中,指示符可以是与媒体内容和/或媒体内容片段一起提供的元数据。
本公开的一方面涉及可以指示媒体内容速度的元数据。元数据可以包括关于指示媒体内容速度改变的时间戳或媒体内容点的信息。例如,元数据可以包括关于媒体内容速度何时快、慢或正常的信息。快的速度可以是例如比正常快10%的速度。慢的速度可以是例如比正常慢10%的速度。正常速度可以是媒体内容的呈现的原始速度。在一个实施例中,可以由编码器或内容服务器生成和/或传送元数据。
本公开的一方面涉及指示媒体内容速度版本的元数据。例如,元数据可以指示相同媒体内容或媒体片段的第一“快”版本和第二“慢”版本。元数据可以提供媒体内容速度的灵活指示。传送或编码设备可以基于媒体片段(例如,视频片段)的内容和/或能量评级来提供与不同速度或速度调整有关的元数据。接收设备可以利用元数据来控制提供(例如,显示)媒体内容的速度。例如,接收器可以基于接收到的元数据信息来递增地调整媒体内容显示速度。在另一实施例中,接收设备可以基于相对于“正常”速度的加快和减慢的元数据指示来调整媒体内容速度。
本公开的一方面涉及指示各种视频内容播放速度的元数据。表1示出了与视频媒体内容播放速度有关的这样的元数据信息。“播放速度”栏涉及不同播放速度的标识符。“开始”栏指示开始的视频帧号。“结束”栏指示结束的视频帧号。“持续时间”栏对应于视频帧的总数。
表1
播放速度 开始 结束 持续时间
快1 图片顺序计数器=459 图片顺序计数器=598
快3 图片顺序计数器=9488 417帧
慢2 图片顺序计数器=27987 图片顺序计数器=30112
本公开的一方面涉及允许完成功率节省的元数据。功率节省可以基于与当前场景内容、未来场景内容、节目类型和其他媒体内容信息中的一个或多个有关的元数据。元数据可以涉及速度信息,例如帧速率或帧数信息。元数据可以包括与速度(在执行速度改变时)、速度改变的持续时间、速度改变的开始和速度改变的结束中的一个或多个有关的指示符。
本公开的一方面涉及传送或接收的元数据。例如,本公开的一方面涉及由传送器确定和传送元数据。本公开的一方面涉及在接收器处接收的元数据。接收器可以基于接收到的元数据来提供用于观察的媒体内容。元数据可以与对应的媒体内容一起在带内递送,或者作为分离的文件或分离的流在带外递送。例如,对于带内元数据,元数据的到达可以指示速度操作应该何时开始和/或结束。在一个实施例中,可以使用诸如呈现时间戳或图片顺序计数之类的独特标记来指示速度操作应该何时开始和/或结束。
本公开的一方面涉及指示高峰负载时间段期间的电视和其他电器的功率消耗控制的元数据。在一个实施例中,元数据可以指示期望的功率节省的程度。消费者设备(例如,电视)可以基于接收到的元数据来提供优化的功率节省处理。
本公开的一方面涉及提供对家庭网络功率消耗的改善。例如,设备或装置的功率消耗信息可以提供给公用事业服务提供商。公用事业服务提供商可以改变媒体内容或元数据。相反,公用事业服务提供商可以向设备提供动态费率信息(例如,每千瓦时的价格),以便使其自适应地控制功率节省算法。替选地,设备或装置可以基于当前能量使用来修改媒体内容。替选地,装置可以由另外的家用电器来控制。在一个实施例中,可以基于软件和/或硬件来执行功率节省确定。功率节省确定可以基于由服务提供商提供的参数,其可以优化功率消耗和用户体验二者或其中之一。功率消耗信息可以与整个家庭功率消耗或室内照明集成以提高体验,同时还降低能量使用。
可以在下面描述的附图内实现本公开的各方面。
图1图示了根据本公开的系统100的示意图。系统100可以包括编码器/传送器110和解码器/接收器120。
编码器/传送器110可以是包括以下的装置或系统:用于对媒体内容(例如,视频)进行编码的编码器装置,用于传送功率节省媒体内容(例如,互联网协议信息)的传送器,媒体内容服务器(例如,用于准备媒体内容的功率节省版本的头端服务器),以及流式服务提供商(例如,用于提供流媒体内容),或者用于提供媒体内容的任何其他装置。
编码器/传送器110可以接收媒体内容101,其可以是视频内容。媒体内容101可以是压缩的或非压缩的媒体内容。非压缩媒体内容的示例包括各种RGB格式的视频。压缩媒体内容的示例包括根据例如MPEG2、H.264、H.265和任何其他视频压缩标准压缩的视频。
根据在此描述的任何原理,编码器/传送器110可以确定媒体内容101的功率节省速度修改。例如,编码器/传送器110可以确定媒体内容101的多个功率节省版本。然后,可以压缩多个功率节省版本,从而得到功率节省媒体内容102。在另一实施例中,编码器/传送器110可以确定指示不同的媒体内容播出时间或速度以及应当应用该速度的时间的指示符。这样的指示符可以被编码为元数据103的一部分。在一个实施例中,编码器/传送器110可以根据结合下面描述的图2A、图2B、图3-图11描述的技术来确定功率节省速度修改。编码器/传送器110可以基于媒体内容101的功率节省速度确定来提供功率节省媒体内容102。
编码器/传送器110可以可选地提供元数据103。元数据可以指示速度和/或媒体内容观察时间。功率节省确定还可以包括在元数据103内。例如,元数据103可以是功率节省媒体内容102的一部分,或者可以与媒体内容102分离地传送或提供。当分离地提供元数据时,媒体内容102可以是媒体内容101。元数据103的传送可以经由相同的通信路径或系统或者除了媒体内容102的通信路径或系统之外的不同的通信路径或系统。
解码器/接收器120可以是装置或系统,包括:用于对媒体内容(例如,视频)进行解码的解码器装置,用于接收媒体内容(例如,互联网协议信息)的接收装置,消费者端设备(例如,机顶盒、蓝光播放器、电视、智能电视、游戏机、膝上型计算机、全尺寸个人计算机、智能电话、平板PC以及用于提供媒体内容的任何其他设备)。解码器/接收器120可以接收功率节省媒体内容102和元数据103。
解码器/接收器120可以基于功率节省媒体内容102和/或元数据103来确定功率优化的媒体内容104。解码器/接收器120可以对接收到的功率节省媒体内容102和/或元数据103执行解码操作。功率优化的媒体内容104是经调整或修改以在内容的收视期间减少设备的功率消耗的媒体内容。
解码器/接收器120可以提供用于观察或显示的功率优化的媒体内容104。解码器/接收器120可以利用元数据103来控制媒体内容的播出时间,即,控制显示功率优化的媒体内容104的速度。例如,解码器/接收器120可以基于元数据103来递增地调整媒体内容显示速度。在一个实施例中,解码器/接收器120可以根据结合下面描述的图2A、图2B和图3-图11描述的技术来确定功率节省速度修改。
图2A图示了根据本公开的装置200的示意图。装置200可以是能够处理指令并生成可传送信息的装置或者能够接收可传送信息的装置。装置200可以类似于结合图1描述的编码器/传送器110或解码器/接收器120。例如,装置200可以是传送器、编码器或头端服务器。
装置200可以例如经由输入接口201来接收媒体内容212。媒体内容212可以是压缩的或非压缩的形式。压缩媒体内容的示例诸如已经根据MPEG2、H.264、H.265和任何其他压缩标准压缩的内容。非压缩媒体内容的示例包括RGB格式的视频。媒体内容212可以是如结合图1描述的媒体内容。媒体内容212可以类似于媒体内容101。输入接口201可以接收媒体内容212以用于处理。输入接口201可以是视频输入终端、总线、连接器、输入视频缓冲器、通信端口等。
媒体分段器202将媒体内容分段。媒体分段器可以将媒体内容(例如,视频)分段成媒体片段。在一个实施例中,媒体分段器202将媒体内容分段成不同的节、部分、帧、块、图片组(GOP)、切片、场景、分片(诸如MPEG DASH中支持的分片MP4)、任何其他类型的片段(例如,如在HLS的分段自适应传输流中所使用的)、以及任何其他类型的时间间隔(动态时间间隔或统一时间间隔,例如,2秒,5秒)。在一个实施例中,媒体内容可以已经被分段,并且媒体分段器202可以是可选的、略过的或移除的。可以基于这些媒体片段来执行功率节省确定。可以基于实际考虑来优化片段大小。例如,如果片段太小,则可能难以改变速度。然而,如果片段太长,则可能错过功率节省的时机。
功率估计器203确定例如由媒体分段器202先前确定的媒体片段的功率消耗。在一个实施例中,功率估计器203可以通过任何功率确定方法来确定功率消耗。例如,功率估计器203可以从每个分段部分确定相应内容的像素的平均或归一的亮度值。可以基于平均或归一的亮度来确定功率消耗,如线性或非线性函数,或者亮度的映射。在一个实施例中,功率估计器203可以基于组成场景的媒体片段的平均功率来确定场景的平均功率。在一个实施例中,可以通过将该场景的能量除以场景的持续时间来确定平均功率。功率估计器203可以估计媒体片段或媒体片段子单元(例如,帧)的功率消耗或能量。在一个实施例中,功率可以是在显示或提供媒体内容时预期、预测或估计要使用的功率。也就是说,装置200可以预期、预测或估计与最终用户装置或设备上的内容相关联的功率。
积分器204可以在时间段上对媒体片段或媒体片段的子单元的功率消耗进行积分或加和。例如,积分器204可以对分段场景中的所有帧的功率进行积分,从而提供分段场景的总功率或总能量。在一个实施例中,积分器204可以是可选的或者可以仅基于某些条件来使用。例如,可以仅在场景已被分段时(例如,在视频场景被分段成多于一个视频帧时)利用积分器204。积分器204可以对帧或场景中的所有媒体片段的总功率或能量进行加和。
归一器205可以确定场景的平均功率消耗。在一个实施例中,归一器205可以将场景的能量除以场景中的媒体片段或媒体片段子单元的数量。例如,归一器205可以将由积分器204确定的总功率或能量除以由积分器204估计的场景中的帧数。归一器205可以确定每帧、每时间间隔、时间段或每任何媒体分段子单元的平均功率或能量。在一个实施例中,归一器205和积分器204可以是可选的、略过的或移除的,或者可以被集成为功率估计器203的一部分。
速度修改器206可以从功率估计器203、积分器204和/或归一器206接收功率消耗信息。速度修改器206可以包括速度确定器207和音频/视频(“A/V”)速度调整器208。在一个实施例中,速度确定器207和A/V速度调整器208可以被集成到速度修改器206中。
速度确定器207确定用于提供每个媒体片段的速度。速度确定器207可以基于由功率估计器203、积分器204和/或归一器205确定的功率消耗来确定片段的速度。在一个实施例中,速度确定器207可以确定片段的经修改的开始和结束时间。在一个实施例中,速度确定器207可以确定媒体内容的更快或更慢的速度。
在一个实施例中,速度确定器207可以基于平均功率消耗来确定一个或多个媒体片段的经修改的速度。在一个实施例中,速度确定器207可以基于与功率消耗的直接关系来确定速度。速度确定器可以基于媒体片段的平均功率与该片段的速度之间的直接关系来确定媒体片段的速度。例如,如果媒体片段具有相对更高的功率消耗,则速度确定器207可以增加该片段的速度。同样,如果媒体片段具有相对更低的功率消耗,则速度确定器207可以减少该片段的速度。
通常,速度确定器207可以降低高功率片段的持续时间并且增加低功率片段的持续时间。速度确定器207还可以跟踪节目的总体速度,以确保尽管速度改变,但是媒体内容的总体总时间保持大致相同。在一个实施例中,总媒体内容时间保持相同。在另一实施例中,它小于或大于原始媒体内容时间。
在一个实施例中,速度确定器207可以基于使与媒体内容的功率修改相关联的参考阈值偏移来确定速度修改。在一个实施例中,可以根据结合图5的参考阈值505描述的原理来确定阈值。
在另一实施例中,速度确定器207可以基于转移斜率特性的改变来确定速度修改。在一个实施例中,可以根据结合图6描述的原理来确定斜率转移特性的改变。
在另一实施例中,速度确定器207可以基于分别改变可允许速度的最大范围来确定速度修改。在一个实施例中,速度确定器207可以基于使参考阈值偏移、改变传递斜率特性、和改变可允许速度的最大范围的组合来确定速度修改。
在一个实施例中,A/V速度调整器208可以是音频/视频速度调整播出单元。例如,A/V速度调整器208可以增加视频片段的速度(例如,通过调整视频片段的播出或呈现时间)。替选地,A/V速度调整器208可以减少视频片段的速度(例如,通过调整视频片段的播出或呈现时间)。在一个实施例中,可以不利用A/V速度调整器208,因为元数据可以对具有其自己的A/V速度调整单元的下游接收设备指示速度调整。在这种情况下,元数据211被提供给下游A/V速度调整单元,以引导所应用的速度调整。
速度修改器206还可以确定元数据211。可以基于由速度修改器206提供的速度修改来确定元数据211。例如,元数据211可以指示媒体内容速度。元数据211可以包括关于指示媒体内容速度改变的位置的时间戳或媒体内容点的信息。例如,元数据211可以包括关于媒体内容速度何时是快的、慢的和正常的速度的信息。快的速度可以是例如比正常快10%的速度。慢的速度可以是例如比正常慢10%的速度。正常速度可以是媒体内容的呈现的原始速度。元数据211可以包括关于媒体内容帧速率何时是高的、低的或正常的帧速率的信息。元数据211可以包括关于片段中的媒体内容帧数何时高、低或正常的信息。高可以是例如比正常高10%。低可以是例如比正常低10%。正常可以是媒体内容的呈现的原始帧速率或帧数。替选地,元数据211可以指示媒体内容速度版本(例如,快、慢、正常和/或实际速度)。例如,元数据211可以是如结合表1描述的元数据。元数据211可以允许功率节省的完成。元数据211可以涉及当前场景内容、未来场景内容、节目类型和其他媒体内容信息中的一个或多个。元数据211可以涉及速度信息。元数据可以包括与速度、何时执行速度改变、速度的持续时间、速度改变的开始和速度改变的结束中的一个或多个有关的指示符。在一个实施例中,媒体内容可以是未修改的,并且可以仅在元数据中指示速度修改。在一个实施例中,元数据可以包括功率消耗和/或回放速度的同步指示。同步点可以是基于媒体片段和/或基于时间戳的。
在一个实施例中,对于带内元数据,元数据211的到达可以指示速度操作应该何时开始和/或结束。元数据211可以与输出的媒体内容210同步。在另一实施例中,可以使用诸如呈现时间戳或图片顺序计数之类的独特标记来指示速度操作应该何时开始和/或结束。在一个实施例中,元数据211可以包括由功率估计器203、积分器204和归一器205中的一个或多个确定的功率消耗指示。
装置200可以包括可选的视频编码器/压缩器209。视频压缩器209可以压缩来自速度修改器206的功率节省媒体内容。压缩器209可以是速度修改器206的一部分。
在一个实施例中,装置200也可以是类似于解码器/接收器120的接收器或解码器。在一个实施例中,装置200可以是网关或收发器。在一个实施例中,装置200可以包括在修改器206之前或者结合修改器206对数据进行解码的可选的解码器或解压缩器(未示出)。在一个实施例中,可以与解码处理同时地执行速度修改,例如,通过修改所解码的帧的数量或者呈现的帧速率。
在一个实施例中,输出的媒体内容210可以类似于功率节省媒体内容102。在一个实施例中,输出的媒体内容210可以与元数据211一起提供。在一个实施例中,元数据211可以包括在输出的媒体内容210中。在一个实施例中,输出的媒体内容210可以类似于功率优化的媒体内容101。在一个实施例中,可以提供输出的媒体内容210以用于显示。
可以经由调制器、诸如HDMI端口、以太网接口、通信端口等的输出端口来提供输出的媒体内容210和元数据211。输出的媒体内容210可以包括元数据211,或者可以与元数据211分离。可以经由与输出的媒体内容210相同或不同的路径或系统来传送或提供元数据211。替选地,元数据211还可以被调制和/或分配到与输出的媒体内容210不同的信道、频率、时间段、数据格式或调制方案。
装置200还可以包括处理器220和存储器221。在一个实施例中,装置200的组件201-209可以连接到处理器220和存储器221。处理器220可以监视和控制各种硬件组件,以用于实现组件201-209和未示出的其他组件的功能。在另一实施例中,处理器220可以执行软件,以执行组件201-209和未示出的其他组件的各种功能。
存储器221可以被配置为存储从组件201-209和未示出的其他组件中的一个或多个接收的信息。存储器221可以是各种存储器类型中的一个或多个。例如,存储器221可以是硬盘驱动器(HDD)、动态RAM(DRAM)、缓存、ROM、RAM、盘式存储设备(例如,磁性或光学盘式存储设备)、固态磁性设备等等中的一个或多个。
存储器221可以存储被配置为执行组件201-209和未示出的其他组件的技术的计算机可执行指令。存储器221可以存储要由处理器220执行的指令。处理器220可以访问可执行指令。可执行指令可以存储在RAM中或者可以存储在非临时性计算机可读介质中。这样的非临时性计算机可读介质可以包括诸如例如电子、磁性、光学、电磁或半导体介质之类的许多物理介质中的任何一个。适当的非临时性计算机可读介质的更具体的示例包括但不限于便携式磁性计算机磁盘(诸如软盘)或硬盘驱动器、ROM、可擦除可编程只读存储器、便携式压缩盘、或者可以直接或间接耦接的其他存储设备。介质还可以包括前述和/或其他设备中的一个或多个的任何组合。
装置200还可以包括其他元件(未示出),如本领域技术人员容易想到的那样,以及省略某些元件。例如,根据其特定实现方式,可以包括各种其他输入设备和/或输出设备,如本领域普通技术人员容易理解的那样。例如,可以使用各种类型的无线和/或有线的输入和/或输出设备。此外,还可以利用各种配置中的附加处理器、控制器、存储器等,如本领域普通技术人员容易理解的那样。鉴于在此提供的本公开的教导,本领域普通技术人员容易想到装置200的这些和其他变型。
此外,要理解,装置200可以执行在此公开的技术。例如,装置200可以全部或部分地执行结合图4A描述的一个或多个方法。
图2B图示了根据本公开的一方面的接收器系统270的示意图,包括装置250和显示器/扬声器260。显示器/扬声器260可以是可选的、略过的或移除的。装置250可以是能够处理指令和接收信息的装置。装置250可以类似于结合图1描述的装置120。例如,装置250可以是接收器、解码器或消费者设备。装置250可以接收与输出的媒体内容210类似的输入的媒体内容271。装置250还可以接收与元数据211类似的元数据272。
装置250包括输入接口251。输入接口251可以是调谐器、解调器、视频输入终端、总线、连接器、输入缓冲器、通信端口等。装置250可以经由输入接口251接收输入的媒体内容271。装置250还可以可选地经由输入接口251接收输入的媒体内容271和元数据272。在一个实施例中,可以根据结合图2A描述的原理来确定输入的媒体内容271和元数据272(例如,分别为210和211)。在一个实施例中,可以如结合图1描述的那样接收输入的媒体内容271和元数据272(例如,分别为102和103)。
装置250可以包括速度修改器252。速度修改器252可以包括速度确定器253和音频/视频(“A/V”)速度调整器254。在一个实施例中,速度确定器253和A/V速度调整器254可以被集成到速度修改器252中。
速度确定器253可以确定输入的媒体内容271的速度和/或经修改的播出时间。在一个实施例中,速度确定器253可以基于接收到的元数据272来确定每个媒体片段的速度和/或经修改的播出时间。在一个实施例中,速度确定器253可以分析元数据272以获得输入的媒体内容271的每个媒体片段的功率消耗指示。在另一实施例中,速度确定器253可以分析元数据272以确定输入的媒体内容271的每个媒体片段的速度。在一个实施例中,速度确定器253可以通过在媒体片段的功率节省版本之间进行选择来确定每个媒体片段的速度和/或经修改的播出时间。在另一实施例中,速度修改器252和/或速度确定器253可以接收已经具有用于优化或调整或节省媒体内容的功率的经修改的速度的媒体内容。
在另一实施例中,速度修改器252还可以包括媒体分段器、功率估计器、积分器和/或归一器,以确定如何提供功率优化或调整的媒体内容(例如,104)。在一个实施例中,媒体分段器、功率估计器、积分器和/或归一器可以类似于结合图2A中的装置200描述的媒体分段器202、功率估计器203、积分器204和归一器205。在一个实施例中,A/V调整器254可以根据结合图2A的A/V调整器208描述的原理来修改媒体内容。
在一个实施例中,装置250也可以是与解码器/接收器120类似的接收器或解码器。在一个实施例中,装置250可以是网关或收发器。在一个实施例中,装置250可以包括在修改器252之前或者结合修改器252对数据进行解码的可选的解码器或解压缩器(未示出)。在一个实施例中,可以与解码处理同时地执行速度修改,例如,通过修改所解码的帧的数量或者呈现的帧速率。
在一个实施例中,公用事业服务提供商可以向装置250提供动态费率信息(例如,每千瓦时的价格),以便使其自适应地控制功率节省算法。装置250可以基于当前能量使用来修改媒体内容。装置250可以由另外的家用电器来控制。装置250可以基于由服务提供商提供的参数来执行功率节省确定,其可以优化功率消耗和用户体验二者或其中之一。装置250可以将功率消耗信息与家庭功率消耗或室内照明集成以提高体验,同时还降低能量使用。
速度修改器252可以将功率优化或调整的媒体内容258输出到可选的输出接口255。功率优化的媒体内容258可以类似于功率优化的媒体内容104或输出的媒体内容210。输出接口255可以是调制器、诸如HDMI端口或通信端口之类的输出端口。输出接口255可以将功率优化的媒体内容(诸如视频内容)输出到显示设备和/或扬声器260。因此,功率优化的媒体内容可以以能量节省方式提供给用户以用于观看。
装置250还可以包括处理器256和存储器257。在一个实施例中,装置250的组件251-255可以连接到处理器256和存储器257。处理器256可以监视和控制各种硬件组件,以用于实现组件251-255的功能。在另一实施例中,处理器256可以执行软件,以执行组件251-255的各种功能。
存储器257可以被配置为存储从组件251-255中的一个或多个接收的信息。存储器257可以是各种存储器类型中的一个或多个。例如,存储器257可以是HDD、DRAM、缓存、ROM、RAM、盘式存储设备(例如,磁性或光学盘式存储设备)、固态磁性设备等等中的一个或多个。
存储器257可以存储被配置为执行组件251-255的技术的计算机可执行指令。存储器257可以存储要由处理器256执行的指令。处理器256可以访问可执行指令。可执行指令可以存储在RAM中或者可以存储在非临时性计算机可读介质中。这样的非临时性计算机可读介质可以包括诸如例如电子、磁性、光学、电磁或半导体介质之类的许多物理介质中的任何一个。适当的非临时性计算机可读介质的更具体的示例包括但不限于便携式磁性计算机磁盘(诸如软盘)或硬盘驱动器、ROM、可擦除可编程只读存储器、便携式压缩盘、或者可以直接或间接耦接的其他存储设备。介质还可以包括前述和/或其他设备中的一个或多个的任何组合。
装置250还可以包括其他元件(未示出),如本领域技术人员容易想到的那样,以及省略某些元件。例如,根据其特定实现方式,可以包括各种其他输入设备和/或输出设备,如本领域普通技术人员容易理解的那样。例如,可以使用各种类型的无线和/或有线的输入和/或输出设备。此外,还可以利用各种配置中的附加处理器、控制器、存储器等,如本领域普通技术人员容易理解的那样。鉴于在此提供的本公开的教导,本领域普通技术人员容易想到到装置250的这些和其他变型。
此外,要理解,装置250可以执行在此公开的技术。例如,装置250可以全部或部分地执行结合图4B描述的一个或多个方法。
图3图示了根据本公开的示例性系统300。如所图示的,系统300是根据本公开的示例,其包括通信网络320。通信网络320可以是诸如互联网、广域网(WAN)和/或局域网(LAN)之类的通信网络。通信网络320还可以包括经由缆线、卫星、电话线、电力线或其他通信介质的广播网络。由此,系统300允许经由通信网络320的媒体内容的流式传输、广播、上传和/或下载。
系统300可以包括内容服务器310。内容服务器310可以从设备350-1至350-n中的一个或多个接收请求。内容服务器310可以传送诸如电影或TV表演之类的媒体内容以用于流式传输或下载。设备350-1至350-n可以通过通信网络320与内容服务器310通信。
内容服务器310可以传送诸如数据、网页、媒体内容等的信息。内容服务器310可以在处理不是可用的和/或能够在本地用户设备350-1至350-n上进行时提供对信息的附加处理。
在一个实施例中,内容服务器310包括存储器311、处理器312和通信接口313。内容服务器310可以提供媒体内容及其关联的元数据。媒体内容和关联的元数据可以存储在存储器311中并由处理器312处理。存储器311可以是非临时性存储介质,诸如一个或多个硬盘驱动器和/或其他适当的存储器设备。通信接口313可以允许内容服务器310经由通信网络320传送数据。
在一个实施例中,内容服务器310可以类似于结合图1描述的装置110。在另一实施例中,内容服务器310可以类似于结合图2A描述的装置200。
设备350-1至350-n可以是用于接收媒体内容的设备。在一个实施例中,这样的设备可以包括机顶盒、网关、计算机、膝上型计算机、平板、蜂窝电话等。在一个实施例中,设备350-1示出了示例性用户设备的详细框图。设备350-1包括通信接口351、处理器352、存储器353以及选择用户I/O接口354。通信接口351允许来自通信网络320的通信,例如,接收信息。处理器352可以处理功率节省方面,以用于提供所接收的媒体内容信息。存储器353可以表示诸如RAM之类的临时性存储器,或者诸如ROM、硬盘驱动器或闪速存储器之类的非临时性存储器二者,以用于处理和存储不同的文件和信息。
在一个实施例中,设备350-1至350-n可以类似于结合图1描述的装置120。在另一实施例中,设备350-1至350-n可以类似于结合图2B描述的装置250。在又一实施例中,设备350-1至350-n可以类似于结合图2A描述的装置200。
图4A图示了根据本公开的示例性方法400的流程图。方法400可以确定功率节省媒体内容。方法400可以包括用于接收媒体内容的块401。媒体内容可以是压缩的或非压缩的形式。压缩媒体内容的示例诸如已经根据MPEG2、H.264、H.265和任何其他压缩标准压缩的内容。非压缩媒体内容的示例包括RGB格式的视频。媒体内容可以是如结合图1(101)和图2A(212)描述的媒体内容。块401可以将控制传到块402。
块402可以将媒体内容分段成媒体片段。在一个实施例中,块402可以根据结合图2A的媒体分段器202描述的原理来对媒体内容进行分段。块402可以将控制传到块403。在一个实施例中,块402可以是可选的。在一个实施例中,块402可以被略过或移除。
块403可以确定媒体片段的功率消耗。在一个实施例中,块403可以基于每个媒体片段的像素的亮度值来确定功率消耗。块403可以根据结合图2A的组件203-205描述的原理来确定功率消耗。块403可以将控制传到块404。
块404可以根据本公开来确定速度修改。在一个实施例中,块404可以确定与媒体内容的多个部分的相应内容相对应的经修改的播出时间。在一个实施例中,块404可以基于功率消耗确定来确定媒体片段的速度。在一个实施例中,块404可以确定媒体片段的经修改的开始和结束时间。在一个实施例中,块404可以根据结合图2A的组件205-208描述的原理来确定速度修改。块404可以将控制传到块405。
块405可以确定媒体内容的元数据。块405可以分别确定与块403和404的功率消耗确定和速度修改确定有关的元数据。在一个实施例中,块405可以根据本公开来确定指示媒体内容速度的元数据。例如,元数据可以包括关于媒体片段的速度的信息(例如,速度是快的、慢的还是正常的)。在一个实施例中,块405可以生成指示媒体内容片段的开始和结束时间的元数据。在一个实施例中,块405可以确定可以指示速度操作应该何时开始或结束的元数据。元数据还可以包括与速度、何时执行速度改变,速度的持续时间,速度改变的开始和速度改变的结束中的一个或多个有关的指示符。在一个实施例中,块405可以确定指示媒体内容速度版本的元数据。例如,元数据可以指示相同媒体内容或媒体片段的第一“快”快版本和第二“慢”版本。元数据可以提供指示媒体内容的各种速度的灵活性。例如,传送或编码设备可以基于媒体内容片段(例如,视频片段)的内容和/或能量评级来提供与不同等级的回放速度调整有关的元数据中的信息。在一个实施例中,块405可以根据结合图2A的元数据211和图1的103描述的原理来确定元数据。块405可以将控制传到块406。在一个实施例中,块405可以是可选的。在一个实施例中,块405可以被略过或移除。
块406可以提供输出的媒体内容(例如,210)和/或元数据(例如,211)。在一个实施例中,块406可以传送输出的媒体内容和元数据。在一个实施例中,可以根据结合图2A的输出的媒体内容210、图1的功率节省媒体内容102或功率优化的媒体内容104描述的原理来确定输出的媒体内容。在一个实施例中,块406可以根据结合图2A的元数据211或图1的元数据103描述的原理来确定元数据。在一个实施例中,块406可以根据结合图2A(输出的媒体内容210和元数据211)或图1(功率节省媒体内容102和元数据103)描述的原理来传送或提供输出的媒体内容和元数据。
在一个实施例中,块406可以将元数据与对应的媒体内容一起在带内递送,或者作为分离的文件或分离的流在带外递送。在一个实施例中,块406可以将元数据提供给下游设备或接收器。
在一个实施例中,块406可以不提供元数据,并且可以替代地仅提供输出的媒体内容。例如,可以通过对媒体内容片段执行实际修改(例如,通过基于所确定的功率消耗指示来修改相应的播出时间)来确定输出的媒体内容。这样的修改可以响应于外部功率管理信号。信号可以来自电力公用事业提供商、家用电器和/或家庭网络。例如,可以在高峰功率需求时从电力公用事业提供商发送该信号,以便降低其客户群的总体功率需求。
图4B图示了根据本公开的示例性方法450的流程图。方法450可以包括用于接收输入的媒体内容(例如,271、102)和/或元数据(例如,272、103)的块451。块451可以根据结合图2B的输入接口251或图1的解码器/接收器120描述的原理来处理接收到的输入的媒体内容。输入的媒体内容和元数据可以类似于输出的媒体内容210和元数据211、或者功率节省媒体内容102和元数据103。块451可将控制传到块452。
块452可以根据本公开来确定速度修改。在一个实施例中,块452可以确定与媒体内容的多个部分的相应内容相对应的经修改的播出时间。在一个实施例中,块452可以确定媒体内容片段的经修改的开始和结束时间。例如,块452可以确定比媒体内容的正常速度快或慢的速度。块452可以如结合图2B描述的组件252-254描述的那样确定速度修改。
在一个实施例中,块452可以基于元数据来确定媒体内容速度。在一个实施例中,块452可以基于功率消耗元数据指示来确定片段的速度。在一个实施例中,块452可以利用元数据来控制显示媒体内容的速度。在一个实施例中,可以根据结合图2A的组件252-254描述的原理来确定基于元数据的速度修改。
在一个实施例中,元数据可以是可选的,并且块452可以替代地仅接收功率节省媒体内容。所接收的功率节省媒体内容可以已经包含经修改的速度播出时间指示。
块453可以输出功率优化或调整的媒体内容(例如,104、210)。可以提供功率优化的媒体内容以用于显示,例如,显示器260。
图4A和图4B的方法400和450可以实现为包括可以由处理器执行的计算机可执行指令的计算机程序产品。具有计算机可执行指令的计算机程序产品可以存储在相应的上述设备的相应的非临时性计算机可读存储介质中。
图5图示了绘制图500的示例,其说明根据本公开的一方面的媒体内容的经修改的播出时间确定。在另一实施例中,图5可以被修改为说明根据本公开的经修改的速度确定。
图5图示了说明参考功率消耗的参考阈值505。参考阈值505可以由用户选择或者可以被确定(例如,基于诸如整个电影、TV表演之类的视频内容的帧的平均功率值)。可以基于参考阈值505来确定经修改的媒体内容播出时间。可以根据结合图1-图4描述的原理来确定经修改的播出时间。如果媒体片段的功率消耗大于参考阈值505,则可以减少媒体片段的播出时间(参见例如片段1(501))。另一方面,如果媒体片段的功率消耗低于参考阈值505,则可以增加媒体片段的播出时间(参见例如片段2(502))。图5还图示了高于参考阈值505的片段3(因此其媒体播出时间可以减少)以及处于参考阈值的片段4(因此其媒体播出时间可以保持相同)。在图5中,指示增加(或减少)的速度修改可以意味着例如5%的速度增加(或减少)。
图6图示了根据本公开的一方面的示例性速度修改传递函数600。传递函数600指示对媒体内容播出速度的修改量相对于未修改的媒体播出速度,以实现媒体内容播出的持续时间上的所确定的功率消耗。图6还图示了媒体内容片段的示例性阈值601、602和603。传递函数600的x轴指示功率消耗。传递函数600的y轴指示媒体内容速度改变的百分比。如图6所示,阈值602可以是与第一媒体片段相对应的参考阈值。参考阈值可以指示期望的功率消耗。与第二媒体片段相对应的阈值601的功率消耗是参考阈值602的功率消耗的两倍。因此,阈值601的播出速度相对于参考阈值602的播出速度增加10%。与第三媒体片段相对应的阈值603的功率消耗是参考阈值602的功率消耗的一半。因此,阈值601的播出速度相对于参考阈值602的播出速度减少10%。在一个实施例中,传递函数600允许对播出速度±10%的最大调整。然而,可以针对传递函数600或任何其他功率传递函数来利用调整范围。在一个实施例中,可以由用户设置或者可以基于所提供的参数来确定调整范围。在一个实施例中,速度修改器可以对与相应内容相对应的经修改的播出时间进行调整或归一,使得完整视频内容的总播出时间对于观看者而言看来实质上未修改。可以通过使参考阈值偏移、改变传递斜率特性、改变可允许速度的最大范围或其组合来控制速度修改的“积极性”。
本公开的一方面涉及与元数据103、211、227一起由传送器110、200发送的媒体内容102、210、271的已经减慢的版本,该元数据可以向接收器120、250指示何时加快某些片段(以及多少)。在一个实施例中,可以分离地提供元数据,例如,作为文件。递送到接收器120、250的媒体内容可以是原始媒体内容的更高时间分辨率、更高带宽版本。例如,10%的减慢意味着所传送内容的所编码帧数可以增加10%,使得对于源媒体内容中的每10个帧,11个帧被编码和传送。与更高时间分辨率媒体内容一起递送的元数据可以可选地向解码器/接收器120、250指示应该如何处理媒体内容,以便从接收到的每11个帧中恢复用于显示的10个帧。解码器/接收器120、250可以对帧进行丢弃或抽取或者实现某种帧速率转换方法,以便恢复用于显示的十个帧。在这种模式下,功率消耗可以从最大值开始,并且可以在某些地方随着内容加快而下降,以改善功率消耗。
图7A图示了根据本公开的一方面的媒体内容的经修改的播出时间确定的示例性绘制图700。图7A图示了与参考功率消耗相关联的参考阈值705。参考阈值705可以由用户选择或者可以被确定(例如,基于诸如整个电影、TV表演之类的视频内容的帧的平均功率值)。可以基于参考阈值705来确定经修改的媒体内容播出时间。可以根据结合图1-图6描述的原理和图5的描述来确定经修改的播出时间。图7A描述了发送到接收器的媒体内容的已经(并且可能很高地)减慢的版本的情况。如果媒体片段的功率消耗大于参考阈值705,则可以减少媒体片段的播出时间。图7A中的大多数片段具有高于参考阈值705的功率消耗,并且因此与高于媒体内容的原始或正常速度的速度修改相关联。例如,持续时间t1的片段1将被加快2的因子,持续时间t2的片段3将被加快1.5的因子,并且持续时间t4的片段4将被加快1.25的因子。图7A还图示了处于参考阈值的持续时间t2(因此其媒体播出时间可以保持相同)。在一个实施例中,并且不失一般性地,可以选择不同的元数据格式,不发送元数据(如在片段2中)或者发送具有1的因子的元数据,以维持相同的片段播出时间。
图7B图示了根据本公开的实施例的具有经修改的播出时间的图7A的媒体内容的示例性绘制图750。通过将速度修改应用于图7A的内容,片段1、3和4现在具有更短的持续时间,因为t1’=t1/2,t3’=t3/1.5并且t4’=t4/1.2。片段2保持有相同的持续时间,即t2’=t2。在实际的实现方式中,每个片段的最终持续时间可以近似为期望值,例如,在期望值的+/-5%裕量内(例如,t1’~t1/2)。应注意,图7A和图7B没有以完全相同的比例描绘,并且这些图接近以上指示的确切的持续时间值。
使用可以等同于媒体内容的减慢版本(例如,图7A)的高质量(和高带宽)版本可以对于例如许多电影爱好者是优选的,因为他们愿意接受更高的带宽和更长的下载时间以获得更高的时间分辨率内容。
本公开的一方面涉及与元数据103、211、227一起由传送器110、200发送的媒体内容102、210、271的已经加快的版本,该元数据可以向接收器120、250指示何时减慢某些片段(以及多少)。在一个实施例中,可以分离地提供元数据,例如,作为文件。递送到接收器120的媒体内容可以是原始源媒体内容的更低时间分辨率、更低带宽版本。例如,10%的加快意味着所传送内容的所编码帧数可以减少10%,使得对于源媒体内容中的每10个帧,仅9个帧被编码和传送。与更低时间分辨率媒体内容一起递送的元数据可以可选地向解码器/接收器120、250指示应该如何处理媒体内容,以便从接收到的每9个帧中恢复用于显示的10个帧。解码器/接收器120、250可以对帧进行重复或内插或者实现某种帧速率转换方法,以便恢复用于显示的十个帧。在这种模式下,功率消耗可以从最小值开始,但是可以在某些地方随着媒体内容减慢而升高,以增强观看体验。
图8A图示了根据本公开的实施例的媒体内容的经修改的播出时间确定的示例性绘制图800。图8A图示了与参考功率消耗相关联的参考阈值805。参考阈值805可以由用户选择或者可以被确定(例如,基于诸如整个电影、TV表演之类的视频内容的帧的平均功率值)。可以基于参考阈值805来确定经修改的媒体内容播出时间。可以根据结合图1-图6描述的原理和图5的描述来确定经修改的播出时间。图8A描述了发送到接收器的媒体内容的已经(并且可能很高地)加快的版本的情况。如果媒体片段的功率消耗小于参考阈值805,则可以减少媒体片段的播出时间。图8A中的大多数片段具有低于参考阈值805的功率消耗,并且因此与低于媒体内容的原始或正常速度的速度修改相关联。例如,持续时间t2的片段2将被减慢2的因子,并且持续时间t4的片段4将被减慢1.25的因子。图8A还图示了高于参考阈值的持续时间t1的片段1,以及处于参考阈值并且不需要速度修改(因此,它们的媒体播出时间可以保持相同)的持续时间t3的片段3。片段1需要速度修改,因为它已经是原始内容的加快版本,并且不应被进一步加快。
图8B图示了根据本公开的实施例的具有经修改的播出时间的图8A的媒体内容的示例性绘制图850。通过将速度修改应用于图8A的内容,片段2和4现在具有更长的持续时间,因为t2’=2*t2并且t4’=1.2*t4。片段1和片段3保持有相同的持续时间,即t1’=t1且t3’=t3。在实际的实现方式中,每个片段的最终持续时间可以近似为期望值,例如在期望值的+/-5%裕量内(例如,t2’~2*t2)。应注意,图8A和图8B没有以完全相同的比例描绘,并且这些图接近以上指示的确切的持续时间值。
使用可以等同于媒体内容的加快版本(例如,图8A)的低带宽(和低时间分辨率)版本可以对于多个系统运营商(MSO,例如,ComcastTM或DirecTVTM)是期望的,因为运营商可以能够将更多媒体内容纳入其可用带宽。
在接收器中,在可以对内容执行加快之前,需要缓冲一定量的内容。因此,对于直播内容,低带宽版本可以是更期望的,因为该版本可以以比其播出更快的步速实时到达。因此,与更高带宽版本相比,在(足够大的)缓冲器中存储数据所需的时间量可以大大减少。
在本公开的一个实施例中,前X分钟的媒体内容可以实时或减慢地呈现,即,元数据意味着不变或减慢。因此,缓冲器采集被优化(即,加快),可能略微降低功率节省,但是例如使“直播TV”场景更具现实可能性。在这种情况下,可以避免加快前X分钟的呈现。
当接收到的视频的帧速率或帧数与呈现帧速率(即,栅格帧速率)或帧数解耦合时,可能存在要在接收器/解码器120、250处考虑的输入缓冲器等级问题。在处理直播内容时,内容可能只在其发生时被编码和递送。在上述更低时间分辨率媒体内容的情况下,必须认识到,存在在编码器和广播/传送器侧110、200处发生的一种形式的时间压缩。换句话说,考虑到10%加快的示例,其采用10个栅格帧时段来产生视频的9个帧的等同物。这意味着所编码视频的每个帧都表示多于一个在直播事件现场处捕获的栅格帧时间。所以,即使尽快将视频数据递送到接收器,也不能在一个栅格帧时间中接收到视频的第一帧。在一个实施例中,在接收器120、250处实现缓冲方案,该接收器认识到在解码开始之前必须积累一定量的数据。可以通过视频压缩格式的缓冲规则以及在功率节省方案中实现的“加快”的等级来确定开始解码所需的缓冲器等级。
图9图示了根据本公开的一方面的接收器缓冲器等级随时间的示例性绘制图900。在信道改变之后,接收器120、250的输入缓冲器可以是空的,例如,在时间t0。信道改变之后的正常采集处理要求解码器对输入流进行解析,直到其找到可以开始解码的随机接入点,例如,在时间t1。在元数据针对其指示以上描述的加快模式的媒体内容的情况下,解码器可能需要比在对未修改的流进行解码所需的更多的时间来在其输入缓冲器中积累数据,以避免缓冲器下溢。在一个实施例中,为了使解码处理适配为更快地达到可以发生持续解码的等级(即,没有缓冲器下溢),解码器120、250可以选择以比元数据所指示的更低的速度开始解码。换句话说,如果需要解码器将速度增加10%,则其可以替代地选择将速度仅增加8%。这将减慢输入缓冲器被排出的速率,从而允许缓冲器等级上升到可以开始稳态解码的等级。此时,解码器然后可以恢复到与所编码的帧速率和栅格帧速率之间的差一致的帧速率增加。类似地,如果需要解码器将速度降低10%,则其可以将速度降低15%,以更早达到稳态。在一个实施例中,针对稳态的缓冲器等级是媒体片段的第一部分(例如,包括媒体内容的初始10%的片段)的速度要求的函数。
根据本公开的一方面,为了服务于更低功率消耗的兴趣,应注意,改变帧数的目标之一是减少高功率场景的持续时间(或播出时间)。换句话说,一个媒体片段可以用比以标称栅格帧速率将期待的少10%的帧来编码,而另一场景可以用比以标称栅格帧速率将期待的多10%的帧来编码。在以标称栅格帧速率解码和显示时,具有少10%的帧的媒体片段占用比其在原始源视频或媒体内容中表示的时间更少的栅格时间,而具有多10%的帧的媒体片段占用比其在原始视频中表示的更多的时间。在一个实施例中,可以在接收器120、250处实现该相同的目标,同时递送以恒定帧速率编码的媒体数据。在这种情况下,例如,可以以标称帧速率对内容进行编码,并且与内容一起递送的元数据可以引导视频的播出时间。对于表示相对更高功率的场景或图像的视频部分,可以使用帧跳过/丢弃或者帧跳过/丢弃加滤波算法,以便减少表示该视频部分的帧数。元数据可以标记更高功率片段的开始和结束,以及必要的帧数减少量,以便实现目标功率减少。以类似的方式,元数据也可以标记更低功率视频片段的开始和结束。元数据还可以提供为了使更低功率场景占用大量栅格帧时间所需的帧数扩展量的指示,以便实现目标功率减少。
这样的元数据引导的回放方案意味着可变的解码速率。在更高功率视频片段期间,解码器120以比实时速率快的速率来消耗帧,以便允许这些帧占用比实时回放速度的情况少的栅格时段。在更低功率视频片段期间,解码器以比实时速率慢的速率来消耗帧,以便允许这些帧占用比实时回放速度的情况多的栅格时段。在由正在使用的视频压缩格式指定的正常解码器缓冲器参数中没有考虑解码速度中的这种元数据驱动的变化。因此,在一个实施例中,需要在系统级别上考虑该可变解码速度所需的附加输入缓冲器裕量。例如,在存在高功率视频内容的延长时段的情况下,解码器/接收器120、250仅能够在其经历缓冲器下溢之前的短时间段内以比实时速率快的速率排出其输入视频数据缓冲器。类似的情况对于更低功率视频内容的延长时段也是如此。如果解码器在延长时段内以比实时速率慢的速率从其输入缓冲器消耗数据,则以实时速率连续到达的输入数据将很快溢出任何有限大小的输入缓冲器。
在本公开的一个实施例中,为了避免由于可变解码速率所导致的这样的缓冲器溢出/下溢情况,元数据可以指示在回放遵循功率节省元数据所指示的可变解码速率时用于媒体内容的持续回放的目标缓冲器等级。目标缓冲器等级数据是可应用的,无论在递送到接收器/解码器120、250之前在编码器110、200处还是在正在接收未修改的媒体数据的接收器/解码器120、200、250处实现速度的变化(通过帧数或帧速率改变)。目标缓冲器等级元数据可以以压缩视频帧、兆比特、秒、片段、与标称缓冲器等级的百分比增量等为单位指示缓冲器等级。在图9中,可以在时间t1实现目标缓冲器等级。接收器120、250可以尝试管理其本地输入缓冲器以达到该缓冲器等级,并且一旦达到,就可以尝试维持该缓冲器等级。在时间t1之后,在时间t1-t2呈现正常速度的片段,得到恒定的缓冲器等级。可以期待目标缓冲器等级作为高功率和低功率视频片段的频率和持续时间的函数随时间改变。事实上,在高功率的时段(例如,图9中的时段t3-t4和t7-t8)和低功率视频的时段(例如,图9中的时段t2-t3和t5-t6)期间,可以期待目标缓冲器等级按照输入缓冲器等级响应于遵循以比实时速率快或慢的速率播出媒体数据的元数据指令的接收器而排出或填充,逐帧地改变。因此,在一个实施例中,目标缓冲器等级元数据可以以规则间隔更新并且在带内或带外发送到接收器。目标缓冲器等级元数据的更新速率可以至少与目标缓冲器等级改变一样经常,并且对于广播单向递送系统而言可能更经常,以便允许接收器快速采集遵循信道改变的目标缓冲器等级元数据。
在广播递送系统中,媒体数据在接收器处的到达速率可以是固定的,并且通常跟踪实时回放所需的速率。因此,在一个实施例中,为了修改输入缓冲器中的数据等级,接收器可能需要修改其从缓冲器提取数据的速率。接收器可能已经响应于元数据,该元数据指示它比实时更快或更慢地播放,以便实现目标功率节省。然而,在一个实施例中,为了同样实现并保持目标缓冲器等级,接收器可能需要以比功率节省元数据所直接指示的更快或更慢的速率来从输入缓冲器消耗数据。例如,元数据可以指示10%的片段加快,并且接收器可以替代地使片段加快8%,以便防止可能的缓冲器下溢。类似地,元数据可以指示10%的片段减慢,并且接收器可以替代地使片段减慢8%,以便防止可能的缓冲器溢出。
目标缓冲器等级和实际缓冲器等级之间的差异可能在紧接着信道改变之后最明显。在一个实施例中,在信道改变之后,输入缓冲器等级为零,如图9所示,在时间t0处。接收器120、250可以选择将其解码和播出速率修改为以稍低于功率节省元数据所建议的解码和播出速率进行操作。以比所建议的解码和回放速率慢的速率进行操作将随时间允许输入缓冲器中的数据的积累,最终达到目标缓冲器等级。解码和播出速率的任何降低也可能受限于用户或确定最小播出速度的系统级设置。最小播出速度可以理想地被选择为允许比实时播出慢,其可以以与一般观看者看来基本等同于实时回放的速率进行操作。基本相同可以意味着一般观看者的在实时回放的百分比值以内的速率。在一个实施例中,百分比值可以是实时回放的+/-5%。
在图9中,缓冲器具有例如0%数据的最小缓冲器等级和例如100%数据的最大缓冲器等级。除了重置或启动条件之外,在操作期间期望避免最大和最小缓冲器等级。在时间t0之前,缓冲器等级905在等级50%处于稳态。在时间t1,缓冲器被重置并且新的媒体内容开始被接收和存储。在缓冲器在时间t1达到阈值之后,回放最终以正常速度开始。这种情况下的正常速度意味着接收速率和回放速率相同,并且缓冲器等级保持恒定。在时间t2,接收器将回放速度减慢到正常速度的80%(基于元数据或其自己的确定),并且缓冲器等级再次开始增加。在时间t3,接收器将回放速度加快到正常速度的120%,并且缓冲器等级再次开始降低。在时间t4,接收器将回放速度改变为正常速度,即100%,并且缓冲器等级保持恒定。在时间t5,接收器减慢至正常速度的60%,并且缓冲器等级增加。在时间t6,接收器将回放速度改变为正常速度,并且缓冲器等级保持恒定。在时间t7,接收器将速度增加到正常速度的120%,并且缓冲器等级再次开始降低。在时间t8,发生缓冲器重置,使缓冲器等级再次降到0%。
根据本公开的一个方面,提供了用于提供媒体内容的功率节省信息的装置110、120、200、310、350_1,装置包括与至少一个输入/输出接口201、313、351通信的处理器220、312、352,以及与处理器通信的至少一个存储器221、311、353,处理器被配置为接收包括多个媒体片段的媒体内容,确定多个媒体片段中的媒体片段的功率消耗指示符,基于媒体片段的功率消耗指示符来确定媒体片段的功率节省信息,以及提供功率节省信息。块201、203-205和207还可以实现以上描述的功能(即,接收、确定功率消耗指示符、确定功率节省信息和提供)。
在装置的一个实施例中,处理器可以确定功率消耗、确定功率节省信息、以及提供多于一个媒体片段或至少一个媒体片段的功率节省信息。另外,装置的以下实施例也适用于多于一个媒体片段或至少一个媒体片段。
在装置的一个实施例中,处理器还可以被配置为将功率节省信息作为元数据103、211提供给媒体内容102、210。
在装置的一个实施例中,功率消耗指示符可以是媒体片段的亮度的函数。可以基于媒体片段的平均或归一的亮度来确定功率消耗指示符。可以基于线性或非线性函数或者媒体片段的亮度的映射来确定功率消耗指示符。
在装置的一个实施例中,处理器可以被配置为通过基于媒体片段的功率消耗指示符确定媒体片段的播出时间指示符来确定功率节省信息。
在装置的一个实施例中,播出时间指示符可以降低媒体内容的平均功率消耗,平均功率消耗与原始媒体内容相关联。
在装置的一个实施例中,(原始)平均功率消耗可以是功率消耗指示符和媒体片段的原始播出时间的函数。例如,平均功率消耗可以是媒体内容中包括的每个媒体片段的功率消耗指示符的加权和,通过相对于内容的总播出时间的相应媒体片段播出时间百分比来加权。媒体片段的播出时间百分比是其播出时间除以媒体内容的总播出时间。
在装置的一个实施例中,处理器还可以被配置为确定多个媒体片段中的另一媒体片段的另一功率消耗指示符,以及基于另一媒体片段的另一功率消耗指示符来确定另一媒体片段的另一功率节省信息。在一个实施例中,处理器还可以通过还被配置为确定另一媒体片段的另一播出时间指示符来确定另一功率节省信息。
在装置的一个实施例中,处理器还可以被配置为确定另一媒体片段的另一播出时间指示符,其中另一播出时间指示符可以指示比另一媒体片段的原始播出时间长的播出时间,并且播出时间指示符可以指示比媒体片段的原始播出时间短的播出时间。替选地,在一个实施例中,另一播出时间指示符可以指示比另一媒体片段的原始播出时间短的播出时间,并且播出时间指示符可以指示比媒体片段的原始播出时间长的播出时间。
在装置的一个实施例中,播出时间指示符和另一播出时间指示符在分别应用于媒体片段和另一媒体片段时,可以得到与媒体内容的原始播出时间基本相同的媒体内容的播出时间。
在装置的一个实施例中,播出时间指示符可以是播放媒体片段的播出速度。播出速度可以是媒体内容的呈现的帧速率。
在装置的一个实施例中,播出时间指示符可以是要将媒体片段转换成的帧数。
根据本公开的一方面,描述了用于接收媒体内容的功率节省信息的装置110、120、200、250、310、350_1,装置包括与至少一个输入/输出接口201、251、313、351通信的处理器220、256、312、352;以及与处理器通信的至少一个存储器221、257、311、353,处理器被配置为接收包括多个媒体片段的媒体内容中的媒体片段的功率节省信息,将功率节省信息应用于媒体片段以生成功率调整的媒体内容,以及提供功率调整的媒体内容。块207-208或251-254(以及可选地,255)也可以实现以上描述的功能(即,接收、应用和提供)。功率调整的媒体内容可以是例如功率优化的媒体内容104、输出的媒体内容210或功率优化的媒体内容258。功率调整的媒体内容可以表示相对于原始媒体内容的功率消耗的节省。
在装置的一个实施例中,处理器可以接收功率节省信息并且将功率节省信息应用于多于一个媒体片段(或者至少一个媒体片段),以生成功率调整的媒体内容。另外,装置的以下实施例也适用于多于一个媒体片段或至少一个媒体片段。
在装置的一个实施例中,可以将功率节省信息作为元数据103、272接收到媒体内容102、271。
在装置的一个实施例中,功率节省信息可以包括媒体片段的播出时间指示符。
在装置的一个实施例中,播出时间指示符可以基于媒体片段的功率消耗指示符。
在装置的一个实施例中,功率消耗指示符可以是媒体片段的亮度的函数。可以基于媒体片段的平均或归一的亮度来确定功率消耗指示符。可以基于线性或非线性函数或者媒体片段的亮度的映射来确定功率消耗指示符。
在装置的一个实施例中,播出时间指示符可以降低媒体内容的平均功率消耗。在装置的一个实施例中,平均功率消耗可以是功率消耗指示符和媒体片段的原始播出时间的函数。例如,平均功率消耗可以是媒体内容中包括的每个媒体片段的功率消耗指示符的加权和,通过相对于内容的总播出时间的相应媒体片段播出时间百分比来加权。媒体片段的播出时间百分比是其播出时间除以媒体内容的总播出时间。
在装置的一个实施例中,处理器还可以被配置为接收媒体内容中的另一媒体片段的另一功率节省信息,其包括另一媒体片段的另一播出时间指示符,其中另一播出时间指示符可以指示比另一媒体片段的原始播出时间长的播出时间,并且播出时间指示符可以指示比媒体片段的原始播出时间短的播出时间。替选地,在一个实施例中,另一播出时间指示符可以指示比另一媒体片段的原始播出时间短的播出时间,并且播出时间指示符可以指示比媒体片段的原始播出时间长的播出时间。
在装置的一个实施例中,处理器还可以被配置为将另一功率节省信息应用于另一媒体片段,以生成功率调整的媒体内容,其中功率调整的媒体内容的播出时间可以与媒体内容的播出时间基本相同。
在装置的一个实施例中,功率调整的媒体内容的播出时间与媒体内容的播出时间基本相同。
在装置的一个实施例中,播出时间指示符可以是播放媒体片段的播出速度。播出速度可以是媒体内容的呈现的帧速率。
在装置的一个实施例中,播出时间指示符可以是要将媒体片段转换成的帧数。
图10图示了根据本公开的一方面的提供媒体内容的功率节省信息的示例性方法的流程图1000。该方法包括,在步骤1010,接收包括多个媒体片段的媒体内容。步骤1010可以例如由输入接口201来执行。然后,在步骤1020,该方法包括确定多个媒体片段中的媒体片段的功率消耗指示符。步骤1020可以例如由功率估计器203(以及可选地,积分器204和归一器205)来执行。接下来,在步骤1030,该方法包括基于媒体片段的功率消耗指示符来确定媒体片段的功率节省信息。步骤1030可以由例如速度确定器207来执行。最后,在步骤1040,该方法包括提供功率节省信息。步骤1040可以由例如速度确定器206来执行。
在方法的一个实施例中,可以针对多于一个媒体片段或针对至少一个媒体片段来执行确定功率消耗、确定功率节省信息和提供功率节省信息的步骤。另外,方法的以下实施例也适用于多于一个媒体片段或至少一个媒体片段。
在方法的一个实施例中,提供步骤还可以包括将功率节省信息作为元数据103、211提供给媒体内容102、210。
在方法的一个实施例中,功率消耗指示符可以是媒体片段的亮度的函数。可以基于媒体片段的平均或归一的亮度来确定功率消耗指示符。功率消耗指示符可以基于线性或非线性函数或者媒体片段的亮度的映射。
在方法的一个实施例中,确定功率节省信息步骤还可以包括基于媒体片段的功率消耗指示符来确定媒体片段的播出时间指示符。
在方法的一个实施例中,播出时间指示符可以降低媒体内容的平均功率消耗。
在方法的一个实施例中,平均功率消耗可以是功率消耗指示符和媒体片段的原始播出时间的函数。例如,平均功率消耗可以是媒体内容中包括的每个媒体片段的功率消耗指示符的加权和,通过相对于内容的总播出时间的相应媒体片段播出时间百分比来加权。媒体片段的播出时间百分比是其播出时间除以媒体内容的总播出时间。
在一个实施例中,该方法还可以包括在步骤1050确定多个媒体片段中的另一媒体片段的另一功率消耗指示符,以及在步骤1060基于另一媒体片段的另一功率消耗指示符来确定另一媒体片段的另一功率节省信息。步骤1050可以由例如功率估计器203(以及可选地,积分器204和归一器205)来执行。步骤1060可以由例如速度确定器207来执行。在一个实施例中,步骤1050和1060可以是可选的。在一个实施例中,步骤1050和1060可以被略过或移除。
在一个实施例中,该方法的确定另一功率节省信息步骤还可以包括确定另一媒体片段的另一播出时间指示符,其中另一播出时间指示符可以指示比另一媒体片段的原始播出时间长的播出时间,并且播出时间指示符可以指示比媒体片段的原始播出时间短的播出时间。替选地,在一个实施例中,另一播出时间指示符可以指示比另一媒体片段的原始播出时间短的播出时间,并且播出时间指示符可以指示比媒体片段的原始播出时间长的播出时间。
在方法的一个实施例中,播出时间指示符和另一播出时间指示符在分别应用于媒体片段和另一媒体片段时,可以得到与媒体内容的原始播出时间基本相同的媒体内容的播出时间。
在方法的一个实施例中,播出时间指示符可以是播放媒体片段的播出速度。播出速度可以是媒体内容的呈现的帧速率。
在方法的一个实施例中,播出时间指示符可以是要将媒体片段转换成的帧数。
图11图示了根据本公开的一方面的接收媒体内容的功率节省信息的示例性方法的流程图1100。该方法包括,在步骤1110,接收包括多个媒体片段的媒体内容中的媒体片段的功率节省信息。步骤1110可以例如由速度确定器207或输入接口251来执行。然后,在步骤1120,该方法包括将功率节省信息应用于媒体片段,以生成功率调整的媒体内容。步骤1120可以例如由A/V速度调整器208来执行。功率调整的媒体内容可以是例如功率优化的媒体内容104、输出的媒体内容210或功率优化的媒体内容258。最后,在步骤1130,该方法包括提供功率调整的媒体内容。步骤1130可以由例如A/V速度调整器208或输出接口255来执行。功率调整的媒体内容可以表示相对于原始媒体内容的功率消耗的节省。
在方法的一个实施例中,可以针对多于一个媒体片段或针对至少一个媒体片段来执行接收功率节省信息和应用功率节省信息的步骤,以生成功率调整的媒体内容。另外,方法的以下实施例也适用于多于一个媒体片段或至少一个媒体片段。
在方法的一个实施例中,可以将功率节省信息作为元数据接收到媒体内容。
在方法的一个实施例中,功率节省信息可以包括媒体片段的播出时间指示符。
在方法的一个实施例中,播出时间指示符可以基于媒体片段的功率消耗指示符。
在方法的一个实施例中,功率消耗指示符可以是媒体片段的亮度的函数。可以基于平均或归一的亮度来确定功率消耗指示符。功率消耗指示符可以基于线性或非线性函数或者亮度的映射。
在方法的一个实施例中,播出时间指示符可以降低媒体内容的平均功率消耗。
在方法的一个实施例中,平均功率消耗可以是功率消耗指示符和媒体片段的原始播出时间的函数。例如,平均功率消耗可以是媒体内容中包括的每个媒体片段的功率消耗指示符的加权和,通过相对于内容的总播出时间的相应媒体片段播出时间百分比来加权。媒体片段的播出时间百分比是其播出时间除以媒体内容的总播出时间。
在一个实施例中,该方法还可以包括在步骤1140接收另一功率节省信息,其包括媒体内容中的另一媒体片段的另一播出时间指示符,其中另一播出时间指示符可以指示比另一媒体片段的原始播出时间长的播出时间,并且播出时间指示符可以指示比媒体片段的原始播出时间短的播出时间。步骤1140可以例如由速度确定器207或输入接口251来执行。在一个实施例中,步骤1140可以是可选的。在一个实施例中,步骤1140可以被略过或移除。替选地,在一个实施例中,另一播出时间指示符可以指示比另一媒体片段的原始播出时间短的播出时间,并且播出时间指示符可以指示比媒体片段的原始播出时间长的播出时间。
在一个实施例中,该方法还可以包括在步骤1150将另一功率节省信息应用到另一媒体片段,以生成功率调整的媒体内容,其中功率调整的媒体内容的播出时间可以与媒体内容的播出时间基本相同。步骤1150可以例如由A/V速度调整器208来执行。在一个实施例中,步骤1150可以是可选的。在一个实施例中,步骤1150可以被略或移除。
在方法的一个实施例中,功率调整的媒体内容的播出时间与媒体内容的播出时间基本相同。
在方法的一个实施例中,播出时间指示符可以是播放媒体片段的播出速度。播出速度可以是媒体内容的呈现的帧速率。
在方法的一个实施例中,播出时间指示符可以是要将媒体片段转换成的帧数。
图10和图11的方法1000和1100分别可以实现为包括可以由处理器执行的计算机可执行指令的计算机程序产品。具有计算机可执行指令的计算机程序产品可以存储在相应的上述设备的相应的非临时性计算机可读存储介质中。
在此描述的各种处理和特征的实现方式可以体现在各种不同的装备或应用中。这样的装备的示例包括编码器、解码器、处理来自解码器的输出的后处理器、向编码器提供输入的预处理器、视频编码器、视频解码器、视频编解码器、网络服务器、机顶盒、膝上型计算机、个人计算机、蜂窝电话、PDA和其他通信设备。应该清楚,装备可以是移动的,并且甚至安装在移动车辆中。
另外,可以通过由处理器执行的指令来实现该方法,并且这样的指令(和/或由实现方式产生的数据值)可以存储在处理器可读介质上,诸如例如集成电路、软件载体或者其他存储设备,诸如例如硬盘、压缩盘(CD)、光盘(诸如例如DVD,通常称为数字多功能盘或数字视频盘)、RAM或ROM。指令可以形成有形地体现在处理器可读介质上的应用程序。指令可以在例如硬件、固件、软件或组合中。指令可以存在于例如操作系统、单独的应用或二者的组合中。因此,处理器可以被表征为例如被配置为执行处理的设备和包括具有用于执行处理的指令的处理器可读介质(诸如存储设备)的设备二者。此外,除了指令或者代替指令,处理器可读介质可以存储由实现方式产生的数据值。
如对于本领域技术人员明显的,实现方式可以产生被格式化为携带可以例如被存储或传送的信息的各种信号。该信息可以包括例如用于执行方法的指令或者由所描述的实现方式之一产生的数据。例如,信号可以被格式化为携带用于写入或读取所描述示例的语法的规则作为数据,或者携带由所描述示例写入的实际语法值作为数据。这样的信号可以被格式化为例如电磁波(例如,使用频谱的射频部分)或者基带信号。格式化可以包括例如对数据流进行编码以及对具有经编码的数据流的载波进行调制。信号携带的信息可以是例如模拟或数字信息。如已知的那样,可以通过各种不同的有线或无线链路来传送信号。该信号可以存储在处理器可读介质上。
已经描述了多个实现方式。然而,将理解,可以做出各种修改。例如,可以对不同实现方式的元素进行组合、补充、修改或移除,以产生其他实现方式。另外,本领域普通技术人员将理解,其他结构和处理可以替代所公开的那些结构和处理,并且所得到的实现方式将以与所公开的实现方式至少基本相同的方式来执行与所公开的实现方式至少基本相同的功能,以达到与公开的实现方式至少基本相同的结果。因此,本申请想到这些以及其他实现方式。
在此已经阐述了许多具体细节以提供对本发明的透彻理解。然而,本领域技术人员将理解,可以在没有这些具体细节的情况下实践以上示例。在其他情况下,没有详细描述众所周知的操作、组件和电路,以免使本发明模糊。可以理解,在此公开的具体结构和功能细节可以是代表性的,并且不一定限制本发明的范围。
本发明的各种实施例可以使用硬件元件、软件元件或二者的组合来实现。一些实施例可以例如使用计算机可读介质或制品来实现,该计算机可读介质或制品可以存储指令或指令集,该指令或指令集如果由机器执行,则可以使机器执行根据示例的方法和/或操作。这样的机器可以包括例如任何适当的处理平台、计算平台、计算设备、处理设备、计算系统、处理系统、计算机、处理器等,并且可以使用硬件和/或软件的任何适当组合来实现。计算机可读介质或制品可以包括例如任何适当类型的存储单元、存储设备、存储制品、存储介质、储存设备、储存制品、储存介质和/或储存单元。指令可以包括使用任何适当的高级、低级、面向对象、可视、编译和/或解释的编程语言实现的任何适当类型的代码,诸如源代码、编译代码、解释代码、可执行代码、静态代码、动态代码、加密代码等。
在此描述的实现方式可以例如在方法或处理、装置、软件程序、数据流或信号中实现。即使仅在单一形式的实现方式的背景下进行讨论(例如,仅作为方法进行讨论),但是所讨论的特征的实现方式也可以以其他形式(例如,装置或程序)来实现。其中包括的装置和组成部分,例如处理器、编码器和解码器,可以在例如适当的硬件、软件和固件中实现。方法可以例如实现在诸如例如处理器(其通常是指处理设备,包括例如计算机、微处理器、集成电路或可编程逻辑器件)的装置中。处理器还包括通信设备,诸如例如计算机、蜂窝电话、便携/个人数字助理(PDA),以及便于在最终用户之间进行信息通信的其他设备。
另外,本申请或其权利要求可以涉及“确定”各条信息。确定信息可以包括例如估计信息、计算信息、预测信息或从存储器取回信息中的一个或多个。
此外,本申请或其权利要求可以涉及“访问”各条信息。访问信息可以包括例如接收信息、(例如,从存储器)取回信息、存储信息、处理信息、传送信息、移动信息、复制信息、擦除信息、计算信息、确定信息、预测信息或估计信息中的一个或多个。
另外,本申请或其权利要求可以涉及“接收”各条信息。接收与“访问”一样旨在作为广义术语。接收信息可以包括例如访问信息或者(例如,从存储器)取回信息中的一个或多个。此外,通常在诸如例如存储信息、处理信息、传送信息、移动信息、复制信息、擦除信息、计算信息、确定信息、预测信息或估计信息之类的操作期间以某种方式涉及“接收”。
此外,本公开的各方面可以采用计算机可读存储介质的形式。可以利用一个或多个计算机可读存储介质的任何组合。计算机可读存储介质可以采用体现在一个或多个计算机可读介质中并且具有体现在其上的可由计算机执行的计算机可读程序代码的计算机可读程序产品的形式。在此使用的计算机可读存储介质被认为是给出在其中存储信息的固有能力以及提供从其中信息取回的固有能力的非临时性存储介质。计算机可读存储介质可以是例如但不限于电子、磁性、光学、电磁、红外或半导体系统、装置或设备,或者前述内容的任何适当组合。
要理解,以下列表虽然提供了对其可以应用本公开的计算机可读存储介质的更具体的示例,但是仅仅是说明性而非详尽的列表,如本领域普通技术人员容易理解的那样。示例的列表包括便携式计算机磁盘、硬盘、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或闪速存储器)、便携式压缩盘只读存储器(CD-ROM)、光存储设备、磁存储设备或者前述内容的任何适当组合。
根据本公开的一个方面,提供了一种携带软件程序的计算机可读存储介质,其包括用于执行提供媒体内容的功率节省信息的方法1000的任何实施例的程序代码指令。计算机可读存储介质可以是非临时性的或者临时性的。
根据本公开的一个方面,提供了一种非临时性计算机可读程序产品,其包括用于执行提供媒体内容的功率节省信息的方法1000的任何实施例的程序代码指令。
根据本公开的一个方面,提供了一种携带软件程序的计算机可读存储介质,其包括用于执行接收媒体内容的功率节省信息的方法1100的任何实施例的程序代码指令。计算机可读存储介质可以是非临时性的或者临时性的。
根据本公开的一个方面,提供了一种非临时性计算机可读程序产品,其包括用于执行接收媒体内容的功率节省信息的方法1100的任何实施例的程序代码指令。
还要理解,因为附图中描绘的一些组成系统组件和方法优选地以软件实现,所以系统组件与处理功能块之间的实际连接可以根据本公开被编程的方式而不同。鉴于在此的教导,相关领域的普通技术人员将能够想到本公开的这些和类似的实现方式或配置。
虽然已经参考附图在此描述了说明性实施例,但是要理解,本公开不限于那些确切的实施例,并且可以由相关领域的普通技术人员在不脱离本公开的范围的情况下在其中实现各种改变和修改。另外,在不脱离本公开的范围的情况下,可以将各个实施例组合。所有这样的改变和修改旨在被包括在如所附权利要求中阐述的本公开的范围内。

Claims (17)

1.一种提供媒体内容的功率节省信息的方法,所述方法包括:
接收包括多个媒体片段的媒体内容;
确定所述多个媒体片段中的媒体片段的功率消耗指示符;
基于所述媒体片段的功率消耗指示符来确定所述媒体片段的功率节省信息,包括基于所述媒体片段的功率消耗指示符来确定所述媒体片段的回放速度的指示符,其中,根据所述回放速度的所述媒体片段的回放通过减少所述媒体内容的高功率片段的持续时间来减少功率消耗;以及
提供所述功率节省信息。
2.根据权利要求1所述的方法,其中,所述方法还包括将所述功率节省信息作为元数据提供给所述媒体内容。
3.根据权利要求1或2所述的方法,其中,所述功率消耗指示符是所述媒体片段的亮度的函数。
4.根据权利要求1所述的方法,其中,所述回放速度减少所述媒体内容的平均功率消耗。
5.根据权利要求4所述的方法,其中,所述平均功率消耗是所述功率消耗指示符和所述媒体片段的原始播出时间的函数。
6.根据权利要求1所述的方法,还包括确定另一媒体片段的第一播出时间指示符,其中,所述第一播出时间指示符指示比所述另一媒体片段的原始播出时间长的播出时间,并且第二播出时间指示符指示比所述媒体片段的原始播出时间短的播出时间。
7.根据权利要求6所述的方法,其中,所述第二播出时间指示符和所述第一播出时间指示符在分别应用于所述媒体片段和所述另一媒体片段时,得到与所述媒体内容的原始播出时间基本相同的所述媒体内容的播出时间。
8.根据权利要求6所述的方法,其中,所述第一播出时间指示符是播放所述另一媒体片段的播出速度。
9.根据权利要求6所述的方法,其中,所述第二播出时间指示符是要将所述媒体片段转换成的帧数。
10.根据权利要求1所述的方法,其中,所述回放速度包括所述媒体片段的减少的帧数的指示。
11.一种用于提供媒体内容的功率节省信息的装置,所述装置包括:
至少一个存储器;
与至少一个输入/输出接口和所述至少一个存储器通信的处理器,其中,所述处理器被配置为:
接收包括多个媒体片段的媒体内容;
确定所述多个媒体片段中的媒体片段的功率消耗指示符;
基于所述媒体片段的功率消耗指示符来确定所述媒体片段的功率节省信息,包括基于所述媒体片段的功率消耗指示符来确定所述媒体片段的回放速度的指示符,其中,根据所述回放速度的所述媒体片段的回放通过减少所述媒体内容的高功率片段的持续时间来减少功率消耗;以及
提供所述功率节省信息。
12.根据权利要求11所述的装置,其中,所述处理器还被配置为将所述功率节省信息作为元数据提供给所述媒体内容。
13.根据权利要求11或12所述的装置,其中,所述功率消耗指示符是所述媒体片段的亮度的函数。
14.根据权利要求11所述的装置,其中,所述回放速度减少所述媒体内容的平均功率消耗。
15.根据权利要求14所述的装置,其中,所述平均功率消耗是所述功率消耗指示符和所述媒体片段的原始播出时间的函数。
16.根据权利要求11所述的装置,其中,所述处理器还被配置为确定另一媒体片段的第一播出时间指示符,其中,所述第一播出时间指示符指示比所述另一媒体片段的原始播出时间长的播出时间,并且第二播出时间指示符指示比所述媒体片段的原始播出时间短的播出时间。
17.根据权利要求11所述的装置,其中,所述回放速度包括所述媒体片段的减少的帧数的指示。
CN201680062061.8A 2015-09-15 2016-08-17 用于提供功率节省媒体内容的方法和装置 Active CN108353198B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201562218679P 2015-09-15 2015-09-15
US62/218,679 2015-09-15
PCT/US2016/047379 WO2017048447A1 (en) 2015-09-15 2016-08-17 Method and apparatus for providing power saving media content

Publications (2)

Publication Number Publication Date
CN108353198A CN108353198A (zh) 2018-07-31
CN108353198B true CN108353198B (zh) 2021-07-27

Family

ID=56894253

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680062061.8A Active CN108353198B (zh) 2015-09-15 2016-08-17 用于提供功率节省媒体内容的方法和装置

Country Status (6)

Country Link
US (1) US11405688B2 (zh)
EP (1) EP3351003B1 (zh)
JP (1) JP7061567B2 (zh)
KR (1) KR102585842B1 (zh)
CN (1) CN108353198B (zh)
WO (1) WO2017048447A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8849948B2 (en) * 2011-07-29 2014-09-30 Comcast Cable Communications, Llc Variable speed playback
US11380230B2 (en) * 2015-11-09 2022-07-05 Becton, Dickinson And Company Point of use interaction playback device employing energy harvesting from ambient radio frequency communications
US10615992B2 (en) * 2018-08-31 2020-04-07 Nxp B.V. Network device and method for performing network operations in a communications network
US10567179B1 (en) * 2018-08-31 2020-02-18 Nxp B.V. Network device and method for performing network operations in a communications network
US11410680B2 (en) * 2019-06-13 2022-08-09 The Nielsen Company (Us), Llc Source classification using HDMI audio metadata
CN111212326A (zh) * 2020-01-14 2020-05-29 咪咕视讯科技有限公司 一种视频播放方法、电子设备及存储介质
US11803221B2 (en) * 2020-03-23 2023-10-31 Microsoft Technology Licensing, Llc AI power regulation
WO2021202927A1 (en) * 2020-04-02 2021-10-07 Dolby Laboratories Licensing Corporation Metadata-based power management

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008300918A (ja) * 2007-05-29 2008-12-11 Sharp Corp 表示装置、表示制御方法及び、表示制御プログラム
US7676142B1 (en) * 2002-06-07 2010-03-09 Corel Inc. Systems and methods for multimedia time stretching
CN101859549A (zh) * 2009-04-10 2010-10-13 瀚宇彩晶股份有限公司 液晶显示器及其驱动方法
CN103078390A (zh) * 2006-08-31 2013-05-01 高通股份有限公司 具有基于优先级的功率节省控制的便携式装置及其方法
CN104049967A (zh) * 2013-03-12 2014-09-17 英特尔公司 暴露媒体处理特征

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030093790A1 (en) 2000-03-28 2003-05-15 Logan James D. Audio and video program recording, editing and playback systems using metadata
US6665751B1 (en) 1999-04-17 2003-12-16 International Business Machines Corporation Streaming media player varying a play speed from an original to a maximum allowable slowdown proportionally in accordance with a buffer state
US7376331B2 (en) * 2004-03-29 2008-05-20 Cyberlink Corp. Method and system for regulating power in portable audio/video playback device
US20090244408A1 (en) * 2006-09-15 2009-10-01 Kentaro Kamada Liquid crystal display device
US9183753B2 (en) 2007-02-26 2015-11-10 Sony Computer Entertainment America Llc Variation and control of sensory work playback
US20080297662A1 (en) * 2007-06-01 2008-12-04 Gibbs Benjamin K Method and system for optimizing mobile electronic device performance when processing video content
RU2493613C2 (ru) * 2008-08-22 2013-09-20 Сони Корпорейшн Устройство воспроизведения изображений и способ управления
US8978077B2 (en) 2009-02-23 2015-03-10 Qualcomm Incorporated Video content presentation
TW201035956A (en) * 2009-03-27 2010-10-01 Hannstar Display Corp Liquid crystal display device having low power consumption and method thereof
US9749676B2 (en) 2010-06-08 2017-08-29 Microsoft Technology Licensing, Llc Virtual playback speed modification
US8849948B2 (en) * 2011-07-29 2014-09-30 Comcast Cable Communications, Llc Variable speed playback
US9589540B2 (en) * 2011-12-05 2017-03-07 Microsoft Technology Licensing, Llc Adaptive control of display refresh rate based on video frame rate and power efficiency
US8934762B2 (en) * 2011-12-09 2015-01-13 Advanced Micro Devices, Inc. Apparatus and methods for altering video playback speed
US20130278642A1 (en) * 2012-04-20 2013-10-24 Samsung Electronics Co., Ltd. Perceptual lossless display power reduction
US8861932B2 (en) * 2012-05-18 2014-10-14 At&T Mobility Ii Llc Video service buffer management
US9582061B2 (en) * 2012-06-08 2017-02-28 Apple Inc. Adaptive frame rate control for power savings
JP6247286B2 (ja) 2012-06-12 2017-12-13 コーヒレント・ロジックス・インコーポレーテッド ビデオコンテンツの符号化及び配信のための分散アーキテクチャ
EP2870770A2 (en) * 2012-07-09 2015-05-13 VID SCALE, Inc. Power aware video decoding and streaming
JP6109956B2 (ja) 2012-12-17 2017-04-05 インテル・コーポレーション ビデオコンテンツを前処理するエンコーダハードウェアの活用
US8813120B1 (en) 2013-03-15 2014-08-19 Google Inc. Interstitial audio control
US9351023B2 (en) 2013-03-15 2016-05-24 Echostar Technologies L.L.C. Output of broadcast content with portions skipped
US9030414B2 (en) * 2013-04-10 2015-05-12 Chip Goal Electronics Corporation Method of dynamically adjusting image frame rate and device using same
EP3092815B1 (en) * 2014-01-10 2019-02-27 Sony Corporation Method for improving the power consumption of a mobile device during video streaming
JP2015158748A (ja) * 2014-02-21 2015-09-03 ソニー株式会社 制御装置、情報処理装置、制御方法、情報処理方法、情報処理システム、ウェアラブル機器
GB2528699B (en) * 2014-07-29 2017-05-03 Sony Computer Entertainment Europe Ltd Image processing
WO2016046589A1 (en) * 2014-09-26 2016-03-31 Intel Corporation Techniques for enhancing user experience in video conferencing
US9438936B1 (en) 2015-04-03 2016-09-06 Mirriad Limited Producing video data
US9781209B2 (en) * 2015-08-20 2017-10-03 Intel Corporation Techniques for routing packets between virtual machines
JP2018533272A (ja) 2015-09-15 2018-11-08 トムソン ライセンシングThomson Licensing 節電メディアコンテンツを再生する方法、システム、及び機器
WO2018031598A1 (en) 2016-08-09 2018-02-15 Technicolor (Usa) Inc. Methods, systems and apparatus for playing back power saving media content

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7676142B1 (en) * 2002-06-07 2010-03-09 Corel Inc. Systems and methods for multimedia time stretching
CN103078390A (zh) * 2006-08-31 2013-05-01 高通股份有限公司 具有基于优先级的功率节省控制的便携式装置及其方法
JP2008300918A (ja) * 2007-05-29 2008-12-11 Sharp Corp 表示装置、表示制御方法及び、表示制御プログラム
CN101859549A (zh) * 2009-04-10 2010-10-13 瀚宇彩晶股份有限公司 液晶显示器及其驱动方法
CN104049967A (zh) * 2013-03-12 2014-09-17 英特尔公司 暴露媒体处理特征

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Felix C.Fernandes;Xavier Ducloux ;Zhan Ma;etc.The Green Metadata Standard for Energy-Efficient Video Consumption.《IEEE MultiMedia 》.2015,80-87. *
The Green Metadata Standard for Energy-Efficient Video Consumption;Felix C.Fernandes;Xavier Ducloux ;Zhan Ma;etc;《IEEE MultiMedia 》;20150204;80-87 *

Also Published As

Publication number Publication date
EP3351003A1 (en) 2018-07-25
WO2017048447A1 (en) 2017-03-23
EP3351003B1 (en) 2021-07-14
US20180255350A1 (en) 2018-09-06
JP2018534880A (ja) 2018-11-22
US11405688B2 (en) 2022-08-02
CN108353198A (zh) 2018-07-31
KR20180053691A (ko) 2018-05-23
KR102585842B1 (ko) 2023-10-11
JP7061567B2 (ja) 2022-04-28

Similar Documents

Publication Publication Date Title
CN108353198B (zh) 用于提供功率节省媒体内容的方法和装置
CN110460745B (zh) 显示装置
CN106791956B (zh) 网络直播卡顿的处理方法及装置
US9781477B2 (en) System and method for low-latency multimedia streaming
JP4729570B2 (ja) トリックモードおよび速度移行
US8613013B2 (en) Ad splicing using re-quantization variants
US20130042015A1 (en) Constant-Quality Rate-Adaptive Streaming
CN202799004U (zh) 一种视频播放终端及系统
US20060239563A1 (en) Method and device for compressed domain video editing
US10003626B2 (en) Adaptive real-time transcoding method and streaming server therefor
US9137477B2 (en) Fast channel change companion stream solution with bandwidth optimization
US20180270536A1 (en) Methods, systems and apparatus for playing back power saving media content
CN112425178B (zh) 两遍组块并行转码处理
US20220295127A1 (en) Consolidating content streams to conserve bandwidth
WO2018031598A1 (en) Methods, systems and apparatus for playing back power saving media content
US20240112703A1 (en) Seamless insertion of modified media content
JP5541365B2 (ja) 通信システム、サーバ、端末及び端末の制御方法
CN102892000A (zh) 一种视频文件压缩及播放的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20190604

Address after: France

Applicant after: Interactive Digital CE Patent Holding Company

Address before: I Si Eli Murli Nor, France

Applicant before: Thomson Licensing SA

TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20210122

Address after: Fa Guobali

Applicant after: Interactive Digital Madison Patent Holdings

Address before: Fa Guobali

Applicant before: Interactive Digital CE Patent Holding Co.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant