CN107920185A - 用于处理视频内容以用于显示控制的设备和方法 - Google Patents

用于处理视频内容以用于显示控制的设备和方法 Download PDF

Info

Publication number
CN107920185A
CN107920185A CN201710902186.3A CN201710902186A CN107920185A CN 107920185 A CN107920185 A CN 107920185A CN 201710902186 A CN201710902186 A CN 201710902186A CN 107920185 A CN107920185 A CN 107920185A
Authority
CN
China
Prior art keywords
video
frames
metadata
definite
perceptual property
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710902186.3A
Other languages
English (en)
Other versions
CN107920185B (zh
Inventor
P·新塔尼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN107920185A publication Critical patent/CN107920185A/zh
Application granted granted Critical
Publication of CN107920185B publication Critical patent/CN107920185B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10Intensity circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/147Scene change detection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N11/00Colour television systems
    • H04N11/24High-definition television systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23424Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42607Internal components of the client ; Characteristics thereof for processing the incoming bitstream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/812Monomedia components thereof involving advertisement data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/268Signal distribution or switching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20208High dynamic range [HDR] image processing
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0613The adjustment depending on the type of the information to be displayed
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/066Adjustment of display parameters for control of contrast
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/14Solving problems related to the presentation of information to be displayed
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/04Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本公开涉及用于处理视频内容以用于显示控制的设备和方法。用于显示控制的视频处理设备和方法的各个方面包括从接收自视频源的图像帧序列中检测从与第一元数据相关联的一个或多个帧到与第二元数据相关联的一个或多个其他帧的转换。基于第一元数据来确定一个或多个帧的第一视觉属性。基于第二元数据来确定一个或多个其他帧的第二视觉属性。根据该一个或多个帧的确定的第一视觉属性,控制该一个或多个其他帧的确定的第二视觉属性以实现平滑转换。

Description

用于处理视频内容以用于显示控制的设备和方法
技术领域
本公开的各个实施例涉及视频处理。更具体地,本公开的各个实施例涉及用于处理视频内容以用于显示控制的设备和方法。
背景技术
视频内容处理和显示技术领域的进展已经扩展了诸如电视(TV)或机顶盒(STB)的各种消费电子(CE)设备的功能。例如,高清晰度TV(HDTV)市场在技术和产品供应方面一直跨越式变化。当前流行的包括TV广播的视频格式受到标准的限制。可广泛采用诸如高动态范围(HDR)视频的新兴的和下一代视频节目,用于空中广播或经由多频道视频节目分发器(MVPD)进行广播。高动态范围(HDR)比现有视频格式在宽得多的范围上提供关于亮度和颜色的更多信息。因此,HDR兼容的HDTV上的HDR视频内容可提供具有更佳画面细节的更宽范围的亮度和暗度。通常地,诸如TV节目的视频节目广播可包括诸如广告的各种插播式(interstitial)内容项目。这种插播式内容项目的视频格式可以与TV节目的格式相同或可以不同。进一步地,插播式内容项目的视觉外观与诸如TV节目的主要视频内容可能不同步或不相关。对于诸如HDR或标准动态范围(SDR)的某些视频格式,从主要视频内容到插播式内容项目的变化可能更明显,并且视觉上可能不令观看者满意。因此,可能需要按照观看者或广播者的选择来调整插播式内容项目和/或主要视频内容的视觉外观以提供增强的观看体验的改进技术和系统。
通过所描述系统与在本申请的其余部分中参照附图所阐述的本公开的一些方面的比较,常规和传统手段的进一步限制和缺点对本领域技术人员来说是显而易见的。
发明内容
如在权利要求里更完整地阐述的,提供了基本上如附图中的至少一个所示和/或结合附图中的至少一个所描述的用于视频内容处理以用于显示控制的设备和方法。
通过阅读以下对本公开的详细描述以及附图可以理解本公开的这些和其他特征和优点,贯穿附图,相同的附图标记指代相同的部件。
附图说明
图1是示出根据本公开的实施例的网络环境的框图。
图2是示出根据本公开的实施例的示例性电子设备的框图。
图3示出根据本公开的实施例的用于实施所公开的用于视频内容处理以用于显示控制的设备和方法的示例性场景。
图4A和图4B一起描述了示出根据本公开的实施例的用于视频内容处理以用于显示控制的示例性方法的流程图。
具体实施方式
在所公开的用于视频内容处理以用于显示控制的设备和方法中可找到以下描述的实施方式。本公开的示例性的方面可包括一种方法,该方法可以包括从接收自视频源的图像帧序列中检测从与第一元数据相关联的一个或多个帧到与第二元数据相关联的一个或多个其他帧的转换。基于第一元数据可以确定一个或多个帧的第一视觉属性。基于第二元数据可以确定一个或多个其他帧的第二视觉属性。可以根据所确定的该一个或多个帧的第一视觉属性来控制所确定的该一个或多个其他帧的第二视觉属性以实现平滑转换。
根据实施例,图像帧序列可以包括第一类型的视频片段和第二类型的视频片段。第一类型的视频片段可对应于一个或多个帧,并且第二类型的视频片段可对应于一个或多个其他帧。第一类型的视频片段和第二类型的视频片段可以是高动态范围(HDR)视频。第一类型的视频片段可以对应于电视节目、来自基于互联网的视频流应用的视频项目和/或来自预订服务的视频项目。第二类型的视频片段可以对应于插播式内容、商业广告、预告片和/或作为收视吸引力的视频内容的片段。
根据实施例,第一视觉属性和第二视觉和属性可以对应于亮度属性。第一元数据和第二元数据可以包括平均画面亮度信息、最大画面亮度信息和/或色度信息中的至少一个。
根据实施例,在从视频源接收到的图像帧序列中可以检测标记值,用于转换的检测。标记值可以表示在图像帧序列中该一个或多个帧与该一个或多个其他帧之间的不连续性。可以将检测到的标记值和空间图像信息用于第一视觉属性和第二视觉属性的确定。
根据实施例,在该确定的第二视觉属性在该一个或多个其他帧中的两个连续的图像帧之间的差别小于指定的阈值的情况下,可以动态地终止对该一个或多个其他帧的确定的第二视觉属性的控制。
图1是示出根据本公开的实施例的网络环境的框图。参照图1,示出了网络环境100。网络环境100可包括电子设备102、诸如服务器104的一个或多个服务器、通信网络106、视频源108、以及诸如用户110的一个或多个用户。用户110可以与电子设备102是相关联的。根据实施例,电子设备102可以经由通信网络106通信地耦接至服务器104。电子设备102可进一步通信地耦接至视频源108。
电子设备102可包括可被配置为从服务器104或从视频源108访问一个或多个视频内容项目的合适的逻辑、电路、接口和/或代码。电子设备102的示例可包括但不限于TV,诸如HDR兼容的HDTV、数字TV、智能TV、互联网协议电视(IPTV)、三维(3D)TV、机顶盒、平板电脑、智能电话、显示设备和/或其他电子设备。
服务器104可包括可被配置为向电子设备102发送诸如TV视频节目的多个视频内容项目的合适的逻辑、电路、接口和/或代码。服务器104可被配置为经由通信网络106向电子设备102广播多个视频内容项目。可以通过本领域技术人员公知的一些技术的使用来实施服务器104。服务器104的示例可包括但不限于媒体流服务器、云服务器、广播服务器、应用服务器、数据库服务器、web服务器、文件服务器和/或其任何组合中的至少一个。
通信网络106可包括通信介质,电子设备102可通过该通信介质与诸如服务器104的一个或多个服务器进行通信。通信网络106的示例可包括但不限于互联网、云网络、无线保真(Wi-Fi)网络、无线局域网(WLAN)、无线个域网(WPAN)、无线广域网(WWAN)、局域网(LAN)、普通老式电话服务(POTS)、城域网(MAN)、多播网络和/或诸如电视广播的广播网络中的至少一个。网络环境100中的各个设备可被配置为根据各种有线、无线和/或广播通信协议与通信网络106连接。这种有线通信协议和无线通信协议的示例可包括但不限于传输控制协议和互联网协议(TCP/IP)、长期演进(LTE)、用户数据报协议(UDP)、超文本传输协议(HTTP)、文件传输协议(FTP)、ZigBee、EDGE、红外(IR)、IEEE 802.11、IEEE 802.16、蜂窝通信协议、有线网络、未加密卫星(自由传播)、直播卫星电视、互联网协议电视(IPTV)、其他广播(空中)通信协议、视频流协议、蓝牙(BT)通信协议和/或其变形中的至少一个。
视频源108可包括与电子设备102连接的集成或外部机顶盒。集成或外部机顶盒可以可通信地耦接至卫星天线(satellite dish)(未示出)以接收TV信号和/或诸如在线电影流服务的其他订阅服务。视频源108可对应于多频道视频节目分发器(MVPD)服务。视频源108可进一步包括一个或多个内置或外部存储设备,诸如与电子设备102连接的外部存储设备,其使得能够在电子设备102处访问视频内容项目。视频源108可进一步包括诸如同轴电缆和/或光缆的高带宽介质以访问TV节目或包括来自互联网的视频内容项目的其他内容。
在操作中,电子设备102可被配置为从诸如视频源108或服务器104的传入视频源接收多个视频内容项目。多个视频内容项目可对应于多个视频,其中每个视频包括不同类型的视频片段。例如,多个视频内容项目中的每一个可包括第一类型的视频片段和第二类型的视频片段。第一类型的视频片段的示例可包括但不限于TV节目、来自基于互联网的视频流应用的视频项目和/或来自预订服务的视频项目中的至少一个。第二类型的视频片段可以是在第一类型的视频片段之间散布(intersperse)的短视频节目。例如,第二类型的视频片段可以指代可散布在诸如TV节目的主要视频内容项目中的短视频广告。这里,TV节目对应于第一类型的视频片段。第二类型的视频片段的其他示例可包括但不限于商业广告、预告片以及作为收视吸引力的视频内容的片段中的至少一个。第二类型的视频片段也可以称为插播式内容、插播式节目、环绕节目(wraparound program)、环绕片段(wraparoundsegment)。诸如一个或多个TV商业广告的这种插播式内容通常散布在诸如TV秀(show)、TV节目和/或TV频道的TV视频节目中。多个视频内容项目可进一步对应于从一个或多个基于互联网的视频流应用接收到的视频项目,和/或诸如也包括这种插播式内容的预订的基于卫星的电影流服务之类的来自预订服务的视频项目。
电子设备102可被配置为处理接收到的多个视频内容项目中的视频内容项目。视频内容项目可包括第一类型的视频片段和第二类型的视频片段。根据实施例,电子设备102可被配置为检测视频内容项目中的标记值。标记值可表示诸如TV节目的第一类型的视频片段与诸如TV广告的第二类型的视频片段之间的不连续性。在某些场景下,第一类型的视频片段和第二类型的视频片段可以是HDR视频。通常,HDR视频可以是利用指示包括HDR视频的视觉属性的视频特性的元数据来广播。电子设备102可被配置为从所处理的视频内容项目的图像帧序列中,检测从与第一元数据相关联的一个或多个第一帧到与第二元数据相关联的一个或多个第二帧的转换。与第一元数据相关联的一个或多个第一帧可对应于诸如TV节目的第一类型的视频片段。与第二元数据相关联的一个或多个第二帧可对应于诸如TV广告的第二类型的视频片段。例如,第一元数据和第二元数据可包括平均画面亮度信息、最大画面亮度信息和/或色度信息。平均画面亮度通常根据图像帧的每个像素的亮度算出,并且用一范围表示,该范围诸如是现有视频格式中的0(完全黑)到255(完全白)的范围。HDR比现有视频格式提供了关于宽得多的范围的亮度以及颜色的更多信息。例如,为了说明的目的,在HDR视频中,变化的范围可从.0004暗度水平到高于1000尼特峰值亮度水平。对于所处理的视频内容项目的平均画面亮度信息可包括逐帧或逐情景基础上的这些平均画面亮度值。最大画面亮度信息可对应于峰值亮度水平。在TV中,对应于最大画面亮度的信号电平也可以称为白色电平。在HDR视频的情况下,类似于亮度范围,色度信息可对应于其RGB通道值可以不受“0…1”或“0…255”范围的限制的颜色范围。RGB通道值可以是无限的或者在诸如在正或负从分数到数万亿的范围的指定的范围内。
根据实施例,基于检测到的标记值可以检测转换点。检测到的标记值也可被称为不连续性标记。转换点可以指代在所处理的视频内容项目中的一个或多个帧的时刻或物理位置,其中第一类型的视频片段中的一个结束并且第二类型的视频片段中的至少一个开始。换句话说,转换点可指代其中第二类型的视频片段中的至少一个开始或结束的时刻或帧。例如,转换点可以是刚好在TV节目中的广告开始之前的时刻或帧。
根据实施例,电子设备102可被配置为基于第一元数据来确定一个或多个帧的第一视觉属性。电子设备102可被进一步配置为基于第二元数据来确定第二视觉属性。视觉属性可对应于亮度属性。电子设备102可被进一步配置为根据该一个或多个帧的确定的第一视觉属性来控制该一个或多个其他帧的确定的第二视觉属性以实现平滑转换。例如,根据诸如TV节目的第一类型的视频片段的亮度属性可以控制诸如TV广告的第二类型的视频片段的亮度属性。亮度属性可以包括平均画面亮度值、(一个或多个)最大画面亮度值和/或第二类型的视频片段的每个帧或每个情景的总体亮度水平值。
图2是示出根据本公开的实施例的示例性电子设备的框图。结合来自图1的元件解释图2。参照图2,示出了电子设备102。电子设备102可包括诸如处理器202的一个或多个处理器。电子设备102可进一步包括存储器204、视频转换控制器206以及诸如输入/输出(I/O)设备208的一个或多个I/O设备。进一步示出了I/O设备208中的显示屏210,和收发机212,以及通信网络106(图1)。根据实施例,I/O设备208可以是内置单元或耦接至电子设备102的外部单元。
根据实施例,处理器202可以可通信地耦接至存储器204、视频转换控制器206、I/O设备208以及收发机212。收发机212可被配置为经由通信网络106与诸如服务器104的一个或多个服务器进行通信。收发机212可被进一步配置为与视频源108进行通信。
处理器202可包括可被配置为执行存储于存储器204中的一组指令的合适的逻辑、电路、接口和/或代码。处理器202可被配置为从视频源108经由收发机212接收多个视频内容项目。基于本领域已知的多个处理器技术可以实施处理器202。处理器202的示例可以是基于X86的处理器、精简指令集计算(RISC)处理器、专用集成电路(ASIC)处理器、复合指令集计算(CISC)处理器、中央处理器(CPU)、显示并行指令计算(EPIC)处理器、超长指令字(VLIW)处理器和/或电路的其他处理器。
存储器204可包括可被配置为存储可由处理器202执行的一组指令的合适的逻辑、电路和/或接口。根据实施例,存储器204可被配置为存储接收到的多个视频内容项目。存储器204的类型的示例可以包括但不限于随机存取存储器(RAM)、动态随机存取存储器(DRAM)、静态随机存取存储器(SRAM)、晶闸管随机存取存储器(T-RAM)、零电容随机存取存储器(Z-RAM)、只读存储器(ROM)、硬盘驱动器(HDD)和/或安全数字(SD)卡和/或缓存存储器。
视频转换控制器206可包括可被配置为检测从与第一元数据相关联的一个或多个帧到与第二元数据相关联的一个或多个其他帧的转换的合适的逻辑、电路、接口和/或代码。视频转换控制器206可被进一步配置为控制诸如商业广告或广告视频片段的一个或多个其他帧的诸如画面亮度属性的视觉属性。视频转换控制器206可以被实施为电子设备102中的专用电路或诸如图形处理单元(GPU)之类的独立处理器。视频转换控制器206和处理器202可被实施为集成处理器或执行视频转换控制器206和处理器202的功能的处理器集群。视频转换控制器206可被实施为存储于存储器204中的由处理器202执行时可执行电子设备102的功能一组指令。
I/O设备208可包括可被配置为从诸如用户110的用户接收输入的合适的逻辑、电路、接口和/或代码。I/O设备208可被进一步配置为向用户110提供输出。I/O设备208可包括可被配置为与处理器202进行通信的各种输入设备和输出设备。输入设备的示例可包括但不限于触摸屏、操纵杆、麦克风、运动传感器、光传感器和/或坞站。输出设备的示例可包括但不限于显示屏210、投影仪屏幕和/或扬声器。
收发机212可包括可被配置为经由通信网络106(如图1所示)与诸如服务器104的一个或多个服务器进行通信的合适的逻辑、电路、接口和/或代码。收发机212可被配置为与视频源108进行通信。收发机212可以包括一个多个发送机和/或一个或多个接收机,它们可以是集成的或独立的并且可以被配置为实施已知的技术以支持电子设备102与通信网络106的有线或无线通信。收发机212可包括但不限于天线、一个或多个射频(RF)发送机和/或接收机、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编码器-解码器(CODEC)芯片组、用户识别模块(SIM)卡和/或本地缓冲器。
在操作中,处理器202可被配置为通过收发机212的使用从视频源108接收多个视频内容项目。处理器202可被配置为至少处理接收到的多个视频内容项目中的视频内容项目。例如,用户110可以在显示屏210上收看某一TV频道。接收到的视频内容项目,诸如该TV频道的视频节目,可以显示在显示屏210上。
根据实施例,视频转换控制器206可被配置为在实际内容被显示在显示屏210上之前检测进行处理的视频内容项目中的一个或多个标记值。例如,该一个或多个标记值可以是不连续性标记。这种不连续性标记可表示在诸如当前显示在显示屏210上的TV频道的TV秀的第一类型的视频片段与诸如TV广告的传入的第二类型的视频片段之间的不连续性。在某些场景下,第一类型的视频片段和第二类型的视频片段可以是HDR视频。通常,可以连同指示包括HDR视频的视觉属性的视频特性的元数据一起广播HDR视频。在这种场景下,视频转换控制器206可被配置为从所处理的视频内容项目的图像帧序列中,检测从与第一元数据相关联的一个或多个帧到与第二元数据相关联的一个或多个其他帧的转换。例如,视频转换控制器206可被配置为检测从当前显示在显示屏210上的TV频道的TV秀的一个或多个帧到TV广告的一个或多个其他帧的转换。根据示例性实施例,插入在视频内容项目之内的一个或多个空白的或黑色的帧可以指示转换点。
根据实施例,在视频节目广播的压缩视频流中可以存在不连续性标记信息。不连续性标记信息可以指示不连续性,诸如在TV节目和诸如广告的各种插播式内容项目之间的不连续性。可以利用(leverage)该不连续性标记信息来检测转换点,例如在接收到的压缩视频流中的各种插播式视频和TV节目视频之间的转换点。在另一个示例中,在某些场景下,渐黑(fade-to-black)变化或中间亮度水平的一个或多个帧的插入也可以指示不连续性。这一变化也可用于不连续性的检测。进一步地,在一些广播系统和/或视频流服务中,由于可存在诸如Technicolor Prime、感知量化器(PQ)格式、混合对数伽马(HLG)等的多个HDR方案,所以可存在转换的多个组合。因此不连续性可以是标准动态范围(SRG)-HLG或HLG-PG或HLG-到Prime等之间的转换。类似地,也可以如上所述地基于各种标识符、标记或指示转换点的提示来检测HDR到HDR的不连续性。
根据实施例,第一元数据和第二元数据可包括平均画面亮度信息、最大画面亮度信息、色度信息和/或定义数字视频信号的电光传输函数(EOTF),所述电光传输函数例如感知量化器(PQ)US H6G或PQ EOTF。根据实施例,标记值的检测之后,视频转换控制器206可被配置为基于第一元数据来确定一个或多个帧的第一视觉属性。视频转换控制器206可被配置为基于第二元数据来确定第二视觉属性。视觉属性可对应于亮度属性。视频转换控制器206可被配置为根据一个或多个帧的确定的第一视觉属性来控制一个或多个其他帧的确定的第二视觉属性以实现平滑转换。
根据实施例,视频转换控制器206可被配置为根据一个或多个其他帧的确定的第二视觉属性来控制一个或多个帧的确定的第一视觉属性以实现平滑转换。例如,可以调整刚好在广告之前的TV秀的指定数量的帧的亮度的动态范围以实现向广告的亮度的动态范围的平滑转换。可替代地,为了给广告提供更多的视觉冲击,相对于TV秀的亮度的动态范围可以自动调节广告的亮度的动态范围,以使得广告按照存储于存储器204中的指定偏好而看起来更生动和更明亮。指定偏好可以是用户定义的、可配置的、或在电子设备102中配置的默认偏好。
例如,在第一指定配置中,可以逐渐调整刚好在广告之前的TV秀的指定数量的帧的平均画面亮度值与广告的平均画面亮度值相类似以实现平滑转换。在第二指定配置中,可以逐渐调整刚好在TV秀的最后一个图像帧之后的广告的指定数量的帧的平均画面亮度值与TV秀的最后几帧的平均画面亮度值相类似以实现平滑转换。在第三指定配置中,可以逐渐增加刚好在TV秀的最后一个图像帧之后的广告的指定数量的帧的平均画面亮度值超过TV秀的最后几帧的平均画面亮度值,以使得该广告比原始广告看起来更生动和更明亮。
在某些其他场景下,第一类型的视频片段和/或第二类型的视频片段可以不是HDR视频。因而,指示包括HDR视频的视觉属性的视频特性的元数据可能不存在。进一步地,在某些实例中,元数据可能不在HDR视频中。在这种场景下,一个或多个帧以及一个或多个其他帧可能不与元数据相关联。视频转换控制器206于是可被配置为基于一个或多个帧的空间图像信息来确定一个或多个帧的第一视觉属性。类似地,视频转换控制器206可被配置为通过确定一个或多个其他帧的空间图像信息来确定一个或多个其他帧的第二视觉属性。视频转换控制器206可被配置为根据一个或多个帧的确定的第一视觉属性来控制一个或多个其他帧的确定的第二视觉属性以实现平滑转换。进一步地,在某些情况下,第一类型的视频片段和/或第二类型的视频片段可以不是可以不需要元数据的混合对数伽马(HLG)视频。在这种情况下,基于诸如不连续性标记的标记值的检测,可以检测到转换,随后是对于第二类型的视频片段的平均亮度的手动偏移。该手动偏移可以指设置相同或类似平均画面亮度值供视频转换控制器206用于以所设置的平均画面亮度值显示所有第二类型的视频片段,而不管第一类型的视频片段的平均画面亮度值如何。可替代地,代替手动偏移,可以由视频转换控制器206基于例如对第二类型的视频片段的内容分析来执行平均画面亮度的用户定义的或预指定的偏移。
根据实施例,在确定的第二视觉属性在一个或多个其他帧的两个连续的图像帧之间的差别小于指定的阈值的情况下,视频转换控制器206可被配置为动态地终止对一个或多个其他帧的确定的第二视觉属性的控制。例如,在控制广告的某一数量的帧的亮度之后,在广告的后续帧的亮度水平中可能不存在急剧的或突然的增加或减少。因此,可能不需要进一步控制广告的后续帧的亮度水平。
图3示出根据本公开的实施例的用于实施所公开的用于视频内容处理以用于显示控制的设备和方法的示例性场景。结合来自图1和图2的元件解释图3。参照图3,示出了TV302、TV显示器304、用户接口(UI)306、电影内容308以及用户310。电影内容308可包括诸如商业广告内容314的多个插播式内容项目。图3进一步示出电影内容308的多个帧308a至308f。类似地,商业广告内容314可包括可位于电影内容308的帧308c和帧308d之间的多个帧314a至314n,如图所示。图3中也示出了不连续性标记312和316。
根据示例性场景,TV 302可对应于电子设备102。TV显示器304可对应于显示屏210。在用户接口306中的电影内容308可对应于从视频源108接收到的视频内容项目。用户310可在TV 302上收看电影内容308。电影内容308以及商业广告内容314的每一帧可具有相应的元数据。帧的元数据可以表示帧的视觉属性,诸如平均画面亮度和/或峰值画面亮度。
根据实施例,视频转换控制器206可被配置为基于不连续性标记312和316的检测来确定诸如商业广告内容314的不同类型的视频片段。例如,不连续性标记312可指示在电影内容308与商业广告内容314之间的不连续性。在检测到不连续性标记312之后,视频转换控制器206可被配置为确定在商业广告内容314之前的指定数量的帧,诸如帧308a至308c,的第一视觉属性。例如,基于与帧308c相关联的元数据,视频转换控制器206可以确定帧308c的第一视觉属性。类似地,视频转换控制器206可被配置为确定在电影内容308的帧308c之后的指定数量的帧,诸如帧314a至314d,的第二视觉属性。例如,基于与帧314a至314n中的每一个相关联的元数据,可以确定第二视觉属性。
视频转换控制器206可被配置为控制指定或确定的数量的帧,诸如商业广告内容314的帧314a至314d,的视觉属性。根据实施例,根据电影内容308的帧308c的确定的第一视觉属性可以执行该控制,以实现从电影内容308的帧308a至308c的亮度范围到商业广告内容314的帧314a至314d的调整的亮度范围的平滑转换。根据实施例,视频转换控制器206可被配置为在帧314d之后动态地终止控制操作。这种终止可发生于确定的第二视觉属性在商业广告314的诸如帧314c和帧314d的两个连续的帧之间的差别小于阈值的情况下。处理器202可被配置为在TV显示器304上显示商业广告内容314的帧314a至314d中的每一个的受控制的第二视觉属性。因此,TV 302可以向用户310提供增强的观看体验,该用户310可以体验在电影内容308与商业广告内容314之间的平滑转换,而在转换期间没有亮度或暗度的突然的视觉可感知变化。可替代地,根据实施例,基于嵌入在元数据中的指定的指令,可增加商业广告内容314的某一部分的亮度的动态范围来转变商业广告314的该部分以使其看起来更具有视觉冲击力并且对用户310更具有吸引力。例如,相比于商业广告内容314的原始画面亮度部分,可以将商业广告内容314的某一部分的平均画面亮度增加指定或确定的百分比值,例如5%、10%或20%(按照指定的指令)。
图4描述了示出根据本公开的实施例的用于视频内容处理以用于显示控制的示例性方法的流程图。参照图4,示出了流程图400。结合图1、图2和图3描述流程图400。方法在402处开始并且进行至404。
在404处,从视频源108可以接收视频内容项目的图像帧序列。图3中示出和描述了诸如可以作为HDR内容的电影内容308的视频内容项目的示例。在406处,在与电子设备102相关联的显示屏210上可播放接收到的图像帧序列。图3中示出了诸如帧308a至308f以及帧314a至314n的图像帧序列的示例。
在408处,可以确定诸如不连续性标记和/或标记值的标记是否存在于视频内容项目的接收到的图像帧序列中。在标记值不存在的情况下,控制可以传递至430(图4B)。在标记和/或标记值存在的情况下,控制可以传递至410,如图所示。图3中示出和描述了诸如不连续性标记312和316的标记值的示例。
在410处,基于检测到的标记和/或检测到的标记值,可以检测从一个或多个帧到一个或多个其他帧的转换。一个或多个帧可对应于第一类型的视频片段,诸如TV节目。图3中示出了第一类型的视频片段的示例,诸如电影内容308。一个或多个其他帧可对应于第二类型的视频片段,诸如TV广告。图3中示出和描述了第二类型的视频片段的示例,诸如商业广告内容314。
在412处,可以确定第一元数据是否与一个或多个帧相关联。在第一元数据不存在的情况下,控制可以传递至414。在第一元数据存在的情况下,控制可以传递至416。在414处,视频转换控制器206可被配置为基于一个或多个帧的空间图像信息来确定一个或多个帧的第一视觉属性。在416处,视频转换控制器206可被配置为基于与一个或多个帧中的每一个相关联的第一元数据来确定一个或多个帧的第一视觉属性。例如,如图3中所示出和描述的,视频转换控制器206可被配置为基于与帧308c相关联的元数据来确定帧308c的亮度属性。
在418处,可以确定第二元数据是否与一个或多个其他帧相关联。在第二元数据不存在的情况下,控制可以传递至420。在第二元数据存在的情况下,控制可以传递至422。在420处,视频转换控制器206可被配置为基于一个或多个其他帧的空间图像信息来确定一个或多个其他帧的第二视觉属性。在422处,视频转换控制器206可被配置为基于与帧314a至314d中的每一个相关联的第二元数据来确定诸如帧314a至314d(如图3所示)的一个或多个其他帧的第二视觉属性。
在424处,可以控制诸如帧314a至314d的一个或多个其他帧的确定的第二视觉属性。可根据诸如帧308c的一个或多个帧的确定第一视觉属性进行控制以实现平滑转换。在426处,在与电子设备102相关联的显示屏210上可以根据一个或多个其他帧的第二视觉属性显示该一个或多个其他帧。该一个或多个其他帧可以被显示为具有修改的第二视觉属性,使得该视觉属性与确定的第一视觉属性的视觉属性相似。在观看视频内容项目的同时可以可视化并且体验从诸如帧308c的一个或多个帧到诸如帧314a至314n的一个或多个其他帧的平滑转换。
在428处,可以动态地终止对一个或多个其他帧的确定的第二视觉属性的控制。该终止可发生在确定的第二视觉属性在一个或多个其他帧的两个连续的图像帧之间的差别小于阈值的情况下。控制可以传递至430。
根据本公开的实施例,公开了用于显示控制的视频处理设备。该设备(诸如电子设备102(图1))可包括一个或多个电路(诸如图2的处理器202、视频转换控制器206、收发机212和/或其他组件)。视频转换控制器206可被配置为从接收自视频源108的图像帧序列中,检测从与第一元数据相关联的一个或多个帧到与第二元数据相关联的一个或多个其他帧的转换。视频转换控制器206可被配置为基于第一元数据来确定该一个或多个帧的第一视觉属性。视频转换控制器206可被配置为基于第二元数据来确定该一个或多个其他帧的第二视觉属性。视频转换控制器206可被配置为根据该一个或多个帧的确定的第一视觉属性来控制该一个或多个其他帧的确定的第二视觉属性以实现平滑转换。
显示控制的传统手段可能不适用于HDR视频内容项目的不同图像帧之间的平滑转换。由于在HDR兼容HDTV上播放的HDR视频内容可提供具有更佳画面细节的更宽范围的亮度和暗度,因此从诸如TV节目的主要视频内容到诸如商业广告内容314的插播式内容项目的变化可能更明显,并且视觉上可能不令观看者满意。进一步地,对于诸如HDR或HLG的某些视频模式,快速控制与主要视频内容可能不同步或不相关的插播式内容项目的视觉外观的难度可能增加。因此,提供了视频转换控制器206以从接收自视频源108的图像帧序列中,检测从与第一元数据相关联的一个或多个帧(诸如TV节目的一个或多个帧)到与第二元数据相关联的一个或多个其他帧(诸如广告的一个或多个帧)的转换。由视频转换控制器206进行对视频流中的任何不连续性标记和元数据的这种检测和分析可以在广告在诸如TV的电子设备102上被实际播放之前,提前检测是否可以调节广告的亮度或暗度的动态范围。视频转换控制器206可被配置为根据诸如TV节目的一个或多个帧的主要HDR或HLG内容的一个或多个帧的视觉属性,以有效的方式控制广告的指定数目的帧的视觉属性。由电子设备102的视频转换控制器206基于转换的检测进行的对视觉属性的控制改进了诸如TV的电子设备102本身的功能,以提供增强的收看体验。通过在保留帧中的艺术意图的同时实现不同类型的视频片段之间的平滑转换,电子设备102的视频转换控制器206提供了在视频处理和显示控制技术中的改进。进一步地,由电子设备102的视频转换控制器206基于对转换的检测进行的对视觉属性的控制使得插播式内容项目的视觉外观与诸如TV节目的主要视频内容同步。因此,基于视频转换控制器206的操作,甚至对于HDR或标准动态范围(SDR)视频格式,从主要视频内容到插播式内容项目的变化对观看者来说都可以不是视觉上不满意的。
本公开的各个实施例可提供其上存储有可由诸如电子设备102的机器和/或计算机执行的机器代码和/或一组指令的非暂态计算机可读介质和/或存储介质,和/或非暂态机器可读介质和/或存储介质。电子设备102中的该组指令可使得机器和/或计算机执行操作,该操作包括从接收自视频源的图像帧序列中检测从与第一元数据相关联的一个或多个帧到与第二元数据相关联的一个或多个其他帧的转换。基于第一元数据可确定一个或多个帧的第一视觉属性。基于第二元数据可确定一个或多个其他帧的第二视觉属性。根据一个或多个帧的确定的第一视觉属性可以控制一个或多个其他帧的确定的第二视觉属性以实现平滑转换。操作在执行时可增强电子设备102或计算机本身的功能。
本公开可以在硬件中或者硬件和软件的组合中实现。本公开可以在至少一个计算机系统中以集中方式实现,或以分布方式实现,其中不同元件可分散在若干互联的计算机系统中。适于实行本文所述方法的计算机系统或其他装置可能是适合的。硬件和软件的组合可以是具有计算机程序的通用计算机系统,计算机程序当加载和执行时可以控制计算机系统使得该计算机系统实行本文所述方法。本公开可以在包括也可执行其它功能的集成电路的一部分的硬件中实现。
本公开也可以嵌入在计算机程序产品中,所述计算机程序产品包括实现本文所述的方法的实施的所有特征,并且当所述计算机程序产品被加载在计算机系统中时能够实行这些方法。本上下文中的计算机程序意味着旨在使得系统具有信息处理能力以直接地或在以下的一项或两项之后执行特定功能的任何语言、代码或符号的任何表达式:a)变换为另一种语言、代码或符号;b)以不同的材料形式复制。
虽然参照特定实施例已经描述了本公开,应当理解对于本领域技术人员,在不脱离本公开的范围的情况下,可以做出各种变化并且可以替换等同物。此外,在不脱离本公开的范围的情况下,可以做出许多修改以使特定的情况或材料适于本公开的教导。因此,本公开旨在不将本公开局限于所公开的具体实施例,而是本公开将包括落入所附权利要求的范围内的所有实施例。

Claims (20)

1.一种视频处理设备,包括:
一个或多个电路,被配置为:
从接收自视频源的图像帧序列中,检测从与第一元数据相关联的一个或多个帧到与第二元数据相关联的一个或多个其他帧的转换;
基于所述第一元数据,确定所述一个或多个帧的第一视觉属性;
基于所述第二元数据,确定所述一个或多个其他帧的第二视觉属性;以及
根据所述一个或多个帧的所述确定的第一视觉属性,控制所述一个或多个其他帧的所述确定的第二视觉属性,以实现平滑转换。
2.根据权利要求1所述的视频处理设备,其中所述图像帧序列包括对应于所述一个或多个帧的第一类型的视频片段以及对应于所述一个或多个其它帧的第二类型的视频片段。
3.根据权利要求2所述的视频处理设备,其中所述第一类型的视频片段和所述第二类型的视频片段是高动态范围(HDR)视频。
4.根据权利要求2所述的视频处理设备,其中所述第一类型的视频片段对应于电视节目、来自基于互联网的视频流应用的视频项目和/或来自预订服务的视频项目中的至少一个。
5.根据权利要求2所述的视频处理设备,其中所述第二类型的视频片段对应于插播式内容、商业广告、预告片和/或作为收视吸引力的视频内容的片段中的至少一个。
6.根据权利要求1所述的视频处理设备,其中所述第一视觉属性和所述第二视觉属性对应于亮度属性。
7.根据权利要求1所述的视频处理设备,其中所述第一元数据和所述第二元数据包括平均画面亮度信息、最大画面亮度信息和/或色度信息中的至少一个。
8.根据权利要求1所述的视频处理设备,其中所述一个或多个电路被进一步配置为在从所述视频源接收到的所述图像帧序列中检测标记值以用于所述转换的检测,其中所述标记值表示在所述图像帧序列中的所述一个或多个帧与所述一个或多个其他帧之间的不连续性。
9.根据权利要求8所述的视频处理设备,其中所述一个或多个电路被进一步配置为将所述检测到的标记值和空间图像信息用于所述第一视觉属性和所述第二视觉属性的所述确定。
10.根据权利要求1所述的视频处理设备,其中所述一个或多个电路被进一步配置为在所述确定的第二视觉属性在所述一个或多个其他帧中的两个连续的图像帧之间的差别小于指定的阈值的情况下,动态地终止对所述一个或多个其他帧的所述确定的第二视觉属性的所述控制。
11.一种用于显示控制的视频处理方法,所述方法包括:
通过一个或多个电路,从接收自视频源的图像帧序列中检测从与第一元数据相关联的一个或多个帧到与第二元数据相关联的一个或多个其他帧的转换;
通过所述一个或多个电路,基于所述第一元数据确定所述一个或多个帧的第一视觉属性;
通过所述一个或多个电路,基于所述第二元数据确定所述一个或多个其他帧的第二视觉属性;以及
通过所述一个或多个电路,根据所述一个或多个帧的所述确定的第一视觉属性,控制所述一个或多个其他帧的所述确定的第二视觉属性,以实现平滑转换。
12.根据权利要求11所述的方法,其中所述图像帧序列包括对应于所述一个或多个帧的第一类型的视频片段以及对应于所述一个或多个其它帧的第二类型的视频片段。
13.根据权利要求12所述的方法,其中所述第一类型的视频片段和所述第二类型的视频片段是高动态范围(HDR)视频。
14.根据权利要求12所述的方法,其中所述第一类型的视频片段对应于电视节目、来自基于互联网的视频流应用的视频项目和/或来自预订服务的视频项目中的至少一个。
15.根据权利要求12所述的方法,其中所述第二类型的视频片段对应于插播式内容、商业广告、预告片和/或作为收视吸引力的视频内容的片段中的至少一个。
16.根据权利要求11所述的方法,其中所述第一视觉属性和所述第二视觉属性对应于亮度属性。
17.根据权利要求11所述的方法,其中所述第一元数据和所述第二元数据包括平均画面亮度信息、最大画面亮度信息和/或色度信息中的至少一个。
18.根据权利要求11所述的方法,进一步包括通过所述一个或多个电路,在从所述视频源接收到的所述图像帧序列中检测标记值以用于所述转换的检测,其中所述标记值表示在所述图像帧序列中的所述一个或多个帧与所述一个或多个其他帧之间的不连续性。
19.根据权利要求18所述的方法,进一步包括通过所述一个或多个电路,将所述检测到的标记值和空间图像信息用于所述第一视觉属性和所述第二视觉属性的所述确定。
20.根据权利要求11所述的方法,进一步包括通过所述一个或多个电路,在所述确定的第二视觉属性在所述一个或多个其他帧中的两个连续的图像帧之间的差别小于指定的阈值的情况下,动态地终止对所述一个或多个其他帧的所述确定的第二视觉属性的所述控制。
CN201710902186.3A 2016-10-07 2017-09-29 用于处理视频内容以用于显示控制的设备和方法 Active CN107920185B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/288,450 2016-10-07
US15/288,450 US11183147B2 (en) 2016-10-07 2016-10-07 Device and method for processing video content for display control

Publications (2)

Publication Number Publication Date
CN107920185A true CN107920185A (zh) 2018-04-17
CN107920185B CN107920185B (zh) 2020-11-03

Family

ID=60185974

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710902186.3A Active CN107920185B (zh) 2016-10-07 2017-09-29 用于处理视频内容以用于显示控制的设备和方法

Country Status (4)

Country Link
US (1) US11183147B2 (zh)
EP (1) EP3306940B1 (zh)
JP (1) JP6674150B2 (zh)
CN (1) CN107920185B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113542851A (zh) * 2021-07-09 2021-10-22 Vidaa美国公司 一种菜单刷新方法及显示设备
WO2022127228A1 (zh) * 2020-12-17 2022-06-23 海信视像科技股份有限公司 广播接收设备、服务器设备、信息记录播放设备及显示系统

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10681430B2 (en) * 2004-12-13 2020-06-09 Kuo-Ching Chiang Smart TV with cloud service
US10805253B2 (en) * 2016-12-30 2020-10-13 Facebook, Inc. Systems and methods to transition between media content items
US10645199B2 (en) * 2018-01-22 2020-05-05 Lattice Semiconductor Corporation Multimedia communication bridge
CN109637425A (zh) * 2019-01-29 2019-04-16 惠科股份有限公司 一种驱动方法、驱动模块和显示装置
KR102666909B1 (ko) * 2019-06-19 2024-05-20 삼성전자주식회사 디스플레이장치 및 그 제어방법
US11416208B2 (en) * 2019-09-23 2022-08-16 Netflix, Inc. Audio metadata smoothing
CA3174009A1 (en) * 2020-03-31 2021-10-07 Arris Enterprises Llc Advertisement preparation systems
US11317137B2 (en) * 2020-06-18 2022-04-26 Disney Enterprises, Inc. Supplementing entertainment content with ambient lighting
US20240056617A1 (en) * 2022-08-12 2024-02-15 Sony Group Corporation Signaling changes in aspect ratio of media content

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101021625A (zh) * 2006-02-16 2007-08-22 帆宣系统科技股份有限公司 Lcd亮度自动调整方法
CN101170708A (zh) * 2006-10-25 2008-04-30 三星电子株式会社 改进图像闪烁的显示装置和方法
US20150256860A1 (en) * 2014-03-05 2015-09-10 Dolby Laboratories Licensing Corporation Graphics Blending for High Dynamic Range Video
CN105744118A (zh) * 2016-02-01 2016-07-06 杭州当虹科技有限公司 一种基于视频帧自适应的视频增强方法及应用其的视频增强系统
JP2016149802A (ja) * 2016-04-20 2016-08-18 トムソン ライセンシングThomson Licensing ビデオストリームの配信に使用する間隔ベースの広告挿入
US20160249009A1 (en) * 2011-10-20 2016-08-25 Dolby Laboratories Licensing Corporation Method and system for video equalization

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI242376B (en) * 2004-06-24 2005-10-21 Via Tech Inc Method and related system for detecting advertising by integrating results based on different detecting rules
JP2008522532A (ja) 2004-12-01 2008-06-26 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ コマーシャルのカスタマイズ化
TWI466093B (zh) * 2007-06-26 2014-12-21 Apple Inc 用於視訊播放的管理技術
WO2009157903A1 (en) 2008-06-26 2009-12-30 Thomson Licensing Interval based ad insertion used for the delivery of video streams
RU2616158C2 (ru) 2011-04-28 2017-04-12 Конинклейке Филипс Н.В. Устройства и способы для кодирования и декодирования hdr-изображений
US8988552B2 (en) 2011-09-26 2015-03-24 Dolby Laboratories Licensing Corporation Image formats and related methods and apparatuses
US10055866B2 (en) 2013-02-21 2018-08-21 Dolby Laboratories Licensing Corporation Systems and methods for appearance mapping for compositing overlay graphics
EP2959676B1 (en) 2013-02-21 2020-09-23 Dolby Laboratories Licensing Corporation Systems and methods for appearance mapping for compositing overlay graphics
JP6419807B2 (ja) 2013-07-19 2018-11-07 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. Hdrメタデータ転送
US9584786B2 (en) 2014-03-05 2017-02-28 Dolby Laboratories Licensing Corporation Graphics blending for high dynamic range video
JP6421504B2 (ja) 2014-07-28 2018-11-14 ソニー株式会社 画像処理装置及び画像処理方法
US9369780B2 (en) * 2014-07-31 2016-06-14 Verizon Patent And Licensing Inc. Methods and systems for detecting one or more advertisement breaks in a media content stream
WO2016129891A1 (ko) 2015-02-11 2016-08-18 엘지전자 주식회사 방송 신호 송수신 방법 및 장치
US20180070083A1 (en) 2015-03-24 2018-03-08 Sony Corporation Transmission device, transmission method, reception device, and reception method
JP6666022B2 (ja) * 2015-06-04 2020-03-13 キヤノン株式会社 画像表示装置、画像出力装置、及び、それらの制御方法
WO2017086950A1 (en) * 2015-11-18 2017-05-26 Technicolor Usa, Inc. Luminance management for high dynamic range displays
US10297191B2 (en) * 2016-01-29 2019-05-21 Samsung Display Co., Ltd. Dynamic net power control for OLED and local dimming LCD displays
CN106657714B (zh) 2016-12-30 2020-05-15 杭州当虹科技股份有限公司 一种提升高动态范围视频观看体验的方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101021625A (zh) * 2006-02-16 2007-08-22 帆宣系统科技股份有限公司 Lcd亮度自动调整方法
CN101170708A (zh) * 2006-10-25 2008-04-30 三星电子株式会社 改进图像闪烁的显示装置和方法
US20160249009A1 (en) * 2011-10-20 2016-08-25 Dolby Laboratories Licensing Corporation Method and system for video equalization
US20150256860A1 (en) * 2014-03-05 2015-09-10 Dolby Laboratories Licensing Corporation Graphics Blending for High Dynamic Range Video
CN105744118A (zh) * 2016-02-01 2016-07-06 杭州当虹科技有限公司 一种基于视频帧自适应的视频增强方法及应用其的视频增强系统
JP2016149802A (ja) * 2016-04-20 2016-08-18 トムソン ライセンシングThomson Licensing ビデオストリームの配信に使用する間隔ベースの広告挿入

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022127228A1 (zh) * 2020-12-17 2022-06-23 海信视像科技股份有限公司 广播接收设备、服务器设备、信息记录播放设备及显示系统
CN113542851A (zh) * 2021-07-09 2021-10-22 Vidaa美国公司 一种菜单刷新方法及显示设备
CN113542851B (zh) * 2021-07-09 2023-05-09 Vidaa美国公司 一种菜单刷新方法及显示设备

Also Published As

Publication number Publication date
CN107920185B (zh) 2020-11-03
EP3306940A1 (en) 2018-04-11
JP2018061255A (ja) 2018-04-12
US20180102106A1 (en) 2018-04-12
US11183147B2 (en) 2021-11-23
JP6674150B2 (ja) 2020-04-01
EP3306940B1 (en) 2022-06-15

Similar Documents

Publication Publication Date Title
CN107920185A (zh) 用于处理视频内容以用于显示控制的设备和方法
US11949891B2 (en) Systems and methods for region-of-interest tone remapping
US10956766B2 (en) Bit depth remapping based on viewing parameters
US11245939B2 (en) Generating and transmitting metadata for virtual reality
CN110460745B (zh) 显示装置
US11128915B2 (en) Fingerprint layouts for content fingerprinting
US11032579B2 (en) Method and a device for encoding a high dynamic range picture, corresponding decoding method and decoding device
CN105379258A (zh) 在数字广播系统中发送和接收用于表达高质量色彩的超高清晰度广播信号的方法和设备
US9894314B2 (en) Encoding, distributing and displaying video data containing customized video content versions
US11122245B2 (en) Display apparatus, method for controlling the same and image providing apparatus
US10504263B2 (en) Adaptive high dynamic range (HDR) tone mapping with overlay indication
CN108494863A (zh) 信息推送方法、系统、云服务器及可读存储介质
CN105430429A (zh) 一种媒体数据的优化方法和装置
US20200107084A1 (en) Method and device for playback optimization
US11151747B2 (en) Creating video augmented reality using set-top box
CN105979370B (zh) 一种配置图像模式的方法及装置
US20170161875A1 (en) Video resolution method and apparatus
US20190014385A1 (en) Content processing device, television reception device, method of processing information in content processing device, and program
US9641883B2 (en) System and method for providing integrated advertising in a television distribution network
US9106885B2 (en) Recording/reproduction device, recording/reproduction method, television receiver, program, and recording medium
JP2016086248A (ja) 画像処理装置およびその画像処理方法
KR20160081349A (ko) 디스플레이 제어 방법 및 미디어 재생 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant