CN110867172A - 动态控制标准动态范围和高动态范围内容的电子设备 - Google Patents

动态控制标准动态范围和高动态范围内容的电子设备 Download PDF

Info

Publication number
CN110867172A
CN110867172A CN201911134736.7A CN201911134736A CN110867172A CN 110867172 A CN110867172 A CN 110867172A CN 201911134736 A CN201911134736 A CN 201911134736A CN 110867172 A CN110867172 A CN 110867172A
Authority
CN
China
Prior art keywords
content
dynamic range
display
point
tone mapping
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911134736.7A
Other languages
English (en)
Other versions
CN110867172B (zh
Inventor
T·R·巴尔
吴佳颖
N·P·邦尼尔
R·萨马达尼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Priority to CN201911134736.7A priority Critical patent/CN110867172B/zh
Priority to US16/705,025 priority patent/US10963998B1/en
Publication of CN110867172A publication Critical patent/CN110867172A/zh
Application granted granted Critical
Publication of CN110867172B publication Critical patent/CN110867172B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/90—Dynamic range modification of images or parts thereof
    • G06T5/94—Dynamic range modification of images or parts thereof based on local image properties, e.g. for local contrast enhancement
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/90—Dynamic range modification of images or parts thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10—Intensity circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20172—Image enhancement details
    • G06T2207/20208—High dynamic range [HDR] image processing
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0271—Adjustment of the gradation levels within the range of the gradation scale, e.g. by redistribution or clipping
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/04—Maintaining the quality of display appearance
    • G09G2320/041—Temperature compensation
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0673—Adjustment of display parameters for control of gamma adjustment, e.g. selecting another gamma curve
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/14—Detecting light within display terminals, e.g. using a single or a plurality of photosensors
    • G09G2360/144—Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light being ambient light
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Marketing (AREA)
  • Business, Economics & Management (AREA)
  • Databases & Information Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Optics & Photonics (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本公开涉及对标准动态范围和高动态范围内容进行动态控制的电子设备。该电子设备可设置有显示器。标准动态范围内容和高动态范围内容可由在控制电路上操作的内容生成器来产生。可同时显示标准动态范围内容和高动态范围内容。色调映射参数可由色调映射引擎产生，以用于显示标准动态范围内容和高动态范围内容。可以基于诸如环境光水平、用户亮度设置、内容统计信息、显示特性、注视点信息、功率消耗信息以及每个窗口信息之类的因素来选择色调映射参数。可选择色调映射参数以适应标准动态范围内容和高动态范围内容的同时显示。可响应于在标准动态范围内容和高动态范围内容之间的用户注视点切换来暂时修改色调映射参数。

Description

动态控制标准动态范围和高动态范围内容的电子设备
背景技术
本发明整体涉及电子设备，并且更具体地涉及具有显示器的电子设备。
电子设备通常包括显示器。如果不小心，长时间显示明亮的内容可能损坏显示器，显示器可使用消耗过大功率的亮度水平来操作，在调节显示器亮度时可能不考虑用户偏好，并且所显示的内容可显示可见的伪影。在显示具有令人愉悦外观的内容的同时解决这些问题是具有挑战性的。
发明内容
电子设备可设置有显示器。电子设备上的内容生成器可提供要在显示器上显示的内容。电子设备中的控制电路可用于实现色调映射引擎。色调映射引擎可选择将内容从内容生成器显示在显示器上使用的内容亮度到显示器亮度映射。内容亮度到显示器亮度映射可通过色调映射参数来表征，诸如黑电平(level)、参考白电平、镜面(specular)白电平、肤色电平、以及该映射的斜率或γ。
标准动态范围内容和高动态范围内容可由运行在控制电路上的标准动态范围内容生成器和高动态范围内容生成器来生成。在一些情况下，同时显示标准动态范围内容和高动态范围内容。色调映射引擎可选择用于显示标准动态范围内容和高动态范围内容的色调映射(内容亮度到显示器亮度映射) 和相关联的色调映射参数。可以基于诸如环境光水平、用户亮度设置、内容统计信息、显示特性、注视点信息、电源和消耗信息以及每个窗口信息之类的因素来选择色调映射参数。
注视点信息可使用注视追踪器采集。另外的注视点信息可包括关于显示器上的激活(active)窗口的信息和关于光标在显示器上的位置的信息。注视点信息可用于确定观看者正在查看高动态范围内容还是标准动态范围内容。
为了考虑高动态范围内容和标准动态范围内容之间的亮度差，可动态调节色调映射参数以适应高动态范围内容和标准动态范围内容之间的观看者的注视点切换。在一个示例中，诸如最大显示器亮度的色调映射参数可初始增大(或减小)，然后逐渐返回到其初始大小。
附图说明
图1是根据实施方案的具有显示器的例示性电子设备的示意图。
图2是示出根据一个实施方案的通过多种用户亮度设置可如何将内容亮度映射至显示器亮度的曲线图。
图3是示出根据一个实施方案的如何将内容亮度至显示器亮度关系通过黑电平、参考白电平和镜面白电平来表征的曲线图。
图4是示出根据一个实施方案的线性内容亮度至显示器亮度关系可如何用于标准动态范围内容的曲线图。
图5是示出根据一个实施方案的高动态范围内容可如何具有比标准动态范围内容更高的最大显示器亮度的曲线图。
图6A-6C是示出根据一个实施方案的可如何显示仅标准动态范围内容、仅高动态范围内容、或标准动态范围内容和高动态范围内容两者的示例性显示器的顶视图。
图7是示出根据一个实施方案的色调映射引擎可如何用于实现内容亮度至显示器亮度映射的图示。
图8是根据一个实施方案的具有高动态范围内容和标准动态范围内容的多个窗口的示例性显示器的顶视图。
图9是根据一个实施方案的与响应于标准动态范围内容和高动态范围内容之间的注视点切换而显示内容相关联的示例性操作的流程图。
图10-13是根据一个实施方案的与响应于标准动态范围内容和高动态范围内容之间的注视点切换而随时间变化的色调映射参数的例示性响应的曲线图。
具体实施方式
图1中示出了可设置有显示器的类型的例示性电子设备。如图1所示，电子设备10可以具有控制电路12。控制电路12可以包括用于支持设备10 的操作的存储和处理电路。存储和处理电路可以包括存储装置，诸如硬盘驱动器存储装置、非易失性存储器(例如，被配置为形成固态驱动器的闪存存储器或其他电可编程只读存储器)、易失性存储器(例如，静态或动态随机存取存储器)、等等。控制电路16中的处理电路可以被用于控制设备10的操作。处理电路可基于一个或多个微处理器、微控制器、数字信号处理器、基带处理器、功率管理单元、音频芯片、专用集成电路、图形处理单元、显示驱动器电路诸如定时控制器集成电路和其他显示驱动器集成电路、以及其他控制电路。
控制电路12被配置为执行用于在设备10中实现所需的控制和通信特征的指令。例如，控制电路12可用于确定要用于显示用户的内容的像素亮度水平。像素亮度水平可基于例如环境光条件、用户调节的显示器亮度设置、与正在显示的内容相关联的统计信息、显示特性、关于观看者的视向(例如，来自注视追踪系统)的信息等。控制电路12可被配置为使用硬件(例如，专用硬件诸如集成电路和薄膜电路)和/或软件(例如，在控制电路12上运行的代码)执行这些操作。用于执行针对设备10的控制和通信操作的软件代码可存储在非暂态计算机可读存储介质上(例如，有形计算机可读存储介质)。该软件代码可有时被称为软件、数据、程序指令、指令、或代码。该非暂态计算机可读存储介质可包括非易失性存储器诸如非易失性随机存取存储器(NVRAM)、一个或多个硬盘驱动器(例如，磁盘驱动器或固态驱动器)、一个或多个可移动闪存驱动器或、其他可移动介质、其他计算机可读介质、或这些计算机可读介质或其他存储装置的组合。存储在非暂态计算机可读存储介质上的软件可在设备10的操作期间在控制电路12的处理电路上执行。
设备10中的输入输出电路16可用于允许从用户或外部设备向设备10 提供数据，可用于收集环境数据，并且可用于向外部设备提供数据和向用户输出。输入输出电路16可包括输入输出设备30，诸如按钮、操纵杆、滚轮、触摸板、小键盘、键盘、麦克风、扬声器、色调生成器、振动器、相机、传感器、发光二极管和其他状态指示器、触敏显示器(例如，在显示器中重叠像素阵列的触摸传感器)、数据端口等。如图1所示，输入输出电路16可包括用于收集环境光测量结果(例如，环境光水平，诸如环境光亮度测量结果和/或环境光颜色测量结果诸如色温测量结果和/或颜色坐标测量结果)的颜色环境光传感器或其他环境光传感器32。输入输出电路16还可包括温度传感器电路，诸如一个或多个温度传感器。温度传感器诸如温度传感器34 可用于收集关于设备10和与设备10相关联的一个或多个显示器的操作温度的实时信息。
输入输出电路16还可包括注视追踪器诸如注视追踪器35(有时被称为注视追踪系统或注视追踪相机)。注视追踪器35可包括相机和/或其他注视追踪系统部件(例如，发射光束的光源，使得可检测来自用户眼睛的光束的反射)以监测用户的眼睛。一个或多个注视追踪器35可面向用户的眼睛并且可追踪用户的注视。注视追踪系统中的相机可确定用户眼睛的位置(例如，用户的瞳孔的中心)，可确定其中用户的眼睛的取向方向(用户的注视方向)，可确定用户的瞳孔尺寸(例如，使得光调制和/或其他光学参数、和/或用来在空间上调节这些参数中的一个或多个的循序量、和/或在其中基于瞳孔尺寸来调节这些光学参数中的一个或多个的区域)，可用于监测镜头在用户眼睛中的当前焦距(例如，用户是聚焦于近场还是远场，这可用于评估用户是在做白日梦还是在战略性或策略性地思考)、和/或可用于确定其他注视信息。注视追踪系统中的相机有时可被称为注视检测相机、眼睛追踪相机、注视追踪相机或眼睛监测相机。如果需要，还可使用其他类型的图像传感器(例如，红外和/或可见光发光二极管和光检测器等)来监测用户的注视。注视追踪器 35中的注视检测相机的使用仅仅是例示性的。注视追踪器35可最终确定用户的注视点(有时称为视向、查看区域、焦点等)。
可使用一个或多个电源诸如电源18将电力提供至设备10中的控制电路12和其他资源。电源18可为交流(AC)源，诸如壁出口(主电源)和/或直流 (DC)源诸如电池。在操作期间，控制电路12可检测电力是从AC源还是DC 源接收的，并且可监测电池的充电状态。
设备10可包括一个或多个内部显示器和/或一个或多个外部显示器，诸如例示性显示器14。显示器14可与设备10一起安装在公共外壳中(例如，当设备10是移动设备诸如蜂窝电话、手表设备、平板电脑或膝上型计算机时，或者当设备10是一体化设备诸如电视机或台式计算机时)。在其他配置中，显示器14可以无线方式或通过缆线耦接到设备10(例如，当设备10 是台式计算机或机顶盒时)。
一般来讲，设备10可以是任何适当类型的设备。设备10可例如为计算设备、膝上型计算机、包含嵌入式计算机的计算机监视器、平板电脑、蜂窝电话、媒体播放器、或其他手持式或便携式电子设备、较小的设备(诸如腕表设备)、挂式设备、耳机或听筒设备、被嵌入在眼镜中的设备或者佩戴在用户的头部上的其他设备，或其他可佩戴式或微型设备、电视机、不包含嵌入式计算机的计算机显示器、游戏设备、虚拟现实设备、增强现实设备、导航设备、嵌入式系统(诸如其中具有显示器的电子设备被安装在信息亭或汽车中的系统)、实现这些设备的功能中的两种或更多种功能的设备、或其他电子设备。设备10(例如，便携式设备)可暴露于多种环境条件。例如，环境光水平并因此显示眩光可随着便携式设备在室内和室外环境之间移动(例如)而变化。
电子设备10可具有外壳。有时可被称为壳体或箱体的外壳可由塑料、玻璃、陶瓷、纤维复合材料、金属(例如，不锈钢、铝等)、其他合适的材料或这些材料中的任意两种或更多种的组合形成。外壳可以利用一体式构型形成，在所述一体式构型中，外壳的一部分或全部被机加工或模制成单个结构，或者可以利用多个结构(例如，内部框架结构、形成外部外壳表面的一个或多个结构等)形成。在膝上型计算机和其他可折叠设备中，外壳的第一部分可相对于外壳的第二部分旋转(例如，膝上型计算机中的显示器外壳可围绕铰链轴线相对于膝上型计算机中的基座外壳旋转)。
显示器14可被安装在外壳中。显示器14可具有矩形轮廓并且被四个周边边缘围绕，可具有圆形或椭圆形的形状，或可具有其他合适的轮廓。显示器14可为并入导电电容性触摸传感器电极层或其他触摸传感器部件(例如，电阻性触摸传感器部件、声学触摸传感器部件、基于力的触摸传感器部件、基于光的触摸传感器部件等)的触摸屏显示器或者可为非触敏的显示器。电容触摸屏电极可由氧化铟锡焊盘或者其他透明导电结构的阵列形成。
显示器14可具有用于为用户显示图像的像素36的阵列28(例如，视频、图形、文本等)。显示驱动器电路26(例如，显示器14上的薄膜晶体管电路和/或一个或多个定时控制器集成电路和/或其他显示驱动器集成电路)可用于在像素阵列28上显示图像。像素阵列28可包括例如数百或数千行以及数百或数千列像素36。为了显示彩色图像，每个像素36可包括不同颜色的子像素。例如，每个像素36可包括红色、绿色和蓝色子像素或不同颜色的子像素。通过改变像素中每个子像素发射的光的相对强度，可调节像素输出颜色。可通过修改与每个子像素相关联的增益来调节每个像素的色偏(白点)。
显示器14的像素阵列可由液晶显示器(LCD)部件、电泳显示器像素阵列、等离子显示器像素阵列、有机发光二极管像素或其他发光二极管阵列、电润湿显示器像素阵列、或基于其他显示器技术的像素形成。显示器14可用局部可调谐发光二极管阵列或其他合适的背光结构进行背光照明。显示器 14可显示具有标准动态范围的图像(例如，在其最亮和最黑的像素亮度值之间表现出约1,000：1的对比度的图像)和/或可显示具有高动态范围的图像(例如，在其最亮和最黑的亮度值之间表现出约20,000：1或更大的对比度的图像)。又如，标准动态范围内容可具有小于10,000:1、小于20,000:1等的对比度。高动态范围内容可具有大于20,000:1、大于25,000:1等的对比度。
在操作期间，设备10中的内容生成器(例如，在控制电路12上运行的操作系统功能和/或应用程序)可生成用于在显示器14的像素阵列上显示的内容。例如，电子设备10可包括一个或多个标准动态范围(SDR)内容生成器和/或更高动态范围(HDR)内容生成器(例如，根据一个或多个不同的高动态范围标准(诸如HDR10媒体配置文件标准，有时称为HDR10和混合对数伽马标准，有时称为HLG)生成高动态范围内容的内容生成器)。亮度值映射引擎诸如色调映射引擎24可用于向内容生成器提供指示内容生成器应如何将内容亮度值映射至显示器亮度值的色调映射参数(有时称为亮度值映射参数)，以及/或者可用于对来自内容生成器的内容亮度值直接执行内容亮度至显示器亮度映射操作。例如，色调映射引擎24可向内容生成器提供色调映射参数(诸如黑电平、参考白电平、镜面白电平、肤色电平、和/或γ和/ 或斜率值)以用于产生用于显示具有像素36的图像的显示器亮度值。色调映射引擎24可使用在图1的控制电路12、设备10的控制电路诸如显示驱动器电路26、和/或其它控制电路上运行的代码来实现和/或可使用设备10中的控制电路的硬连线特征结构。
标准动态范围内容通常以灰度级(例如，0-255位)编码，其中0对应于深黑，而255对应于亮白。高动态范围内容可以每个像素的亮度水平编码 (通常针对标准观看条件诸如暗的观看条件来显示)或者可以具有高位深度的灰度级编码。设备10可经历环境照明条件的变化，用户亮度设置可由用户向上和向下调节，显示在显示器14上的内容可表现出变化诸如平均像素亮度的变化，并且老化风险以及显示器10上的内容呈现相关的其他条件可随时间推移而变化。另外，用户的注视点可在标准动态范围内容和高动态范围内容之间切换。设备10可使用色调映射引擎24来确保根据这些潜在变化的条件和诸如显示器14的特性的其他标准来适当呈现内容以用于在显示器 14上显示。
图2为示出如何将内容亮度映射至显示器亮度的曲线图。在图2的示例中，用户正在三个不同水平(分别为暗、中和亮显示器亮度设置)之间调节显示器14的显示器亮度设置。用户可通过调节触摸屏显示器滑块(例如，显示器14上显示的滑块)或使用电路16中的按钮或其他输入输出设备来向设备10提供期望的亮度设置(用户选择的亮度水平)。当选择暗亮度设置水平时，显示器14根据曲线38显示内容。当选择中亮度设置水平时，显示器14根据曲线40显示内容。响应于对高亮度设置的选择，显示器14的输出跟随曲线42。
在这些曲线中的每一个中，低内容亮度值与黑色相关联，高内容亮度值与白色相关联。在给定的黑色内容亮度水平下，曲线38与针对内容亮度值 CL1的用户可见的显示器像素亮度值DL1相关联，曲线40与针对内容亮度 CL1的显示器像素亮度值DL2相关联，并且曲线42与针对内容亮度CL1的显示器像素亮度值DL3相关联。亮度水平DL2比亮度水平DL1更亮，因为与曲线38相比，曲线40与来自像素36的一组更明亮的输出亮度相关联。类似地，亮度水平DL3比亮度水平DL2更亮，因为与曲线40相比，曲线42 与来自像素36的一组更明亮的输出亮度相关联。白色图像像素(例如，内容亮度水平CL2的像素)全部与相同的显示器亮度水平DL4相关联(例如，可得自显示器14中的像素36的最亮输出)，因此曲线38，40和42的映射均将针对内容亮度CL2产生显示器亮度DL4。
色调映射引擎24可使用色调映射参数来定义内容亮度至显示器亮度映射(有时称为色调映射、色调曲线、内容亮度至显示器亮度曲线、映射曲线等)。图3为示出如何根据内容亮度至显示器亮度映射曲线将内容亮度值映射至设备10中的显示器亮度值的曲线图。如图3所示，色调映射参数(有时称为色调参数、色调映射参数、映射参数(map parameter)、映射参数 (mapping parameter)等)可用于定义色调映射。
在图3的示例中，有三个例示性映射曲线：曲线50、曲线52和曲线54。可使用诸如黑电平(BL)、参考白电平(RW)和镜面白电平(SW)的一组色调映射参数来识别这些曲线中的每一个。在操作期间，引擎24可向内容生成器诸如内容生成器20和/或22提供这些色调映射参数的合适值，从而通知内容生成器20和/或22是使用曲线50、曲线52还是曲线54。
例如，如果引擎24向内容生成器提供色调映射参数BL1、RW1和SW1，则内容生成器可根据曲线50从内容亮度值生成显示器亮度值。如果引擎24 向内容生成器提供色调映射参数BL2、RW2和SW2，则内容生成器可根据曲线52从内容亮度值生成显示器亮度值。内容生成器可响应于来自引擎24 的色调映射参数BL3、RW3和SW3而根据曲线54从内容亮度值生成显示器亮度值。这样，引擎24可使用一组色调映射参数(例如，三个或更多个色调映射参数、3-10个色调映射参数、少于5个色调映射参数等)来指定期望的色调映射关系以供内容生成器根据当前操作条件来遵循。如果使用肤色映射参数，则其值可例如介于参考白电平和镜面白电平之间，或介于参考白电平和黑电平之间，并且可表示人类皮肤共有的肤色。伽玛和/或曲线斜率值也可用作指定内容亮度至输出亮度映射曲线的色调映射参数。
图3的具有弯曲形状的色调映射的示例仅是示例性的。如果需要，色调映射可相反地为线性的。图4为可用于诸如标准动态范围内容的内容的例示性线性色调映射的曲线图。在这些色调映射中的每一个中，低内容亮度值与黑色相关联，而高内容亮度值与白色相关联。在给定的黑色内容亮度水平(例如，CL1)下，色调映射46与显示器像素亮度值DL1相关联，并且色调映射44与显示器像素亮度值DL1相关联。在白色内容亮度水平(例如，CL2) 下，色调映射46与显示器像素亮度值DL2相关联，并且色调映射44与显示器像素亮度值DL3相关联。亮度水平DL3比亮度水平DL2更亮，因为与色调映射46相比，色调映射44与来自像素36的一组更明亮的输出亮度相关联。色调映射46具有相关联的镜面白电平SW1，而色调映射44具有相关联的镜面白电平SW2。
在图4中，色调映射是线性的并且黑色显示器亮度水平是固定的(例如，在0处)。然而，可基于环境照明条件、用户亮度设置和/或其他所需参数来改变每个色调映射的最大显示器亮度。一般来讲，图4所示类型的线性色调映射可与标准动态范围(SDR)内容相关联。图2和图3所示类型的弯曲色调映射可与高动态范围内容相关联。一般来讲，高动态范围内容可具有比标准动态范围内容更高的最大显示器亮度(例如，较高的镜面白水平)。
图2-图5的色调映射已经相对于亮度进行了描述。应当指出的是，在使用色调映射进行亮度选择之后，可以进行颜色校正，以确保颜色在色调映射后得以保留。
图5为示出了针对标准动态范围内容和高动态范围内容两者的内容亮度至显示器亮度映射曲线的曲线图。具体地讲，色调映射62可用于高动态范围内容，而色调映射64可用于标准动态范围内容。如图所示，色调映射 62具有相关联的最大显示器亮度水平(例如，镜面白电平)SW2，而色调映射64具有相关联的最大显示器亮度水平(例如，镜面白电平)SW1。HDR 色调映射62的最大亮度可超出SDR色调映射64的最大亮度一定量66。最大HDR亮度超出最大SDR亮度的量66有时可称为动态余量。动态余量可按绝对亮度差来表示或表示为比率。例如，考虑其中SW1为100尼特且SW2 为300尼特的场景。动态余量可被认为是200尼特(因为SW2比SW1高200 尼特)。作为另外一种选择，动态余量可被认为是3(因为SW2/SW1＝3)。
用于限定内容亮度和显示器亮度之间的关系的色调映射参数和对应的色调映射可基于多种因素进行调节。色调映射引擎24可基于操作条件来选择期望的色调映射曲线，诸如显示器亮度设置(例如，用户自定义亮度设置和由设备10设置的亮度水平以适应正常功率操作模式和低功率操作模式)、环境条件(环境光水平和环境光颜色)、内容统计信息(例如，关于平均像素亮度和老化风险的信息、或关于对显示器寿命有潜在影响的操作条件的其他信息、质量信息、动态范围信息等)、显示特性(例如，显示限制诸如最大可实现像素亮度)、功率约束(例如，由于热限制和/或其他考虑)、设备 10是以DC功率(来自设备10的源18中的电池的功率)还是AC功率来操作等。另外，色调映射引擎24可基于观看者的注视点来选择期望的色调映射曲线。当同时显示标准动态范围内容和高动态范围内容时，这可能尤其有用。
在一些情况下，如图6A所示，在显示器14上仅显示来自标准动态范围内容生成器22的标准动态范围内容。标准动态范围内容生成器22可与显示标准视频和图像、屏幕上菜单、弹出框、可选的屏幕上按钮、文本文档、标准动态范围图形、与直通相机(例如，捕获现实世界的图像的相机)相关联的内容以及其他标准动态范围内容相关联。在这些情况下，可选择色调映射以使得标准动态范围内容在显示器14上令人满意地显示。例如，可使用低于显示器14的硬件所支持的最大可能像素亮度的最大亮度(SW水平)来显示标准动态范围内容。该方法可帮助节省功率，同时为用户显示内容。
在其他情况下，如图6B所示，在显示器14上仅显示来自高动态范围内容生成器20的高动态范围内容。由高动态范围内容生成器20提供的高动态范围内容具有比来自标准动态范围内容生成器22的标准动态范围内容更高的动态范围。为了利用与来自内容生成器20的内容相关联的较大动态范围 (例如，以确保镜面突出显示对于观看者而言足够亮)，可选择允许相对于标准动态范围内容中的最亮像素来利用升高的亮度水平显示高动态范围内容中的最亮像素的色调映射。
有时希望显示具有标准动态范围内容的一个或多个区域和高动态范围内容的一个或多个区域的内容。例如，如图6C所示，高动态范围窗口可显示在标准动态范围背景内容上。例如，背景内容可在整个显示器14上延伸。高动态范围内容可部分地覆盖背景内容。例如，高动态范围内容可显示在与一些背景区域重叠的矩形区域(例如，窗口)中，同时允许用户查看背景区域的其他部分。
当同时显示高动态范围内容和标准动态范围内容时，如图6C所示，HDR 内容和SDR内容之间的亮度差异可被用户感知到。考虑上述示例，其中HDR 内容的最大亮度比SDR内容的最大亮度大3倍。如果用户的注视点指向HDR 内容(例如，至区域68)，则用户的眼睛可适应HDR内容的高亮度。然后，如果用户的注视点转向SDR内容(例如，如箭头70所指示的至区域68’)，则SDR内容可能显得明显暗淡。
考虑其中用户的注视点指向SDR内容的另一个示例。因此，用户的眼睛可适应SDR内容的相对低亮度。然后，如果用户的注视点从SDR内容转向HDR内容(其具有高得多的最大亮度)，则HDR内容可能看起来明显地或不舒适地明亮。
因此，当观看者的注视点在HDR和SDR内容之间切换时，注视点信息可用于动态地修改HDR内容和/或SDR内容的亮度以为观看者平滑转换。例如，当观看者将注视点从HDR内容切换为更暗的SDR内容时，SDR内容可随着用户的眼睛从HDR内容转换到SDR内容而变得更亮。类似地，当观看者将注视点从SDR内容切换为更亮的HDR内容时，HDR内容可随着用户的眼睛从SDR内容转换到HDR内容而变得更暗。
图7是示出色调映射引擎24可如何接收输入诸如环境条件76、亮度设置信息78、内容统计信息80、显示特性82、注视点信息90、电源和消耗信息92以及每个窗口信息96的图示。
环境条件76可包括使用环境光传感器32测量的当前环境光水平和/或使用环境光传感器32测量的当前环境颜色(例如，色温、颜色坐标组等)。随着环境亮度的增加，可增加显示器亮度以补偿屏幕眩光。随着环境颜色变化(例如，当用户将设备10从温暖的室内照明环境移动到寒冷的户外照明环境时)，显示器14的白点(色偏)可相应地被冷却以避免所显示图像中的非期望的色偏效应。环境条件76也可由设备10的相机诸如直通相机(例如，在图1中的输入输出电路16中)来测量。例如，在头戴式虚拟现实显示器中，直通相机可捕获用户周围的现实世界的图像，并且图像可显示在虚拟现实显示器上。来自直通相机的信息可用于确定环境条件76。
亮度设置信息78可包括用户选择的亮度水平。用户亮度设置可基于用户在触摸屏上的用户输入、基于用户键盘输入和/或基于其他用户输入来调节。当选择低亮度设置水平时，显示器14显示亮度较低的内容。当选择高亮度设置水平时，显示器14显示亮度较高的内容。
可通过分析一个或多个内容生成器84所生成的图像数据帧来收集内容统计信息80，所述图像数据帧显示在显示器14上或者可以元数据的形式提供(例如，内容类别信息诸如例如“电影”或“体育直播”)。控制电路12 (例如，微处理器、显示驱动器集成电路、图形处理单元电路、和/或设备 10中的其他控制电路)可例如保持图像亮度值的运行平均值(例如，通过多个图像帧显示在显示器14上的图像的运行平均像素亮度值)和/或以更精细的方式(例如，在像素阵列28内的一个或多个像素的块上)保持历史亮度信息以量化这些块中的每一个的老化风险。还可收集其他内容统计信息，诸如关于内容质量的信息，诸如位深度、图像输入数据的动态范围(例如，最小值、平均值和最大值)、压缩类型和量、数据速率、噪声水平、元数据指定的质量因子和其他内容质量度量，并且提供给色调映射引擎24。
显示特性82也可由色调映射引擎24使用。显示特性82可包括关于显示器14的物理显示限制的信息。例如，显示特性82可包括关于像素阵列28 和显示器14的特性的信息(例如，最大可实现镜面白电平、显示器分辨率、对比度、位深度等)。这些显示特性可在制造期间存储在控制电路12中(例如，当显示器14被构建到设备10中时)和/或可在显示器14耦接到设备10 时从显示器14获得(例如，当显示器14为独立显示器时)。用户还可向控制电路12提供显示特性信息(例如，通过使用键盘或其他输入输出设备输入该信息)。在一些配置中，可默认设置显示特性和/或从保持在设备10中的显示特性的数据库(例如，独立显示模型的数据库)中检索显示特性。
注视点信息90也可由色调映射引擎24使用。在生成色调参数时和/或重新映射引擎94动态地改变一个或多个色调参数并且基于用户的注视点的变化来重新映射内容时，色调映射引擎24可考虑注视点。
注视点信息可包括用于识别显示器的观看者的注视点的多种信息。例如，来自注视追踪器诸如图1中的注视追踪器35的注视追踪器信息90-1可识别观看者的当前注视点。在一些电子设备中，注视追踪器可主动地以高精度地测量观看者的注视点。在这些情况下，注视点因此以相对高的置信度被知道，并且可能不需要附加信息来确定用户的注视点。然而，在一些情况下，注视追踪器可具有低分辨率或者可完全从电子设备10省略注视追踪器。在这些情况下，可使用一条或多条附加信息(任选地与注视追踪器数据结合) 来预测用户的注视点。
激活窗口信息90-2可包括关于显示器14上的哪个窗口(例如，与特定应用程序或内容类型相关联的专用查看区域)被电子设备的用户主动使用的信息。在使用电子设备期间，用户可具有同时打开不同类型的内容的多个窗口(例如，具有SDR内容的一个或多个窗口和/或具有HDR内容的一个或多个窗口)。激活窗口可以是最近选择的窗口、最大窗口等。例如，考虑图6C 的具有在SDR背景上的HDR窗口的示例。如果HDR窗口是用户最近选择的窗口(例如，用鼠标或触控板单击)，则HDR窗口可被视为激活窗口。
光标位置信息90-3还可用于确定用户的注视点。用户通常可具有与光标(例如，用户用鼠标或触控板移动的光标)的位置重叠的注视点。当用户使用光标进行选择(例如，单击)时，光标位置和注视点之间可能存在特别高的相关性。换句话讲，当使用光标在显示器上进行选择时，用户很可能正在查看光标。因此，光标位置信息可用于确定用户的可能注视点。
可使用附加信息来帮助确定用户的注视点。例如，如果用户正在键盘上主动输入，则可能是注视点指向正在键入的文本。因此，键盘信息可用于确定用户的注视点。如果显示器14是触敏的并且用户触摸屏幕上的特定位置，则可能是用户的注视点指向该位置。通常，来自电子设备内的输入输出电路 (例如，传感器、按钮、键盘等)的任何信息可用作注视点信息90。
电源和消耗信息92也可由色调映射引擎24使用。控制电路12可进行基于功率消耗的亮度水平调节以帮助延长电池寿命。例如，当由于热条件诸如响应于检测到利用传感器34测量的温度水平已超过预先确定的水平、由于检测到利用控制电路12测量的低电池水平、基于检测到用户已将设备10 置于低功率模式以延长电池寿命等，设备10进入低功率模式时，控制电路 12可降低显示器14的亮度水平。在低功率模式下，控制电路12可降低当前显示器亮度设置、可对亮度水平设置上限、和/或可降低镜面突出显示的亮度、或可进行帮助降低显示器功率消耗的其它调节。除了电子设备的电池的充电状态之外，电源和消耗信息92还可包括关于电子设备是否正在使用交流(AC) 电源诸如壁出口(主电源)和/或直流(DC)电源诸如电池的信息。
每个窗口信息96也可被提供给色调映射引擎24。如前所述，具有SDR 内容的一个或多个窗口和/或具有HDR内容的一个或多个窗口可同时显示在显示器14上。在图8的示例中，显示器用于显示HDR窗口98-1、第一SDR 窗口98-2和第二SDR窗口98-3。每个窗口可具有对应的宽度100和高度102。每个窗口的宽度和高度(例如，图7中的尺寸96-1)可由色调映射引擎24 使用。例如，较大的窗口可能更有可能被用户查看，并且这可由色调映射引擎来解释。图8中的窗口为矩形的示例仅是示例性的。窗口可具有任何所需的形状、尺寸和位置。
每个窗口的位置(例如，显示器上的相对位置)也可由色调映射引擎使用。例如，显示器上更中央的窗口(例如，更靠近显示器的几何中心)可能更有可能被用户查看，并且这可由色调映射引擎来解释。因为可使用每个窗口信息来通知观看者正在查看显示器的位置(例如，用户的注视点)，所以每个窗口信息(诸如窗口大小和位置)有时也可被称为注视点信息。
在许多情况下，可同时显示SDR内容和HDR内容，如图8所示。例如，高动态范围视频可显示在背景区域中，并且画中画窗口标准动态范围内容 (静态图像、视频和/或文本和图形)可与背景区域的一部分重叠。在另一个示例性布置中，可使用分体式视图窗口方法，其中在显示器14的一侧(例如，左侧)上的高动态范围内容与显示器14的另一侧(例如，右侧)上的标准动态范围内容同时显示。还可使用其中标准动态范围内容的区域在显示器14上的高动态范围区域的增加部分上方滑动并逐渐覆盖其或其中高动态范围内容在显示器14上的标准动态范围内容上方滑动的滑动内容布置。在一些布置中，标准动态范围文本诸如用于编辑按钮、字幕和封闭字幕信息的文本可叠加在高动态范围内容上。在另一种可能的布置中，高动态范围内容可与来自直通相机的标准动态范围图像内容或其他SDR增强现实内容重叠 (例如，叠加在其上)。
当同时显示标准动态范围区域和高动态范围区域时，可独立地调节针对这些区域中的每一个的黑电平、参考白电平和镜面白电平，以确保显示器14 上的内容被令人满意地呈现(例如，以避免与其他内容相比，该内容中的一些显示为褪色或太亮的情形、以避免当与具有明亮镜面突出显示的内容相邻时，白色标准动态范围文本显示为浅灰色而不是白色的情形)。例如，色调映射引擎24可检测何时在显示器14上呈现(或即将呈现)混合标准动态范围和高动态范围，并且可生成对应的标准动态范围和高动态范围色调映射参数，这些参数平衡标准动态范围区域和高动态范围区域的外观以避免不期望的视觉效果，同时考虑因素诸如环境光条件、内容统计信息、用户亮度设置和显示特性。
返回图7，除了尺寸信息96-1和位置信息96-2之外，色调映射引擎还可使用每个窗口的内容类型96-3。内容类型可包括特定窗口的内容统计信息。例如，特定窗口中的像素的平均亮度值或特定窗口中的像素的亮度值的柱状图信息可用于提供关于窗口中的内容类型的信息。例如，这种类型的信息可识别窗口是显示主白色还是主黑色的内容。又如，内容类型可以与窗口相关联的元数据的形式提供(例如，内容类别信息诸如例如“电影”、“体育直播”、“电子邮件”、“web浏览器”等)。还可针对每个窗口收集其他内容统计信息，诸如关于内容质量的信息，诸如位深度、图像输入数据的动态范围(例如，最小值、平均值和最大值)、压缩类型和量、数据速率、噪声水平、元数据指定的质量因子和其他内容质量度量，并且提供给色调映射引擎24。内容类型96-3还可识别特定窗口的状态。例如，窗口可被识别为全屏窗口、画中画窗口等。
在操作期间，内容生成器84可产生要在显示器14上显示的内容。内容生成器84可例如在视频游戏中渲染游戏图像、可检索所存储电影数据并提供要在显示器14上显示的对应视频帧、可产生与操作系统功能或应用程序相关联的静态图像帧、和/或可产生用于在显示器14上显示的其它内容。来自内容生成器84的内容可包括标准动态范围内容和/或高动态范围内容。
色调映射引擎24可使用关于环境条件的信息76、亮度设置信息78、内容统计信息80、显示特性82、注视点信息90、电源和消耗信息92、和/或每个窗口信息96来确定应如何将原始内容值映射至显示器内容值(例如，以确定如何根据图2至图5所述类型的映射曲线将内容亮度值映射至显示器亮度值)。为了确保内容被适当地显示在显示器14上，色调映射引擎24可向内容生成器84提供执行亮度映射操作时使用的色调映射参数，和/或可实施内容生成器84的亮度映射。
在一些配置中，内容生成器84可能够在内部调节内容亮度值。在这些情况下，色调映射引擎24可向内容生成器84提供色调映射参数，诸如黑电平、参考白电平、镜面白电平、肤色电平和/或映射曲线的斜率或γ。色调映射参数向内容生成器84通知向显示器14供应内容86时使用的适当的映射曲线。
在其它配置中，内容生成器84可能不能够在内部调节内容亮度值，或者可能另外期望与内容生成器84的色调映射功能分开实施色调映射。在这些情况下，可将来自内容生成器84的内容86提供给色调映射引擎24。然后，色调映射引擎24可使用重新映射引擎94来应用期望的内容亮度至显示器亮度映射(例如，由色调映射参数BL、RW和SW限定的映射)，以确保内容 86的亮度被适当地调节(例如，使得内容86根据期望的内容亮度至显示器亮度映射进行重映射以产生用于在显示器14上显示的对应重映射内容88)。在将内容86的亮度值映射至内容88的新(重新映射的)亮度值时，引擎24 所使用的内容亮度至显示器亮度映射可遵循预定的参数(例如，默认)色调映射参数，或者可使用引擎24将提供给内容生成器的相同色调映射参数，该内容生成器能够通过在内部应用所需的映射来调节内容亮度值。
重新映射引擎94还可用于基于检测到的用户注视点变化来更新色调映射参数。例如，重新映射引擎94可以从已经使用提供给内容生成器84的色调映射参数(有时称为初始色调映射参数)来映射的内容生成器接收内容86。然而，由于检测到用户的注视点的变化，重新映射引擎94可更新内容并输出对用户的注视点的变化负责的重新映射的内容88。在内容生成器84不能够内部调节内容亮度值或另外希望实现与内容生成器84的色调映射功能分开的色调映射的情况下，色调映射引擎24可使用重新映射引擎94来将期望的内容亮度至显示器亮度映射施加至内容86。当确定内容亮度至显示器亮度映射施加至内容86时，重新映射引擎94可考虑注视点信息。
可通过动态调节一个或多个色调映射参数值，在标准动态范围内容和高动态范围内容之间的注视点转换期间调节内容。例如，如果用户的注视点在具有高镜面白电平的高动态范围内容和具有低镜面白电平的标准动态范围内容之间切换，则可暂时增大标准动态范围内容的镜面白电平以减轻用户检测到标准动态范围内容的降低的亮度。可响应于HDR和SDR内容之间的注视点转换来调节一个或多个色调映射参数。色调映射参数可响应于注视点的变化而在两个值之间缓慢转换。又如，色调映射参数可逐渐从初始值更改为更新的值，然后响应于注视点的变化而逐渐变回(或朝向)初始值。
图9是响应于观看者的注视点在标准动态范围内容和高动态范围内容之间的变化而修改色调映射参数所涉及的例示性操作的流程图。
在框110的操作期间，一个或多个内容生成器(例如，高动态范围内容生成器20或标准动态范围内容生成器22)可生成要在显示器14上显示的内容。色调映射引擎24可生成由内容生成器或色调映射引擎自身用于将内容亮度值映射至最终提供给显示器14的显示器亮度值的色调映射参数。
响应于检测到包括一个或多个SDR内容区域和一个或多个HDR内容区域的显示器14的内容的存在，色调映射引擎24可在框110的操作期间为相应的SDR和HDR区域选择适当的映射曲线。如果HDR区域包括符合不同 HDR标准的HDR内容，则可针对不同的HDR区域使用不同组的映射曲线。例如，第一HDR区域可用于使用由第一色调映射参数限定的第一HDR映射曲线来显示符合第一HDR标准的HDR内容，并且第二HDR区域可使用由不同于第一色调映射参数的第二色调映射参数限定的第二映射曲线来显示符合第二HDR标准的HDR内容。所选择的映射曲线可基于环境条件76(例如，可期望较暗像素水平的更亮映射以克服SDR区域和/或HDR区域中的眩光)来选择，可基于亮度设置78(例如，用户所选的亮度设置)来选择，可基于内容统计信息80，可基于显示特性82(例如，关于显示器14的位深度的信息等)，可基于注视点信息90(例如，来自注视追踪器的信息、激活窗口信息、光标位置信息等)，可基于电源和消耗信息92，和/或可基于每个窗口信息(例如，关于每个窗口大小、每个窗口位置、每个窗口中内容的类型的信息等)。
还可在框110的操作期间协调对相应SDR和HDR映射曲线的选择，使得当一起显示时，SDR和HDR内容(例如，一种或多种类型的HDR内容) 在视觉上是有吸引力的。这可涉及诸如使用比通常用于在不存在SDR内容的情况下显示HDR内容更低的镜面白电平来呈现HDR内容以及使用比通常用于在不存在HDR内容的情况下显示SDR内容更高的镜面白电平来呈现SDR内容的折衷方案。当已选择适当的色调映射曲线时，可生成相关联的色调映射参数(例如，用于SDR内容的第一组色调映射参数和用于HDR内容的第二组色调映射参数)并将其提供给内容生成器20和22。
在框112的操作期间，可基于注视点信息来检测观看者的注视点的变化。注视点的变化可基于注视点信息诸如注视追踪器信息90-1、激活窗口信息90-2和/或光标位置信息90-3来检测。方框112中的注视点的变化可以是标准动态范围内容(例如，SDR窗口或背景)与高动态范围内容(例如， HDR窗口或内容)之间的注视点的变化。HDR内容(其可以是相对亮的) 和SDR内容(其相对于HDR内容可以是暗的)之间的注视点的变化可能需要缓和动作以使显示器对观看者在视觉上更具吸引力。框114示出此缓和动作的示例。
在框114的操作期间，显示在显示器上的HDR和/或SDR内容可响应于注视点的变化而使用时变的色调参数来显示。任何期望的色调映射参数可响应于注视点的变化(例如，黑电平、参考白电平、镜面白电平、肤色电平和/或映射曲线的斜率或γ)而随时间变化。有多种可能的方案可用于响应于注视点的变化而随时间推移改变色调映射参数，如将结合图10-13所讨论的。在框116的操作期间，在时变的色调映射参数已稳定之后，可再次显示与框110中的内容类似的内容。
图10-13为示出了色调映射参数可如何响应于注视点的变化而随时间变化的曲线图。图10-13示出了注视点从HDR内容更改至SDR内容的示例。应当理解，任何色调映射参数可响应于注视点的变化而改变。然而，最大显示器亮度(例如，镜面白电平)将在图10-13中检查，作为示例。
在图10中，注视点在t1处改变。当注视点从HDR内容更改至SDR内容时，观察到的用户亮度下降(由于HDR和SDR内容之间的最大亮度差)。在图10的示例中，即使在检测到注视点变化之后，SDR内容的亮度仍保持恒定。然而，响应于所检测到的注视点变化，HDR内容在t-1处开始逐渐下降。减小高动态范围内容的最大亮度可减轻在用户查看较暗的SDR内容时在显示器上具有明亮的HDR内容的潜在分散效应。最大亮度在t1和t2之间逐渐减小，以避免观看者的可检测的变化。最终，在t2处，HDR和SDR最大亮度之间的差值(例如，动态余量66)相对于t1之前减小。
图11示出了在t1处注视点从HDR内容更改至SDR内容的另一示例。作为响应，SDR内容的最大亮度在t1和t2之间增加。以这种方式使SDR内容更亮使得当观看者刚刚将他们的注视点朝向SDR内容切换时，SDR内容对观看者而言看起来不那么暗淡。
图12示出了响应于注视点的变化而随着时间改变色调映射参数的另一个选项。当在t1处注视点从HDR内容更改至SDR内容时，观察到的用户亮度下降(由于HDR和SDR内容之间的最大亮度差)。为避免在观看者最初观看时，SDR内容显得过于暗淡，SDR亮度可在t1和t2之间增加。因此，由于观看者适于明亮的HDR内容，所以SDR内容将不会显示出不吸引人的暗淡。然而，最初在t1和t2之间将SDR内容变亮之后，所述SDR内容的最大亮度可随后在t2和t3之间逐渐减小。同时，HDR内容的亮度可在t1和t3—之间逐渐减小。最终，在t3处，HDR和SDR最大亮度之间的差值(例如，动态余量66)减小。这有效地产生一种最终状态，其中SDR内容以期望的亮度显示，同时避免由从HDR内容到SDR内容的注视点的切换所引起的任何初始冲击。HDR内容被调暗，以便在观看者正在查看SDR内容时不会看起来刺眼的明亮。
响应于注视点的变化而减小的SDR和HDR内容之间的动态余量的示例仅是例示性的。图13示出了另选的时变的色调映射参数方案，其中SDR最大亮度遵循与图12中类似的图案，但HDR最大亮度保持不变。与图12中的类似，最初提高SDR亮度防止了SDR内容在观看者最初观看时显得过于暗淡。然而，因为HDR亮度保持恒定，所以在SDR亮度已降低回到其初始水平之后，HDR和SDR内容之间的动态余量66可在t-3-处返回到其初始量值(例如，t1之前的量值)。也可使用这些方案的各种组合。例如，在图12 和图13中所示，SDR亮度可初始增大，然后降低至相对于在t2处的亮度减小，但仍比初始(pre-t1)亮度水平更亮的亮度水平。
图10-13的曲线图示出了注视点从HDR内容切换至SDR内容的示例。然而，应当理解，这些概念可替代地应用于注视点从SDR内容切换至HDR 内容的相反场景。例如，响应于从SDR内容到HDR内容的注视点的变化， HDR亮度可保持恒定并且SDR亮度可逐渐升高(例如，与图10相反)。响应于从SDR内容到HDR内容的注视点的变化，SDR亮度可保持恒定并且HDR亮度可降低(例如，与图11相反)。响应于从SDR内容到HDR内容的注视点的变化，HDR亮度可初始下降，然后逐渐提高(例如，回到其初始水平)，而SDR亮度逐渐升高(例如，与图12相反)。响应于从SDR 内容到HDR内容的注视点的变化，HDR亮度可初始下降，然后逐渐提高(例如，回到其初始水平)，而SDR亮度保持不变(例如，与图13相反)。
图10—图13中的时间参数(例如，t2和t3)可为任何期望的时间长度。例如，图10中的t2可大于1秒、大于5秒、大于10秒、大于20秒、大于 30秒、大于45秒、大于60秒、小于60秒、介于1秒和60秒之间等。在图 11中，t2可大于0.1秒、大于1秒、大于2秒、大于5秒、小于5秒、介于 0.1秒和5秒之间等。在图12和图13中，t2可大于0.1秒、大于1秒、大于 2秒、大于5秒、小于5秒、介于0.1秒和5秒之间等。在图12和图13中， t3可大于1秒、大于5秒、大于10秒、大于20秒、大于30秒、大于45秒、大于60秒、小于60秒、介于1秒和60秒之间等。
任何期望的色调映射参数可根据图10-13的原理(例如，黑电平、参考白电平、镜面白电平、肤色电平和/或映射曲线的斜率或γ)而随时间变化。
图1-图13的概念主要是相对于电子设备中的单个显示器来描述的。然而，在一些应用中，电子设备可具有多于一个显示器。在这种类型的设备中，来自两个显示器的信息可用于优化显示器上的SDR内容和HDR内容的外观。例如，来自两个显示器的信息可用于确定显示器的色调映射参数。可响应于注视点的变化，将时变的色调参数(例如，图9的步骤114中所讨论的) 应用于一个或多个显示器。
在另一个可能的应用中，具有相应显示器的多个电子设备可在集成系统中一起操作。例如，台式计算机可具有两个或更多个监视器(例如，并列布置)。同样，在这种类型的场景中，来自两个显示器的信息可用于优化显示器上的SDR内容和HDR内容的外观。例如，来自两个显示器的信息可用于确定显示器的色调映射参数。可响应于注视点的变化，将时变的色调参数(例如，图9的步骤114中所讨论的)应用于一个或多个显示器。
通常，针对各种条件(例如，不同的亮度水平、显示设置、注视点转换等)确定最佳色调映射方案可涉及用户研究、建模和/或实验室测试。然后，这些色调映射方案可由色调映射引擎24来实现。色调映射方案也可任选地由电子设备的用户调节。例如，用户可具有对电子设备的设置的访问权限。在电子设备的设置中，用户可具有选择给定转换方法(例如，图10至图13 的转换方法中的一者)的选项，可具有调整某些参数(例如，最大动态余量、最小动态余量、转换速度等)的选项，可完全关闭注视点调整，等等。一般而言，用户可任选地调节用于显示HDR内容和SDR内容的任何变量。
如上所述，本发明技术的一个方面是采集和使用信息诸如传感器信息。本公开构想，在一些情况下，可采集包括唯一地识别或可用于联系或定位特定人员的个人信息的数据。此类个人信息数据可包括人口统计数据、基于位置的数据、电话号码、电子邮件地址、twitter ID、家庭地址、与用户的健康或健身等级相关的数据或记录(例如，生命信号测量结果、药物信息、锻炼信息)、出生日期、用户名、口令、生物识别信息、或任何其它识别信息或个人信息。
本公开认识到在本发明技术中使用此类个人信息可用于使用户受益。例如，该个人信息数据可用于递送用户较感兴趣的目标内容。因此，使用此类个人信息数据使得用户能够对所递送的内容进行有计划的控制。此外，本公开还预期个人信息数据有益于用户的其他用途。例如，健康和健身数据可用于向用户的总体健康状况提供见解，或者可用作使用技术来追求健康目标的个人的积极反馈。
本公开设想负责采集、分析、公开、传输、存储或其他使用此类个人信息数据的实体将遵守既定的隐私政策和/或隐私实践。具体地，此类实体应当实行并坚持使用被公认为满足或超出对维护个人信息数据的隐私性和安全性的行业或政府要求的隐私政策和实践。此类政策应该能被用户方便地访问，并应随着数据的采集和/或使用变化而被更新。来自用户的个人信息应当被收集用于实体的合法且合理的用途，并且不在这些合法使用之外共享或出售。此外，应在收到用户知情同意后进行此类采集/共享。此外，此类实体应考虑采取任何必要步骤，保卫和保障对此类个人信息数据的访问，并确保有权访问个人信息数据的其他人遵守其隐私政策和流程。另外，这种实体可使其本身经受第三方评估以证明其遵守广泛接受的隐私政策和实践。此外，应当调整政策和实践，以便采集和/或访问的特定类型的个人信息数据，并适用于包括管辖范围的具体考虑的适用法律和标准。例如，在美国，某些健康数据的收集或访问可能受诸如健康保险流通与责任法案(HIPAA)的联邦和/ 或州法律的约束，而其它国家的健康数据可能受其它法规和政策的约束，并且应相应地加以处理。因此，在每个国家应为不同的个人数据类型保持不同的隐私实践。
不管前述情况如何，本公开还预期用户选择性地阻止使用或访问个人信息数据的实施方案。即本公开预期可提供硬件元件和/或软件元件，以防止或阻止对此类个人信息数据的访问。例如，本技术可被配置为允许用户在注册服务期间或其后随时选择参与采集个人信息数据的“选择加入”或“选择退出”。又如，用户可选择不提供特定类型的用户数据。再如，用户可以选择限制保持用户特定数据的时间长度。除了提供“选择加入”和“选择退出”选项外，本公开设想提供与访问或使用个人信息相关的通知。例如，可在下载应用(“app”)时向用户通知其个人信息数据将被访问，然后就在个人信息数据被应用访问之前再次提醒用户。
此外，本公开的目的是应管理和处理个人信息数据以最小化无意或未经授权访问或使用的风险。一旦不再需要数据，通过限制数据收集和删除数据可最小化风险。此外，并且当适用时，包括在某些健康相关应用程序中，数据去标识可用于保护用户的隐私。在适当的情况下，可以通过移除特定标识符(例如，出生日期等)、控制存储的数据的量或特征(例如，在城市级而非地址级收集位置数据)、控制数据的存储方式(例如，在用户之间聚合数据)和/或其它方法来促进去标识。
因此，虽然本公开广泛地覆盖了使用可包括个人信息数据的信息来实现一个或多个各种所公开的实施方案，但本公开还预期各种实施方案也可在无需访问个人信息数据的情况下被实现。即，本发明技术的各种实施方案不会由于缺少此类个人信息数据的全部或一部分而无法正常进行。
前述内容仅为例示性的并且可对所述实施方案作出各种修改。前述实施方案可独立实施或可以任意组合实施。

Claims (20)

1.一种电子设备，包括：
注视追踪器，所述注视追踪器获得注视点信息；
显示器；以及
控制电路，所述控制电路被配置为：
生成具有第一动态范围的第一内容；
生成具有第二动态范围的第二内容，所述第二动态范围大于所述第一动态范围；以及
使用至少部分地基于所述注视点信息确定的色调映射参数来同时显示所述第一内容和所述第二内容。
2.根据权利要求1所述的电子设备，其中所述控制电路被配置为：
至少基于环境光条件来为所述第一内容和所述第二内容提供初始色调映射参数；以及
响应于基于所述注视点信息检测到从第一注视点到第二注视点的变化，修改所述初始色调映射参数以确定用于同时显示所述第一内容和所述第二内容的所述色调映射参数。
3.根据权利要求2所述的电子设备，其中所述第一注视点与所述第一内容重叠，并且所述第二注视点与所述第二内容重叠。
4.根据权利要求2所述的电子设备，其中所述第一注视点与所述第二内容重叠，并且所述第二注视点与所述第一内容重叠。
5.根据权利要求2所述的电子设备，其中至少基于所述环境光条件来为所述第一内容和所述第二内容提供所述初始色调映射参数包括：至少基于所述环境光条件、至少一个亮度设置、与所述显示器相关联的显示特性、以及内容统计信息来为所述第一内容和所述第二内容提供所述初始色调映射参数。
6.根据权利要求1所述的电子设备，其中所述色调映射参数是时变的色调映射参数，并且其中使用所述色调映射参数同时显示所述第一内容和所述第二内容包括：响应于基于所述注视点信息检测到从第一注视点到第二注视点的变化来使用所述时变的色调映射参数同时显示所述第一内容和所述第二内容。
7.根据权利要求6所述的电子设备，其中所述第一注视点与所述第一内容重叠，并且所述第二注视点与所述第二内容重叠。
8.根据权利要求6所述的电子设备，其中所述第一注视点与所述第二内容重叠，并且所述第二注视点与所述第一内容重叠。
9.根据权利要求6所述的电子设备，其中所述时变的色调映射参数包括随时间变化的用于所述第一内容的第一最大亮度水平和随着时间变化的用于所述第二内容的第二最大亮度水平。
10.根据权利要求9所述的电子设备，其中所述控制电路被配置为响应于检测到从所述第一注视点到所述第二注视点的所述变化：
将所述第一最大亮度水平从第一量值增加至第二量值，然后将所述第一最大亮度水平从所述第二量值减小回所述第一量值。
11.根据权利要求10所述的电子设备，其中所述控制电路被配置为响应于检测到从所述第一注视点到所述第二注视点的所述变化：
将所述第二最大亮度水平从第三量值减小至第四量值。
12.一种电子设备，包括：
显示器；以及
控制电路，所述控制电路被配置为：
生成具有第一动态范围的第一内容；
生成具有第二动态范围的第二内容，所述第二动态范围不同于所述第一动态范围；
同时显示所述第一内容和所述第二内容；以及
响应于所接收的指示从所述第一内容上的第一注视点到所述第二内容上的第二注视点的变化的注视点信息，修改所述第一内容和所述第二内容中的至少一者的亮度。
13.根据权利要求12所述的电子设备，其中修改所述第一内容和所述第二内容中的所述至少一者的所述亮度包括修改用于显示所述第一内容和所述第二内容中的所述至少一者的至少一个色调映射参数。
14.根据权利要求13所述的电子设备，其中所述至少一个色调映射参数包括用于所述第一内容和所述第二内容中的所述至少一者的镜面白电平。
15.根据权利要求12所述的电子设备，其中所述注视点信息包括来自注视追踪器的信息。
16.根据权利要求12所述的电子设备，其中所述第一内容包含在所述显示器上的第一窗口中，其中所述第二内容包含在所述显示器上的第二窗口中，并且其中所述注视点信息包括激活窗口信息。
17.根据权利要求16所述的电子设备，其中修改所述第一内容和所述第二内容中的所述至少一者的所述亮度包括：基于所述第一窗口和所述第二窗口中的每一个的相应尺寸和位置来修改所述第一内容和所述第二内容中的所述至少一者的所述亮度。
18.根据权利要求12所述的电子设备，其中所述注视点信息包括光标位置信息。
19.根据权利要求12所述的电子设备，还包括：
输入输出设备，其中所述注视点信息包括来自所述输入输出设备的信息。
20.一种电子设备，包括：
显示器；以及
控制电路，所述控制电路被配置为：
生成具有第一动态范围的第一内容；
生成具有第二动态范围的第二内容，所述第二动态范围不同于所述第一动态范围；
使用相应色调映射参数同时显示所述第一内容和所述第二内容；以及
响应于所接收的指示从所述第一内容到所述第二内容的注视点的变化的注视点信息，暂时使用时变的色调映射参数以同时显示所述第一内容和所述第二内容。
CN201911134736.7A 2019-11-19 2019-11-19 动态控制标准动态范围和高动态范围内容的电子设备 Active CN110867172B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201911134736.7A CN110867172B (zh) 2019-11-19 2019-11-19 动态控制标准动态范围和高动态范围内容的电子设备
US16/705,025 US10963998B1 (en) 2019-11-19 2019-12-05 Electronic devices with dynamic control of standard dynamic range and high dynamic range content

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911134736.7A CN110867172B (zh) 2019-11-19 2019-11-19 动态控制标准动态范围和高动态范围内容的电子设备

Publications (2)

Publication Number Publication Date
CN110867172A true CN110867172A (zh) 2020-03-06
CN110867172B CN110867172B (zh) 2021-02-26

Family

ID=69654930

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911134736.7A Active CN110867172B (zh) 2019-11-19 2019-11-19 动态控制标准动态范围和高动态范围内容的电子设备

Country Status (2)

Country Link
US (1) US10963998B1 (zh)
CN (1) CN110867172B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111970564A (zh) * 2020-08-26 2020-11-20 展讯通信（上海）有限公司 Hdr视频显示处理的优化方法及装置、存储介质、终端
CN113596424A (zh) * 2020-04-30 2021-11-02 华为技术有限公司 动态范围映射的方法和装置
CN113596428A (zh) * 2020-04-30 2021-11-02 华为技术有限公司 映射曲线参数的获取方法和装置
CN113691785A (zh) * 2020-05-18 2021-11-23 爱思开海力士有限公司 局部色调映射电路、图像感测装置及其操作方法
WO2022077353A1 (en) * 2020-10-15 2022-04-21 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method and apparatus for tone mapping, and computer usable medium storing software for implementing the method
CN116029914A (zh) * 2022-07-27 2023-04-28 荣耀终端有限公司 图像处理方法与电子设备
CN116662859A (zh) * 2023-05-31 2023-08-29 西安工程大学 非遗文化数据特征选择方法
CN117130510A (zh) * 2023-02-24 2023-11-28 荣耀终端有限公司 亮度控制方法及其相关设备
CN117130509A (zh) * 2023-02-24 2023-11-28 荣耀终端有限公司 亮度控制方法及其相关设备

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2876130A1 (en) 2012-06-14 2013-12-19 Bally Gaming, Inc. System and method for augmented reality gaming
US20240135900A1 (en) * 2021-04-14 2024-04-25 Qualcomm Incorporated Displaying images of different dynamic ranges
EP4341929A1 (en) * 2021-05-19 2024-03-27 Dolby Laboratories Licensing Corporation Display management with position-varying adaptivity to ambient light and/or non-display-originating surface light
KR102564447B1 (ko) * 2021-11-30 2023-08-08 엘지전자 주식회사 디스플레이 장치
WO2023182973A1 (en) * 2022-03-21 2023-09-28 Hewlett-Packard Development Company, L.P. User selected display panel adjustment
US11955054B1 (en) 2022-09-20 2024-04-09 Apple Inc. Foveated display burn-in statistics and burn-in compensation systems and methods
US11735147B1 (en) 2022-09-20 2023-08-22 Apple Inc. Foveated display burn-in statistics and burn-in compensation systems and methods

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101385071A (zh) * 2005-12-22 2009-03-11 捷讯研究有限公司 用于降低电子设备的显示器中的功耗的方法和设备
CN101536077A (zh) * 2006-11-09 2009-09-16 索尼爱立信移动通讯股份有限公司 基于眼睛跟踪来调整显示亮度和/或刷新率
CN102726036A (zh) * 2010-02-02 2012-10-10 微软公司 用于在液晶显示器上显示的图像的增强
JP2015222316A (ja) * 2014-05-22 2015-12-10 凸版印刷株式会社 情報表示装置、情報表示方法、および情報表示プログラム
CN107945766A (zh) * 2017-11-03 2018-04-20 苏州佳世达电通有限公司 显示装置
TW201826250A (zh) * 2017-01-10 2018-07-16 宏碁股份有限公司 顯示裝置及其顯示參數調整方法
US20180330674A1 (en) * 2017-05-12 2018-11-15 Apple Inc. Electronic Devices With Tone Mapping To Accommodate Simultaneous Display of Standard Dynamic Range and High Dynamic Range Content
CN110032271A (zh) * 2018-01-12 2019-07-19 京东方科技集团股份有限公司 对比度调节装置及其方法、虚拟现实设备及存储介质
CN110036436A (zh) * 2016-12-14 2019-07-19 夏普株式会社 光源控制装置、显示装置、图像处理装置、光源控制装置的控制方法以及控制程序
CN110214349A (zh) * 2017-01-25 2019-09-06 苹果公司 具有中心凹形显示系统的电子设备

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7489814B2 (en) * 2003-02-21 2009-02-10 Ramot At Tel Aviv University Ltd. Method of and device for modulating a dynamic range of still and video images
US20060092182A1 (en) * 2004-11-04 2006-05-04 Intel Corporation Display brightness adjustment
US7742032B2 (en) * 2004-12-31 2010-06-22 Intel Corporation Image adaptation phase-in
US8752963B2 (en) 2011-11-04 2014-06-17 Microsoft Corporation See-through display brightness control
US9760385B2 (en) * 2013-11-18 2017-09-12 WebAd Campaign Analytics Concurrent emulation of multiple devices
US9466130B2 (en) * 2014-05-06 2016-10-11 Goodrich Corporation Systems and methods for enhancing displayed images
US9846927B2 (en) * 2014-05-20 2017-12-19 Qualcomm Incorporated Systems and methods for haziness detection
JP6512458B2 (ja) 2014-06-30 2019-05-15 パナソニックＩｐマネジメント株式会社 データ再生方法及び再生装置
EP3035656B1 (en) 2014-12-18 2021-08-04 Samsung Electronics Co., Ltd. Method and apparatus for controlling an electronic device
US10249263B2 (en) 2015-06-05 2019-04-02 Apple Inc. Rendering and displaying high dynamic range content
US10720127B2 (en) 2017-10-23 2020-07-21 Apple Inc. Dynamic display mode selection
US11030728B2 (en) * 2018-05-29 2021-06-08 Apple Inc. Tone mapping techniques for increased dynamic range
US10943335B2 (en) * 2018-06-15 2021-03-09 Intel Corporation Hybrid tone mapping for consistent tone reproduction of scenes in camera systems

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101385071A (zh) * 2005-12-22 2009-03-11 捷讯研究有限公司 用于降低电子设备的显示器中的功耗的方法和设备
CN101536077A (zh) * 2006-11-09 2009-09-16 索尼爱立信移动通讯股份有限公司 基于眼睛跟踪来调整显示亮度和/或刷新率
CN102726036A (zh) * 2010-02-02 2012-10-10 微软公司 用于在液晶显示器上显示的图像的增强
JP2015222316A (ja) * 2014-05-22 2015-12-10 凸版印刷株式会社 情報表示装置、情報表示方法、および情報表示プログラム
CN110036436A (zh) * 2016-12-14 2019-07-19 夏普株式会社 光源控制装置、显示装置、图像处理装置、光源控制装置的控制方法以及控制程序
TW201826250A (zh) * 2017-01-10 2018-07-16 宏碁股份有限公司 顯示裝置及其顯示參數調整方法
CN110214349A (zh) * 2017-01-25 2019-09-06 苹果公司 具有中心凹形显示系统的电子设备
US20180330674A1 (en) * 2017-05-12 2018-11-15 Apple Inc. Electronic Devices With Tone Mapping To Accommodate Simultaneous Display of Standard Dynamic Range and High Dynamic Range Content
CN107945766A (zh) * 2017-11-03 2018-04-20 苏州佳世达电通有限公司 显示装置
CN110032271A (zh) * 2018-01-12 2019-07-19 京东方科技集团股份有限公司 对比度调节装置及其方法、虚拟现实设备及存储介质

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113596428B (zh) * 2020-04-30 2022-12-06 华为技术有限公司 映射曲线参数的获取方法和装置
CN115883810A (zh) * 2020-04-30 2023-03-31 华为技术有限公司 映射曲线参数的获取方法和装置
CN113596428A (zh) * 2020-04-30 2021-11-02 华为技术有限公司 映射曲线参数的获取方法和装置
WO2021218738A1 (zh) * 2020-04-30 2021-11-04 华为技术有限公司 映射曲线参数的获取方法和装置
CN113596424A (zh) * 2020-04-30 2021-11-02 华为技术有限公司 动态范围映射的方法和装置
CN113691785A (zh) * 2020-05-18 2021-11-23 爱思开海力士有限公司 局部色调映射电路、图像感测装置及其操作方法
CN113691785B (zh) * 2020-05-18 2023-07-04 爱思开海力士有限公司 局部色调映射电路、图像感测装置及其操作方法
CN111970564A (zh) * 2020-08-26 2020-11-20 展讯通信（上海）有限公司 Hdr视频显示处理的优化方法及装置、存储介质、终端
WO2022077353A1 (en) * 2020-10-15 2022-04-21 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method and apparatus for tone mapping, and computer usable medium storing software for implementing the method
CN116029914A (zh) * 2022-07-27 2023-04-28 荣耀终端有限公司 图像处理方法与电子设备
CN116029914B (zh) * 2022-07-27 2023-10-20 荣耀终端有限公司 图像处理方法与电子设备
CN117130510A (zh) * 2023-02-24 2023-11-28 荣耀终端有限公司 亮度控制方法及其相关设备
CN117130509A (zh) * 2023-02-24 2023-11-28 荣耀终端有限公司 亮度控制方法及其相关设备
CN116662859A (zh) * 2023-05-31 2023-08-29 西安工程大学 非遗文化数据特征选择方法

Also Published As

Publication number Publication date
CN110867172B (zh) 2021-02-26
US10963998B1 (en) 2021-03-30

Similar Documents

Publication Publication Date Title
CN110867172B (zh) 动态控制标准动态范围和高动态范围内容的电子设备
US10403214B2 (en) Electronic devices with tone mapping to accommodate simultaneous display of standard dynamic range and high dynamic range content
US11295703B2 (en) Displays with content-dependent brightness adjustment
CN110914895B (zh) 具有动态调光范围的背光源
US11030728B2 (en) Tone mapping techniques for increased dynamic range
CN111830746B (zh) 具有可调节的直接照明式背光单元的显示器
US9984658B2 (en) Displays with improved color accessibility
US10373583B2 (en) Image transforming vision enhancement device
EP2685446B1 (en) Display control method, apparatus and system for power saving
US9361834B2 (en) Method and apparatus for adjusting the brightness of a display and a display system
US10847118B2 (en) Electronic devices with tone mapping engines
US10964275B2 (en) Displays with adjustable direct-lit backlight units and adaptive processing
US10571744B1 (en) Displays with adjustable direct-lit backlight units and power consumption compensation
US10614775B2 (en) Electronic devices having backlit keyboards displays with adjustable white points
CN111867447B (zh) 用于监测用户眼部健康的电子设备及其操作方法
KR102076312B1 (ko) 표시장치
Kim et al. Peripheral dimming: A new low-power technology for OLED display based on gaze tracking
JP2011133877A (ja) 画像表示装置、および画像処理装置
CN111819618B (zh) 像素对比度控制系统和方法
US20170069241A1 (en) Information Handling System Selective Color Illumination
CN115691387A (zh) 显示屏的刷新频率调整方法和电子设备
US11962742B1 (en) Content processing in a display pipeline
US20240078961A1 (en) Content Dependent Brightness Management System
Kim et al. 23‐2: A Novel Low‐Power OLED Driving Method Based on Gaze Tracking
CN113218503B (zh) 环境光强度的确定方法、确定系统、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant