CN109493826B - 电子显示器边界增益系统和方法 - Google Patents

电子显示器边界增益系统和方法 Download PDF

Info

Publication number
CN109493826B
CN109493826B CN201811006610.7A CN201811006610A CN109493826B CN 109493826 B CN109493826 B CN 109493826B CN 201811006610 A CN201811006610 A CN 201811006610A CN 109493826 B CN109493826 B CN 109493826B
Authority
CN
China
Prior art keywords
gain
pixel
map
display
run
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811006610.7A
Other languages
English (en)
Other versions
CN109493826A (zh
Inventor
赵明济
周正
M·阿尔布雷希特
珍-皮埃尔·古伊洛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US15/701,086 external-priority patent/US10714049B2/en
Application filed by Apple Inc filed Critical Apple Inc
Publication of CN109493826A publication Critical patent/CN109493826A/zh
Application granted granted Critical
Publication of CN109493826B publication Critical patent/CN109493826B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39Control of the bit-mapped memory
    • G09G5/391Resolution modifying circuits, e.g. variable screen formats
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10Intensity circuits
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37Details of the operation on graphic patterns
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2300/00Aspects of the constitution of display devices
    • G09G2300/04Structural and physical details of display devices
    • G09G2300/0421Structural details of the set of electrodes
    • G09G2300/043Compensation electrodes or other additional electrodes in matrix displays related to distortions or compensation signals, e.g. for modifying TFT threshold voltage in column driver
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2310/00Command of the display device
    • G09G2310/02Addressing, scanning or driving the display screen or processing steps related thereto
    • G09G2310/0232Special driving of display border areas
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0242Compensation of deficiencies in the appearance of colours
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0285Improving the quality of display appearance using tables for spatial correction of display data
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0686Adjustment of display parameters with two or more screen areas displaying information with different brightness or colours
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/02Handling of images in compressed format, e.g. JPEG, MPEG
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0457Improvement of perceived resolution by subpixel rendering
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/10Use of a protocol of communication by packets in interfaces along the display data pipeline
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • H03M7/3066Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction by means of a mask or a bit-map
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • H03M7/46Conversion to or from run-length codes, i.e. by representing the number of consecutive digits, or groups of digits, of the same kind by a code word and a digit indicative of that kind

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Processing (AREA)
  • Image Generation (AREA)

Abstract

本发明涉及电子显示器边界增益系统和方法。提供了用于改善电子显示器的感知的图像质量的系统和方法,该电子显示器包括具有圆形边界的显示区域以及与所述圆形边界相邻的像素位置处的显示器像素。通信地耦接到所述电子显示器的显示流水线接收第一图像数据,所述第一图像数据指示矩形图像帧中的像素位置处的目标亮度;从增益映射确定与所述像素位置相关联的增益值,其中所述增益值与所述显示器像素和所述圆形边界之间的距离成反比;通过至少部分地基于所述增益值处理所述第一图像数据,确定指示所述显示器像素的目标亮度的第二图像数据;以及将所述第二图像数据输出到所述电子显示器,以便于在所述显示区域上显示所述图像帧的非矩形部分。

Description

电子显示器边界增益系统和方法
相关申请的交叉引用
本申请是2017年6月5日提交的美国专利申请15/614,294的部分继续申请,其要求2016年6月6日提交的美国临时专利申请62/346,517的优先权,所述专利申请的每一者全文并入本文以用于所有目的。
技术领域
本公开整体涉及电子显示器,并且更具体地,涉及应用于在电子显示器上显示图像或图像帧的增益。
背景技术
该部分旨在向读者介绍现有技术的各方面,其可能与下文描述和/或受权利要求书保护的本技术的各方面有关。我们认为这种论述有助于为读者提供背景信息以便于更好地理解本公开的各方面。因此,应当理解,要在这个意义上来阅读这些文字描述,而不是作为对现有技术的承认。
电子设备通常使用电子显示器通过显示一个或多个图像来提供信息的视觉表示。此类电子设备可包括计算机、移动电话、便携式媒体设备、平板电脑、电视、虚拟现实头戴式耳机和车辆仪表板等等。为了显示图像,电子显示器可以至少部分地基于指示图像的目标特征的图像数据来控制来自显示器像素的光发射。例如,图像数据可以指示图像中的各个点(例如,图像像素)处的特定颜色分量诸如绿色分量、蓝色分量和/或红色分量的目标亮度。
依赖于颜色分量的混合(例如,平均),电子显示器可以使得能够感知图像中的各种颜色。例如,以各种亮度水平混合绿色分量、蓝色分量和红色分量可以使得能够感知从黑色到白色的一系列颜色。为了便于控制颜色分量的亮度,电子显示器中的每个显示器像素可以包括一个或多个子像素,每个子像素控制一种颜色分量的亮度。例如,显示器像素可包括红色子像素、蓝色子像素和/或绿色子像素。
在一些情况下,与待显示在电子显示器上的图像对应的图像数据可由图像数据源生成。由于电子显示器常常具有矩形形状,所以图像数据源可生成对应于矩形图像的图像数据。然而,在一些情况下,电子显示器可以用非矩形显示区域实施。然而,为了便于操作灵活性,图像数据源可以生成图像数据,例如很少或不考虑在电子显示器中实施的显示区域形状。
发明内容
下文阐述本文所公开的某些实施方案的概要。应当理解,呈现这些方面仅仅是为了向读者提供这些特定实施方案的简明概要,并且这些方面并非旨在限制本公开的范围。实际上,本公开可涵盖下文可能未阐述的多个方面。
本公开整体涉及改善电子显示器上的感知的图像质量。为了显示图像,电子显示器可以至少部分地基于指示图像中的图像像素的目标特征 (例如,亮度)的图像数据来控制来自其显示器像素的光发射。在一些情况下,图像数据可以由图像数据源生成。
由于电子显示器常常具有矩形显示区域,所以图像数据源可生成对应于矩形图像的图像数据。然而,在一些实施方案中,可以用例如具有一个或多个圆形(例如,弯曲)边界的非矩形显示区域实施电子显示器。因此,在一些实施方案中,显示流水线可以例如通过在显示区域外的像素位置处应用黑色掩膜,调整矩形图像帧以在非矩形显示区域上显示。然而,在一些情况下,仅应用黑色掩膜可能导致可感知视觉伪影,诸如沿显示区域的边界的彩色边纹和/或沿显示区域的圆形边界的混叠。
为了便于改善感知的图像质量,可以至少部分地基于与图像中的每个图像像素的像素位置相关联的增益值来处理图像数据。当像素位置在显示区域内时,对应的显示器像素可以位于该像素位置。在一些实施方案中,由于显示器像素可包括多个子像素,因此像素位置可包括多个子像素位置,每个子像素位置与对应的增益值相关联。
在任何情况下,在一些实施方案中,显示流水线可以在与显示区域的边界相邻的像素位置处应用可编程边界增益值。通过应用对应的可编程边界增益值,可以使与边界相邻的显示器像素变暗,以减小在显示图像时沿边界产生可感知彩色边纹的可能性。
除此之外或另选地,显示流水线可确定与沿显示区域的圆形边界的抗混叠区域中的像素位置相关联的增益值。在一些实施方案中,可至少部分地基于像素位置与对应的圆形边界之间的距离确定与位于抗混叠区域中的像素位置相关联的增益值。例如,与像素位置相关联的增益值可以与对应的子像素位置和圆形边界之间的最短距离成反比。通过应用此类增益值,可以使与圆形边界相邻的显示器像素变暗,以减小在显示图像时沿圆形边界产生可感知混叠的可能性。
在一些实施方案中,可以经由增益映射指示与每个像素位置相关联的增益值。例如,未压缩增益映射可以明确地将每个像素位置关联(例如,映射)到增益值集。这样,未压缩增益映射的尺寸可以相对较大,因此存储在外部存储器中。
然而,在一些情况下,从外部存储器访问增益值可能影响处理效率和/ 或具体实施相关的成本,诸如显示流水线的尺寸(例如,硬件占用面积)。为了便于提高处理效率和/或降低具体实施相关的成本,在一些实施方案中,可以基于对应的未压缩增益映射确定压缩增益映射。由于压缩,压缩增益映射的尺寸通常较小,这可以使压缩增益映射能够存储在显示流水线的内部存储器中。因此,在这样的实施方案中,可以避免访问外部存储器以确定增益值,从而提高处理效率和/或减少直接存储器访问具体实施相关的成本。
在一些实施方案中,压缩增益映射可包括运行映射、位置映射和增益值映射。运行映射可以指示每个行运行中包括的未压缩增益映射的增益映射行的数量。因此,为了便于确定运行映射,可以将每个增益映射行分类为编码行或未编码行,并且可以将具有相同行分类的一个或多个连续增益映射行分组为行运行。
另外,位置映射可以指示每个编码行的增益运行中包括的像素位置。在一些实施方案中,可以至少部分地基于对应的编码行的每个增益运行中的像素位置的数量来指示增益运行中包括的像素位置。因此,为了便于确定位置映射,可将编码行中的每个增益映射条目分类为单位增益映射条目、零增益映射条目或者中间增益映射条目,并且具有相同条目分类的一个或多个连续增益映射条目可被分组为增益运行。为了便于提高压缩效率,在一些实施方案中,位置映射可相对于增益运行中的像素位置指示另一增益运行中的像素位置。另外,在一些实施方案中,位置映射可被熵编码以便于进一步提高压缩效率。
此外,增益值映射可以指示与每个中间增益运行中的像素位置相关联的增益值。为了便于提高压缩效率,在一些实施方案中,增益值映射可相对于与像素位置相关联的增益值指示与另一个(例如,相邻)像素位置相关联的增益值。另外,在一些实施方案中,增益值映射可被熵编码以便于进一步提高压缩效率。
当通过压缩增益映射指示时,显示流水线可以读取压缩增益映射以确定与每个像素位置相关联的增益值,例如,通过解压缩到对应的未压缩增益映射中。在一些实施方案中,显示流水线可通过读取运行映射来确定包括像素位置的增益映射行的行分类。另外,当增益映射行被分类为未编码行时,显示流水线可确定与像素位置相关联的增益值为一。
另一方面,当增益映射行被分类为编码行时,显示流水线可以通过读取位置映射来确定编码行中的每个增益运行中包括的像素位置。换句话说,显示流水线可以至少部分地基于位置映射来确定增益映射行中的每个增益映射条目的条目分类。当熵编码时,显示流水线可以对位置映射进行熵解码。
当与像素位置对应的增益映射条目被分类为单位增益映射条目时,显示流水线可以确定与像素位置相关联的增益值为一。另外,当与像素位置对应的增益映射条目被分类为零增益映射条目时,显示流水线可以确定与像素位置相关联的增益值是零。此外,当与像素位置对应的增益映射条目被分类为中间增益映射条目时,显示流水线可以通过读取增益值映射来确定与像素位置相关联的增益值。当熵编码时,显示流水线可以对增益值映射进行熵解码。
如上所述,在一些实施方案中,压缩增益映射可以以相对方式指示与像素位置相关联的增益值(例如,相对于另一像素位置)。在这样的实施方案中,显示流水线可在解压缩压缩增益映射时经历数据依赖性,从而限制解压缩效率(例如,用以确定与像素位置相关联的增益值的比率)。
为了便于提高解压缩效率,在一些实施方案中,可以例如通过将未压缩增益映射划分为多个未压缩增益映射,将像素位置和相关联的增益值分组为多个像素区域。通过压缩每个未压缩增益映射,可以确定各自对应于像素区域中的一个像素区域的多个压缩增益映射。这样,可以减小与不同像素区域中的像素位置相关联的增益值之间的数据依赖性。事实上,以这种方式实施多个压缩增益映射可以使显示流水线能够改变用以确定增益值的顺序,并且因此改变压缩增益映射的访问(例如,获取)模式。在一些实施方案中,显示流水线可以例如通过实施随机访问模式来控制增益值确定顺序以提高存储器访问效率。
附图说明
通过阅读以下详细描述并参考附图,可以更好地理解本发明的各个方面,在附图中:
图1是根据一个实施方案的包括用于显示图像的电子显示器的电子设备的框图;
图2是根据一个实施方案的图1的电子设备的示例;
图3是根据一个实施方案的图1的电子设备的另一个示例;
图4是根据一个实施方案的图1的电子设备的另一个示例;
图5是根据一个实施方案的图1的电子设备的另一个示例;
图6是根据一个实施方案的在图1的电子设备中实施的显示流水线的框图;
图7是根据一个实施方案的用于操作图6的显示流水线的过程的流程图;
图8是根据一个实施方案的图6的显示流水线中的子像素布局重采样器块和内部存储器的框图;
图9是根据一个实施方案的图8的设计设备和内部存储器的框图;
图10是根据一个实施方案的用于操作图10的设计设备的过程的流程图;
图11是根据一个实施方案的矩形图像帧的图形表示;
图12是根据一个实施方案的图11的矩形图像帧的左上部分中的图像像素的图形表示;
图13是根据一个实施方案的具有非矩形形状的显示区域的示例;
图14是根据一个实施方案的包括圆形边界的图13的显示区域的左上部分中的显示器像素的示例;
图15是根据一个实施方案的用于确定要应用于沿圆形边界的子像素的增益值的过程的流程图;
图16是根据一个实施方案的用于确定要沿图14的圆形边界应用的增益值的示例抗混叠区域;
图17是根据一个实施方案的用于确定要沿图14的圆形边界应用的增益值的另一个示例抗混叠区域;
图18是根据一个实施方案的未压缩增益映射的图形表示;
图19是根据一个实施方案的用于确定压缩增益映射的过程的流程图;
图20是根据一个实施方案的用于确定压缩增益映射中包括的运行映射的过程的流程图;
图21是根据一个实施方案的用于确定压缩增益映射中包括的位置映射的过程的流程图;
图22是根据一个实施方案的用于确定压缩增益映射中包括的增益值映射的过程的流程图;
图23是根据一个实施方案的用于操作图8的子像素布局重采样器块的过程的流程图;
图24是根据一个实施方案的用于从压缩增益映射中确定要由图8的子像素布局重采样器块实施的增益值的过程的流程图;
图25是根据一个实施方案的用于确定要由图8的子像素布局重采样器块实施的滤波器参数的过程的流程图;
图26是根据一个实施方案的用于至少部分地基于要在偏移子像素处应用的增益值来确定偏移滤波器相位值的过程的流程图;
图27是根据一个实施方案的用于应用增益值以确定显示器像素图像数据的过程的流程图;
图28是根据一个实施方案的用于放大显示器像素图像数据的过程的流程图;
具体实施方式
下文将描述本发明的一个或多个具体实施方案。这些所描述的实施方案仅为目前所公开的技术的示例。此外,为了提供这些实施方案的简明描述,在本说明书中可能未描述实际具体实施的所有特征。应当认识到,在任何此类实际具体实施的开发中,如任何工程学或设计项目中那样,必须要作出特定于许多具体实施的决策以实现开发者的具体目标,诸如符合可能随具体实施变化的与系统相关的约束条件和与事务相关的约束条件。此外,应当理解,此类开发努力可能是复杂且耗时的,但对于从本公开中受益的普通技术人员而言,其可能仍然是设计、制造和生产的常规任务。
在介绍本公开的各种实施方案的元件时,冠词“一个”、“一种”和“该/所述”旨在意指存在所述元件中的一个或多个。术语“包括” (“comprising”,“including”)和“具有”旨在被包括在内,并且意指可能存在除列出的元件之外的附加元件。此外,应当理解,参考本公开的“一个实施方案”或“实施方案”并非意图被解释为排除也结合所引述的特征的附加实施方案的存在。
本公开整体涉及电子显示器,所述电子显示器可用于将信息的视觉表示呈现为例如采用一个或多个图像帧的图像。为了显示图像,电子显示器可以至少部分地基于指示图像的目标特征的图像数据来控制来自其显示器像素的光发射。例如,图像数据可以指示图像的一部分(例如,图像像素)中的特定颜色分量的目标亮度(例如,明度),所述颜色分量在被混合(例如,平均)在一起时可以产生一系列不同颜色的感知。
通常,电子显示器中的每个显示器像素可以与要显示的图像中的图像像素相对应。换句话说,显示器像素和图像像素可以对应于像素位置。为了便于显示图像,显示器像素可以包括一个或多个子像素,每个子像素控制像素位置处的一个颜色分量的亮度。例如,显示器像素可以包括控制红色分量的亮度的红色子像素,控制绿色分量的亮度的绿色子像素,以及/或者控制蓝色分量的亮度的蓝色子像素。
然而,不同的电子显示器可以实施不同的子像素布局。在一些情况下,不同电子显示器中每个显示器像素的子像素的数量可不同。例如,在第一电子显示器中,每个显示器像素可包括三个子像素。另一方面,在第二电子显示器中,每个显示器像素可包括两个子像素。此外,其他电子显示器中的显示器像素可包括任何合适数量的子像素,例如,介于每个显示器像素一个子像素与每个显示器像素五个或更多个子像素之间。
另外,在一些情况下,在不同电子显示器的显示器像素中实施的子像素的颜色分量可以变化。例如,在第一电子显示器中,每个显示器像素可以包括红色子像素、绿色子像素和蓝色子像素。另一方面,在第二电子显示器中,显示器像素中的一些(例如,大约一半)可以各自包括绿色子像素和红色子像素,而其他显示器像素各自包括绿色子像素和蓝色子像素。此外,其他电子显示器中的显示器像素可包括颜色分量子像素的任何合适组合,例如,每个显示器像素具有相同颜色分量的多个子像素。
此外,在一些情况下,不同电子显示器的显示器像素内的子像素的位置可以变化。例如,在第一电子显示器中,子像素之间的空间(例如,距离)可以更小。这样,空间的可感知性可以更低,并且因此,显示器像素中的子像素通常可以大致认为是协同定位的。另一方面,在第二电子显示器中,由于每个子像素更像点光源,子像素之间的空间可能更大。这样,空间的可感知性可以更高,并且因此,第二电子显示器的显示器像素中的子像素通常可以被认为是彼此偏移的。例如,第二电子显示器中的显示器像素可以包括与对应图像像素协同定位的第一子像素和从对应图像像素偏移的第二子像素。
此外,在一些情况下,不同电子显示器中的子像素可以实施为产生具有不同形状的显示区域。例如,可以用具有矩形形状的第一显示区域实施第一电子显示器。换句话说,第一显示区域可以具有以大约90度角连接的四个直边界。另一方面,可以用具有非矩形形状的第二显示区域实施第二电子显示器。例如,第二显示区域可以具有与四个圆形(例如,弯曲)边界连接的四个直边界。
在一些情况下,图像数据源可以生成与要显示的图像的图像像素对应的图像数据。由于电子显示器常常具有矩形显示区域,所以图像数据源可生成对应于矩形图像的图像数据。这样,由于第一显示区域具有矩形形状,矩形图像中的每个图像像素可以与第一电子显示器中的显示器像素相对应。换句话说,每个像素位置可以对应于图像像素和显示器像素两者。
然而,由于实施为非矩形形状,矩形图像中的一些图像像素可以对应于第二电子显示器的第二显示区域之外的像素位置。例如,当矩形图像的顶部边界与第二显示区域的顶部边界对齐,并且矩形图像的左边界与第二显示区域的左边界对齐时,矩形图像左上角的图像像素可对应于第二显示区域的左上角圆形边界(例如,角)之外的像素位置。
然而,为了提高操作灵活性,图像数据源可输出相同的图像数据,而很少或不考虑电子显示器的子像素布局。例如,无论图像是要在第一电子显示器还是第二电子显示器上显示,图像数据源都可输出与矩形图像对应的图像数据。然而,在一些情况下,感知的图像质量可能受到电子显示器的子像素布局的影响。例如,第二电子显示器的子像素布局可以导致沿第二显示区域的边界(例如,顶部直边界、底部直边界、左侧直边界和/或右侧直边界)的可感知彩色边纹。除此之外或另选地,第二电子显示器的子像素布局可导致沿显示区域的圆形(例如,左上、右上、左下和/或右下) 边界的可感知混叠。
因此,本公开提供了用于例如通过至少部分地基于电子显示器的子像素布局处理图像数据,改善电子显示器的感知的图像质量的技术。在一些实施方案中,显示流水线可以在于电子显示器上显示对应图像之前接收和处理由图像数据源生成的图像数据。例如,显示流水线可以处理源(例如,RGB)格式的图像数据以确定显示(例如,GR或GB)格式的图像数据。更具体地,在一些实施方案中,显示流水线可通过滤波(例如,内插或采样)并将增益值应用于图像像素图像数据(例如,对应于图像像素的图像数据)来确定显示器像素图像数据(例如,与显示器像素对应的图像数据)。
在一些实施方案中,显示流水线可以通过至少部分地基于周围图像像素图像数据对图像像素图像数据进行滤波来确定显示器像素图像数据。例如,显示流水线可以通过应用低通滤波器来确定偏移子像素图像数据(例如,与偏移子像素对应的图像数据),该低通滤波器对周围图像像素的对应颜色分量图像数据进行相等平均。由于从周围图像像素偏移,以这种方式确定偏移子像素图像数据可以导致更渐进的亮度变化。
然而,至少部分地由于电子显示器的子像素布局,在一些情况下,更渐进的亮度变化可导致可感知视觉伪影,诸如沿显示区域的边界的彩色边纹和/或沿显示区域的圆形边界的混叠。例如,当显示器像素具有协同定位的绿色子像素时,沿显示区域的第一(例如,顶部或底部)直边界可以感知到绿色边纹。另外,当显示器像素交替地具有偏移的红色子像素或偏移的蓝色子像素时,可以感知沿显示区域的第二(例如,左侧或右侧)直边界的紫色边纹。此外,当显示器像素具有偏移子像素时,可以感知沿显示区域的圆形(例如,左上、右上、左下或右下)边界的混叠(例如,锯齿状)。
为了减小产生可感知视觉伪影的可能性,在一些实施方案中,显示流水线可以通过在滤波图像像素图像数据之后应用增益值以沿显示区域的边界调暗子像素来确定显示器像素图像数据。例如,为了减小产生可感知彩色边纹的可能性,显示流水线可以应用中间增益值(例如,大于零且小于一),以沿显示区域的边界(例如,直边界)调暗显示器像素中的子像素。另外,为了降低产生可感知混叠的可能性,显示流水线可以应用中间增益值,以沿显示区域的圆形边界调暗显示器像素中的子像素。
在一些实施方案中,可以至少部分地基于子像素和圆形边界之间的距离确定要沿圆形边界在显示器像素中的子像素处应用的增益值。例如,可以确定包括沿圆形边界的子像素位置的抗混叠区域。另外,与抗混叠区域中的每个子像素位置相关联的增益值可以与子像素位置和圆形边界之间的最短距离成反比。通过应用以这种方式确定的增益值,可以至少部分地基于电子显示器的子像素布局使沿圆形边界的子像素线性地变暗,以减小沿圆形边界产生可感知混叠的可能性。
另外,与电子显示器的显示区域和抗混叠区域之外的像素位置对应的增益值可以设定为零。通过应用以这种方式确定的增益值,可以应用黑色掩膜以使与显示区域之外的像素位置对应的图像数据中断。这样,可以调整矩形图像以便于在具有非矩形显示区域的电子显示器上进行显示。为了便于进一步改善感知的图像质量,在一些实施方案中,显示流水线可以至少部分地基于与对应像素位置相关联的增益值和/或与相邻像素位置相关联的增益值,适应性地调整应用于图像像素图像数据的滤波参数(例如,滤波器相位或滤波器系数)。
在一些实施方案中,显示流水线可以在处理对应的图像像素图像数据时计算与像素位置相关联的增益值。另外,在一些实施方案中,要沿显示区域的边界在显示器像素处应用的增益值可以存储在可编程寄存器中。例如,沿顶部直边界应用于显示器像素的第一边界增益值可存储在第一可编程寄存器中,沿底部直边界应用于显示器像素的第二边界增益值可存储在第二可编程寄存器中,沿左侧直边界应用于显示器像素的第三增益值可存储在第三可编程寄存器中,并且沿右侧直边界应用于显示器像素的第四增益值可存储在第四可编程寄存器中。
此外,在一些实施方案中,可以预先确定与像素位置相关联的增益值,因为电子显示器的特征(例如,分辨率、子像素布局和/或显示区域形状)通常是固定的。例如,设计设备可以确定增益值并将其存储为增益映射,增益映射指示与每个像素位置相关联的一组增益值。在一些实施方案中,与像素位置相关联的增益值集可包括对应显示器像素中的每个颜色分量的增益值。例如,当显示器像素包括红色子像素和绿色子像素时,与其像素位置相关联的增益值集可以包括红色增益值和绿色增益值。另外,当显示器像素包括蓝色子像素和绿色子像素时,与其像素位置相关联的增益值集可以包括蓝色增益值和绿色增益值。
在一些实施方案中,未压缩增益映射可以明确地将每个像素位置关联 (例如,映射)到对应的增益值集。换句话说,未压缩增益映射中的条目的数量可以大于或等于电子显示器的分辨率。这样,未压缩增益映射的尺寸(例如,比特数)可能相对较大-特别是随着电子显示器的分辨率的持续增加。为了适应其尺寸,在一些实施方案中,未压缩增益映射可以存储在外部存储器中,并且因此由显示流水线经由直接存储器访问(DMA)信道从外部存储器检索。然而,经由直接存储器访问信道访问外部存储器可能影响处理效率和/或具体实施相关的成本,诸如显示流水线的功耗和/或尺寸 (例如,硬件占地面积)。
为了便于提高处理效率和/或降低具体实施相关的成本,在一些实施方案中,可以使用压缩增益映射来指示增益值。例如,设计设备可以压缩未压缩增益映射以确定压缩增益映射。由于压缩,压缩增益映射的尺寸通常小于未压缩增益映射。在一些实施方案中,减小的尺寸可以使得能够将压缩增益映射存储在显示流水线的内部存储器中。因此,在这样的实施方案中,可以避免访问外部存储器以确定增益值,从而提高处理效率和/或减少直接存储器访问具体实施相关的成本。
为了便于压缩,在一些实施方案中,未压缩增益映射中的每个增益映射行可以至少部分地基于由其对应的增益映射条目指示的增益值被分类为未编码行或编码行。例如,当增益映射行指示的每个增益值为一时,设计设备可以将增益映射行分类为未编码行。另一方面,当由增益映射行指示的一个或多个增益值小于一时,设计设备可以将增益映射行分类为编码行。换句话说,编码行中的增益值可以是零、一或中间增益值(例如,大于零且小于一)。
另外,基于行分类,每个增益映射行可以被分组为行运行。例如,设计设备可以将一个或多个连续编码行分组为编码行运行。另外,设计设备可以将一个或多个连续未编码行分组为未编码行运行。在一些实施方案中,行运行可以在编码行运行和未编码行运行之间交替。
此外,每个编码行中的增益映射条目可以被分组为增益运行。例如,当每个增益映射条目指示至少一个中间增益值时,设计设备可将一个或多个连续增益映射分组为中间增益运行。另外,当由增益映射条目指示的每个增益值为零时,设计设备可将一个或多个连续增益映射条目分组为零增益运行。此外,当由增益映射条目指示的每个增益值为一时,设计设备可将一个或多个连续增益映射条目分组为单位增益运行。在一些实施方案中,编码行中的增益运行可以在位置(例如,零或一)增益运行和中间增益运行之间交替。
另外,在一些实施方案中,压缩增益映射可包括运行映射、位置映射、增益值映射和例如存储在内部存储器的可编程寄存器中的一个或多个指示符。运行映射可以指示每行运行中的增益映射行的数量,并且因此至少部分地基于将增益映射行分组为行运行来确定。在一些实施方案中,每个运行映射条目可明确地指示对应行运行中的增益映射行的数量。例如,当第一行运行包括前十个增益映射行并且第二行运行包括接下来五个增益映射行时,设计设备可以在第一运行映射条目中指示值10,并且在第二运行映射条目中指示值5。
另外,在一些实施方案中,起始行运行指示符可以指示在未压缩增益映射中标识的第一行运行是编码行运行还是未编码行运行。例如,当第一行运行是未编码行运行时,设计设备可以在起始行运行指示符中指示第一值(例如,0位)。另一方面,当第一行运行是编码行运行时,设计设备可以在起始行运行指示符中指示第二值(例如,1位)。
位置映射可以指示与每个编码行中的增益运行相关联的像素位置。在一些实施方案中,每个位置映射条目可以通过明确地指示增益运行中包括的增益映射条目的数量来指示与增益运行相关联的像素位置。例如,当第一增益运行包括增益映射行的前四个增益映射条目并且第二增益运行包括增益映射行的接下来六个增益映射条目时,设计设备可以在第一位置映射条目中指示值4,并且在第二运行映射条目中指示值6。
为了便于提高压缩效率,在其他实施方案中,每个位置映射条目可以相对于增益运行中的像素位置指示另一增益运行中的像素位置。例如,当第一增益运行包括第一增益映射行的前四个增益映射条目且第二增益运行包括第二增益映射行的前五个增益映射条目时,设计设备可以确定一个为正的像素位置差,因为第二增益运行包括比第一增益运行多一个的像素位置。为了指示该一个正的位置差,设计设备可以指示第一位置映射条目中的第一值(例如,0位)和第二位置映射条目中的值1。另外,当第三增益运行包括第一增益映射行的接下来六个增益映射条目并且第四增益运行包括第二增益映射行的接下来五个增益映射条目时,设计设备可以确定一个为负的像素位置差,因为第四增益运行包括比第三增益运行少一个的像素位置。为了指示该一个负的位置差,设计设备可指示第三位置映射条目中的第二值(例如,1位)和第四位置映射条目中的值1。在一些实施方案中,可以对像素位置差进行熵编码以便于进一步提高压缩效率。
增益值映射可以指示与每个中间增益运行中的像素位置相关联的增益值。在一些实施方案中,增益值映射条目可以明确地指示与像素位置相关联的增益值。例如,当显示器像素包括第一(例如,绿色)子像素和第二 (例如,红色或蓝色)子像素时,设计设备可在第一增益值映射条目中明确地指示与第一子像素相关联的第一增益值,并且在第二增益值映射条目中指示与第二子像素相关联的第二增益值。为了便于提高压缩效率,一些增益值映射条目可相对于与像素位置相关联的增益值来指示与另一像素位置相关联的增益值。例如,当与当前像素位置相关联的第一增益值与与紧接在前面的(例如,左侧相邻)像素位置相关联的第二增益值相同时,设计设备可在与当前像素位置相关联的增益值映射条目中指示第一值(例如,1位)。另一方面,当第一增益值和第二增益值不同时,设计设备可以在增益映射条目中指示第二值(例如,0位)。在一些实施方案中,可以对明确指示的增益值进行熵编码以便于进一步提高压缩效率。
如上所述,显示流水线可以至少部分地基于与对应像素位置相关联的增益值来处理图像像素图像数据。因此,当使用压缩增益映射来指示时,显示流水线可以解压缩压缩增益映射以确定与一个或多个像素位置相关联的增益值(例如,红色增益值、蓝色增益值和/或绿色增益值)。在一些实施方案中,显示流水线可以读取运行映射(例如,经由比特流)和/或开始行运行指示符以确定图像像素图像数据是对应于编码行运行还是未编码行运行中的像素位置。这样,显示流水线可以确定像素位置是在编码行还是在未编码行中。
如上所述,当由其增益映射条目指示的每个增益值等于一时,可以将增益映射行分类为未编码行。因此,当显示流水线确定像素位置在未编码行中时,显示流水线可确定与像素位置相关联的每个增益值等于一。另外,如上所述,当由其增益映射条目指示的一个或多个增益值小于一时,增益映射行可以被分类为编码行。因此,当显示流水线确定像素位置在编码行中时,显示流水线可以(例如,经由比特流)读取位置映射以确定像素位置是在位置增益运行中还是在中间增益运行中。另外,当经由熵编码的像素位置差来指示时,显示流水线可以对位置映射进行熵解码以确定像素位置差,并且通过相对于另一增益运行(例如,在顶部相邻增益映射行中)应用像素位置差来确定增益运行中的像素位置。
如上所述,当每个增益映射条目包括至少一个中间增益值(例如,大于零且小于一)时,可以将一个或多个连续增益映射条目分类为中间增益运行。因此,当显示流水线确定像素位置处于中间增益运行时,显示流水线可以(例如,经由比特流)读取增益值映射以确定与像素位置相关联的增益值集。另外,当对增益值进行熵编码时,显示流水线可以对增益值映射进行熵解码以确定与像素位置相关联的增益值。
如上所述,位置增益运行可以是零增益运行或单位增益运行。因此,当显示流水线确定像素位置在位置增益运行中时,显示流水线可以读取对应的位置增益值指示符以确定像素位置是在零增益运行中还是在单位增益运行中。另外,如上所述,当每个包括的增益值为零时,可以将一个或多个连续增益映射条目分类为零增益运行。因此,当对应的位置增益值指示符指示像素位置在零增益运行中时,显示流水线可确定与像素位置相关联的每个增益值等于零。此外,如上所述,当每个包括的增益值为一时,可以将一个或多个连续增益映射条目分类为单位增益运行。因此,当对应的位置增益值指示符指示像素位置在单位增益运行中时,显示流水线可确定与像素位置相关联的每个增益值等于一。
至少部分地基于增益值,显示流水线可以处理图像像素图像数据以确定显示器像素图像数据,其可以用于在电子显示器上显示对应的图像。例如,通过应用增益值,显示流水线可以应用黑色掩膜,其调整矩形图像以在非矩形显示区域上显示。另外,显示流水线可以至少部分地基于增益值自适应地(例如,动态地)调整滤波器参数,以改善沿图像中的边缘的锐度(例如,急剧梯度过渡)。此外,通过应用增益值,显示流水线可以沿显示区域边界调暗显示器像素,以减小沿显示区域边界产生可感知视觉伪影(例如,混叠和/或边纹)的可能性。这样,显示流水线可以在于电子显示器上显示对应图像之前至少部分地基于从(例如,压缩或未压缩的)增益映射确定的增益值来处理图像数据,以改善电子显示器的感知的图像质量。
为便于说明,利用电子显示器12的电子设备10的一个实施方案示于图1中。如将在下文更详细描述的那样,电子设备10可以是任何适当的电子设备,诸如手持式电子设备、平板电子设备、笔记本电脑等。因此,应当指出的是,图1仅为特定具体实施的一个示例,并且旨在示出可存在于电子设备10中的部件的类型。
在所描绘的实施方案中,电子设备10包括电子显示器12、输入设备 14、输入/输出(I/O)端口16、具有一个或多个处理器或处理器内核的处理器内核复合体18、局部存储器20、主存储器存储设备22、网络接口24、电源26和图像处理电路27。图1所述的各种部件可包括硬件元件(例如,电路)、软件元件(例如,存储指令的有形非暂态计算机可读介质)、或者硬件元件和软件元件的组合。应当指出的是,所描绘的各种部件可被组合成较少部件或分开成附加部件。例如,局部存储器20和主存储器存储设备 22可以被包括在单个部件中。另外,图像处理电路27(例如图形处理单元)可被包括在处理器内核复合体18中。
如图所示,处理器内核复合体18与局部存储器20和主存储器存储设备22可操作地耦接。在一些实施方案中,局部存储器20和/或主存储器存储设备22可以是有形非暂态计算机可读介质,其存储可由处理器内核复合体18执行的指令和/或由处理器内核复合体18处理的数据。例如,局部存储器20可包括随机存取存储器(RAM),并且主存储器存储设备22可包括只读存储器(ROM)、可重写非易失性存储器(诸如闪存存储器、硬盘驱动器、光盘等等)。
在一些实施方案中,处理器内核复合体18可执行存储在局部存储器 20和/或主存储器存储设备22中的指令以执行诸如生成源图像数据的操作。因此,处理器内核复合体18可包括一个或多个通用微处理器、一个或多个特定于应用的处理器(ASIC)、一个或多个现场可编程逻辑阵列(FPGA) 或它们的任意组合。
如图所示,处理器内核复合体18也与网络接口24可操作地耦接。使用网络接口24,电子设备10可以通信地耦接到网络和/或其他电子设备。例如,网络接口24可将电子设备10连接到个人局域网(PAN)(诸如蓝牙网络)、局域网(LAN)(诸如802.11x Wi-Fi网络)和/或广域网(WAN)(诸如 4G或LTE蜂窝网络)。这样,网络接口24可以使电子设备10能够将图像数据发送到网络并且/或者从网络接收图像数据。
另外,如图所示,处理器内核复合体18可操作地耦接至电源26。在一些实施方案中,电源26可以提供电力以操作处理器内核复合体18和/或电子设备10中的其他部件。因此,电源26可包括任何合适的能量源,诸如可再充电的锂聚合物(Li-poly)电池和/或交流电(AC)电源转换器。
另外,如图所示,处理器内核复合体18与I/O端口16和输入设备14 可操作地耦接。在一些实施方案中,I/O端口16可启用电子设备10以与各种其他电子设备进行交互。另外,在一些实施方案中,输入设备14可以使用户能够与电子设备10交互。例如,输入设备14可包括按钮、键盘、鼠标、触控板等。除此之外或另选地,电子显示器12可以包括触摸感测部件,其通过检测触摸其屏幕(例如,电子显示器12的表面)的物体的发生和/或位置来启用到电子设备10的用户输入。
除了启用用户输入之外,电子显示器12还可以通过显示图像(例如,以一个或多个图像帧)便于提供信息的视觉表示。例如,电子显示器12可以显示操作系统的图形用户界面(GUI)、应用程序界面、文本、静止图像或视频内容。为了便于显示图像,电子显示器12可包括具有一个或多个显示器像素的显示面板。另外,每个显示器像素可以包括一个或多个子像素,每个子像素控制一种颜色分量(例如,红色、蓝色或绿色)的亮度。
如上所述,电子显示器12可以通过至少部分地基于对应的图像数据 (例如,图像像素图像数据和/或显示器像素图像数据)控制子像素的亮度来显示图像。在一些实施方案中,可以例如经由网络接口24和/或I/O端口 16从另一电子设备接收图像数据。除此之外或另选地,图像数据可以由处理器内核复合体18和/或图像处理电路27生成。
如上所述,电子设备10可以是任何合适的电子设备。为了便于说明,合适的电子设备10,尤其是手持设备10A的一个示例示于图2中。在一些实施方案中,手持设备10A可以是便携式电话、媒体播放器、个人数据管理器、手持式游戏平台等等。例如,手持设备10A可以是智能电话,诸如可购自Apple inc.的任何
Figure BDA0001784115160000171
型号。
如图所示,手持设备10A包括壳体28(例如外壳)。在一些实施方案中,壳体28可保护内部部件免受物理性损坏和/或屏蔽内部部件使其免受电磁干扰。另外,如图所示,壳体28围绕着电子显示器12。在所描绘的实施方案中,电子显示器12正在显示具有一系列图标32的图形用户界面(GUI) 30。举例来讲,当通过输入设备14或电子显示器12的触摸感测部件选择图标32时,可以启动应用程序。
此外,如图所示,输入设备14通过壳体28打开。如上所述,输入设备14可使得用户能够与手持设备10A进行交互。例如,输入设备14可使得用户能够激活或去激活手持设备10A、将用户界面导航至home屏幕、将用户界面导航到用户可配置的应用屏幕、激活语音识别特征结构、提供音量控制和/或在震动和响铃模式之间切换。如图所示,I/O端口16也通过壳体28打开。在一些实施方案中,I/O端口16可包括例如连接至外部设备的音频插孔。
为了进一步说明,合适的电子设备10,尤其是平板设备10B的另一示例示于图3中。为了示意性的目的,平板设备10B可为可购自Apple inc.的任何
Figure BDA0001784115160000172
型号。合适的电子设备10,尤其是计算机10C的另一个示例示于图4中。为了示意性的目的,计算机10C可为可购自Apple Inc.的任何
Figure BDA0001784115160000181
Figure BDA0001784115160000182
型号。合适的电子设备10,尤其是手表10D的另一个示例示于图5中。为了示意性的目的,手表10D可为可购自Apple Inc.的任何 Apple
Figure BDA0001784115160000183
型号。如图所示,平板设备10B、计算机10C和手表10D各自还包括电子显示器12、输入设备14、I/O端口16和壳体28。
如上所述,电子显示器12可以至少部分地基于例如从处理器内核复合体18和/或图像处理电路27接收的图像数据来显示图像。另外,如上所述,可以在用于在电子显示器12上显示图像之前处理图像数据。在一些实施方案中,显示流水线可以例如基于与对应像素位置相关联的增益值来处理图像数据,以便于改善电子显示器12的感知的图像质量。
为便于说明,图6中示出了包括显示流水线36的电子设备10的一部分34。在一些实施方案中,显示流水线36可以由电子设备10中的电路、电子显示器12中的电路或其组合来实施。因此,显示流水线36可包括在处理器内核复合体18、图像处理电路27、电子显示器12中的定时控制器 (TCON)或它们的任意组合中。
如图所示,电子设备10的部分34还包括图像数据源38、显示驱动器 40、控制器42和外部存储器44。在一些实施方案中,控制器42可以控制显示流水线36、图像数据源38和/或显示驱动器40的操作。为了便于控制操作,控制器42可包括控制器处理器50和控制器存储器52。在一些实施方案中,控制器处理器50可以执行存储在控制器存储器52中的指令。因此,在一些实施方案中,控制器处理器50可以包括在处理器内核复合体 18、图像处理电路27、电子显示器12中的定时控制器、单独的处理模块或它们的任意组合中。另外,在一些实施方案中,控制器存储器52可以包括在局部存储器20、主存储器存储设备22、外部存储器44、显示流水线36 的内部存储器46、独立的有形非暂态计算机可读介质或它们的任意组合中。
在所描绘的实施方案中,显示流水线36通信地耦接到图像数据源 38。这样,显示流水线36可以从图像数据源38接收与要在电子显示器12 上显示的图像对应的图像数据,例如,采用源(例如,RGB)格式和/或作为矩形图像。在一些实施方案中,图像数据源38可以包括在处理器内核复合体18、图像处理电路27或它们的组合中。
如上所述,显示流水线36可以处理从图像数据源38接收的图像数据。为了处理图像数据,显示流水线36可包括一个或多个图像数据处理块 54。例如,在所描绘的实施方案中,图像数据处理块54包括子像素布局重采样器(SPLR)块56。在一些实施方案中,图像数据处理块54可以除此之外或另选地包括环境自适应像素(AAP)块、动态像素背光(DPB)块、白点校正(WPC)块、子像素布局补偿(SPLC)块、老化补偿(BIC)块、面板响应校正 (PRC)块、抖动块、子像素均匀性补偿(SPUC)块、内容帧依赖持续时间 (CDFD)块、环境光感测(ALS)块或它们的任意组合。
如下面将更详细描述的,显示流水线36可以至少部分地基于存储在外部存储器44和/或内部存储器46中的数据来处理从图像数据源38接收的图像数据。通常,将数据存储在外部存储器44中相对于内部存储器46可以呈现各种具体实施相关的成本和/或处理效率权衡。例如,至少部分地由于物理尺寸限制,增加外部存储器44的存储容量可能比增加内部存储器46 的存储容量更容易。这样,外部存储器44的存储容量通常可以大于内部存储器46的存储容量。
另外,对外部存储器44和内部存储器46的访问可不同。例如,内部存储器46可以专用于显示流水线36。换句话说,存储在内部存储器46的数据可更容易被显示流水线36访问(例如,具有减少的延迟),这可便于提高显示流水线36的处理效率。相比之下,由于在显示流水线36的外部,显示流水线36可经由直接存储器访问(DMA)信道58访问外部存储器 44。然而,为了以这种方式提供数据访问,可以用增加的带宽来实施直接存储器访问信道58,这增加了具体实施相关的成本。此外,当与其他部件共享外部存储器44时,可能影响数据访问延迟,并且因此影响显示流水线 36的处理效率。
在处理之后,显示流水线36可以将处理后的图像数据诸如显示器像素图像数据输出到显示驱动器40。至少部分地基于处理的图像数据,显示驱动器40可以将模拟电信号施加到电子显示器12的显示器像素,从而以一个或多个图像帧显示图像。这样,显示流水线36可以操作以便于在电子显示器12上提供信息的视觉表示。
为便于说明,图7中描述了用于操作显示流水线36的过程60的一个实施方案。通常,过程60包括接收图像像素图像数据(过程框62),处理图像像素图像数据以确定显示器像素图像数据(过程框64),以及输出显示器像素图像数据(过程框66)。在一些实施方案中,可以基于在显示流水线36中形成的电路连接来实施过程60。除此之外或另选地,在一些实施方案中,过程60可通过使用处理电路诸如控制器处理器50执行存储在有形非暂态计算机可读介质诸如控制器存储器52中的指令来实施。
如上所述,显示流水线36可以从图像数据源38接收图像像素图像数据,该图像像素图像数据指示图像中的点(例如,图像像素)处的颜色分量的目标亮度(过程框62)。在一些实施方案中,图像像素图像数据可以对应于矩形图像。另外,在一些实施方案中,图像像素图像数据可以是源格式。例如,当源格式是RGB格式时,图像像素图像数据可以指示对应像素位置处的红色分量的目标亮度、蓝色分量的目标亮度以及绿色分量的目标亮度。
另外,控制器42可以指示显示流水线36处理图像像素图像数据以确定显示器像素图像数据,其指示电子显示器12的显示器像素处的颜色分量的目标亮度(过程框64),并且将显示器像素图像数据输出到显示驱动器 40(过程框66)。为了确定显示器像素图像数据,显示流水线36可以将图像数据从源格式转换为显示格式。在一些实施方案中,显示流水线36可确定显示格式可以至少部分地基于电子显示器12中的子像素的布局。例如,当一些显示器像素包括绿色和红色子像素而其他显示器像素包括绿色和蓝色子像素时,显示格式可以是绿-红和绿-蓝(GRGB)格式。
为便于说明,包括子像素布局重采样器块56的显示流水线36的一部分68在图8中示出。如图所示,子像素布局重采样器块56接收与当前图像像素对应的图像像素图像数据70,并且输出与当前显示器像素对应的显示器像素图像数据72。在一些实施方案中,子像素布局重采样器块56可以从另一图像数据处理块54和/或从图像数据源38接收图像像素图像数据 70。另外,在一些实施方案中,子像素布局重采样器块56可以将显示器像素图像数据72输出到另一图像数据处理块54和/或显示驱动器40。
为了便于生成显示器像素图像数据72,子像素布局重采样器块56可以包括去γ处理块78、边缘检测块80、滤波器块82、增益解压缩块84、边界检测块86和重新γ处理块88。在一些实施方案中,图像像素图像数据 70可以处于伽马(例如,非线性)域中。为了便于后续处理,去γ处理块 78可以将图像像素图像数据70转换为线性域。
另外,边缘检测块80可确定边缘参数,诸如在当前显示器像素的偏移子像素处出现边缘的可能性和/或在偏移子像素处的边缘的预期方向。在一些实施方案中,边缘检测块80可至少部分地基于偏移子像素的特征诸如偏移子像素周围区域的梯度来确定边缘参数。为了便于确定特征,边缘检测块80可以确定指示特征的统计值。例如,边缘检测块80可以确定偏移子像素周围的图像像素块之间的差值度量(例如,绝对差之和),其可以指示偏移子像素周围的梯度,并且因此用于确定边缘参数。
在一些实施方案中,图像数据缓冲器76可以存储与其他图像像素(例如,在与当前图像像素相邻的像素位置处)相对应的图像数据。换句话说,帧缓冲器可以存储与偏移子像素周围的图像像素块对应的图像数据。因此,为了便于确定边缘参数,子像素布局重采样器块56可以通信地耦接到图像数据缓冲器76。
此外,滤波器块82可以至少部分地基于边缘参数将图像像素图像数据从源(例如,RGB)格式转换为显示(例如,GRGB)格式。为了转换成显示格式,在一些实施方案中,滤波器块82可以确定滤波器参数并将滤波器参数应用于图像像素图像数据70。例如,滤波器块82可以对采用RGB 的图像像素图像数据70进行滤波(例如,采样),以生成采用绿-红(GR) 或绿-蓝(GB)格式的显示器像素图像数据72。换句话说,滤波器块82可以确定与偏移子像素相对应的图像数据和与当前显示器像素的协同定位的子像素相对应的图像数据。
在一些实施方案中,滤波器块82可以至少部分地基于与当前图像像素的当前像素位置相关联的增益值来确定要应用于图像像素图像数据70的滤波器参数。另外,在滤波之后,滤波器块82可以将与当前像素位置相关联的增益值应用于显示器像素图像数据72。在一些实施方案中,显示流水线 36可以在算法上计算与像素位置相关联的增益值。
除此之外或另选地,可以预先确定增益值并经由增益映射存储增益值。在一些实施方案中,未压缩增益映射可以明确地将每个像素位置与一组增益值相关联(例如,映射)。与像素位置相关联的该组增益值可包括该像素位置处的显示器像素的每个子像素的一个增益值。例如,当显示器像素包括红色子像素、蓝色子像素和绿色子像素时,与其像素位置相关联的一组增益值可包括红色增益值、蓝色增益值以及绿色增益值。另外,当显示器像素包括绿色子像素和红色子像素时,与其像素位置相关联的该组增益值可包括红色增益值和绿色增益值。此外,当显示器像素包括绿色子像素和蓝色子像素时,与其像素位置相关联的该组增益值可包括蓝色增益值和绿色增益值。
由于未压缩增益映射将增益值集至少与对应于每个显示器像素的像素位置相关联,因此未压缩增益映射的尺寸基于电子显示器12的分辨率而改变。换句话说,未压缩增益映射的尺寸可能相对较大,特别是随着电子显示器的分辨率继续增加。因此,在一些实施方案中,未压缩增益映射可以存储在外部存储器44中并且经由直接存储器访问信道58访问。
然而,如上所述,为显示流水线36提供对外部存储器44的访问可能影响具体实施相关的成本和/或处理效率。因此,在一些实施方案中,指示与每个像素位置相关联的增益值的数据可以存储在内部存储器46中。例如,在所描绘的实施方案中,内部存储器46存储可通过压缩对应的未压缩增益映射确定的压缩增益映射90,并且存储一个或多个可编程边界增益值指示符92,每个指示符指示将沿对应(例如,顶部、底部、左侧或右侧) 显示区域边界应用于显示器像素的增益值。
因此,为了便于确定与当前像素位置相关联的增益值,增益解压缩块 84可以解压缩压缩增益映射90。另外,边界检测块86可以确定当前显示器像素是否沿显示区域的边界,并且在当前显示器像素沿边界时确定可编程边界增益值指示符92中的对应一个。如上所述,至少部分地基于该增益值,子像素布局重采样器块56可以处理图像像素图像数据70以确定显示器像素图像数据72。由于在线性域中确定,重新γ处理块88可以将显示器像素图像数据72转换为伽马域。另外,由于在显示格式中,子像素布局重采样器块56可以将显示器像素图像数据72放大为源格式。
因此,为了便于确定显示器像素图像数据72,可以确定压缩增益映射 90和可编程边界增益值指示符92并将其存储在内部存储器46中。在一些实施方案中,设计设备可以至少部分地基于对应的未压缩增益映射来确定压缩增益映射90。另外,在一些实施方案中,设计设备可在部署显示流水线36和/或电子显示器12之前将压缩增益映射90和可编程边界增益值指示符92存储在内部存储器46中。
为便于说明,图9中示出了通信地耦接到内部存储器46的设计设备 94的一个实施方案。另外,压缩增益映射90的一个示例存储在内部存储器 46中。应当理解,示例性压缩增益映射90仅仅是说明性的而非限制性的。换句话说,其他实施方案中的压缩增益映射90可以例如基于由设计设备94 实施的压缩技术而变化。
如上所述,设计设备94可以确定压缩增益映射90并将其存储在内部存储器46中。为了便于确定压缩增益映射90,设计设备94可包括设备处理器96和设备存储器98。在一些实施方案中,设备处理器96可以执行存储在设备存储器98中的指令。因此,在一些实施方案中,设备处理器96 可以包括在处理器内核复合体18、图像处理电路27、电子显示器12中的定时控制器、控制器处理器50、单独的处理模块或它们的任意组合中。另外,在一些实施方案中,设备存储器98可以包括在局部存储器20、主存储器存储设备22、外部存储器44、内部存储器46、控制器存储器52、独立的有形非暂态计算机可读介质或它们的任意组合中。
在所描绘的实施方案中,压缩增益映射90包括运行映射100、位置映射102、增益值映射104和可以存储在内部存储器46的可编程寄存器106 中的一个或多个指示符。在一些实施方案中,运行映射100可以指示增益映射行的数量,并且因此指示每个行运行中包括的像素位置行。如下面将更详细描述的,可以将各自仅包括单位增益值的一个或多个连续增益映射行分组为未编码行运行。另外,可以将各自包括至少一个中间增益值或零增益值的一个或多个连续增益映射行分组为编码行运行。因此,如下面将更详细描述的,可以至少部分地基于运行映射100确定包括像素位置的行运行。
在一些实施方案中,起始行运行指示符108可指示行运行是编码行运行还是未编码行运行。例如,为零的起始行运行指示符108可以指示行运行是编码运行,并且为一的起始行运行指示符108可以指示行运行是未编码运行,或者反之亦然。在一些实施方案中,起始行运行指示符108可以与每个行运行相关联以明确地指示对应行运行的分类。为了便于减小压缩增益映射90的尺寸,在其他实施方案中,当行运行可在编码行运行和未编码行运行之间交替时,起始行运行指示符108可以仅与第一(例如,顶部)行运行相关联。因此,如下面将更详细描述的,可以至少部分地基于运行映射100和起始行运行指示符108确定行运行的分类,并且因此确定包括像素位置的增益映射行。
另外,在一些实施方案中,位置映射102可以指示包括在每个编码行的增益运行中的像素位置。如下面将更详细描述的,可以将各自包括至少一个中间(例如,在零和一之间)增益值的一个或多个连续增益映射条目分组为中间增益运行。另外,可以将各自仅包括零增益值或仅包括单位增益值的一个或多个连续增益映射条目分组为位置增益运行。换句话说,位置增益运行可以是零增益运行或单位增益运行。
为了便于确定增益运行中包括的像素位置,在一些实施方案中,位置映射102可以指示增益运行中包括的像素位置的数量。另外,在一些实施方案中,编码行可在位置增益运行和中间增益运行之间交替。此外,在一些实施方案中,位置映射102可以指示相对于第二增益运行中包括的像素位置的第一增益运行中包括的像素位置。因此,如下面将更详细描述的,可以至少部分地基于位置映射100确定包括像素位置的增益运行。
在一些实施方案中,位置增益值指示符110可以指示与对应位置运行中的每个像素位置相关联的增益值。例如,为零的位置增益值指示符110 可指示与对应位置运行中的像素位置相关联的每个(例如,红色、绿色和/ 或蓝色)增益值是零。另外,为一的位置增益值指示符110可指示与对应位置运行中的像素位置相关联的每个增益值为一。在一些实施方案中,位置增益值指示符110可以与每个位置运行相关联。因此,如下面将更详细描述的,可以至少部分地基于对应的位置增益值指示符110确定与位置运行中的像素位置相关联的增益值。
此外,在一些实施方案中,增益值映射104可以指示与每个中间增益运行中的像素位置相关联的增益值。在一些实施方案中,与像素位置相关联的增益值集可以包括像素位置处的显示器像素的每个子像素一个增益值。例如,当中间增益运行中的像素位置处的显示器像素包括三个子像素时,增益值映射104可以将该像素位置与三个增益值相关联。另外,当中间增益运行中的像素位置处的显示器像素包括协同定位的子像素和偏移的子像素时,增益值映射104可以将该像素位置与协同定位的增益值和偏移增益值相关联。
除此之外或另选地,与像素位置相关联的增益值集可以包括像素位置处的显示器像素的每个颜色分量一个增益值。例如,当中间增益运行中的像素位置处的显示器像素包括红色子像素和绿色子像素时,增益值映射104 可将该像素位置与红色增益值和绿色子像素相关联。另外,当中间增益运行中的像素位置处的显示器像素包括蓝色子像素和绿色子像素时,增益值映射104可将该像素位置与蓝色增益值和绿色子像素相关联。因此,如下面将更详细描述的,可以至少部分地基于增益值映射104确定与中间增益运行中的像素位置相关联的增益值。
用于操作设计设备94的过程112的一个实施方案在图10中描述。通常,过程112包括确定未压缩增益映射(过程框114),确定压缩增益映射 (过程框116),以及存储压缩增益映射(过程框118)。在一些实施方案中,过程112可通过使用处理电路诸如设备处理器96执行存储在有形非暂态计算机可读介质诸如设备存储器98中的指令来实施。
因此,在一些实施方案中,设计设备94可确定未压缩增益映射(过程框114)。如上所述,未压缩增益映射可以明确地将每个像素位置关联(例如,映射)到增益值集。另外,在一些实施方案中,可以至少部分地基于电子显示器12的子像素布局,与从图像数据源38接收的图像像素图像数据70对应的图像的形状,以及/或者电子显示器12的显示区域形状来确定未压缩增益映射。
为便于说明,图11中示出了示例性矩形图像帧120。如图所示,矩形图像帧120包括由四个90度角124连接的四个直边界125。例如,矩形图像框120具有连接在左上90度角124A处的顶部直边界125A和左侧直边界125B。为了显示矩形图像帧120,显示流水线36可以接收与矩形图像帧 120中的每个图像像素相对应的图像像素图像数据70。
为便于说明,图12中示出了矩形图像帧120的左上部分122中的图像像素126。在所描绘的实施方案中,每个图像像素126对应于像素位置。如上所述,与图像像素126对应的图像像素图像数据70可指示图像中的像素位置处的目标亮度。例如,与第一图像像素126A对应的图像像素图像数据 70可以指示第一像素位置处的红色分量的目标亮度、蓝色分量的目标亮度和绿色分量的目标亮度。
然而,如上所述,不同的电子显示器12可以具有不同的显示区域形状。为便于说明,图13中示出了非矩形显示区域128的示例。应当理解,所描绘的显示区域仅仅是说明性的而非限制性的。换句话说,在其他电子显示器12中实施的非矩形显示区域的形状可以改变。例如,电子显示器12 可以用圆形(例如,非矩形)显示区域实施。
如图所示,非矩形显示区域128包括通过圆形(例如,弯曲)边界 130连接的多个直边界134。例如,非矩形显示区域128包括经由左上圆形边界130A连接的顶部直边界134A和左侧直边界134B。然而,在一些实施方案中,非矩形显示区域128可包括一个或多个90度角132。
如上所述,电子显示器12可以基于对应的图像数据显示图像。例如,电子显示器12可以基于由处理图像像素图像数据70生成的显示器像素图像数据72通过控制其显示器像素的亮度来显示图像。因此,非矩形显示区域128可以由与在电子显示器12中实施的显示器像素相对应的像素位置限定。
为便于说明,在图13中示出了在非矩形显示区域128的左上部分138 中的显示器像素136。应当理解,所描绘的显示器像素136仅仅是说明性的而非限制性的。换句话说,其他电子显示器12中的显示器像素136可以用变化的子像素布局实施。
在所描绘的实施方案中,显示器像素136按行和列组织。例如,第一显示器像素行包括第一显示器像素136A、第二显示器像素136B、第三显示器像素136C等。另外,第二显示器像素行包括第四显示器像素136D、第五显示器像素136E、第六显示器像素136F等。
如上所述,显示器像素136可以包括一个或多个子像素,每个子像素控制对应颜色分量的亮度。在所描绘的实施方案中,显示器像素136包括红色子像素138、绿色子像素140和蓝色子像素142。另外,在所描绘的实施方案中,完全包含在非矩形显示区域128中的显示器像素136各自包括两个子像素,即绿色子像素140和交替地红色子像素138或蓝色子像素142。例如,沿第二显示器像素行,第四显示器像素136D包括蓝色子像素 142和绿色子像素140,第五显示器像素136E包括红色子像素138和绿色子像素140,第六显示器像素136F包括红色子像素138和绿色子像素 140,等等。
为了实施非矩形显示区域128,沿圆形边界130的一些显示器像素136 可以包括更少的子像素。在所描绘的实施方案中,此类显示器像素136可各自包括一个子像素,即交替地红色子像素138或蓝色子像素142。例如,由于左上圆形边界130A,第一显示器像素136A仅包括蓝色子像素142,第二显示器像素136B仅包括红色子像素138,并且第三显示器像素136C 仅包括蓝色子像素142。
在任何情况下,如上所述,每个显示器像素136可对应于像素位置,并且因此对应于从图像数据源38接收的图像像素。关于所描绘的实施方案,每个显示器像素136可对应于与其绿色子像素140协同定位的图像像素126,或者将以其他方式定位对应的绿色子像素140的位置。换句话说,绿色子像素140可以是协同定位的子像素,而红色子像素138和蓝色子像素142是偏移子像素。另外,在所描绘的实施方案中,偏移子像素(例如,红色子像素138或蓝色子像素142)偏移到协同定位的子像素(例如,绿色子像素140)的右下方。在其他实施方案中,偏移子像素可以偏移到协同定位的子像素的右上方、左上方或左下方。
为了显示图像帧,可以至少部分地基于与像素位置处的图像像素126 对应的图像像素图像数据70来控制每个显示器像素136的亮度。然而,在一些情况下,图像帧的形状可以与电子显示器12的显示区域形状不同。在这种情况下,一个或多个图像像素126可以对应于显示区域之外的像素位置。例如,矩形图像帧120中的第一图像像素126A可以对应于非矩形显示区域128之外的像素位置143。换句话说,显示器像素136可以不在电子显示器12中与图像像素126对应的像素位置处实施。
因此,为了便于在具有不同形状的显示区域上显示图像帧,可以在显示之前例如通过应用黑色掩膜调整图像帧。然而,如上所述,显示器像素 136可以依赖于颜色混合以使得能够感知一系列不同颜色。换句话说,在某些情况下,简单地忽略与显示区域之外的像素位置对应的图像像素可导致沿圆形边界130的显示器像素136处的可感知混叠,因为将以其他方式混合显示器像素136的相邻显示器像素136不存在。此外,由于将以其他方式混合显示器像素136的相邻显示器像素136不存在,可沿直边界134在显示器像素136处发生可感知彩色边纹。
为了便于改善感知的图像质量,如上所述,可以基于与对应像素位置相关联的增益值来处理图像像素图像数据70。另外,如上所述,设计设备 94可以确定将每个像素位置明确地关联(例如,映射)到增益值集的未压缩增益映射。因此,为了确定未压缩增益映射,设计设备94可以确定与每个像素位置相关联的一个或多个增益值,并且因此确定像素位置处的每个子像素位置。
为便于说明,在图15中描述了用于将增益值关联到子像素位置的过程 144的一个实施方案。通常,过程144包括确定显示区域的特征(过程框 146),确定抗混叠区域(过程框148),确定子像素位置(过程框 150),以及确定子像素位置是否在抗混叠区域中(决策框152)。当子像素位置在抗混叠区域中时,过程144包括确定子像素位置与显示区域的边界之间的最短距离(过程框154),并且关联基于最短距离确定的增益值与子像素位置(过程框156)。当子像素位置不在抗混叠区域中时,过程144 包括确定子像素位置是否在显示区域内(决策框158),当子像素在显示区域内部时将单位增益值与子像素位置相关联(过程框160),并且当子像素不在显示区域内时将零增益值与子像素位置相关联(过程框162)。在一些实施方案中,过程144可通过使用处理电路诸如设备处理器96执行存储在有形非暂态计算机可读介质诸如设备存储器98中的指令来实施。
因此,在一些实施方案中,设计设备94可以确定在电子显示器12中实施的显示区域的预期特征(过程框146)。在一些实施方案中,显示区域的特征可以包括子像素布局、显示区域的形状、其边界的位置、显示区域中的子像素位置,等等。通常,电子显示器12的特征可以是固定的。因此,在一些实施方案中,可以确定显示区域的预期特征并且例如由制造商经由一个或多个输入设备输入到设计设备94。除此之外或另选地,设计设备94可以通过分析电子显示器12确定显示区域的预期特征。
为了降低产生可感知混叠的可能性,设计设备94可以沿显示区域的边界确定一个或多个抗混叠区域(过程框148)。如上所述,可感知混叠可以沿显示区域的圆形边界发生。因此,在一些实施方案中,设计设备94可以沿显示区域的圆形边界确定抗混叠区域,其包括在与圆形边界相邻的一个或多个像素位置处的子像素位置。
为便于说明,在图16和图17中示出了沿非矩形显示区域128的左上圆角130A的抗混叠区域164的两个示例。具体地讲,图16中示出了第一抗混叠区域164A,其包括在非矩形显示区域128之外的子像素位置166。另一方面,在图17中示出了第二抗混叠区域164B,其包括在非矩形显示区域128内的子像素位置166。应当理解,示例性抗混叠区域164仅仅是说明性的而非限制性的。换句话说,其他实施方案可以实施具有变化的形状和/或变化数量的子像素位置的抗混叠区域164。
参考图16,第一抗混叠区域164A包括子像素166,每个子像素在距左上圆角130A的固定阈值距离内。在一些实施方案中,固定阈值距离可以是相邻像素位置之间的预期距离,相邻图像像素126之间的预期距离,或者相邻显示器像素136中的协同定位的子像素之间的预期距离。因此,在一些实施方案中,可以确定抗混叠区域164以包括在距圆形显示区域边界一致距离内的子像素位置166。
另外,参考图17,第二抗混叠区域164B包括子像素位置166,每个子像素位置在距左上圆角130A的可变距离阈值距离内。在一些实施方案中,距离阈值可至少部分地基于圆形显示区域边界的曲率而改变。例如,由于左上圆角130A和子像素布局的形状,该可变距离阈值可在左上圆角 130A的中心部分处更大。因此,在一些实施方案中,可以确定抗混叠区域 164以包括在距圆形显示区域边界可变距离内的子像素位置166。
在一些实施方案中,抗混叠区域164可以由包括的子像素位置166指示。因此,为了便于随后识别抗混叠区域164,设计设备可预先确定抗混叠区域164的特征并将其包括的子像素位置存储在存储器部件诸如设备存储器98中。以类似的方式,设计设备94可以沿每个圆形显示区域边界确定抗混叠区域164。
返回到图15的过程144,设计设备94可以确定子像素位置(过程框 150)。如上所述,显示器像素136可以包括一个或多个子像素。因此,与显示器像素136对应的像素位置可以包括与一个或多个子像素中的每一个对应的子像素位置。在一些实施方案中,可以确定子像素位置并且例如由制造商经由一个或多个输入设备输入到设计设备94。除此之外或另选地,设计设备94可以通过分析电子显示器12和/或预期图像像素图像数据70确定子像素位置。
设计设备94可以确定预期子像素位置是否在抗混叠区域164内(决策框152)。如上所述,在一些实施方案中,抗混叠区域164可以由包括的子像素位置指示,其可以存储在存储器部件诸如设备存储器98中。因此,在这样的实施方案中,设计设备94可以轮询存储器部件以确定包括在抗混叠区域164中的子像素位置,并且通过将该子像素位置与包括在抗混叠区域 164中的子像素位置进行比较,确定该子像素位置是否预期在抗混叠区域 164内。除此之外或另选地,设计设备94可以至少部分地基于与抗混叠区域164相关联的距离阈值来确定子像素位置是否预期在抗混叠区域164 内。
当不在抗混叠区域164内时,设计设备94可以确定子像素位置是否预期在显示区域内(决策框158)。如上所述,在一些实施方案中,显示区域可以由包括的子像素位置指示,其可以存储在存储器部件诸如设备存储器 98中。因此,在这样的实施方案中,设计设备94可以轮询存储器部件以确定显示区域中包括的子像素位置,并且通过将子像素位置与显示区域中包括的子像素位置进行比较来确定子像素位置是否预期在显示区域内。
当预期子像素位置不在显示区域内时,设计设备94可以确定不期望在电子显示器12的子像素位置处实施该子像素,并且因此将该子像素位置与零增益值相关联(过程框162)。另一方面,当预期子像素位置在显示区域内时,设计设备94可以确定预期在电子显示器12中的子像素位置处实施该子像素,并且因此将该子像素位置与单位增益值相关联(过程框160)。这样,设计设备94可以确定增益值,在应用该增益值时产生黑色掩膜,该黑色掩膜被应用于对应于显示区域之外的子像素位置的图像数据。
当预期子像素位置在抗混叠区域164中时,设计设备94可确定子像素位置与显示区域的边界之间的预期距离(过程框154)。如上所述,在一些实施方案中,可以预先确定显示区域的预期特征并将其存储在存储器部件诸如设备存储器98中。因此,在这样的实施方案中,设计设备94可以轮询存储器部件以确定显示区域边界的预期位置,并且至少部分地基于子像素位置和显示区域边界的预期位置之间的相对距离来确定子像素位置和显示区域边界之间的预期距离。
至少部分地基于距显示区域边界的最短距离,设计设备94可以将增益值与子像素位置相关联(过程框156)。在一些实施方案中,增益值可以与子像素和显示区域边界之间的最短距离成反比。换句话说,随着子像素和显示区域边界之间的预期距离增加,增益值可能减小。应用以这种方式确定的增益值可以相对线性地调暗子像素,这可以降低沿显示区域边界的圆形部分产生可感知混叠的可能性。
以类似的方式,设计设备94可以将增益值与每个子像素位置相关联,并且因此与每个像素位置相关联。如上所述,未压缩增益可以明确地将增益值集关联(例如,映射)到每个像素位置。因此,设计设备94可以基于与每个子像素位置相关联的增益值来确定未压缩增益映射。
为便于说明,图18中示出了未压缩增益映射170的示例。应当理解,所描述的未压缩增益映射170仅仅是说明性的而非限制性的。换句话说,其他实施方案可以以其他形式实施未压缩增益映射170。
在任何情况下,在所描绘的实施方案中,未压缩增益映射170包括在多个增益映射行172中组织的增益映射条目174。每个增益映射条目174可对应于像素位置,并且因此明确地将像素位置映射到增益值集。例如,第一增益映射条目174A可以将第一图像像素126A的像素位置143与增益值集相关联。如上所述,像素位置可以包括一个或多个子像素位置,并且增益值集可以包括与该像素位置处的每个子像素位置对应的增益值。换句话说,增益映射条目174可以将增益值明确地映射到对应像素位置处的每个子像素位置。
如上所述,未压缩增益映射170的尺寸可以取决于电子显示器12的分辨率,因此相对较大。因此,在一些实施方案中,设计设备94可将未压缩增益170存储在外部存储器44中,从而使显示流水线36经由直接存储器访问信道58访问未压缩增益170。然而,如上所述,经由直接存储器访问信道58提供显示流水线36对未压缩增益170的访问可以影响显示流水线36的具体实施相关的成本(例如,增加直接存储器访问信道58的带宽)和 /或处理效率。
因此,返回到图10的过程112,设计设备94可以确定压缩增益映射 90(过程框116)。在一些实施方案中,压缩增益映射90可以间接地将每个像素位置关联到增益值集。例如,显示流水线36可以通过解压缩压缩增益映射90来确定与像素位置相关联的增益值集,以确定对应的未压缩增益映射170。因此,在一些实施方案中,设计设备94可以至少部分地基于对应的未压缩增益映射170来确定压缩增益映射90。
为便于说明,图19中描述了用于确定压缩增益映射90的过程176的一个实施方案。通常,过程176包括确定运行映射(过程框178),确定位置映射(过程框180),以及确定增益值映射(过程框182)。在一些实施方案中,过程176可通过使用处理电路诸如设备处理器96执行存储在有形非暂态计算机可读介质诸如设备存储器98中的指令来实施。
因此,在一些实施方案中,设计设备94可以基于未压缩增益映射170 确定运行映射100(过程框178)。如上所述,运行映射100指示每个行运行中包括的增益映射行172的数量。另外,如上所述,具有相同分类的一个或多个连续增益映射行172(例如,编码行或未编码行)可以被分组为行运行(例如,编码行运行或未编码行运行)。
用于确定运行映射100的过程184的一个实施方案在图20中描述。通常,过程184包括对每个增益映射条目进行分类(过程框185),将每个增益映射行分类为编码行或未编码行(过程框186),将连续编码行分组为编码行运行(过程框188),将连续未编码行分组为未编码运行(过程框 190),并且确定每个行运行中的增益映射行的数量(过程框192)。在一些实施方案中,过程184可通过使用处理电路诸如设备处理器96执行存储在有形非暂态计算机可读介质诸如设备存储器98中的指令来实施。
因此,在一些实施方案中,设计设备94可以分析未压缩增益映射170 以将每个增益映射条目174分类为零增益映射条目、中间增益映射条目或单位增益映射条目(过程框185)。在一些实施方案中,当其增益值中的每一个为一时,可将增益映射条目174分类为单位增益映射条目。另外,当其增益值中的每一个为零时,可将增益映射条目174分类为零增益映射条目。此外,当其增益值中的至少一个是中间增益值时(例如,大于零且小于一),可以将增益映射条目174分类为中间增益映射条目。
例如,参考图18的未压缩增益映射170,设计设备94可以将第一增益映射行172A中的前N个增益映射条目174中的每一个分类为零增益映射条目174Z,并且将第一增益映射行172A中的接下来M个增益映射条目中的每一个分类为中间增益映射条目174I。另外,设计设备94可以将第二增益映射行172B中的前N-1个增益映射条目174中的每一个分类为零增益映射条目174Z,并且将第二增益映射行172B中的接下来M个增益映射条目中的每一个分类为中间增益映射条目174I。此外,设计设备94可将第七增益映射行172C中的每个增益映射条目174分类为单位增益映射条目 174U。这样,设计设备94可将未压缩增益映射170中的每个增益映射条目 174分类为零增益映射条目174Z、中间增益映射条目174I或单位增益映射条目174U。
返回图20的过程184,至少部分地基于增益映射条目174的分类,设计设备94可将每个增益映射行172分类为编码行或未编码行(过程框 186)。如上所述,当其增益映射条目174中的至少一个包括中间增益值或零增益值时,可以将增益映射行172分类为编码行。换句话说,当增益映射行172包括至少一个零增益映射条目174Z或中间增益映射条目174时,设计设备94可将增益映射行172分类为编码行。例如,参考图18的未压缩增益映射170,设计设备94可将前六个增益映射行172中的每一个分类为编码行,因为每个包括多个零增益映射条目174Z和中间增益映射条目 174。
另外,如上所述,当增益映射行172仅包括单位增益值时,增益映射行172可以被分类为未编码行。换句话说,当增益映射行172仅包括单位增益映射条目174U时,设计设备94可将增益映射行172分类为未编码行。例如,参考图18的未压缩增益映射170,设计设备94可将接下来的四个增益映射行172中的每一个分类为未编码行,因为每个仅包括单位增益映射条目174U。这样,设计设备94可以将未压缩增益映射170中的每个增益映射行172分类为编码行或未编码行。
返回图20的过程184,设计设备94可以至少部分地基于其行分类将每个增益映射行172分组为行运行。具体地讲,设计设备94可以将各自被分类为编码行的一个或多个连续增益映射行172分组为编码行运行(过程框188)。另外,设计设备94可将各自被分类为未编码行的一个或多个连续增益映射行172分组为未编码行运行(过程框190)。例如,参考图18的未压缩增益映射170,设计设备94可以将前六个增益映射行172分组为第一行运行194A(例如,编码行运行),因为每个被分类为编码行。另外,设计设备94可以将接下来四个增益映射行172分组为第二行运行 194B(例如,未编码行运行),因为每个被分类为未编码行。这样,设计设备94可以将未压缩增益映射170的每个增益映射行172分组倒行运行中。
返回图20的过程184,设计设备94可以确定每个行运行中的增益映射行172的数量(过程框192)。例如,参考图18的未压缩增益映射 170,设计设备94可以确定第一行运行194A包括六个增益映射行172,并且因此在第一运行映射条目中指示值6。另外,设计设备94可以确定第二行运行194B包括四个增益映射行172,并且因此在第二运行映射条目中指示值4。这样,设计设备94可确定运行映射100,使得每个运行映射条目指示包括在对应行运行中的未压缩增益映射170的增益映射行172的数量。
为了便于后续解压缩,在一些实施方案中,运行映射100可以明确地指示每个行运行194是编码行运行还是未编码行运行。在其他实施方案中,为了便于进一步减小压缩增益映射90的尺寸,设计设备94可以确定起始行运行指示符108,并且在将连续行运行194分类为编码行运行和未编码行运行之间交替。在这样的实施方案中,可以基于起始行运行指示符108 确定第一行运行194A的分类,并且可以基于紧接在前面的(例如,顶部相邻)行运行194的分类确定每个后续行运行194的分类,从而避免了否则可能用于明确地指定后续行运行194中的每一个是编码行运行还是未编码行运行的比特。这样,设计设备94可确定运行映射100和一个或多个起始行运行指示符108,以便于确定每个行运行194的分类,并且因此确定每个增益映射行172的分类和/或例如通过显示流水线36确定与未编码行中的像素位置相关联的增益值。
返回图19的过程176,设计设备94可以至少部分地基于未压缩增益映射170来确定位置映射102(过程框180)。如上所述,位置映射102可以指示编码行的每个增益运行中包括的增益映射条目174的数量。另外,如上所述,具有相同分类的一个或多个连续增益映射条目可以被分组为增益运行。
用于确定位置映射102的过程196的一个实施方案在图21中描述。通常,过程196包括将连续位置增益映射条目分组为位置增益运行(过程框 198),将连续中间增益映射条目分组为中间增益运行(过程框200),确定当前行相比于先前行中的增益运行之间的位置差异(过程框202),并且对位置差进行熵编码(过程框204)。在一些实施方案中,过程196可通过使用处理电路诸如设备处理器96执行存储在有形非暂态计算机可读介质诸如设备存储器98中的指令来实施。
因此,在一些实施方案中,设计设备94可以至少部分地基于相应的条目分类将编码行中的连续增益映射条目174分组为增益运行。具体地讲,设计设备94可以将一个或多个连续零增益映射条目174Z或一个或多个连续单位增益映射条目174U分组为位置增益运行(过程框198)。换句话说,位置增益运行可以为仅包括零增益映射条目174Z的零增益运行;或者是仅包括单位增益映射条目174U的单位增益运行。另外,设计设备94可将一个或多个连续中间增益映射条目174I分组为中间增益运行(过程框 200)。
例如,参考图18的未压缩增益映射170,设计设备94可以将第一增益映射行172A中的前N个增益映射条目174分组为第一位置增益运行 206A,因为每个被分类为零增益映射条目174Z。另外,设计设备94可以将第一增益映射行172A中的接下来M个增益映射条目174分组为第一中间增益运行208A,因为每个被分类为中间增益映射条目174I。此外,设计设备94可将第二增益映射行172中的前N-1个增益映射条目174分组为第二位置增益运行206B,并且将接下来M个增益条目分组为第二中间增益运行208B。
至少部分地基于每个先前增益运行中的增益映射条目174的数量,可以确定增益映射条目174,并且因此确定每个增益运行中包括的像素位置。例如,指示第一位置增益运行206A包括N个增益映射条目174使得能够确定第一增益映射行172A的前N个增益映射条目174包括在第一中间增益运行208A中,并且第一中间增益运行208A在第一增益映射行172A的第N+1个增益映射条目174开始。另外,指示第一中间增益运行208A包括M个增益映射条目174使得能够确定第一增益映射行172A的接下来M 个增益映射条目174包括在第一中间增益运行208A中,并且第一中间增益运行208A在第一增益映射行172A的第N+M个增益映射条目174结束。因此,为了便于后续解压缩,在一些实施方案中,位置映射102可以明确地指示每个增益运行中包括的增益映射条目174的数量。
返回图21的过程196,在其他实施方案中,设计设备94可以确定当前行与紧接在前面的(例如,顶部相邻)行相比增益运行的位置差(过程框202),并且对位置差进行熵编码(过程框204)以便于进一步减小压缩增益映射90的尺寸。在一些实施方案中,该位置差可指示将当前行中增益运行的起始增益映射条目174与紧接前面行中的对应增益运行的起始增益映射条目174分隔的像素位置的数量。
例如,参考图18的未压缩增益映射170,设计设备94可以确定第一中间增益运行208A在第一增益映射行172A的第N+1个增益映射条目174 处开始。另外,设计设备94可确定第二中间增益运行208B在第二增益映射行172B的第N个增益映射条目174处开始。因此,第二中间增益运行 208的起始增益映射条目174可被指示为在第一增益映射行172A中的第一中间增益运行208的起始增益映射条目174前一个像素位置处,而不是明确地指示第二增益映射行172B的第二位置增益运行包括N-1个增益映射条目174。另外,在一些实施方案中,可以使用指数哥伦布编码算法对位置差进行熵编码。这样,设计设备94可以确定位置映射102以便于确定编码行的每个增益运行中的像素位置。
在任何情况下,为了便于随后的解压缩,压缩增益映射90可以指示位置增益运行是零增益运行还是单位增益运行。如上所述,位置增益值指示符110可以指示对应位置增益运行中的每个增益映射条目174的增益值。因此,设计设备94可以确定位置增益值指示符110并将其与每个位置增益运行相关联。
例如,参考图18的未压缩增益映射170,设计设备94可以将第一位置增益值指示符110与第一位置增益运行206A相关联,其指示第一位置增益运行中的每个增益映射条目174是零增益映射条目174Z。另外,设计设备94可以将第二位置增益值指示符110与第二位置增益运行206B相关联,其指示第二位置增益运行中的每个增益映射条目174是零增益映射条目174Z。除此之外或另选地,设计设备94可以将位置增益值指示符110 与位置增益运行相关联,其指示位置增益运行中的每个增益映射条目174 是单位增益映射条目174U。这样,设计设备94可以确定位置映射102和一个或多个位置增益值指示符110,以便于例如通过显示流水线36确定与位置增益运行中的每个像素位置相关联的增益值。
返回图17的过程176,设计设备94可以至少部分地基于未压缩增益映射170来确定位置增益值映射104(过程框182)。如上所述,增益值映射104可以指示增益映射条目174的增益值,并且因此指示与每个中间增益运行中的对应像素位置相关联的增益值。另外,在一些实施方案中,增益值映射104可以至少部分地基于紧接在前面的(例如,左侧相邻)增益映射条目174的增益值来指示增益映射条目174的增益值。
用于确定增益值映射104的过程210的一个实施方案在图22中描述。通常,过程210包括确定增益值(过程框212),确定增益值是否等于先前增益值(决策框214),并且当增益值等于先前增益值时存储零位(过程框 216)。另外,当增益值不等于先前增益值时,过程210包括存储一位(过程框218),确定增益值是否等于零(决策框220),当增益值等于零时存储零位(过程框222),并且当增益值不等于零时对增益值进行熵编码(过程框224)。在一些实施方案中,过程210可通过使用处理电路诸如设备处理器96执行存储在有形非暂态计算机可读介质诸如设备存储器98中的指令来实施。
因此,在一些实施方案中,设计设备94可从未压缩增益映射170确定与中间增益运行中的当前增益映射条目174相关联的增益值(过程框 212)。另外,设计设备94可从未压缩增益映射170确定与紧接在前面的增益映射条目174相关联的增益值。在一些实施方案中,可从左到右处理与显示器像素行对应的图像数据。因此,在这样的实施方案中,紧接在前面的增益映射条目174可以与当前增益映射条目174左侧相邻。
如上所述,增益映射条目174可包括多个增益值,每个增益值与不同的颜色分量和/或不同的子像素相关联。通常,影响要在相邻显示器像素 136处应用的增益值的因素可以是相对类似的。这样,对应于相邻像素位置处的相同颜色分量的增益值可以相对类似或甚至相同。因此,设计设备94 可将当前增益映射条目174中包括的增益值和与紧接在前面的增益映射条目174中的相同颜色分量相关联的增益值进行比较,以确定它们是否相等(决策框214)。
当增益值相等时,设计设备94可以在增益值映射104中存储零位(过程框216)。另一方面,当增益值不相等时,设计设备94可以在增益值映射104中存储一位(过程框218)。因此,当随后解压缩压缩增益映射90 时,与当前增益映射条目174相关联的第一位可指示当前增益映射条目174 中的增益值是否与紧接在前面的增益映射条目174中的对应增益值相同。此外,当增益值相等时,以这种方式压缩可以避免否则将用于明确地指示一个或多个增益值的比特,从而使得压缩增益映射90的尺寸能够减小。
当增益值不相等时,设计设备94可确定当前增益映射条目174中的增益值是否等于零(决策框220)。另外,在当前增益映射条目174中的增益值等于零时,设计设备94可在增益值映射104中存储零位(过程框 222)。因此,在当前增益映射条目174的增益值等于零时,以这种方式进行压缩可以避免否则可能用于明确地指示增益值的比特,从而使得压缩增益映射90的尺寸能够减小。
另一方面,当增益值不等于零时,设计设备94可以对当前增益映射条目174的增益值进行熵编码(过程框224)。在一些实施方案中,设计设备 94可以使用指数哥伦布编码算法对增益值进行熵编码。这样,设计设备94 可确定增益值映射104,使得增益值映射条目指示与每个中间增益运行中的像素位置相关联的增益值。
利用上述压缩技术,设计设备94可以确定压缩增益映射90,其包括运行映射100、位置映射102、增益值映射104和一个或多个可编程指示符 (例如,起始行运行指示符108和/或位置增益值指示符110)。应当理解,压缩技术可以适用于任何未压缩增益映射170,例如,即使当未实施以沿显示区域边界应用增益值时。在一些实施方案中,所描述的压缩技术的压缩效率可以随着未编码行的数量增加、位置增益运行中的像素位置的数量增加、与相同增益值相关联的连续像素位置的数量增加,以及/或者中间增益运行中的像素位置数量的减少而提高。因此,在一些实施方案中,压缩技术可用于压缩要应用于相对一致内容的增益映射。
返回到图10的过程112,设计设备94可将压缩增益映射90存储在存储器部件中以使得能够从存储器部件进行后续访问(过程框118)。如上所述,压缩增益映射90的尺寸可以小于对应的未压缩增益映射170的尺寸。在一些实施方案中,尺寸的这种减小可以使压缩增益映射90能够存储在显示流水线36的内部存储器46中,如上所述,这可以便于提高处理效率和/ 或降低具体实施相关的成本。在其他实施方案中,压缩增益映射90仍然可以存储在外部存储器44中。在任何情况下,如上所述,子像素布局重采样器块56可以随后访问增益映射并至少部分地基于增益映射指示的增益值处理图像数据。
为便于说明,图23中描述了用于操作子像素布局重采样器块56的过程226的一个实施方案。通常,过程226包括去γ处理转换图像像素图像数据(过程框228),从增益映射确定增益值(过程框230),对图像像素图像数据进行滤波以确定显示器像素图像数据(过程框232),将增益值应用于显示器像素图像数据(过程框234),重新γ处理转换显示器像素图像数据(过程框236),并且对显示器像素图像数据进行放大(过程框 238)。在一些实施方案中,可以基于在显示流水线36中形成的电路连接来实施过程226。除此之外或另选地,在一些实施方案中,过程226可通过使用处理电路诸如控制器处理器50执行存储在有形非暂态计算机可读介质诸如控制器存储器52中的指令来实施。
因此,在一些实施方案中,子像素布局重采样器块56可以对图像像素图像数据70进行去γ处理转换(过程框228)。如上所述,子像素布局重采样器块56可以在伽马(例如,非线性)域中接收图像像素图像数据70。为了便于后续处理,子像素布局重采样器块56可以通过将图像像素图像数据70从伽马域转换为线性域来去γ处理。
另外,子像素布局重采样器块56可从增益映射确定一个或多个增益值 (过程框230)。如上所述,在一些实施方案中,未压缩增益映射170可以存储在外部存储器44中。因此,在这样的实施方案中,子像素布局重采样器块56可以经由直接存储器访问信道58从外部存储器44检索未压缩增益映射170的至少一部分(例如,增益映射条目174),其明确地指示与对应像素位置相关联的一个或多个增益值。
如上所述,在其他实施方案中,压缩增益映射90可以存储在内部存储器46中。因此,在这样的实施方案中,子像素布局重采样器块56可以从内部存储器46检索压缩增益映射90的至少一部分。自压缩之后,子像素布局重采样器块56可以解压缩压缩增益映射90以确定与对应像素位置相关联的一个或多个增益值。
图24中描述了用于解压缩压缩增益映射90的过程240的一个实施方案。通常,过程240包括确定像素位置(过程框242),读取运行映射(过程框244),确定像素位置是否在未编码行中(决策框246),并且当像素位置在未编码行中时确定与像素位置相关联的每个增益值是单位增益值 (过程框248)。当像素位置不在未编码行中时,过程240包括读取位置映射(过程框250),确定像素位置是否处于中间增益运行中(决策框 252),当像素位置不在中间增益运行中时基于位置增益值指示符来确定与像素位置相关联的每个增益值(过程框254),并且当像素位置处于中间增益运行中时读取增益值映射(过程框256)。在一些实施方案中,可以基于在显示流水线36中形成的电路连接来实施过程240。除此之外或另选地,在一些实施方案中,过程240可通过使用处理电路诸如控制器处理器50执行存储在有形非暂态计算机可读介质诸如控制器存储器52中的指令来实施。
因此,在一些实施方案中,子像素布局重采样器块56可以确定与接收的图像像素图像数据70相对应的像素位置(过程框242)。在一些实施方案中,子像素布局重采样器块56可以接收图像像素图像数据70作为比特流。因此,在这样的实施方案中,子像素布局重采样器块56可以至少部分地基于接收图像像素图像数据70的顺序和/或电子显示器12的分辨率来确定像素位置。基于像素位置,子像素布局重采样器块56可以确定对应的增益映射条目174,并且因此确定包括增益映射条目174的增益映射行172。
另外,子像素布局重采样器块56可以读取运行映射100以确定增益映射行172的行分类(过程框244)。如上所述,运行映射100可以指示每个行运行194中包括的增益映射行172的数量。因此,至少部分地基于运行映射100,子像素布局重采样器块56可以识别包括增益映射行172并因此包括像素位置的行运行194。在一些实施方案中,运行映射100可以存储在显示流水线36的内部存储器46中。因此,在这样的实施方案中,子像素布局重采样器块56可以从内部存储器46读取运行映射100。
为了便于确定行运行的分类,子像素布局重采样器块56可以读取起始行运行指示符108。如上所述,起始行运行指示符108可以指示对应的行运行194是编码行运行还是未编码行运行。为了便于减小压缩增益映射90的尺寸,在一些实施方案中,可以仅为第一行运行194A指定起始行运行指示符108。在这样的实施方案中,当行运行194不是第一行运行194A时,子像素布局重采样器块56可以至少部分地基于紧接在前面的(例如,顶部相邻)行运行194的分类来确定行运行194的分类。换句话说,子像素布局重采样器块56可以基于将行运行194与第一行运行194A分隔的其他行运行194的数量来确定行运行194的分类。
因此,至少部分地基于运行映射100和起始行运行指示符108,子像素布局重采样器块56可以确定行运行194是否是未编码行运行,并且因此确定包括像素位置的增益映射行172是否是未编码的行(决策框246)。如上所述,当每个增益值等于一时,增益映射行172可以是未编码行。因此,当增益映射行172是未编码行时,子像素布局重采样器块56可确定要用于处理图像像素图像数据70的每个增益值是单位增益值(过程框 248)。
另一方面,子像素布局重采样器块56可确定增益映射行172是编码行而不是未编码行,并且因此读取位置映射102(过程框250)。如上所述,位置映射102可以指示编码行的每个增益运行中包括的像素位置。在一些实施方案中,位置映射102可以存储在显示流水线36的内部存储器46 中。因此,在这样的实施方案中,子像素布局重采样器块56可以从内部存储器46读取位置映射102。
另外,在一些实施方案中,可以对位置映射102进行熵编码。因此,在这样的实施方案中,子像素布局重采样器块56可以通过对位置映射102 进行熵解码来确定每个增益运行中包括的像素位置。例如,子像素布局重采样器块56可以使用指数哥伦布解码算法对位置映射102进行熵解码。此外,在一些实施方案中,位置映射102可以基于位置差相对于另一增益运行指示该增益运行中包括的像素位置。因此,在这样的实施方案中,子像素布局重采样器块56可以通过将位置差应用于另一增益运行中的(例如,起始或结束)像素位置来确定该增益运行中包括的像素位置。
至少部分地基于位置映射102,子像素布局重采样器块56可以确定像素位置是否在中间增益运行中(决策框252)。如上所述,中间增益运行中的每个增益映射条目174包括一个或多个中间增益值(例如,大于零且小于一)。因此,当不处于中间增益运行中时,子像素布局重采样器块56可以确定像素位置在位置运行中,并且因此基于对应位置增益值指示符110 确定将用于处理图像像素图像数据70的增益值。在一些实施方案中,位置增益值指示符110可以存储在可编程寄存器106中。因此,在这样的实施方案中,子像素布局重采样器块56可以通过轮询可编程寄存器106来确定位置增益值指示符110。
另一方面,当在中间增益运行中时,子像素布局重采样器块56可以读取增益值映射104(过程框256)。如上所述,增益值映射104可以指示中间增益运行中的增益值。在一些实施方案中,增益值映射104可以存储在显示流水线36的内部存储器46中。因此,在这样的实施方案中,子像素布局重采样器块56可以从内部存储器46读取增益值映射104。
另外,在一些实施方案中,可以对增益值映射104进行熵编码。因此,在这样的实施方案中,子像素布局重采样器块56可以通过对增益值映射104进行熵解码来确定与像素位置相关联的增益值。例如,子像素布局重采样器块56可使用指数哥伦布解码算法对增益值映射104进行熵解码。这样,子像素布局重采样器块56可对压缩增益映射90进行解压缩,以确定与对应于图像像素图像数据70的像素位置相关联的一个或多个增益值。
返回图23的过程226,子像素布局重采样器块56可以对图像像素图像数据70进行滤波以确定对应的显示器像素图像数据72(过程框232)。如上所述,子像素布局重采样器块56可以基于滤波器参数诸如偏移滤波器相位值和/或偏移子像素滤波器系数来对图像像素图像数据70进行滤波。另外,在一些实施方案中,子像素布局重采样器块56可以至少部分地基于从增益映射确定的增益值来确定要应用的滤波器参数。
为便于说明,图25中描述了用于确定滤波器相位值和偏移子像素滤波器系数的过程258的一个实施方案。通常,过程258包括确定当前相位值 (过程框260),确定相邻相位值(过程框262),确定修改的相位值(过程框264),选择偏移滤波器相位值(过程框266),以及确定偏移子像素滤波器系数(过程框268)。在一些实施方案中,可以基于在显示流水线 36中形成的电路连接来实施过程258。除此之外或另选地,在一些实施方案中,过程258可通过使用处理电路诸如控制器处理器50执行存储在有形非暂态计算机可读介质诸如控制器存储器52中的指令来实施。
因此,在一些实施方案中,子像素布局重采样器块56可确定与当前图像像素块相关联的相位值,当前图像像素块包括与所接收的图像像素图像数据70对应的当前图像像素(过程框260)。在一些实施方案中,当前图像像素块可以是围绕与当前图像像素对应的当前显示器像素136的偏移子像素的2x2图像像素块。另外,在一些实施方案中,子像素布局重采样器块56可以至少部分地基于与当前图像像素块相关联的差值度量(诸如当前图像像素块与偏移当前图像像素块的相邻图像像素块之间的绝对差之和) 来确定当前相位值。在一些实施方案中,与默认滤波器(例如,相等内插)模式相比,当前相位值可以指示要应用的滤波的变化。
另外,子像素布局重采样器块56确定与每个相邻图像像素块相关联的相位值(过程框262)。在一些实施方案中,子像素布局重采样器块56可以与当前块相关联的当前相位值类似的方式确定与相邻块相关联的相邻相位值。例如,子像素布局重采样器块56可至少部分地基于与顶部相邻图像像素块相关联的差值度量,确定与顶部相邻块对应的顶部相邻相位值。
至少部分地基于当前相位值和相邻相位值,子像素布局重采样器块56 可以确定修改的相位值(过程框264)。在一些实施方案中,子像素布局重采样器块56可以通过基于相邻相位值对当前相位值进行滤波来确定修改的相位值。例如,子像素布局重采样器块56可以通过利用每个相邻图像像素块的相邻滤波器相位值对当前滤波器相位值进行滤波来确定修改的滤波器相位值。
另外,子像素布局重采样器块56可以确定偏移滤波器相位值(过程框 266)。在一些实施方案中,子像素布局重采样器块56可以至少部分地基于当前相位值和/或修改的相位值来设定偏移滤波器相位值。例如,子像素布局重采样器块56可以至少部分地基于与增益映射中当前图像像素的像素位置相关联的增益值(例如,偏移增益值和/或协同定位的增益值),将偏移滤波器相位值设定为当前相位值或者设定为修改的相位值。
为便于说明,图26中示出了用于确定偏移滤波器相位值的过程270的一个实施方案。通常,过程270包括确定与协同定位的子像素相关联的增益值(过程框272),确定与偏移子像素相关联的增益值(过程框274),确定协同定位的增益和偏移增益两者是否都不为零(决策框276),并且确定协同定位的增益和偏移增益两者是否都不为一(决策框278)。当协同定位的增益不为零或一并且偏移增益不为零或一时,过程270包括将偏移滤波器相位值设定为当前相位值(过程框280)。否则,过程270包括将偏移滤波器相位值设定为修改的相位值(过程框282)。在一些实施方案中,可以基于在显示流水线36中形成的电路连接来实施过程270。除此之外或另选地,在一些实施方案中,过程270可通过使用处理电路诸如控制器处理器50执行存储在有形非暂态计算机可读介质诸如控制器存储器52中的指令来实施。
因此,在一些实施方案中,子像素布局重采样器块56可以确定要在当前显示器像素中的协同定位的子像素处应用的增益值(过程框272)。另外,控制器42可以指示子像素布局重采样器块56确定要在当前显示器像素中的偏移子像素处应用的增益值(过程框274)。在一些实施方案中,子像素布局重采样器块56可以例如通过使用图24的过程240解压缩压缩增益映射90,至少部分地基于压缩增益映射90来确定与协同定位的子像素相关联的增益值和/或与偏移子像素相关联的增益值。
至少部分地基于增益值,子像素布局重采样器块56可以将偏移滤波器相位值设定为修改的相位值(过程框282),或者将偏移滤波器相位值设定为当前相位值(过程框280)。例如,当协同定位的增益和偏移增益两者不等于零或一时,子像素布局重采样器块56可以将偏移滤波器相位设定为当前滤波器相位。另一方面,当协同定位的增益和偏移增益中的至少一者等于零或一时,子像素布局重采样器块56可以将偏移滤波器相位设定为修改的滤波器相位。这样,子像素布局重采样器块56可至少部分地基于与当前像素位置相关联的增益值来确定偏移滤波器相位值。
返回到图25的过程258,子像素布局重采样器块56可以至少部分地基于偏移滤波器相位值来确定偏移子像素滤波器系数(过程框268)。在一些实施方案中,偏移子像素滤波器系数可用于实施偏移滤波器相位值。因此,在这样的实施方案中,子像素布局重采样器块56可以确定要由滤波器块82应用的偏移子像素滤波器系数。这样,子像素布局重采样器块56可以至少部分地基于与增益映射中的当前像素位置相关联的增益值,确定要应用于图像像素图像数据70的滤波器参数(例如,偏移滤波器相位值和/或偏移子像素滤波器系数)。
返回图23的过程226,子像素布局重采样器块56可至少部分地基于滤波器参数确定与当前像素位置相对应的显示器像素图像数据72(过程框 114)。在一些实施方案中,子像素布局重采样器块56可基于滤波器参数对与当前图像像素周围的一组图像像素对应的图像像素图像数据70进行滤波,以确定显示器像素图像数据72。
在滤波之后,子像素布局重采样器块56可以将增益值应用于显示器像素图像数据72(过程框234)。如上所述,增益映射可以指示与每个像素位置相关联的增益值。另外,如上所述,可编程边界增益值指示符92可指示在沿显示区域边界的像素位置处选择性地应用的增益值。因此,在一些实施方案中,子像素布局重采样器块56可以确定是否应用由增益映射指示的增益值或由可编程边界增益值指示符92指示的增益值。
为便于说明,在图27中描述了用于将增益值应用于显示器像素图像数据72的过程284的一个实施方案。通常,过程284包括确定显示器像素图像数据的像素位置(过程框286),确定像素位置是否在中间增益运行中 (决策框288),确定像素位置是否邻近直边界(决策框290),确定是否启用可编程边界增益(决策框292),并且当像素位置不在中间增益运行中、像素位置与直边界相邻并且启用了可编程边界增益时应用可编程边界增益值(过程块294)。另外,过程284包括当像素位置在中间增益运行中、像素位置不与直边界相邻,或者未启用可编程边界增益时应用从增益映射确定的增益值(过程框296)。在一些实施方案中,可以基于在显示流水线36中形成的电路连接来实施过程284。除此之外或另选地,在一些实施方案中,过程284可通过使用处理电路诸如控制器处理器50执行存储在有形非暂态计算机可读介质诸如控制器存储器52中的指令来实施。
因此,在一些实施方案中,子像素布局重采样器块56可以确定与显示器像素图像数据72相对应的像素位置(过程框286)。如上所述,可以通过处理对应的图像像素图像数据70来确定显示器像素图像数据72。换句话说,显示器像素图像数据72可以对应于与图像像素图像数据70相同的像素位置。这样,子像素布局重采样器块56可以通过例如至少部分地基于图像像素图像数据70的接收顺序和/或电子显示器12的分辨率确定与图像像素图像数据70对应的像素位置,确定与显示器像素图像数据72对应的像素位置。
另外,子像素布局重采样器块56可确定像素位置是否在中间增益运行中(过程框288)。如上所述,运行映射100可以指示每个行运行194中包括的增益映射行172的数量,并且起始行运行指示符108可以指示每个行运行194的分类。因此,至少部分地基于运行映射100和起始行运行指示符108,子像素布局重采样器块56可以确定包括像素位置的行运行194的分类,并且因此确定像素位置包括在编码行还是未编码行中。由于未编码行仅包括单位增益值,因此子像素布局重采样器块56可确定当处于未编码行时像素位置不在中间增益运行中。
另外,如上所述,位置映射102可以指示编码行的每个增益运行中包括的像素位置,并且位置增益值指示符110可以与每个位置增益运行相关联。因此,至少部分地基于位置映射102和位置增益值指示符110,子像素布局重采样器块56可以确定每个中间增益运行中的像素位置,并且因此确定像素位置是否处于中间增益运行中。
此外,子像素布局重采样器块56可以确定像素位置是否与显示区域的直边界相邻(决策框290)。在一些实施方案中,边界检测块86可以至少部分地基于显示区域的特征来确定像素位置是否与直边界相邻。例如,边界检测块86可以至少部分地基于显示区域边界的位置和/或预定义与直边界相邻的像素位置来确定像素位置是否与直边界相邻。如上所述,在一些实施方案中,可以预先确定显示区域的预期特征并将其存储在存储器部件诸如设备存储器98中。因此,在这样的实施方案中,设计设备94可以轮询存储器部件以确定显示区域的特征。
子像素布局重采样器块56还可确定是否启用了可编程边界增益(决策框292)。在一些实施方案中,子像素布局重采样器块56可以至少部分地基于例如存储在内部存储器46或可编程寄存器106中的指示符,确定是否启用可编程边界增益。例如,子像素布局重新取样块56可确定当指示符具有第一值(例如,1位)时启用可编程边界增益,并且当指示符具有第二值 (例如,0位)时启用可编程边界增益。
基于这些确定,子像素布局重采样器块56可以应用从增益映射确定的增益值(过程框296)或可编程边界增益值92(过程框294)。如上所述,从增益映射应用增益值可以例如通过在显示器之外的像素位置处应用黑色掩膜而便于调整具有不同(例如,非矩形)形状的显示区域上显示的图像或图像帧。另外,如上所述,从增益映射应用增益值可以调暗沿显示区域的圆形边界的子像素,以便于减小沿圆形边界产生可感知混叠的可能性。
此外,在一些实施方案中,可确定可编程边界增益值以减小沿显示区域的边界(例如,直边界)产生可感知彩色边纹的可能性。在一些情况下,沿边界发生的边纹可能受到在电子显示器12中实施的子像素布局的影响。换句话说,沿不同边界产生的边纹可能会有所不同。例如,当电子显示器的显示器像素136各自包括绿色子像素并且交替地包括红色子像素或蓝色子像素时,沿第一(例如,顶部)直边界可发生绿色边纹,而沿第二 (例如,左侧)直边界可发生紫色边纹。
因此,为了降低产生可感知彩色边纹的可能性,不同的可编程边界增益值可以与不同的边界相关联。这样,当要应用可编程边界增益值时,子像素布局重采样器块56可确定哪个边界与像素位置相邻并选择对应的可编程边界增益值。这样,子像素布局重采样器块56可以通过选择性地(例如,自适应地)将增益值应用于显示器像素图像数据72而便于改善电子显示器的感知的图像质量。
返回图23的过程226,当预期输出图像数据处于伽马域中时,子像素布局重采样器块56可将显示器像素图像数据72从线性域转换为伽马域 (过程框236)。此外,当预期输出图像数据是源格式(例如,RGB格式)时,子像素布局重采样器块56可以放大显示器像素图像数据72以从显示格式(例如,GR或GB格式)转换到源格式(过程框238)。在一些实施方案中,子像素布局重采样器块56可以通过将与缺失颜色分量对应的图像数据添加到显示器像素图像数据72来转换为源格式。
为便于说明,图28中描述了用于将显示器像素图像数据72从显示格式转换为源格式的过程298的一个实施方案。通常,过程298包括确定显示器像素图像数据中的缺失颜色分量(过程框300),确定与显示器像素图像数据相对应的显示器像素是否是最后像素并且图像是否包括奇数个图像像素(决策框302),并且当显示器像素是最后像素并且图像包括奇数个像素时创建后续虚拟像素(过程框304)。另外,过程298包括将缺失分量设定为紧接在前面或紧接在后面的显示器像素图像数据中的对应颜色分量 (过程框306)。在一些实施方案中,可以基于在显示流水线36中形成的电路连接来实施过程298。除此之外或另选地,在一些实施方案中,过程 298可通过使用处理电路诸如控制器处理器50执行存储在有形非暂态计算机可读介质诸如控制器存储器52中的指令来实施。
因此,在一些实施方案中,子像素布局重采样器块56可以从与当前显示器像素相对应的显示器像素图像数据72确定缺失分量(过程框300)。例如,当显示器像素图像数据72是GR格式时,子像素布局重采样器块56 可以确定蓝色分量缺失。另一方面,当显示器像素图像数据72是GB格式时,子像素布局重采样器块56可以确定红色分量缺失。
为了转换为源格式(例如,RGB格式),控制器42可以指示子像素布局重采样器块56从紧接在前面或紧接在后面的显示器像素图像数据复制缺失颜色分量的图像数据(过程框306)。例如,在当前显示器像素图像数据缺失蓝色分量时,子像素布局重采样器块可以将蓝色分量图像数据从紧接在前面的显示器像素图像数据复制到当前显示器像素图像数据,并且将红色分量图像数据从当前显示器像素图像数据复制到紧接在前面的显示器像素图像数据。
因此,在当前显示器像素是最后显示器像素并且图像包括奇数个图像像素时,后续显示器像素图像数据可能不可用于与当前显示器像素图像数据交换颜色分量图像数据。因此,控制器42可以指示子像素布局重采样器块56创建后续虚拟像素(过程框304)。在一些实施方案中,虚拟像素可包括图像数据,其中每个颜色分量设定为零。在其他实施方案中,虚拟像素可以是其他显示器像素图像数据的副本,并且/或者包括具有设定为任何合适值的颜色分量的图像数据。这样,子像素布局重采样器块56可以确定显示器像素图像数据72,其在用于显示图像时提供改善的感知的图像质量。
如上所述,在一些实施方案中,压缩增益映射90可以以相对方式指示与像素位置126相关联的增益值(例如,相对于另一像素位置126)。在这样的实施方案中,显示流水线56可在解压缩压缩增益映射90时经历数据依赖性,从而限制解压缩效率(例如,用以确定与像素位置相关联的增益值的比率)。
为了便于提高解压缩效率,在一些实施方案中,可以例如通过将未压缩增益映射170划分为多个未压缩增益映射170,将像素位置126和相关联的增益值分组为多个像素区域。通过压缩每个未压缩增益映射170,可以确定各自对应于像素区域中的一个像素区域的多个压缩增益映射90。这样,可以减小与不同像素区域中的像素位置相关联的增益值之间的数据依赖性。事实上,以这种方式实施多个压缩增益映射90可以使显示流水线56 能够改变确定增益值的顺序,并且因此改变压缩增益映射的访问(例如,获取)模式。在一些实施方案中,显示流水线56可以例如通过实施随机访问模式来控制增益值确定顺序以提高存储器访问效率。
虽然已经通过举例的方式示出了上述具体实施方案,但是应当理解,这些实施方案可以容许各种修改和替代形式。还应当理解,权利要求书不是旨在限于所公开的特定形式,而是旨在涵盖落在本公开的实质和范围内的所有修改形式、等同形式和替代形式。

Claims (21)

1.一种电子设备,包括:
电子显示器,其中所述电子显示器包括:
具有圆形边界的显示区域,其中所述显示区域包括第一显示器像素,所述第一显示器像素位于与所述圆形边界相邻的第一像素位置处;和
显示流水线,所述显示流水线通信地耦接到所述电子显示器,其中所述显示流水线被配置为:
接收指示图像帧中所述第一像素位置处的目标亮度的第一图像数据,其中所述图像帧具有矩形形状;
从基于未压缩增益映射的压缩增益映射确定与所述第一像素位置相关联的第一增益值,其中所述压缩增益映射包括所述未压缩增益映射的一个或多个编码行的编码行运行和所述未压缩增益映射的一个或多个未编码行的未编码行运行,其中所述编码行运行指示与所述编码行运行相关联的多个像素的相应像素位置的增益映射条目,其中所述编码行运行包括增益小于一的至少一个增益映射条目,并且其中所述未编码行指示单位增益的像素行的增益映射条目,其中确定第一增益值包括:
确定第一像素位置是在编码行运行中还是在未编码行运行中;
响应于确定第一像素位置在未编码行运行中,确定第一增益值为单位增益;和
响应于确定第一像素位置在编码行运行中,将压缩增益映射解压缩为未压缩增益映射并至少部分地基于第一行增益映射确定第一增益值;
通过至少部分地基于所确定的第一增益值处理所述第一图像数据,确定指示所述第一显示器像素用以显示所述图像帧的目标亮度的第二图像数据;以及
将所述第二图像数据输出到所述电子显示器,以便于在所述显示区域上显示所述图像帧的非矩形部分。
2.根据权利要求1所述的电子设备,其中为了确定所述第二图像数据,所述显示流水线被配置为:
至少部分地基于所述第一增益值和所述电子显示器的子像素布局来确定滤波器参数;
通过使用所述滤波器参数对所述第一图像数据进行滤波来确定显示器像素图像数据;以及
通过将所述第一增益值应用于所述显示器像素图像数据来确定所述第二图像数据,以便于通过线性地调暗所述第一显示器像素来减小在所述图像帧的所述非矩形部分显示在所述显示区域上时沿所述圆形边界产生可感知混叠的可能性。
3.根据权利要求1所述的电子设备,其中所述显示流水线被配置为:
接收指示所述图像帧中第二像素位置处的目标亮度的第三图像数据,其中所述第二像素位置在所述电子显示器的显示区域之外;
从所述压缩增益映射确定与所述第二像素位置相关联的第二增益值,其中所述第二增益值是零增益值;
通过将所述第二增益值应用于所述第三图像数据来确定第四图像数据,以便于在所述图像帧的所述非矩形部分周围应用黑色掩膜;以及
将所述第四图像数据输出到所述电子显示器,以便于在所述显示区域上显示所述图像帧的所述非矩形部分。
4.根据权利要求1所述的电子设备,其中:
所述显示流水线包括内部存储器,所述内部存储器被配置为存储所述压缩增益映射,其中所述压缩增益映射包括基于未压缩增益映射确定的运行映射、位置映射和增益值映射,所述未压缩增益映射明确地将每个像素位置映射到增益值集;并且
所述显示流水线为了确定所述第二图像数据而被配置为:
至少部分地基于所述运行映射来确定所述第一像素位置是否在所述未压缩增益映射的编码行中,其中所述编码行包括将对应像素位置关联到小于一的增益值的至少一个增益映射条目;
当所述第一像素位置在所述编码行中时,至少部分地基于所述位置映射来确定所述第一像素位置是否在中间增益运行中,其中所述中间增益运行包括各自将对应像素位置关联到大于零且小于一的至少一个增益值的增益映射条目;以及
当所述像素位置在所述中间增益运行中时,至少部分地基于所述增益值映射来确定所述第一增益值。
5.根据权利要求4所述的电子设备,其中:
所述运行映射指示每个行运行中包括的所述未压缩增益映射的增益映射行的数量,其中行运行包括具有相同行分类的一个或多个连续增益映射行;
所述位置映射指示所述编码行的每个增益运行中包括的所述未压缩增益映射的增益映射条目的数量,其中增益运行包括具有相同条目分类的一个或多个连续增益映射条目;并且
所述增益值映射指示所述中间增益运行中与每个像素位置相关联的所述增益值集。
6.根据权利要求4所述的电子设备,其中所述位置映射通过所述未压缩增益映射的对应增益映射条目来指示与大于零且小于一的增益值相关联的像素位置。
7.根据权利要求4所述的电子设备,其中:
所述压缩增益映射包括存储在可编程寄存器中的起始行运行指示符,其中所述起始行运行指示符指示在所述未压缩增益映射中标识的第一行运行是所述编码行运行;并且
为了确定所述第一像素位置是否在所述编码行中,所述显示流水线被配置为:
至少部分地基于所述运行映射来确定所述第一像素位置是否在所述第一行运行中;
当所述第一像素位置在所述第一行运行中时,确定所述第一像素位置在所述编码行中;并且
当所述第一像素位置不在所述第一行运行中时:
至少部分地基于所述运行映射确定包括所述第一像素位置的第二行运行;以及
当所述第二行运行与所述第一行运行分隔了奇数个行运行时,确定所述第一像素位置在所述编码行中。
8.根据权利要求4所述的电子设备,其中:
所述压缩增益映射包括存储在可编程寄存器中的位置增益值指示符,其中所述位置增益值指示符指示在所述编码行中的位置增益运行是零增益运行还是单位增益运行;并且
所述显示流水线被配置为当所述第一像素位置不在所述中间增益运行中时:
至少部分地基于所述位置映射确定所述第一像素位置在所述位置增益运行中;
当所述位置增益值指示符指示所述位置增益运行是所述零增益运行时,确定与所述第一像素位置相关联的所述第一增益值为零;以及
当所述位置增益值指示所述位置增益运行是所述单位增益运行时,确定与所述第一像素位置相关联的所述第一增益值为一。
9.根据权利要求4所述的电子设备,其中为了确定所述第一增益值,所述显示流水线被配置为当所述第一像素位置不在所述编码行中时确定所述第一增益值为一。
10.根据权利要求1所述的电子设备,其中:
所述第一显示器像素包括控制所述显示区域中所述第一像素位置处的颜色分量的亮度的子像素;
所述第一图像数据指示所述图像帧中所述第一像素位置处的所述颜色分量的目标亮度;并且
所述第一增益值与预期在所述子像素和所述显示区域的所述圆形边界之间存在的最短距离成反比。
11.根据权利要求1所述的电子设备,其中:
所述电子显示器包括在与所述显示区域的直边界相邻的第二像素位置处的第二显示器像素;并且
所述显示流水线被配置为:
接收指示所述图像帧中所述第二像素位置处的目标亮度的第三图像数据;
从所述压缩增益映射确定与所述第二像素位置相关联的第二增益值;
通过使用至少部分地基于所述第二增益值确定的滤波器参数对所述第三图像数据进行滤波来确定显示器像素图像数据;以及
通过将与所述直边界相关联的可编程边界增益值应用于所述显示器像素图像数据,确定指示用以显示所述图像帧的所述第二显示器像素的目标亮度的第四图像数据,以便于通过调暗所述第二显示器像素来减小在所述图像帧的所述非矩形部分显示在所述显示区域上时沿所述直边界产生可感知彩色条纹的可能性。
12.根据权利要求1所述的电子设备,其中所述电子设备包括便携式电话、媒体播放器、个人数据管理器、手持式游戏平台、平板设备、计算机或它们的任意组合。
13.一种便于在具有非矩形显示区域的电子显示器上显示矩形图像的方法,包括:
从图像数据源接收第一图像像素图像数据,其中所述第一图像像素图像数据指示所述矩形图像中多个像素位置中的第一像素位置处的目标亮度;
从基于未压缩增益映射的压缩增益映射确定与所述第一像素位置相关联的第一增益值,其中所述压缩增益映射包括所述未压缩增益映射的一个或多个编码行的编码行运行和所述未压缩增益映射的一个或多个未编码行的未编码行运行,其中所述编码行运行指示与所述编码行运行相关联的多个像素位置的相应像素位置的增益映射条目,其中所述编码行运行包括增益小于一的至少一个增益映射条目,并且其中所述未编码行指示单位增益的像素行的增益映射条目,其中确定第一增益值包括:
确定第一像素位置是在编码行运行中还是在未编码行运行中;
响应于确定第一像素位置在未编码行运行中,确定第一增益值为单位增益;和
响应于确定第一像素位置在编码行运行中,将压缩增益映射解压缩为未压缩增益映射并至少部分地基于第一行增益映射确定第一增益值;
至少部分地基于所述第一增益值来确定要应用于所述第一图像像素图像数据的滤波器参数;
通过至少部分地基于所述滤波器参数对所述第一图像像素图像数据进行滤波来确定第一显示器像素图像数据,其中所述第一显示器像素图像数据指示在所述第一像素位置处的第一子像素的目标亮度;
将所确定的第一增益值应用于所述第一显示器像素图像数据;以及
将所述第一显示器像素图像数据输出到所述电子显示器,以便于在所述电子显示器的所述非矩形显示区域上仅显示所述矩形图像的一部分。
14.根据权利要求13所述的方法,包括:
确定所述未压缩增益映射,其中所述未压缩增益映射包括明确地将每个像素位置与增益值集相关联的多个增益映射条目;
将所述多个增益映射条目中的每一个分类为单位增益映射条目、中间增益映射条目和零增益映射条目中的一者;
将所述增益映射条目的每一行分类为所述编码行或所述未编码行中的一者;
至少部分地基于对应的行分类,将所述增益映射条目的每一行分组为行运行;
至少部分地基于每个行运行中包括的行数来确定运行映射;
至少部分地基于对应的条目分类,将每个编码行中的所述增益映射条目中的每一个分组为增益运行;
至少部分地基于每个增益运行中的增益映射条目的数量来确定位置映射;
至少部分地基于由每个中间增益运行中的所述增益映射条目指示的所述增益值集来确定增益值映射,其中与中间增益运行中的每个增益映射条目相关联的所述增益值集包括大于零且小于一的增益值;以及
将所述运行映射、所述位置映射和所述增益值映射存储在显示流水线的内部存储器中作为所述压缩增益映射,以便于确定与所述第一像素位置相关联的所述第一增益值。
15.根据权利要求14所述的方法,包括:
从所述内部存储器读取所述运行映射以识别包括所述第一像素位置的行运行;
至少部分地基于存储在所述内部存储器的第一可编程寄存器中的起始行运行指示符来确定所述行运行是所述编码行运行还是所述未编码行运行;以及
当所述第一像素位置在所述编码行运行中时:
从所述内部存储器读取所述位置映射以识别包括所述第一像素位置的增益运行;
确定所述增益运行是否为中间增益运行;以及
当所述增益运行是中间增益运行时,从所述内部存储器读取所述增益值映射;其中确定与所述第一像素位置相关联的所述第一增益值包括:
当所述行运行是所述未编码行运行时确定所述第一增益值为一;
当存储在所述内部存储器的第二可编程寄存器中的位置增益值指示符指示所述增益运行是单位增益运行时,确定所述第一增益值为一;
当所述位置增益值指示符指示所述增益运行是零增益运行时,确定所述第一增益值为零;以及
当所述增益运行是中间增益运行时,确定所述第一增益值是从所述增益值映射读取的值。
16.根据权利要求13所述的方法,包括:
从所述图像数据源接收第二图像像素图像数据,其中所述第二图像像素图像数据指示所述矩形图像中第二像素位置处的目标亮度;
确定与所述第二像素位置相关联的第二增益值,其中当所述第二像素位置在所述电子显示器的所述非矩形显示区域之外时,所述第二增益值为零;
通过至少部分地基于所述第二增益值处理所述第二图像像素图像数据来确定第二显示器像素图像数据,其中确定所述第二显示器像素图像数据包括应用所述第二增益值以便于在所述非矩形显示区域之外的像素位置处应用黑色掩膜;以及
将所述第二显示器像素图像数据输出到所述电子显示器,以便于在所述非矩形显示区域上仅显示所述矩形图像的所述部分。
17.一种电气设备,包括:
用于确定包括多个增益映射条目的未压缩增益映射的装置,所述多个增益映射条目各自明确地将对应像素位置与增益值集相关联;
用于至少部分地基于所述未压缩增益映射来确定压缩增益映射的装置,其中用于确定所述压缩增益映射的所述装置包括:
用于至少部分地基于将所述未压缩增益映射的每个增益映射行分组为行运行来确定运行映射的装置,其中每个行运行包括各自被分类为编码行的一个或多个连续增益映射行、或者各自被分类为未编码行的一个或多个连续增益映射行,其中所述编码行针对相应的对应像素位置限定具有小于1的增益的所述多个增益映射条目,并且其中所述未编码行针对相应的对应像素位置限定具有单位增益的所述多个增益映射条目;
用于至少部分地基于将所述未压缩增益映射的编码行中的每个增益映射条目分组为位置增益运行或中间增益运行来确定位置映射的装置,其中:
每个中间增益运行包括各自被分类为中间增益条目的一个或多个连续增益映射条目;并且
每个位置增益运行包括各自被分类为单位增益条目的一个或多个连续增益映射条目、或者各自被分类为零增益条目的一个或多个连续增益映射条目;以及
用于至少部分地基于由每个中间增益运行条目指示的所述增益值集来确定增益值映射的装置;以及
用于将所述压缩增益映射存储在显示流水线的内部存储器中的装置,所述显示流水线被配置为通信地耦接到电子显示器,以使所述显示流水线能够至少部分地基于通过读取所述压缩增益映射所确定的增益值来处理与要在所述电子显示器上显示的图像相对应的图像数据。
18.根据权利要求17所述的电气设备,其中用于确定所述未压缩增益映射的所述装置包括:
用于确定沿所述电子显示器的显示区域的圆形边界的抗混叠区域的装置;
用于确定第一增益映射条目的装置,所述第一增益映射条目明确地将所述抗混叠区域中的第一像素位置关联到第一增益值集,其中所述第一增益值集包括大于零且小于一的增益值;以及
用于确定第二增益映射条目的装置,所述第二增益映射条目明确地将在所述抗混叠区域之外且在所述显示区域之外的第二像素关联到第二增益值集,其中所述第二增益值集中的每个增益值等于零,以使所述显示流水线能够在所述图像上应用黑色掩膜,以便于在所述图像的形状和所述显示区域不同时在所述电子显示器上显示所述图像。
19.根据权利要求18所述的电气设备,包括:
用于确定边界增益值的装置,所述边界增益值预期会减小当在所述电子显示器上显示所述图像时沿所述显示区域的直边界产生条纹的可能性;以及
用于将所述边界增益值存储在所述内部存储器的可编程寄存器中的装置;
其中用于确定所述未压缩增益映射的所述装置包括用于确定第三增益映射条目的装置,所述第三增益映射条目明确地将沿所述直边界的第三像素位置关联到第三增益值集以使所述显示流水线能够:
至少部分地基于所述第三增益值集对与所述第三像素位置对应的图像数据进行滤波;
当启用可编程边界增益时,将所述边界增益值应用于所述图像数据;以及
当未启用可编程边界增益时,将所述第三增益值集应用于所述图像数据。
20.根据权利要求17所述的电气设备,其中:
用于确定所述运行映射的所述装置包括用于确定所述运行映射的每个运行映射条目以指示对应行运行中的增益映射行的数量的装置;
用于确定所述位置映射的所述装置包括用于确定所述位置映射的位置映射条目以指示每个编码行中的增益运行中包括的像素位置的装置;
用于确定所述增益值映射的所述装置包括用于确定所述增益值映射的增益值映射条目以指示与每个中间增益运行中的每个像素位置相关联的所述增益值集的装置;
用于确定所述压缩增益映射的所述装置包括:
用于确定起始行运行指示符的装置,所述起始行运行指示符将第一行运行识别为编码行运行和未编码行运行中的一者;以及
用于确定与每个位置增益运行相关联的位置增益值指示符的装置,其中所述位置增益值指示符将对应增益运行识别为零增益运行和单位增益运行中的一者;并且
用于将所述压缩增益映射存储在所述内部存储器中的所述装置包括:
用于将所述起始行运行指示符存储在第一可编程寄存器中以使所述显示流水线能够确定像素位置是否在编码行中的装置;以及
用于将所述位置增益运行指示符存储在第二可编程寄存器中以使所述显示流水线能够在所述像素位置在位置增益运行中时确定所述像素位置是与零增益值还是与单位增益值相关联的装置。
21.根据权利要求1所述的电子设备,其中所述显示流水线包括:
内部存储器,其中所述内部存储器存储一个或多个可编程边界增益值指示符和压缩增益映射;
图像数据缓冲器,其中所述图像数据缓冲器被配置为存储与一个或多个图像像素块对应的图像数据;和
通信地耦接至所述图像数据缓冲器的子像素布局重采样器块,其中所述子像素布局重采样器块包括去伽马块、边缘检测块、滤波器块、增益解压缩块、边界检测块、重新伽马块或者它们的组合,并且其中所述子像素布局重采样器块被配置为确定显示像素图像数据,其中确定所述显示像素图像数据包括:
接收与所述图像数据的当前图像像素对应的图像数据;
使用去伽马块把所述图像数据转换到线性域;
至少部分地基于所述一个或多个图像像素块和当前图像像素的偏移子像素的特性,使用边缘检测块来确定所述偏移子像素的边缘参数,其中所述一个或多个图像像素块对应于当前图像像素的所述偏移子像素周围的像素;
使用滤波器块并至少部分地基于所述边缘参数和滤波器参数把所述图像数据从源格式转换成显示格式,其中所述滤波器参数至少部分地基于与像素位置关联的增益值;
使用增益解压缩块确定与所述图像数据的当前像素位置关联的增益值以对所述压缩增益映射进行解压缩,其中所述当前像素位置包括所述当前图像像素的当前像素位置;
确定所述当前像素位置是否沿着所述显示区域定位;
基于解压缩的增益映射来确定所述当前像素位置的可编程边界增益值指示符、所述一个或多个可编程边界增益值指示符、或它们的组合;
使用重新伽马块把所述图像数据转换到伽马域;
至少部分地基于所转换的图像数据来确定所述显示像素图像数据;以及
把所述显示像素图像数据发送到所述电子显示器。
CN201811006610.7A 2017-09-11 2018-08-31 电子显示器边界增益系统和方法 Active CN109493826B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/701,086 2017-09-11
US15/701,086 US10714049B2 (en) 2016-06-06 2017-09-11 Electronic display border gain systems and methods

Publications (2)

Publication Number Publication Date
CN109493826A CN109493826A (zh) 2019-03-19
CN109493826B true CN109493826B (zh) 2021-12-03

Family

ID=63490180

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811006610.7A Active CN109493826B (zh) 2017-09-11 2018-08-31 电子显示器边界增益系统和方法

Country Status (4)

Country Link
EP (2) EP3893234A1 (zh)
JP (1) JP6966400B2 (zh)
KR (1) KR102166219B1 (zh)
CN (1) CN109493826B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11217211B2 (en) * 2019-07-24 2022-01-04 Apple Inc. Multiple resolution section display panel systems and methods
WO2021157924A1 (ko) * 2020-02-07 2021-08-12 삼성전자 주식회사 디스플레이를 포함하는 전자 장치
KR20240045897A (ko) * 2022-09-30 2024-04-08 삼성전자주식회사 이미지 처리 장치, 이미지 처리 장치의 동작 방법, 및 이미지 처리 장치를 포함하는 디스플레이 시스템
CN116485645A (zh) * 2023-04-13 2023-07-25 北京百度网讯科技有限公司 图像拼接方法、装置、设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105511152A (zh) * 2016-02-02 2016-04-20 京东方科技集团股份有限公司 显示基板、显示面板和显示装置
WO2017110721A1 (ja) * 2015-12-22 2017-06-29 シャープ株式会社 表示装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7221381B2 (en) * 2001-05-09 2007-05-22 Clairvoyante, Inc Methods and systems for sub-pixel rendering with gamma adjustment
JP2006221125A (ja) * 2005-01-13 2006-08-24 Asahi Glass Co Ltd 画像処理方法及び表示装置
JP2007147727A (ja) * 2005-11-24 2007-06-14 Sony Corp 画像表示装置、画像表示方法、画像表示方法のプログラム及び画像表示方法のプログラムを記録した記録媒体
JP2008097223A (ja) * 2006-10-10 2008-04-24 Fujitsu Ltd 画像補正調整装置および調整方法
JP5112961B2 (ja) * 2008-06-11 2013-01-09 三菱電機株式会社 表示装置
JP4743234B2 (ja) * 2008-07-02 2011-08-10 ソニー株式会社 表示装置及び表示方法
JP5879844B2 (ja) * 2011-09-13 2016-03-08 セイコーエプソン株式会社 画像表示装置、画像処理装置
US9098537B2 (en) * 2012-12-20 2015-08-04 Oracle International Corporation Techniques for aligned run-length encoding
JP2016024382A (ja) * 2014-07-22 2016-02-08 株式会社ジャパンディスプレイ 画像表示装置及び画像表示方法
US9311735B1 (en) * 2014-11-21 2016-04-12 Adobe Systems Incorporated Cloud based content aware fill for images
CN104570457B (zh) * 2014-12-23 2017-11-24 上海天马微电子有限公司 一种彩色滤光基板及显示装置
KR102344730B1 (ko) * 2014-12-26 2021-12-31 엘지디스플레이 주식회사 데이터 구동부, 표시장치 및 이의 구동방법
CN106033656A (zh) * 2015-03-11 2016-10-19 群创光电股份有限公司 显示装置
US9947258B2 (en) * 2015-08-28 2018-04-17 Novatek Microelectronics Corp. Image processing method and image processing apparatus
US9672765B2 (en) * 2015-09-30 2017-06-06 Apple Inc. Sub-pixel layout compensation
KR102508461B1 (ko) * 2016-05-16 2023-03-09 삼성디스플레이 주식회사 표시 장치

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017110721A1 (ja) * 2015-12-22 2017-06-29 シャープ株式会社 表示装置
CN105511152A (zh) * 2016-02-02 2016-04-20 京东方科技集团股份有限公司 显示基板、显示面板和显示装置

Also Published As

Publication number Publication date
EP3454322A1 (en) 2019-03-13
CN109493826A (zh) 2019-03-19
JP2019049705A (ja) 2019-03-28
EP3893234A1 (en) 2021-10-13
JP6966400B2 (ja) 2021-11-17
KR20190029433A (ko) 2019-03-20
KR102166219B1 (ko) 2020-10-15

Similar Documents

Publication Publication Date Title
US10714049B2 (en) Electronic display border gain systems and methods
CN109493826B (zh) 电子显示器边界增益系统和方法
CN109474769B (zh) 预烧统计和预烧补偿
CN107851307B (zh) 对用于图像处理的拜耳类型图像数据去马赛克的方法和系统
CN109166159B (zh) 获取图像的主色调的方法、装置及终端
JP2019049705A5 (zh)
CN112055875B (zh) 电子显示器部分图像帧更新系统和方法
US11651719B2 (en) Enhanced smoothness digital-to-analog converter interpolation systems and methods
CN114144830A (zh) 多分辨率区段显示面板系统和方法
US9111328B2 (en) Texture compression and decompression
US8655063B2 (en) Decoding system and method operable on encoded texture element blocks
US11094038B1 (en) Variable scaling ratio systems and methods
US11941785B2 (en) Directional scaling systems and methods
US10762604B2 (en) Chrominance and luminance enhancing systems and methods
US20230343269A1 (en) Temperature-Based Pixel Drive Compensation
CN111819618A (zh) 像素对比度控制系统和方法
US10068548B1 (en) Sub-pixel layout resampler systems and methods
US10187622B1 (en) Image data format conversion systems and methods
KR102669220B1 (ko) 지향성 스케일링 시스템들 및 방법들
US11941783B2 (en) Scaler de-ringing in image processing circuitry
US20240095871A1 (en) Cache architecture for image warp processing systems and methods
US11321813B2 (en) Angular detection using sum of absolute difference statistics systems and methods
JP4708885B2 (ja) 符号化装置、携帯端末装置及びそれらに用いる画素色情報符号化方法
KR20150063897A (ko) 이미지를 디스플레이 하는 방법 및 그 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant