CN105843568B - 图像组合装置以及包括其的显示系统 - Google Patents

图像组合装置以及包括其的显示系统 Download PDF

Info

Publication number
CN105843568B
CN105843568B CN201610076253.6A CN201610076253A CN105843568B CN 105843568 B CN105843568 B CN 105843568B CN 201610076253 A CN201610076253 A CN 201610076253A CN 105843568 B CN105843568 B CN 105843568B
Authority
CN
China
Prior art keywords
layer
layers
image
composite image
sgl
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610076253.6A
Other languages
English (en)
Other versions
CN105843568A (zh
Inventor
李东翰
经览父
卢锺镐
崔圣后
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN105843568A publication Critical patent/CN105843568A/zh
Application granted granted Critical
Publication of CN105843568B publication Critical patent/CN105843568B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1415—Digital output to display device ; Cooperation and interconnection of the display device with other functional units with means for detecting differences between the image stored in the host and the images displayed on the displays
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/20—Processor architectures; Processor configuration, e.g. pipelining
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2350/00—Solving problems of bandwidth in display systems
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/20—Details of the management of multiple sources of image data

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Processing (AREA)

Abstract

提供一种图像组合装置以及包括其的显示系统。所述图像组合装置包括SGL控制单元和多层混合器，其中，所述SGL控制单元将多个层分为第一组层和不与第一组层重叠的第二组层，所述多层混合器组合第一组层，以在第一帧产生第一合成图像，并且将包括更新的层的第二组层与第一帧的第一合成图像进行合并，以在第一帧之后的第二帧产生第二合成图像。

Description

图像组合装置以及包括其的显示系统
本申请要求于2015年2月3日提交到韩国知识产权局的第10-2015-0016624号韩国专利申请的优先权以及由此产生的全部权益，该申请的公开通过引用全部包含于此。
技术领域
本发明构思的示例实施例涉及图像组合装置和/或包括其的显示系统。
背景技术
在移动设备中使用的传统的显示系统包括通过组合多个层产生最终输出的多层混合器。所述层中的每层以特定的优先级顺序被顺序地组合，并且最终结果被产生。多层混合器必须针对每帧进行操作，以便产生帧数据来输出。为此目的，显示系统必须从针对每帧的存储器读取多个层，因此，增大了移动设备的功耗，还要求移动设备和显示系统具有较大的存储带宽。
此外，随着显示器的分辨率以及将被组合的层的数量逐渐增大，要求的带宽和功率趋向于逐渐增大。为了克服该问题，已经使用如下的方法，如果在全部层中未发生改变，则重新发送之前组合的结果或让DDIC(显示驱动器IC)重新使用存在的结果。然而，该方法还在以下情况中是有问题的：即使在只有一层被改变时，全部层的数据也必须再次从存储器被读取，然后被组合。
发明内容
本发明构思的方面提供图像组合装置，在图像组合装置中，基于更新的关于层的属性信息，从存储器仅读取更新的层，之前组合的数据被用于未更新的层中，因此减小(和/或最小化)执行的存储器访问的次数，还减小(和/或最小化)需要被组合的层的数量。
本发明构思的方面提供显示系统，在所述显示系统中，基于更新的关于层的属性信息，从存储器仅读取更新的层，之前组合的数据被用于未更新的层，因此减小(和/或最小化)执行的存储器访问的次数，还减小(和/或最小化)需要被组合的层的次数。
然而，本发明构思的方面不局限于在此阐述的一个设置。通过参照以下提供的本发明构思的详细的描述，本发明构思的以上和其他方面对本发明构思所属领域的普通技术人员将更加清楚。
根据本发明构思的一个方面，提供一种图像组合装置，所述图像组合装置可包括：稀疏组层(SGL)控制单元，被配置为将多个层分为第一层组和第二层组，第二层组的层不包括第一层组的层；多层混合器，被配置为组合第一层组，以在第一帧产生第一合成图像，并且将包括更新的层的第二层组与第一帧的第一合成图像进行组合，以在第一帧之后的第二帧产生第二合成图像。
根据各种示例实施例，所述图像组合装置可包括：存储器，被配置为存储第一合成图像；SGL输出单元，被配置为接收第一合成图像，并且将接收的第一合成图像发送到存储器；合成输出单元，被配置为接收第二合成图像，并且将接收的第二合成图像发送到外部装置。
根据各种示例实施例，所述图像组合装置可包括：SGL输出单元，被配置为，当包括在SGL中的层被更新时，将第一合成图像发送到存储器；SGL输出单元被配置为，当包括在SGL中的层未被更新时，不将第一合成图像发送到存储器。
根据各种示例实施例，所述图像组合装置可包括：合成输出单元被配置为针对每帧将第二合成图像发送到外部装置。
根据各种示例实施例，所述图像组合装置可包括：SGL控制单元被电连接到SGL输出单元或者合成输出单元，以控制SGL输出单元或合成输出单元的操作。
根据各种示例实施例，所述图像组合装置可包括存储器，存储器位于多层混合器中，或者存储器作为单独的存储器位于多层混合器外部。
根据各种示例实施例，所述图像组合装置可包括：SGL控制单元包括稀疏属性寄存器(SAR)，其中，稀疏属性寄存器(SAR)被配置为存储关于输入到多层混合器的每个层的更新属性信息；更新属性信息包括第一属性或第二属性；基于之前在每个层中确定的数据赋予第一属性或第二属性，或者基于存储在被配置为存储关于每个层的更新频率信息的更新计数寄存器(UCNT)中的信息，赋予第一属性或第二属性。
根据各种示例实施例，所述图像组合装置可包括第一层组，第一层组包括具有第一属性的连续的层的组。
根据各种示例实施例，所述图像组合装置可包括：SGL控制单元包括更新寄存器(UPD)，其中，更新寄存器(UPD)被配置为存储关于输入到多层混合器的层中的每个层的更新信息；UPD包括与每个层针对当前帧是否被更新有关的信息。
根据各种示例实施例，所述图像组合装置可包括多层混合器，多层混合器被配置为，当包括在第一层组中的层未被更新时，不在第二帧产生第一合成图像；多层混合器被配置为，使用在第一帧产生的第一合成图像和更新的层来产生第二合成图像。
根据各种示例实施例，所述图像组合装置可包括SGL控制单元，SGL控制单元还包括有效层寄存器(VLD)和稀疏组层寄存器(SGLR)，其中，有效层寄存器(VLD)被配置为存储关于输入到多层混合器的每个层是否有效的信息；稀疏组层寄存器(SGLR)被配置为存储关于输入到多层混合器的层中的每个是否被包括在第一层组中的信息。
根据各种示例实施例，所述图像组合装置可包括多层混合器，多层混合器被配置为执行VLD被激活的层的组合操作。
根据各种示例实施例，所述图像组合装置可包括：通过组合输入到多层混合器的所述多个层中的至少两个来获得第一合成图像，通过组合输入到多层混合器的所述多个层中的全部来获得第二合成图像。
根据各种示例实施例，所述图像组合装置可包括：层输入单元，被配置为，将所述多个层发送到多层混合器，并且由SGL控制单元控制；层输入单元还被配置为，从外部存储器读取层中的每个，或者从外部模块接收层中的每个，并且将读取的或接收的层发送到多层混合器。
根据各种示例实施例，所述图像组合装置可包括层输入单元，层输入单元被配置为，接收第一合成图像，或者接收包括在SGL中的层中的每个，并且将接收的第一合成图像或包括在SGL中的层发送到多层混合器。
根据各种示例实施例，所述图像组合装置可包括层输入单元，层输入单元包括N个访问单元，所述N个访问单元被配置为，接收所述多个层中的至少一个；SGL控制单元被配置为把将要由层接收单元接收的层中的每个层的地址分配到访问单元中的每个，N个访问单元中的每个被配置为从存储器、外部存储器或外部模块接收所述多个层中的至少一个。
根据本发明构思的一个方面，提供一种图像组合装置，所述图像组合装置包括：层接收单元，被配置为接收与当前帧相应的多个层；稀疏组层(SGL)控制单元，被配置为将所述多个层分为第一层组和第二层组，第二层组中的层与第一层组中的层不重叠，包括稀疏属性寄存器(SAR)的SGL控制单元被配置为存储关于被激活的多个层的更新属性信息；存储器，被配置为存储当前帧之前的帧的第一合成图像；多层混合器，被配置为将从存储器发送的第一合成图像与第二层组进行组合以产生第二合成图像。
根据各种示例实施例，所述图像组合装置可包括：SGL输出单元，被配置为接收第一合成图像，并且将接收的第一合成图像发送到存储器；合成输出单元，被配置为接收第二合成图像，并且将第二合成图像发送到外部装置。
根据各种示例实施例，所述图像组合装置可包括SGL输出单元，当包括在SGL中的层被更新时，SGL输出单元被配置为将第一合成图像发送到存储器，当包括在SGL中的层未被更新时，SGL输出单元被配置为不将第一合成图像发送到存储器。
根据各种示例实施例，所述图像组合装置可包括：合成输出单元被配置为针对每帧将第二合成图像发送到外部装置。
根据各种示例实施例，所述图像组合装置可包括：层输入单元，被配置为将所述多个层发送到多层混合器，通过SGL控制单元控制层输入单元，层输入单元被配置为从外部存储器或外部模块读取层中的每个，或者读取存储在存储器中的第一合成图像。
根据各种示例实施例，所述图像组合装置可包括SGL控制单元，SGL控制单元还包括更新计数寄存器(UCNT)以及更新寄存器(UPD)，其中，更新计数寄存器(UCNT)被配置为存储关于所述多个层的更新频率信息，更新寄存器(UPD)被配置为存储关于所述多个层的更新信息。
根据各种示例实施例，所述图像组合装置可包括SGL控制单元，SGL控制单元还包括有效层寄存器(VLD)和稀疏组层寄存器(SGLR)，其中，有效层寄存器(VLD)被配置为存储关于所述多个层是否有效的信息；稀疏组层寄存器(SGLR)被配置为存储关于所述多个层是否被包括在稀疏组层(SGL)中的信息。
根据各种示例实施例，所述图像组合装置可包括多层混合器，多层混合器被配置为执行VLD被激活的层的组合操作，多层混合器被配置为产生VLD和SGLR二者被激活的层的第一合成图像。
根据本发明构思的一个方面，提供一种显示系统，所述显示系统包括：处理器，被配置为组合多个层中的一些层，以产生第一合成图像，组合所述多个层中的其他层，以产生第二合成图像；存储器，存储第一合成图像。处理器包括：多层混合器，被配置为接收所述多个层，并且输出第一合成图像和第二合成图像；稀疏组层(SGL)输出单元，被配置为将第一合成图像发送到存储器；合成输出单元，被配置为发送第二合成图像；SGL控制单元，被配置为控制多层混合器、SGL输出单元和合成输出单元。其中，处理器被配置为，当在第一帧中通过SGL控制单元设置包括在第一层组中的层中的任何一个时产生第一合成图像，并且将第一合成图像存储在存储器中；处理器被配置为，当包括在第一层组中的层中的全部在第一帧之后的第二帧未被更新时，通过使用存储在存储器中的第一合成图像，产生第二合成图像。
根据各种示例实施例，所述显示系统可包括层输入单元，层输入单元被配置为，将所述多个层发送到多层混合器并且由SGL控制单元控制，层输入单元从外部存储器或外部模块读取层中的每个，或者读取存储在存储器中的第一合成图像。
根据各种示例实施例，所述显示系统可包括SGL控制单元，SGL控制单元还包括：更新计数寄存器(UCNT)，被配置为存储关于所述多个层的更新频率信息，稀疏属性寄存器(SAR)，被配置为存储关于所述多个层的更新属性信息，更新寄存器(UPD)，被配置为存储关于所述多个层的更新信息。
根据各种示例实施例，所述显示系统可包括第一层组，第一层组包括SAR被激活的层中的连续的层。
根据各种示例实施例，所述显示系统可包括更新属性信息，更新属性信息包括第一属性或第二属性，基于之前在每个层中确定的数据赋予第一属性或第二属性，或者基于存储关于每个层的更新频率信息的UCNT，赋予第一属性或第二属性。
根据各种示例实施例，所述显示系统可包括：SGL控制单元还包括有效层寄存器(VLD)和稀疏组层寄存器(SGLR)，其中，有效层寄存器(VLD)被配置为，存储关于输入到多层混合器的层中的每个是否有效的信息；稀疏组层寄存器(SGLR)被配置为，存储关于输入到多层混合器的层中的每个是否被包括在稀疏组层(SGL)中的信息。
根据各种示例实施例，所述显示系统可包括：多层混合器被配置为使用VLD被激活的层执行组合操作；多层混合器被配置为产生VLD和SGLR被激活的层的第一合成图像。
根据各种示例实施例，所述显示系统可包括多层混合器，多层混合器被配置为，当包括第一层组中的层被更新时，产生第一合成图像；多层混合器被配置为，当包括第一层组中的层未被更新时，不产生第一合成图像。
根据各种示例实施例，所述显示系统可包括：多层混合器被配置为针对每帧产生第二合成图像。
根据本发明构思的一个方面，提供一种显示系统，所述显示系统包括：存储器，被配置为存储图像数据，所述图像数据包括多个层；控制器，被配置为，基于所述多个层中的每个的更新特征，将属性信息分配到所述图像数据的所述多个层中的每个，并且基于分配的所述多个层中的每个的属性信息，将所述多个层中的每个分配到至少两个组中的一个；多层混合器，被配置为，从存储器接收所述多个层，基于分配的组处理所述多个层，基于处理所述多个层的结果产生最终合成图像；以及显示面板，被配置为显示最终合成图像。
根据各种示例实施例，所述显示系统可包括分配的属性信息，分配的属性信息包括指示层未被更新的第一属性或者指示层被更新的第二属性；控制器被配置为，基于所述多个层中的每个具有第一属性还是第二属性，将所述多个层中的每个分配到第一组或第二组中。
根据各种示例实施例，所述显示系统可包括多层混合器，多层混合器还被配置为基于分配的组处理所述多个层，所述处理包括：组合分配到第一组的层，以形成中间合成图像，并且将中间合成图像存储在存储器中，将中间合成图像与分配到第二组的层进行组合，以形成最终合成图像。
根据各种示例实施例，所述显示系统可包括：第一寄存器，第一寄存器被配置为存储所述多个层的层中的每个的更新频率信息；第二寄存器，被配置为存储所述多层的层中的每个的更新信息。
附图说明
从本发明构思的非限制的示例实施例的更具体的描述，，本发明构思的前述的和其他特征将变得清楚，如附图中所示，在附图中，相同的附图标记在不同的视图中始终表示相同的部件。附图不一定按比例绘制，相反，将强调示出本发明构思的原理。在附图中：
图1是示出根据至少一个示例实施例的图像组合装置的框图；
图2至图4是示出根据至少一个示例实施例的图像组合装置的SGL的框图；
图5和图6是示出根据至少一个示例实施例的图像组合装置的操作的框图；
图7和图8是示出根据至少一个示例实施例的在图像组合装置的SGL控制单元中包括的寄存器的框图；
图9是示出根据至少一个示例实施例的图像组合装置的框图；
图10是示出根据至少一个示例实施例的包括图像组合装置的无线通信系统的框图；
图11是示出根据至少一个示例实施例的包括图像组合装置的计算系统的框图；
图12是示出根据至少一个示例实施例的包括图像组合装置的电子系统的框图；
图13至图15是示出根据至少一个示例实施例的能够应用图像组合装置的显示系统的示例的透视图。
具体实施方式
现在将参照示出一些示例实施例的附图来更加全面地描述各种示例实施例。然而，可以以许多不同的形式来实现示例实施例，并且示例实施例不应被解释为受限于在此阐述的实施例；相反，提供这些示例实施例以使本公开将是彻底和完整的，并且发明构思的示例实施例的范围将全面地传达给本领域的普通技术人员。在附图中，为了清楚，层和区域的厚度被夸大。附图中的相同的参考字符和/或标号指示相同的元件，因此它们的描述可被省略。
将理解，当元件被称为被“连接”或“耦合”到另一元件时，该元件可被直接地连接到或耦合到另一元件或者可存在中间元件。相反，当元件被称为被“直接地连接”或“直接地耦合”到另一元件时，不存在中间元件。用于描述元件或层之间的关系的其他词语应以类似方式被解释(例如，“在…之间”与“直接在…之间”、“相邻”与“直接地相邻”、“在…上”与“直接在…上”等)。如这里所使用的术语“和/或”包括相关列出的项中的一个或多个的任何和全部组合。
将理解，尽管这里可使用术语“第一”、“第二”等来描述各种元件、组件、区域、层和/或部分，但是这些元件、组件、区域、层和/或部分不应被这些术语所限制。这些术语仅用于将一个元件、组件、区域、层或部分与另一个元件、组件、区域、层或部分进行区分。因此，在不脱离示例实施例的教导的情况下，第一元件、组件、区域、层或部分可被称为第二元件、组件、区域、层或部分。
在这里可使用空间相对术语(例如“在…之下”、“在…下方”、“下面的”、“在…之上”、“上面的”等)来轻松地描述在附图中示出的一个元件或特征与另一元件或特征的关系。应该理解，空间相对术语是为了包括除了附图中描述的方位之外的在使用或运行中的装置的不同方位。例如，如果附图中的装置被翻转，则被描述为在其它元件或特征“之下”或“下方”的元件将随后被定位为在所述其它元件或特征“之上”。因此，术语“在…下方”可包括上面和下面两种方位。可将装置朝向另外的方位(旋转90度或在其它方位)，并相应地解释在这里使用的空间相对描述符。
虽然一些剖视图的相应平面图和/或立体图可能未被示出，但是在此示出的装置结构的剖视图为沿着平面图中将会示出的两个不同方向和/或沿着立体图中将会示出的三个不同方向延伸的多个装置结构提供支持。这两个不同方向可以互相正交，或者可以不互相正交。这三个不同方向可包括可与这两个不同方向正交的第三方向。多个装置结构可被整合在同一电子装置中。例如，当在剖视图中示出装置结构(例如，存储器单元结构或晶体管结构)时，电子装置可包括将由电子装置的平面图示出的多个装置结构(例如，多个存储器单元结构或多个晶体管结构)。多个装置结构可被布置在阵列中和/或二维图案中。
在这里使用的术语仅用于描述特定实施例，而不是为了限制示例实施例。除非上下文另有清楚的指示，否则如这里所使用的单数形式也意图包括复数形式。还应该理解，如果这里使用术语“包括”和/或“包含”，则表示存在叙述的特征、整体、步骤、操作、元件和/或组件，但不排除存在或添加一个或多个其它特征、整体、步骤、操作、元件、组件和/或它们的组。当诸如“中的至少一个”的表述在一列元素之后时，所述表述修饰整列元素，而不是修饰列的单个元素。
这里参照作为示例实施例的理想的实施例(和中间结构)的示意图示的剖视图示描述了示例实施例。如此，由例如制造技术和/或容差导致的图示的形状的变化将被预期。因此，示例实施例不应被解释为受限于在此示出的区域的具体形状，而将包括由例如制造导致的形状的偏差。例如，示出为矩形的注入区域在其边缘具有圆形或弯曲特性和/或注入浓度的梯度，而不是从注入区域到非注入区域的二元(binary)改变。同样地，通过注入形成的埋区可能导致在埋区与通过其发生注入的面之间的区域中的一些注入。因此，在附图中示出的区域实际上是示意性的，所述区域的形状不是为了示出装置的区域的实际形状，也不是为了限制示例性实施例的范围。
除非相反地定义，否则这里所使用的全部术语(包括技术术语或科学术语)具有与示例实施例所属领域中的普通技术人员通常所理解的释义相同的释义。还将理解除非这里明确定义，否则诸如在通用字典中定义的术语应被解释为具有与相关领域中的上下文释义一致的释义，而不应理想化地或过于形式化地被解释。
下文，将参照图1至图15描述图像组合装置以及包括其的显示系统。
图1是示出根据本发明构思的至少一个示例实施例的图像组合装置的框图。
参照图1，图像组合装置1包括：多层混合器110、SGL控制单元150(例如，SGL控制器)、SGL输出单元120以及合成输出单元130。图像组合装置1还可包括存储器140。
多层混合器110可通过重叠多个图像层信息和/或数据(下文被称为“层”)来形成一个层。也就是，多层混合器110可通过组合多个层形成一个合成层。
具体地说，多层混合器110可通过从存储器140或外部模块接收将要经受图像组合的图像数据，并且根据期望的(和/或可选地预定的)操作组合该图像数据，来产生最终合成图像。在此情况下，将要经受图像组合的每个单独的图像对应于一个层，但不限于此。多层混合器110可通过将这些输入的层互相重叠来将多个输入的层合并到一个图像中。
可将关于多个层的数据发送到外部存储器(未示出)或外部装置(未示出)，或者从外部存储器(未示出)或外部装置(未示出)接收关于多个层的数据。具体地说，多层混合器110可使用关于外部存储器(未示出)或外部装置(未示出)的地址值，读取层单元中的必要数据。
由于多个层均独立地存在，因此所述多个层中的每个层的更新周期可以是互相不同的。如果是这样的话，一些层(例如，视频等)中的图像可频繁地更新，而其他层中的图像(例如，背景图像等)可不频繁地更新。
在现有技术中，即使当仅改变多个层中的一个而保持其他层时，也通过再次读取多个层中的全部来组合图像。然而，在大多数情况下，所述层中的大多数很少被改变，或者不频繁地被改变，仅所述层中的一些被改变。使用现有技术，还必须根据频繁改变的层的频率通过每次从存储器读取数据来组合很少改变的层。也就是，在现有技术中，由于关于未更新的层的数据必须被读取超过多次，因此存在资源被浪费的问题。
图像组合装置1可将第一属性(例如，稀疏)提供给不频繁更新的层，将第二属性(例如，非稀疏)提供给频繁更新的层。
多层混合器110可针对每帧产生最终合成图像。此外，多层混合器可设置具有第一属性的所述层的组层(例如，稀疏组层(SGL))，并且可产生中间合成图像，并将该中间合成图像存储在存储器140中。以下，中间合成图像被称为第一合成图像(例如，图5的SGL合成图像)，每帧的最终合成图像被称为第二合成图像(例如，图5的最终合成图像)。将基于这些术语描述本发明构思的示例实施例。
多层混合器110可组合多个层中的一些(即，多个层中的期望的数量)，以产生第一合成图像，并且可将第一合成图像与其他层(即，多个层中的剩余的层)组合，以产生第二合成图像。
在此情况下，当在由SGL控制单元150设置的组层中包括的多个层中的任何一个在第一帧被更新时，可产生第一合成图像。可通过SGL输出单元120将产生的第一合成图像存储在存储器140中。此外，可不针对每帧生成第一合成图像。
当在由SGL控制单元150设置的组层中包括的所述层中的全部在第一帧之后的第二帧未被更新时，可使用存储在存储器140中的第一合成图像来产生第二合成图像。具体地说，可基于存储在第一帧中的第一合成图像以及未包括在由SGL控制单元150设置的组层中的所述层，来产生第二合成图像。可通过针对每帧的合成输出单元130，将产生的第二合成图像发送到外部装置(未示出)。
SGL控制单元150可控制稀疏组层(下文，被称为“SGL”)。SGL表示基于合成的优先级顺序的多个层中的具有第一属性(例如，稀疏)的连续层的最大集。SGL控制单元250可为多个层提供和/或分配第一属性(例如，稀疏)或第二属性(例如，非稀疏)。此外，SGL控制单元250可将多个层分为具有第一属性(例如，稀疏)并且属于SGL的第一层组以及不与第一层组重叠的第二层组(即，第一层组的层不包括在第二层组中包括的层)。随后将参照图2和图3描述它的详细的描述。
在此情况下，多层混合器110组合第一层组以在第一帧产生第一合成图像，并且将包括更新的层(或者换言之已经更新和/或变化的多个层中的层)的第二层组与在第一帧中生成的第一合成图像进行组合，以在第一帧之后的第二帧中产生第二合成图像。
SGL输出单元120可将包括在SGL中的层的合成图像发送到存储器或缓冲器(未示出)。SGL输出单元120可接收由多层混合器110组合的第一合成图像，并且将该第一合成图像发送到存储器140。可通过SGL控制单元来控制SGL输出单元120。此外，当包括在SGL中的层被更新时，SGL输出单元120可将第一合成图像发送到存储器140，当包括在SGL中的层未被更新时，SGL输出单元120可不将第一合成图像发送到存储器140。
合成输出单元130可接收由多层混合器110最终组合的图像(例如，第二合成图像)，并且针对每帧将该第二合成图像发送到外部装置(未示出)。例如，外部装置(未示出)可包括显示第二合成图像的显示面板、监控器、投影仪、电视等。然而，示例实施例不受限于此。
存储器140可存储第一合成图像，并且可发送关于第一合成图像的数据。此外，存储器140可用作操作图像组合装置1所必需的操作存储器。存储器140可位于多层混合器中，或者还可作为单独的存储器位于多层混合器的外部。
在本发明构思的一些示例实施例中，存储器140可被放置在多层混合器110的外部，如图1中所示。例如，可以以PoP(堆叠式封装体叠层)、SoC(片上系统)等的形式打包存储器140和多层混合器110。存储器140，例如，可以是非易失存储器装置，诸如，半导体磁盘装置(SSD)、硬盘装置、磁带驱动器、可擦写光盘等。然而，本发明构思的示例实施例不限于此。
图2至图4是示出根据至少一个示例实施例的图像组合装置的SGL的框图。
SGL控制单元150可将第一属性(例如，稀疏)赋予给输入到多层混合器110的多个层中的不频繁更新的层，并且可将第二属性(例如，非稀疏)赋予给频繁更新的层。虽然稍后详细地描述，可通过用户基于所述多个层中的每个的期望的(和/或可选地预定的)数据，赋予第一属性(例如，稀疏)和/或第二属性(例如，非稀疏)。然而，本发明构思的示例实施例不限于此，还可基于关于所述多个层中的每个的更新频率信息，赋予第一属性(例如，稀疏)和/或第二属性(例如，非稀疏)。
SGL可包括具有第一属性(例如，稀疏)的连续层的期望的(和/或最大的)组。可通过期望的(和/或可选地预定的)操作顺序组合输入到多层混合器110的多个层。例如，多层混合器110可执行合并层0和层1的组合操作，然后组合的层与层2被附加地组合。也就是，多层混合器110可以以期望的(和/或可选地预定的)顺序连续地组合多个层。可根据显示系统的结构或设计方法确定层的组合顺序。因此，SGL可和/或必须由通过多层混合器110的组合顺序排列的所述层中的一组连续的层组成。
在图2中，在输入到多层混合器110的多个层之中，从层0至层N-2的N-1个层根据至少一个示例实施例是具有第一属性(例如，稀疏)的稀疏层。在此情况下，SGL是从层0至层N-2的连续的层的期望的(和/或最大的)组。即，SGL包括N-1个层。
在图3中，输入到多层混合器110的层的数量是N，具有第二属性的层根据至少一个示例实施例被设置在它们的中间。在图3中，具有第一属性的连续的层包括层0和层1。然而，由于层N-2的组合顺序不是连续的，因此仅层0和层1被包括在SGL中。即，在图3中，SGL由层0和层1这两层组成。根据一些示例实施例，SGL控制单元150可设置仅仅一个SGL。然而，本发明构思的示例实施例不限于此，一些示例实施例可包括可设置多于一个SGL的SGL控制单元150。
在图4中，SGL控制单元150可根据至少一个示例实施例设置多个SGL(例如，SGL1和SGL2等)。在图4中，具有第一属性(例如，稀疏)的连续层包括层0、层1、层N-3和层N-2。在此情况下，第一SGL(例如，SGL1)包括层0和层1，第二SGL(例如，SGL2)包括层N-3和层N-2。
图5和图6是示出根据至少一个示例实施例的图像组合装置的操作的框图。
当包括在SGL中的层中的一个或更多个被更新时，多层混合器110可产生SGL中包括的所有层的新的第一合成图像。在此情况下，多层混合器110也可基于新的第一合成图像产生多个层的第二合成图像。相反，当包括在SGL中的层中的一个或更多个未被更新时，多层混合器110可使用之前产生的第一合成图像产生第二合成图像而不产生新的第一合成图像。因此，图像组合装置1可由于每帧的未组合第一合成图像的SGL的大小，降低从外部存储器(未示出)读取数据所使用的资源和功率的消耗。
参照图5，图5示出根据至少一个示例实施例的当更新的层存在于在SGL中包括的层中时的初始图像组合过程或图像组合过程。在此情况下，多层混合器110读取多个层中的全部，并且针对全部的这些层执行组合工作。此时，多层混合器110可产生包括在SGL中的层的第一合成图像，并且将该第一合成图像存储在外部存储器(未示出)或缓冲器中。当包括在SGL中的层未被改变时，该存储的第一合成图像可被重新使用。此外，多层混合器110可产生所述层中的全部的第二合成图像，并且通过合成输出单元130将该第二合成图像输出到外部装置(未示出)。
参照图6，图6示出根据至少一个示例实施例的当更新的层不存在于包括在SGL中的层中时的图像合成过程。在此情况下，由于包括在SGL中的层未被更新，因此这些层的中间合成图像存在于存储器140或缓冲器中。在此情况下，多层混合器110将之前存储的第一合成图像仅与未包括在SGL中的层进行组合，以产生最终合成图像，也就是，第二合成图像。产生的第二合成图像可通过合成输出单元130被发送到外部装置(未示出)。在此情况下，多层混合器110可在不读取与SGL相应的层的情况下，通过SGL输出单元120输出第一合成图像。
此外，在图6中，当多层混合器110读取存储在存储器140或缓冲器中的第一合成图像时，可使用SGL读取通道中的任一通道。例如，多层混合器110可读取存储在存储器140中的第一合成图像，而不是读取层N-2。例如，SGL控制单元150可通过将存储在存储器140中的第一合成图像的地址分配到多层混合器110来读取第一合成图像，而不是读取层N-2的地址。然而，本发明构思的示例实施例不限于此，多层混合器110可读取第一合成图像，而不是SGL的任何其他层。
因此，本发明构思的至少一个示例实施例的图像组合装置1可减小(和/或最小化)图像输入以及无更新的层的组合操作，由此降低所需的存储器带宽，并且减小功耗。
因此，如图5中所示，当更新的层存在于SGL中时，本发明构思的至少一个示例实施例的图像组合装置1，相似于传统的混合器，读取全部层，并且针对全部层执行组合工作。此外，图像组合装置1记录仅在存储器140或缓冲器中的SGL的合成图像(也就是，第一合成图像)。在此情况下，图像组合装置1可需要额外的存储器带宽和功耗。
然而，如图6中所示，当更新的层不存在于SGL中时，图像组合装置1读取之前存储的SGL的合成图像(也就是，第一合成图像)而不读取包括在SGL中的多个层的图像，并且为了未包括在SGL中的其余的层执行组合工作，由此减小存储器带宽需求以及功耗。
因此，在一般的显示系统中，表现节省效果的图6的操作的频率与消耗额外的资源的图5的操作的频率相比是明显较高的，因此，根据本发明构思的至少一个示例实施例的图像组合装置可获得减小存储器带宽和功耗的效果。
图7和图8是示出根据本发明构思的至少一个示例实施例的包括在图像组合装置的SGL控制单元中的寄存器的框图。为了便于解释，在下文中，将省略与上述实施例的细节相同的细节，将主要描述它们之间的不同。
根据本发明构思的至少一个示例实施例的图像组合装置1的SGL控制单元150可包括用于设置SGL以及控制多层混合器110的操作的多个寄存器。
SGL控制单元150具有关于输入层的更新属性信息，并且可基于更新属性信息确定属于SGL的层。更新属性信息可由用户定义，或者可由专用硬件(和/或通过专用软件编程的硬件)通过检查各个层的更新频率定义。此外，SGL控制单元150具有关于每层的更新信息，并且可通过确定更新的层是否存在于属于SGL的层中，控制多层混合器110和SGL输出单元120的操作。
参照图7和图8，图7和图8示出根据至少一个示例实施例的在SGL控制单元150中管理的寄存器配置的示例。SGL控制单元150可包括更新计数寄存器(UCNT)、稀疏属性寄存器(SAR)以及更新寄存器(UPD)。
UCNT可包括关于输入层的更新频率信息。SGL控制单元150可使用利用UCNT的专用硬件(和/或使用专用软件编程的硬件)，动态地确定每个层的第一属性(例如，稀疏)和第二属性(例如，非稀疏)。然而，本发明构思的示例实施例不限于此，可由用户赋予每个层第一属性(例如，稀疏)和/或第二属性(例如，非稀疏)。UCNT可针对每帧累积。
SAR是存储关于输入到多层混合器110的每个层的更新属性信息的寄存器。更新属性信息可包括第一属性(例如，稀疏)或第二属性(例如，非稀疏)。也就是，一个层采用第一属性(例如，稀疏)或第二属性(例如，非稀疏)，与此相关的信息可被存储在SAR中。可基于之前在每个层中设置的数据赋予第一属性(例如，稀疏)或第二属性(例如，非稀疏)，或者可基于存储与每个层有关的更新频率信息的UCNT来赋予第一属性(例如，稀疏)或第二属性(例如，非稀疏)。
SGL控制单元150可基于SAR将多个层分隔为SAR被激活(例如，具有逻辑值“1”)的层的第一组(例如，SGL)以及不与层的第一组重叠的层的第二组。在此情况下，层的第一组可包括SAR被激活的层中的连续的层。
UPD可存储关于输入到多层混合器110的每个层的更新信息。即，UPD指示每个层针对当前帧的更新状态。可针对每帧更新UPD的信息。SGL控制单元150可确定多层混合器110是否读取存储的第一合成图像，和/或多层混合器110是否读取图像的全部。随后，SGL控制单元150可确定第一合成图像是否通过SGL输出单元120被发送。
图7和图8分别对应于图5和图6，并且示出根据至少一个示例实施例的在SGL控制单元150中包括的寄存器中的每个的状态。
在图7中，根据示例情况，UCNT表示从之前帧到当前帧累积的更新的总次数。虽然图7中未详细地示出，但是UCNT的字段中的每个表示相关联的输入层的更新频率。如图7中所描述，字段可具有等于或大于0的值。例如，图7示出除第N-1字段之外的每个字段具有值0或1。虽然被夸大，但是在UCNT中，第N-1字段已经被更新971次，第2字段已经被更新1次，其他字段从未被更新。
SAR表示关于每个层的属性信息。在SAR中，除了第N-1字段外，其他字段具有第一属性(即，稀疏)。因此，在该示例中，SGL包括层0至层N-2。
UPD表示关于当前帧(第一帧)中的更新的层的信息。在当前帧(第一帧)中，层1和层N-1被更新，因此仅相应的字段被激活。
因此，由于包括在SGL中的层1被更新，所以多层混合器110基于包括在SGL中的层，产生第一合成图像，并且将该第一合成图像发送到SGL输出单元120。SGL输出单元120将发送的第一合成图像存储在存储器140中。此外，SGL输出单元120产生全部层的第二合成图像，并且将第二合成图像发送到合成输出单元130。
图8示出图7的一个帧之后的操作。UCNT累积第一帧中的UPD信息。因此，在当前帧(第二帧)的UCNT中，第1字段和第N-1字段的值被分别增加1。由于关于每层的更新属性信息未被改变，因此SAR的值未被改变。该事实表示在当前帧(第二帧)的UPD中，仅层N-1被更新。
因此，因为包括在SGL中的所述层未被更新，所以多层混合器110不再次产生第一合成图像。相反，多层混合器110读取存储在存储器140中的第一帧的第一合成图像。随后，多层混合器110将更新的层N-1与第一帧的第一合成图像进行合并，以产生第二合成图像。然后，多层混合器110将第二合成图像发送到合成输出单元130，合成输出单元130将第二合成图像发送到外部装置(未示出)。图像组合装置1的该操作是一个示例，本发明构思的示例实施例能够进行附加的操作的组合。换言之，示例实施例不限于讨论的示例的操作。
图9是示出根据本发明构思的至少一个示例实施例的图像组合装置的框图。为了便于解释，在下文中，将省略与上述实施例中的细节相同的细节，将主要描述它们之间的不同。
参照图9，可以以与参照图1至图8描述的图像组合装置1中的方式基本相同的方式来操作根据本发明构思的至少一个示例实施例的图像组合装置2。然而，根据该示例实施例的图像组合装置2还可包括层输入单元160。
层输入单元160可从外部存储器(未示出)或外部模块(未示出)读取每层，或者可读取存储在存储器140中的第一合成图像。此外，层输入单元160可将多个读取的层发送到多层混合器110。可通过SGL控制单元150控制层输入单元160。
具体地说，层输入单元160从外部存储器(未示出)读取每层，或者从外部模块(未示出)直接地接收每层，然后将所述层(串行地和/或并行地)发送到多层混合器110。层输入单元160可包括接收各自的层的N个访问的单元161至169。
SGL控制单元150将通过层输入单元160接收的每个层的地址分配到访问单元161至169中的每个。访问单元161至169中的每个访问存储第一合成图像的存储器140、外部存储器(未示出)或外部模块(未示出)，以读取关于所述层中的每个的数据。
SGL控制单元150还可包括有效层寄存器(VLD)以及稀疏组层寄存器(SGLR)。
VLD存储关于多个层是否是有效的信息。因此，SGL控制单元150允许多层混合器110执行仅仅下述层的组合操作，所述层为VLD被激活的层。
SGLR存储关于SGL是否包括多个层的信息。SGL控制单元150可设置仅通过VLD激活VLD的层的SGLR。因此，SGL控制单元150可设置VLD和SGLR二者被激活的层的SGL。因此，SAR和SGLR可以是彼此不相同的。此外，SGL控制单元150可允许多层混合器110产生VLD和SGLR二者被激活的层的第一合成图像。
在图9中，由于VLD和SGLR二者被激活的连续字段由层0至层2组成，因此SGL可包括层0至层2。
在该方式中，根据本发明构思的至少一个示例实施例的图像组合装置1减小(和/或最小化)图像输入以及涉及有效层(即，VLD未被激活的层)和/或未被更新的层(即，已经被改变和/或进一步处理的层)的组合操作，由此降低所需的存储器带宽，并且减小功耗。
图10是示出根据本发明构思的至少一个示例实施例的包括图像组合装置的无线通信系统的框图。
参照图10，无线通信系统900可以是蜂窝电话、智能电话终端、手持电话、个人数字助手(PDA)、膝上型计算机、计算机、平板、智能装置、可穿戴装置、视频游戏单元等。无线通信系统900可使用码分多址(CDMA)、诸如全球移动通信系统(GSM)的时分多址(TDMA)，或其他无线通信标准。
无线通信系统900可通过接收路径和发送路径提供双向通信。从一个或多个基站发送的信号可通过接收路径中的天线911被接收，或者可被发送到接收器(RCVER)913。接收器913约束(conditions)并且数字化接收的信号，将样本提供到用于额外的处理目的的数字部分920。在发送路径中，发送器(TMTR)915接收从数字部分920发送的数据，然后处理并约束(conditions)该数据以产生已调制的信号。这些已调制的信号通过天线911被发送到一个或多个基站。
数字部分920可被实施为一个或多个数字信号处理器、微处理器、精简指令集计算机(RISC)等。此外，可在一个或多个专用集成电路(ASICs)或其他类型的集成电路上制造数字部分。
数字部分可包括各种处理单元和接口单元，诸如，调制解调器处理器934、视频处理器922、应用处理器924、显示处理器928、控制器/多核处理器926、中央处理单元(CPU)930以及外部总线接口(EBI)932。
视频处理器922执行用于图形应用的处理。一般地，视频处理器922可包括用于任何组的图形操作的任何数量的处理单元和/或模块。可通过固件和/或软件来实施视频处理器922的特定的部分(和/或操作)。例如，可通过用于执行上述功能的固件和/或软件模块(例如，程序、功能)来实施控制单元。固件和/或软件代码可被存储在存储器中，并且还可通过处理器(例如，多核处理器926)被执行。存储器可被实施在处理器中，或可被实施在处理器外部。
视频处理器922可实施软件接口，诸如开放图形库(OpenGL)、直接3D(Direct 3D)、直接X(DirectX)等。中央处理单元(CPU)930可与视频处理器922一起执行一系列图形处理操作。控制器/多核处理器926包括至少两个核，因此可通过根据必须由控制器/多核处理器926处理的工作量(workload)，将工作量分配到两个核，来同时地处理工作量。然而，本发明构思不限于此，可使用一个或多个处理器和/或处理器核来实施示例实施例。
在图10中，应用处理器924被示出为包括在数字部分920中的一个组件，但是本发明构思的示例实施例不限于此。在本发明构思的一些示例实施例中，数字部分920可被集成并且实现在在一个应用处理924或应用芯片中。
调制解调器处理器934可执行接收器913、发送器915和数字部分920之中的数据传输处理所需的操作。显示处理器928可执行驱动显示器910所需的操作。
根据本发明构思至少一个示例实施例的显示系统可使用示出的处理器922、924、926、928、930和934以及存储器，执行一个或多个图像组合操作。显示系统可根据本发明构思的一些示例实施例包括上述的图像组合装置1和2。
例如，显示系统可使用视频处理器922执行图像组合操作。在此情况下，视频处理器922可组合多个层中的一些，以产生第一合成图像，并且将第一合成图像与多个层中的其他层组合，以产生第二合成图像。此外，视频处理器922可将第一合成图像存储在内部存储器或外部存储器中。
此外，视频处理器922可根据本发明构思的一些示例实施例包括多层混合器110、SGL控制单元150、SGL输出单元120以及合成输出单元130，并且可以以与上述图像组合装置的方式大体上相同的方式来操作。然而，本发明构思的示例实施例不限于此。
接下来，将参照图11描述根据本发明构思的至少一个示例实施例的包括图像组合装置的计算系统。
图11是示出根据本发明构思的至少一个示例实施例的包括图像组合装置的计算系统的框图。
参照图11，计算系统1000包括：中央处理器(CPU)1002、系统存储器1004、图形系统1010以及显示装置1006。
中央处理器(CPU)1002可执行驱动计算系统1000所需的操作。系统存储器1004可被配置为存储数据。系统存储器可存储由CPU 1002处理的数据。系统存储器1004可用作CPU1002的可操作的存储器。系统存储器1004可包括至少一个易失性存储器(诸如，双倍数据速率静态DRAM(DDR SDRAM)或单倍数据速率静态DRAM(SDR SDRAM))和/或至少一个非易失性存储器(诸如，电可擦除可编程ROM(EEPROM)或闪存)。
图形系统1010可包括图形处理单元(GPU)1011、图形存储器1012、显示控制器1013、图形接口1014以及图形存储控制器1015。根据本发明构思的一些示例实施例的上述图像组合装置1和2中的任何一个可被应用为该图形系统1010的组件。
GPU 1011可执行计算系统1000所需的图形操作处理。具体地说，GPU1011可组装均由一个或多个点构成的基元，并且使用组装的基元执行渲染。
图形存储器1012可存储由GPU 1011处理的图形数据，或者可存储被提供到GPU1011的图形数据。此外，图形存储器1012可用作GPU 1011的可操作存储器。根据本发明构思的一些示例实施例的上述图像组合装置1至2中的任何一个可被采用为该图形存储器1012的组件。
显示控制器1013控制显示装置1006，以使被渲染的图像帧可被显示。
图形接口1014可接合中央处理器1002和GPU 1011，图形存储控制器1015可提供在系统存储器1004与GPU 1011之间访问的存储器。
虽然在图11中未清楚地示出，但计算系统1000还可包括至少一个输入装置(诸如，按钮、触摸屏幕或麦克风)，和/或至少一个输出装置(诸如，扬声器)。此外，计算系统1000还可包括用于通过有线或无线通信与外部装置交换数据的接口装置。接口装置可以是天线、有线和无线收发器等。
根据至少一个示例实施例，计算系统1000可以是诸如以下项的任何系统：移动电话、智能电话、个人数字助手(PDA)、台式、膝上型、笔记本、平板、智能装置、可穿戴装置、便携式游戏机等。
随后，将参照图12描述根据本发明构思的至少一个示例实施例的包括图像组合装置的电子系统。
图12是示出根据本发明构思的至少一个示例实施例的包括图像组合装置的电子系统的框图。
参照图12，电子系统1100可包括：控制器1110、输入/输出(IO)单元1120、存储器单元1130、接口1140以及总线1150。控制器1110、输入/输出(IO)单元1120、存储器单元1130和/或接口1140通过总线1150互相连接。总线1150表示传输数据的路径。
控制器1110可包括微处理器、数字信号处理器、微控制器以及具有与此相似功能的逻辑装置中的至少一个。输入/输出(IO)单元1120可包括小键盘、键盘、显示器等。存储器单元1130可存储数据和/或指令。接口1140可执行将数据发送到通信网络以及从通信网络接收数据的功能。接口1140可以是有线或无线接口。例如，接口1140可包括天线或者有线或无线收发器。
虽然图12中未示出，但是电子系统1100还可包括作为用于改善控制器1110的操作的操作存储器的高速DRAM和/或SRAM。根据本发明构思的一些示例实施例的上述的图像组合装置1和2中的任何一个可被设置在存储器单元1130中，或者可作为控制器1110、输入/输出(IO)单元1120等的部分被提供。
电子系统1100可被应用到个人数字助理(PAD)、便携式计算机、上网本、无线电话、移动电话、数字音乐播放器、存储卡、智能装置、可穿戴装置、便携式游戏机、和/或在无线环境中发送和/或接收信息的其他电子产品。
图13至图15是示出根据本发明构思的一些示例实施例的能够应用图像组合装置的显示系统的示例的透视图。
图13示出平板PC1200，图14示出笔记本计算机1300，图15示出智能电话1400。根据本发明构思的一些示例实施例的图像组合装置1和2中的至少一个可被用于计算和/或处理装置，诸如，平板PC1200、笔记本计算机1300和/或智能电话1400等。
同时，对本领域的技术人员将显而易见的是：根据本发明构思的一些实例实施例的图像组合装置可被应用于其他未示出的集成电路系统。即，平板PC1200、笔记本计算机1300以及智能电话1400已经被描述为根据至少一个示例实施例的显示系统的示例，但是根据本发明构思的至少一个示例实施例的显示系统的示例不限于此。根据本发明构思的一些示例实施例的显示系统可被实现在以下项中：计算机、超便携移动PC(UMPC)、工作站、上网本、个人数字助手(PDA)、便携式计算机、无线电话、移动电话、电子书阅读器、便携式多媒体播放器(PMP)、便携式游戏机、个人导航装置、黑盒子、数字相机、电视机、3维电视机、视频投影仪、数字音频记录器、数字音频播放器、数字图片记录器、数字图像播放器、数字视频记录器、数字视频播放器、平板、智能装置、可穿戴装置等。
可使用硬件组件、软件组件或它们的组合来实现在此描述的单元和/或模块。例如，硬件组件可包括：微控制器、存储器模块、传感器、放大器、带通滤波器、模数转换器以及处理装置等。可使用被配置为通过执行算术、逻辑以及输入/输出操作实现和/或执行程序代码的一个或多个硬件装置来实施处理装置。处理装置可包括：处理器、控制器和算术逻辑单元、数字信号处理器、微型计算机、现场可编程阵列、可编程逻辑单元、微处理器或者能够以限定方式响应并执行指令的任何其他装置。处理装置可运行操作系统(OS)以及在OS上运行的一个或多个软件应用。处理装置还可响应于软件的执行来访问、存储、操控、处理和创建数据。为了简化的目的，处理装置的描述被用作单数；然而，本领域的技术人员将理解，处理装置可包括多个处理单元和多种类型的处理单元。例如，处理装置可包括多个处理器或者处理器和控制器。此外，不同的处理配置是可行的，诸如，并行处理器、多核处理器、分布式处理等。
软件可包括计算机程序、代码段、指令或者它们的任何组合，以独立地或共同地指示和/或配置处理装置按照期望的进行操作，因此，将处理装置变换为专用处理器。软件和数据可被永久或暂时地实施在任何类型的机器、组件、物理或虚拟设备或者计算机存储介质或装置中。软件还可分布在联网的计算机系统上，从而软件以分布式方式被存储和执行。可通过一个或多个非暂时性计算机可读记录介质存储软件和数据。
根据上述示例实施例的方法可被记录在包括程序指令的非暂时计算机可读介质中，以实施上述示例实施例的各种操作。介质还可单独包括程序指令、数据文件、数据结构等，或者还可包括程序指令、数据文件、数据结构等的组合。记录在介质上的程序指令可以是针对一些示例实施例的目的特殊设计和构造的程序指令，或者它们可以是对计算机软件领域的技术人员周知的和可用的一类程序指令。非暂时计算机可读介质的示例包括磁介质(诸如，硬盘、软盘和磁带)、光学介质(诸如，CD-ROM盘、DVD和/或蓝光光盘)、磁光介质(诸如，光盘)、被特别构造为存储和执行程序指令的硬件装置(诸如，只读存储器(ROM)、随机存取存储器(RAM)、闪存(例如，USB闪存驱动器、存储卡、记忆棒)等)等。程序指令的示例包括机器代码(诸如，由编译器所产生的)和包含计算机使用解释器执行的高级代码的文件二者。为了执行上述示例实施例的操作，上述装置可被构造为用作一个或多个软件模块，反之亦然。
应理解，这里描述的示例实施例应仅被认为是描述性意义，而不是为了限制的目的。对根据示例实施例的每个装置或方法中的特征或方面的描述通常应被认为可用于根据示例实施例的其他装置或方法中的其他类似特征或方面。尽管已经具体地示出和描述了一些示例实施例，但是本领域的普通技术人员将理解，在不脱离权利要求的精神和范围的情况下，可以对其进行形式和细节上的变化。

Claims (18)

1.一种图像组合装置，包括：
稀疏组层SGL控制单元，被配置为将与图像的帧对应的多个层分为第一层组和第二层组，第二层组的层不包括第一层组的层；
多层混合器，被配置为组合第一帧的第一层组，以在第一帧产生第一合成图像作为第一帧的中间合成图像，并且将第一帧之后的第二帧的第二层组与第一帧的第一合成图像进行组合，以在第二帧产生第二合成图像作为第二帧的最终合成图像，第二帧的第二层组包括更新的层。
2.如权利要求1所述的图像组合装置，还包括：
存储器，被配置为存储第一合成图像；
SGL输出单元，被配置为接收第一合成图像，并且将接收的第一合成图像发送到存储器；
合成输出单元，被配置为接收第二合成图像，并且将接收的第二合成图像发送到外部装置。
3.如权利要求2所述的图像组合装置，其中，
SGL输出单元被配置为：当包括在SGL中的层被更新时，将第一合成图像发送到存储器；
SGL输出单元被配置为：当包括在SGL中的层未被更新时，不将第一合成图像发送到存储器。
4.如权利要求2所述的图像组合装置，其中，合成输出单元被配置为针对每帧将第二合成图像发送到外部装置。
5.如权利要求2所述的图像组合装置，其中，SGL控制单元被电连接到SGL输出单元或者合成输出单元，以控制SGL输出单元或合成输出单元的操作。
6.如权利要求2所述的图像组合装置，其中，存储器位于多层混合器中，或者存储器作为单独的存储器位于多层混合器外部。
7.如权利要求2所述的图像组合装置，其中，
SGL控制单元包括稀疏属性寄存器SAR，其中，稀疏属性寄存器被配置为存储与输入到多层混合器的层中的每个层有关的更新属性信息；
更新属性信息包括第一属性或第二属性；
基于之前在每个层中确定的数据赋予第一属性或第二属性，或者基于存储在被配置为存储关于每个层的更新频率信息的更新计数寄存器UCNT中的信息来赋予第一属性或第二属性。
8.如权利要求7所述的图像组合装置，其中，第一层组包括具有第一属性的连续的层的组。
9.如权利要求2所述的图像组合装置，其中，
SGL控制单元包括更新寄存器UPD，其中，更新寄存器被配置为存储与输入到多层混合器的层中的每个层有关的更新信息；
UPD包括与每个层针对当前帧是否被更新有关的信息。
10.如权利要求9所述的图像组合装置，其中，
多层混合器被配置为：当包括在第一层组中的层未被更新时，不在第二帧产生第一合成图像；
多层混合器被配置为：使用在第一帧产生的第一合成图像和更新的层来产生第二合成图像。
11.如权利要求2所述的图像组合装置，其中，SGL控制单元包括：
有效层寄存器VLD，被配置为存储关于输入到多层混合器的层中的每个层是否有效的信息；
稀疏组层寄存器SGLR，被配置为存储关于输入到多层混合器的每个层是否被包括在第一层组中的信息。
12.如权利要求11所述的图像组合装置，其中，多层混合器被配置为执行有效层寄存器VLD被激活的层的组合操作。
13.一种图像组合装置，包括：
层接收单元，被配置为接收与图像的帧对应的多个层；
稀疏组层SGL控制单元，被配置为将所述多个层分为第一层组和第二层组，第二层组中的层与第一层组中的层不重叠，SGL控制单元包括稀疏属性寄存器SAR，稀疏属性寄存器被配置为存储关于被激活的所述多个层的更新属性信息；
存储器，被配置为存储当前帧之前的帧的第一合成图像，第一合成图像是当前帧之前的帧的中间合成图像；
多层混合器，被配置为将从存储器发送的第一合成图像与当前帧的第二层组进行组合以产生第二合成图像作为当前帧的最终合成图像。
14.如权利要求13所述的图像组合装置，还包括：
SGL输出单元，被配置为接收第一合成图像，并且将接收的第一合成图像发送到存储器；
合成输出单元，被配置为接收第二合成图像，并且将第二合成图像发送到外部装置。
15.如权利要求14所述的图像组合装置，其中，
SGL输出单元被配置为：当包括在SGL中的层被更新时，将第一合成图像发送到存储器；
SGL输出单元被配置为：当包括在SGL中的层未被更新时，不将第一合成图像发送到存储器。
16.如权利要求14所述的图像组合装置，其中，合成输出单元被配置为针对每帧将第二合成图像发送到外部装置。
17.一种显示系统，包括：
存储器，被配置为存储图像数据，所述图像数据包括多个层；
控制器，被配置为：基于所述多个层中的每个的更新特征，将属性信息分配到所述图像数据的所述多个层中的每个，并且基于分配的所述多个层中的每个的属性信息，将所述多个层中的每个分配到至少两个组中的一个；
多层混合器，被配置为：
从存储器接收所述多个层，
基于分配的组处理所述多个层，
基于处理所述多个层的结果产生最终合成图像；
显示面板，被配置为显示最终合成图像，
其中，分配的属性信息包括指示层以第一频率被更新的第一属性或者指示层以第二频率被更新的第二属性，其中，第一频率低于第二频率，
其中，控制器被配置为：基于所述多个层中的每个具有第一属性还是第二属性，将所述多个层中的每个分配到第一组或第二组中，
其中，所述处理包括：
组合第一帧的分配到第一组中的层，以形成第一帧的中间合成图像；
将中间合成图像存储在存储器中；
将第一帧的中间合成图像与第一帧之后的第二帧的分配到第二组的层进行组合，以形成第二帧的最终合成图像。
18.如权利要求17所述的显示系统，还包括：
第一寄存器，被配置为存储所述多个层中的每个层的更新频率信息；
第二寄存器，被配置为存储所述多个层中的每个层的更新信息。
CN201610076253.6A 2015-02-03 2016-02-03 图像组合装置以及包括其的显示系统 Active CN105843568B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020150016624A KR102287400B1 (ko) 2015-02-03 2015-02-03 이미지 합성 장치와 이를 포함하는 디스플레이 시스템
KR10-2015-0016624 2015-02-03

Publications (2)

Publication Number Publication Date
CN105843568A CN105843568A (zh) 2016-08-10
CN105843568B true CN105843568B (zh) 2021-07-02

Family

ID=56553286

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610076253.6A Active CN105843568B (zh) 2015-02-03 2016-02-03 图像组合装置以及包括其的显示系统

Country Status (4)

Country Link
US (2) US10490168B2 (zh)
KR (1) KR102287400B1 (zh)
CN (1) CN105843568B (zh)
TW (1) TWI712016B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118227069B (zh) * 2024-05-23 2024-09-17 鼎道智芯(上海)半导体有限公司 显示控制方法和电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103155568A (zh) * 2010-07-08 2013-06-12 杜比实验室特许公司 用于使用参考处理信号进行多层图像和视频传输的系统和方法
CN103824090A (zh) * 2014-02-17 2014-05-28 北京旷视科技有限公司 一种自适应的人脸低层特征选择方法及人脸属性识别方法

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10210364A (ja) 1997-01-21 1998-08-07 Matsushita Electric Ind Co Ltd 画像合成方法、および、画像合成装置
US7088375B1 (en) * 2000-04-27 2006-08-08 Adobe Systems Incorporated Grouping layers in composited image manipulation
JP3612035B2 (ja) 2000-11-29 2005-01-19 株式会社アクセル 画像処理装置
US7184602B2 (en) * 2003-05-02 2007-02-27 Microsoft Corp. System and method for low bandwidth video streaming for face-to-face teleconferencing
ATE381747T1 (de) * 2004-02-18 2008-01-15 Harman Becker Automotive Sys Alphamischung auf basis einer nachschlagtabelle
CN1700299A (zh) 2004-05-17 2005-11-23 松下电器产业株式会社 图像合成输出装置、方法、程序和记录媒体及其显示装置和移动通信器械
JP2006139758A (ja) 2004-10-13 2006-06-01 Matsushita Electric Ind Co Ltd 画像合成装置、及び画像合成方法
JP2007214659A (ja) 2006-02-07 2007-08-23 Aoi Technology Inc Ｏｓｄ装置
JP2007241738A (ja) * 2006-03-09 2007-09-20 Matsushita Electric Ind Co Ltd 画面合成装置
JP2007258873A (ja) * 2006-03-22 2007-10-04 Toshiba Corp 再生装置および再生方法
KR100776433B1 (ko) 2006-05-19 2007-11-16 주식회사 팬택앤큐리텔 개선된 영상 합성이 가능한 이동통신 단말기
US7855752B2 (en) * 2006-07-31 2010-12-21 Hewlett-Packard Development Company, L.P. Method and system for producing seamless composite images having non-uniform resolution from a multi-imager system
WO2008093391A1 (ja) 2007-01-29 2008-08-07 Mitsubishi Electric Corporation 画像表示装置及び画像表示方法
US20090305782A1 (en) * 2008-06-10 2009-12-10 Oberg Gregory Keith Double render processing for handheld video game device
JP4591576B2 (ja) * 2008-08-18 2010-12-01 ソニー株式会社 画像処理装置、画像処理方法、プログラム
US8274501B2 (en) 2008-11-18 2012-09-25 Intel Corporation Techniques to control self refresh display functionality
JP5523035B2 (ja) 2009-09-18 2014-06-18 パナソニック株式会社 画像処理装置、及び画像処理方法
US20110093099A1 (en) * 2009-10-16 2011-04-21 Newport Controls Controller system adapted for spa
JP2011232467A (ja) 2010-04-26 2011-11-17 Nec Corp 画像生成装置及び画像生成方法並びにそのプログラム
JP5740149B2 (ja) * 2010-12-22 2015-06-24 クラリオン株式会社 表示制御装置、表示レイヤ合成プログラム
US20130120424A1 (en) 2011-11-14 2013-05-16 Qualcomm Innovation Center, Inc. Method and apparatus for improved rendering of images
KR101551206B1 (ko) * 2013-12-13 2015-09-09 현대자동차주식회사 차량 데이터 제어 시스템 및 제어 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103155568A (zh) * 2010-07-08 2013-06-12 杜比实验室特许公司 用于使用参考处理信号进行多层图像和视频传输的系统和方法
CN103824090A (zh) * 2014-02-17 2014-05-28 北京旷视科技有限公司 一种自适应的人脸低层特征选择方法及人脸属性识别方法

Also Published As

Publication number Publication date
KR102287400B1 (ko) 2021-08-06
US20160225350A1 (en) 2016-08-04
US10490168B2 (en) 2019-11-26
US20200051532A1 (en) 2020-02-13
TW201636978A (zh) 2016-10-16
TWI712016B (zh) 2020-12-01
US11030976B2 (en) 2021-06-08
CN105843568A (zh) 2016-08-10
KR20160095401A (ko) 2016-08-11

Similar Documents

Publication Publication Date Title
US10296217B2 (en) Techniques to configure a solid state drive to operate in a storage mode or a memory mode
US11749326B2 (en) Dynamic random access memory (DRAM) device and memory controller therefor
CN109388595B (zh) 高带宽存储器系统以及逻辑管芯
US10096304B2 (en) Display controller for improving display noise, semiconductor integrated circuit device including the same and method of operating the display controller
US9799092B2 (en) Graphic processing unit and method of processing graphic data by using the same
US20160378607A1 (en) Instant restart in non volatile system memory computing systems with embedded programmable data checking
TWI673677B (zh) 半導體裝置
CN105843568B (zh) 图像组合装置以及包括其的显示系统
US20160026498A1 (en) Power management system, system-on-chip including the same and mobile device including the same
US9342863B2 (en) Virtualizing applications for per-monitor displaying
US8665283B1 (en) Method to transfer image data between arbitrarily overlapping areas of memory
US20160086307A1 (en) Application processor including reconfigurable scaler and devices including the processor
CN115775198A (zh) 多核gpu中的重叠几何形状处理
US20180095929A1 (en) Scratchpad memory with bank tiling for localized and random data access
US7928987B2 (en) Method and apparatus for decoding video data
CN108292265B (zh) 对高性能存储器的存储器管理
US11625269B1 (en) Scheduling for locality of reference to memory
US10528278B2 (en) Data processing apparatus, data processing method, and computer readable medium
CN117807014A (zh) 电子装置和数据读取方法
US8185671B2 (en) Technique for increasing control and status signal density in a fixed register address space
CN111831338A (zh) 临时寄存器中的按通道动态索引
CN111145073A (zh) 基于细分状态的图形处理器和图形处理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant