CN109214977B - 图像处理装置及其控制方法 - Google Patents

图像处理装置及其控制方法 Download PDF

Info

Publication number
CN109214977B
CN109214977B CN201810729837.8A CN201810729837A CN109214977B CN 109214977 B CN109214977 B CN 109214977B CN 201810729837 A CN201810729837 A CN 201810729837A CN 109214977 B CN109214977 B CN 109214977B
Authority
CN
China
Prior art keywords
image
region
representative value
image data
memory
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810729837.8A
Other languages
English (en)
Other versions
CN109214977A (zh
Inventor
金承勋
白光璇
李政垣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN109214977A publication Critical patent/CN109214977A/zh
Application granted granted Critical
Publication of CN109214977B publication Critical patent/CN109214977B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39—Control of the bit-mapped memory
    • G09G5/395—Arrangements specially adapted for transferring the contents of the bit-mapped memory to the screen
    • G09G5/397—Arrangements specially adapted for transferring the contents of two or more bit-mapped memories to the screen simultaneously, e.g. for mixing or overlay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/20—Processor architectures; Processor configuration, e.g. pipelining
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/60—Memory management
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006—Details of the interface to the display terminal
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/363—Graphics controllers
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39—Control of the bit-mapped memory
    • G09G5/393—Arrangements for updating the contents of the bit-mapped memory
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/87—Regeneration of colour television signals
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/10—Mixing of images, i.e. displayed pixel being the result of an operation, e.g. adding, on the corresponding input pixels
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/18—Use of a frame buffer in a display terminal, inclusive of the display panel

Abstract

提供了一种图像处理装置和控制图像处理装置的方法。所述图像处理装置包括存储器；以及处理器，被配置为：当被设置在第一图像帧中的区中的像素中的至少一个不满足预定条件时，将所述区的所有图像数据存储在与所述区相对应的所述存储器的区域中，以及当所述区中的所有像素满足所述预定条件时，不将所述区中的像素中的每一个的图像数据存储在与所述区相对应的所述存储器的所述区域中。

Description

图像处理装置及其控制方法
相关申请的交叉引用
本申请要求于2017年7月5日向韩国知识产权局提交的韩国专利申请第10-2017-0085560号的权益，其公开内容通过引用整体并入本文。
技术领域
本公开的示例实施例涉及图像处理装置和/或控制所述图像处理装置的方法。
背景技术
图像处理装置可以将电信号转换为视觉信息并将所述视觉信息显示给用户。图像处理装置的示例可以包括机顶盒、电视机或台式计算机的监控设备、能够执行显示功能的室内或室外布告板等，并且还可以包括便携式终端设备，诸如膝上型计算机、蜂窝电话、智能电话、平板电脑、个人数字助理(PDA)、导航设备以及便携式游戏机。
图像处理装置可以包括能够向外部显示图像的显示面板。显示面板包括使用液晶的液晶显示屏(LCD)、使用发光二极管(LED)的显示面板、使用有机发光二极管(OLED)的显示面板或使用有源矩阵有机发光二极管的显示面板。
发明内容
本公开的一些示例实施例提供了一种能够适当且有效地使用其中提供的资源的图像处理装置。
在一些示例实施例中，图像处理装置包括存储器；以及处理器，该处理器被配置为：基于设置在第一图像帧中的区的像素中的至少一个是否满足条件，选择性地将所述区的像素的图像数据存储在与所述区相对应的存储器的区域中，使得处理器被配置为响应于区的所有像素满足条件而不将区的像素的每一个的图像数据存储在存储器的区域中。
根据本公开的一些其他示例实施例，提供了一种控制图像处理装置的方法。
在一些示例实施例中，所述方法包括：确定第一图像帧中的区的至少一个像素是否满足条件；以及基于所述区的像素中的至少一个像素是否满足所述条件，选择性地将与所述区的所有像素相对应的图像数据存储在存储器的区域中，使得响应于所述区中所有像素满足所述条件，所述选择性存储不将与所述区的像素中的每一个相对应的图像数据存储在存储器的区域中。
附图说明
从以下结合附图的详细描述中将更清楚地理解本公开的示例实施例，在附图中：
图1是根据示例实施例的图像处理装置的框图；
图2是用于说明显示图像的处理的视图；
图3是根据示例实施例的图形处理器的框图；
图4A是示出第一图像的示例实施例的视图；
图4B是用于说明在第一图像中设置的块的图；
图5是示出设置的块的示例实施例的视图；
图6是示出设置的块的另一个示例实施例的视图；
图7是示出设置的块的另一个示例实施例的视图；
图8是示出设置的块的另一个示例实施例的视图；
图9是示出存储有第一代表值以及第二代表值的表的示例的图；
图10是示出将图像数据存储在存储器中的示例的图；
图11是示出将图像数据存储在存储器中的另一个示例的图；
图12是示出从存储器读取图像数据的示例的图；
图13是示出从存储器读取图像数据的另一个示例的图；
图14是根据另一个示例实施例的图形处理器的框图；
图15是示出将第一图像以及第二图像进行组合的示例的视图；
图16是示出根据示例实施例的控制图像处理装置的方法的第一流程图；
图17是示出根据示例实施例的控制图像处理装置的方法的第二流程图；以及
图18是示出根据另一个示例实施例的控制图像处理装置的方法的流程图。
具体实施方式
在下文中，将参考图1至15描述根据示例实施例的图像处理装置。相同的参考编号在附图中表示相同的要素，并且将省略对其的重复描述。
图1是根据示例实施例的图像处理装置100的框图。
参考图1，图像处理装置100是指能够对输入图像执行特定处理并获取处理后的图像的装置。图像处理装置100可以包括例如通过使用显示单元120(或者替代地显示设备)将图像可视地显示到外部的显示设备。
更具体地，图像处理装置100的示例可以包括机顶盒、电视机、监控设备、台式计算机、膝上型计算机、蜂窝电话、智能电话、平板电脑、个人数字助理、导航设备、便携式游戏机、数字相机、声音再现器(MP3播放器等)、视频切换器(可以被称为视频混合器)以及要求图像处理功能的各种设备(例如，家用电器、车辆、机器人、机械、建筑设备、真空吸尘器以及/或机器人清洁器)。除了列出的示例之外，可以被应用下面描述的示例实施例的各种类型的装置可以是图像处理装置100的示例。
图像处理装置100可以包括处理器200以及存储器300。
图像处理装置100还可以包括输入单元110、通信单元112、存储单元114、只读存储器(ROM)和/或随机存取存储器(RAM)116(在下文中，被称为ROM/RAM 116)、显示单元120以及声音输出单元122。在这种情况下，输入单元110、通信单元112、存储单元114、ROM/RAM116、显示单元120以及声音输出单元122中的至少一个可以根据需要被省略。输入单元110、通信单元112、存储单元114、ROM/RAM 116、显示单元120、声音输出单元122、处理器200以及存储器300中的至少两个可以电连接以发送和接收数据。
处理器200可以控制图像处理装置100可以执行的全部或一些操作。例如，处理器200可以控制显示单元120，使得显示单元120显示通过输入单元110以及通信单元112中的至少一个输入的图像或存储在存储单元114中的图像，或者处理器200被配置为使得图像处理装置100可以根据用户的命令执行操作。
可以使用至少一个半导体芯片、电路以及相关组件来实现处理器200。
根据示例实施例，处理器200可以包括主处理器210以及图形处理器220。
主处理器210可以控制图像处理装置100的所有操作。例如，主处理器210可以从存储单元114中读取图像并将所述图像发送到图形处理器220或存储器300，并且可以将通过通信单元112传送的图像存储到存储单元114。另外，主处理器210可以生成用于图形处理器220的控制信号并将所述控制信号传送给图形处理器220，使得图形处理器220可以执行操作。
可以使用中央处理单元(CPU)、微控制器单元(MCU)、微处理器、应用处理器(AP)、电子控制单元(ECU)和/或能够生成用于各种操作过程和控制的信号的其他电子设备来实现主处理器210。
根据示例实施例，主处理器210可以执行下面描述的图形处理器220的全部或一些操作。
图形处理器220可以执行与图像相关的特定操作。例如，图形处理器220可以将从输入单元110、通信单元112、存储单元114和/或ROM/RAM 116获取的图像的全部或一部分写入存储器300中，并且可以将写入并存储在存储器300中的图像的全部或一部分读取并将其发送到显示单元120。下面将描述其详细描述。
此外，图形处理器220可以被配置为对所获取的图像执行各种图像处理操作，例如，过滤处理和压缩。
可以使用一个或多个半导体芯片以及诸如衬底这样的相关组件来实现图形处理器220。
可以使用例如图形处理单元(GPU)或安装有图形处理器的图形卡来实现图形处理器220。
存储器300可以根据主处理器210以及图形处理器220中的至少一个的操作来存储输入图像的全部或一部分。存储器300可以包括多个写入区域(例如，图10中的写入区域301至313)，使得图像可以被记录在其中。
可以使用动态随机存取存储器(DRAM)、静态随机存取存储器(SRAM)和/或闪存来实现存储器300。
根据示例实施例，存储器300可以包括帧缓冲存储器(在下文中，被称为帧缓冲器)。帧缓冲器是指能够临时存储与每个像素相对应的图像数据的存储设备。具体而言，帧缓冲器被配置为存储被分配给图像的每个像素(其中可以包括运动图像的每个帧)的值(例如，开/关状态数据，色彩数据等)以与每个像素相对应。这里，像素表示构成一个图像的最小单位。处理器200的主处理器210或图形处理器220可以将要显示的图像转换为数据并将该数据临时存储在帧缓冲器中。显示单元120可以通过在与每个像素相对应的位置处显示被存储在帧缓冲器中并被分配给每个像素的值，将与输入图像相对应的输出图像显示得像该输入图像一样。与每个像素相对应的图像数据可以包括RGB值。然而，与每个像素相对应的图像数据不限于此，还可以包括设计者可能考虑的其他数据。
下面描述存储器300的详细操作。
输入单元110可以从外部接收数据(例如，图像数据)。输入单元110可以包括例如允许安装和拆卸其他设备的连接端子以及关联部分。连接端子可以是能够发送和接收数据的各种接口端子中的至少一个，例如，通用串行总线(USB)端子、高清晰度多媒体接口(HDMI)端子、数字视频接口(DVI)端子、SATA端子以及雷电(thunderbolt)端子。
通信单元112可以从另一个设备(例如，服务器)接收数据(例如，图像数据、音频数据、图像数据的元数据、应用程序等)和/或可以将数据发送到位于远程的另一个设备。
根据示例实施例，通信单元112可以连接到有线通信网络和/或无线通信网络并且与外部通信。可以使用诸如成对电缆、同轴电缆、光纤电缆或以太网电缆这样的电缆来实现有线通信网络。可以使用例如CAN通信、Wi-Fi、ZigBee、蓝牙、Wi-Fi直连、低功耗蓝牙或近场通信(NFC)这样的局域通信技术来实现无线通信网络，和/或可以使用例如基于诸如3GPP、3GPP2或WiMAX系列的移动通信标准的通信技术这样的移动通信技术来实现无线通信网络。
存储单元114可以以电子形式存储处理器200的计算、处理或控制操作所需的各种信息。例如，存储单元114可以存储与处理器200的操作相关的应用程序(其可以被称为程序或app)的全部或一部分，和/或可以存储与处理器200的操作相关的数据。当由处理器200进行调用时，存储单元114将所存储的应用程序或数据的全部或一部分提供给处理器200。可以通过可由通信单元112连接的电子软件分发网络来获取应用程序。
可以使用诸如硬盘或软盘这样的磁盘存储介质、诸如磁带、光盘(CD)或数字多功能盘(DVD)这样的光学介质、诸如光磁软盘这样的磁光介质或者诸如安全数字(SD)卡、闪存或固态驱动器(SSD)这样的半导体存储设备来实现存储单元114。
ROM/RAM 116可临时地或非临时地存储与处理器200的操作相关的数据或应用程序。在从输入单元110、通信单元112以及存储单元114中的至少一个提供的图像数据被提供给主处理器210以及图形处理器220中的至少一个之前，和/或当所述图像数据由主处理器210以及图形处理器220中的至少一个进行处理时，所述图像数据可以被临时地或非临时地存储在ROM/RAM 116中。
显示单元120可以接收电信号并且不连续地或连续地显示与其对应的图像。
显示单元120可以包括显示面板。可以使用液晶显示器(LCD)、发光二极管(LED)、等离子显示面板(PDP)、量子点液晶显示器(QD-LCD)和/或量子点状发光二极管(QLED)来实现显示面板。LED可以包括有机发光二极管(OLED)，OLED可以包括无源矩阵OLED(PMOLED)或有源矩阵OLED(AMOLED)。可以使用设计者可能考虑的其他显示面板来实现显示单元120。另外，可以使用阴极射线管(CRT)来实现显示单元120。
显示单元120可根据需要进一步包括背光单元(BLU)。
声音输出单元122可以在处理器200的控制下输出从输入单元110、通信单元112以及存储单元114中的至少一个提供的声源(其可以包括声音、背景声音、效果声音等)。声音输出单元122可以输出与在显示单元120上显示的图像相对应的声源。可以使用头戴式耳麦、耳机以及扬声器设备中的至少一个来实现声音输出单元122。
在下文中，将参照图2描述显示图像的处理。
图2是用于说明显示图像的处理的视图。
如图2所示，当从外部CPU(未示出)接收到全屏的图像13作为数据时，GPU 90在显示单元92显示图像之前绘制全屏的图像13，并且在帧缓冲器91中存储与图像13的像素相对应的数据。在这种情况下，GPU 90将传送到帧缓冲器91的图像13的所有像素的数据写入到帧缓冲器91中。换句话说，GPU 90在绘制图像之后将图像13的所有像素的数据顺序地且单独地发送到帧缓冲器91，并且帧缓冲器91顺序地存储该数据。与存储在帧缓冲器91中的每个像素相对应的数据被发送到显示单元92，并且显示单元92在CPU或GPU 90的控制下组合该数据以显示图像。如上所述，根据相关技术，由于图像中的所有数据都被存储在帧缓冲器91中，因此不必要的数据可能被存储在帧缓冲器91中，从而不必要地消耗资源，和/或可能存在在接收图像之后直到显示设备显示该图像为止的处理时间被延迟的问题。根据上述处理器200的操作的示例实施例，可以解决这样的问题。
在下文中，参考图3至图14，将更详细地描述处理器200的操作的各种示例实施例。为了方便起见，将基于由处理器200的图形处理器220执行操作的示例实施例来描述处理器200的操作的各种示例实施例。然而，这是一个示例实施例，并且还有可能的是，取决于设计者的选择，下面描述的操作被设计为由主处理器210执行。此外，还有可能的是，取决于设计者的选择，下面描述的一些操作被设计为由图形处理器220执行，且其他操作被设计为由主处理器210执行。
图3是根据示例实施例的图形处理器220的框图，图4A是示出第一输入图像的示例实施例的视图。
如图3所示，图形处理器220可以包括选择性写入单元230以及选择性读取单元240。
选择性写入单元230被配置为图示(illustrate)输入图像数据10，以确定所图示的图像数据的全部或所图示的图像数据的至少一部分是否满足特定条件(或者替代地，预定条件)以及基于确定的结果将图像数据写入或不写入到存储器300中。图像数据10可以包括图像帧。
如下面更详细讨论的那样，特定条件可以包括例如以下中的至少一个：所图示的图像数据的至少一部分中的像素是否是透明的，所述至少一部分中的像素的透明度是否小于期望的(或者替代地，预定的)参考值，以及与像素相对应的图像数据是否与特定值相对应。
选择性写入单元230可以生成关于写入存储器300中的图像数据以及不写入存储器300中的图像数据的信息。例如，选择性写入单元230可以生成代表值表290，并且可以将所生成的代表值表290发送到选择性读取单元240。
在下文中，作为选择性写入单元230的操作的示例实施例，将描述选择性写入单元230基于每个像素的图像数据是否是透明的、在存储器300中写入或不写入每个像素的图像数据的示例。
根据示例实施例，选择性写入单元230可以包括图像图示单元232、确定单元234以及写入单元236。在一些示例实施例中，图形处理单元(GPU)和/或图形卡可以通过执行计算机可读代码或通过布局设计来配置以执行图像图示单元232、确定单元234以及写入单元236的功能。
如图3所示，图像图示单元232可以从输入单元110、通信单元112以及存储单元114中的至少一个接收形成至少一个图像的图像数据10，并且可以绘制接收到的图像数据10。由图像图示单元232绘制的图像被发送到确定单元234。
如图4A所示，与接收到的图像数据10相对应的图像10i可以包括包括透明像素或具有相对较高的透明度的部分10a(具有相对较低的不透明度的部分，在下文中被称为透明部分)以及包括不透明像素或具有相对较低的透明度的部分10b(具有相对较高的不透明度的部分，以下被称为不透明部分)。
根据示例实施例，透明度或不透明度可以被定义为例如阿尔法(alpha)值。随着不透明度的程度增加，阿尔法值被定义为具有值1或接近1的值，并且随着不透明度的程度降低，阿尔法值被定义为具有值0或接近0的值。因此，当特定像素是完全不透明的时候，与该特定像素对应的阿尔法值被赋值为1，并且当特定像素是完全透明的时候，与该特定像素对应的阿尔法值被赋值为0。除了阿尔法值以外，还可以使用设计者可能考虑的其他参数来定义透明度或不透明度。
透明部分10a以及不透明部分10b可以被布置在图像10i中的特定位置处。例如，透明部分10a可以被布置在不透明部分10b的上面或下面，并且不透明部分10b可以被布置在透明部分10a的下面或上面。另外，可以彼此并排地布置透明部分10a以及不透明部分10b。此外，透明部分10a可以存在于不透明部分10c的周围。换句话说，不透明部分10c可以位于总体上布置有透明部分10a的区域的一部分中。反之，透明部分(未示出)可以位于总体上布置不透明部分10b所在区域的一部分中。另外，可以以设计者可能考虑的各种方式将透明部分10a以及不透明部分10b布置在图像10i中。
确定单元234可以确定与图像10i中的每个像素相对应的透明度。也就是说，确定单元234可以确定待由每个像素表示的图像数据有多透明。
例如，确定单元234可以检查与每个像素相对应的阿尔法值，并且基于检查的结果来确定与每个像素相对应的透明度。确定单元234的确定结果可以被发送到写入单元236。更具体地，确定单元234可以通过确定每个像素的阿尔法值是否为0或小于期望的(或者替代地，预定的)值以及每个像素的阿尔法值是否不为0或大于所述值。
根据示例实施例，确定单元234可以确定图像数据本身是否存在于每个像素中。
图4B是用于说明在第一图像中设置的块的图。
根据示例实施例，确定单元234可以以区域为单位确定与每个像素相对应的图像数据是否满足特定条件。所述区域可以包括块和条(line)中的至少一个。块表示可以在图像中设置的具有宽度的特定空间，条表示可以以1xN的形式表达的空间。换句话说，确定单元234可以以块为单位确定每个像素的图像数据是否满足特定条件，或者可以以条为单位确定每个像素的图像数据是否满足特定条件。
此外，根据示例实施例，特定条件可以包括像素的透明度是否与特定范围相对应或者像素的图像数据(例如，RGB值)是否具有特定值。
当由像素有多透明来定义特定条件时，确定单元234可以以块为单位确定块中的每个像素的透明度，或者可以以条为单位确定条中的每个像素的透明度。
例如，确定单元234可以在图像10i中设置块b1，如图4B所示，并确定该块b1中的像素p2_2至p8_8中的每一个的透明度。更具体地，图像10i可以包括多个像素p1_1至p10_10。块b1可以被定义和设置为包括形成图像10i的多个像素p1_1至p9_10当中的至少一个像素(例如，像素p2_2至p8_8)。
在示例实施例中，块b1可以仅包括形成图像10i的多个像素p1_1至p9_10当中的一些像素p2_2至p8_8。在这种情况下，形成图像10i的多个像素p1_1至p9_10当中的一些像素p2_2至p8_8可以是聚集在图像10i的一个区中的像素集合。在另一示例实施例中，块b1可以被定义并设置为包括形成图像10i的所有多个像素p1_1至p9_10。换句话说，整个图像10i可以被设置为一个块b1。
图5-8是示出设置的块的各种示例实施例的视图。
确定单元234可以在图像10i中设置多个块b11至b53、b61至b93、b101至b134以及b141至b143，如图5至8所示，并且对于块b11至b53、b61至b93、b101至b134以及b141至b143中的每一个，确定块b11至b53、b61至b93、b101至b134以及b141至b143中的每一个中的至少一个像素是否满足特定条件。例如，确定单元234可以检查块b11至b53、b61至b93、b101至b134以及b141至b143中的每一个中的至少一个像素的透明度，并且基于检查的结果可以确定至少一个像素是否满足特定条件。
根据示例实施例，多个块b11至b53、b61至b93、b101至b134以及b141至b143可以被定义为包括给定的一个图像(即图像i10)的全部。换句话说，当多个块b11至b53、b61至b93、b101至b134以及b141至b143被组合时，给定的一个图像(即图像i10)被完全填满。在这种情况下，多个块b11至b53、b61至b93、b101至b134以及b141至b143可以将给定的一个图像(即图像i10)划分为多个区。
根据另一示例实施例，可以仅对于给定的一个图像(即，图像i10)的一部分来定义多个块b11至b53、b61至b93、b101至b134以及b141至b143。
根据设计者的选择，可以不同地定义多个块b11至b53、b61至b93、b101至b134以及b141至b143中的每一个的形状和尺寸。例如，可以根据在显示单元120上显示的图像的尺寸、图像的分辨率和/或图像的宽高比来定义或者可以不管它们如何来定义多个块b11至b53、b61至b93、b101至b134以及b141至b143中的每一个的形状和尺寸。
例如，根据示例实施例，如图5所示，块b11至b53可以被定义为具有相同尺寸的正方形。当块b11至b53中的每一个被定义为正方形时，块b11至b53中的每一个可以包括被布置成N×N矩阵的至少一个像素。这里，N是自然数。例如，块b11至b53中的每一个的像素可以被布置成16×16矩阵、32×32矩阵或64×64矩阵。除了正方形形状之外，块b11至b53中的每一个可以被定义为矩形形状、圆形或菱形形状，或者诸如三角形或五边形这样的其他多边形形状。即使当每个块具有与正方形形状不同的形状时，每个块也被定义为包括至少一个像素。在这种情况下，块b11至b53可以被定义为使得块b11至b53彼此不重叠。
根据另一个示例实施例，如图6所示，块b61至b93的大小可以被设置为彼此不同，或者部分地不同并且部分地彼此相等。例如，与特定的区相对应的块b71至b72可以被定义为相对较大的尺寸，并且与另一特定的区相对应的块b61至b64、b81至b83以及b91至b93可以被定义为相对较小的尺寸。在这种情况下，与被定义为较大尺寸的块b71至b72相对应的所述特定的区可以被设置为包括其中预测、考虑或确定仅存在透明部分10a或者仅存在不透明部分10b的区域。另外，与被定义为较小尺寸的块b61至b64、b81至b83以及b91至b93对应的所述另一特定的区可以被设置为包括其中混合有透明部分10a和不透明部分10b的或者不清楚是透明还是不透明的区域。根据示例实施例，块b61至b93可以具有相同的形状，例如具有正方形形状，或者如上所述可以具有设计者可能考虑的特定形状。根据另一个实施例，块b61至b93中的一些块与块b61至b93中的其余块可以具有不同的形状。例如，被定义为相对较大尺寸的块b71至b72可以具有矩形形状，并且被定义为相对较小尺寸的块b61至b64、b81至b83以及b91至b93可以具有正方形形状。也可能所有的块b61至b93具有彼此不同的形状。
根据另一个实施例，如图7所示，多个块b101至b134中的特定组的块b101、b103、b111、b113、b121、b123、b131以及b133可以被设置为具有相同的形状，但是具有与其他组的块b102、b104、b112、b114、b122、b124、b132以及b134不同的形状。在这种情况下，其他组的块b102、b104、b112、b114、b122、b124、b132以及b134可以具有相同的形状。例如，特定组的块b101、b103、b111、b113、b121、b123、b131以及b133可以具有L字符形状，并且其他组的块b102、b104、b112、b114、b122、b124、b132以及b134可以具有与L字符形状相对应的倒L字符形状。
另外，根据另一个实施例，块b141至块b143中的至少两个块b141和b142或者b142和b143可以被定义为彼此重叠，如图8所示。换句话说，至少两个块b141和b142可以包括由此共享的区z1，并且至少两个块b142和b143可以包括由此共享的区z2。
虽然上面已经描述了设置和定义图像10i中的多个块b11至b53、b61至b93、b101至b134以及b141至b143的各种示例，但是设置多个块b11至b53、b61至b93、b101至b134以及b141至b143的方法不限于上述实施例。可以通过设计者可能考虑的特定方法来设置多个块b11至b53、b61至b93、b101至b134以及b141至b143。
图9是示出存储有第一代表值以及第二代表值的代表值表的示例的图。
根据示例实施例，确定单元234可以确定块b11至b53、b61至b93、b101至b134以及b141至b143中的每一个中的至少一个像素的透明度，并且可以基于所述至少一个像素的透明度的确定结果来确定与块b11至b53、b61至b93、b101至b134以及b141至b143中的每一个相对应的代表值。
具体地，确定单元234可以确定块b11至b53，b61至b93，b101至b134以及b141至b143中的每一个中的所有像素的阿尔法值是否为0，和/或可以确定所有像素的阿尔法值是否小于或大于期望的(或者替代地，预定的)参考值，并且可以基于确定的结果不同地定义与块b11至b53，b61至b93，b101至b134，以及b141至b143相对应的代表值。
更具体地，当块b11至b53、b61至b93、b101至b134以及b141至b143中的每一个中的所有像素的阿尔法值为0和/或小于参考值时，确定单元234可以将与块b11至b53、b61至b93、b101至b134以及b141至b143中的每一个相对应的代表值确定为第一代表值。反之，当块b11至b53、b61至b93、b101至b134以及b141至b143中的每一个中的至少一个像素的阿尔法值不是0和/或大于参考值时，确定单元234可以将与块b11至b53、b61至b93、b101至b134以及b141至b143中的每一个相对应的代表值确定为第二代表值。这里，第二代表值被定义为与第一代表值不同。
可以由设计者在第一代表值和第二代表值可以被相互识别的程度上任意地定义第一代表值和第二代表值。例如，第一代表值可以被定义为0，并且第二代表值可以被定义为1，如图9所示。
当定义了块b11至b53、b61至b93、b101至b134以及b141至b143的代表值时，确定单元234可以将块b11至b53、b61至b93、b101至b134以及b141至b143的代表值发送到存储单元114，以将代表值存储在存储单元114中，如图3所示。
根据示例实施例，块b11至b53、b61至b93、b101至b134以及b141至b143的代表值可以存储在与存储单元114不同的存储介质中。例如，块b11至b53、b61至b93、b101至b134以及b141至b143的代表值可以被存储在诸如帧缓冲器的存储器300中。
可以将块b11至b53、b61至b93、b101至b134以及b141至b143的代表值存储为代表值表290。
具体地，如图9所示，代表值表290可以包括指示块(例如，第一至第(N+2)块291至296)的字段以及指示与块相对应的代表值的代表值字段。当第一代表值被定义为0并且第二代表值被定义为1时，可以将0记录在与其中所有像素满足条件的块(例如，第一至第三块291至293)相对应的代表值字段中，并且可以将1记录在与其中任何一个像素都不满足条件的块(例如，第N至第(N+2)块294至296)相对应的代表值字段中。例如，可以将0记录在其中所有像素对应于透明块的代表值字段中，并且可以将1记录在其中至少一个像素对应于不透明块的代表值字段中。
写入单元236可以基于确定单元234的确定结果，将图像数据存储在存储器300中或者阻止图像数据在存储器300中的存储。
例如，如果确定特定块(例如，第一至第三块291至293)是透明的和/或图像数据对应于特定值，写入单元236可以不将与所述特定块(例如，第一至第三块291至296)中的每一个的像素相对应的图像数据存储在存储器300中。如果确定其他特定块(例如，第N至第(N+2)块294至296)是不透明的和/或图像数据不对应于特定值时，写入单元236可以将与所述其他特定块(例如第N至第(N+2)块294至296)中的每一个的像素相对应的图像数据存储在存储器300中。
根据示例实施例，当特定块(例如，第一至第三块291至293)是透明的和/或图像数据对应于特定值时，写入单元236可以仅移除用于所有块
(即，第一至第(N+2)块291至296)的写入命令当中的用于所述特定块(例如，第一至第三块291至293)的写入命令，使得与所述特定块相对应的图像数据不被写入到存储器300中。另外，根据另一个实施例，当特定块(例如，第一至第三块291至293)是透明的和/或图像数据对应于特定值时，写入单元236可以仅生成用于其他特定块(例如，第N至第(N+2)块294至296)的写入命令，使得与所述特定块(例如，第一至第三块291至293)相对应的图像数据不被写入到存储器300中。
图10是示出将图像数据存储在存储器中的示例的图，图11是示出将图像数据存储在存储器中的另一个示例的图。
当特定块(例如，第N至第(N+2)块294至296)是不透明的时，写入单元236可以将与所述特定块(例如，第N至第N+2)块294至296)相对应的图像数据写入到存储器300的至少一个写入区域中。在这种情况下，如图10和11所示，写入单元236可以将与特定块(例如，第N至第(N+2)块294至296)相对应的图像数据存储在与特定块(例如，第N至第(N+2)块294至296)相对应的特定写入区域301至304以及310至313。可以提前定义或者可以由处理器任意选择与特定块(例如，第N至第(N+2)块294至296)相对应的特定写入区域301至304以及310至313。
根据示例实施例，写入单元236可以顺序地访问存储器300的写入区域301至304以及310至313，如图10和11所示。换句话说，可以从作为第一写入区域的写入区域301至作为最后写入区域的写入区域313顺序地写入数据。根据另一个实施例，写入单元236可以任意访问存储器300的写入区域301至304以及310至313。
地址可以被进一步存储在存储器300的写入区域301至304以及310至313中的每一个中或者分配给存储器300的写入区域301至304以及310至313中的每一个，以便根据需要识别与写入区域301至304以及310至313中的每一个相对应的图像数据。当写入单元236如上所述地顺序访问存储器300的写入区域301至304以及310至313时，写入区域301至304以及310至313中的每一个的次序可以被用作地址。在这种情况下，可以省略对于写入区域301至304以及310至313中的每一个的地址存储或分配。
根据示例实施例，如图10所示，在存储器300中所提供的写入区域301至304、310至313当中，写入单元236可以将图像数据写入与对应于其中所有像素满足期望的(或者替代地，预定的)条件的块291至293(例如，其中所有像素都是透明的块)的写入区域301至304不同的写入区域310至313中。例如，写入单元236可以被配置为顺序地访问存储器300的写入区域301至304以及310至313，不将图像数据写入与其中所有像素满足条件的块291至293相对应的写入区域301至304中，而将图像数据写入与其中至少一个像素不满足条件的块294至296(例如，其中至少一个像素是不透明的块)相对应的写入区域310至313中。因此，没有数据被存储在与其中所有像素满足条件的块291至293相对应的写入区域301至304中，因而写入区域301至304保持空白，并且将与块294至296相对应的图像数据写入并呈现在与其中至少一个像素不满足条件的块294至296相对应的写入区域310至313中。
根据另一个实施例，如图11所示，写入单元236可以顺序地访问存储器300的写入区域301至304，并且顺序地将图像数据存储在所访问的写入区域301至304中。在这种情况下，图像数据包括与其中至少一个像素不满足条件的块294至296相对应的图像数据。换句话说，写入单元236不会根据写入对象来排除特定写入区域(即，写入区域301至304)，并且相应地，特定写入区域(即，写入区域301至304)不保持空白。
如上所述，选择性写入单元230可以被配置为基于图像数据是否与特定值相对应来将像素的图像数据的每个部分写入或不写入存储器300中。
在这种情况下，上述图像图示单元232可以接收形成至少一个图像的图像数据10，并且以与上述相同的方式图示至少一个图像。
上述确定单元234可以以块或条为单位检查块或条中的每个像素的图像数据，将图像数据与特定值进行比较，并且确定图像数据是否与特定值相同。所述特定值可以包括指示特定色彩的值。指示特定色彩的值可以包括例如指示黑色的值(即，(0,0,0))、指示白色的值(即，(255,255,255))和/或指示绿色的值(即，(0,255,0))。换句话说，确定单元234可以以块或条为单位检查块或条中的每个像素是否显出特定色彩。另外，确定单元234可以基于检查的结果来确定第一代表值以及第二代表值，并且可以根据需要将所确定的第一代表值以及第二代表值发送到存储单元114。被发送到存储单元114的第一代表值以及第二代表值可以被存储为代表值表。
基于块或条中的每个像素是否显示特定色彩，上述写入单元236可将图像数据存储在存储器300中或阻止图像数据在存储器300中的存储。例如，当图像数据与特定值相同时，写入单元236可以不将图像数据存储在存储器300中，反之，当图像数据与特定值不同时，写入单元236可以将图像数据存储在存储器300中。
图12是示出从存储器读取图像数据的示例的图，图13是示出从存储器读取图像数据的另一个示例的图。
如图3所示的选择性读取单元240可以读取被存储在存储器200中的数据并且基于读取的数据获取输出图像20。
如图3所示，选择性读取单元240可以包括代表值读取单元242以及数据读取单元244。
代表值读取单元242可以获取与块291至296中的每一个相对应的代表值，并且可以基于代表值确定块291至296中的每一个是透明的或不透明的。在这种情况下，代表值读取单元242可以直接从选择性写入单元230接收与块291至296中的每一个相对应的代表值，或者可以读取存储单元114或存储器300并获取与块291至296中的每一个相对应的代表值。
如图12和13所示，由代表值读取单元242获取的代表值可以被发送到数据读取单元244。
数据读取单元244可基于与块291至296中的至少一个相对应的代表值，从存储器300获取或不获取与块291至296中的每一个相对应的图像数据。
具体地，当与特定块(例如，块291至293)相对应的代表值是第一代表值时，数据读取单元244可以不获取与特定块(例如，块291至293)相对应的图像数据。反之，当与特定块(例如，块294至296)相对应的代表值是第二代表值时，数据读取单元244可以获取与特定块(例如，块294至296)相对应的图像数据。
根据示例实施例，数据读取单元244可以顺序地访问存储器300的写入区域301至304以及321至326。
在这种情况下，如图12所示，数据读取单元244可以不执行写入区域301至304以及321至326的特定写入区域(例如，写入区域321至323)的图像数据的读取，并且可以执行其他特定写入区域(例如，写入区域324至326)的图像数据的读取。特定写入区域(例如，写入区域321至323)包括与其中像素满足期望的(或者替代地，预定的)条件的块291至293相对应的写入区域，并且其他特定写入区域(例如，写入区域324至326)包括与其中像素不满足预定条件的块294至296相对应的写入区域。
换句话说，如参考图10所描述的，在存储器300提供的写入区域301至304以及310至313当中，与其中像素满足预定条件的块291至293相对应的写入区域301至304可以是空白的，并且与其中至少一个像素不满足预定条件的块294至296相对应的写入区域310至313可以具有图像数据。在这种情况下，如图12所示，数据读取单元244可以顺序地访问写入区域301至304以及310至313，当与其中像素满足预定条件的块291至293相对应的写入区域301至304被访问时，在不从写入区域301至304读取数据的情况下经过(pass through)写入区域301至304，当与其中至少一个像素不满足预定条件的块294至296相对应的写入区域310至313被访问时，从写入区域310至313读取图像数据。如上所述，可以基于与块291至296中的每一个相对应的代表值来确定写入区域301至304以及310至313中的每一个中的所有像素是否满足预定条件或者写入区域301至304以及310至313中的每一个中的像素中的至少一个是否不满足预定条件。
如图11所描述的，当存储器300的写入区域301至304具有与其中至少一个像素不满足预定条件的块294至296相对应的图像数据并且不是空白的时，数据读取单元244以任意或预定次序从写入区域301至304中的每一个读取并获取图像数据，如图13所示。在这种情况下，数据读取单元244可以通过使用代表值来确定以及识别块294至296中的哪一个与存储在写入区域301至304中的每一个的图像数据相对应。在这种情况下，可以再次使用代表值表290。
由数据读取单元244从存储器300读取的图像数据形成输出图像20i。在这种情况下，输出图像20i可以与输入图像10i相同或相似。当输入图像10i包括透明部分10a时，数据读取单元244可以不获取与透明部分10a相对应的图像数据。数据读取单元244将其中未获取图像数据的输出图像20i的一部分处理为透明部分。因此，与输入图像10i相同，输出图像20i包括透明部分20a。输出图像20i的透明部分20a与输入图像10i的透明部分10a相对应。类似地，输出图像20i可以包括与输入图像10i的不透明部分10b相对应的不透明部分20b。不透明部分20b由从存储器300读取的图像数据形成。
当上述块被设置为针对整个图像时，可以使用上述处理来确定至少一个输入图像(例如，运动图像的至少一个帧)是否是透明图像。具体地，当输入图像中的所有像素的阿尔法值是0或小于预定值时，完全包括输入图像的块的代表值被设置为第一代表值，并且相应地，没有与输入图像相对应的信息被存储在存储器300中。数据读取单元244通过使用第一代表值而不从存储器300中获取任何信息，并且确定与输入图像相对应的输出图像是透明的。反之，当输入图像中的至少一个像素的阿尔法值不是0或大于预定值时，完全包括输入图像的块的代表值被设置为第二代表值，并且相应地，输入图像的每个像素的数据被存储在存储器300中。因此，数据读取单元244根据第二代表值从存储器300中获取对于所有像素的图像数据，并且与输入图像相对应的输出图像被显示单元120显示得像输入图像一样。
如上所述，图形处理器220可以将数据存储在存储器300中，并且基于确定图像数据以块为单位分配的像素是否满足预定条件的结果来确定代表值，然后可以基于所确定的代表值从存储器300读取图像数据。然而，如上所述，图形处理器220可以将数据存储在存储器300中，并且基于确定图像数据以条为单位分配的像素是否满足预定条件的结果来确定代表值，然后可以基于所确定的代表值从存储器300中读取图像数据。
上述选择性写入单元230以及选择性读取单元240的操作可以实时或非实时地执行。
选择性写入单元230以及选择性读取单元240可以顺序地且几乎同时地执行上述操作。例如，当由选择性写入单元230执行将至少一个块的图像数据写入到存储器300中的写入操作或者该写入操作的阻止时，可以由选择性读取单元240立即或在经过预定时间之后，执行从存储器300读取至少一个块的图像数据的读取操作或该读取操作的阻止。
选择性写入单元230、选择性读取单元240、图像图示单元232、确定单元234、写入单元236、代表值读取单元242以及数据读取单元244可以与彼此物理分离和/或彼此逻辑分离。当它们彼此物理分离时，可以使用至少一个半导体芯片来实现它们中的至少两个中的每一个。根据示例实施例，可以使用一个半导体芯片来实现它们。
如上所述，由于图形处理器220可以将数据存储在存储器300中，并且基于块或条中的至少一个像素是否满足预定条件来确定代表值，并且可以基于所确定的代表值来确定是否从存储器300中读取图像数据，所以图形处理器200可以省略不必要的图像数据的写入和/或读取。因此，可以节省图像处理装置100的资源并且可以更快地执行数据写入和读取，并且从而提高图像处理装置100的处理速度。
另外，如上所述，当选择性写入单元230基于像素的图像数据是否对应于特定值来操作将像素的图像数据的每个部分写入或不写入存储器300中时，特定色彩的图像数据不存储在存储器300中。例如，当特定值被定义为绿色RGB值或蓝色RGB值时，取决于选择性写入单元230的操作，图像的绿色部分或蓝色部分不被存储在存储器300中。因此，选择性读取单元240可以不获取绿色部分或蓝色部分的数据。
这样的操作可以应用于通过使用色度键组合图像的情况。通常，为了通过使用色度键组合多个图像，需要移除至少一个图像中的绿色部分或蓝色部分。然而，当选择性写入单元230以及选择性读取单元240如上所述进行操作时，不需要执行移除至少一个图像中的绿色部分或蓝色部分的处理，并且因此可以更快地执行图像组合。
在下文中，将参考图14和15描述图1中的图形处理器220的另一个实施例。
图14是根据另一个实施例的图形处理器220a的框图，图15是示出第一图像11以及第二图像12彼此组合的示例的视图。
为了代替上述图形处理器220或者除了上述图形处理器220之外，可以在图像处理装置100中提供根据另一个实施例的图形处理器220a。
参考图14，根据另一个实施例的图形处理器220a可以包括第二图像处理单元250、选择性写入单元260、数据读取单元270以及组合单元280。第二图像处理单元250以及组合单元280可以彼此电连接以使能数据发送和接收，并且数据读取单元270以及组合单元280也可以彼此电连接以使能数据发送和接收。第二图像处理单元250、选择性写入单元260、数据读取单元270以及组合单元280可以彼此逻辑分离或者可以彼此物理分离。
第二图像处理单元250可以接收第二图像12，对第二图像12执行必要的处理，然后将通过执行必要处理而生成并获取的第四图像12a发送到组合单元280。
第二图像12表示要与第一图像11组合的第四图像12a的原始图像。第二图像12可以是从输入单元110、通信单元112以及存储单元114中的至少一个发送到图形处理器220a的图像。
第二图像12可以包括典型图像，例如，如图15所示。典型图像可以包括构成静止图像以及运动图像的至少一帧图像。在这种情况下，第二图像12可以是在整个屏幕上没有或几乎没有透明部分的图像。此外，在另一个示例中，第二图像12可以是其部分是透明图像的图像。在这种情况下，与第一图像11的不透明部分相对应的部分可以是透明图像。
当全部或大部分第二图像12不透明时，如图2所示，第二图像处理单元250可以生成第二图像12并且将第二图像12的所有块(未示出)写入存储器300中，并且可以在同时或顺序地读取被写入存储器中的图像数据之后获取第四图像12a，并将第四图像12a发送到组合单元280。在这种情况下，第四图像12a可以与第二图像12相同或实质相同。
当第二图像12的一部分是透明的时，第二图像处理单元250可以将第二图像12存储在存储器300中，并且通过使用与上述选择性写入单元230以及选择性读取单元240相同或部分修改的方法从存储器300中读取第二图像12。换句话说，第二图像处理单元250可以将在第二图像12中的可定义的多个块当中的包括不满足预定条件的至少一个像素的块写入并存储在存储器300中，并且可以不将仅包括满足预定条件的像素的块写入存储器300中。此外，第二图像处理单元250可以仅读取被存储在存储器300中的图像数据当中的、存在至少一个不满足预定条件的像素的块中的像素的图像数据，并且可以将所读取的图像数据发送到组合单元280。为了执行这样的操作，第二图像处理单元250可以进一步生成如上所述的代表值表290。
类似于图3中所示的选择性写入单元230，选择性写入单元260可以接收第一图像11并将与第一图像11中的可定义的多个块当中的、存在不满足预定条件的至少一个像素的块相对应的图像数据写入以及存储在存储器300中。另外，选择性写入单元260可以进一步生成代表值表291。
选择性读取单元270可以读取被写入存储器300中的图像数据，并且特别地，可以仅读取与其中存在不满足预定条件的至少一个像素的块相对应的图像数据。根据示例实施例，选择性读取单元270可以读取代表值表291，并且可以参考被存储在代表值表291中的代表值从存储器300的部分读取数据，并且可以不从其他部分读取数据。在这种情况下，存储器300的所述部分包括与其中存在不满足预定条件的至少一个像素的块相对应的部分，并且所述其他部分中的每一个包括与其中仅存在满足预定条件的像素的块相对应的部分。
此外，根据示例实施例，选择性读取单元270可以确定参考代表值表291的代表值而读取的数据对应于特定块(例如，包括不透明部分的块)，并且可以确定未从其中读取数据的所有部分是与特定块不同的块(例如，仅包括透明部分的块)。
选择性读取单元270可以输出与所读取的图像数据相对应的图像，即，第三图像11a，并且通过使用电路或导线将第三图像11a发送到组合单元280。
由于上面已经描述了选择性写入单元260以及选择性读取单元270，因此将省略其操作以及结构的详细描述。此外，在图13所示的部件当中，已经详细描述了存储单元114、被存储在存储单元114中的代表值表291以及存储器300，因而将省略其详细描述。
组合单元280将从数据读取单元270发送的第三图像11a与从第二图像处理单元250发送的第四图像12a组合，并输出合成图像21。由于第三图像11a以及第四图像12a分别与第一图像11以及第二图像12相同，因此将第三图像11a与第四图像12a进行组合对应于将第一图像11与第二图像12进行组合。
例如，组合单元280可以通过将第三图像11a叠加在第四图像12a上或者将第四图像12a叠加在第三图像11a上来组合第三图像11a以及第四图像12a，如图15所示。在这种情况下，组合单元280可以将第三图像11a的边界完全或大致匹配到第四图像12a的边界，以组合第三图像11a以及第四图像12a。组合单元280可以通过将第三图像11a叠加在第四图像12a上来生成合成图像21，或者可以通过将第四图像12a叠加在第三图像11a上来生成合成图像21。当通过在第四图像12a上叠加第三图像11a来生成合成图像21时，与第三图像11a的透明部分位于相同位置的第四图像12a的部分可以被表示在合成图像21中，并且与第三图像11a的不透明部分处于相同位置的第四图像12a的其他部分可以被第三图像11a的不透明部分遮挡，以便不被表达在合成图像21中。与之相反的操作也可以被执行。
此外，组合单元280可以通过使用可由设计者考虑的各种方法中的至少一种来组合第三图像11a与第四图像12a。例如，组合单元280可以通过将第三图像11a以及第四图像12a在水平方向或垂直方向上彼此平行排列来组合第三图像11a与第四图像12a。
此外，根据需要，组合单元280可以改变第三图像11a以及第四图像12a中的至少一个的分辨率和/或尺寸，然后可以组合改变后的或未改变的第三图像与改变后的或未改变的第四图像。
在主处理器210以及图形处理器220a中的至少一个的控制下，由组合单元280生成的合成图像21被显示在显示单元120上。
根据实施例，第二图像处理单元250、选择性写入单元260、数据读取单元270以及组合单元280的操作可以同时和/或顺序地执行。例如，第二图像处理单元250的操作与选择性写入单元260和数据读取单元270的操作可以被同时执行，并且可以在每当图像数据(即，第三图像11a以及第四图像12a)根据第二图像处理单元250、选择性写入单元260以及数据读取单元270的操作的结果而被发送时执行组合单元280的操作。第二图像处理单元250、选择性写入单元260、数据读取单元270以及组合单元280的操作可以被实时执行。
如上所述，由于图形处理器220a省略了不必要的写入和/或读取操作，因此可以加速使用多个图像(即，第一至第四图像11、11a、12以及12a)生成合成图像21，并因而可能减少图像处理装置100的资源并且提高图像处理装置100的操作速度。
在下文中，将如图16至18所示描述控制图像处理装置的方法的各种实施例。
图16是示出根据示例实施例的控制图像处理装置的方法的第一流程图。图16是示出执行将图像数据写入存储器的操作和/或将图像数据写入存储器的操作被阻止的处理的示例实施例的流程图。
参考图16，当图像处理装置被驱动时，处理器可以根据用户操作或预定设置来获取至少一个图像的数据(操作500)。处理器可以包括主处理器以及图形处理器中的至少一个。
处理器可以图示用于至少一个图像的数据(操作501)，并且可以从包括形成至少一个图像的一些或所有像素的N个块(其中N是大于1的自然数)当中确定第一块，并且确定第一块中的每个像素是否满足预定条件。例如，可以确定第一块中的每个像素的透明度(操作510)。
如果确定第一块中的所有像素满足预定条件(例如，如果确定所有像素的透明度高)(操作511的“是”)，阻止将第一块的每个像素的图像数据写入到存储器(操作512)。在这种情况下，所有像素的透明度高的情况可以包括每个像素的阿尔法值为0或小于预定值的情况。此外，除了阻止图像数据的写入之外，第一块的代表值可以被定义为第一代表值。可以将第一代表值插入并写入代表值表中。存储器可以包括帧缓冲器。
如果确定第一块中的至少一个像素不满足预定条件(例如，如果确定至少一个像素的透明度低)(操作511的“否”)，将块的每个像素的图像数据写入并存储在存储器中(操作513)。在这种情况下，至少一个像素的透明度低的情况可以包括至少一个像素的阿尔法值不为0或大于预定值的情况。此外，第一块的代表值可以被定义为不同于第一代表值的第二代表值。还可以以与第一代表值相同的方式将第二代表值插入并写入代表值表中。
如果确定还未对所有块(例如，N块)执行数据写入或阻止数据写入(操作514的“否”)，则确定下一块中的每个像素(例如，第二块)是否满足预定条件(操作515以及510)。接下来，根据第二块中的至少一个像素是否不满足预定条件或者第二块中的所有像素是否满足预定条件，将第二块中的每个像素的图像数据存储或不存储在存储器中(操作511、512以及513)。还可以定义与第二块相对应的代表值(操作512以及513)。
上述操作可以重复，直到对所有N个块执行完操作为止(操作514)。当对所有块执行完数据写入和/或阻止数据写入时，可以终止上述操作(操作520)。
图17是示出根据示例实施例的控制图像处理装置的方法的第二流程图。图17是说明执行读取被写入存储器中的图像数据的操作和/或阻止读取图像数据的操作的处理的示例实施例的流程图。
参考图17，根据用户的命令或预定的设置，由处理器从存储器读取图像数据(操作520)。处理器可以包括如上所述的主处理器以及图形处理器中的至少一个。
根据示例实施例，图像数据的读取可以在对所有块(N块)的处理终止之后(图16中的操作520)开始，或者可以在对任何一个块(例如第一块)的处理终止之后立即开始(图16中的操作514)。图像数据的读取可以在对多个块(例如，第一块至第三块)的处理终止之后开始。
当开始读取时，由处理器检查第一块的代表值(操作521以及530)。可以通过查看代表值表来执行对于第一块的代表值的检查。
如果确定代表值是第一代表值，例如0(操作531的“是”)，不读取与第一块相对应的图像数据(操作532)。例如，处理器可以在不执行任何特殊操作的情况下跳过(pass)与第一块相对应的存储器的写入区，或者可以阻止由处理器执行的写入区上的图像数据读取操作。或者，处理器可能不对存储器执行访问操作。
反之，如果确定代表值是第二代表值，例如1(操作531的“否”以及操作533的“是”)，处理器可以从存储器中读取与第一块相对应的图像数据(操作534)。
根据示例实施例，如果确定代表值既不是第一代表值也不是第二代表值(操作533的“否”)，处理器可以将其确定为错误并且根据需要将错误显示在显示单元等上(操作535)。
如果确定还未对所有块(例如，N块)执行图像数据读取操作或阻止图像数据读取操作(操作536的“否”)，检查下一块(例如第二块)中的代表值(操作536)，并且根据代表值读取或不读取与第二块相对应的图像数据(操作531至534)。
上述操作可以重复，直到对所有N个块执行完操作为止(操作536)。当对所有块执行完数据读取和/或阻止数据读取时，上述操作终止(操作540)。显示单元可以在重复上述操作期间和/或在读取操作的同时或读取操作的结束之后在屏幕上显示与所读取的图像数据相对应的图像。
图18是示出根据另一个实施例的控制图像处理装置的方法的流程图。
参考图18，处理器可以从输入单元、通信单元和/或存储单元获取多个图像，例如第一图像以及第二图像(操作550)。根据示例实施例，多个图像可以包括三个或更多个图像。
如图16所示，当获取多个图像时，处理器确定在多个图像的第一图像中设置的每个块的像素是否满足预定条件。基于所确定的结果，处理器将与至少一个块相对应的图像数据写入并存储在存储器中，或者不将与其他块相对应的图像数据写入存储器中(操作552)。此外，确定每个块的代表值。
在将与第一图像相对应的图像数据写入存储器期间或者在将图像数据写入存储器结束之后，可以读取与被写入存储器中的第一图像相对应的图像数据，如图17所示(操作554)。可以基于每个块的代表值来执行图像数据的读取。例如，可以根据每个块的代表值来读取并且获取特定块的图像数据。
根据示例实施例，可以在不进行上述处理的情况下将第二图像写入存储器并从存储器读取(操作552以及554)。此外，根据另一个实施例，可以按照与第一图像相同的方式在第二图像上执行图像数据的写入和/或阻止图像数据的写入以及图像数据的读取和/或阻止图像数据的读取，如图16和17所示。
当执行从存储器读取与至少一个块相对应的图像数据的处理和/或执行阻止读取处理时，或者在处理终止之后，第一图像与第二图像可以彼此组合，并且因此可以获取合成图像(操作556)。在这种情况下，第一图像可以被叠加在第二图像上，或者第二图像可以被叠加在第一图像上。当第一图像和第二图像当中的一个图像具有透明部分时，在屏幕上显示另一个图像的与透明部分相对应的部分。
所获取的合成图像可以由显示单元外部地显示(操作558)。
可以以可由各种计算机设备驱动的程序的形式来实现根据任何上述实施例的控制图像处理装置的方法。所述程序可以单独地或组合地包括程序命令、数据文件、数据结构等。可以使用机器语言代码或高级语言代码来设计以及制作所述程序。可以专门设计所述程序以实现所述方法，或者可以使用计算机软件领域的技术人员所熟知的以及可用的各种功能或定义实现所述程序。
用于实现控制图像处理装置的方法的程序可以被记录在计算机可读的记录介质上。计算机可读的记录介质可以包括各种类型的能够存储响应计算机调用执行的特定程序的硬件装置，例如，诸如硬盘或软盘这样的磁盘存储介质，诸如磁带、光盘(CD)或者数字多功能盘(DVD)这样的光学介质，诸如光磁软盘这样的磁光介质，以及诸如ROM、RAM或闪存这样的半导体存储设备。
虽然已经参照其实施例具体说明和描述了本公开，但是应该理解，在不脱离所附权利要求的精神和范围的情况下，可以在其中进行形式和细节上的各种改变。

Claims (22)

1.一种图像处理装置，包括：
存储器；以及
处理器，被配置为：
基于被设置在第一图像帧中的区的像素中的至少一个是否满足条件，选择性地将所述区的像素的图像数据存储在与所述区对应的所述存储器的区域中，使得所述处理器被配置为响应于所述区的所有像素满足所述条件而不将所述区的像素中的每一个的图像数据存储在所述存储器的所述区域中，
响应于所述区中的所有像素满足所述条件，将所述区的代表值定义为第一代表值，并且
响应于所述区的像素中的至少一个不满足所述条件，将所述区的代表值定义为第二代表值，所述第二代表值不同于所述第一代表值。
2.如权利要求1所述的图像处理装置，其中，所述条件包括以下的至少一个：所述像素是否是透明的，所述像素中的每一个的透明度是否小于参考值，以及所述像素中的每一个的图像数据是否对应于特定值。
3.如权利要求1所述的图像处理装置，其中，被设置在所述第一图像帧中的所述区包括至少一个块以及至少一个条中的至少一个。
4.如权利要求3所述的图像处理装置，其中，所述处理器被配置为通过以下来获取所述至少一个块：将所述第一图像帧划分至少一次，使得所述至少一个块中的每一个块至多部分地与所述至少一个块中的另一个块重叠。
5.如权利要求1所述的图像处理装置，其中，所述处理器被配置为：选择性地从所述存储器读取所述图像数据，使得所述处理器响应于所述区的所述代表值是第一代表值而不从与所述区相对应的所述存储器的区域中读取所述图像数据。
6.如权利要求1所述的图像处理装置，其中，所述处理器被配置为：选择性地从所述存储器读取所述图像数据，使得所述处理器响应于所述区的所述代表值是第二代表值而从与所述区相对应的所述存储器的区域中读取所述图像数据。
7.如权利要求6所述的图像处理装置，还包括：
显示设备，其电连接到所述存储器。
8.如权利要求7所述的图像处理装置，其中，所述显示设备被配置为显示从与其代表值是所述第二代表值的所述区相对应的所述存储器的区域中读取的所述图像数据。
9.如权利要求7所述的图像处理装置，其中，
所述处理器被配置为通过组合第二图像帧以及从与其代表值是所述第二代表值的所述区相对应的所述存储器的区域中读取的所述图像数据来获取合成图像，以及
所述显示设备被配置为显示所述合成图像。
10.根据权利要求9所述的图像处理装置，其中，所述处理器被配置为：通过将从与所述区相对应的所述存储器的区域读取的图像数据叠加在所述第二图像帧上，来获取所述合成图像。
11.如权利要求1所述的图像处理装置，还包括：
存储设备，被配置为存储所述第一代表值以及所述第二代表值中的至少一个。
12.一种控制图像处理装置的方法，所述方法包括：
确定第一图像帧中的区的至少一个像素是否满足条件；
基于所述区的至少一个像素是否满足所述条件，将与所述区的所有像素相对应的图像数据选择性存储在与所述区相对应的存储器的区域中，使得所述选择性存储响应于所述区中的所有像素满足所述条件而不将与所述区的像素中的每一个相对应的图像数据存储在所述存储器的所述区域中；
响应于所述区中的所有像素满足所述条件，将所述区的代表值定义为第一代表值；以及
响应于所述区的像素中的至少一个不满足所述条件，将所述区的代表值定义为第二代表值，所述第二代表值不同于所述第一代表值。
13.如权利要求12所述的方法，其中，所述条件包括以下的至少一个：所述像素是否是透明的，所述像素中的每一个的透明度是否小于参考值，以及所述像素中的每一个的所述图像数据是否对应于特定值。
14.如权利要求12所述的方法，其中，被设置在所述第一图像帧中的所述区包括至少一个块以及至少一个条中的至少一个。
15.如权利要求14所述的方法，还包括：
通过将所述第一图像帧划分至少一次使得所述至少一个块中的每一个块至多部分地与所述至少一个块中的另一个块重叠，来获取所述至少一个块。
16.如权利要求14所述的方法，其中，所述至少一个块的形状是圆形、菱形、三角形、正方形、矩形、梯形以及多边形之一。
17.如权利要求12所述的方法，还包括：
响应于所述区的代表值是所述第一代表值，选择性地从所述存储器读取图像数据，使得所述读取不从与所述区相对应的所述存储器的所述区域读取所述图像数据。
18.如权利要求12所述的方法，还包括：
响应于所述区的代表值是所述第二代表值，选择性地从所述存储器读取图像数据，使得所述读取从与所述区相对应的所述存储器的所述区域读取所述图像数据。
19.如权利要求18所述的方法，还包括：
经由显示设备显示从与其代表值是第二代表值的所述区相对应的所述存储器的区域读取的图像数据。
20.如权利要求19所述的方法，还包括：
通过将第二图像帧以及从与其代表值是第二代表值的所述区相对应的所述存储器的区域读取的图像数据进行组合，来获取合成图像；以及
经由所述显示设备显示所述合成图像。
21.如权利要求20所述的方法，其中，获取合成图像包括：
将从与所述区相对应的所述存储器的区域读取的图像数据叠加在所述第二图像帧上。
22.如权利要求12所述的方法，还包括：
存储所述第一代表值以及所述第二代表值中的至少一个。
CN201810729837.8A 2017-07-05 2018-07-05 图像处理装置及其控制方法 Active CN109214977B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020170085560A KR102442625B1 (ko) 2017-07-05 2017-07-05 영상 처리 장치 및 상기 영상 처리 장치의 제어 방법
KR10-2017-0085560 2017-07-05

Publications (2)

Publication Number Publication Date
CN109214977A CN109214977A (zh) 2019-01-15
CN109214977B true CN109214977B (zh) 2023-11-14

Family

ID=64666434

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810729837.8A Active CN109214977B (zh) 2017-07-05 2018-07-05 图像处理装置及其控制方法

Country Status (5)

Country Link
US (1) US10896661B2 (zh)
KR (1) KR102442625B1 (zh)
CN (1) CN109214977B (zh)
DE (1) DE102018116270A1 (zh)
SG (1) SG10201805814UA (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7427381B2 (ja) * 2019-07-22 2024-02-05 キヤノン株式会社 情報処理装置、システム、情報処理方法及びプログラム
CN115497432A (zh) * 2022-09-23 2022-12-20 珠海格力电器股份有限公司 数据处理方法、装置、电子设备、显示设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4528636A (en) * 1981-10-19 1985-07-09 Intermark Industries, Inc. Display memory with write inhibit signal for transparent foreground pixel codes
CA2329892A1 (en) * 2000-01-14 2001-07-14 Yoshifumi Azekawa Rendering processing apparatus requiring less storage capacity for memory and method therefor
CN1798236A (zh) * 2004-12-28 2006-07-05 富士通株式会社 用于处理图像的装置和方法
CN101308582A (zh) * 2007-05-17 2008-11-19 奥多比公司 同时遮蔽透明度图形处理
CN101681502A (zh) * 2006-11-09 2010-03-24 高通股份有限公司 用于三维图形电路的像素高速媛冲存储器
CN103827957A (zh) * 2011-09-22 2014-05-28 索尼电脑娱乐公司 图像处理装置、图像处理方法和图像文件的数据结构

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5959637A (en) 1995-06-23 1999-09-28 Cirrus Logic, Inc. Method and apparatus for executing a raster operation in a graphics controller circuit
US6084600A (en) 1996-03-15 2000-07-04 Micron Technology, Inc. Method and apparatus for high-speed block transfer of compressed and word-aligned bitmaps
US6573905B1 (en) 1999-11-09 2003-06-03 Broadcom Corporation Video and graphics system with parallel processing of graphics windows
JP3889392B2 (ja) 2003-11-18 2007-03-07 株式会社スクウェア・エニックス 画像描画装置及び方法、プログラム並びに記録媒体
ATE381747T1 (de) 2004-02-18 2008-01-15 Harman Becker Automotive Sys Alphamischung auf basis einer nachschlagtabelle
KR100706442B1 (ko) 2005-03-08 2007-04-10 주식회사 팬택앤큐리텔 투명색 처리속도를 향상시키기 위한 파일처리 시스템 및 투명색 처리속도를 향상시키기 위한 화면처리 시스템
KR101169994B1 (ko) * 2005-04-07 2012-08-01 삼성전자주식회사 알파 평면을 이용한 영상 데이터 처리 장치 및 방법
CN102215428B (zh) 2011-06-23 2012-12-26 深圳市茁壮网络股份有限公司 一种图片的处理方法及机顶盒
JP6338357B2 (ja) 2013-11-18 2018-06-06 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
KR102164543B1 (ko) 2014-10-16 2020-10-12 삼성전자 주식회사 디스플레이 장치 및 디스플레이 방법
GR20140100528A (el) 2014-10-20 2016-06-01 Arm Limited Ενας βασισμενος σε πλακιδια επεξεργαστης γραφικων και μια μεθοδος επεξεργασιας γραφικων σε ενα βασισμενο σε πλακιδια επεξεργαστη
US20170004808A1 (en) * 2015-07-02 2017-01-05 Nvidia Corporation Method and system for capturing a frame buffer of a virtual machine in a gpu pass-through environment
US10885603B2 (en) 2015-12-25 2021-01-05 Intel Corporation Alpha blending and display update bandwidth saving during render and display operations

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4528636A (en) * 1981-10-19 1985-07-09 Intermark Industries, Inc. Display memory with write inhibit signal for transparent foreground pixel codes
CA2329892A1 (en) * 2000-01-14 2001-07-14 Yoshifumi Azekawa Rendering processing apparatus requiring less storage capacity for memory and method therefor
CN1798236A (zh) * 2004-12-28 2006-07-05 富士通株式会社 用于处理图像的装置和方法
CN101681502A (zh) * 2006-11-09 2010-03-24 高通股份有限公司 用于三维图形电路的像素高速媛冲存储器
CN101308582A (zh) * 2007-05-17 2008-11-19 奥多比公司 同时遮蔽透明度图形处理
CN103827957A (zh) * 2011-09-22 2014-05-28 索尼电脑娱乐公司 图像处理装置、图像处理方法和图像文件的数据结构

Also Published As

Publication number Publication date
US20190012990A1 (en) 2019-01-10
CN109214977A (zh) 2019-01-15
US10896661B2 (en) 2021-01-19
DE102018116270A1 (de) 2019-01-10
KR102442625B1 (ko) 2022-09-13
SG10201805814UA (en) 2019-02-27
KR20190005035A (ko) 2019-01-15

Similar Documents

Publication Publication Date Title
WO2022110903A1 (zh) 全景视频渲染方法及系统
TWI550548B (zh) 於中段排序架構中利用訊框對訊框之同調性的技術
US9736395B2 (en) Dynamic display layout
US9672592B2 (en) Tiling-display system and method thereof
US20110145730A1 (en) Utilization of Browser Space
KR102397441B1 (ko) 전자 장치 및 그 제어 방법
CN109214977B (zh) 图像处理装置及其控制方法
CN105761656B (zh) 用于显示器自更新的条件性压缩
CN109718554B (zh) 一种实时渲染方法、装置及终端
JP2016031468A (ja) 表示制御装置、表示装置及び表示システム
US10504278B1 (en) Blending neighboring bins
CN108509112B (zh) 菜单的显示方法及装置、显示设备及存储介质
US20120162523A1 (en) Using screen captures to provide automatic contextual smart input-in device selection menu
US10699384B2 (en) Image processing apparatus and control method thereof
US11202028B2 (en) Display device configuring multi display system and control method thereof
CN107273072B (zh) 图片显示方法、装置及电子设备
US10262624B2 (en) Separating a compressed stream into multiple streams
CN113986168A (zh) 一种图像显示方法、装置、设备及可读存储介质
CN112712464A (zh) 图像处理方法及其装置、电子设备和存储介质
US20130021371A1 (en) Image display apparatus and image display method
US20240021175A1 (en) Display of selected image regions
CN115297273B (zh) 视频处理方法、装置、系统、电子设备及存储介质
CN117435521B (zh) 基于gpu渲染的纹理显存映射方法、装置及介质
TWI523509B (zh) 實施行動高畫質連結技術的方法及其電子裝置
CN116567352A (zh) 图像处理方法、装置、设备、存储介质及程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant