CN100378867C - 半导体器件、图像数据处理装置和方法 - Google Patents
半导体器件、图像数据处理装置和方法 Download PDFInfo
- Publication number
- CN100378867C CN100378867C CNB031545203A CN03154520A CN100378867C CN 100378867 C CN100378867 C CN 100378867C CN B031545203 A CNB031545203 A CN B031545203A CN 03154520 A CN03154520 A CN 03154520A CN 100378867 C CN100378867 C CN 100378867C
- Authority
- CN
- China
- Prior art keywords
- data
- pixel
- additional information
- address
- pixel data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/53—Multi-resolution motion estimation; Hierarchical motion estimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/43—Hardware specially adapted for motion estimation or compensation
- H04N19/433—Hardware specially adapted for motion estimation or compensation characterised by techniques for memory access
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11C—STATIC STORES
- G11C8/00—Arrangements for selecting an address in a digital store
- G11C8/06—Address interface arrangements, e.g. address buffers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/56—Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Image Input (AREA)
- Image Processing (AREA)
- Memory System (AREA)
- Image Analysis (AREA)
- Dram (AREA)
Abstract
一种半导体器件和一种图像数据处理装置能够容易地实现地址控制,简化用于地址控制的电路,并且容易实现对图像数据的存取,以及减小在不同层级的不同分辨率的图像数据块的量。在图像数据处理装置中,存储单元阵列存储合成数据块,每个数据块包括一块像素数据和附加信息数据,例如,与像素数据相关的运动矢量。所指定的像素数据和与该像素数据相关的运动矢量被读出,以及适当地根据该运动矢量预测和设置搜索区域,在搜索区域中例如通过块匹配处理执行运动估计。相应地,可以在与通常用于运动估计的一个较大搜索区域等效的一个小的搜索区域中执行运动估计,以实现高速、高效率的运动估计,并且提高估计的精度。
Description
对相关专利申请的交叉引用
本申请包含与索尼公司所拥有的在美国递交的,名称为“图像处理设备、计算机程序产品和图像处理方法”的,共同未决美国专利申请No.US 2004-0105598相关的内容,其具有一个发明人Tetsujiro Kondo,基于在2002年8月15日于日本专利局提交的日本在先申请JP 2002-274059,以及在2002年8月15日在日本专利局递交的申请JP 2002-274058,该专利的全部内容被包含于此以供参考。本发明还包括含于在2002年12月9日递交的日本在先专利申请JP 2002-356530,其全部内容被包含于此以供参考。
技术领域
本发明涉及半导体器件,例如,包含一个存储机构的半导体器件,用于以包含一块主数据和附加信息数据的一块合成数据作为一个存取单元进行写入和读取操作,以及一个存取机构,用于执行写入和读取操作。更加具体来说,本发明涉及在一个半导体芯片上包含该存储机构和存取机构的系统、方法和计算机程序。本发明还涉及一种图像数据处理装置,用于处理包含图像数据和与该图像数据相关的附加信息数据的一块合成数据的图像数据处理装置。
背景技术
根据现有技术,半导体器件包含数据存储机构,其处理包含一块主数据和与该主数据相关的附加信息数据的一块合成数据,该主数据和附加信息数据通常被分别存储并且分别写入和读出。特别地,在现有的图像数据处理装置中,图像数据和与图像数据相关的附加信息数据通常被分别存储在各个存储器中,并且被分别处理,其中图像数据和附加信息数据被分别地从存储器中读取并且分别处理。
另一方面,在用于存储图像数据和相关的附加信息数据的存储块,图像数据被根据从外部发出的请求指定的地址而在该存储块中写入和读取。相应地,在通过一次存取在该存储块中写入或读取多个图像数据块的情况中,地址已经被顺序地从特定的开始位置一个接一个地指定,并且图像数据块被顺序地在由该地址所指定的存储器位置指出读取或写入。
在处理具有层级结构的图像数据块,例如内容相同但是分辨率不同的图像数据,的情况中,具有不同分辨率的像素数据块已经被分别存储在各个存储器中。相应地,在处理具有不同分辨率的图像数据的情况中,图像数据块已经被根据各个指定的地址分别在存储器中读取或写入。
在上述现有技术的图像数据处理装置中,对图像数据的存取通常根据来自外部请求源指定的地址而执行。相应地,例如,在运动估计这样的处理操作中,如果要通过根据在前一帧中的图像数据所检测运动矢量实现来减小搜索区域的偏移和面积,而实现高速、高效率的运动检测,在存储器存取时出现例如复杂的地址控制这样的不便,并且必须提供用于地址控制的多个电路部分,从而必须增加处理电路的规模。
在形成具有不同分辨率的层级中的图像数据块的情况中,需要对具有相应分辨率的每个层级存储图像数据块,并且当执行数据处理时,通过存取存储器具有不同分辨率的图像数据块的各个存储器而写入或读出图像数据块。相应地,随着层级数目的增加,在此出现对图像数据存取变得复杂并且用于存储数据的存储器容量变大的不便。
在所需的所有像素数据块以特定的对象存储在图像存储器中的情况中,需要顺序地指定存储器的地址,其中在该对象中的所有像素数据块保持被从外部存储到该存储器,并且从指定的存储器顺序地读取所有像素数据块。在这种情况中,出现与复杂的地址控制相关的不便,在读取图像数据时减小地址控制的自由度。
发明内容
本发明的一个目的是针对和解决常规器件和方法中的上述和其他限制。
本发明的一个方面是提供一种半导体器件以及一种图像数据处理装置,其在处理合成数据的情况中能够容易地实现地址控制,简化用于地址控制的电路,并且容易实现对具有不同分辨率的层级图像数据块的存取,并且减小图像数据块的容量。
相应地,本发明的一个方面是提供一种半导体器件,其中包括:存储器,用于在其中存储合成数据单元,所述合成数据单元包括:用于保存主数据的主数据部分,以及用于保存与主数据相关的附加信息的附加信息部分;以及存取机构,其被配置为提供对合成数据单元的读取存储器存取和写入存储器存取至少其中之一,其中主数据部分和附加信息部分被该存取机构作为一个单元而处理。
根据本发明第二方面,提供一种图像数据处理装置,其中包括:存储器,用于存储合成数据单元,所述合成数据单元包括用于保存像素数据的像素数据部分,以及用于保存与所述像素数据相关的附加信息的附加信息部分;以及存取机构,其被配置为对合成数据单元进行读取,其中像素数据部分和附加信息部分被所述存取机构作为一个单元而处理,分离机构,用于把由该存取机构所读取的合成数据分离为所述像素数据和所述附加信息,以及数据处理部分,其用于使用所述附加信息数据执行对该像素数据的预定处理操作。
根据本发明第三方面,提供一种用于组织图像数据的方法,其中包括如下步骤:在存储器中存储一个合成数据单元,所述合成数据单元包括用于保存主数据的主数据部分,以及用于保存与主数据相关的附加信息的附加信息部分;以及通过一个存取机构提供对合成数据单元的读取存储器存取和写入存储器存取至少其中之一,其中主数据部分和附加信息部分被所述存取机构作为一个单元而处理。
根据本发明第四方面,在此提供一种用于组织图像数据的方法,其中包括如下步骤:在存储器中存储一个合成数据单元,所述合成数据单元包括用于保存像素数据的像素数据部分,以及用于保存与所述像素数据相关的附加信息的附加信息部分,以及读取合成数据单元,该像素数据部分和附加信息部分被作为一个单元而提取;把所述合成数据分为所述像素数据和所述附加信息,以及使用所述附加信息数据处理所述像素数据。
附图说明
通过参照本说明书结合附图可以看出本发明的这些和其他目的,其中:
图1为示出本发明的半导体器件的一个实施例的结构图;
图2为示出本发明的图像数据处理装置的第一实施例的示意图;
图3为示出通过一个块匹配处理对图像信号的运动估计的示意图;
图4为示出该图像数据处理装置的第一实施例的一个结构例子的方框图;
图5为示出本发明的图像数据处理装置的第二实施例的方框图;
图6为示出在该较高层级和较低层级中的像素数据块的示意图;
图7为示出存储在一个图像存储器中的一块像素数据和附加信息数据的示意图;
图8A至8D为示出在该较高层级和较低层级中的像素数据块的例子,其中这些例子在较高和较低层级中的图像分辨率之比方面各不相同;
图9为示出该图像数据处理装置的第二实施例的另一个结构例子的方框图;
图10为示出该图像数据处理装置的第三实施例的方框图;
图11为示出本发明的图像数据处理装置的第四实施例的方框图;
图12为示出在该图像数据处理装置的第四实施例中的一块像素数据和关于扫描方向信息的示意图;
图13为示出关于扫描方向的数据的一个例子的示意图;以及
图14为示出根据关于扫描方向的数据从数据对象读出的像素数据块的示意图。
具体实施方式
在下文中,将参照附图描述本发明的实施例。
图1为示出本发明的一个半导体器件的一个实施例的结构图。
如图1中所示,本发明的半导体器件具有存储单元阵列10、地址产生单元20、地址解码器42和44以及寄存器52、54、62和64。
根据本实施例中的半导体器件,该存储单元阵列10存储合成数据块,每块合成数据块包含一块主数据和附加信息数据,其中每块合成数据被作为一个存取单元。术语“存取单元”在此表示对存储单元阵列10中的数据的存取的一个单元。具体来说,数据块被以合成数据块为单元在该存储单元阵列10中写入或读取。如果主数据块具有16位,则包含主数据和附加信息数据的一块合成数据具有20位。每个20位合成数据被作为一个单元在该存储单元阵列10中集中地写入或读取。
下面描述图1中所示的半导体器件的成份。
该存储单元阵列10包括例如以矩阵排列的多个存储单元,并且字线沿着该矩阵的各个行延伸,位线沿着该矩阵的各个列延伸。当指定一个字线时,连接到字线的存储单元被指定,并且当指定一个位线时,连接到该位线的存储单元被指定。数据被通过位线写入在指定的存储单元中,存储在一个指定的存储单元中的数据被通过该位线读出。
相应地,通过指定位线和字线,在所指定的字线和位线之间的交叉点处的存储单元被选择,并且在所选择的存储单元中写入或读取数据。
根据在本实施例中的存储单元阵列10,按照一块合成数据单元执行对数据的存取。具体来说,在每次写入或读取操作中,对应于一块合成数据的位数的数目的存储单元被集中地选择。
地址产生单元20产生一个地址ADR,用于寻址要被写入一块合成数据的存储单元阵列10的存储器区域。例如,地址产生单元20被配置为一个计数器,其根据时钟信号CK产生地址ADR,并且把该地址ADR提供到寄存器62。
由地址产生单元20所产生的地址ADR包括用于寻址特定的列的X地址ADRX以及用于寻址特定的行的Y地址ADRY。X地址ADRX被输入在X地址解码器42,并且Y地址ADRY被收入在Y地址解码器44中。
根据所输入的X地址(列地址),该X地址解码器42仅仅在存储单元阵列10的多个列中选择被寻址的列。根据本实施例的半导体器件,通过一次存取指定多个存储单元。更加具体来说,X地址解码器42根据所输入的列地址ADRX选择多条位线。
根据所输入的Y地址(行地址),Y地址解码器44仅仅在存储单元阵列10的多个行中选择指定的行。
寄存器64保持要被写入的每块主数据,并且寄存器66保持与要被写入的主数据相关的附加信息数据。如上文所述,根据本实施例的半导体器件,数据被以一块合成数据为单元而写入。更加具体来说,被保持在寄存器64中的一块主数据和保持在寄存器66中的附加信息数据被通过一个写入操作集中地写入在存储单元阵列10的指定区域中。
寄存器52保持从存储单元阵列10读取的每块主数据,并且寄存器54保持与从存储单元阵列10读取的主数据相关的附加信息数据。根据本实施例中的半导体器件,数据还被以合成数据块为单元而读取。更加具体来说,通过一个读取操作,一块合成数据被从存储单元阵列10的指定区域读出。包含在该合成数据中的主数据被保存在寄存器52中,包含在该合成数据中的附加信息数据被保存在寄存器54中。保存在寄存器52和54中的主数据和附加信息数据被分别输出到外部。
根据在本实施例中具有上述结构的半导体器件,根据由地址产生单元20所产生的地址ADR,分别通过X地址解码器42和Y地址解码器44选择在存储单元阵列10中的特定位线和字线,并且相应地,数目对应于一块合成数据的位数的存储单元被指定。在执行写入操作之后,由保存在寄存器64和66中的一块主数据和附加信息数据所构成的一块合成数据被集中地写入在所指定的存储单元中。在执行读取操作之后,多个数位的一块合成数据被集中地从指定的存储单元写入。包含在该合成数据中的主数据该保持在寄存器52中,并且附加信息数据被保存在寄存器54中。然后保存在寄存器52和54中的主数据和附加信息数据被在输出到该半导体器件的外部。
按照这种方式,根据本实施例中的半导体器件,数据被以合成数据块为单元在存储单元阵列10中写入或读取。其优点是实现高速的数据存取。在存储数据并且分别的处理一块主数据和附加信息数据的相关方法中,主数据和附加信息数据被分别地从存储器中写入和读出。相反,根据本实施例,包含一块主数据和附加信息数据的一块合成数据被通过一次存取集中地在存储单元阵列10写入或读取。相应地,不但可以实现高速数据存取,而且简化用于控制数据的写入和读取的外部电路的结构,因此减小电路规模。
该图1中所示的半导体器件中,包括存储单元阵列10和地址产生单元20的部件都与用于处理解码数据的不同数据处理电路的一同形成在一个半导体芯片中。结果,大规模的功能电路可以集成在一个半导体芯片上,从而可以在一个芯片上执行复杂的数据处理功能。这样可以实现高速处理,以简化半导体设备,并且减小功耗。
在下文中将描述应用本发明的上述半导体器件的图像数据处理装置的一些实施例。
第一实施例
图2为示出根据本发明的图像数据处理装置的第一实施例的示意图。
如图中所示,在本实施例中的图像数据处理装置包括存储单元阵列10、地址产生单元20、地址计算单元30、地址解码器40以及寄存器50。
存储单元阵列10存储合成数据块,每个合成数据块包含一块像素数据和与该像素数据相关的附加信息数据。根据本实施例的图像数据处理装置,包含像素数据和与该像素数据相关的附加信息数据的每块合成数据被作为一个存取单元而处理。具体来说,特定位数的每块合成数据被集中地在存储单元阵列10中写入或读取。
存储单元阵列10存储特定单元的在一个图像上的像素的像素数据块,例如一个帧或多个帧以及与该像素数据块相关的附加信息数据。根据在本实施例中的图像数据处理装置,附加信息数据由表示运动矢量的运动矢量数据所表示(在下文中,简称为“运动矢量”)。
在本实施例中的图像数据处理装置使用与每个像素数据块相关的附加信息数据用于确定图像的运动估计所使用的搜索区域。具体来说,通过使用由以前的处理所获得的运动矢量预测和设置用于图像的运动估计的搜索区域。在有效地减小该搜索区域。结果,可以减小用于运动矢量估计的处理负担,因此实现高速处理。更加具体来说,通过根据以前运动估计的结果响应图像的运动预测搜索区域并且适当地设置该搜索区域,可以在等效于通常用于运动估计的较大搜索区域的较小搜索区域中执行运动估计,因此提高估计精度,并且增加运动估计的效率和操作速度。
图3为示出在本实施例中的上述运动估计的思想的示意图。对在一个帧单元上输入的图像数据执行运动估计。如图中所示,在两个暂时相互偏移的帧中,即当前帧和以前帧,寻找最接近于当前帧中的所考虑的块在该以前帧中的块的位置。结果,可以估计在连续的帧之间的所考虑的块的运动状态,因此获得一个运动矢量,其表示所考虑的块的运动状态。
在该状态中,如图3中所示,为了寻找在以前帧中的一个块的位置,该块对应于在当前帧中的一个所考虑的块,通常使用被称为“块匹配处理”的搜索处理。按照如下方式执行块匹配处理。在一个以前帧中指定的搜索区域中,设置具有与一个所考虑的块相同尺寸的一比较块,并且对每个像素获得所考虑的块和该比较块的之间的差别。计算对于所有像素在两个块之间的差值的绝对值的总和。在该搜索区域中,对每个像素执行该比较块和所考虑的块之间的比较,并且在垂直和水平方向上对每个像素偏移比较块的位置。在整个搜索区域上完成比较之后,根据在以前帧中的一个位置计算在当前帧中的所考虑的块的运动矢量,在该位置处该比较块和所考虑的块之间的差值的绝对值之和为最小。
由于在整个搜索区域上执行块匹配处理,因此块匹配的数据处理量较大。相应地,在以高速度执行运动估计的情况中,需要使用具有高操作速度和计算能力的信号处理器。
在一个图像中的运动对象(在下文中,被称为“对象”)的运动可以被看作为在短时间上是连续的,并且相应的,可以根据以前估计的运动估计所考虑的对象的运动。因此通过参照以前估计的运动矢量执行该对象的当前运动估计,可以在一定程度上减小用于一个对象的搜索区域。如图3中所示,可以根据该块以前估计的运动矢量预测和设置用于一个所考虑的块的新的搜索区域。通过对如此获得了新的搜索区域执行块匹配,可以在比用于普通块匹配的搜索区域更小的新的搜索区域中执行运动估计,因此减小用于运动估计所需的处理负担。这在有效地执行运动估计方面是有利的。
图4为示出用于实现根据本实施例的运动估计处理的图像数据处理装置的一个结构例子的方框图。
在图4中所示的本实施例中的图像数据处理装置包括存储单元阵列10、计数器22、加法器32、X地址解码器42、Y地址解码器44、寄存器52和54、寄存器62、64和66、以及选择电路70。
下面将描述在本例中的图像数据处理装置的部件。
存储单元阵列10存储合成数据块,每个合成数据块包括一块像素数据和与该像素数据相关的附加信息数据,近似于根据本实施例的图2的示意图中所示的存储单元阵列。
在存储单元阵列10,根据所指定地址,包含一块像素数据和附加信息数据的多个数位的一块合成数据被在与该合成数据的位数相同数目的存储器区域中写入或读出。例如,在读取操作之后,根据指定的地址,从存储单元阵列10中读出与该像素数据相关的包含一块x位的像素数据(X为一个整数,x>0)和y位的附加信息数据(y为一个整数y>0)的一块合成数据。按照这种方式,一个地址的指定允许访问总共x位和y位的一块合成数据。
计数器22根据来自外部的时钟信号CK更新计数器数值CNT,并且把计数器数值CNT提供到加法器32.
加法器32把由选择电路70所选择的信号添加到计数器数值CNT,并且把所添加的结果作为一个地址ADR提供到寄存器A(寄存器62)。
寄存器62把从加法器32获得的地址ADR提供到X地址解码器42和Y地址解码器44。
X地址解码器42根据保存在寄存器62中的地址ADR选择存储单元阵列10中的列。
Y地址解码器44根据保存在寄存器62中的较低n位地址ADR选择存储单元阵列10中的行。
在存储单元阵列10中,一块像素数据Dp和与该像素数据Dp相关的附加信息数据Da被从由X地址解码器42和Y地址解码器44所选择的存储单元中读出。像素数据Dp被输出到寄存器B(寄存器52),并且附加信息数据Da被输出到寄存器C(寄存器54)。
寄存器52保存从存储单元阵列10读取的像素数据Dp,并且把像素数据Dp输出到外部目的地。
寄存器54保存从存储单元阵列10读取的附加信息数据Da,并且把附加信息数据Da输出到外部目的地。
寄存器64保存与从外部输入的像素数据相关的每个像素数据块,并且把所保存的像素数据提供到存储单元阵列10。
寄存器66保存从外部输入的附加信息数据,并且把附加信息数据提供到存储单元阵列10。
从寄存器64输出的像素数据和从寄存器66输出的附加信息数据形成一块合成数据。按照这种方式,根据在本例中的图像数据处理装置,寄存器64和66构成合成图像形成装置的一个特征。
选择电路70选择从寄存器54读取的附加信息数据或数据“0”,并且把所选择的数据提供到加法器32。
如图4中所示,根据一个输入信号是否是读出信号(R)或写入信号(W),选择电路70选择输入数据,并且把该输入数据提供到加法器32。在读取操作之后,选择电路70选择附加信息数据,并且把附加信息数据提供到加法器32,在写入操作之后,选择电路70选择数据“0”,并且把数据“0”提供到加法器32。
下面将描述具有在本例中的上述结构的图像数据处理装置。
根据在本例中的图像数据处理装置,存储单元阵列10存储合成数据块,每个合成数据块包含一块像素数据以及与该像素数据相关的附加信息数据。在本例中,附加信息数据由通过根据以前的图像数据进行运动估计所获得的运动矢量来表示。
在写入操作之后,由于通过选择电路70选择数据“0”,因此从计数器22输出的计数器数值CNT被作为地址ADR添加到寄存器62。在这种情况中,根据计数器数值CNT,在存储单元阵列10中顺序地选择存储单元,并且包含应从外部输入的一块像素数据和附加信息数据的一块合成数据被写入在所选择的存储单元中。
在执行读取操作之后,从存储单元阵列10读取的附加信息数据被选择电路70选择,并且检测到加法器32。加法器328该附加信息数据与从计数器22产生的计数器数值CNT相加,并且把加法的结果作为地址ADR提供到X地址解码器42和Y地址解码器44。
在本例中的图像数据处理装置中,在读取操作之后,根据指定的地址从存储单元阵列10读出一块像素数据和与该像素数据相关的附加信息数据,并且附加信息数据被通过选择电路70提供到加法器32现。相应地,作为以前估计的运动矢量的附加信息数据被加到从计数器22产生的计数值CNT。结果,设置用于运动估计的新的搜索区域,并且在该新的搜索区域中,例如通过块匹配处理执行运动估计,以获得在所考虑的图像数块的运动矢量。
按照这种方式,根据在本例中的图像数据处理装置,通过根据以前估计的运动矢量设置新的搜索区域,并且通过在新的搜索区域中的块匹配而执行运动估计,可以在比用于普通块匹配处理更小的新的搜索区域中执行运动估计,因此减小用于运动估计所需的处理负担。
第二实施例
图5为示出本发明的图像数据处理装置的第二实施例的结构图。
如该图中所示,在本实施例中的图像数据处理装置包括图像存储器100、像素选择器120、选择电路130以及判定电路140。
下面将描述在本实施例中的图像数据处理装置的部件。
图像存储器100存储合成数据块,每个合成数据块包括一块像素数据和附加信息数据。根据本实施例的图像数据处理装置,与像素数据相关的附加信息数据由用于在具有不同分辨率的多个层级形成图像的标志数据所表示,其中该标志数据在包含于较低层级中的像素数据块中表示包含在较高层级中的每块像素数据。
像素选择器120产生标志数据FLG,作为用于存储在图像存储器100中的每块像素数据的附加信息数据。该标志数据FLG与作为附加信息数据的一块像素数据相关,以产生一块合成数据,然后被存储在图像存储器100中。
判定电路140根据包含在从图像存储器100中读取的合成数据中的附加信息数据产生一个选择控制信号Sc,并且把该选择控制信号Sc提供到选择电路130。
选择电路130有选择地在根据从判定电路140提供的选择控制信号Sc从图像存储器100读取像素数据块,并且输出该像素数据。
下面将描述在本实施例中的图像数据处理装置的操作。
如上文所述,根据在本实施例中的图像数据处理装置,图像存储器100存储合成数据块,每块合成图像块包含一块像素数据和与该像素数据相关的附加信息数据。
在本实施例中,附加信息数据由用于形成具有不同分辨率的一块图像数据的标志数据所表示,其中该标志数据在具有高分辨率的较低层级的像素数据块中表示形成在具有低分辨率的较高层级中的一个图像的一块像素数据。
图6为示出在该较高层级和较低层级中形成图像的像素的像素数据块的示意图。如图中所示,例如,置于较高层级中的一个像素的一块像素数据与置于较低层级中的四个像素的四块像素数据相关。更加具体来说,对于包含在较低层级中的图像内的四个像素所构成的每个组,一个像素被选择作为在该较高层级中的图像的像素形成部分。结果,具有不同分辨率的图像可以通过使用在较高和较低层级中的像素数据块来表示。
根据在本实施例中的图像数据处理装置,在较高层级中的像素数据块和在较低层级中的像素数据块不被分别存储,而是同时存储在如图5中所示的图像存储器100中。为了实现这样的在较高和较低层级中的像素数据块的同时存储,作为标志数据FLG的附加信息数据被添加到在较低层级中的一个像素数据块。该图像存储器100存储合成数据块,每个数据块包含在较低层级中的一块像素数据以及与该像素数据相关的标志数据FLG。
下面将描述附加信息数据的产生。
附加信息数据由图5中所示的像素选择器120所产生。对于由在图像存储器100中存储的较低层级中的像素的四个像素数据块所构成的每个组,一个像素的像素数据块由像素选择器120所选择,并且表示所选择的像素数据的标志数据FLG由像素产生器120所产生。由像素选择器120所产生的标志数据FLG被作为附加信息数据添加到像素数据,以产生一块合成数据,然后存储在图像存储器100中。
根据预定选择方法执行由像素选择器120选择一块像素数据。该选择方法的例子包括选择最常用的像素的一块像素数据的方法、选择中间(中央)像素的一块像素数据的方法、以及选择最接近于平均值的像素的一块像素数据的方法。
最常用的像素被确定为在该四个块中具有最高出现频率的像素。中央像素被确定为使得四个像素的像素数据块受到特定的过滤所获得的结果,例如使用中值滤波器,并且选择过滤处理所获得的中值的一块像素数据。
通过对四个像素的像素数据块求平均而确定平均值。
在图像选择器120中,对于由四个像素的像素数据块所构成的每个组,通过上述任何1种选择方法,一个像素的一块像素数据被选择作为在较高层级中的一个图像的像素形成部分的像素数据块,并且产生表示所选择的像素数据的标志数据FLG。标志数据FLG例如具有一个数位,其在下文中有时被称为“附加信息位”。对于在较低层级中的四个像素的像素数据块,例如,一个附加信息位“1”被添加到所选择的一个像素的一个像素数据块,作为在较高层级中的像素数据,并且一个附加信息位“0”被添加到剩余的3个像素的像素数据块。
根据在本实施例中的像素处理装置,当像素数据块被输入在像素选择器120中时,一块像素数据被根据预定的选择方法从由四个像素数据块所构成的每个组中选择,并且作为在较高层级中的图像的一个像素数据块形成部分。附加信息位“1”被添加到所选择的像素数据,并且附加信息位“0”被添加到剩余的3个像素数据块的每个像素数据块。
按照这种方式,通过像素选择器120对每块所述的像素数据产生一个附加信息位,并且该附加信息位被添加到相应的像素数据,以产生一个合成数据换,其然后被存储在图像存储器100中。
在从图像存储器100读取一个像素数据块的情况中,同时地从该像素存储器100中读出像素数据和与该像素数据相关的附加信息位。该附加信息位被在输出到判定电路140。该判定电路140根据该附加信息位判断该像素数据是否是在较高层级中的一个像素数据块,并且把判断结果(选择控制信号)输出到选择电路130。下面将描述读取一个像素数据块的操作。
在把对较低层级中的像素数据块的要求提供到选择电路130的情况中,选择电路130不执行像素数据的选择。在这种情况中,选择电路130拾取包含在从图像存储器100读取的合成数据块中的较低层级中的像素数据块,并且把该像素数据块输出到外部。
另一方面,在把对在较高层级中的像素数据块的请求提供到选择电路130的情况中,选择电路130根据从图像存储器100中读取的合成数据块选择在较高层级中的像素数据块。
包含在从图像存储器100读出的合成数据块中的附加信息位被输出到判定电路140。该判定电路140根据附加信息位的数值选择一个选择控制信号Sc,连接到选择控制信号Sc输出到选择电路130。例如,当附加信息位被设置为“0”时,选择控制信号Sc保持在一个低电平,而当附加信息位被设置为“1”时,选择控制信号Sc被保持在高电平。相应地,选择电路130根据从判定电路140输出的选择控制信号Sc选择从像素数据存储单元110读出的一个像素数据块,并且把所选择的像素数据输出到外部。更加具体来说,当选择控制信号Sc保持在高电平时,选择电路130选择像素数据并且输出所选择像素数据,而当选择控制信号Sc保持在低电平时,选择电路130删除该像素数据。
根据在本实施例中的图像数据处理装置,通过判定电路140和选择电路130根据该附加信息位可以如此选择和输出在较高层级中的像素数据块。相应地,通过存储在较低层级的像素数据块和与该像素数据相关的附加信息数据,可以在具有不同分辨率的较低和较高层级中存储像素数据块。
图7为示出根据本实施例存储在图像存储器100中的像素数据块和附加信息数据的示意图。如图中所示,一个像素数据块包括多个数位,从而表示在较低层级中的图像。附加信息位被按照与像素数据相关的方式添加到一个像素数据块中。在本实施例中,附加信息数据被定义为1位数据;但是,根据本发明,该位数不限于此。增加位数的优点在于附加信息量增加,但是图像存储器的容量变大。例如,通过进一步增加附加信息的位数可以表示两个或更多的层级,结果在具有不同分辨率的两个或多个层级中的像素数据块可以被存储在一个图像存储器中。
在具有图7中所示的层级结构的像素数据中,在较高层级中的像素数目是在较低层级中的像素数目的1/4。根据本发明的图像数据处理装置,在较高层级中的像素数目与在较低层级中的像素数目的比值不限于1/4,而可以是任何其他数值。图8(a)至8(d)示出在较高层级和较低层级之间的关系的一些例子。
在图8A所示的例子中,类似于图6中所示的例子,在较高层级中的一个像素被选择用于由较低层级中的四个像素所构成的每个组。在图8B中所示的例子中,对于在较低层级中的两个像素所构成的每个组选择在较高层级中的一个像素。在图8C的所示的例子中,在较高层级中的一个像素被选择用于由在较低层级中的8个像素所构成的每个组。在图8D所示的例子中,在较高层级中的一个像素被选择用于由在较低层级中的6个像素所构成的每个组。
图9示出在本实施例中的图像数据处理装置的另一个结构例子。
除了像素选择器120a之外,在本实施例中的图像数据处理装置的部件具有基本上与图5中所示的图像数据处理装置的部件相同的结构。如图9中所示,在本实施例中的像素选择器120a根据从外部输入的与像素相关的信号Sd选择一个像素数据块,并且生成标志数据FLG或着与该像素数据相关的另一个附加信息数据。像素选择器120a把标志数据FLG或另一个附加信息数据与像素数据相加,以产生一块合成数据。该合成数据被存储在图像存储器100中。
像素选择器120a根据从外部输入的与像素相关的信号Sd选择在较高层级中的一个像素。在此,在选择较高层级中的一个像素的情况中,根据由与像素相关的信号Sd,所指定的分辨率,在较高层级中的一个像素被从由特定数目的像素所构成的每个组中选择。
相应地,可以根据与像素相关的信号Sd控制在较高层级中的图像的分辨率。更加具体来说,在较高层级中的像素数目与在较低层级中的像素数目的比值可以被自由地设置,但是在图8所示的例子中,在较高层级中的一个像素被从在较低层级中的四个像素所构成的每个组中选择。
如上文所述,在图9中所示的图像数据处理装置的结构例子中,在像素选择器120a选择较高层级中的一个像素的情况中,较高层级的分辨率为根据从外部输入的与像素相关的信号Sd而设置,并且根据该分辨率,从在较低层级中的特定数目的像素所构成的每个组中选择在较高层级中的一个像素。
在上文的描述中,与像素相关的信号Sd被用于控制在较高层级中的分辨率;但是,根据在本实施例的图像数据处理装置,与像素相关的信号Sd可以被用于控制在较高层级中选择一个像素的方式。更加具体来说,像素选择器120a不但可以通过选择在较高层级中的像素作为频率最高的像素、中央像素或者平均像素的上述方法,而且还可以采用根据指定的与像素相关的信号Sd选择在较高层级中的像素的方法。
如上文所述,根据本实施例,包含一块像素数据和与该像素数据相关的附加信息数据的每个合成数据块被存储在图像存储器100中。在这种情况中,像素数据被置于较低层级,并且附加信息数据是标志数据FLG,其表示在具有不同于较低层级的分辨率的较高层级中的一个像素数据块。通过特定的选择方法,在较高层级中的一个像素被从在较低层级中的特定数目的像素所构成的每个组中选择,并且对所选择的像素给出标志数据FLG,其表示在较高层级中的一个像素。标志数据FLG被与所选择像素的像素数据一同写入在图像存储器100中。在读取在较高层级中的像素数据块之后,根据该标志数据FLG,从在较低层级的特定数目的像素所构成的每个组中选择在较高层级中的一个像素,并且输出该像素的像素数据。相应地,可以在具有不同分辨率的多个层级中存储像素数据块,而不大大的增加图像存储器的容量。
第三实施例
图10为示出本发明的图像数据处理装置的第三实施例的结构图。
如该图中所示,根据本实施例的图像数据处理装置包括存储单元阵列10、地址产生单元20、选择电路24、X地址解码器42、Y地址解码器44、寄存器52和54以及寄存器62、64和66。
根据本实施例的图像数据处理装置,与一个像素数据块相关的附加信息数据由用于读出下一个像素数据块的读出地址所表示。更加具体来说,在从存储单元阵列10读取一个像素数据块的情况中,特定的地址被指定,并且根据该特定的地址读出一个合成数据块。在这种情况中,包含在合成数据中的附加信息数据表示用于读取下一个合成数据块的地址。相应地,通过把附加信息数据作为一个地址提供到X地址解码器和Y地址解码器,可以读出由该地址所指定的下一个合成数据。结果,例如,可以是顺序地读出形成一个对象的所有像素的像素数据块。这在简单地实现地址控制方面是有利的。
除了地址产生单元20和选择电路24之外,在本实施例中的图像数据处理装置具有基本上与图4中所示的图像数据处理装置相同的结构,因此,下面将针对于地址产生单元20和选择电路24描述在本实施例中的图像显示装置。
地址产生单元20产生一个地址,用于读取一个像素数据块,并且把该地址的通过选择电路24提供到寄存器62。保存在寄存器62中的地址包含X地址ADRX,即列地址和Y地址,即行地址。X地址ADRX被输入在X地址解码器42中,并且Y地址ADRY被输入在Y地址解码器44中。从存储单元读取由列地址和行地址所指定的一个合成数据块。
包含在从该存储单元读取的合成数据中的一个像素数据块被保存在寄存器52中并且输出到外部。同时,包含在该合成数据中的附加信息数据被保存在寄存器54中,并且输出到选择电路24。
选择电路24选择由地址产生单元20所产生的地址ADR0或从寄存器54输入的附加信息数据,并且把所选择的地址ADR输出到寄存器62。
如上文所述,根据本实施例中的图像数据处理装置,附加信息数据表示用于读取下一个像素数据块的地址。更加具体来说,通过把该附加信息数据作为一个地址ADR,并且把地址ADR提供到X地址解码器42和Y地址解码器44,一个所需的像素数据块可以根据指定的地址ADR而读出。例如,在读取形成一个对象的多个像素的数据块的情况中,通过对每个像素数据块指定该存储单元阵列10的存储下一个像素的像素数据块的存储区域的地址,可以是顺序地读出形成该对象的所有像素的数据块。通过这种配置,可以容易地实现地址指定。
下面将描述在本实施例中具有上述配置的图像数据处理装置的操作。
选择电路24选择由地址产生单元20所产生的地址ADR0,并且把地址ADR0输出到寄存器62。
从选择电路24输出的地址被保存在寄存器62中的,并且把包含在该地址中的行地址ADRY和列地址ADRX分别输出到Y地址解码器44和X地址解码器42。
X地址解码器42和Y地址解码器44根据所输入的列地址ADRX和行地址ADRY在该存储单元阵列10中指定特定的存储单元。
在该存储单元阵列10中,存储在由X地址解码器42和Y地址解码器44所指定的存储单元中的一个合成数据块被读出。类似于先前的实施例,根据本实施例,对一个合成数据块的单元执行对存储单元阵列10中的数据的存取。
在从存储单元阵列10读出的合成数据中,一个像素数据块被保存在寄存器52中,并且附加信息数据被保存在寄存器54中。保存在寄存器52中的像素数据被输出到外部,以及保存在寄存器54中的附加信息数据被输出到外部,并且还输出到选择电路24。
在下一次读取操作之后,由选择电路24选择从寄存器54输入的附加信息数据。该附加信息数据被输入到寄存器62,并且包含在该附加信息数据中的列地址ADRY和行地址ADRX被分别输入在Y地址解码器44和X地址解码器42中,从而根据这些地址在存储单元阵列10中选择所需的存储单元。
如上文所述,例如,在读取包含在所需的对象中的所有像素的图像数据块的情况中,首先由地址产生单元20产生预定的初始像素的初始地址。然后根据该初始地址读出包含该初始像素的一个像素数据块的一个合成数据块。由包含在该合成数据中的附加信息数据指定下一个读出地址。相应地,可以顺序地读出包含在该对象中的所有像素的像素数据块的合成数据块。通过这种读出控制,由于可以通过由于产生一个初始地址的地址产生单元20和选择电路24指定该地址,并且可以通过1个简单的电路结构实现读出地址的控制。
第四实施例
图11为示出本发明的图像数据处理装置的第四实施例的结构图。
如该图中所示,在本实施例中的图像数据处理装置包括图像存储器200、地址产生电路220、选择电路230、地址缓冲器240、行解码器250、列解码器260和输入/输出缓冲器270。
下面将描述在本实施例中的图像数据处理装置的部件。
图像存储器200存储合成数据块,每个合成数据块包含一块像素数据以及与该像素数据相关的附加信息数据。类似于在本发明的每个先前实施例中的存储单元阵列,根据在本实施例中的图像存储器200,在一个合成数据块的单元上执行对数据的存取。
在该图像存储器200中,根据所输入的地址,由该地址所指定的存储单元被选择,并且包含一块像素数据和与该像素数据相关的附加信息数据的一个合成数据块被在所选择的存储单元中写入和读出。
根据在本实施例中的图像数据处理装置,与一个像素数据块相关的附加信息数据由表示要被读取的下一个像素数据块的扫描方向的关于扫描方向的信息所表示。下面将更加详细地描述根据与一个以前像素数据块相关的关于扫描方向的信息执行读取像素数据块的操作。
地址产生电路220根据附加信息数据产生用于读取下一个合成信息块的地址ADR1,该附加信息数据即关于在从图像存储器200中读取的先前合成数据块中的关于扫描方向的信息,并且把该地址ADR1提供到选择电路230。
下面将详细描述基于关于扫描方向的信息产生地址ADR1的操作。
选择电路230根据选择控制信号Sc选择从外部提供的地址ADR0或由地址产生电路220所产生的地址ADR1,并且把所选择的地址ADR输出到地址缓冲器240。
地址缓冲器240保存由选择电路230所选择的地址ADR,并且把地址ADR输出到行解码器250和列解码器260。
行解码器250和列解码器260根据从地址缓冲器240输出的地址选择由在图像存储器200中的地址所指定的存储单元。
输入/输出缓冲器270保存写入数据或读出数据。在写入操作之后,由输入/输出缓冲器270所保存的写入数据要被写入在行解码器250和列解码器260所选择的存储单元中。在读取操作之后,被行解码器250和列解码器260所选择的从存储单元读出的读出数据被保存在输入/输出缓冲器270中,并且被输出到外部。
下面将描述在本实施例中的图像数据处理装置的操作。
在本实施例中的图像数据处理装置在普通操作模式或者开始点指定模式下的从图像存储器200读取一个合成数据块。
在单普通操作模式下,从外部输入的地址ADR0被选择电路230所选择,并且输入在地址缓冲器240中。行解码器250和列解码器260根据从地址缓冲器240提供的地址,在图像存储器200中选择由该地址所指定的存储单元。相应地,在普通操作模式下,数据在由来自外部的地址ADR0所指定的存储单元中写入和读出。
在开始点指定模式下,一个地址ADR0,其例如对应于一个开始像素(读取操作的开始点)被指定。包含开始像素以及与该像素数据相关的附加信息数据的一个像素数据块的合成数据块被从图像存储器附200中读出。包含在如此读出的合成数据中的附加信息数据被输入在地址产生电路220中,并且由地址产生电路200根据附加信息数据产生用于下一个读取操作的下一个地址ADR1。在第二读取操作之后,由选择电路230选择该地址产生电路220所产生的地址ADR1,由该地址ADR1所指定的存储单元被在行解码器250和列解码器260所选择,从而,从所选择存储单元读取包含一块像素数据和附加信息数据的一个合成数据块。
按照这种方式,在开始点指定模式之下,仅仅通过指定开始像素的地址的初始步骤可以读出在特定图像区域中的所有像素的像素数据块,在步骤之后接着根据附加信息数据自动产生下一个读出数据的步骤,该附加信息数据即与开始像素相关的扫描信息数据。换句话说,在特定图像数据中的所有像素的像素数据可以仅仅通过一个地址指定而自动读出。该开始点指定模式对于读出在包含于一个图像中的特定对象中的所有像素的像素数据块方面特别有效。在这种情况中,包含开始像素的像素数据块和附加信息数据的合成数据块,即扫描信息数据,被存储在图像存储器200中,其中按照这样一种方式,该扫描信息数据被专用于指定该开始像素的下一个像素的地址,以便于从该对象中的开始像素顺序地扫描所有像素。中国的设置,在读取操作之后,在数据对象中的所有像素的像素数据块可以仅仅通过把开始像素的地址ADR0输入到选择电路230的初始步骤而读出,该步骤之后接着根据该附加信息数据自动地产生下一个读出地址的步骤,该附加信息数据即包含在从图像存储器200中读出的合成数据中的扫描信息数据。
用于在本实施例中的图像数据处理装置的附加信息将参照图12和13进行描述。
图12为示出根据本实施例包含存储在该图像存储器200中的一块像素数据和附加信息数据的一个合成数据块的一个例子的示意图。如图中所示,作为附加信息数据的关于扫描方向的数据被按照与像素数据相关的方式添加到该像素数据块中。该图像存储器200存储合成数据块,每个合成数据块包含像素数据块和与该像素数据相关的关于扫描方向的数据。
图13示出关于扫描方向的数据的一个例子。在该图所示的例子中,由3位数据所表示的关于扫描方向的数据可以包含8个扫描方向。一个像素和与其相邻的像素块之间的位置关系由关于扫描方向的数据所指定。
关于图13中所示的扫描方向的数据被添加到一个像素数据块中,以产生一个合成数据块。该合成数据被存储在图像存储器200中。在从图像存储器200读取合成数据之后,可以根据包含在该合成数据中的关于扫描方向的数据获取作为下一次被读出的目标的一个像素的位置。对应于下一个像素的像素数据块的地址可以根据由该地址产生电路220所获得的下一个像素的位置而计算。淀积所计算的地址,从该图像存储器200读出下一个合成数据块。接着,根据包含在如此读出的下一个合成数据中的关于扫描方向的数据,可以计算用于读取包含下一个像素数据块的合成数据块的地址。按照这种方式,根据包含在从图像存储器200中读出的合成数据块中的关于扫描方向的数据,可以计算用于读取下一个合成数据块的地址,结果可以顺序地读出在一个所需的目标中的所有像素的像素数据块。
除了上述通过使用关于扫描方向的数据计算用于下一次读取操作的地址之外,通过使得关于扫描方向的数据受到特定的处理操作,关于扫描方向的数据的扫描方向可以被设置为一个特定方向。例如,通过使得表示该扫描方向的3位数据之一的较高数位反转,可以反转该扫描方向。另外,通过把“001”加到关于扫描方向的3位数据,该扫描方向可以顺时针旋转45度,并且通过从关于扫描方向的3位数据减去“001”,该扫描方向可以逆时针旋转45度。
下面通过一个具体的实施例描述使用关于扫描方向的数据计算地址的操作。通过图11中所示的地址产生电路220执行计算操作。
图14示出在根据关于扫描方向的数据读取像素的像素数据块的情况中如何指定在具有特定形状的一个对象中的像素的一个例子。
在该图中,像素P0被设置为一个开始像素。在读取操作之后,该开始像素P0最初被从外部输入。根据该地址,开始像素P0的像素数据块和附加信息数据,即与该像素P0相关的关于扫描方向的数据被读出。通过地址产生电路220根据与像素P0相关的关于扫描方向D0的数据产生作为要被下一次读出的目标的一个像素P1的地址,并且根据如此产生的地址,读出像素P1的像素数据块以及与该像素P1相关的关于扫描方向D1的数据。根据如此读出的关于扫描方向D1的数据,产生作为下一次要被读出的目标的像素P2的地址D2。
在此,在一个屏幕上的所有像素的像素数据块被按照从屏幕的上端从一个行到另一个连续行的次序存储在图像存储器200中。每个像素数据块和与该像素数据相关的附加信息数据形成一个合成数据块。按照地址增加的次序把地址给予合成数据块。
给予每个合成数据块的地址包含一个行地址和一个列地址。假设行地址在从屏幕的上端到下端的方向上按照从一个行到另一个连续行的次序增加,并且列地址在从屏幕的左端到右端的方向上按照从1个列到另一个连续列的次序增加。
并且还假设在图13中所示的关于扫描数据的数据对应于在屏幕上的实际运动方向。相应地,具有数位“010”的关于扫描方向的数据表示在该屏幕上从所考虑的像素向右偏移一个像素,并且具有数位“100”的关于扫描方向的数据表示从所考虑的像素向下偏移的像素。
在此,当前地址被作为ADRi并且下一个读出地址被作为ADRi+1,在从由当前读出地址ADRi所指定的存储单元读出的合成数据块中所包含的关于扫描方向的数据被作为Di。
读出地址ADRi包含行地址ADRYi和列地址ADRXi。即,ADRi=(ADRYi,ADRXi)。类似地,该读出地址ADRi+1包含一个行地址ADRYi+1和一个列地址ADRXi+1。即,ADRi+1=(ADRYi+1,ADRXi+1)。
对于关于扫描数据Di(=000至111)的每个数据块的用于从当前读出地址ADRi获得下一个读出地址ADRi+1的计算根据如下方程1至8执行。
[方程1]
当Di=000,
ADRYi+1=ADRYi-1
ADRXi+1=ADRXi
[方程2]
当Di=001,
ADRYi+1=ADRYi-1
ADRXi+1=ADRXi+1
[方程3]
当D1=010,
ADRYi+1=ADRY1
ADRXi+1=ADRX1+1
[方程4]
当D1=011,
ADRYi+1=ADRYi+1
ADRXi+1=ADRXi+1
[方程5]
当Di=100,
ADRYi+1=ADRYi+1
ADRXi+1=ADRXi
[方程6]
当Di=101,
ADRYi+1=ADRY1+1
ADRXi+1=ADRXi-1
[方程7]
当Di=110,
ADRYi+1=ADRY1
ADRXi+1=ADRXi-1
[方程8]
当Di=111,
ADRYi+1=ADRYi-1
ADRXi+1=ADRXi-1
根据关于扫描方向Di的数值,包含在下一个读出地址ADRi+1中的行地址ADRYi+1和列地址ADRXi+1可以根据任何上述方程1-8而计算。包含下一个像素数据块的合成数据块可以根据如此计算的ADRi+1值从图像存储器200中读出。
如上文所述,该开始点指定模式的优点如下:即,仅仅给出开始像素的地址,可以根据附加信息数据自动地产生要被下一次读出的像素的地址,该附加信息数据即与每个像素相关的关于扫描方向的数据,结果在所需对象中的所有像素的像素数据块可以被顺序地读出。这可以便于在一个所需对象中的所有像素的像素数据的读取块的控制。
如上文所述,根据在本实施例中的图像数据处理装置,提供普通操作模式和开始点指定模式。在普通模式下,在存储于该图像存储器200中的像素数据块中,根据从外部输入的地址ADR0存取特定的像素数据块和与该像素数据相关的附加信息数据。在开始点指定模式下,一个开始像素的地址被从外部指定,并且根据该地址,读出一块像素数据和与该像素数据相关的附加信息数据;并且根据由该地址产生电路220如此读出的附加信息数据产生要被下一次读出的像素的地址。相应地,仅仅通过指定一个开始像素,在所需对象中的所有像素的每个像素的地址可以被自动地更新,结果可以顺序地读出在该对象中的所有像素的像素数据块。这样可以便于控制在一个所需对象中的所有像素的像素数据块的读取。
尽管已经使用特定的术语描述本发明的优选实施例,但是这样的描述仅仅用于说明的目的,并且应当知道可以做出各种改变和变化而不脱离下文的权利要求的精神或范围。
Claims (38)
1.一种半导体器件,其中包括:
存储器,用于在其中存储合成数据单元,所述合成数据单元包括:
用于保存主数据的主数据部分,以及
用于保存与主数据相关的附加信息的附加信息部分;以及
存取机构,其被配置为提供对合成数据单元的读取存储器存取和写入存储器存取至少其中之一,其中
主数据部分和附加信息部分被该存取机构作为一个单元而处理。
2.根据权利要求1所述的半导体器件,其中:
该存储器和存取机构形成在同一块半导体芯片上。
3.根据权利要求2所述的半导体器件,其中:
所述存取机构包括
地址产生机构,其用于产生一个地址,用于根据合成数据的第一单元的所述附加信息部分读取所述合成数据的第二单元。
4.根据权利要求3所述的半导体器件,其中:
合成数据的第一单元的所述附加信息部分包括用于存取机构的一个地址,以访问所述合成数据的第二单元。
5.根据权利要求4所述的半导体器件,其中:
所述地址是在所述存储器中的一个绝对地址。
6.根据权利要求4所述的半导体器件,其中:
所述地址是在所述存储器中的一个相对地址。
7.根据权利要求2所述的半导体器件,其中:
所述附加信息部分的所述附加信息包括运动矢量信息,所述运动矢量信息是一个图像的特征的帧间运动的描述,所述帧间运动是从前一个被存取的图像帧到将被存取的图像帧的运动。
8.根据权利要求2所述的半导体器件,其中:
主数据是像素数据;以及
所述附加信息部分的所述附加信息包括标志信息,所述标志信息是图像分辨率的指示。
9.一种图像数据处理装置,其中包括:
存储器,用于存储合成数据单元,所述合成数据单元包括
用于保存像素数据的像素数据部分,以及
用于保存与所述像素数据相关的附加信息的附加信息部分;
以及
存取机构,其被配置为对合成数据单元进行读取,其中像素数据部分和附加信息部分被所述存取机构作为一个单元而处理,
分离机构,用于把由该存取机构所读取的合成数据分离为所述像素数据和所述附加信息,以及
数据处理部分,其用于使用所述附加信息数据执行对该像素数据的预定处理操作。
10.根据权利要求9所述的图像数据处理装置,其中进一步包括:
第一数据产生机构,其用于根据所输入的图像数据产生所述附加信息数据;以及
第二数据产生机构,其用于产生所述合成数据单元,以包含所述附加信息数据和所述像素数据,以及把所述合成数据单元提供到所述存储器。
11.根据权利要求9所述的图像数据处理装置,其中:
所述附加信息数据是运动矢量;
所述分离机构把所述合成数据分为所述像素数据和所述运动矢量;以及所述数据处理部分用于
根据所述运动矢量设置一个用于运动估计的搜索区域,以及
估计对应于在所述搜索区域中的所述像素数据的图像部分的所述运动矢量。
12.根据权利要求11所述的图像数据处理装置,其中:
所述数据处理部分执行块匹配处理,以估计在所述搜索区域中的运动。
13.根据权利要求9所述的图像数据处理装置,其中:
所述附加信息数据是一个标志数据,其表示包含具有所述像素数据的图像数据的第一图像的第一图像分辨率;
所述分离机构把已经由所述存取机构所读出的所述合成数据分离为所述像素数据和所述标志数据;以及
所述数据处理部分被配置为
根据所述标志数据从所述第一图像中的除所述像素数据之外的其他像素数据选择像素数据,以形成不同于该第一图像分辨率的第二图像分辨率。
14.根据权利要求13所述的图像数据处理装置,其中进一步包括:
数据产生机构,用于从在所述第一图像中的除所述像素数据之外的其他像素数据中选择像素数据,并且把所述标志数据添加到所选择的像素数据中,作为第二像素数据,以产生所述合成数据单元。
15.根据权利要求13所述的图像数据处理装置,其中:
所述数据处理部分被配置为
根据所述标志数据确定与所述标志数据相关的所述像素数据是否为用于形成所述第二图像的像素数据,以及
根据由该数据处理部分的判断选择所述像素数据。
16.根据权利要求9所述的图像数据处理装置,其中:
所述附加信息包括扫描方向数据,用于指示另一个像素数据的位置,所述另一个像素数据与所述合成数据单元的所述像素数据一同是一个图像对象的一部分;
所述数据处理部分被配置为产生一个地址,用于根据所述扫描方向数据读取与一个像素相对应的所述另一个像素数据,所述一个像素数据与对应于所述合成数据单元的所述像素数据的像素相邻,并且把所述地址提供到所述存取机构。
17.根据权利要求16所述的图像数据处理装置,其中:
形成所述对象的一组像素的第一像素是被首先从该存取机构读取数据的开始像素,以及
所述存取机构被配置为从一个外部来源接收用于读取所述第一像素的一个开始地址,作为用于所述图像对象的第一合成数据单元的一个部分。
18.根据权利要求17所述的图像数据处理装置,其中进一步包括:
地址选择机构,用于从所述数据处理部分或从一个外部来源选择所述开始地址。
19.根据权利要求18所述的图像数据处理装置,其中进一步包括:
所述地址选择机构被配置为在读取所述开始像素的合成数据单元时从所述外部来源选择所述开始地址,并且被配置为在读取用于所述开始像素之后的像素的合成数据单元时,选择由所述数据处理部分所产生的所述地址。
20.一种用于组织图像数据的方法,其中包括如下步骤:
在存储器中存储一个合成数据单元,所述合成数据单元包括
用于保存主数据的主数据部分,以及
用于保存与主数据相关的附加信息的附加信息部分;以及
通过一个存取机构提供对合成数据单元的读取存储器存取和写入存储器存取至少其中之一,其中
主数据部分和附加信息部分被所述存取机构作为一个单元而处理。
21.根据权利要求20所述的方法,其中:
该存储器和存取机构形成在相同的半导体芯片上。
22.根据权利要求21所述的方法,其中:
所述提供步骤包括
产生一个地址,用于根据合成数据的第一单元的所述附加信息读取所述合成数据的第二单元。
23.根据权利要求22所述的方法,其中:
所述第一合成数据的第一单元的附加信息部分包括一个地址,用于使所述存取机构存取所述合成数据的第二单元。
24.根据权利要求23所述的方法,其中:
所述地址是在所述存储器中的一个绝对地址。
25.根据权利要求23所述的方法,其中:
所述地址是在所述存储器中的一个相对地址。
26.根据权利要求21所述的方法,其中:
所述附加信息部分的所述附加信息包括运动矢量信息,所述运动矢量信息是一个图像特征的帧间运动的描述,所述帧间运动是从前一个被存取的图像帧到将被存取的图像帧的运动。
27.根据权利要求21所述的方法,其中:
主数据是像素数据;以及
所述附加信息部分的所述附加信息包括标志信息,所述标志信息是图像分辨率的指示。
28.一种用于组织图像数据的方法,其中包括如下步骤:
在存储器中存储一个合成数据单元,所述合成数据单元包括
用于保存像素数据的像素数据部分,以及
用于保存与所述像素数据相关的附加信息的附加信息部分,以及
读取合成数据单元,该像素数据部分和附加信息部分被作为一个单元而提取;
把所述合成数据分为所述像素数据和所述附加信息,以及
使用所述附加信息数据处理所述像素数据。
29.根据权利要求28所述的方法,其中进一步包括:
根据所输入的图像数据产生所述附加信息数据;以及
产生所述合成数据单元,以包含所述附加信息数据和所述像素数据,以及把所述合成数据单元提供到所述存储器。
30.根据权利要求28所述的方法,其中:
所述附加信息数据是运动矢量;并且进一步包括把所述合成数据分为所述像素数据和所述运动矢量的步骤,
根据所述运动矢量设置一个用于运动估计的搜索区域,以及
估计对应于在所述搜索区域中的所述像素数据的图像部分的所述运动矢量。
31.根据权利要求30所述的方法,其中:
所述估计步骤包括执行块匹配处理,以估计在所述搜索区域中的运动。
32.根据权利要求28所述的方法,其中:
所述附加信息数据是一个标志数据,其表示包含具有所述像素数据的图像数据的第一图像的第一图像分辨率;以及进一步包括如下步骤
把所述合成数据分离为所述像素数据和所述标志数据,以及
根据所述标志数据从所述第一图像中的除所述像素数据之外的其他像素数据选择像素数据,以形成不同于该第一图像分辨率的第二图像分辨率。
33.根据权利要求32所述的方法,其中进一步包括:
从在所述第一图像中的除所述像素数据之外的其他像素数据选择像素数据;
把所述标志数据添加到选择的像素数据作为第二像素数据;以及产生所述合成数据单元。
34.根据权利要求32所述的方法,其中进一步包括如下步骤:
根据所述标志数据确定与所述标志数据相关的所述像素数据是否为用于形成所述第二图像的像素数据,以及
根据在所述判断步骤中判断选择所述像素数据。
35.根据权利要求28所述的方法,其中:
所述附加信息包括扫描方向数据,用于指示另一个像素数据的位置,所述另一个像素数据与所述合成数据单元的所述像素数据一同是一个图像对象的一部分;进一步包括如下步骤
产生一个地址,用于根据所述扫描方向数据读取与一个像素相对应的所述另一个像素数据,所述一个像素数据与对应于所述合成数据单元的所述像素数据的像素相邻,并且把所述地址提供到读取合成数据单元的存取机构。
36.根据权利要求35所述的方法,其中:
形成所述对象的一组像素的第一像素是被首先读取数据的开始像素,以及进一步包括如下步骤
从一个外部来源接收用于读取所述第一像素的一个开始地址,作为用于所述图像对象的第一合成数据单元的一个部分。
37.根据权利要求36所述的方法,其中进一步包括如下步骤:
从所述数据处理部分或从一个外部来源选择所述开始地址。
38.根据权利要求37所述的方法,其中:
所述选择步骤在读取所述开始像素的合成数据单元时从所述外部来源选择所述开始地址,并且在读取用于所述开始像素之后的像素的合成数据单元时,选择由所述数据处理部分所产生的所述地址。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002356530A JP4099578B2 (ja) | 2002-12-09 | 2002-12-09 | 半導体装置及び画像データ処理装置 |
JP356530/2002 | 2002-12-09 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1506971A CN1506971A (zh) | 2004-06-23 |
CN100378867C true CN100378867C (zh) | 2008-04-02 |
Family
ID=32756849
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB031545203A Expired - Fee Related CN100378867C (zh) | 2002-12-09 | 2003-08-15 | 半导体器件、图像数据处理装置和方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US7002587B2 (zh) |
JP (1) | JP4099578B2 (zh) |
KR (1) | KR101017688B1 (zh) |
CN (1) | CN100378867C (zh) |
Families Citing this family (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW522374B (en) * | 2000-08-08 | 2003-03-01 | Semiconductor Energy Lab | Electro-optical device and driving method of the same |
US6992652B2 (en) * | 2000-08-08 | 2006-01-31 | Semiconductor Energy Laboratory Co., Ltd. | Liquid crystal display device and driving method thereof |
US7180496B2 (en) * | 2000-08-18 | 2007-02-20 | Semiconductor Energy Laboratory Co., Ltd. | Liquid crystal display device and method of driving the same |
US6987496B2 (en) * | 2000-08-18 | 2006-01-17 | Semiconductor Energy Laboratory Co., Ltd. | Electronic device and method of driving the same |
TW518552B (en) * | 2000-08-18 | 2003-01-21 | Semiconductor Energy Lab | Liquid crystal display device, method of driving the same, and method of driving a portable information device having the liquid crystal display device |
TW514854B (en) * | 2000-08-23 | 2002-12-21 | Semiconductor Energy Lab | Portable information apparatus and method of driving the same |
US7184014B2 (en) * | 2000-10-05 | 2007-02-27 | Semiconductor Energy Laboratory Co., Ltd. | Liquid crystal display device |
US6747623B2 (en) * | 2001-02-09 | 2004-06-08 | Semiconductor Energy Laboratory Co., Ltd. | Liquid crystal display device and method of driving the same |
TWI273539B (en) * | 2001-11-29 | 2007-02-11 | Semiconductor Energy Lab | Display device and display system using the same |
JP3913534B2 (ja) * | 2001-11-30 | 2007-05-09 | 株式会社半導体エネルギー研究所 | 表示装置及びこれを用いた表示システム |
JP4067878B2 (ja) * | 2002-06-06 | 2008-03-26 | 株式会社半導体エネルギー研究所 | 発光装置及びそれを用いた電気器具 |
US6982727B2 (en) * | 2002-07-23 | 2006-01-03 | Broadcom Corporation | System and method for providing graphics using graphical engine |
TWI237261B (en) * | 2004-06-16 | 2005-08-01 | Himax Tech Inc | Method for accessing a single port memory |
CN100366092C (zh) * | 2005-04-08 | 2008-01-30 | 北京中星微电子有限公司 | 一种视频编码中基于运动矢量预测的搜索方法 |
JP2009065283A (ja) * | 2007-09-04 | 2009-03-26 | For-A Co Ltd | 画像ぶれ補正装置 |
EP2299449A1 (en) | 2008-06-30 | 2011-03-23 | Fujitsu Semiconductor Limited | Memory device and memory controller for controlling the same |
JP5141633B2 (ja) * | 2009-04-24 | 2013-02-13 | ソニー株式会社 | 画像処理方法及びそれを用いた画像情報符号化装置 |
CN102012865A (zh) * | 2010-10-27 | 2011-04-13 | 威海威高电子工程有限公司 | 量化数据存储方法 |
CN111193901B (zh) * | 2018-11-15 | 2021-11-23 | 北京图森智途科技有限公司 | 一种图像的传输方法、成像设备、系统及车辆 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5659363A (en) * | 1994-02-21 | 1997-08-19 | Sony Corporation | Coding and decoding of video signals |
US5978303A (en) * | 1997-07-10 | 1999-11-02 | Oki Electric Industry Co., Ltd. | Memory device providing burst read access and write access from a single address input |
US6122442A (en) * | 1993-08-09 | 2000-09-19 | C-Cube Microsystems, Inc. | Structure and method for motion estimation of a digital image by matching derived scores |
US6314048B1 (en) * | 2000-04-28 | 2001-11-06 | Mitsubishi Denki Kabushiki Kaisha | Semiconductor memory device for fast access |
US6342895B1 (en) * | 1997-12-31 | 2002-01-29 | Lg Electronics Inc. | Apparatus and method for memory allocation |
US6349154B1 (en) * | 1997-12-22 | 2002-02-19 | U.S. Philips Corporation | Method and Arrangement for creating a high-resolution still picture |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5694143A (en) * | 1994-06-02 | 1997-12-02 | Accelerix Limited | Single chip frame buffer and graphics accelerator |
JPH0851526A (ja) * | 1994-08-09 | 1996-02-20 | Matsushita Electric Ind Co Ltd | 画像処理装置 |
JP2002083292A (ja) * | 2000-09-08 | 2002-03-22 | Nikon Corp | 画像信号処理装置 |
US20030161399A1 (en) * | 2002-02-22 | 2003-08-28 | Koninklijke Philips Electronics N.V. | Multi-layer composite objective image quality metric |
US7206940B2 (en) * | 2002-06-24 | 2007-04-17 | Microsoft Corporation | Methods and systems providing per pixel security and functionality |
US20040165776A1 (en) * | 2002-09-20 | 2004-08-26 | Albert-Jan Brouwer | Means of matching 2D motion vector fields in a render, match, and refine iterative 3D scene model refinement system so as to attain directed hierarchical convergence and insensitivity to color, lighting, and textures |
-
2002
- 2002-12-09 JP JP2002356530A patent/JP4099578B2/ja not_active Expired - Fee Related
-
2003
- 2003-08-14 US US10/640,380 patent/US7002587B2/en not_active Expired - Fee Related
- 2003-08-14 KR KR1020030056462A patent/KR101017688B1/ko not_active IP Right Cessation
- 2003-08-15 CN CNB031545203A patent/CN100378867C/zh not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6122442A (en) * | 1993-08-09 | 2000-09-19 | C-Cube Microsystems, Inc. | Structure and method for motion estimation of a digital image by matching derived scores |
US5659363A (en) * | 1994-02-21 | 1997-08-19 | Sony Corporation | Coding and decoding of video signals |
US5978303A (en) * | 1997-07-10 | 1999-11-02 | Oki Electric Industry Co., Ltd. | Memory device providing burst read access and write access from a single address input |
US6349154B1 (en) * | 1997-12-22 | 2002-02-19 | U.S. Philips Corporation | Method and Arrangement for creating a high-resolution still picture |
US6342895B1 (en) * | 1997-12-31 | 2002-01-29 | Lg Electronics Inc. | Apparatus and method for memory allocation |
US6314048B1 (en) * | 2000-04-28 | 2001-11-06 | Mitsubishi Denki Kabushiki Kaisha | Semiconductor memory device for fast access |
Also Published As
Publication number | Publication date |
---|---|
US7002587B2 (en) | 2006-02-21 |
CN1506971A (zh) | 2004-06-23 |
JP2004192110A (ja) | 2004-07-08 |
KR20040050829A (ko) | 2004-06-17 |
JP4099578B2 (ja) | 2008-06-11 |
KR101017688B1 (ko) | 2011-02-25 |
US20040164322A1 (en) | 2004-08-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN100378867C (zh) | 半导体器件、图像数据处理装置和方法 | |
CN102460503A (zh) | 显示源图像的变形版本的设备和方法 | |
EP0895216A2 (en) | Storage devices and access methods | |
JPH0519238B2 (zh) | ||
CN101206912A (zh) | 存储器设备、存储器控制器和存储器系统 | |
KR0174774B1 (ko) | 반도체 메모리와 그 사용 방법, 컬럼 디코더 및 화상 프로세서 | |
CN101796845B (zh) | 运动图像编码中的运动搜索装置 | |
CN107799141B (zh) | 存储器结构 | |
US20080056368A1 (en) | Motion vector search apparatus | |
US20060290983A1 (en) | Data access apparatus and method | |
EP1575298B1 (en) | Data storage apparatus, data storage control apparatus, data storage control method, and data storage control program | |
EP0536414B1 (en) | Apparatus for processing image | |
US6744432B1 (en) | Method and apparatus for determining a representative Z values in a video graphics system | |
US6195463B1 (en) | Multiresolution image processing and storage on a single chip | |
JP4487568B2 (ja) | データ格納装置、データ格納制御装置、データ格納制御方法及びデータ格納制御プログラム | |
JP4650459B2 (ja) | 半導体装置およびデータ処理装置 | |
JPH02148237A (ja) | データのブロツクを記憶させ且つ操作を加えるための方法 | |
JP2004145493A (ja) | マッチング演算回路 | |
CN100458762C (zh) | 阵列式运算装置 | |
US5812829A (en) | Image display control system and memory control capable of freely forming display images in various desired display modes | |
JP3879110B2 (ja) | 記憶装置およびデータ処理方法 | |
JPH07110786A (ja) | 半導体記憶装置 | |
JP2633251B2 (ja) | 画像メモリ素子 | |
CN116974475A (zh) | 数据缓存方法、装置及电子设备 | |
JPH087095A (ja) | 文字図形表示装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C17 | Cessation of patent right | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20080402 Termination date: 20130815 |