CN1171018A - 图象编码译码法、编码译码装置及记录该方法的记录媒体 - Google Patents

图象编码译码法、编码译码装置及记录该方法的记录媒体 Download PDF

Info

Publication number
CN1171018A
CN1171018A CN97105462.2A CN97105462A CN1171018A CN 1171018 A CN1171018 A CN 1171018A CN 97105462 A CN97105462 A CN 97105462A CN 1171018 A CN1171018 A CN 1171018A
Authority
CN
China
Prior art keywords
mentioned
image
signal
output
decoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN97105462.2A
Other languages
English (en)
Inventor
羽饲诚
角野真也
奥野万纪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP14403496A external-priority patent/JPH09326024A/ja
Priority claimed from JP22487796A external-priority patent/JPH1070719A/ja
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1171018A publication Critical patent/CN1171018A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Image Processing (AREA)

Abstract

本发明图象编码和译码方法,包括由表示输入图象信号的浓度、轮廓、边缘等特征的特征信号的抽取步骤、根据抽取的特征信号的特征信息进行不同的图象编码处理的编码步骤、对此多种编码处理分别进行识别的识别信号的编码步骤;以及利用此方法的图象编码及译码装置,在输入图象是如计算机图形这种形状边界前后浓度变化急剧、浓度一样或每个区域的浓度为离散值时,相应地选择高效的编码步骤,同时实现正确译码。

Description

图象编码译码法、编码译码装置及 记录该方法的记录媒体
本发明涉及目的为在图象信号的记录和传输时高效地利用记录容量和传输通路的通过削减图象信号的数据量而编码的图象编码法、译码法、利用该方法的图象编码装置、译码装置、以及对用来将其以软件实现的程序进行记录的记录媒体。
作为自然图象的高效图象编码装置存在有JPEG和MPEG方式的图象编码装置。其中任何一种都是将输入图象信号分割为矩形的图块而使用正交变换(DCT等)。DCT是以矩形图块为单位进行正交变换的变换编码的一种,作为一种可以高效地对自然图象信号进行编码的技巧而广为人知。
另一方面,在图象信号中除了像自然图象那样通常由一幅图象构成者之外,还有由多幅图象经人工合成而得到的合成图象。
合成图象可以通过在图象编码装置中将包含合成前各物体的图象编码、在图象译码装置中对各物体的图象任意进行选择和译码而合成并由图象数据库等利用。对于这种合成图象,除亮度信号、色差信号外,还必需有称为透射率信号,是表示与背景图象合成比例的信号。
作为透射率信号的特征,特别是在包含不透明物体的图象中透射率图象中的大部分象素可以相应于物体的形状而分离为不透明和透明两种。另外,透射率信号在物体区域的边界处在不透明部分和透明部分之间的部分浓度值经常出现急剧变化。具有这种特征的图象的另一例就是计算机图形(以下称之为CG)。CG的特征也同样是在物体形状内象素的浓度值变化相同,而在物体边界部浓度值变化很大。
透射率信号及CG等的编码方法有与图象信号图块化的JPEG及MPEG方式采用相同的方式对图块化的矩形区域使用波形编码的方法以及通过将物体形状从图象信号中抽取而对该形状使用二值编码的方法等。就二值图象编码而言,编码方法的种类有行程编码等将二值形状直接编码的方法、通过边界线跟踪等方法抽取物体轮廓线,然后将轮廓线进行链编码,或者利用曲线近似进行轮廓编码(特许公开昭58-134745)等。
但是,对于这种图象信号进行JPEG和MPEG这一类编码时,在物体边界部分会产生急剧的浓度变化,由于在图块内包含有高频分量,难以做到高效率编码。另一方面。从图象信号中抽取物体形状之后进行二值图象编码的方法效率很好,可是在形状内具有多值的图象信号的场合不可能进行编码。
另外,由于近年来计算机技术急速进步、除了利用照象机拍摄的自然图象,利用计算机生成的图象信号的使用频率也越来越高。利用计算机生成的图象信号具有与自然图象不同的统计性质,比如非常陡峭的边缘和离散的象素值(在某一区域中浓度几乎不变,而与其邻接的区域的浓度分布为离散性质的情况很多)就是自然图象中见不到的特征。然而,对这种计算机图象特有的陡峭边缘及离散的象素值使用DCT等原来用于自然图象的编码技巧进行编码时编码效率严重恶化。
有鉴于此,本发明的目的就是提供可以相应于输入图象信号的特征而高效率地并且可保证正确译码的编码和译码方法以及采用此方法的图象编码装置、图象译码装置、还有记录实现此点的软件的记录媒体。
为了解决这一课题,为了将透射率信号、CG图象进行高效率编码,本发明的构成如下。
第一个发明的内容包括:包含将表示输入图象信号特征的特征信号抽取的步骤、对所抽取的特征信号的特征信息分别进行相应的图象编码处理的编码步骤及对多个编码处理分别进行识别的识别信号进行编码的步骤的图象编码方法和采用该方法的图象编码装置;对采用该方法编码的图象信号译码的译码方法和采用该方法的图象译码装置;以及记录可实施上述各点的方法的记录媒体。
由此,由于可以针对基于表示输入图象信号的信号特征(如画面内的边缘、轮廓、浓度变化和透射率等图象各部分的特征)的信息的特征信号自动采用相应的编码方法和译码方法,所以可以在实现适应图象各部分特征而进行高效编码的同时也可以正确地译码。
第二个发明的内容为在第一个发明的编码方法中在特征信号抽取步骤中将图象形状信息抽取作为特征信号并相应于此形状信息对形成边界部分的象素进行替换处理。
由此,在输入图象信号具有如计算机图形那样的边界两边浓度发生急剧变化而在其他地点浓度相同的特征的情况下,因为可以选择高效的编码步骤与之适应,所以可以在实现高效编码的同时也可以正确地译码。
第三个发明的内容为第一个发明的多个编码方法具有将输入图象信号的象素值由多值变换为离散值的离散化步骤和对上述离散化输出进行滤波插值的步骤,可对离散化的输出或滤波插值输出进行编码。
由此,由于可以根据输入图象信号具有如计算机图形那样的急剧的浓度变化和相同的浓度的特征的情况或表示自然图象的情况而分别选择上述某一种高效编码步骤与之适应,所以可以在实现高效编码的同时也可以正确地译码。
附图简介:
图1为表示本发明实施例1中图象编码方法的概念图。
图2为表示本发明实施例1中图象编码装置的基本构成的框图。
图3为表示本发明实施例1中物体区域外象素变换法的概念图。
图4为表示本发明实施例2中图象译码装置的基本构成的框图。
图5为表示本发明实施例3中图象编码方法的概念图。
图6为表示本发明实施例3中图象编码装置的基本构成的框图。
图7为表示本发明实施例4中图象译码装置的基本构成的框图。
图8:
(a)为适应本发明实施例5的图象信号的图象显示例。
(b)为表示适应本发明实施例5的图象信号的图象显示的X-Y水平方向象素值的图形例。
图9为表示本发明实施例5中图象编码装置的基本构成的图。
图10为表示本发明实施例5中图象译码装置的基本构成的框图。
图11:
(a)为表示适应本发明实施例5的图象信号的图象显示的X-Y水平方向象素值的图形例。
(b)为表示在边界部分进行插值处理后的图象信号的图象显示的X-Y水平方向象素值的图形例。
图12为表示本发明实施例5中伴随有插值处理的图象编码装置的基本构成的框图。
图13为表示本发明实施例5中伴随有插值处理的图象编码装置的基本构成的框图。
图14为表示本发明实施例6中图象编码装置的基本构成的框图。
图15为表示本发明实施例7中图象译码装置的基本构成的框图。
图16为表示本发明实施例8中图象编码方法的概念图。
图17为表示本发明实施例8中图象编码装置的基本构成的框图。
图18为表示本发明实施例9中图象译码装置的基本构成的框图。
图19为表示本发明实施例10中图象编码方法的概念图。
图20为表示本发明实施例10中图象编码装置的基本构成的框图。
图21为表示本发明实施例11中图象译码装置的基本构成的框图。
图22为本发明实施例12的图象编码装置的框图。
图23为本发明实施例12的操作说明框图。
图24为本发明实施例13的图象编码装置的框图。
图25为本发明实施例14的图象编码装置的框图。
图26为本发明实施例15的图象编码装置的框图。
图27为本发明实施例16的图象编码装置的框图。
图28为本发明实施例17的图象编码装置的框图。
图29为象素值在振幅方向4分割编码的实例说明图。
图30为表示本发明实施例5中图象编码装置的基本构成的框图。
图31为象素值在振幅方向4分割编码的实例说明图。
图32为本发明实施例19的图象译码装置的框图。
图33为本发明实施例20的图象译码装置的框图。
图34有本发明实施例21的图象编码装置的框图。
图35为利用象素二次抽样器2271进行参照的象素说明图。图36为本发明实施例22的图象译码装置的框图。图37为本发明实施例23的图象编码装置的框图。图38为本发明实施例24的图象编码装置的框图。图39为本发明实施例25的图象译码装置的框图。图40为根据本发明实施例26的记录媒体的框图。符号说明:1、201图象信号2、202形状抽取装置3、形状信息4、204形状编码装置5、205、506形状编码信号6  形状外象素替换装置7  图象信号编码装置8  图象信号编码信号9  图象信号译码装置10、606形状译码装置11  形状外象素复原装置12  译码信号13、901边界部分抽取装置14  边界部分替换装置15  边界部分插值装置16  差分装置17  边界部分编码装置18  边界部分编码信号19  边界部分译码装置20  加法装置21  边界部分替换装置22  延迟缓冲器23  运动补偿装置24  预测信号
25  象素值比率检测装置
26  象素值比率编码装置
27  象素值比率编码信号
28  乘法电路
29  象素值比率译码装置
30  图象离散化装置
31、33编码信号多路转换装置
32  多路转换图象编码信号
34  多路转换形状编码信号
35、36多路转换信号分离装置
37  译码图象合成装置
501  形状内象素值编码装置
701、702形状内象素值译码装置
703  形状内象素值复原装置
1101  边界部分插值参数确定装置
1302  边界部分插值装置
222、3105m值生成器
224、2270、3100图块生成器
226、2220、2240i、2250i、2266、2272、3104、3106、3110编码器
228、2230、2242i、2258i、2268、2274、3122、3124、3130译码器
2210、3126逆m值生成器
2212、2216、2244i、2248i、2260、2264、3102、3108、3120、3128开关
2214、2246i、2262低通滤波器
2217、2254、2278存储器
2226、3112比较器
2232、2280、3132逆图块生成器
2238、2256分割器
2252  合成器
2271  象素二次抽样器
2276  象素插值器
优选实施例描述
下面参照附图对本发明的具体实施例进行说明。另外,在本发明的实施例中是以透射率信号为输入例而进行介绍,但是CG以及具有同样的图象性质的其他图象也可以利用本发明的方法。实施例1
透射率信号是各象素表示透射率的浓淡图象,在透射率信号中某一透射率以上的象素区域被认为是物体形状外,其外的区域被认为是物体形状内,从而可以抽取形状信息。这样抽取的形状信息可以表现为“形状内”和“形状外”的二值图象并可用二值图象的编码方法进行编码。
图1为第1实施例的图象编码方法的概念图。在图1(a)中,在透射率信号中,涂满的区域表示物体形状内,空白区域表示物体形状外,涂满部分和空白部分的边界表示物体区域的轮廓线。
横切轮廓线取得的图象信号的浓度值断面如图1(6)所示(图中所示浓度值断面的值为0时透射率为100%,该值越大透射率越小)。在透射率信号中将物体形状外的象素按照物体形状内的透射率信号进行替换时的浓度断面图如图1(c)图象所示。
如图1(6)所示,由于通常在物体区域边界部分浓度变化急剧,通过MPEG及JPEG等所使用的DCT(离散余弦变换)编码方式进行的编码效率不佳。所以,如图1(c)所示,在编码前将物体形状外的象素进行替换使其高频分量减小可使此部分的编码效率提高。但是,在将经过替换的编码信号译码时,在物体形状外本来是透明的区域残留有替换象素。为了将它恢复为原来的透射率信号必须再使译码图象的物体形状外的象素返回到透明状态。因此,在译码装置中,在将由编码装置输出的形状信息的编码信号译码时要判别形状内与形状外并使形状外的象素值再返回为透明(透射率为100%)。借助以上的方法可以将形状外的图象恢复并得到正确的译码。
另外,在此方法中,即使通过DCT等变换而编码之后的量化处理所得之译码图象的畸变很大,也可以由形状信息对物体形状进行良好的译码。因此,在所要求的编码位速率低时只送出形状信息,而在高位速率时还传送物体形状内的透明度信息的这种根据位速率而灵活地进行编码就很容易实现。
图2为表示第1实施例中的图象编码装置的基本构成的框图。在同一图中,图象信号1输入到图象编码装置。形状抽取装置2是从图象信号1中将表示物体形状的形状信息3抽取的装置。形状编码装置4是将形状抽取装置2输出的形状信息3编码而作为形状编码信号5输出的装置。形状外象素替换装置6是根据形状信息3对判断为形状外的图象信号1的象素进行替换的装置。图象信号编码装置7是将在形状外象素替换装置6中替换形状外象素的图象信号编码并作为图象信号编码信号8而输出的装置。
下面说明按以上方式构成的第1实施例中的图象编码装置的操作。形状抽取装置2根据所定的阈值对图象信号1进行二值化并抽取形状信息3。形状抽取的图象可以显示为形状内、形状外的二值图象。借助形状编码装置4可以将此形状信息3,比如利用行程编码等二值图象编码方法进行编码,并作为形状编码信号5输出。
另一方面,形状外象素替换装置6中输入形状信息3及图象信号1,根据形状信息3判定形状内和形状外,利用所确定的规则(如减小高频分量的象素值生成方法及图块内的平均值等)替换形状外的象素。其结果可提高在物体区域边界部分的图象信号编码装置7的编码效率。
图象编码装置7对通过形状象素替换装置6替换的图象信号使用与MPEG方式相同的DCT(离散余弦变换)、量化、可变长编码等进行编码并作为图象编码信号8输出。
另外,在形状编码装置4中使用不可逆编码时,为了使编码装置一方与译码装置一方的形状信息取得一致,必须将形状编码信号5译码并将该译码后的形状信息作为形状外象素替换装置6的形状信息而使用。
另外,在本实施例中的形状抽取装置2中的阈值处理中,阈值为固定或可变均可(例如,可相应于图象图块化时图块内的图象信号值而确定阈值)。
另外,在本实施例中的形状抽取装置2中所示为根据阈值的抽取方法,但区域分割方法(区域生长等),或者,在物体形状已知时,也可以使用。
另外,为了降低形状信息的复杂度,可以在输入到编码装置之前对图象信号进行滤波处理(比如低通滤波、形貌滤波),也可由形状抽取装置2对输出的形状信息进行二值滤波处理(比如二值形貌滤波)。
另外,在本实施例中的形状编码装置4中所示为根据行程编码的编码,但也可使用MMR编码,或者,利用四叉树的编码。
另外,在本实施例中的形状编码装置4中采用边界线跟踪法抽取物体形状的轮廓线,此轮廓线也可以采用链编码或者曲线近似的参数输出等轮廓线编码法进行轮廓线编码。
另外,作为本实施例中的形状外象素替换装置6的所确定的规则的例子有利用在形状抽取装置2使用的阈值替换物体形状外的象素的方法,或是利用物体形状内的象素的平均值替换物体形状外的象素的方法,或是替换成边界线上的象素值的方法,或是如图3所示使浓度值断面成为对称的象素值的替换方法。
另外,在本实施例中的图象信号编码装置7中所示为利用DCT的编码,但也可以利用DST(离散正弦变换)、或用KL变换、或用子波变换、或用哈尔变换、或用分形编码、或用DPCM编码、或用矢量量化编码、或用子带编码、或和四叉树与矢量量化组合编码。
另外,本实施例的编码可以利用图象单位或是图块化图象的图块单位。
此外,在形状内的透射率为固定值的场合,图象编码装置7也可以仅对该固定值编码输出而得到高效率的编码。在这种场合不需要由形状外象素替换装置7替换形状外象素。
如上所述,在本实施例中可以对具有像透射率信号这样的浓度值变化的图象信号进行高效率的编码。实施例2
下面利用图4对第2实施例中的图象译码装置进行说明。图4为表示本发明第2实施例中的图象译码装置的基本构成的框图,在同一图中与第1实施例中相同的信号标以相同的符号,详细说明略去不再重复。本实施例中的图象译码装置是用来将图2的编码装置编码的图象信号进行译码的装置。
在图4中,图象信号译码装置9是对图象编码信号8进行译码的装置。形状译码装置10是对形状编码信号5进行译码的装置。形状外象素复原装置11是利用输入的图象译码装置9的译码信号和形状信息,将形状外的象素复原并输出译码信号12的装置。
下面说明按上述方式构成的第2实施例的图象译码装置的操作。
另外,因为图4中的5、8各信号的意义与第1实施例中的相同,其说明略去。形状编码信号5由形状译码装置10译码,根据经过译码的形状信息判断形状内和形状外。形状外的象素是经过编码装置替换过的,所以形状外象素复原装置11将象素值替换成本来的值0(透射率为100%)并作为译码信号12输出。
另外,在本实施例中的形状译码装置10也可以根据编码装置的情况采用行程译码、MMR译码、或者四叉树译码、或者链译码以及曲线近似译码。
另外,在本实施例中的图象译码装置9中也可以根据编码装置的情况采用逆DCT、或逆DST、或逆KL变换、或子波译码、或逆哈尔变换、或分形译码、或DPCM译码、或逆矢量量化、或四叉树和逆矢量量化的组合。此外,在形状内的透射率为固定值的场合,也可仅将该固定值编码输出而得到高效率的编码。在这种场不需要用形状外象素来进行替换。
另外,本实施例的译码也可以根据编码装置的情况利用图象单位或图块化图象的图块单位。
如上所述,在本实施例中可以对利用第1实施例的图象编码装置编码的信号正确地进行译码。实施例3
图5为本发明的第3实施例中的图象编码装置的概念图。
图5(a)示出输入的图象信号在物体区域边界附近的浓度值断面,图5(b)示出在边界部分进行象素值插值的图象的浓度值的断面,而图5(c)示出用竖线表示的插值信号和输入图象信号的差分值。
如上所述,透射率信号的浓度值构造对物体区域边界部分和物体形状内可有很大差别,所以采用单一的方法很难达到高效率。所以,如将物体形状内和物体区域边界部分分开处理分别采用适合各自情况的方法进行编码可以改善编码效率。可与第1实施例同样地对形状外的象素进行替换,并且对边界部分的象素值也同样进行替换。由于经过这种替换的图象在边界部分不包含高频分量,可以高效地进行编码。对边界部分的编码可以采用,比如,DPCM编码、适合边界部分的矢量量化编码就可以用适合边界部分的方法编码。另外,有很多时候在边界部分如图5(a)所示浓度值由形状内到形状外是连续变化的,所以可以如图5(b)所示边界部分的象素值可由形状外和形状内的象素值通过插值预测。
之后,取该预测值和输入的图象信号的差分而编码就可以做到高效编码。同时,如果根据输入图象浓度值的构造改变插值参数并将该插值参数由编码装置输出,就可以利用此信息在编码装置中进行同样的插值而对图象浓度值构造不同的情况进行相应的处理。
此外,在本方法中,当所要求的编码位速率低的时候不送出边界部分的编码信号而使数据量减少,在位速率高时则送出边界部分的编码信号,这样就可以根据位速率而很容易做到灵活处理。
图6为表示本发明的第3实施例中的图象编码装置的基本构成的框图,在同一图中1~8各装置和各信号与第1实施例中相同,故其说明省略。
边界部分抽取装置13是由形状信息3抽取物体区域的边界部分的装置。边界部分象素替换装置14是替换边界部分的象素的装置。边界部分插值装置15是利用输入的图象信号1和边界部分的信息使用规定的方法对边界部分的象素进行插值的装置。差分装置16是计算边界部分图象信号1和插值图象信号的差分值的装置。边界部分编码装置17是对差分装置16输出的差分值编码的装置。
对如上构成的第3实施例中的图象编码装置的操作仅就其与第1实施例中不同之处进行说明。边界部分抽取装置13根据形状信息3按规定的方法(比如由物体轮廓线算起的一定距离的范围规定为边界部分)确定边界部分。
边界部分象素替换装置14,与第1实施例中的相同,将边界部分的象素值替换使之不包含高频分量,可使图象信号编码装置7进行高效编码。边界部分插值装置15根据形状内和形状外的象素值对边界部分的象素值采用所确定的处理方法进行插值(比如线性插值、高次插值、低通滤波生成伪浓度值变化)并求出边界部分的象素的预测值。之后利用差分装置16计算予测值和图象信号1的差分,通过边界部分编码装置17编码并作为边界部分编码信号18输出。
另外,在本实施例中,边界部分插值装置15使用的是输入图象的值,在图象信号的编码是不可逆编码的场合必须利用由图象编码信号8和形状编码信号5译码所得之图象使编码装置和译码装置的形状内、形状外的图象信息一致。
另外,通过将边界部分插值装置15中的处理方法,或处理参数(比如低通滤波的掩模参数或插值参数)输出送到译码装置可根据边界部分的浓度值构造作出与之相应的预测。
另外,处理参数或处理方法的输出可以用图象单位或图块单位进行。
如上所述,在本实施例中通过将物体形状内和边界部分的处理分开并分别以适合各自情况的方法编码可以达到高效编码。实施例4
下面利用图7对第4实施例中的图象译码装置进行说明。图7为表示本发明的第4实施例中的图象译码装置的基本构成的框图,在同一图中对与第2实施例和第3实施例中相同的信号以及具有相同功能的功能块标以相同的符号并略去其详细说明。
本实施例中的图象译码装置是对由图6的图象编码装置编码的图象信号进行译码的装置。边界部分译码装置19是对边界部分编码信号18进行译码的装置。加法装置20是用于将译码后的边界部分的图象信号和边界部分插值装置15输出的边界部分的预测值相加的装置。
对如上构成的第4实施例中的图象译码装置的操作仅就其与第2实施例不同之处进行说明。另外,因为图7的8、5、18各信号的意义和第3实施例中的相同,其说明省略。
边界部分插值装置15以与第3实施例中相同的方法生成边界部分象素的预测值。边界部分译码装置19对边界部分编码信号18译码并输出差分值。加法装置20将边界部分的预测值和译码后的差分值相加,再由边界部分替换装置21将边界部分的象素值替换成加法装置20的输出而输出图象的译码信号12。
另外,在编码装置输出边界部分插值装置15的处理方法或者处理参数的场合,译码装置的边界部分插值装置15必须利用该处理方法或处理参数进行处理。
如上所述,在本实施例中可以对利用第3实施例的图象编码装置编码的信号正确地进行译码。实施例5
在以上的从实施例1到实施例4所示的实例是以一般的图象为中心的实施例,由图8至图13所示之实施例5表示的是在图象为具有不同于自然图象的特征的利用透射率信号的透射率图象及计算机图形等的场合进行高效率编码的实例。
图8(a)为计算机图形之一例,中心部分有一个椭圆形,在该椭圆形的物体形状区域是浓度几乎固定的非透射部分,该物体形状区域外为透射率为100%的透明背景。包含该物体形状区域和背景的边界上的轮廓线的水平方向(X、Y方向)的透射率变化示于图8(b)。由此也可以判断出图8(a)的物体形状区域的透射率几乎固定不变。
对这种图象编码的编码电路的框图示于图9。在图9中,如将图8(a)那种图象作为输入图象201输入,形状抽取装置202将物体形状信息抽取,由形状编码装置204将该物体形状信息编码并作为形状编码信号205而输出。
另一方面,假设输入图象201的物体形状内部的象素值为固定,针将体形状内部的象素值用该固定值替换,将该固定值编码并作为形状内象素值编码信号502而输出。
图10所示为用于将根据图9编码的图象信号译码的图象译码装置,输入的是形状内象素值编码信号701,形状内象素值译码装置702将固定值译码。
另一方面,将形状编码信号605输入,形状译码装置606将物体形状信息译码,用该形状信息和译码后的固定值通过形状内象素值译码装置703将形状内象素值替换成译码后的固定值和作为译码图象704输出。
利用上述方法,由于可以根据图象的特点对可以简化的物体以比较简单的方法进行编码,所以可做到高效率编码。
图11示出对图8(a)所示的图象的边界部分进行高效编码的步骤。其编码装置示于图12,所以与图12的构成一起对编码步骤予以说明。此外,与图9具有相同功能的各部分用同样的符号标明。
首先,与图9同样,假设在形状内象素值编码装置501中输入图象201的物体形状区域内部的象素值为固定值,将物体形状内部的象素值用该固定值替换,将该固定值编码并作为形状内象素值编码信号502输出。另外,输入图象201也输入到形状抽取装置202,将物体形状信息抽取,对该物体形状信息利用形状编码装置204进行编码并作为形状编码信号205而输出。
之后,根据来自形状抽取装置202的形状信息,利用边界部分抽取装置901将边界部分抽取,对该边界部分实施滤波处理并利用如图11(b)所示的插值值进行边界部分的插值。
于是,由边界部分插值参数确定装置1101将表示如何插值的插值方法的参数输出。另外,边界部分抽取装置901将抽取边界部分的该抽取方法(由边界线算起的范围等)作为边界部分抽取方法信号1103输出。
图13为用于将按图11编码的图象信号译码的图象译码装置,与图10相同,输入的是形状内象素值编码信号701,并在形状内象素值译码装置702中将固定值译码。
另一方面,输入形状编码信号605,利用形状译码装置606将物体形状信息译码,用该形状信息和译码后的固定值通过形状内象素值译码装置703将形状内象素值替换成译码后的固定值输出。
另外,根据输入的边界部分抽取方法信号1304与来自形状译码装置606的物体形状信息在边界部分抽取装置901中对边界部分进行译码,之后在边界部分插值装置1302中与插值方法的参数1301合并进行边界部分的插值并输出译码图象1303。
利用上述方法,由于可以根据图象的特点对可以简化的物体以比较简单的方法进行编码,所以可以做到高效率编码。实施例6
本实施例为利用运动图象的透射率信号的编码,与MPEG方式同样地根据保持在延迟缓冲器中的参照图象进行运动补偿而生成预测图象并将预测图象和输入图象的差分值编码的编码装置。
图14为表示第6实施例中的图象编码装置的基本构成的框图,在同一图中对与第1~第5实施例中相同的信号以及具有相同功能的功能块标以相同符号并略去其详细说明。延迟缓冲器22是用于保持加法装置20输出的参照图象的装置。运动补偿装置23是其中输入有运动矢量信息及参照图象根据运动矢量信息进行运动补偿并作为预测图象24而输出的装置。
对如上构成的第6实施例中的图象编码装置的操作仅就其与第1实施例中的不同之处进行说明。首先,利用差分装置16对图象信号1求出与预测图象24的差分并对该差分值利用形状外象素替换装置6和图象信号编码装置7与第1实施例同样地进行编码。
之后,将编码结果得到的图象编码信号8用图象信号译码装置9译码。由于此译码图象是差分值的译码信号,利用加法装置20和输入到差分装置16的预测图象24相加,并且利用形状外象素复原装置11使形状外的象素值重新返回0而生成完全的译码图象。此译码图象用作下一个图象编码用的参照图象。
由译码图象生成参照图象,为了使译码装置侧和参照图象取得一致必须使译码装置侧也与图象信号译码装置9、加法装置20和形状外象素复原装置11进行同值处理的图象受到泽码。新的参照图象保持在延迟缓器22中,此图象在下一个图象编码时利用运动补偿装置23进行运动补偿而成为预测图象。编码装置将图象编码信号8及形状编码信号5作为编码信号输出。
另外,对于作为形状外象素复元装置11的输出的参照图象采用和形状外象素替换装置6同样的方法替换形状外的象素并且在使参照图象的物体区域边界部分上不含高频分量后也可以生成预测图象。
另外,在本实施例中在延迟缓冲器22中只保持一幅参照图象,但也可以和MPEG方式同样地保持多幅图象,并由在时间上为前、后或前及后的参照图象生成予测图象。
如上所述,在本实施例中,利用对与参照图象的差分值进行编码在运动图象的编码中也可做到高效率的编码。实施例7
下面利用图15对第7实施例中的图象译码装置进行说明。图15为表示本发明的第7实施例中的图象译码装置的基本构成的框图,在同一图中对与第1~6实施例中相同的信号以及具有相同功能的功能块标以相同的符号并略去其详细说明。本实施例中的图象译码装置是对由图14的图象编码装置编码的图象信号进行译码的装置。
对如上构成的第7实施例中的图象译码装置的操作仅就其与第2实施例中的不同之处进行说明。利用图象译码装置9对根据和预测图象的差分值编码所得之图象编码信号8进行译码,译码后的差分信号利用加法装置20与预测图象24相加。利用形状外象素复原装置11使加法装置20的输出图象的形状外象素返回0并作为译码信号12由译码装置输出。
另一方面,译码信号12作为参照图象保持在延迟缓冲器22中,在下一个图象译码之际由运动补偿装置23对保持在延迟缓冲器22中的参照图象进行运动补偿并作为新的预测图象24输出。
另外,在由编码装置侧对参照图象的形状外象素值替换的场合,也必须由本实施例的译码装置用同样的方法对参照图象的形状外象素进行替换。
另外,在本实施例中在延迟缓冲器中保持一幅参照图象,但也可和MPEG方式同样地保持多幅图象并由在时间上为前、后、或前及后的参照图象生成预测图象。
如上所述,在本实施例中可对由第6实施例的图象编码装置编码的信号正确地进行译码。实施例8
图16为本发明的第8实施例中的图象编码的概念图。
图16(a)示出参照图象的浓度值的断面,而图16(b)示出应编码的图象的浓度值的断面。在运动图象中,在物体区域整体由半透明向不透明或反之由不透明向半透明转变的场合,某一时刻的透射率图象的象素值可以用与另外一个时刻的参照图象的象素值的比表示的场合是存在的。不仅透射率图象如此,而且通常的图象的亮度变化的编码也可使用亮度比。
也就是说对于如图16(a)这种图象的象素值,如图16(b)所示应编码的图象象素值为其常数倍。此时仅将象素值比率和形状信息编码输出就可做到高效编码。另外,也可将参照图象的象素值的常数倍的图象作为预测图象将与输入图象的差分进行编码。
图17为表示第8实施例中的图象编码装置的基本构成的框图,在同一图中对与第1~7实施例相同的信号以及具有相同功能的功能块标以相同的符号并略去其详细说明。象素值比率检测装置25是检测参照图象和应编码的图象的象素值的比率的装置。象素值比率编码装置26是将检出的象素值的比率进行编码并作为象素比率编码信号27而输出的装置。乘法装置28是将图象的象素值乘以给定的比率的装置。
对如上构成的第8实施例中的图象编码装置的操作仅就其与第6实施例中的不同之处进行说明。在象素值比率检测装置25中通过将保持在延迟缓冲器22中的参照图象与输入的图象信号1的象素值进行比较可以求出两个图象的象素值的比率。此象素值比率由象素值比率编码装置26编码并作为象素值比率编码信号27输出。
另外,在本实施例中叙述的虽然是利用在第6实施例中所述的预测图象进行编码的实例,但是即使在不使用形状信息预测编码的场合要求出预测图象之际也可使用本方法。
如上所述,在本实施例中,对形状整体象素值的值发生转变的这种图象可以做到高效编码。实施例9
下面利用图18对第9实施例中的图象译码装置进行说明。图18为表示本发明的第9实施例的图象译码装置的基本构成的框图,在同一图中对与第1~8实施例中相同的信号以及具有相同功能的功能块标以相同的符号并略去其详细说明。本实施例中的图象译码装置是对由图17的图象编码装置编码的图象信号进行译码的装置。象素值比率译码装置是对象素值比率编码信号进行译码的装置。
对如上构成的第9实施例中的图象译码装置的操作仅就其与第7实施例中的不同之处进行说明。象素值比率译码装置29对参照图象和应译码的图象的象素值的比率进行译码。乘法装置28通过将经过译码的象素值比率乘以在延迟缓冲器22中保持的参照图象的象素值可以生成预测图象。
另外,在本实施例中叙述的虽然是利用在第6实施例中所述的预测图象进行译码的实例,但是即使在不使用形状信息预测译码的场合要求出预测图象之际也可使用本方法。
如上所述,在本实施例中,可对由第8实施例中的图象编码装置编码的信号正确地进行译码。
实施例10
图19为本发明的第9实施例中的图象编码装置的概念图。图19示出输入图象信号中的物体区域边界部分附近的浓度值断面,图19的1a~1d表示与浓度值相应的图象的离散化状态。
如图19所示,对图象可以以各代表性浓度值(1a~1d)进行离散化,此时离散化的图象可通过将各阶层以代表性浓度值的值和区域形状表示的方式而阶层化。对这些阶层可以,比如,利用第1实施例中的编码装置进行编码并利用对各阶层的编码信号进行多路转换而输出对图象进行编码。此外,在所要求的编码位速率低的场合仅对1a阶层编码,并可通过根据其他编码位速率而有选择地对1a~1d进行编码,从而很容易实现根据位速率而进行编码的灵活性。
图20为表示第10实施例中的图象编码装置的基本构成的框图,在同一图中对与第1~9实施例中相同的信号以及具有相同功能的功能块标以相同的符号并略去其详细说明。图象离散化装置30是对图象信号1进行离散化并根据浓度值进行阶层化的装置。多路转换装置31是将各阶层的图象编码信号进行多路转换并作为多路转换图象编码信号32而输出的装置。多路转换装置33是将各阶层的形状编码信号进行多路转换并作为多路转换形状编码信号34而输出的装置。
对如上构成的第10实施例中的图象编码装置的操作仅就其与第1实施例的不同之处进行说明。图象信号1可由图象离散化装置30离散化(比如通过量化处理),并可按照离散化水平值和二值化的区域(比如离散化水平值以上为1,其他为0的区域)而阶层化。编码对各阶层的图象进行,此时,可使用在第1实施例中所述的形状内为固定的象素值的图象编码法。各阶层的编码信号利用编码信号多路转换装置31、33进行多路转换并作为多路转换图象编码信号32和多路转换形状编码信号34而输出。
另外,图象编码信号的编码信号多路转换装置31的离散化水平的多路转换的方法有对离散化水平的绝对值进行编码以任意顺序送出的方法及对各离散化水平值的差分值进行编码并按照从具有最低离散化水平的值的阶层开始的顺序送出的方法。
如上所述,在本实施例中,通过对图象信号进行分阶层处理可以按照编码的位速率很容易实现灵活性。实施例11
下面利用图21对第11实施例中的图象译码装置进行说明。图21为表示本发明第11实施例中的图象译码装置的基本构成的框图,在同一图中对与第1~10实施例相同的信号以及具有相同功能的功能块标以相同的符号并略去其详细说明。本实施例中的图象译码装置是对由图20的图象编码装置编码的图象信号进行译码的装置。
多路转换信号分离装置35是将多路转换图象编码信号32分离成各阶层的图象编码信号的装置,多路转换信号分离装置36是将多路转换形状编码信号34分离成各阶层的形状编码信号的装置。译码图象合成装置37是将译码后的各阶层的图象合成并作为译码图象12输出的装置。
对如上构成的第11实施例中的图象译码装置的操作仅就其与第2实施例不同之处进行说明。多路转换图象编码信号32和多路转换形状编码信号34分别由多路转换信号分离装置35、36分离成各阶层的编码信号。之后,各阶层的编码信号利用与第10实施例的编码装置相逆的译码而译码成为各阶层的译码图象。经过译码的各阶层的图象由译码图象合成装置37进行各阶层的译码图象的合成。
另外,多路转换图象编码信号36的离散化水平的多路转换的方法,在将离散的水平的绝对值编码并以任意顺序送出的场合,在译码装置侧将各离散化水平的译码图象重叠,在各阶层同一位置的象素中最大离散化水平的值取作象素值可以得到译码图象。另外,如果是将各离散化水平值的差分值编码并从具有最低离散化水平的值的阶层开始顺序送出的方法,在译码装置侧,通过将各离散化水平的译码图象相加可得到译码图象。
如上所述,在本实施例中,可对由第10实施例的图象编码装置编码的信号进行正确的译码。实施例12
图22为本发明的实施例12中的图象编码装置的框图。在同一图中,221是输入的图象信号、222是使图象信号m值化的m值生成器、224是将m值化的信号图块化的图块生成器、226是将图块化信号编码并输出编码信号227的编码器、228是将编码信号译码的译码器、2210是将m值化的信号变换为多值信号的逆m值生成器、2212是开关、2214是以图块为单位进行滤波处理的LPF(低通滤波器)、2216是开关、2217是存储器、2219是切换开关2212、2216的识别信号、2220是对识别信号2219进行编码并输出编码信号2221的编码器。
下面就以上这种构成的实施例12的操作进行说明。图象信号通过m值生成器222由多值信号变换为m值的信号。m值生成器的作用与量化点为m个的量化等同,其输出具有m种值。图块生成器224将m值化的值按每数个象素一组构成图块。编码器226参照在存储器2218中记录的已完成译码的象素值将图块生成器224的输出编码使之成为编码信号227。
此外,译码器228参照在存储器2217中记录的已完成译码的象素值对编码信号7译码。实施例12的编码器226及译码器228具有m值和多值信号相互变换功能,因而,如果将m值化的信号输入编码器226,则编码器226及译码器228利用参照存储器2217的多值象素值可对离散的值进行高效的编码。逆m值生成器2210将译码后的m值的信号变换为象素值。
图22是实施例12的操作说明图。在图23中,猫(自然图象)的部分具有连续的象素值,LOGO(计算机图形)的部分具有离散值。如果将两部分的象素值都作为离散值原样不变地输出,在本来是具有连续象素值的自然图象部分会产生视觉上刺眼的折叠畸变,反之,如果将象素值全部变换为连续值,则由计算机生成的陡峭的边缘会成为模糊的不鲜明的图象。
因此,对离散的图块如果将离散的象素值按原样输出,仅对用斜线表示的部分以LPF对离散的象素值进行插值处理使之成为连续的象素值输出,则离散象素值的图块的鲜明度不会恶化,可以改进斜线部分的图块的图象质量。
开关2212及2216,根据从外部输入的识别信号2219,利用功能块在是否利用LPF2212将离散值变为连续值间进行切换。开关2216的输出存储在存储器2217中并可在后续的图象信号编码及译码中使用。另外,识别信号经编码器2220编码而变为编码信号2221。
如以上所说明,根据实施例12,利用m值生成器实施m值化并利用编码器226对离散值进行编码可以达到高效率,利用开关2212、2216及2214可以只将希望是连续值的图块变换为连续值从而可以防止具有连续值的自然图象的象素值造成图象质量下降。实施例13
图24为实施例13中的图象编码装置的框图。实施例13与图22的实施例12几乎相同,唯一不同之处是存储器2217的输出连接到m值生成器2218。
如编码器226及译码器228仅处理m值,且编码器226及译码器228的输入全部m值化时则处理很简单。根据上述理由,实施例13为通过将存储器2217的输出经m值生成器2218进行m值化而使编码器226及译码器228的输入全部成为m值的实施例。实施例14
图25为实施例14中的图象编码装置的框图。实施例14与图22的实施例12几乎相同,唯一不同之处是省略了开关2212,识别信号2219是利用比较器2226生成。
由于省略了开关2212,逆m值生成器2210的输出一定要由LPF2214处理。比较器2226将逆m值生成器2210的输出和LPF2114的输出与图象信号221进行比较,将与图象信号221相差小的作为开关2216输出的识别信号2219而输出。结果该图块的开关2216的输出,即泽码后的象素值,永远是最接近输入信号221的值,从而使图象质量得以提高。实施例15
图26为本发明的实施例15中的图象译码装置的框图。在同一图中,与图22的实施例12操作相同的部分标以相同的标号,说明则省略。2230是对识别信号2219进行译码的译码器,2232是将开关2216的输出合并而输出译码信号2233的逆图块生成器。
下面对如上构成的实施例15的操作进行说明。译码器2230将编码信号21译码而输出识别信号2219。从译码器228到开关2216的操作与实施例12相同。开关2216的输出已图块化,所以通过在逆图块生成器2232中将图块化的各象素合并而构成作为译码后的图象信号的译码信号2233。
如以上所述,根据实施例15,由于具备实施例12的与译码相关的部分和逆图块生成器2232,所以对由实施例12编码的编码信号可以正确地译码。实施例16
图27为实施例16中的图象译码装置的框图。实施例16与图26的实施例15几乎相同,唯一的不同之处是存储器2217的输出连接到m值生成器2218。
与图24所示的实施例13同样,如果译码器228只处理m值,并且译码器228的输入全部m值化,则处理很简单。根据上述理由,实施例16为通过将存储器2217的输出经m值生成器2218进行m值化而使译码器228的输入全部成为m值的实施例。实施例17
图28为本发明的实施例17中的图象编码装置的框图。在同一图中,221是输入的图象信号、2238是将图象信号221分割为m种信号的分割器、2240i是将分割所得之第i号信号编码作为编码信号2241i输出的编码器、2242i是将编码信号译码的译码器、2244i是开关、2246i是进行滤波处理的LPF(低通滤波器)、2248i是开关、2252是将开关2246i的输出合成m遍而生成译码图象信号的合成器、2254是存储合成器2252的输出的存储器、2256是将存储器2248i的输出分割为m种信号的分割器、2249i是用来切换开关2244i、2248i的识别信号、2250i是将识别信号2249i编码并作为编码信号2251i输出的编码器。
下面对如上构成的实施例17的操作进行说明。图象信号由分割器2238分成m种信号。这种分割可以是图象信号的空间分割及时间分割,也可以是象素值的幅度分割。当然,图象中的每个物体都可以分离。由于从编码器2240i开始到开关2248i为止的处理和编码器2250i的处理对m种的各个信号都是相同的,所以仅对第i号进行说明。编码器2240i参照与利用分割器2256分割记录在存储器2254中的译码完毕的象素值所得到的第i号信号对应的信号将分割器2238的第i号的信号编码并使之成为编码信号2241i。
另外,译码器2242i同样也参照分割器2256的第i号的信号将编码信号2241i译码。开关2244i及2248i根据识别信号2249i在输出经LPF2246i处理过的结果还是未处理的结果之间切换。也即对每个经过m分割的信号是否应用LPF处理进行切换,这样就可以做到经过LPF处理的都仅是经过LPF处理后图象质量可以提高的信号。开关2248i的输出由合成器2252汇集m遍作为译码图象信号存储于存储器2254供后续的图象信号编码及译码使用。另外,识别信号编码器2250i编码而成为编码信号2251i。
图29是象素值在振幅方向经4分割而编码的实例说明图。连续值的输入图象信号(图29(a))由分割器2238在振幅方向上量化为5个值(图29(b))之后如图29(c)那样进行4分割。分割后的各信号作为二值信号进行编码,由LPF将各信号每一个都变换为连续值(图29(d))。合成器2259将变成连续值的各信号相加(图29(e))而成为译码图象信号。按照上述方式,编码虽然是二值的,但对复杂形状的连续值译码也可以做到。
如上所述,按照实施例17利用分割器2238进行m分割后的每个信号是否经过LPF处理是可以切换的,因而可以做到经过LPF处理的都仅是经过LPF处理后图象质量可以提高的信号,于是图象质量可以提高。还有,如果某个图象信号中有CG生成的文字,由于该信号不经LPF处理,所以可以防止文字的轮廓发生模糊的现象。
另外,在实施例17中编码器2240i及译码器2242i都要参照分割器2256的第i号的信号,但是也可以直接参照存储器2254的内容进行编码和译码。此外,也可以利用分割器2238或分割器2256进行图块化并对每个图块进行LPF2246i切换。实施例18
图30为本发明的实施例18中的图象编码装置的框图。在同一图中,对与图28所示的实施例17的操作相同的部分标以相同的标号。2252是将译码器2242i的输出合成m遍而输出的合成器、2260是开关、2262是进行滤波处理的LPF(低通滤波器)、2264是开关、2254是存储开关2264的输出的存储器、2265是用来切换开关2260、2264的识别信号、2266是将识别信号2265编码并作为编码信号2267输出的编码器。
下面对如上构成的实施例18与实施例17的不同部分的操作进行说明。实施例18和实施例17的不同之处在于实施例17是在合成前进行LPF处理,而在实施例18是在合成后进行LPF处理。实施例18不能像实施例17那样对每个信号进行LPF切换控制,但由于识别信息少可以节约编码位数。开关2260及2264系根据识别信号2265对输出结果是经过LPF2262处理还是不经处理进行切换。开关2264的输出可为后续的图象信号的编码或译码所使用。另外,识别信号由编码器2266编码而成为编码信号2267。
图31是象素值在振幅方向上4分割进行编码的实例说明图。连续值的输入图象信号(图31(a))在振幅方向上由分割器2238量化为5个值(图31(b))之后如图31(c)所示进行4分割。分割后的各信号作为二值信号编码并由合成器2252合成(图32(d))。合成器2252的输出由LPF变换为连续值(图31(c))而成为译码图象信号。按照上述方式,编码虽然是二值的,但对复杂形状的连续值译码也可以做到。
如上所述,按照实施例18,在分割器2238进行m分割后的编码及译码的各信号合成时通过对有无经过LPF处理进行切换可以做到经过LPF处理的都仅是经过LPF处理后图象质量可以提高的信号,于是图象质量可以提高。还有,如果该图象信号是CG生成的文字,由于该信号不经LPF处理,所以可以防止文字的轮廓发生模糊的现象。
另外,在实施例18中编码器2240i及译码器2242i都要参照分割器2256的第i号的信号,但是也可以直接参照存储器2254的内容进行编码和译码。实施例19
图32为本发明的实施例19的图象译码装置的框图。在同一图中,对与图28的实施例17的操作相同的部分标以相同的标号,说明则省略。2258i是对识别信号2249i译码的译码器,而2259是译码信号。
下面对如上构成的实施例19的操作进行说明。译码器2258i对编码信号2251i译码而输出识别信号2249i。由于从译码器2242i开始直到合成器2252的操作与实施例17相同,合成器2252的输出就成为作为译码图象信号的译码信号2259。
如上所述,按照实施例19,由于具备与实施例17的译码相关的部分,所以可以对利用实施例17编码的编码信号进行正确的译码。
另外,在实施例19中译码器2242i要参照分割器2256的第i号的信号,但是也可以直接参照存储器2254的内容进行编码和译码。此外,也可利用分割器2256进行图块化,并对每个图块进行LPF2246i切换。实施例20
图33为本发明的实施例20中的图象译码装置的框图。在同一图中,对与图30的实施例18的操作相同的部分标以相同的标号,说明则省略。2268是对识别信号2265进行译码的译码器,2259是译码信号。
以下对如上构成的实施例20的操作进行说明。译码器2268对编码信号2267进行译码并输出识别信号2265。从译码器2242i起直到开关2264的操作与实施例18中的相同,开关2264的输出就成为作为译码图象信号的译码信号2259。
如上所述,按照实施例20,由于具备与实施例18的译码相关的部分,所以可对利用实施例18编码的编码信号进行正确的译码。
另外,在实施例20中,译码器2242i要参照分割器2256的第i号的信号,但是也可以直接参照存储器2254的内容进行编码和译码。实施例21
图34是本发明的实施例21中的图象编码装置的框图。在同一图中,221是输入的图象信号、2270是将图象信号图块化的图块生成器、2271是对图块化信号进行二次抽样的象素二次抽样器、2272是进行编码并将编码信号2273输出的编码器、2274是将编码信号译码的译码器、2276是对译码信号进行插值处理的象素插值器、而2278是存储器。
以下对如上构成的实施例21的操作进行说明。图块生成器2270将图象信号221按每数个象素合成一组而构成一个图块。象素二次抽样器2271,在该图块附近有译码完成的象素时,则参照存储器2278,在没有译码完成的象素时,则由该图块的象素值预测生成其附近的象素值并进行二次抽样处理。二次抽样器对后续的编码器的编码位数的削减作用很大,但是如果二次抽样仅对图块内的象素值进行时,则会在图块边界处集中发生二次抽样畸变而成为视感极为恶劣的图块畸变。因此,在对图块单位进行二次抽样之际,必须还参照该图块近旁的象素值限制频带域以除掉折叠畸变。
图35是象素二次抽样器2271参照的象素的说明图。编码由左上图块向右下图块顺序进行,在该图块的周围,如图35所示,存在有已译码的图块及未译码的图块。
在对该编码图进行象素二次抽样时能够参照已译码的图块,而由于未译码的图块不能参照,要利用该编码图块的象素值预测生成未译码的图块的象素值。
以按上述方式构成的该图块为中心的象素受到二次抽样处理时仅把与该编码图块相当的区域切出就可以得到该图块的二次抽样象素。编码器2272对二次抽样器2271的输出进行编码得到编码信号2273。
此外,译码器2274将编码信号2273译码。象素插值器2276与象素二次抽样器2271一样,在该图块附近有已译码的象素时,则参照存储器2278,在没有已译码的象素时则由该图块的象素值预测生成其附近的象素值并进行插值处理。象素插值器2276的输出存储在存储器2278中,可由后续的图象信号的二次抽样及插值使用。
如上所述,按照实施例21,在象素二次抽样器2271及象素插值器2276能够参照已译码的象素值时,由于通过参照进行二次抽样和插值,即使在图块单位中进行二次抽样和插值也可以避免发生图块畸变。实施例22
图36是本发明的实施例2268的图象译码装置的框图。在同一图中,对与图34的实施例22中操作相同的部分标以相同的标号,说明则省略。2280是将插值象素值合并而成为图象信号的逆图块生成器,而2259是译码信号。
下面对如上构成的实施例22的操作进行说明。除逆图块生成器2280外其他部分与实施例21中的相同。由于利用象素插值器2276进行象素插值的信号已被图块化,由逆图块生成器2280将图块合并并经过译码的图象信号就成为译码信号2281。
如上所述,按照实施例22,由于具备与实施例21的译码相关的部分,所以可以对由实施例21编码的编码信号进行正确的译码。实施例23
图37是本发明的实施例23中的图象编码装置的框图。在同一图中,221是输入的图象信号、3100是使图象信号221图块化的图块生成器、3102是开关、3104是将图块生成器3100的输出按原样编码的编码器、3105是将图块生成器3100的输出进行m值化的m值生成器、3106是将m值化的信号编码的编码器、3108是将编码信号3109输出的开关、而3110是将识别信号3107编码并输出编码信号3111的编码器。
下面对如上构成的实施例23的操作进行说明。图块生成器3100将图象信号221按每数个象素一组集合而构成一个图块。如前面所说明过的,图象信号有具有连续象素值的自然图象和具有离散象素值的图象。所以,将连续象素值的图块用编码器3104编码,而将离散象素值的图块利用m值生成器3105进行m值化后由编码器3106对m值化后的值编码,这样就可以对连续的象素值和离散的象素值两方面都进行高效编码。开关3102及3108根据由外部输入的识别信号3107来选择编码器3104或编码器3106之一而将编码信号3109输出。此外,识别信号3107由编码器3110编码而成为编码信号3111。
如上所述,按照实施例23,由于具备可直接将图块化的信号编码的编码器3104和m值化后编码的编码器3106,所以对连续的象素值和离散的象素值两方面都可以进行高效编码。
另外,在实施例23中,离散的象素值的图块也不一定在m值化后由编码器3106编码,由3104编码也可以。反之,连续象素值的图块也可以在m值化后进行编码。实施例24
图38是本发明的实施例24中的图象编码装置的框图。在同一图中,对与图37的实施例23中操作相同的部分标以相同的标号。3122是将编码信号3109译码而输出多值信号的译码器、3124是将编码信号3109译码并输出m值译码器、3126是将m值译码输出多值信号的逆m值生成器、而3112是生成识别信号3107的比较器。
下面对如上构成的实施例24的操作进行说明。与实施例23相同部分的操作说明予以省略。译码器3122对编码器3104的输出译码并输出多值信号。另一方面,译码器3124对编码器3106的输出译码并输出m值,而逆m值生成器3126将m值变换为多值信号。比较器3112将译码器3124的输出和逆m值生成器3126的输出与图象信号比较,并利用开关3108选择编码误差小者生成识别信号3107。因此,作为编码信号3109而被选择的编码信号与另一方比较总是可使编码误差变小者,与固定选择一方的情况比较,可使图象质量下降程度变小。
如上所述,按照实施例24,可以选择编码误差小的编码器来生成识别信号,与实施例23相比可以进一步提高编码效率。
另外,实施例24中的比较器3112可以选择编码误差小者一方,并且既可以选择编码位数少的一方,也可以同时考虑编码误差和位数两方面而进行选择。实施例25
图39是本发明的实施例25中的图象译码装置的框图。在同一图中,对与图38的实施例24中操作相同的部分标以相同的标号,说明则省略。3130是对编码信号3111译码并输出识别信号3109的译码器、3120和3128是开关、3132是将开关3128的输出合并成为图象信号的逆图块生成器、而3133是译码信号。
下面对如上构成的实施例25的操作进行说明。与实施例24相同部分的操作的说明予以省略。译码器3130将编码信号3111译码而输出识别信号3109。开关3120及开关3128根据识别信号3109选择与编码对应的译码信号。因为开关3128的输出已图块化,由逆图块生成器3132将图块合并并译码的图象信号成为译码信号3133。
如上所述,按照实施例25,由于具备与实施例24的译码器相关的部分,所以可以对由实施例23及实施例24编码的编码信号正确地进行译码。
实施例26
此外,本发明是由程序实现的,程序可由软盘等存储媒体存储而转送,从而其他独立的计算机易于实施本发明。图40示出作为存储媒体的软盘。
另外,在实施例26中,作为存储媒体示出的是软盘,但是如果是IC卡、CD-ROM以及卡型盒式磁带等可存储程序的媒体也同样可以实施本发明。
从实施例1至实施例15的说明中作为滤滤装置全部是利用LPF进行说明,但是也可以使用线性插补滤波器以及双一次滤波器等。
如以上所详细说明的,通过采用本发明,在输入图象信号是计算机图形这种形状边界两边浓度急剧变化或者具有一样浓度和每个区域中为离散浓度的情况下,由于可以选择高效的编码步骤与其适应,所以可以在实现高效编码的同时也能正确地进行译码。也即根据本发明,在对透射率信号、CG等的图象编码中,可以实现从位速率观点来看是最适合的图象编码装置和图象译码装置。
此外,因为在本发明中编码的编码信号可以和形状编码信号、图象编码信号、差分信号分离,所以可以通过根据编码位速率改变输出的编码信号的方式而很容易地实现编码的灵活性。

Claims (78)

1.一种图象编码方法,其特征在于具有:抽取表示输入图象信号的特征的特征信号的抽取步骤、
分别适应所抽取的上述特征信号的特征信息而进行不同的图象编码处理的编码步骤、
以及对用于分别识别上述多种编码处理的每一个的识别信号进行编码的步骤。
2.如权利要求1中所述的图象编码方法,其特征在于在特征信号抽取步骤将图象形状信息作为输入图象信号的特征信号抽取、在编码步骤根据上述形状信息对形状边界内部区域、边界部分区域、边界外区域中至少一个区域部分的象素进行替换处理。
3.如权利要求1中所述的图象编码装置,其特征在于具有将输入图象信号的象素值由多值变换为离散值的离散化步骤、
对上述离散化输出进行滤波插值的步骤、
在编码步骤对上述离散化输出或上述滤波插值的输出以及上述滤波器的参数进行编码。
4.一种图象译码方法,其特征在于包括对根据权利要求1的编码方法编码的输入图象信号的识别信号进行译码的步骤、
和对上述输入图象信号实施根据经过译码的上述识别信号进行的图象译码处理而译码的译码步骤。
5.如权利要求4中所述的图象译码方法,其特征在于根据识别信号的图象译码处理包含抽取输入图象信号的图象形状信息和根据上述形状信息对形状边界内部区域、边界区域、边界外部区域中至少一个区域的象素的替换处理。
6.如权利要求4中所述的图象译码方法,其特征在于根据识别信号的图象译码处理包含将输入图象信号的象素值作为离散值进行译码的译码处理和将上述象素值作为多值进行译码的译码处理。
7.一种图象编码装置,其特征在于具有抽取表示输入图象信号特征的图象特征信息的抽取装置、
根据利用上述图象特征信息抽取装置抽取的特征信号得到的特征信息对上述输入图象信号实施不同的图象编码处理的编码装置、
和对用于识别上述多种编码处理的识别信号进行编码的识别信号编码装置。
8.如权利要求7中所述的图象编码装置,其特征在于图象特征信息抽取装置将图象形状信息作为特征信号抽取和编码装置根据上述形状信息对形状边界内部区域、边界部分区域、边界外部区域中至少一个区域部分的象素进行替换处理。
9.如权利要求7中所述的图象编码装置,其特征在于具有将输入图象信号的象素值由多值变换为离散值的离散化装置、
和对上述离散化装置的输出进行滤波插值的滤波装置,而编码装置对上述离散化装置的输出或滤波装置的输出进行编码。
10.一种图象译码装置,其特征在于具有对根据权利要求1的编码方法编码的输入图象信号的识别信号译码的识别信号译码装置、
和对上述输入图象信号实施与经过译码的上述识别信号相应的图象译码处理而译码的译码装置。
11.如权利要求10中所述的图象译码装置,其特征在于与译码装置的识别信号相应的图象译码处理包含抽取输入图象信号的图象形状信息和相应于上述形状信息对形状边界内部区域、边界部分区域、边界外部区域中至少一个区域部分的象素的替换处理。
12.如权利要求10中所述的图象译码装置,其特征在于与译码装置的识别信号相应的图象译码处理,包含将输入图象信号的象素值作为离散值进行译码的译码处理和将上述象素值作为多值进行译码的译码处理。
13.一种图象编码方法,其特征在于是一种对图象信号进行编码的图象编码方法、
并且具有由图象信号抽取形状信息的步骤、
将上述图象信号的形状外部的象素值用由上述图象信号的形状内部象素值生成的象素值进行替换的步骤、
和将上述替换结果的象素值和上述形状信息进行编码的步骤。
14.一种图象译码方法,其特征在于是对权利要求13中所述的图象编码方法的编码信号进行译码的图象译码方法、
对象素值和形状信息的编码信号进行译码,由上述经过译码的形状信息判断形状内部和形状外部,在上述经过译码的象素值中将位于形状外部的象素用表示形状外部的象素值替换而对该图象的编码信号进行译码。
15.如权利要求13中所述的图象编码方法,其特征在于对上述形状信息进行轮廓线编码。
16.如权利要求4中所述的图象译码方法,其特征在于是对权利要求15中所述的图象编码方法的编码信号进行译码的图象译码方法并对经过轮廓线编码的形状信息进行轮廓译码。
17.一种图象编码方法,其特征在于是对图象信号进行编码的图象编码方法、
并具有由图象信号中抽取形状信息的步骤、
使形状内部的象素值成为固定值的步骤、
和将上述形状内象素值和上述形状信息编码的步骤。
18.一种图象译码方法,其特征在于是对权利要求17中所述的图象编码方法的编码信号进行译码的图象译码方法、
对上述形状内象素值和形状信息的编码信号译码,由上述经过译码的形状信息判断形状内部和形状外部并使形状内部的象素值变成上述经过译码的形状内象素值。
19.如权利要求13或16中任意一个中所述的图象编码方法,其特征在于由上述形状信息判断形状的边界部分,除形状内之外对边界部分的象素进行编码。
20.如权利要求14中所述的图象译码方法,其特征在于是对权利要求19中所述的图象编码方法的编码信号进行译码的图象译码方法、
根据经过译码的形状信息判断边界部分,在边界部分对上述边界部分的象素的编码信号进行译码。
21.如权利要求19中所述的图象编码方法,其特征在于对边界部分的象素进行确定的处理,对实施了上述处理的边界部分的象素和上述确定的处理方法进行编码。
22.如权利要求20中所述的图象译码方法,其特征在于是对权利要求21中所述的图象编码方法的编码信号进行译码的图象译码方法、
对上述的确定的处理方法译码,对边界部分实施上述的确定的处理方法并对上述边界部分的象素的编码信号进行译码。
23.如权利要求19或权利要求21中任意一个中所述的图象编码方法,其特征在于相应于形状内的象素和形状外的象素对边界部分的象素进行插值并对上述经过插值的象素和输入图象信号的差分信号进行编码。
24.如权利要求22中所述的图象译码方法,其特征在于是对权利要求23中所述的图象编码方法的编码信号进行译码的图象译码方法、
对上述经过编码的边界部分的象素的差分信号进行译码、
相应于上述经过译码的图象信号的形状外和形状内的象素对边界部分的象素进行插值,将上述边界部分的经过插值的象素与上述的边界部分的象素的差分信号相加而对上述边界部分的象素的编码信号进行译码。
25.如权利要求13或权利要求17中任意一个中所述的图象编码方法,其特征在于生成应该编码的图象的预测图象并对上述图象和预测图象的差分值编码使之成为编码信号。
26.如权利要求14或权利要求18中任意一个中所述的图象译码方法,其特征在于是对权利要求25中所述的图象编码方法的编码信号进行译码的图象译码方法,对上述经过编码的差分信号进行译码,另一方面,生成经过编码的图象的预测图象,将上述经过译码的图象信号和上述预测图象的象素值相加而对编码信号进行译码。
27.如权利要求25中所述的编码方法,其特征在于将上述预测图象的形状外的象素变换为确定值之后求取差分。
28.如权利要求26中所述的编码方法,其特征在于将上述预测图象的形状外的象素变换为确定值之后求取差分。
29.如权利要求25中所述的图象编码方法,其特征在于是运动图象的编码,从时间上在前、在后或在前及后的图象生成上述预测图象。
30.如权利要求25中所述的图象编码方法,其特征在于是运动图象的编码,从时间上在前、在后或在前及后的图象生成上述预测图象。
31.一种图象编码方法,其特征在于是对图象信号进行编码的图象编码方法、
并具有确定应编码的图象的参照图象的步骤、
将参照图象的象素值乘以确定的值的步骤、
计算上述图象信号和上述预测图象的象素值的差分的步骤、
和对上述乘积值与上述差分值进行编码的步骤。
32.一种图象译码方法,其特征在于是对权利要求31中所述的图象编码方法的编码信号进行译码的图象译码方法、
对上述差分值译码,对上述乘积值译码,将上述乘积值乘以参照图象的象素值生成预测图象,将上述经过编码的差分值和预测图象的象素值相加而对图象进行译码。
33.一种图象编码方法,其特征在于是对图象信号进行编码的图象编码方法、
并具有将上述图象信号以多种浓度值进行离散化的步骤、
对通过离散化而阶层化了的图象的各阶层进行编码的步骤、
和对经过编码的各阶层的编码信号进行多路转换而输出的步骤。
34.一种图象译码方法,其特征在于是对权利要求33中所述的图象编码方法的编码信号进行译码的图象译码方法、
将上述经过多路转换的编码信号分离为各阶层的图象编码信号,对各阶层的编码信号译码并且对上述经过译码的各阶层的图象信号进行合成。
35.一种图象编码装置,其特征在于是一种图象编码装置、
具有从输入图象抽取形状的形状抽取装置、
将由上述形状抽取装置抽取的形状编码的形状编码装置、
可由上述形状判断形状外部和替换输入象素的形状外象素替换装置、
以及对经上述形状外象素替换装置替换的输入图象进行编码的图象编码装置、
并且输出上述形状编码装置及上述图象编码装置的编码信号。
36.一种图象译码装置,其特征在于是对权利要求35中所述的编码信号进行译码而对图象信号进行译码的图象译码装置、
具有对形状的编码信号译码的形状译码装置、对经过替换的图象信号的编码信号进行译码的图象译码装置以及对由上述形状译码装置进行了译码的形状可以判断形状外部的位置的象素以表示形状外部的象素值进行替换而进行输出的形状外象素复原装置,上述形状外象素复原装置的输出就作为译码图象信号。
37.如权利要求35中所述的图象编码装置,其特征在于具有从上述形状抽取装置抽取的形状中抽取形状边界部分的边界部分抽取装置、
将可判断边界部分的象素的象素值替换的边界部分象素替换装置、
对利用上述形状外象素替换装置和上述边界部分象素替换装置替换的输入图象编码的图象信号编码装置、
对上述边界部分的象素根据形状外和形状内的象素进行插值的边界部分插值装置、
计算上述经过插值的边界部分的象素和输入图象的边界部分的象素之间的差分值的差分装置、以及
对上述差分装置输出的差分值编码的边界部分编码装置、并且以上述形状编码装置、上述形状图象编码装置及上述边界部分编码装置的编码信号为输出。
38.如权利要求36中所述的图象译码装置,其特征在于是对权利要求37中所述的编码信号译码而对图象信号译码的图象译码装置、
具有对边界部分的象素的差分值的编码信号译码的边界部分译码装置、从经过上述形状译码装置译码的形状中抽取形状边界部分的边界部分抽取装置、对上述边界部分的象素根据上述形状外象素译码装置输出的形状外和形状内的象素进行插值的边界部分插值装置以及将上述经过插值的象素和上述边界部分译码装置译码的边界部分的象素的差分值相加的加法装置、利用上述加法装置输出的边界部分的象素值对上述形状外象素译码装置输出的图象信号的边界部分的象素进行替换的边界部分象素替换装置,并将上述边界部分象素替换装置替换的图象信号作为译码图象信号输出。
39.如权利要求33中所述的图象编码装置,其特征在于具有保持参照图象的延迟缓冲器、
对上述延迟缓冲器中保持的图象进行运动补偿而输出预测图象的运动补偿装置、
计算上述预测图象和输入图象的差分的差分装置、
对将上述差分信号编码的图象编码信号进行译码的图象信号译码装置以及将上述经过译码的差分信号的图象和上述预测图象相加后作为新的参照图象输入延迟缓冲器的加法装置、
并输出上述图象信号编码装置和上述形状编码装置编码的编码信号。
40.如权利要求34中所述的图象译码装置,其特征在于是对权利要求39中所述的编码信号译码而对图象信号译码的图象译码装置、
具有将编码的差分信号进行译码的图象信号译码装置、保持参照图象的延迟缓冲器、对上述延迟缓冲器中保持的图象进行运动补偿而输出预测图象的运动补偿装置以及将上述预测图象和经过上述图象信号译码装置译码的差分信号相加后作为新的参照图象输入延迟缓冲器的加法装置,并将上述加法装置输出的图象信号变为译码图象信号。
41.一种图象编码装置,其特征在于是对图象信号编码的编码装置、
具有如果输入图象信号可保持参照图象的延迟缓冲器、
对上述延迟缓冲器中保持的参照图象和输入图象进行比较而检测两图象的象素值比率的象素值比率检测装置、
对上述象素值比率编码的象素值比率编码装置、
求取上述参照图象和输入图象的差分的差分装置、
对上述差分装置输出的差分值编码的图象编码装置、以及
将上述象素值比率与上述图象译码装置输出的图象信号相乘而作为新的参照图象输入上述延迟缓冲器的乘法装置、
并将上述图象信号编码装置和上述象素值比率编码装置编码的编码信号输出。
42.一种图象译码装置,其特征在于是对权利要求41中所述的编码信号译码的图象译码装置、
具有将图象编码信号译码的图象信号译码装置、将象素值比率译码信号译码的象素值比率译码装置、保持参照图象的延迟缓冲器、将上述参照图象的象素值与上述象素值比率相乘的乘法装置,以及将上述图象信号译码装置输出的差分图象信号和乘法装置输出的图象信号相加后作为新的参照图象的加法装置,并使上述加法装置的输出变为译码图象信号。
43.一种图象编码装置,其特征在于是对图象信号编码的编码装置、
具有以多种浓度值使输入图象离散化的图象离散化装置、
对通过上述图象离散化装置的离散化处理而阶层化的图象的各阶层进行编码的图象编码装置以及对各阶层的编码信号进行多路转换的多路转换装置、
并对由上述多路转换装置进行多路转换的图象信号编码。
44.一种图象译码装置,其特征在于是对权利要求43中所述的编码信号译码而对图象信号译码的图象译码装置、
具有将经过多路转换的编码信号进行分离的编码信号分离装置、将上述编码信号分离装置分离的各阶层的图象编码信号译码的图象信号译码装置以及和上述图象离散化装置一起对上述图象信号译码装置的各阶层的输出进行逆合成的译码图象合成装置,并将上述图象合成装置的输出变为译码图象。
45.一种图象编码装置,其特征在于具有如输入图象信号,可将上述输入信号变换为m值(m为2以上的整数)的m值化装置、
需要时参照下述的存储在存储器中的已译码的图象信号对上述m值化装置的输出进行编码的图象编码装置、
需要时参照下述的存储在存储器中的已译码的图象信号对上述图象编码装置的输出进行编码的图象编码装置、
将上述图象编码装置的输出由m值变换为多值的逆m值化装置、
将上述逆m值化装置输出的象素值按确定的规则变换而输出的滤波装置、
从上述滤波装置输出或上述逆m值化装置输出中选择其中一个进行输出的选择装置、
存储上述选择装置的输出以供上述图象编码装置及上述图象译码装置参照的存储器、以及
对表示上述选择装置选择何者的识别信号进行编码的识别信号编码装置、
并将上述图象编码装置输出和上述识别信号编码装置输出变为编码信号。
46.如权利要求45中所述的图象编码装置,其特征在于选择装置在以确定的象素数构成的图块单位中进行逆m值化装置输出和滤波装置输出间的切换。
47.如权利要求45中所述的图象编码装置,其特征在于选择装置将逆m值化装置输出和滤波装置输出与图象输入信号进行比较并选择与上述图象输入信号相差较小者。
48.如权利要求45中所述的图象编码装置,其特征在于滤波装置是压抑高频分量的低通滤波器。
49.一种图象译码装置,其特征在于是将编码信号作为输入对上述编码信号进行译码的图象译码装置、
具有根据上述编码信号对识别信号进行译码的识别信号译码装置、
参照下述的存储在存储器的已译码的图象信号对上述编码信号进行译码的图象译码装置、
将上述图象译码装置输出由m(m为2以上的整数)值变换为多值的逆m值化装置、
将上述逆m值化装置输出的象素值按确定的规则变换而输出的滤波装置、
从上述滤波装置输出或上述逆m值化装置输出中利用上述识别信号选择其中一个进行输出的选择装置、以及
存储上述选择装置的输出以供上述图象译码装置参照的存储器,并将上述选择装置的输出变成译码图象信号。
50.如权利要求49中所述的图象译码装置,其特征在于选择装置在以确定的象素数构成的图块单位中进行逆m值化装置输出和滤波装置输出间的切换。
51.如权利要求49中所述的图象译码装置,其特征在于滤波装置是压抑高频分量的低通滤波器。
52.一种图象编码装置,其特征在于具有以图象信号作为输入对上述输入信号进行m(m为2以上的整数)遍分割的图象分割装置、
需要时参照下述的存储在存储器中的已译码的图象信号对上述图象分割装置的各个输出进行编码的图象编码装置、
需要时参照下述的存储在存储器中的已译码的图象信号对上述图象编码装置的输出进行译码的图象译码装置、
将上述图象译码装置的m种输出中各输出的象素值按确定的规则变换而输出的滤波装置、
从上述滤波装置输出或上述图象译码装置输出中针对m种的各输出选择其中一个进行输出的选择装置、
将m种的上述选择装置输出合成一个而输出的图象合成装置、
存储上述图象合成装置的输出以供上述图象编码装置及上述图象译码装置参照的存储器、以及
对表示上述选择装置选择何者的识别信号进行编码的识别信号编码装置,并将上述图象编码装置的输出及上述图象译码装置的输出变成编码信号。
53.一种图象译码装置,其特征在于是将编码信号作为输入对上述编码信号进行译码的图象译码装置、
具有根据上述编码信号对识别信息译码的识别信号译码装置、
参照下述的存储在存储器中的已译码的图象信号对上述编码信号进行译码而将m(m为2以上的整数)种的图象信号进行译码的图象译码装置、
将上述图象译码装置的m种输出中各输出的象素值按确定的规则变换而输出的滤波装置、
从上述滤波装置输出或上述图象译码装置输出中针对m种的各输出根据识别信号选择其中一个进行输出的选择装置、
将上述选择装置输出合成一个而输出的图象合成装置、以及
存储上述图象合成装置的输出以供上述图象译码装置参照的存储器,并将上述图象合成装置的输出变成译码图象信号。
54.一种图象编码装置,其特征在于具有以图象信号作为输入对上述输入信号进行m(m为2以上的整数)遍分割的图象分割装置、
需要时参照下述的存储在存储器中的已译码的图象信号对上述图象分割装置的各个输出进行编码的图象编码装置、
需要时参照下述的存储在存储器中的已译码的图象信号对上述图象编码装置的输出进行译码的图象译码装置、
将m种的上述图象译码装置的输出合成一个而输出的图象合成装置、
将上述图象合成装置输出的象素值按确定的规则变换而输出的滤波装置、
从上述滤波装置输出或上述图象合成装置输出中选择其中一个进行输出的选择装置、
存储上述选择装置的输出以供上述图象编码装置及上述图象译码装置参照的存储器、以及
对表示上述选择装置选择何者的识别信号进行编码的识别信号编码装置,
并将上述图象编码装置的输出及上述识别信号编码装置的输出变成编码信号。
55.如权利要求52及权利要求54其中之一所述的图象编码装置,其特征在于选择装置在以确定的象素数构成的图块单位中进行图象译码装置输出和滤波装置输出间的切换。
56.如权利要求52及权利要求54其中之一所述的图象编码装置,其特征在于选择装置将图象译码装置输出和滤波装置输出与图象输入信号进行比较并选择与上述图象输入信号相差较小者。
57.如权利要求52及权利要求54其中之一所述的图象编码装置,其特征在于滤波装置是压抑高频分量的低通滤波器。
58.一种图象译码装置,其特征在于是将编码信号作为输入对上述编码信号进行译码的图象译码装置、
具有根据上述编码信号对识别信息译码的识别信号译码装置、
参照下述的存储在存储器中的已译码的图象信号对上述编码信号进行译码而将m(m为2以上的整数)种的图象信号进行译码的图象译码装置、
将上述选择装置输出合成一个而输出的图象合成装置、
将上述图象合成装置输出的象素值按确定的规则变换而输出的滤波装置、
从上述滤波装置输出或上述图象译码装置输出中根据上述识别信号选择其中一个进行输出的选择装置、以及
存储上述选择装置的输出以供上述图象译码装置参照的存储器,
并将上述选择装置的输出变成译码图象信号。
59.如权利要求53及权利要求58其中之一所述的图象译码装置,其特征在于选择装置在以确定的象素数构成的图块单位中进行图象译码装置输出和滤波装置输出间的切换。
60.如权利要求53及权利要求58其中之一所述的图象译码装置,其特征在于滤波装置是压抑高频分量的低通滤波器。
61.一种图象编码装置,其特征在于具有以图象信号作为输入对上述输入信号分割成由确定的象素数构成的图块的图块化装置、
参照下述的存储在存储器中的已译码的图象信号对上述图块化装置的输出就每个块进行二次抽样的二次抽样装置、
对上述象素二次抽样装置输出编码的图象编码装置、
对上述象素二次抽样装置输出译码的图象译码装置、
参照下述的存储在存储器中的已译码的图象信号对上述图象译码装置的输出就每个块进行象素插值的象素插值装置、
存储上述图象插值装置的输出以供上述图象编码装置、上述图象译码装置及上述象素插值装置参照的存储器、
并将上述图象编码装置的输出变成编码信号。
62.如权利要求61中所述的图象编码装置,其特征在于在象素二次抽样或象素插值之际,不能参照已译码的图象信号的象素仅能利用该图块的象素进行二次抽样或象素插值。
63.一种图象译码装置,其特征在于是将编码信号作为输入对上述编码信号进行译码的图象译码装置、
具有对上述编码信号进行译码的图象译码装置、
参照下述的存储在存储器中的已译码的图象信号对上述图象译码装置输出就每个图块进行象素插值的象素插值装置、
存储上述象素插值装置的输出以供上述图象译码装置及上述象素插值装置参照的存储器、以及
将上述象素插值装置输出的图块合并成为图象信号的逆图块化装置,
并将上述逆图块化装置的输出变成译码图象信号。
64.如权利要求63中所述的图象译码装置,其特征在于在象素二次抽样或象素插值之际,不能参照已译码的图象信号的象素仅能利用该图块的象素进行二次抽样或象素插值。
65.一种图象编码装置,其特征在于具有以图象信号作为输入对上述输入信号分割成由确定的象素数构成的图块的图块化装置、
将上述图块化装置输出变换为m(m为2以上的整数)值的m值化装置、
将上述m值化装置输出进行编码的第1图象编码装置、
将上述图块化装置输出进行编码的第2图象编码装置、
从上述第1编码装置输出或上述第2图象编码装置输出中选择其中一个进行输出的选择装置、以及
对表示上述选择装置选择何者的识别信号进行编码的识别信号编码装置,
并将上述图象编码装置的输出及上述识别信号编码装置输出变成编码信号。
66.如权利要求65中所述的图象编码装置,其特征在于选择装置将第1图象编码装置产生的编码误差和第2图象编码装置产生的编码误差进行比较工并选择误差小的编码方法。
67.一种图象译码码装置,其特征在于具有以编码信号作为输入对上述编码信号进行译码的图象译码装置、
利用上述编码信号对识别信息进行译码的识别信号译码装置、
将上述编码信号进行译码的第1图象译码装置、
将上述第1图象译码装置输出由m(m为2以上的整数)值变换为多值的逆m值化装置、
将上述编码信号进行译码的第2图象译码装置、
从上述逆m值化装置输出或第2图象译码装置输出中根据上述识别信号选择其中一个进行输出的选择装置、以及
将上述选择装置输出的图块合并成为图象信号的逆图块化装置,
并将上述逆图块化装置输出变为译码图象信号。
68.一种图象编码方法,其特征在于具有将图象信号作为输入并将上述输入信号变换为m(m为2以上的整数)值的步骤、
需要时参照已译码的图象信号对上述经过变换的m值进行编码及译码的步骤、
将上述经过译码的m值变换为多值信号的步骤、
根据外部指示将上述经过变换的多值信号按原样变成译码信号或者按确定的规则变换为译码图象信号的步骤、以及
将外部的指示和将上述m值编码的信号变成编码信号的步骤。
69.一种图象译码方法,其特征在于是以编码信号作为输入对上述编码信号进行译码的图象译码方法、
利用上述编码信号参照识别信息并在需要时参照已译码的图象信号对m值化的信号进行译码、将上述经过译码的m变换为多值信号、根据上述经过译码的识别信息将上述经过变换的多值信号按原样译码或者按确定的规则经过变换成为译码图象信号。
70.一种图象编码方法,其特征在于具有以图象信号作为输入对上述输入信号进行m(m为2以上的整数)遍分割的步骤、
需要时参照已译码的图象信号对上述经过分割的信号进行编码及译码的步骤、
根据外部指示将上述经过译码的各信号按确定的规则变换进行滤波处理的步骤、
将上述经过滤波处理的各信号合成为译码图象信号的步骤、以及
将外部指示和上述经过分割的各信号进行了编码的信号进行编码的步骤。
71.一种图象译码方法,其特征在于是以编码信号作为输入对上述编码信号进行译码的图象译码方法、
利用上述编码信号参照识别信息在需要时参照已译码的图象信号对分割为m(m为2以上的整数)种的信号进行译码、根据上述经过译码的识别信息对上述经过译码的各信号按确定的规则进行变换滤波处理以及将经过上述滤波处理的各信号合成为译码图象信号。
72.一种图象编码方法,其特征在于具有以图象信号作为输入、对上述输入信号进行m(m为2以上的整数)遍分割的步骤、
需要时参照已译码的图象信号对上述经过分割的信号进行编码及译码的步骤、
对上述经过译码的各信号进行合成、根据外部的指示将上述经过合成的信号按确定的规则变换进行滤波处理使之成为译码图象信号的步骤、以及
将对外部指示和对上述经过分割的各信号进行了编码的信号变成编码信号的步骤。
73.一种图象译码方法,其特征在于是以编码信号作为输入对上述编码信号进行译码的图象译码方法、
利用上述编码信号参照识别信息并在需要时参照已译码的图象信号对分割为m(m为2以上的整数)种的信号进行译码、将上述经过译码的各信号进行合成、根据外部的指示将上述经过合成的信号按确定的规则变换进行滤波处理使之成为译码图象信号。
74.一种图象编码方法,其特征在于具有以图象信号作为输入并对上述输入信号分割成由确定的象素数构成的图块的步骤、
参照已译码的图象信号对上述分割后的图块每一个进行象素二次抽样而进行编码及译码的步骤、
参照已译码的图象信号对上述图象译码的结果就每个图块进行象素插值、将上述经过象素插值的各图块合并成为译码图象信号的步骤、以及
将对上述象素进行二次抽样而编码的信号变成编码信号的步骤。
75.一种图象译码方法,其特征在于具有以编码信号作为输入、对上述编码信号进行译码的图象译码方法、
将上述编码信号译码、参照已译码的图象信号对上述译码后的结果就由确定象素数构成的图块每一个进行象素插值、将上述经过象素插值的各图块合并成为译码图象信号。
76.一种图象编码方法,其特征在于具有以图象信号作为输入、对上述输入信号分割成为由确定象素数构成的图块的步骤、
根据外部的指示对上述分割后的图块进行m(m为2以上的整数)值化采用第1种编码方式进行编码或者对上述分割后的图块按原样采用第2种方式进行编码的编码步骤、以及
将对外部指示和对上述经过分割的各图块进行了编码的信号变成编码信号的步骤。
77.一种图象译码方法,其特征在于是以编码信号作为输入对上述编码信号进行译码的图象译码方法、
利用上述编码信号对识别信息进行译码、根据上述已译码的识别信息对上述编码信号采用第1种译码进行译码而进行由m(m为2以上的整数)值变换为多值的逆m值化或者对上述编码信号采用第2种译码方式进行译码、将上述逆m值化的结果或利用上述第2种译码方式译码的结果合并而成为译码图象信号。
78.一种计算机记录媒体,权利要求1、4、7、10、13、17、31、33、35、36、41、42、43、45、49、52、53、54、58、61、63、65、或67至77任何一项中至少实现一个的程序记录用的媒体。
CN97105462.2A 1996-06-06 1997-06-06 图象编码译码法、编码译码装置及记录该方法的记录媒体 Pending CN1171018A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP144034/96 1996-06-06
JP14403496A JPH09326024A (ja) 1996-06-06 1996-06-06 画像符号及び復号化方法とその装置
JP22487796A JPH1070719A (ja) 1996-08-27 1996-08-27 画像符号化装置、画像復号化装置、画像符号化手法、画像復号化手法および記録媒体
JP224877/96 1996-08-27

Publications (1)

Publication Number Publication Date
CN1171018A true CN1171018A (zh) 1998-01-21

Family

ID=26475581

Family Applications (1)

Application Number Title Priority Date Filing Date
CN97105462.2A Pending CN1171018A (zh) 1996-06-06 1997-06-06 图象编码译码法、编码译码装置及记录该方法的记录媒体

Country Status (4)

Country Link
US (1) US20010012405A1 (zh)
EP (1) EP0817121A3 (zh)
KR (1) KR19980018127A (zh)
CN (1) CN1171018A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7013051B2 (en) 1999-01-29 2006-03-14 Mitsubishi Denki Kabushiki Kaisha Method of image feature coding and method of image search
CN1295652C (zh) * 2002-08-20 2007-01-17 宏正自动科技股份有限公司 图像资料编码方法
WO2017101347A1 (zh) * 2015-12-18 2017-06-22 乐视控股(北京)有限公司 动画视频识别与编码方法及装置

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3172498B2 (ja) * 1998-10-02 2001-06-04 インターナショナル・ビジネス・マシーンズ・コーポレ−ション イメージ認識用特徴値抽出方法、およびその装置、イメージ解析プログラムを格納する記憶媒体
MXPA03003512A (es) * 2001-08-31 2003-10-07 Matsushita Electric Ind Co Ltd Metodo de codificacion de imagenes, metodo de decodificacion de imagenes y aparatos de los mismos.
DE10327576A1 (de) * 2003-06-18 2005-01-13 Micronas Gmbh Verfahren und Vorrichtung zur bewegungsvektorgestützten Bildpunktinterpolation
US7634148B2 (en) * 2005-01-07 2009-12-15 Ntt Docomo, Inc. Image signal transforming and inverse-transforming method and computer program product with pre-encoding filtering features
JP5524762B2 (ja) * 2010-08-12 2014-06-18 日本電信電話株式会社 映像符号化方法,映像復号方法,映像符号化装置,映像復号装置およびそれらのプログラム
US20140056347A1 (en) 2012-08-23 2014-02-27 Microsoft Corporation Non-Transform Coding
CN113405461B (zh) * 2021-04-23 2023-03-21 封泽希 用于深度检测的结构光编码、解码方法及编码、解码装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000511363A (ja) * 1994-07-14 2000-08-29 ジョンソン、グレイス、カンパニー 画像を圧縮するための方法及び装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7013051B2 (en) 1999-01-29 2006-03-14 Mitsubishi Denki Kabushiki Kaisha Method of image feature coding and method of image search
US7302117B2 (en) 1999-01-29 2007-11-27 Mitsubishi Denki Kabushiki Kaisha Method of image feature coding and method of image search
CN1295652C (zh) * 2002-08-20 2007-01-17 宏正自动科技股份有限公司 图像资料编码方法
WO2017101347A1 (zh) * 2015-12-18 2017-06-22 乐视控股(北京)有限公司 动画视频识别与编码方法及装置

Also Published As

Publication number Publication date
EP0817121A2 (en) 1998-01-07
EP0817121A3 (en) 1999-12-22
KR19980018127A (ko) 1998-06-05
US20010012405A1 (en) 2001-08-09

Similar Documents

Publication Publication Date Title
CN1202650C (zh) 图象处理方法
CN1221927C (zh) 图像处理装置和方法
CN1207897C (zh) 图象处理方法和设备
CN1238798C (zh) 在运动估计或补偿期间使用近似双立方过滤器的方法和系统
CN1114887C (zh) 图像合成方法和图像合成装置
CN1288914C (zh) 图象编码与解码方法以及对应的装置和应用
CN1258907C (zh) 图像处理设备、图像处理方法
CN1535024A (zh) 视频编码设备、方法和程序及视频解码设备、方法和程序
CN101039422A (zh) 图像编码装置、图像解码装置及它们的控制方法
CN1993976A (zh) 利用熵编码的彩色图像数据的无损压缩
CN1744657A (zh) 多分辨率分割和填充
CN1612614A (zh) 帧内预测编码方法
CN1685369A (zh) 视频编码的低复杂性和统一标准的变换
CN1456999A (zh) 色度运动矢量取整
CN1806447A (zh) 图像编码装置、图像解码装置、图像编码方法、图像解码方法、图像编码程序、图像解码程序、记录图像编码程序的记录媒体、记录图像解码程序的记录媒体
CN1428742A (zh) 用于编码和解码关键字数据的装置和方法
CN1211373A (zh) 数字图像编码方法和数字图像编码装置、数字图像解码方法和数字图像解码装置、以及数据存储媒体
CN1362838A (zh) 图象编码解码方法和图象编码解码装置
CN101060629A (zh) 图像压缩/解压方法及图像编/解码器和解码电路
CN1604647A (zh) 给数字视频加水印的方案
CN1299560A (zh) 图像编码方法、图像编码译码方法、图像编码装置或图像记录再生装置
CN1453725A (zh) 用于多阶段插值的取整控制
CN1335581A (zh) 图像处理装置、图像处理方法和程序及其记录介质
CN1843039A (zh) 用于使用描述性模型参数来编码并解码增强层数据的系统和方法
CN1171018A (zh) 图象编码译码法、编码译码装置及记录该方法的记录媒体

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication