CN102369730B - 动态图像编码装置、动态图像解码装置、动态图像编码方法及动态图像解码方法 - Google Patents

动态图像编码装置、动态图像解码装置、动态图像编码方法及动态图像解码方法 Download PDF

Info

Publication number
CN102369730B
CN102369730B CN200980157830.2A CN200980157830A CN102369730B CN 102369730 B CN102369730 B CN 102369730B CN 200980157830 A CN200980157830 A CN 200980157830A CN 102369730 B CN102369730 B CN 102369730B
Authority
CN
China
Prior art keywords
mentioned
reference image
image
picture
internal reference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN200980157830.2A
Other languages
English (en)
Other versions
CN102369730A (zh
Inventor
望月诚二
木村淳一
江浜真和
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Renesas Electronics Corp
Original Assignee
Renesas Electronics Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Renesas Electronics Corp filed Critical Renesas Electronics Corp
Priority to CN201410076413.8A priority Critical patent/CN103888780B/zh
Publication of CN102369730A publication Critical patent/CN102369730A/zh
Application granted granted Critical
Publication of CN102369730B publication Critical patent/CN102369730B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/563—Motion estimation with padding, i.e. with filling of non-object values in an arbitrarily shaped picture block or region for estimation purposes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明的压缩动态图像编码装置，其利用来自帧存储器(10)的参照图像检索与影像输入信号的图像区域最类似的图像区域，生成运动矢量。根据运动矢量和来自帧存储器的参照图像，生成运动补偿后的参照图像。通过将运动补偿后的参照图像与影像输入信号相减，生成预测残差。通过将对预测残差进行正交变换处理、量化处理、逆量化处理、逆正交变换处理的结果与运动补偿后的参照图像相加，生成保存于存储器的参照图像。通过对预测残差进行正交变换处理、量化处理、可变长度编码处理，生成编码影像输出信号。参照图像包括影像显示画面内侧的画面内参照图像(A、B、C)和影像显示画面外侧的画面外参照图像(D)，画面外参照图像(D)基于画面内参照图像(A、B、C)的类似的多个参照图像(A、B)的位置关系而生成。

Description

动态图像编码装置、动态图像解码装置、动态图像编码方法及动态图像解码方法
技术领域
本发明涉及压缩动态图像编码装置、压缩动态图像解码装置、压缩动态图像编码方法及压缩动态图像解码方法，尤其涉及在可用压缩动态图像编码处理或压缩动态图像解码处理进行来自画面外部的周边区域的运动补偿时，有效提高扩大参照图像的精度的技术。
背景技术
在MPEG-2、MPEG-4、H.263、H.264等国际标准动态图像编码方法中，为了使用时间方向的关联来实现高编码效率，而使用帧间预测编码。帧的编码模式包括：不使用帧间的关联地进行编码的I帧、根据过去编码的1帧预测的P帧、能够根据过去编码的2帧预测的B帧。I帧称为帧内独立帧，P帧称为单向预测帧，B帧称为双向预测帧。
该帧间预测编码中，从动态图像减去运动补偿后的参照图像(预测图像)，对该减法得出的预测残差进行编码。编码处理包括DCT(离散余弦变换)等正交变换、量化和可变长度编码的处理。运动补偿(动作校正)包括使帧间预测的参照帧空间移动的处理，运动补偿的处理是按被编码帧的模块单位进行的。在图像内容没有动作时，使用与没有移动的被预测像素同一位置的像素。在有动作时，检索最合适的模块，将移动量作为运动矢量。运动补偿的模块在MPEG-2的编码方法中是16像素×16像素/16像素×8像素的模块，在H.263的编码方法中是16像素×16像素/8像素×8像素的模块，在MPEG-4的编码方法中是16像素×16像素/16像素×8像素/8像素×8像素的模块，在H.264的编码方法中是16像素×16像素/16像素×8像素/8像素×16像素/8像素×8像素/8像素×4像素/4像素×8像素/4像素×4像素的模块。
MPEG-2的编码方法中，不允许运动矢量从画面内脱离，因此存在实际动作来自画面外部时不能进行准确运动补偿这样的缺点。对此，在MPEG-4、H.263、H.264的编码方法中，采用可进行来自画面外部的周边区域的运动补偿的非限制运动矢量。非限制运动矢量称为UnrestrictedMotionVector。
另外，下述专利文献1中记载了如下内容：为了使预测像素的模块或运动补偿像素的模块的一部分能够检测表示参照图像外部的运动矢量，在输出针对运动矢量的运动补偿像素的参照图像输出机构设置预测参照图像的周边像素的周边像素预测机构。
下述专利文献1中还记载了将作为参照图像的周边图像的扩大参照图像取为参照图像的所有像素值的平均值或最接近的参照图像的像素值。
专利文献1：日本特开平6-351001号公报
发明内容
本发明人在本发明之前对下一代的国际标准动态图像编码方式进行了研究开发。
图1是表示在本发明之前由本发明人研究出的基于国际标准动态图像编码方式研究的压缩动态图像编码装置(编码器)的结构的图。
图1所示的压缩动态图像编码装置(编码器)1000包括减法器1、正交变换器2、量化器3、编码器4、逆量化器5、逆正交变换器6、加法器7、运动补偿器8、运动矢量检索器9、帧存储器10。
减法器1的一个输入端子与运动矢量检索器9的输入端子被供给应编码的影像输入信号。运动矢量检索器9执行动作推定(ME：MotionEstimation)，因此从其输出端子生成运动矢量，该运动矢量被供给至执行运动补偿(MC：MotionCompensation)的运动补偿器8和执行可变长度编码(VLC：VariableLengthCoding)的信号处理的编码器4。运动补偿器8的输出信号被供给至减法器1的另一输入端子和加法器7的一个输入端子。减法器1的输出信号被供给至执行正交余弦变换(DCT：DiscreteCosineTransform)等正交变换的正交变换器2的输入端子，正交变换器2的输出信号被供给至执行量化处理的量化器3的输入端子。量化器3的输出信号被供给至编码器4的输入端子，而经由执行逆量化处理的逆量化器5和执行正交余弦变换(IDCT：InverseDiscreteCosineTransform)等的逆正交变换的逆正交变换器6被供给至加法器7的另一输入端子。从编码器4的输出端子生成作为编码影像输出信号的MPEG的视频流，而从加法器7的输出生成参照图像(局部解码图像)并保存于帧存储器10。从帧存储器10读出的参照图像被供给至运动补偿器8和运动矢量检索器9，在运动矢量检索器9利用参照图像检索最适合作为应编码的影像输入信号模块的模块，将移动量作为运动矢量而输出。运动补偿器8根据运动矢量和从帧存储器10读出的参照图像生成运动补偿后的参照图像(预测图像)并供给至减法器1的另一输入端子，因此生成基于减法器1中影像输入信号与参照图像(预测图像)相减而得的预测残差。预测误差用于通过接受正交变换器2的正交变换、量化器3的量化、编码器4的可变长度编码这些编码处理，而从编码器4的输出端子生成作为编码影像输出信号的MPEG视频流。
上述编码处理是按每一影像画面(帧或场)进行的，将画面细分而成的模块(通常为16像素×16像素，MPEG中称为“微模块”)成为处理单位。即，对每一应编码的模块从已经编码的参照图像选择最类似的模块(预测图像)，将编码图像(模块)与预测图像的差分信号编码(正交变换、量化等)。被编码模块与预测信号在画面内的相对位置之差被称为运动矢量。
如先前说明的那样，MPEG-2的编码方法中不允许运动矢量从画面内脱离，因此在实际运动来自画面外部时，存在不能进行准确的运动补偿这样的缺点。因此在MPEG-4的编码方法中，采用可进行来自画面外部的周边区域的运动补偿的非限制运动矢量(UMV：UnrestrictedMotionVector)。
图2是说明为了实现MPEG-4的编码方法所采用的非限制运动矢量(UMV)，将上述专利文献1记载的参照图像的周边图像即扩大参照图像作为最接近的参照图像的像素值时的扩大参照图像的图。
在图2中，边界线20是表示画面内与画面外的边界的线，边界线20内侧的画面内存在对象物(对象)的参照图像21，边界线20外侧的画面外存在根据对象物(对象)的最接近参照图像的像素值生成的扩大参照图像22。
但是，由本发明人研究得知，在图2所示的在本发明之前由本发明人研究的扩大参照图像的生成方法中存在下述问题。
由图2所示的方法生成的画面外的图像即大参照图像22由于未考虑画面内的对象物(对象)的参照图像21的配置方向，因此画面外的扩大参照图像22的形状与实际形状多有很大不同。结果，可知产生(1)扩大参照图像的部分的差分信号变大这样的问题。还可知产生(2)不能选择扩大参照图像的像素，差分信号的功率增加、编码效率降低，应编码的模块的运动矢量的大小/方向与周围的模块的运动矢量不同，运动矢量的编码量增大这样的问题。这些问题带来的后果是，由图1所示的压缩动态图像编码装置(编码器)1000生成的编码影像输出信号的信息量显著增大。最终，在一定的信息编码量下再现画质发生恶化，而为了维持一定的再现画质，MPEG视频流的信息量增大。
如此，本发明是基于在本发明之前本发明人的研究而做出的。
因此，本发明的目的在于在可用压缩动态图像编码处理或压缩动态图像解码处理进行来自画面外部的周边区域的运动补偿时，提高扩大参照图像的精度。
本发明的另一目的在于减轻再现画质的劣化，并减轻用于维持一定再现画质的MPEG视频流的信息量的增大。
本发明的上述及其他目的和新特征，将通过本说明书的记载和附图而得以清楚。
简要说明本申请公开的发明中代表性的技术方案如下。
即，本发明的代表性实施方式是一种压缩动态图像编码装置(1000)，通过利用从帧存储器(10)读出的参照图像检索与应编码的影像输入信号的图像区域最类似的图像区域，生成运动矢量。
根据上述运动矢量和从上述帧存储器(10)读出的上述参照图像，生成作为预测图像的运动补偿后的参照图像。
通过将上述运动补偿后的参照图像与上述应编码的影像输入信号相减，生成预测残差。
通过将对上述预测残差进行正交变换处理、量化处理、逆量化处理、逆正交变换处理的结果与上述运动补偿后的参照图像相加，生成保存于上述帧存储器(10)的上述参照图像。
通过对上述预测残差进行上述正交变换处理、上述量化处理、可变长度编码处理，生成编码影像输出信号(参照图3)。
上述参照图像包括影像显示画面内侧的画面内参照图像(A、B、C)和上述影像显示画面外侧的画面外参照图像(D)，上述画面外参照图像(D)基于上述画面内参照图像(A、B、C)的类似的多个参照图像(A、B)的位置关系而生成(参照图5)。
简要说明本申请公开的发明中的代表性技术方案所得到的效果如下。
即，在可用压缩动态图像编码处理或压缩动态图像解码处理进行来自画面外部的周边区域的运动补偿时，能够提高扩大参照图像的精度。
附图说明
图1是表示在本发明之前由本发明人研究出的基于国际标准动态图像编码方式研究的压缩动态图像编码装置(编码器)的结构的图。
图2是说明为了实现MPEG-4的编码方法所采用的非限制运动矢量(UMV)，专利文献1记载的将参照图像的周边图像即扩大参照图像作为最接近的参照图像的像素值时的扩大参照图像的图。
图3是表示本发明实施方式1的压缩动态图像编码装置(编码器)的结构的图。
图4是表示图3所示的本发明实施方式1的压缩动态图像编码装置(编码器)上附加的参照图像画面扩大单元11的结构的图。
图5是说明为了实现MPEG-4的编码方法所采用的非限制运动矢量(UMV)，在附加了图4所示的参照图像画面扩大单元11的图3所示的本发明实施方式1的压缩动态图像编码装置中生成参照图像的周边图像的扩大参照图像的方法的图。
图6是说明由图5所示的本发明实施方式1的扩大参照图像的生成方法生成画面内和画面外的对象物(对象)的参照图像的情形的图。
图7是表示对由图3所示的本发明的实施方式1的压缩动态图像编码装置(编码器)生成的编码影像输出信号即MPEG视频流进行解码的本发明实施方式2的压缩动态图像解码装置(解码器)的结构的图。
图8是表示对由图3所示的本发明实施方式1的压缩动态图像编码装置(编码器)生成的编码影像输出信号即MPEG视频流进行解码的本发明实施方式3的压缩动态图像解码装置(解码器)的其他结构的图。
图9是说明为了实现MPEG-4的编码方法所采用的非限制运动矢量(UMV)，在附加了参照图像画面扩大单元11的图3所示的本发明实施方式1的压缩动态图像编码装置中生成参照图像的周边图像的扩大参照图像的其他方法的图。
附图标记的说明
1000...压缩动态图像编码装置(编码器)
1...减法器
2...正交变换器
3...量化器
4...编码器
5...逆量化器
6...逆正交变换器
7...加法器
8...运动补偿器
9...运动矢量检索器
10...帧存储器
11...参照图像画面扩大单元
111...类似度计算单元
112...最类似像素检索单元
113...参照画面外像素生成单元
50...参照画面内与画面外的边界
A、B、C...边界线50的内侧的参照图像
D...边界线50的外侧的扩大参照图像
w...扩大参照画的宽度
60...参照画面内与画面外的边界
61...边界线的内侧的对象物(对象)的参照图像
62...边界线的外侧的扩大参照图像
70...压缩动态图像解码装置(解码器)
71...解码器
72...逆量化器
73...逆正交变换器
74...运动补偿器
75...加法器
76...帧存储器
77...参照图像画面扩大单元
80...压缩动态图像解码装置(解码器)
81...解码器
82...逆量化器
83...逆正交变换器
84...运动补偿器
85...加法器
96...帧存储器86
L0...参照画面内与画面外的边界
L1，L2，L3...延长直线
90...位于边界线L0外侧的扩大参照图像
91～99...参照画面内的内侧的画面内的许多参照图像
具体实施方式
1.实施方式的概要
首先，说明本申请公开的发明的代表性实施方式的概要。在代表性实施方式的概要说明中标注括号而参照的图中附图标记不过是例示包含于该附图标记所示的结构要素的概念中。
〔1〕本发明的代表性实施方式是一种压缩动态图像编码装置(1000)，利用从帧存储器(10)读出的参照图像检索与应编码的影像输入信号的图像区域最类似的图像区域，从而生成运动矢量。
根据上述运动矢量和从上述帧存储器(10)读出的上述参照图像，生成作为预测图像的运动补偿后的参照图像。
通过将上述运动补偿后的参照图像与上述应编码的影像输入信号相减，生成预测残差。
通过将对上述预测残差进行正交变换处理、量化处理、逆量化处理、逆正交变换处理的结果与上述运动补偿后的参照图像相加，生成保存于上述帧存储器(10)的上述参照图像。
通过对上述预测残差进行上述正交变换处理、上述量化处理、可变长度编码处理，生成编码影像输出信号(参照图3)。
上述参照图像包括影像显示画面内侧的画面内参照图像(A、B、C)和上述影像显示画面外侧的画面外参照图像(D)，上述画面外参照图像(D)基于上述画面内参照图像(A、B、C)的类似的多个参照图像(A、B)的位置关系而生成(参照图5)。
根据上述实施方式，由于画面外参照图像(D)是基于画面内参照图像(A、B、C)的类似的多个参照图像(A、B)的位置关系而生成，因此在可用压缩动态图像编码处理进行来自画面外部的周边区域的运动补偿时，能够提高扩大参照图像的精度。
优选的实施方式中，上述画面内参照图像(A、B、C)的类似的上述多个参照图像(A、B)的一个参照图像(A)接近上述画面内参照图像与上述画面外参照图像的边界线(50)，
上述多个参照图像(A、B)的另一参照图像(B)比上述一个参照图像(A)远离上述边界线(50)地位于上述画面内参照图像的内部，
上述画面外参照图像(D)隔着上述边界线(50)与上述一个参照图像(A)临近，
在上述一个参照图像(A)与上述画面外参照图像(D)的位置关系为大致相同的位置关系下，上述画面内参照图像(A、B、C)的其他参照图像(C)与上述另一参照图像(B)接近，
基于上述其他参照图像的图像信息(C)，生成上述画面外参照图像(D)的图像信息(参照图5)。
其他优选的实施方式中，上述画面内参照图像包括多个起点的参照图像(91、92、93)。
在上述画面外参照图像(90)与上述多个起点的参照图像(91、92、93)之间存在多条延长直线(L1、L2、L3)。
计算上述多条延长直线(L1、L2、L3)的各延长直线上的参照图像(91、96、97；92、94、98；93、95、99)的多个类似度，选择上述多个类似度中最高类似度的延长直线(L2)。
基于具有上述最高类似度的上述延长直线(L2)的上述参照图像(92、94、98)的图像信息，生成上述画面外参照图像(90)的图像信息(参照图9)。
其他优选的实施方式中，基于具有上述最高类似度的上述延长直线(L2)的上述参照图像(92、94、98)的上述图像信息的统计处理结果，生成上述画面外参照图像(90)的图像信息(参照图9)。
具体的实施方式是，将表示在上述画面内参照图像的上方、下方、左方、右方的各方向是否生成上述画面外参照图像的信息附加于上述编码影像输出信号。
〔2〕另一方案的实施方式是一种压缩动态图像解码装置(70)，利用编码影像输入信号的解码处理提取运动矢量。
根据上述运动矢量和从上述帧存储器(76、86)读出的上述参照图像，生成作为预测图像的运动补偿后的参照图像。
通过将对上述编码影像输入信号进行上述解码处理、逆量化处理和逆正交变换处理的结果与上述运动补偿后的参照图像相加，生成保存于上述帧存储器(76、86)的上述参照图像。
从上述帧存储器(76、86)生成解码影像输出信号(参照图7、图8)。
上述参照图像包括影像显示画面内侧的画面内参照图像(A、B、C)和上述影像显示画面外侧的画面外参照图像(D)，上述画面外参照图像(D)基于上述画面内参照图像(A、B、C)的类似的多个参照图像(A、B)的位置关系而生成(参照图5)。
根据上述实施方式，由于画面外参照图像(D)是基于画面内参照图像(A、B、C)的类似的多个参照图像(A、B)的位置关系而生成，因此在可用压缩动态图像解码处理进行来自画面外部的周边区域的运动补偿时，能够提高扩大参照图像的精度。
优选的实施方式中，上述画面内参照图像(A、B、C)的类似的上述多个参照图像(A、B)的一个参照图像(A)接近上述画面内参照图像与上述画面外参照图像的边界线(50)，
上述多个参照图像(A、B)的另一参照图像(B)比上述一个参照图像(A)远离上述边界线(50)地位于上述画面内参照图像的内部，
上述画面外参照图像(D)隔着上述边界线(50)与上述一个参照图像(A)临近，
在上述一个参照图像(A)与上述画面外参照图像(D)的位置关系为大致相同的位置关系下，上述画面内参照图像(A、B、C)的其他参照图像(C)与上述另一参照图像(B)接近，
基于上述其他参照图像的图像信息(C)，生成上述画面外参照图像(D)的图像信息(参照图5)。
其他优选的实施方式中，上述画面内参照图像包括多个起点的参照图像(91、92、93)。
在上述画面外参照图像(90)与上述多个起点的参照图像(91、92、93)之间存在多条延长直线(L1、L2、L3)。
计算上述多条延长直线(L1、L2、L3)的各延长直线上的参照图像(91、96、97；92、94、98；93、95、99)的多个类似度，选择上述多个类似度中最高类似度的延长直线(L2)。
基于具有上述最高类似度的上述延长直线(L2)的上述参照图像(92、94、98)的图像信息，生成上述画面外参照图像(90)的图像信息(参照图9)。
其他优选的实施方式中，基于具有上述最高类似度的上述延长直线(L2)的上述参照图像(92、94、98)的上述图像信息的统计处理结果，生成上述画面外参照图像(90)的图像信息(参照图9)
具体的实施方式是从上述编码影像输入信号提取表示在上述画面内参照图像的上方、下方、左方、右方的各方向是否生成上述画面外参照图像的信息。
省略关于上述信息中表示否的方向的上述画面外参照图像的生成。
2.实施方式的详细内容
进一步详细说明本发明的实施方式。在用于说明实施例的所有附图中，对同样构件标注相同附图标记，省略其重复说明。
[实施方式1]
《压缩动态图像编码装置的结构》
图3是表示本发明的实施方式1的压缩动态图像编码装置(编码器)的结构的图。
图3所示的本发明的实施方式1的压缩动态图像编码装置(编码器)1000与图1所示的压缩动态图像编码装置同样，包括减法器1、正交变换器2、量化器3、编码器4、逆量化器5、逆正交变换器6、加法器7、运动补偿器8、运动矢量检索器9、帧存储器10。
而且，图3的本发明的实施方式1的压缩动态图像编码装置1000中，在帧存储器10附加连接有图1的压缩动态图像编码装置未包含的参照图像画面扩大单元11。
《参照图像画面扩大单元的结构》
图4是表示图3所示的本发明的实施方式1的压缩动态图像编码装置(编码器)1000上附加的参照图像画面扩大单元11的结构的图。
图4所示的参照图像画面扩大单元11包括类似度计算单元111、最类似像素检索单元112、参照画面外像素生成单元113。
从帧存储器10将画面内像素值供给至参照图像画面扩大单元11的类似度计算单元111，从类似度计算单元111将差分信息供给至最类似像素检索单元112，从最类似像素检索单元112将类似位置信息供给至参照画面外像素生成单元113。从帧存储器10将画面内像素值供给至参照画面外像素生成单元113，从参照画面外像素生成单元113将画面外像素值供给至帧存储器10。
《扩大参照图像的生成方法》
图5是说明为了实现MPEG-4的编码方法所采用的非限制运动矢量(UMV)，在附加有图4所示的参照图像画面扩大单元11的图3所示的本发明的实施方式1的压缩动态图像编码装置中生成参照图像的周边图像的扩大参照图像的方法的图。
图5中边界线50是显示画面内与画面外的边界的线。在边界线50内侧的画面内存在许多参照图像A、B、C...，为了实现MPEG-4的编码方法所采用的非限制运动矢量(UMV)，需要在边界线50的外侧生成扩大参照图像D。
例如，在接近边界线50的画面内的参照图像A临近处，在边界线50的外侧生成扩大参照图像D时，首先检索边界线50内侧的许多参照图像来选择与接近边界线50的画面内的参照图像A最类似的画面内的参照图像B。结果，根据边界线画面内参照图像A和最类似画面内参照图像B的位置关系决定移动量和移动方向，生成矢量V。
接着，在边界线画面内参照图像A与外侧扩大参照图像D的位置关系为大致同一位置关系下，将与最类似画面内参照图像B临近的画面内参照图像C复制而拼接到外侧扩大参照图像D的位置，从而生成扩大参照图像D。
以下同样地，对纵向的边界线50的多个边界线画面内参照图像反复进行与上述同样的处理，从而以所需的横向宽度w生成扩大参照图像。通过对横向的边界线50的多个边界线画面内参照图像反复进行同样的处理，从而能够以所需的纵向宽度生成扩大参照图像。
图6是说明由图5所示的本发明的实施方式1的扩大参照图像的生成方法生成画面内和画面外的对象物(对象)的参照图像的情形的图。
在图6中，边界线60是显示画面内和画面外的边界的线，在边界线60内侧的画面内存在对象物(对象)的参照图像61，而在边界线60外侧的画面外存在扩大参照图像62。
根据图6所示的本发明的实施方式1的扩大参照图像的生成方法，在作为画面外图像的扩大参照图像62考虑了画面内对象物(对象)的参照图像61的配置方向(矢量V)，因此画面外的扩大参照图像22的形状与实际形状高精度一致。结果，可得到如下效果：(1)扩大参照图像的部分的差分信号变小；(2)能够选择扩大参照图像的像素，差分信号的功率减少、编码效率提高，而应编码模块的运动矢量的大小方向与周围模块的运动矢量相同，运动矢量的编码量变小。
[实施方式2]
《压缩动态图像解码装置的结构》
图7是表示对由图3所示的本发明的实施方式1的压缩动态图像编码装置(编码器)生成的编码影像输出信号即MPEG视频流进行解码的本发明的实施方式2的压缩动态图像解码装置(解码器)的结构的图。
图7所示的压缩动态图像解码装置(解码器)70包括解码器71、逆量化器72、逆正交变换器73、运动补偿器74、加法器75、帧存储器76、参照图像画面扩大单元77。
向执行可变长度解码(VLD：VariableLengthDecoding)信号处理的解码器71供给作为编码影像输出信号的MPEG视频流，解码器71的输出信号仅由执行逆量化处理的逆量化器72和执行逆正交余弦变换(IDCT)等逆正交变换的逆正交变换器73而被供给至加法器75的一个输入端子。从解码器71的输出端子生成运动矢量，该运动矢量被供给至运动补偿器74。运动补偿器74根据运动矢量和从帧存储器76读出的参照图像生成运动补偿后的参照图像(预测图像)，并供给至加法器75的另一输入端子。因此，在加法器75执行逆正交变换器73的逆正交变换输出与预测图像的加法，从帧存储器76生成解码影像信号。
在图3所示的本发明的实施方式1的压缩动态图像编码装置中，使用图4的参照图像画面扩大单元11，如图5和图6所示那样，为了实现MPEG-4的编码方法所采用的非限制运动矢量(UMV)，生成扩大参照图像。
在图7所示的本发明的实施方式2的压缩动态图像解码装置中，由使用图4的参照图像画面扩大单元11的图3的压缩动态图像编码装置生成扩大参照图像，为了对利用该扩大参照图像的采用非限制运动矢量(UMV)的MPEG视频流进行解码而附加参照图像画面扩大单元77。即，图7的压缩动态图像解码装置中，按照在解码处理时所供给的采用非限制运动矢量(UMV)的MPEG视频流而使用参照图像画面扩大单元77由画面内参照图像生成画面外扩大参照图像。利用该画面外的扩大参照图像来执行采用可进行来自画面外部的周边区域的运动补偿的非限制运动矢量(UMV：UnrestrictedMotionVector)的MPEG-4的编码视频流的压缩动态图像解码处理。
另外，进行与上述相同的参照图像画面扩大方法的图7的压缩动态图像解码装置用于对视频流准确解码。这是由于若编码装置和解码装置不能总是保持同一参照画面，则无法解码准确的图像。因此，图7的压缩动态图像解码装置的参照图像画面扩大单元77利用与图5、图6所示的压缩动态图像编码装置的参照图像画面扩大单元相同的方法，可在进行压缩动态图像解码处理时由画面内参照图像生成画面外的扩大参照图像。在参照图像画面扩大单元77利用与后述的图9所示的方法相同的方法，由画面内参照图像生成画面外的扩大参照图像时，压缩动态图像编码装置、压缩动态图像解码装置这二者必须使用图9所示的方法。也可以并用图5、图6所示的方法和图9所示的方法，或并用包括以往的MPEG-4等的图像扩大的两种或三种方法。在该并用时，在对视频流内的各帧编码时，需要表示是由哪一方法进行画面扩大处理，在解码装置中利用指定的方法对画面扩大处理后的各帧进行解码，从而能够得到准确的再生图像。
[实施方式3]
《压缩动态图像解码装置的其他的结构》
图8是表示对由图3所示的本发明实施方式1的压缩动态图像编码装置(编码器)生成的编码影像输出信号即MPEG视频流进行解码的本发明实施方式3的压缩动态图像解码装置(解码器)的其他结构的图。
图8所示的压缩动态图像解码装置(解码器)80包括解码器81、逆量化器82、逆正交变换器83、运动补偿器84、加法器85、帧存储器86。图8的压缩动态图像解码装置(解码器)80中，解码器81、逆量化器82、逆正交变换器83、加法器85、帧存储器86与图7的压缩动态图像解码装置(解码器)70所含的解码器71、逆量化器72、逆正交变换器73、加法器75、帧存储器76分别具有等效的工作功能。图8的压缩动态图像解码装置(解码器)80所含的运动补偿器84具有图7的压缩动态图像解码装置(解码器)70的运动补偿器74和参照图像画面扩大单元77这二者的工作功能。因此，在图8的压缩动态图像解码装置中，也能与图7的压缩动态图像解码装置同样，在解码处理时按照采用非限制运动矢量(UMV)的MPEG视频流使用运动补偿器84由画面内参照图像生成画面外的扩大参照图像。在图8的压缩动态图像解码装置中，也能利用该画面外的扩大参照图像，执行采用了可进行来自画面外部的周边区域的运动补偿的非限制运动矢量(UMV)的MPEG-4的编码视频流的压缩动态图像解码处理。
图8的压缩动态图像解码装置的运动补偿器84与图7所示的压缩动态图像解码装置的参照图像画面扩大单元77同样地利用与图5、图6所示的方法相同的方法，可在压缩动态图像解码处理时由画面内参照图像生成画面外的扩大参照图像。该运动补偿器84可利用与后述的图9所示的方法相同的方法由画面内参照图像生成画面外的扩大参照图像。
[实施方式4]
《扩大参照图像的其他的生成方法》
图9是说明为了实现MPEG-4的编码方法所采用的非限制运动矢量(UMV)，在附加有参照图像画面扩大单元11的图3所示的本发明的实施方式1的压缩动态图像编码装置中生成参照图像的周边图像的扩大参照图像的其他方法的图。
在图9中边界线L0是表示画面内与画面外的边界的线。边界线L0内侧的画面内存在许多参照图像91～99...，为了实现MPEG-4的编码方法采用的非限制运动矢量(UMV)，需要在边界线L0的外侧生成扩大参照图像90。
例如，由图3所示的本发明的实施方式1的压缩动态图像编码装置的参照图像画面扩大单元11计算在扩大参照图像90与画面内第1起点的参照图像91之间的直线L1上配置的画面内的多个第1参照图像91、96、97的类似度。接着，由图3的本发明实施方式1的压缩动态图像编码装置的参照图像画面扩大单元11计算在扩大参照图像90与画面内第2起点的参照图像92之间的直线L2上配置的画面内的多个第2参照图像92、94、98的类似度。同样，由图3所示的本发明的实施方式1的压缩动态图像编码装置的参照图像画面扩大单元11计算在扩大参照图像90与画面内第3起点的参照图像93之间的直线L3上配置的画面内的多个第3参照图像93、95、99的类似度。按照由该类似度计算计算出的最高类似度，决定边界线L0外侧的扩大参照图像90。
即，例如假定最高类似度的延长直线为第2直线L2，则以规定系数将配置在直线L2上的画面内多个第2参照图像92、94、98的各辉度信号和各色相信号相乘，并求出相乘而得的值的总和而将其平均化，从而能够决定边界线L0外侧的扩大参照图像90的辉度信号和色相信号。
不言而喻，由使用图9所示的周扩大参照图像的生成方法的压缩动态图像编码装置生成扩大参照图像，为了对采用利用该扩大参照图像的非限制运动矢量的MPEG·TS进行解码，可以使用如图7、图8所示的压缩动态图像解码装置(解码器)。
以上基于实施方式具体说明了由本发明人完成的发明，但不言而喻，本发明不限于此，可在不脱离其要旨的范围内进行各种变更。
[其他实施方式]
例如，图3所示的压缩动态图像编码装置1000所含的减法器1、正交变换器2、量化器3、编码器4、逆量化器5、逆正交变换器6、加法器7、运动补偿器8、运动矢量检索器9、参照图像画面扩大单元11不限于分别由专用硬件进行的信号处理。即，这些信号处理可以由利用压缩动态图像编码装置1000所含的中央处理单元(CPU)执行的软件处理置换。
图7所示的压缩动态图像解码装置(解码器)70所含的解码器71、逆量化器72、逆正交变换器73、运动补偿器74、加法器75、参照图像画面扩大单元77不限于分别由专用硬件进行的信号处理。即，这些信号处理可以由利用压缩动态图像编码装置1000所含的中央处理单元(CPU)执行的软件处理置换。
而且，在图5所示的参照图像的画面内与画面外的边界线50的外侧生成扩大参照图像D时的扩大方向不限于四边形的参照图像的所有四个边。例如，可以基于从搭载于动态图像拍摄器件的加速度传感器输出的动态图像拍摄器件的移动方向，限制扩大参照图像的生成方向。能够在动态图像拍摄器件的移动矢量的X方向和Y方向限制扩大参照图像的生成方向。即，在限制生成方向时，将在哪一方向限制扩大参照图像生成的信息、在哪一方向未限制扩大参照图像生成的信息与视频流叠加，从而能够简化对视频流解码的动态图像解码装置的解码处理。例如，关于上述的限制扩大参照图像生成的信息(限制信息)，可以是对于画面的各方向在未限制扩大参照图像生成设为“1”，在限制时设为“0”，做成按上下左右顺序排列该信号而成的4位信息。例如在4位信息为“0001”时，如用P帧(单向预测帧)摄像机向右方移动的情况那样，表示需要生成画面的右方的扩大参照图像。该限制信息可附加在编码图像的每一帧，也能以多个帧单位附加。在前者的情况下，能够与各帧单位的摄像机的动作等适应地适当设定限制方向，因此不会降低编码效率，就能限制扩大参照图像的生成。关于扩大最小图像生成受限制的方向，可以采用MPEG-4等中使用的扩大方法。
而且，在如交错图像那样上部图像和底部图像在每行不同时，应编码的影像输入信号被分割为上部和底部，在各部进行图5所示的扩大参照图像的生成。
本发明不限于采用可进行来自画面外部的周边区域的运动补偿的非限制运动矢量(UMV)的MPEG-4的编码方法及解码方法。
本发明能够广泛适用于利用使用时间方向的关联的帧间预测编码、运动矢量检测和运动补偿、扩大参照图像等的压缩动态图像编码装置、压缩动态图像解码装置、压缩动态图像编码方法及压缩动态图像解码方法。

Claims (8)

1.一种动态图像编码装置，包括：
运动矢量检索器，其利用从帧存储器读出的参照图像检索与应编码的影像输入信号的图像区域最类似的图像区域，从而生成运动矢量；
运动补偿器，其根据上述运动矢量和从上述帧存储器读出的上述参照图像，生成作为预测图像的运动补偿后的参照图像；
减法器，其通过将上述运动补偿后的参照图像与上述应编码的影像输入信号相减，生成预测残差；
加法器，其通过将对上述预测残差进行正交变换处理、量化处理、逆量化处理、逆正交变换处理的结果与上述运动补偿后的参照图像相加，生成保存于上述帧存储器的上述参照图像，
通过对上述预测残差进行上述正交变换处理、上述量化处理、可变长度编码处理，生成编码影像输出信号，
上述动态图像编码装置的特征在于，
上述参照图像包括影像显示画面内侧的画面内参照图像和上述影像显示画面外侧的画面外参照图像，
上述画面外参照图像中的画面外参照图像区域基于上述画面内参照图像中的类似的多个画面内参照图像区域的位置关系而生成，
类似的上述多个画面内参照图像区域中的一个画面内参照图像区域接近上述画面内参照图像与上述画面外参照图像的边界线，
类似的上述多个画面内参照图像区域中的另一画面内参照图像区域比上述一个画面内参照图像区域远离上述边界线地位于上述画面内参照图像的内部，
上述画面外参照图像的上述画面外参照图像区域隔着上述边界线与上述一个画面内参照图像区域临近，
上述画面内参照图像中的其他画面内参照图像区域与上述另一画面内参照图像区域的位置关系，和上述一个画面内参照图像区域与上述画面外参照图像区域的位置关系大致相同，上述画面内参照图像中的其他画面内参照图像区域与上述另一画面内参照图像区域接近，
基于上述其他画面内参照图像区域的图像信息，生成上述画面外参照图像区域的图像信息。
2.根据权利要求1所述的动态图像编码装置，其特征在于，
将表示在上述画面内参照图像的上方、下方、左方、右方的各方向是否生成上述画面外参照图像的信息附加于上述编码影像输出信号。
3.一种动态图像解码装置，包括：
解码器，其利用编码影像输入信号的解码处理提取运动矢量；
运动补偿器，其根据上述运动矢量和从帧存储器读出的参照图像，生成作为预测图像的运动补偿后的参照图像；
加法器，其通过将对上述编码影像输入信号进行上述解码处理、逆量化处理和逆正交变换处理的结果与上述运动补偿后的参照图像相加，生成保存于上述帧存储器的上述参照图像，
从上述帧存储器生成解码影像输出信号，
上述动态图像解码装置的特征在于，
上述参照图像包括影像显示画面内侧的画面内参照图像和上述影像显示画面外侧的画面外参照图像，
上述画面外参照图像中的画面外参照图像区域基于上述画面内参照图像中的类似的多个画面内参照图像区域的位置关系而生成，
类似的上述多个画面内参照图像区域中的一个画面内参照图像区域接近上述画面内参照图像与上述画面外参照图像的边界线，
类似的上述多个画面内参照图像区域中的另一画面内参照图像区域比上述一个画面内参照图像区域远离上述边界线地位于上述画面内参照图像的内部，
上述画面外参照图像的上述画面外参照图像区域隔着上述边界线与上述一个画面内参照图像区域临近，
上述画面内参照图像中的其他画面内参照图像区域与上述另一画面内参照图像区域的位置关系，和上述一个画面内参照图像区域与上述画面外参照图像区域的位置关系大致相同，上述画面内参照图像中的其他画面内参照图像区域与上述另一画面内参照图像区域接近，
基于上述其他画面内参照图像区域的图像信息，生成上述画面外参照图像区域的图像信息。
4.根据权利要求3所述的动态图像解码装置，其特征在于，
从上述编码影像输入信号提取表示在上述画面内参照图像的上方、下方、左方、右方的各方向是否生成上述画面外参照图像的信息，
省略关于上述信息中表示否的方向的上述画面外参照图像的生成。
5.一种动态图像编码方法，其特征在于，
利用从帧存储器读出的参照图像检索与应编码的影像输入信号的图像区域最类似的图像区域，从而生成运动矢量，
根据上述运动矢量和从上述帧存储器读出的上述参照图像，生成作为预测图像的运动补偿后的参照图像，
通过将上述运动补偿后的参照图像与上述应编码的影像输入信号相减，生成预测残差，
通过将对上述预测残差进行正交变换处理、量化处理、逆量化处理、逆正交变换处理的结果与上述运动补偿后的参照图像相加，生成保存于上述帧存储器的上述参照图像，
通过对上述预测残差进行上述正交变换处理、上述量化处理、可变长度编码处理，生成编码影像输出信号，其中，
上述参照图像包括影像显示画面内侧的画面内参照图像和上述影像显示画面外侧的画面外参照图像，
上述画面外参照图像中的画面外参照图像区域基于上述画面内参照图像中的类似的多个画面内参照图像区域的位置关系而生成，
类似的上述多个画面内参照图像区域中的一个画面内参照图像区域接近上述画面内参照图像与上述画面外参照图像的边界线，
类似的上述多个画面内参照图像区域中的另一画面内参照图像区域比上述一个画面内参照图像区域远离上述边界线地位于上述画面内参照图像的内部，
上述画面外参照图像中的画面外参照图像区域隔着上述边界线与上述一个画面内参照图像区域临近，
上述画面内参照图像中的其他画面内参照图像区域与上述另一画面内参照图像区域的位置关系，和上述一个画面内参照图像区域与上述画面外参照图像区域的位置关系大致相同，上述画面内参照图像中的其他画面内参照图像区域与上述另一画面内参照图像区域接近，
基于上述其他画面内参照图像区域的图像信息，生成上述画面外参照图像区域的图像信息。
6.根据权利要求5所述的动态图像编码方法，其特征在于，
将表示在上述画面内参照图像的上方、下方、左方、右方的各方向是否生成上述画面外参照图像的信息附加于上述编码影像输出信号。
7.一种动态图像解码方法，其特征在于，
利用编码影像输入信号的解码处理提取运动矢量，
根据上述运动矢量和从帧存储器读出的参照图像，生成作为预测图像的运动补偿后的参照图像，
通过将对上述编码影像输入信号进行上述解码处理、逆量化处理和逆正交变换处理的结果与上述运动补偿后的参照图像相加，生成保存于上述帧存储器的上述参照图像，
从上述帧存储器生成解码影像输出信号，其中，
上述参照图像包括影像显示画面内侧的画面内参照图像和上述影像显示画面外侧的画面外参照图像，
上述画面外参照图像中的画面外参照图像区域基于上述画面内参照图像中的类似的多个画面内参照图像区域的位置关系而生成，
类似的上述多个画面内参照图像区域中的一个画面内参照图像区域接近上述画面内参照图像与上述画面外参照图像的边界线，
类似的上述多个画面内参照图像区域中的另一画面内参照图像区域比上述一个画面内参照图像区域远离上述边界线地位于上述画面内参照图像的内部，
上述画面外参照图像中的画面外参照图像区域隔着上述边界线与上述一个画面内参照图像区域临近，
上述画面内参照图像中的其他画面内参照图像区域与上述另一画面内参照图像区域的位置关系，和上述一个画面内参照图像区域与上述画面外参照图像区域的位置关系大致相同，上述画面内参照图像中的其他画面内参照图像区域与上述另一画面内参照图像区域接近，
基于上述其他画面内参照图像区域的图像信息，生成上述画面外参照图像区域的图像信息。
8.根据权利要求7所述的动态图像解码方法，其特征在于，
从上述编码影像输入信号提取表示在上述画面内参照图像的上方、下方、左方、右方的各方向是否生成上述画面外参照图像的信息，
省略关于上述信息中表示否的方向的上述画面外参照图像的生成。
CN200980157830.2A 2009-03-04 2009-03-04 动态图像编码装置、动态图像解码装置、动态图像编码方法及动态图像解码方法 Active CN102369730B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410076413.8A CN103888780B (zh) 2009-03-04 2009-03-04 动态图像编码装置、动态图像解码装置、动态图像编码方法及动态图像解码方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2009/000969 WO2010100672A1 (ja) 2009-03-04 2009-03-04 圧縮動画符号化装置、圧縮動画復号化装置、圧縮動画符号化方法および圧縮動画復号化方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201410076413.8A Division CN103888780B (zh) 2009-03-04 2009-03-04 动态图像编码装置、动态图像解码装置、动态图像编码方法及动态图像解码方法

Publications (2)

Publication Number Publication Date
CN102369730A CN102369730A (zh) 2012-03-07
CN102369730B true CN102369730B (zh) 2015-12-16

Family

ID=42709252

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200980157830.2A Active CN102369730B (zh) 2009-03-04 2009-03-04 动态图像编码装置、动态图像解码装置、动态图像编码方法及动态图像解码方法

Country Status (6)

Country Link
US (2) US8958479B2 (zh)
EP (2) EP2773123B1 (zh)
JP (1) JP5426655B2 (zh)
KR (2) KR101589334B1 (zh)
CN (1) CN102369730B (zh)
WO (1) WO2010100672A1 (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7319795B2 (en) * 2003-09-23 2008-01-15 Broadcom Corporation Application based adaptive encoding
US9892782B1 (en) 2011-05-25 2018-02-13 Terra Prime Technologies, Llc Digital to analog converters and memory devices and related methods
US9589633B2 (en) 2011-05-25 2017-03-07 Peter K. Nagey Memory devices and related methods
US8773887B1 (en) * 2011-05-25 2014-07-08 Peter K. Naji Resistive memory devices and related methods
WO2013187060A1 (ja) * 2012-06-12 2013-12-19 パナソニック株式会社 動画像符号化方法、動画像復号化方法、動画像符号化装置および動画像復号化装置
CN104104960B (zh) * 2013-04-03 2017-06-27 华为技术有限公司 多级双向运动估计方法及设备
JP6590412B2 (ja) * 2014-04-04 2019-10-16 日本電気株式会社 映像符号化装置、方法及びプログラム、並びに映像復号装置、方法及びプログラム
JP6904200B2 (ja) * 2017-09-27 2021-07-14 株式会社Ｊｖｃケンウッド 動きベクトル検出装置
US11315326B2 (en) * 2019-10-15 2022-04-26 At&T Intellectual Property I, L.P. Extended reality anchor caching based on viewport prediction
JP7359653B2 (ja) * 2019-11-06 2023-10-11 ルネサスエレクトロニクス株式会社 動画像符号化装置
CN112733616B (zh) * 2020-12-22 2022-04-01 北京达佳互联信息技术有限公司 一种动态图像的生成方法、装置、电子设备和存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1578468A (zh) * 2003-07-28 2005-02-09 松下电器产业株式会社 视频解码设备
CN1874521A (zh) * 2005-05-30 2006-12-06 三星电子株式会社 用于图像编码和解码的设备和方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06351001A (ja) 1993-06-08 1994-12-22 Matsushita Electric Ind Co Ltd 動きベクトル検出方法および動き補償予測方法並びにその装置
JP2001251632A (ja) * 1999-12-27 2001-09-14 Toshiba Corp 動きベクトル検出方法および装置並びに動きベクトル検出プログラム
US7450641B2 (en) * 2001-09-14 2008-11-11 Sharp Laboratories Of America, Inc. Adaptive filtering based upon boundary strength
JP3971930B2 (ja) 2002-01-18 2007-09-05 日本電信電話株式会社 動画像符号化方法と装置、並びにこの方法の実行プログラムとこの方法の実行プログラムを記録した記録媒体
KR100688383B1 (ko) * 2004-08-13 2007-03-02 경희대학교 산학협력단 파노라마 영상의 움직임 추정 및 보상
US7623682B2 (en) 2004-08-13 2009-11-24 Samsung Electronics Co., Ltd. Method and device for motion estimation and compensation for panorama image
KR100694137B1 (ko) * 2005-07-08 2007-03-12 삼성전자주식회사 동영상 부호화 장치, 동영상 복호화 장치, 및 그 방법과,이를 구현하기 위한 프로그램이 기록된 기록 매체

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1578468A (zh) * 2003-07-28 2005-02-09 松下电器产业株式会社 视频解码设备
CN1874521A (zh) * 2005-05-30 2006-12-06 三星电子株式会社 用于图像编码和解码的设备和方法

Also Published As

Publication number Publication date
US9813703B2 (en) 2017-11-07
KR20160017100A (ko) 2016-02-15
KR20110122167A (ko) 2011-11-09
US20110305280A1 (en) 2011-12-15
JPWO2010100672A1 (ja) 2012-09-06
EP2773123B1 (en) 2016-06-29
EP2405655A4 (en) 2012-09-12
US20140376636A1 (en) 2014-12-25
WO2010100672A1 (ja) 2010-09-10
EP2405655A1 (en) 2012-01-11
JP5426655B2 (ja) 2014-02-26
KR101589334B1 (ko) 2016-01-27
CN102369730A (zh) 2012-03-07
KR101671676B1 (ko) 2016-11-01
EP2405655B1 (en) 2015-02-25
EP2773123A1 (en) 2014-09-03
US8958479B2 (en) 2015-02-17

Similar Documents

Publication Publication Date Title
CN102369730B (zh) 动态图像编码装置、动态图像解码装置、动态图像编码方法及动态图像解码方法
JP4863333B2 (ja) 高分解能静止画像を創出するための方法及び装置
JP5090158B2 (ja) 映像情報記録装置、映像情報記録方法、映像情報記録プログラム、及び映像情報記録プログラムを記録した記録媒体
JPH04177992A (ja) 階層性を有する画像符号化装置
JP2004208320A (ja) 並列補間及びサーチ・ハードウェアを備えた運動評価エンジン
JP2006279573A (ja) 符号化装置と方法、ならびに復号装置と方法
CN103141092A (zh) 针对视频压缩使用运动补偿的基于示例的超分辨率来编码视频信号的方法和设备
TWI523498B (zh) An image coding method, an image decoding method, an image coding apparatus, and an image decoding apparatus
JPH11168731A (ja) 動きベクトル検出方法及びその方法を実施する装置
JP2006311526A (ja) 画像復号装置、画像復号方法、画像復号プログラム、画像復号集積回路
CN102187678A (zh) 动态图像压缩编码中的编码处理方法和编码处理装置
JP4590335B2 (ja) 画像処理装置及び画像処理方法
JP4898415B2 (ja) 動画像符号化装置及び動画像符号化方法
JP2010081498A (ja) 画像圧縮符号化方法、及び装置
JP2007067526A (ja) 画像処理装置
KR20150028832A (ko) 동화상 예측 부호화 장치, 동화상 예측 부호화 방법, 동화상 예측 부호화 프로그램, 동화상 예측 복호 장치, 동화상 예측 복호 방법, 및 동화상 예측 복호 프로그램
JP7359653B2 (ja) 動画像符号化装置
CN103888780B (zh) 动态图像编码装置、动态图像解码装置、动态图像编码方法及动态图像解码方法
JP4021800B2 (ja) 動画像符号化装置，方法および動画像符号化プログラム
JP4590337B2 (ja) 動画像符号化装置及び動画像符号化方法
JP5207693B2 (ja) 画像符号化装置及び画像符号化方法
JP2009021786A (ja) 画像符号化装置及び画像符号化方法
JP2006295502A (ja) 再符号化装置、再符号化方法、および再符号化用プログラム
JP5247210B2 (ja) 動画像符号化装置及び動画像符号化方法
JP3743220B2 (ja) 符号化動画像編集方法およびその装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Tokyo, Japan, Japan

Applicant after: Renesas Electronics Corporation

Address before: Kanagawa

Applicant before: Renesas Electronics Corporation

COR Change of bibliographic data
C14 Grant of patent or utility model
GR01 Patent grant