CN1918917A - 视频编码方法及装置、视频解码方法及装置、它们的程序及记录这些程序的记录媒体 - Google Patents

视频编码方法及装置、视频解码方法及装置、它们的程序及记录这些程序的记录媒体 Download PDF

Info

Publication number
CN1918917A
CN1918917A CNA2005800050048A CN200580005004A CN1918917A CN 1918917 A CN1918917 A CN 1918917A CN A2005800050048 A CNA2005800050048 A CN A2005800050048A CN 200580005004 A CN200580005004 A CN 200580005004A CN 1918917 A CN1918917 A CN 1918917A
Authority
CN
China
Prior art keywords
gop
image
information
video
coding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2005800050048A
Other languages
English (en)
Inventor
北原正树
木全英明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to CN201310078194.2A priority Critical patent/CN103179400B/zh
Publication of CN1918917A publication Critical patent/CN1918917A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/114—Adapting the group of pictures [GOP] structure, e.g. number of B-frames between two anchor frames
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/177—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一种视频编码方法，由多个GOP构成多个图像，将各GOP的图像作为一个视频进行编码，其中包括以下步骤：确定是否对各GOP中包含的图像进行编码；对表示是否输出该GOP中包含的图像的编码数据的GOP编码有无信息进行编码；以及当输出该GOP中包含的图像的编码数据时，对该GOP中包含的图像进行编码。典型的有不依靠该GOP的编码数据的解码而通过判定利用其它1个以上的GOP生成的图像是否比由编码数据的解码而获得的图像更接近原图像，确定是否对该GOP中包含的图像进行编码。

Description

视频编码方法及装置、视频解码方法及装置、 它们的程序及记录这些程序的记录媒体
技术领域
本发明涉及适合可变更观察位置或观察方向的视频技术等的视频编码及视频解码的技术。
背景技术
一般，为了在视频编码中使用时间方向的相关实现高编码效率，采用帧间预测编码。帧的编码模式有不使用帧间相关而进行编码的I帧、由过去编码的1帧预测的P帧、可由过去编码的2帧预测的B帧。
P帧中可由I帧或P帧预测，B帧中可由I帧或P帧或B帧预测。尤其在视频编码方式H.264中，可预先在编码装置内的参考图像存储器存储多个帧的解码图像，从该存储器选择参考图像用于预测。另外，P帧中输入运动图像中的时间由过去帧预测，但B帧中不仅可由过去帧预测，而且也可由未来帧预测。
图7(a)部例示了运动图像的预测关系。
在B帧中由2帧预测时(两方向预测)，插补来自2帧的图像信息，作成1帧的图像信息并作成预测图像。将从第1帧到第7帧的编码模式按IBBPBBP的顺序编码时，由于存在图7(a)部所示的预测关系，在实际编码时，将图7(a)部所示的帧的编号从左到右设为1～7，按如图7(b)部所示“1→4→2→3→7→5→6”的帧编号顺序对帧进行编码。
这里，交替运动图像为1帧内具有2场的构成，与上述同样，可按每个场设定预测关系。一般将帧与场统称为图片。另外，B帧的两方向预测中可由过去2帧或未来2帧预测。例如在视频编码方式H.264中，预先在参考图像存储器中存储多个帧的解码图像，可从该存储器选择2帧的参考图像并加以预测。这里，选择的帧的解码后的显示时刻可为编码对象帧的显示时刻的未来也可为过去。
另外，以I图片作前头的图片集合设定为图片组(GOP：group ofpicture)，从而能够容易实现GOP单位的编码数据随时间的随机存取功能。
GOP通过在特定图片的编码数据之前，包含表示GOP前头的信息，能够指定该图片为该图片以后的多个图片构成的COP的前头。MPEG-2中，通过插入具有特有的位组合的代码来指定是GOP的前头。
即，可在表示GOP的前头的代码间构成1GOP的编码数据。还有，可在编码数据中不对表示GOP的前头的信息进行编码，而作为与编码数据独立的信息指定GOP构成信息。
一般，在表示GOP前头的信息之后，也包含GOP的前头帧的时刻信息，在实现对于时间的随机存取时使用。另外，各图片上也可带有时刻信息。
该时刻信息例如在H.263中称为TR(Temporal Reference)。TR是以单位时间为基本的、表示帧的输出顺序的信息。例如将单位时间设定为1/30秒时，每个帧增加一个值的情况等价于帧速率为30帧/秒的情况。通常TR按固定长度被编码。
并且，关于多个摄像机视频的编码，提出了将各摄像机视频设定为GOP，在GOP间应用预测编码的同时作为一个视频信息加以编码的方法。
例如，在下述的非专利文献1或非专利文献2中，提出了定义BaseGOP和Inter GOP来表示GOP间的预测关系的方法。在Base GOP中包含的图片仅参考同一GOP内包含的图片，在Inter GOP中包含的图片参考同一或其它GOP内包含的图片。Inter GOP中头部包含表示参考的GOP的参考GOP信息。
这样，如果预先具有多个摄像机输入视频，可通过切换输入视频变更观察位置与观察方向。如此就能获得拍摄的位置上的视频，但还提出了生成未拍摄到的观察位置或观察方向的视频的技术。
例如，在下述的非专利文献3中，提出了由多个摄像机输入图像生成光线空间，通过从该光线空间抽出图像信息，生成未拍摄到的观察位置或观察方向的视频的方法。
在生成这样的视频的技术中，一般在多个摄像机输入图像中被拍摄了相同的被照体时，使用这些被拍摄的图像信息，对于该被照体生成未拍摄到的观察位置或观察方向的图像信息。即，对于在多个摄像机输入图像中被拍摄的被照体，使用各摄像机输入图像的一部分生成图像信息。
作为该图像生成技术例如有适应过滤方法(例如参考非专利文献4)或表参考法(例如参考非专利文献5)。
非专利文献1：Hideaki Kimata and Masaki Kitahara，″Preliminaryresults on multiple view video coding(3DAV)，″document M10976 MPEGRedmond Meeting，July，2004.
非专利文献2：Hideaki Kimata，Masaki Kitahara，Kazuto Kamikura，Yoshiyuki Yashima，Toshiaki Fujii，and Masayuki Tanimoto，″SystemDesign of Free Viewpoint Video Communication，″CIT2004，Sep.，2004.
非专利文献3：藤井、木本、谷本：“光线组表现中的三维空间信息的压缩”，三维图像讨论会(3次元画像コンフアレンス)’96，pp.1-6(1996.7)。
非专利文献4：T.Kobayashi，T.Fujii，T.Kimoto，M.Tanimoto，″Interpolation of Ray-Space Data by Adaptive Filtering，″IS&T/SPIEElectronic Imaging 2000，2000.
非专利文献5：M.Kawaura，T.Ishigami，T.Fujii，T.Kimoto，M.Tanimoto，″Efficient Vector Quantization of Epipolar Plane Images ofRay Space By Dividing into Oblique Blocks，″Picture Coding Symposium2001，pp.203-206，2001.
发明的公开
在多个摄像机视频中，若按照生成未拍摄到的观察位置或观察方向的视频的技术得到质量十分好的图像时，可以不对一部分的摄像机视频的图像信息进行编码而在视频再现侧生成图像，因此最终可提高对多个摄像机视频的编码效率。
但是，在传统的视频编码方式中，即使在视频再现侧不使用一部分的摄像机视频的图像也判定是否能生成对应的图像，并且，由于没有对表示可生成的信息进行编码的计划，实际上对全部的摄像机视频进行编码后发送，编码效率没有得到提高。
本发明鉴于上述情况构思而成，目的在于提供新视频编码及视频解码相关的技术，适合于即使在视频再现侧不使用一部分的摄像机视频的图像也判定是否能生成对应的图像，并且，通过提供对表示可生成的信息进行编码的计划，可变更观察位置或观察方向的视频技术等。
为达成该目的，本发明提供一种视频编码方法，由多个GOP构成多个图像，将各GOP的图像作为一个视频进行编码，其中包括以下步骤：
确定是否对各GOP中包含的图像进行编码的GOP编码确定步骤；
对表示是否输出该GOP中包含的图像的编码数据的GOP编码有无信息进行编码的GOP编码有无信息编码步骤；以及
当输出该GOP中包含的图像的编码数据时，对该GOP中包含的图像进行编码的GOP内图像编码步骤。
作为典型例，在上述GOP编码确定步骤中，不依靠该GOP的编码数据的解码而通过判定利用其它1个以上的GOP生成的图像是否比由编码数据的解码而获得的图像更接近原图像，确定是否对该GOP中包含的图像进行编码。还有，该方法以外，也可通过评价原图像的变化等，确定是否对该GOP中包含的图像进行编码。
还可包括当不输出该GOP中包含的图像的编码数据时，对生成该GOP中包含的图像时使用的、指定其它1个以上的GOP的生成参考GOP指定信息进行编码的生成参考GOP编码步骤。
另外，还可包括当不输出该GOP中包含的图像的编码数据时，对生成该GOP中包含的图像时使用的、指定图像生成方法的生成信息进行编码的生成信息编码步骤。
本发明还提供一种视频解码方法，由多个GOP构成多个图像，对将各GOP的图像作为一个视频进行编码来生成的编码数据进行解码，其中包括以下步骤：
对表示是否对各GOP中包含的图像的编码数据进行解码的GOP编码有无信息进行解码的GOP编码有无信息解码步骤；
当对该GOP中包含的图像的编码数据进行解码时，对GOP中包含的图像进行解码的GOP内图像解码步骤。
还可包括当不对该GOP中包含的图像的编码数据进行解码时，对生成该GOP中包含的图像时使用的、指定其它1个以上的GOP的生成参考GOP指定信息进行解码的生成参考GOP解码步骤。
另外，还可包括当不对该GOP中包含的图像的编码数据进行解码时，对生成该GOP中包含的图像时使用的、指定图像生成方法的生成信息进行解码的生成信息解码步骤。
本发明还提供一种视频编码装置，由多个GOP构成多个图像，并将各GOP的图像作为一个视频进行编码，其中包括：
确定是否对各GOP中包含的图像进行编码的GOP编码确定部；
对表示是否输出该GOP中包含的图像的编码数据的GOP编码有无信息进行编码的GOP编码有无信息编码部；以及
当输出该GOP中包含的图像的编码数据时，对GOP中包含的图像进行编码的GOP内图像编码部。
作为典型例，在上述GOP编码确定部中，不依靠该GOP的编码数据的解码而通过判定利用其它1个以上的GOP生成的图像是否比由编码数据的解码而获得的图像更接近原图像，确定是否对该GOP中包含的图像进行编码。
还可包括当不输出该GOP中包含的图像的编码数据时，对生成该GOP中包含的图像时使用的、指定其它1个以上的GOP的生成参考GOP指定信息进行编码的生成参考GOP编码部。
另外，还可包括当不输出该GOP中包含的图像的编码数据时，对生成该GOP中包含的图像时使用的、指定图像生成方法的生成信息进行编码的生成信息编码部。
本发明还提供一种视频解码装置，由多个GOP构成多个图像，对将各GOP的图像作为一个视频进行编码来生成的编码数据进行解码，其中包括：
对表示是否对各GOP中包含的图像的编码数据进行解码的GOP编码有无信息进行解码的GOP编码有无信息解码部；
当对该GOP中包含的图像的编码数据进行解码时，对GOP中包含的图像进行解码的GOP内图像解码部。
还可包括当不对该GOP中包含的图像的编码数据进行解码时，对生成该GOP中包含的图像时使用的、指定1个以上的其它GOP的生成参考GOP指定信息进行解码的生成参考GOP解码部。
另外，还可包括当不对该GOP中包含的图像的编码数据进行解码时，对生成该GOP中包含的图像时使用的、指定图像生成方法的生成信息进行解码的生成信息解码部。
本发明还提供令计算机执行用以实现上述视频编码方法的处理的视频编码程序，并提供记录该程序的计算机可读的记录媒体。
本发明还提供令计算机执行用以实现上述视频解码方法的处理的视频解码程序，并提供记录该程序的计算机可读的记录媒体。
即，这些计算机程序记录在适当的计算机可读的记录媒体而被提供，或者经由网络被提供，在实施本发明时经装载后用CPU等的控制装置动作而能够实现本发明。
依据上述本发明，预先按每个摄像机输入视频构成GOP，用图像生成方法生成摄像机输入视频时，可以不对该GOP进行图像的编码而通过指定来取代，以在视频再现侧生成图像。
即，在视频编码侧，确定用图像生成方法是否能生成摄像机输入视频。然后，在能够生成摄像机输入视频时，设成不输出GOP中包含的图像的编码数据，对GOP编码有无信息进行编码，而在不能生成摄像机输入视频时，设成输出GOP中包含的图像的编码数据，对GOP编码有无信息进行编码。还有，在不能生成摄像机输入视频时，对GOP中包含的图像进行编码(输出GOP中包含的图像的编码数据)。
在视频解码侧接受图像的编码数据，对表示是否对GOP中包含的图像的编码数据进行解码的GOP编码有无信息进行解码。然后，在GOP编码有无信息表示解码GOP中包含的图像的编码数据时，对图像的编码数据进行解码。
这里，在视频解码侧，当GOP编码有无信息表示不对GOP中包含的图像的编码数据进行解码时，可以使用图像生成技术生成GOP内的图像。但是，该GOP内的图像不必要时，不必生成图像。
并且，依据本发明，在视频解码侧生成摄像机输入视频时，可指定包含生成摄像机输入视频时使用的图像的GOP。此时使用的GOP的图像可由对编码数据进行解码而获得，也可在视频解码侧生成而获得。
从而，在视频解码侧生成期望的GOP的图像时，若不能解码或生成生成所必要的图像，则通过解码或生成包含该图像的GOP，能够生成期望的图像。这里，作为包含生成期望的视频时使用的图像的GOP，可为其它摄像机输入视频，也可为属于期望的视频的摄像机输入视频。
并且，依据本发明，在视频解码侧生成摄像机输入视频时，可指定生成摄像机输入视频时使用的图像生成方法。
关于该图像生成方法，可在视频编码侧和视频解码侧预先准备多个图像生成方法，在视频编码侧确定在视频解码侧使用何种图像生成方法。从而，可在视频编码侧选择图像质量良好的图像生成方法。
还有，在使用要再现的视频所属的摄像机输入视频生成该视频时，可使用属于该摄像机输入视频的前(过去)GOP的图像。另外，当摄像机台数少的场合，用于图像生成的GOP受限制，因此无需指定所使用的GOP。
依据本发明，在编码时判定在视频再现侧是否能生成图像，并且可对表示生成的信息进行编码，因此可在图像编码侧控制不对视频进行编码的情况，从而可提高编码效率。
这样，依据本发明，能够提供适合于可对观察位置或观察方向进行变更的视频技术等的视频编码/解码技术。
附图的简单说明
图1是一例实施例1中GOP的结构示图。
图2是实施例1中视频编码装置的装置结构例的示图。
图3是实施例1中视频解码装置的装置结构例的示图。
图4是实施例2中视频编码装置的装置结构例的示图。
图5是一例实施例2中GOP的结构示图。
图6是实施例2中视频解码装置的装置结构例的示图。
图7是运动图像的预测关系的说明图。
符号说明
101  图像A输入部，102  图像A编码部，103  图像A解码部，104  图像A存储器，105  图像B输入部，106  图像B编码部，107  图像B解码部，108  图像B存储器，109  图像C输入部，110  GOP内图像编码部，111  图像C解码部，112  解码图像存储器，113  原图像存储器，114  图像生成部，115  生成参考GOP编码部，116  生成信息编码部，117  GOP编码确定部，118  GOP编码有无信息编码部，119  GOP信息存储器，201  图像A解码部，202  图像A存储器，203  图像B解码部，204  图像B存储器，205  GOP内图像解码部，206  解码图像存储器，207  图像生成部，208  生成参考GOP解码部，209  生成信息解码部，210  GOP编码有无信息解码部，1180GOP头/编码有无信息编码部，2100  GOP头/编码有无信息解码部。
本发明的最佳实施方式
以下，根据实施例详细说明本发明。
在以下说明的实施例中，示出编码3个摄像机视频时，先将2个摄像机视频独立编码，然后确定是否将1个摄像机视频不用该1个摄像机视频的当前图像而用图像生成技术从这些2个摄像机视频的图像信息或者该1个摄像机视频的过去图像生成的方法。
[I]实施例1
图1表示实施例1中的GOP。
如该图所示，在实施例1中，GOP预先确定为由2帧构成。另外，各GOP被分配图中所示GOP编号(GOP1～GOP6)。
在图1所示3个摄像机视频A、B、C中，对于C确定是否用图像生成技术生成。作为由A或B生成C的方法，预先准备图像生成方法X和图像生成方法Y，另外，作为由C的过去图像信息生成图像的技术准备图像生成方法Z。
作为在生成图像时使用的图像选择A或B时，会对指定图像生成方法的信息进行编码，但作为在生成图像时使用的图像选择C的过去图像时，图像生成方法唯一地确定为Z，因此无需对指定图像生成方法的信息进行编码。还有，图像生成方法Z在本实施例中为输出之前图像的方法。
图像生成方法X例如为适应过滤方法，图像生成方法Y例如为表参考方法。在以下说明的实施例中，使用A和B的解码图像，确定C的图像生成方法。
[I-1]实现实施例1的本发明的视频编码装置
图2是一例实现实施例1的本发明的视频编码装置的装置结构示图。
如该图所示，本发明的视频编码装置包括：
(A)对应于图像A(摄像机输入视频A)，输入图像的图像A输入部101、对图像A输入部101输入的图像进行编码的图像A编码部102、对图像A编码部102编码的图像进行解码的图像A解码部103、存储图像A解码部103解码的图像的图像A存储器104；
(B)对应于图像B(摄像机输入视频B)，输入图像的图像B输入部105、对图像B输入部105输入的图像进行编码的图像B编码部106、对图像B编码部106编码的图像进行解码的图像B解码部107、存储图像B解码部107解码的图像的图像B存储器108；
(C)对应于图像C(摄像机输入视频C)，输入图像的图像C输入部109、对图像C输入部109输入的图像进行编码的GOP内图像编码部110、对GOP内图像编码部110编码的图像进行解码的图像C解码部111、存储图像C解码部111解码的图像的解码图像存储器112、存储图像C输入部109输入的原图像的原图像存储器113、不用原图像C而生成图像C的图像生成部114、对指定生成图像C时使用的GOP的信息(具体地说GOP的编号)进行编码的生成参考GOP编码部115、对指定用于生成图像C的图像生成方法的信息进行编码的生成信息编码部116、确定是否对GOP的图像进行编码的GOP编码确定部117、及对指定是否对GOP的图像进行编码的信息进行编码的GOP编码有无信息编码部118。
这里，图像A存储器104和图像B存储器108分别存储2个帧的解码图像，另外，原图像存储器113存储2个帧的原图像。另外，解码图像存储器112存储3个帧的解码图像。还有，初始状态的各存储器均没有存储图像信息。
GOP编码确定部117首先计算在图像生成部114中使用图像生成方法X生成的2个帧的图像信息(逐帧生成)和存储在原图像存储器113的图像之间的均方根误差X。此时，设仅使用图像A存储器104的图像时的均方根误差为Xa、仅使用图像B存储器108的图像时的均方根误差为Xb、使用图像A存储器104的图像和图像B存储器108的图像两个时的均方根误差为Xc。
并且，GOP编码确定部117计算在图像生成部114中使用图像生成方法Y生成的2个帧的图像信息(逐帧生成)和存储在原图像存储器113的图像之间的均方根误差Y。此时，设仅使用图像A存储器104的图像时的均方根误差为Ya、仅使用图像B存储器108的图像时的均方根误差为Yb、使用图像A存储器104的图像和图像B存储器108的图像两个时的均方根误差为Yc。
而且，GOP编码确定部117计算GOP内图像编码部110中编码并在图像C解码部111中解码后存储到解码图像存储器112的解码图像中，当前GOP的解码图像与存储在原图像存储器113的对应的图像之间的均方根误差D。
并且，GOP编码确定部117在解码图像存储器112中存储了前GOP的图像时，计算用图像生成方法Z生成的2个帧的图像信息(逐帧生成)与存储在原图像存储器113的图像之间的均方根误差Z。
然后，GOP编码确定部117对这样算出的均方根误差Xa、Xb、Xc、Ya、Yb、Yc和D或者均方根误差Xa、Xb、Xc、Ya、Yb、Yc、D和Z进行比较，将最小值时的条件确定为该GOP的编码信息(由GOP编码有无信息/指定生成参考GOP的信息/指定图像生成方法的信息构成)。即，按如下确定。
还有，以下明确区分“编码数据”和“编码信息”，当记载为“编码数据”时，表示对图像作了编码时的数据。
(1)当均方根误差Xa最小时
当Xa最小时，作为图像生成方法指定X，作为生成参考GOP指定图像A的GOP。
此时，GOP编码有无信息编码部118对GOP编码有无信息进行编码，以表示不输出编码数据。另外，生成参考GOP编码部115对所使用的GOP的编号进行编码。另外，生成信息编码部116对指定图像生成方法X的信息进行编码。
(2)当均方根误差Xb最小时
当Xb最小时，作为图像生成方法指定X，作为生成参考GOP指定图像B的GOP。
此时，GOP编码有无信息编码部118对GOP编码有无信息进行编码，以表示不输出编码数据。另外，生成参考GOP编码部115对所使用的GOP的编号进行编码。另外，生成信息编码部116对指定图像生成方法X的信息进行编码。
(3)当均方根误差Xc最小时
当Xc最小时，作为图像生成方法指定X，作为生成参考GOP指定图像A和图像B的GOP。
此时，GOP编码有无信息编码部118对GOP编码有无信息进行编码，以表示不输出编码数据。另外，生成参考GOP编码部115对所使用的GOP的编号进行编码。另外，生成信息编码部116对指定图像生成方法X的信息进行编码。
(4)当均方根误差Ya最小时
当Ya最小时，作为图像生成方法指定Y，作为生成参考GOP指定图像A的GOP。
此时，GOP编码有无信息编码部118对GOP编码有无信息进行编码，以表示不输出编码数据。另外，生成参考GOP编码部115对所使用的GOP的编号进行编码。另外，生成信息编码部116对指定图像生成方法Y的信息进行编码。
(5)当均方根误差Yb最小时
当Yb最小时，作为图像生成方法指定Y，作为生成参考GOP指定图像B的GOP。
此时，GOP编码有无信息编码部118对GOP编码有无信息进行编码，以表示不输出编码数据。另外，生成参考GOP编码部115对所使用的GOP的编号进行编码。另外，生成信息编码部116对指定图像生成方法Y的信息进行编码。
(6)当均方根误差Yc最小时
当Yc最小时，作为图像生成方法指定Y，作为生成参考GOP指定图像A和图像B的GOP。
此时，GOP编码有无信息编码部118对GOP编码有无信息进行编码，以表示不输出编码数据。另外，生成参考GOP编码部115对所使用的GOP的编号进行编码。另外，生成信息编码部116对指定图像生成方法Y的信息进行编码。
(7)当均方根误差Z最小时
当Z最小时，作为图像生成方法指定Z，作为生成参考GOP指定图像C的GOP。
此时，GOP编码有无信息编码部118对GOP编码有无信息进行编码，以表示不输出编码数据。另外，生成参考GOP编码部115对所使用的GOP的编号进行编码。
这里，如上所述，作为生成图像时使用的图像选择C的过去图像时，图像生成方法唯一确定为Z，因此生成信息编码部116无需对指定图像生成方法的信息进行编码。
(8)当均方根误差D最小时
当D最小时，输出GOP内图像编码部110中编码的编码数据。
此时，GOP编码有无信息编码部118对GOP编码有无信息进行编码，以表示输出编码数据，GOP内图像编码部110输出已编码的编码数据。
即，在上述(1)～(7)的场合，判定不使用该图像数据也能在视频再现侧生成摄像机视频C的图像，而在(8)的场合，判定不使用该图像数据就不能生成该图像。
在这样的前提下，本发明的视频编码装置对摄像机输入视频进行如下的编码。
(i)在时刻T1、T2的编码处理
首先，在时刻T1和T2，对图像A和图像B进行编码。
关于图像A，图像A输入部101输入图像，图像A编码部102对图像进行编码，图像A解码部103对编码数据进行解码，图像A存储器104存储解码图像。这些处理对T1和T2的图像执行。在图像A存储器104中存储了T1和T2的图像。
关于图像B，图像B输入部105输入图像，图像B编码部106对图像进行编码，图像B解码部107对编码数据进行解码，图像B存储器108存储解码图像。这些处理对T1和T2的图像执行。在图像B存储器108中存储了T1和T2的图像。
接着，图像C输入部109输出图像C，原图像存储器113存储输入的图像。GOP内图像编码部110对T1和T2的图像进行编码，图像C解码部111对编码数据进行解码后将解码图像存储在解码图像存储器112。
接着，图像生成部114对于图像A存储器104中存储的图像和图像B存储器108中存储的图像，分别采用图像生成方法X及图像生成方法Y，生成图像。还有，由于不存在前帧，在该时刻不能采用图像生成方法Z生成图像。
经这些处理，GOP编码确定部117使用图像生成部114生成的图像和存储在解码图像存储器112的图像，求出均方根误差Xa、Xb、Xc、Ya、Yb、Yc和D(还有，在该时刻不能求出均方根误差Z)。然后，由这些均方根误差，按照上述(1)～(8)的逻辑确定GOP的编码信息。
然后，本发明的视频编码装置基于确定的GOP的编码信息，对编码有无信息进行编码后加以输出，同时输出编码数据或者对生成参考GOP的编号及表示图像生成方法的信息进行编码后加以输出。但是，使用图像生成方法Z时，无需对表示图像生成方法的信息进行编码(还有，在该时刻不会使用图像生成方法Z)。
这里，解码图像存储器112在从GOP内图像编码部110输出编码数据时，持续存储图像C解码部111获得的解码图像。另一方面，从GOP内图像编码部110不输出编码数据时，弃存储的T1和T2的解码图像，而存储图像生成部114生成的图像中，与GOP编码确定部117确定的GOP的编码信息对应的图像(即，用所选择的生成方法生成的图像)。
(ii)时刻T3、T4的编码处理
接着，在时刻T3和T4，进行与时刻T1和T2相同的处理，对图像A和图像B进行编码。
存储在图像A存储器104和图像B存储器108中的解码图像弃最旧而存储新解码的图像。从而，各存储器中存储了T3和T4的解码图像。
接着，图像C输入部109输入图像C，原图像存储器113存储输入的图像。此时，存储在原图像存储器113的原图像弃最旧而存储新输入的图像。从而，原图像存储器113中存储了T3和T4的原图像。
接着，GOP内图像编码部110对T3和T4的图像进行编码，图像C解码部111对编码数据进行解码后将解码图像存储在解码图像存储器112。此时，存储在解码图像存储器112的解码图像弃最旧而存储新解码的图像。从而，解码图像存储器112中存储了T2、T3和T4的解码图像。
接着，图像生成部114对于存储在图像A存储器104的图像和存储在图像B存储器108的图像，采用图像生成方法X及图像生成方法Y分别生成图像。并且，对于存储在解码图像存储器112的T2的图像，采用图像生成方法Z生成图像。
经这些处理，GOP编码确定部117使用图像生成部114生成的图像和存储在解码图像存储器112的图像，求出均方根误差Xa、Xb、Xc、Ya、Yb、Yc、D和Z。然后，由这些均方根误差，按照上述(1)～(8)的逻辑确定GOP的编码信息。
然后，本发明的视频编码装置基于确定的GOP的编码信息，将编码有无信息编码后输出，同时输出编码数据或者将表示生成参考GOP的编号及图像生成方法的信息编码后输出。但是，当选择了图像生成方法Z的场合，无需对表示图像生成方法的信息进行编码。
这里，解码图像存储器112在从GOP内图像编码部100输出编码数据时，持续存储图像C解码部111获得的解码图像。另一方面，从GOP内图像编码部110不输出编码数据时，弃存储的T3和T4的解码图像，存储图像生成部114生成的图像中与GOP编码确定部117确定的编码信息对应的图像。
[I-2]实现实施例1的本发明的视频解码装置
以下，就实现实施例1的本发明的视频解码装置进行说明。
图3示出一例实现实施例1的本发明的视频解码装置的装置结构。
如该图所示，本发明的视频解码装置包括：
(A)对应于图像A(摄像机输入视频A)，对图像进行解码的图像A解码部201、存储图像A解码部201解码的图像的图像A存储器202；
(B)对应于图像B(摄像机输入视频B)，对图像进行解码的图像B解码部203、存储图像B解码部203解码的图像的图像B存储器204；
(C)对应于图像C(摄像机输入视频C)，对图像进行解码的GOP内图像解码部205、存储GOP内图像解码部205解码的图像的解码图像存储器206、生成图像C的图像生成部207、对指定在生成图像C时使用的GOP的信息(具体地说GOP的编号)进行解码的生成参考GOP解码部208、对指定用于生成图像C的图像生成方法的信息进行解码的生成信息解码部209、对指定是否对GOP的图像进行解码的信息进行解码的GOP编码有无信息解码部210。
图像生成部207、生成参考COP解码部208和生成信息解码部209在不对GOP的编码数据进行解码时，如下进行动作。
首先，生成参考GOP解码部208通过对图像生成中使用的GOP的编号进行解码来获得。当GOP的编号属于输入图像A或B时，接着，生成信息解码部209对指定图像生成方法的信息进行解码，获得X或Y作为图像生成方法的信息。另一方面，当GOP的编号属于输入图像C时，生成信息解码部209不对指定图像生成方法的信息进行解码。
接着，图像生成部207使用由生成参考GOP解码部208获得的GOP编号和由生成信息解码部209获得的图像生成方法的信息所规定的图像生成方法生成图像。这里，当GOP的编号属于输入图像C时，图像生成部207使用Z作为图像生成方法。
在这样的前提下，本发明的视频解码装置对从本发明的视频编码装置输出的编码数据如下进行解码。
(i)时刻T1、T2的解码处理
首先，在时刻T1和T2，对图像A和图像B进行解码。
对于图像A，图像A解码部201对编码数据进行解码，且图像A存储器202存储解码图像。对于T1和T2的图像也执行这些处理。在图像A存储器202中存储T1和T2的图像。
对于图像B，图像B解码部203对编码数据进行解码，且图像B存储器204存储解码图像。对于T1和T2的图像也执行这些处理。在图像B存储器204中存储T1和T2的图像。
接着，对于图像C，GOP编码有无信息解码部210对指定是否对GOP的编码数据进行解码的信息进行解码。基于该信息，进行以下任一处理。
即，当GOP编码有无信息解码部210对指示GOP的编码数据的解码的信息进行解码时，GOP内图像解码部205对编码数据进行解码后输出图像，并且，将该解码后的图像存储在解码图像存储器206。
另一方面，当GOP编码有无信息解码部210对不指示GOP的编码数据的解码的信息进行解码时，生成参考GOP解码部208对图像生成中使用的GOP的编号进行解码而获得。由于GOP的编号属于输入图像A或B(由于不存在前帧，该时刻不会属于输入图像C)，接着，生成信息解码部209对指定图像生成方法的信息进行解码，获得X或Y作为图像生成方法的信息。图像生成部207接受该信息，使用由生成参考GOP解码部208获得的GOP编号和由生成信息解码部209获得的图像生成方法的信息所规定的图像生成方法生成图像。
当解码图像存储器206对GOP的编码数据进行解码时，存储解码图像，当不对GOP的编码数据进行解码时，存储图像生成部207生成的图像。
(ii)时刻T3、T4的解码处理
接着，在时刻T3和T4，进行与时刻T1和T2同样的处理，对图像A和图像B进行解码，对于图像A，在图像A存储器202存储解码图像，对于图像B，在图像B存储器204存储解码图像。
接着，对于图像C，GOP编码有无信息解码部210对指定是否对GOP的编码数据进行解码的信息进行解码。基于该信息，执行以下任一处理。
即，当GOP编码有无信息解码部210对指示GOP的编码数据的解码的信息进行解码时，GOP内图像解码部205对编码数据进行解码后输出图像，并且，将该解码后的图像存储在解码图像存储器206。
另一方面，当GOP编码有无信息解码部210对不指示GOP的编码数据的解码的信息进行解码时，生成参考GOP解码部208对图像生成中使用的GOP的编号进行解码而获得。当GOP的编号属于输入图像A或B时，接着，生成信息解码部209对指定图像生成方法的信息进行解码，获得X或Y作为图像生成方法的信息。另一方面，当GOP的编号属于输入图像C时，生成信息解码部209可特定使用图像生成方法Z，因此不会对指定图像生成方法的信息进行解码。图像生成部207接受该信息，使用由生成参考GOP解码部208获得的GOP编号和由生成信息解码部209获得的图像生成方法的信息所规定的图像生成方法生成图像。此时，当GOP的编号属于输入图像C时，使用图像生成方法Z。
当解码图像存储器206对GOP的编码数据进行解码时，弃T1、T2的图像而存储解码图像，当不对GOP的编码数据进行解码时，弃T1、T2的图像而存储图像生成部207中生成的图像。
如上所述，本发明的视频编码装置对T1、T2、T3、T4的图像进行编码，另一方面，本发明的视频解码装置对编码数据进行解码，或者通过生成图像能够获得同时刻的图像。
[II]实施例2
以下，就实施例2进行说明。
在实施例1中，预先确定GOP为2帧，但可以按每个帧适当地确定GOP为不同的帧。实施例2实现该构成。
图4示出一例实现实施例2的本发明的视频编码装置的装置结构。这里，图中对于与图2中说明相同的部分用同一符号表示。
与实施例1不同的是具备存储GOP的编码信息的GOP信息存储器119。另外，GOP头/编码有无信息编码部1180进行编码有无信息的编码外，在GOP的前头进行对GOP头进行编码的处理。GOP头是由固有的位组合构成的固定长度的代码。
实现实施例2的本发明的视频解码装置的装置结构(如图6所示)与图3所示的实施例1相同。但是，GOP头/编码有无信息解码部2100在各帧中确认GOP头的有无，若检出GOP头，则作为另外的(独立的)GOP进行解码处理。
[II-1]实施例2中的编码处理
在实施例2中的摄像机输入视频A、B、C的编码方法如下。
首先，对于时刻T1和T2的图像A和B，与实施例1同样地编码图像而获得解码图像。在图像A存储器1 04和图像B存储器108中存储T1和T2的解码图像。
即，对于图像A，图像A输入部101输入图像，然后图像A编码部102对图像进行编码，图像A解码部103对编码数据进行解码，图像A存储器104存储解码图像。对于T1和T2的图像进行这些处理。在图像A存储器104中存储T1和T2的图像。
另外，对于图像B，图像B输入部105输入图像，然后图像B编码部106对图像进行编码，图像B解码部107对编码数据进行解码，图像B存储器108存储解码图像。对于T1和T2的图像进行这些处理。在图像B存储器108中存储T1和T2的图像。
(i)时刻T1的图像C的编码处理
接着，对于时刻T1的图像C，首先，图像C输入部109输入图像，原图像存储器113存储输入的图像。GOP内图像编码部110对时刻T1的图像进行编码，图像C解码部111对编码数据进行解码后将解码图像存储在解码图像存储器112。
接着，图像生成部114对于存储在图像A存储器104的图像和存储在图像B存储器108的图像，分别采用图像生成方法X及图像生成方法Y生成时刻T1的图像。还有，由于不存在前帧，在该时刻采用图像生成方法Z不能生成图像。
经过这些处理，GOP编码确定部117使用由图像生成部114生成的图像和存储在解码图像存储器112的图像，求出均方根误差Xa、Xb、Xc、Ya、Yb、Yc和D(还有，在该时刻不能求出均方根误差Z)。然后，由这些均方根误差，按照上述(1)～(8)的逻辑确定GOP的编码信息。
然后，GOP编码确定部117将确定的GOP的编码信息存储在GOP信息存储器119，GOP编码有无信息编码部1180将GOP头编码后输出。
然后，本发明的视频编码装置基于确定的GOP的编码信息，将编码有无信息编码后输出，同时输出编码数据，或者对生成参考GOP的编号及表示图像生成方法的信息进行编码后输出。但是，采用图像生成方法Z时，无需对表示图像生成方法的信息进行编码(还有，在该时刻不会用图像生成方法Z)。
这里，解码图像存储器112在从GOP内图像编码部110输出编码数据时，持续存储图像C解码部111获得的解码图像。另一方面，当从GOP内图像编码部110不会输出编码数据时，弃存储的T1的解码图像而存储图像生成部114中生成的图像中与由GOP编码确定部117确定的GOP的编码信息对应的图像。
[ii]时刻T2的图像C的编码处理
接着，对于时刻T2的图像C，首先，图像C输入部109输入图像，原图像存储器113将输入的图像存储。GOP内图像编码部110对时刻T2的图像进行编码，图像C解码部111对编码数据进行解码后将解码图像存储在解码图像存储器112。
接着，图像生成部114对于存储在图像A存储器104的图像和存储在图像B存储器108的图像，分别采用图像生成方法X及图像生成方法Y生成时刻T2的图像。并且，对于存储在解码图像存储器112的图像，采用图像生成方法Z生成时刻T2的图像。
经过这些处理，GOP编码确定部117使用由图像生成部114生成的图像和存储在解码图像存储器112的图像，求出均方根误差Xa、Xb、Xc、Ya、Yb、Yc、D和Z。然后，由这些均方根误差，按照上述(1)～(8)的逻辑确定GOP的编码信息。
接着，GOP编码确定部117对这此确定的GOP的编码信息和存储在GOP信息存储器119的GOP的编码信息进行比较，当两者GOP的编码信息不同时，确定作为别的GOP对图像进行编码，当两者GOP的编码信息相同时，确定作为相同的GOP对图像进行编码。
然后，GOP编码确定部117将确定的GOP的编码信息存储在GOP信息存储器119。以后具体如下动作。
(ii-1)作为别的GOP进行编码的场合
在作为别的GOP进行编码的场合，GOP头/编码有无信息编码部1180将GOP头编码后输出。然后，本发明的视频编码装置基于确定的GOP的编码信息，将编码有无信息编码后输出，同时输出编码数据，或者将生成参考GOP的编号及表示图像生成方法的信息编码后输出。但是，在采用图像生成方法Z的场合，无需对表示图像生成方法的信息进行编码。
这里，解码图像存储器112在从GOP内图像编码部110输出编码数据时，持续存储由图像C解码部111获得的解码图像。另一方面，当不会从GOP内图像编码部110输出编码数据时，弃存储的T2的解码图像，而存储图像生成部114中生成的图像中与由GOP编码确定部117确定的GOP的编码信息对应的图像。
(ii-2)作为相同的GOP进行编码的场合
在作为相同的GOP进行编码的场合，若从GOP内图像编码部110输出编码数据，则输出该帧的编码数据，另一方面，当不会从GOP内图像编码部110输出编码数据时，通过在解码侧通知完的1个之前的时刻的T1的GOP的编码信息，能够在解码侧特定图像生成方法，因此不会输出任何信息。
这里，解码图像存储器112在从GOP内图像编码部110输出编码数据时，持续存储由图像C解码部111获得的解码图像。另一方面，当不会从GOP内图像编码部110输出编码数据时，弃存储的T2的解码图像，而存储图像生成部114中生成的图像中与由GOP编码确定部117确定的编码信息对应的图像。
[II-2]实施例2的解码处理
与之对应的实施例2的解码处理如下动作。
首先，对于时刻T1和T2的图像A和B，与实施例1同样地对图像进行解码而获得解码图像。在图像A存储器202和图像B存储器204中存储T1和T2的解码图像。
即，对于图像A，图像A解码部201对编码数据进行解码，图像A存储器202将解码图像存储。对T1和T2的图像执行这些处理。在图像A存储器202中存储T1和T2的图像。
另外，对于图像B，图像B解码部203对编码数据进行解码，图像B存储器204将解码图像存储。对T1和T2的图像执行这些处理。在图像B存储器204中存储T1和T2的图像。
(i)时刻T1的图像C的解码处理
接着，对于时刻T1的图像C，GOP头/编码有无信息解码部2100确认GOP头的有无。一旦有GOP头，GOP头/编码有无信息解码部2100接着就对指定是否对GOP的编码数据进行解码的信息(编码有无信息)进行解码。基于该信息，执行以下任一处理。
即，当GOP头/编码有无信息解码部2100对指示GOP的编码数据的解码的信息进行解码时，GOP内图像解码部205将编码数据解码后输出图像，并且，将该解码后的图像存储在解码图像存储器206。
另一方面，当GOP头/编码有无信息解码部2100对不指示GOP的编码数据的解码的信息进行解码时，生成参考GOP解码部208将图像生成中使用的GOP的编号解码而获得。由于GOP的编号属于输入图像A或B(由于是前头帧，在该时刻不会属于输入图像C)，接着，生成信息解码部209对指定图像生成方法的信息进行解码，获得X或Y作为图像生成方法的信息。图像生成部207接受该信息，使用由生成参考GOP解码部208获得的GOP编号和由生成信息解码部209获得的图像生成方法的信息所规定的图像生成方法生成图像。
解码图像存储器206接受生成的图像，对GOP的编码数据进行解码时，存储解码图像，而不对GOP的编码数据进行解码时，存储由图像生成部207生成的图像。
(ii)时刻T2的图像C的解码处理
(ii-1)检出GOP头时的解码处理(GOP的编码信息被编码的场合)
接着，对于时刻T2的图像C，GOP头/编码有无信息解码部2100确认GOP头的有无。当检出GOP头时，再对指定是否对GOP的编码数据进行解码的信息进行解码。基于该信息，执行以下任一处理。
即，当GOP头/编码有无信息解码部2100对指示GOP的编码数据的解码的信息进行解码时，GOP内图像解码部205将编码数据解码后输出图像，并且，将该解码后的图像存储在解码图像存储器206。
另一方面，当GOP头/编码有无信息解码部2100对不指示GOP的编码数据的解码的信息进行解码时，生成参考GOP解码部208对图像生成中使用的GOP的编号进行解码而获得。当GOP的编号属于输入图像A或B时，接着，生成信息解码部209对指定图像生成方法的信息进行解码，获得X或Y作为图像生成方法的信息。当GOP的编号属于输入图像C时，生成信息解码部209可特定使用图像生成方法Z，因此不会对指定图像生成方法的信息进行解码。图像生成部207接受上述信息，使用由生成参考GOP解码部208获得的GOP编号和由生成信息解码部209获得的图像生成方法的信息所规定的图像生成方法生成图像。当GOP的编号属于输入图像C时，使用图像生成方法Z。
解码图像存储器206接受上述信息，对GOP的编码数据进行解码时，存储解码图像，当不对GOP的编码数据进行解码时，将图像生成部207中生成的图像存储。
(ii-2)未检出GOP头时的解码处理(GOP的编码信息未被编码的场合)
当GOP头/编码有无信息解码部2100未检出GOP头时，如下动作。
即，在前帧中对编码数据作了解码时，GOP内图像解码部205在当前帧中对编码数据进行解码后输出图像，并且，将该解码后的图像存储在解码图像存储器206。
另一方面，若在前帧未对编码数据进行解码，则在当前帧使用与前帧中的GOP的编码信息相同的GOP的编码信息，对应于该情况，生成参考GOP解码部208将在前帧中获得的GOP的编号用于解码处理。该场合，若GOP的编号属于输入图像A或B，则生成信息解码部209在前帧获得X或Y作为指定图像生成方法的信息，因此使用所获得的X或Y进行解码处理。还有，这里，前帧为前头帧，因此GOP的编号不会属于输入图像C，但作为未检出GOP头时的一般解码处理，在GOP的编号属于输入图像C时，生成信息解码部209不会对前帧中指定图像生成方法的信息进行解码，从而作为指定图像生成方法的信息获得Z，因此使用所获得的Z进行解码处理。
因而，图像生成部207使用生成参考GOP解码部208在前帧获得的GOP编号和生成信息解码部209在前帧获得的图像生成方法的信息生成图像。
解码图像存储器206接受生成的图像，对GOP的编码数据进行解码时，存储解码图像，当不对GOP的编码数据进行解码时，存储由图像生成部207生成的图像。
通过以上的动作，即便GOP构成没有预先被确定的场合，本发明的视频编码装置也可对图像进行编码，且本发明的视频解码装置也可对编码数据进行解码。此时所获得的编码数据的GOP如图5所示的构成。
按照图示实施例说明了本发明，但本发明并不限于此。
例如，实施例中，为了确定C的图像的生成方法，使用了A和B的解码图像，但可以使用A和B的原图像。这时，视频编码装置无需包括图像A编码部102、图像A解码部103、图像B编码部106、图像B解码部107。
另外，实施例中，作为图像生成方法准备X和Y，但可只准备任一种方法。这时，视频编码装置无需包括生成信息编码部116，同时视频解码装置无需包括生成信息解码部209。
另外，实施例中，作为图像生成方法准备了Z，但可以不准备Z。这时，由于不需要存储C的解码图像，视频编码装置无需包括图像C解码部111和解码图像存储器112，同时视频解码装置无需包括解码图像存储器206。
另外，虽然在实施例中未作说明，但为图像生成而使用的摄像机输入视频预先被确定的场合，无需指定生成用的GOP，因此视频编码装置无需包括生成参考GOP编码部115，同时视频解码装置无需包括生成参考GOP解码部208。
另外，在实施例中，为生成C的图像，使用同时刻的A或B的图像，但可使用过去的A或B的图像，另外，也可使用多个过去图像。
工业上的利用可能性
由于在编码时判定视频再现侧是否能生成图像，并且能够对表示生成的信息进行编码，因此可控制在图像编码侧不对视频进行编码，从而可提高编码效率。因而，能够提供适合可变更观察位置或观察方向的视频技术等的视频编码/解码技术。

Claims (18)

1.一种视频编码方法，由多个GOP构成多个图像，将各GOP的图像作为一个视频进行编码，其中包括以下步骤：
确定是否对各GOP中包含的图像进行编码的GOP编码确定步骤；
对表示是否输出该GOP中包含的图像的编码数据的GOP编码有无信息进行编码的GOP编码有无信息编码步骤；以及
当输出该GOP中包含的图像的编码数据时，对该GOP中包含的图像进行编码的GOP内图像编码步骤。
2.如权利要求1所述的视频编码方法，其特征在于：在上述GOP编码确定步骤中，不依靠该GOP的编码数据的解码而通过判定利用其它1个以上的GOP生成的图像是否比由编码数据的解码而获得的图像更接近原图像，确定是否对该GOP中包含的图像进行编码。
3.如权利要求1所述的视频编码方法，其特征在于：还包括当不输出该GOP中包含的图像的编码数据时，对生成该GOP中包含的图像时使用的、指定其它1个以上GOP的生成参考GOP指定信息进行编码的生成参考GOP编码步骤。
4.如权利要求1所述的视频编码方法，其特征在于：还包括当不输出该GOP中包含的图像的编码数据时，对生成该GOP中包含的图像时使用的、指定图像生成方法的生成信息进行编码的生成信息编码步骤。
5.一种视频解码方法，由多个GOP构成多个图像，对将各GOP的图像作为一个视频进行编码来生成的编码数据进行解码，其中包括以下步骤：
对表示是否对各GOP中包含的图像的编码数据进行解码的GOP编码有无信息进行解码的GOP编码有无信息解码步骤；
当对该GOP中包含的图像的编码数据进行解码时，对GOP中包含的图像进行解码的GOP内图像解码步骤。
6.如权利要求5所述的视频解码方法，其特征在于：还包括当不对该GOP中包含的图像的编码数据进行解码时，对生成该GOP中包含的图像时使用的、指定其它1个以上的GOP的生成参考GOP指定信息进行解码的生成参考GOP解码步骤。
7.如权利要求5所述的视频解码方法，其特征在于：还包括当不对该GOP中包含的图像的编码数据进行解码时，对生成该GOP中包含的图像时使用的、指定图像生成方法的生成信息进行解码的生成信息解码步骤。
8.一种视频编码装置，由多个GOP构成多个图像，并将各GOP的图像作为一个视频进行编码，其中包括：
确定是否对各GOP中包含的图像进行编码的GOP编码确定部；
对表示是否输出该GOP中包含的图像的编码数据的GOP编码有无信息进行编码的GOP编码有无信息编码部；以及
当输出该GOP中包含的图像的编码数据时，对GOP中包含的图像进行编码的GOP内图像编码部。
9.如权利要求8所述的视频编码装置，其特征在于：在上述GOP编码确定部中，不依靠该GOP的编码数据的解码而通过判定利用其它1个以上的GOP生成的图像是否比由编码数据的解码而获得的图像更接近原图像，确定是否对该GOP中包含的图像进行编码。
10.如权利要求8所述的视频编码装置，其特征在于：还包括当不输出该GOP中包含的图像的编码数据时，对生成该GOP中包含的图像时使用的、指定其它1个以上的GOP的生成参考GOP指定信息进行编码的生成参考GOP编码部。
11.如权利要求8所述的视频编码装置，其特征在于：还包括当不输出该GOP中包含的图像的编码数据时，对生成该GOP中包含的图像时使用的、指定图像生成方法的生成信息进行编码的生成信息编码部。
12.一种视频解码装置，由多个GOP构成多个图像，对将各GOP的图像作为一个视频进行编码来生成的编码数据进行解码，其中包括：
对表示是否对各GOP中包含的图像的编码数据进行解码的GOP编码有无信息进行解码的GOP编码有无信息解码部；
当对该GOP中包含的图像的编码数据进行解码时，对GOP中包含的图像进行解码的GOP内图像解码部。
13.如权利要求12所述的视频解码装置，其特征在于：还包括当不对该GOP中包含的图像的编码数据进行解码时，对生成该GOP中包含的图像时使用的、指定1个以上的其它GOP的生成参考GOP指定信息进行解码的生成参考GOP解码部。
14.如权利要求12所述的视频解码装置，其特征在于：还包括当不对该GOP中包含的图像的编码数据进行解码时，对生成该GOP中包含的图像时使用的、指定图像生成方法的生成信息进行解码的生成信息解码部。
15.一种视频编码程序，令计算机执行用以实现权利要求1至权利要求4中任一项所述的视频编码方法的处理。
16.一种计算机可读的记录媒体，记录了令计算机执行用以实现权利要求1至权利要求4中任一项所述的视频编码方法的处理的视频编码程序。
17.一种视频解码程序，令计算机执行用以实现权利要求5至权利要求7中任一项所述的视频解码方法的处理。
18.一种计算机可读的记录媒体，记录了令计算机执行用以实现权利要求5至权利要求7中任一项所述的视频解码方法的处理视频解码程序。
CNA2005800050048A 2004-10-07 2005-09-30 视频编码方法及装置、视频解码方法及装置、它们的程序及记录这些程序的记录媒体 Pending CN1918917A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310078194.2A CN103179400B (zh) 2004-10-07 2005-09-30 视频编码方法及装置、视频解码方法及装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP294414/2004 2004-10-07
JP2004294414 2004-10-07

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201310078194.2A Division CN103179400B (zh) 2004-10-07 2005-09-30 视频编码方法及装置、视频解码方法及装置

Publications (1)

Publication Number Publication Date
CN1918917A true CN1918917A (zh) 2007-02-21

Family

ID=36142642

Family Applications (2)

Application Number Title Priority Date Filing Date
CNA2005800050048A Pending CN1918917A (zh) 2004-10-07 2005-09-30 视频编码方法及装置、视频解码方法及装置、它们的程序及记录这些程序的记录媒体
CN201310078194.2A Active CN103179400B (zh) 2004-10-07 2005-09-30 视频编码方法及装置、视频解码方法及装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201310078194.2A Active CN103179400B (zh) 2004-10-07 2005-09-30 视频编码方法及装置、视频解码方法及装置

Country Status (7)

Country Link
US (1) US8275048B2 (zh)
EP (1) EP1798981A4 (zh)
JP (1) JP4805160B2 (zh)
KR (1) KR100972222B1 (zh)
CN (2) CN1918917A (zh)
TW (1) TWI285054B (zh)
WO (1) WO2006038568A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7929560B2 (en) * 2005-07-15 2011-04-19 Panasonic Corporation Packet transmitting apparatus
MX2009000205A (es) * 2006-07-06 2009-03-23 Thomson Licensing Metodo y aparato para desacoplar el numero de cuadro y/o la cuenta del orden de imagen (poc) para la codificacion y decodificacion de video de multiples vistas.
ZA200900102B (en) 2006-07-06 2010-05-26 Thomson Licensing Method and apparatus for decoupling frame number and/or picture order count (poc) for multi-view video encoding and decoding
KR101609890B1 (ko) * 2008-09-18 2016-04-06 파나소닉 아이피 매니지먼트 가부시키가이샤 화상 복호 장치, 화상 부호화 장치, 화상 복호 방법, 화상 부호화 방법 및 프로그램
US10547860B2 (en) * 2015-09-09 2020-01-28 Avago Technologies International Sales Pte. Limited Video coding with trade-off between frame rate and chroma fidelity
CN111641824B (zh) * 2019-03-01 2022-08-05 杭州海康威视数字技术股份有限公司 视频倒放方法及装置

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02264522A (ja) * 1989-04-04 1990-10-29 Matsushita Electric Ind Co Ltd 符号化装置
JP3307969B2 (ja) * 1991-10-31 2002-07-29 ソニー株式会社 映像信号伝送装置
JPH0698312A (ja) * 1992-09-16 1994-04-08 Fujitsu Ltd 画像高能率符号化方式
JP3426668B2 (ja) * 1993-11-19 2003-07-14 三洋電機株式会社 動画像符号化方法
JPH07154799A (ja) * 1993-11-26 1995-06-16 Sanyo Electric Co Ltd 動画像符号化方法
US5767898A (en) * 1994-06-23 1998-06-16 Sanyo Electric Co., Ltd. Three-dimensional image coding by merger of left and right images
JPH09261653A (ja) 1996-03-18 1997-10-03 Sharp Corp 多視点画像符号化装置
JP3183155B2 (ja) * 1996-03-18 2001-07-03 株式会社日立製作所 画像復号化装置、及び、画像復号化方法
EP2257071B1 (en) * 1996-11-07 2012-08-22 Panasonic Corporation Image decoder
US6614846B1 (en) * 1996-12-06 2003-09-02 Matsushita Electric Industrial Co., Ltd. Method and apparatus for transmitting, encoding and decoding video signal and recording/reproducing method of optical disc
JP2952226B2 (ja) 1997-02-14 1999-09-20 日本電信電話株式会社 動画像の予測符号化方法および復号方法、動画像予測符号化または復号プログラムを記録した記録媒体、および、動画像予測符号化データを記録した記録媒体
US5991447A (en) * 1997-03-07 1999-11-23 General Instrument Corporation Prediction and coding of bi-directionally predicted video object planes for interlaced digital video
EP1061749B1 (en) * 1998-01-27 2010-04-07 Sharp Kabushiki Kaisha Moving picture decoder
US6137912A (en) 1998-08-19 2000-10-24 Physical Optics Corporation Method of multichannel data compression
JP2000278715A (ja) * 1999-03-24 2000-10-06 Minolta Co Ltd 立体画像表示データ生成方法、立体画像表示データ生成装置および立体画像表示データを記録したコンピュータ読み取り可能な記録媒体
TW555114U (en) 2002-09-02 2003-09-21 Chung Shan Inst Of Science Real-time three-dimensional image acquistion and reconstuction device
JP2004140630A (ja) 2002-10-18 2004-05-13 Fujitsu Ltd フレーム間引き処理を行うための画像圧縮方法及び装置
US20050185711A1 (en) * 2004-02-20 2005-08-25 Hanspeter Pfister 3D television system and method
US20060047674A1 (en) * 2004-09-01 2006-03-02 Mohammed Zubair Visharam Method and apparatus for supporting storage of multiple camera views

Also Published As

Publication number Publication date
TW200621032A (en) 2006-06-16
US8275048B2 (en) 2012-09-25
CN103179400A (zh) 2013-06-26
JP4805160B2 (ja) 2011-11-02
US20080317115A1 (en) 2008-12-25
KR20060118592A (ko) 2006-11-23
JPWO2006038568A1 (ja) 2008-05-15
KR100972222B1 (ko) 2010-07-23
EP1798981A1 (en) 2007-06-20
TWI285054B (en) 2007-08-01
WO2006038568A1 (ja) 2006-04-13
CN103179400B (zh) 2016-10-05
EP1798981A4 (en) 2011-03-16

Similar Documents

Publication Publication Date Title
CN1269361C (zh) B图像的直接模式运动矢量计算方法
CN1202650C (zh) 图象处理方法
CN1135845C (zh) 图像传送方法、图象处理方法、图象处理装置和数据存储介质
CN1254113C (zh) 图像编码装置、图像编码方法、图像解码装置、图像解码方法和通信装置
CN1941913A (zh) 用于跳跃图像的方法和设备
CN1806447A (zh) 图像编码装置、图像解码装置、图像编码方法、图像解码方法、图像编码程序、图像解码程序、记录图像编码程序的记录媒体、记录图像解码程序的记录媒体
CN1910931A (zh) 视频编码方法及装置、视频解码方法及装置、其程序及记录该程序的记录介质
CN1612614A (zh) 帧内预测编码方法
CN1922888A (zh) 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序和图像解码程序
CN1655621A (zh) 视频通信装置与方法
CN1705375A (zh) 预测编码器/解码器以及预测编码/解码方法
CN1366776A (zh) 解码器、解码方法、记录介质和程序
CN1703096A (zh) 预测编码/解码器、预测编码/解码方法和记录介质
CN1832575A (zh) 视频编码/解码方法和设备
CN101040535A (zh) 转换成中间格式的两步算术解码
CN1784003A (zh) 内容递送系统、通信装置、通信方法和程序
CN1909666A (zh) 运动检测装置
CN1319996A (zh) 图像编码和解码设备及其方法、图像记录和图像传送设备
CN1870440A (zh) 数据编码装置、解码装置、以及数据编码方法、解码方法
CN1918917A (zh) 视频编码方法及装置、视频解码方法及装置、它们的程序及记录这些程序的记录媒体
CN1288337A (zh) 用于自动转码编码的视频图象数据的方法和设备
CN1206535A (zh) 图象编码装置及方法、译码装置及方法及数据记录媒体
CN1199306A (zh) 图象编码·解码、装置以及程序记录媒体
CN1652608A (zh) 数据处理装置及其方法以及编码装置和解码装置
CN1240225C (zh) 图像编码装置以及图像编码方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20070221