JP4285431B2

JP4285431B2 - ビデオ情報編集装置、方法及びプログラム

Info

Publication number: JP4285431B2
Application number: JP2005102667A
Authority: JP
Inventors: 暁夫米山; 康弘滝嶋; 康之中島
Original assignee: KDDI Corp
Current assignee: KDDI Corp
Priority date: 2005-03-31
Filing date: 2005-03-31
Publication date: 2009-06-24
Anticipated expiration: 2025-03-31
Also published as: JP2006287444A

Description

本発明は、圧縮符号により符号化されたビデオ情報の編集に関し、より詳しくは、1つの又は複数のビデオ情報から、任意の時間範囲の情報であるシーンを切り出し、各シーンを結合して、新たなビデオ情報を生成するビデオ情報編集装置、方法及びプログラムに関する。

ビデオ信号の情報量は、音声や、文字等の情報量とは比較にならない程大きく、従って、ビデオ信号を、効率よく保存、配信又は送信を行うために、ビデオ信号は、通常、ＭＰＥＧ（ＭｏｔｉｏｎＰｉｃｔｕｒｅＥｘｐｅｒｔＧｒｏｕｐ）―１、ＭＰＥＧ−２又はＭＰＥＧ−４、Ｈ．２６４等に代表される圧縮符号化により符号化がなされる。

図１は、圧縮符号により符号化されたビデオ情報の構造を簡略化して示す図であり、（ａ）は、符号化順、すなわち、蓄積又は送信される順で表したものであり、（ｂ）は、画面への表示順で表したものである。

図１に示すように、ビデオ情報は、一連のＧＯＰ（ＧｒｏｕｐＯｆＰｉｃｔｕｒｅ）から構成され、各ＧＯＰは、Ｉ、Ｐ、Ｂの各ピクチャから構成される。ピクチャは、画面に表示される一枚の絵を表現する情報であり、Ｉピクチャは、イントラ符号、即ち、他のピクチャを参照せず、他のピクチャとは無関係に符号化されるピクチャであり、Ｐピクチャは、表示順での過去方向で、直近１枚のＩ又はＰピクチャを参照ピクチャとして予測を行う、片方向のインター符号により符号化されたピクチャであり、Ｂピクチャは、表示順での過去方向で、直近1枚のＩ又はＰピクチャと、未来方向で、直近1枚のＩ又はＰピクチャの計２枚のピクチャを参照ピクチャとして予測を行う、双方向でのインター符号により符号化されたピクチャである。ＧＯＰ（１）に属する各ピクチャと、各ピクチャが参照するピクチャの関係を図２に示す。

尚、符号化順、即ち、蓄積又は送信時の順番では、符号化処理の関係から、表示順でのＢピクチャは、参照ピクチャの後ろに入れ替えられることになる。

上記圧縮符号を用いて符号化された個々のビデオ情報から、任意のピクチャを開始位置とし、開始位置より表示順で未来側となる任意のピクチャを終了位置として指定し、表示順で、開始位置のピクチャから終了位置のピクチャまでの一連のピクチャからなるシーンを切り出し、切り出した複数のシーンを結合して、新たなビデオ情報を生成することを考えた場合、他のピクチャを参照しているピクチャ、即ち、Ｐピクチャ又はＢピクチャについて、切り出しに伴う参照ピクチャの欠落を補償する処理が必要となる。更に、参照ピクチャの欠落の補償処理に伴い、画像の品質劣化や、バッファオーバフロー又はアンダーフローが生じる可能性があり、それらに対処する処理も必要となる。

図３は、参照ピクチャ欠落の補償処理に伴う画像品質劣化について説明する図である。ＧＯＰは、蓄積順で、先頭のＩピクチャと、その後に続く複数のＰ又はＢピクチャで構成されるが、各ピクチャの符号化のビット量は、一般的に、双方向からの予測により符号化されるＢピクチャが一番少なく、続いて片方向からの予測により符号化されるＰピクチャが続き、他のピクチャの参照を行わないＩピクチャのビット量が一番多くなる。図３（ａ）に、その様子を示す。尚、図３では簡単のため、ＧＯＰがＩピクチャ及びＰピクチャのみで構成されるものとしている。

図３（ａ）に示す様に、Ｐ_６を切り出すシーンの先頭ピクチャとすると、Ｐ_６は、参照ピクチャの欠落を補償するために、Ｐ_６のビット量より大きいビット量のＩピクチャＩ_６に変更される。一般的に、ＭＰＥＧに代表される圧縮符号化においては、複号側でのバッファオーバフロー及びアンダーフローを回避するために、バッファモデルと呼ばれる、符号化ビット量の制限が存在する。従って、図３（ｂ）に示すように、単に、Ｐ_６からＩ_６へ変更したのみでは、バッファモデルの制限を超える可能性がある。これを回避するためには、図３（ｃ）に示すように、Ｐ_６からＩ_６へ変更したことによる使用ビット量の増加を、他のピクチャの符号化ビット量を削減することで調整する必要がある。

上記参照ピクチャ欠落の補償処理に伴う画像品質劣化等への対処については、幾つかの方式が提案されており、以下に説明する。尚、以下においては、ビデオ情報からシーンＡ及びシーンＢを切り出し、シーンＡの後ろに、シーンＢを結合する場合を例にして説明を行う。

図４は、特許文献１に記載のビデオ情報編集方法を説明する図である。図４（ａ）の上段に示すビデオ情報のＧＯＰ（Ａ１）内にシーンＡの最終ピクチャが指定されている。特許文献１では、ＧＯＰ（Ａ１）の前にあるＧＯＰ（Ａ０）総てと、ＧＯＰ（Ａ１）のシーンＡの最終ピクチャまでを一旦復号した上で、再度１つのＧＯＰとして、図４（ａ）の下段に示すＧＯＰ（Ａ’）の生成を行っている。

同様に、図４（ｂ）の上段に示すビデオ情報のＧＯＰ（Ｂ０）内にシーンＢの先頭ピクチャが指定されている。特許文献１では、ＧＯＰ（Ｂ０）の先頭ピクチャからＧＯＰ（Ｂ１）の最後までを一旦復号した上で、再度１つのＧＯＰとして、図４（ｂ）の下段に示すＧＯＰ（Ｂ’）の生成を行っている。

その後、ＧＯＰ（Ａ’）と、ＧＯＰ（Ｂ‘）の結合を行い、新たなビデオ情報を生成する。

図５は、特許文献２に記載のビデオ情報編集方法を説明する図であり、ビデオ情報を蓄積順で示している。（ａ）に示すように、ＧＯＰ（Ｂ１）のＢ_Ｂ４が、シーンＢの先頭ピクチャに指定されている。ＧＯＰ（Ｂ１）に属するピクチャを、表示順にならべると、
Ｂ_Ｂ１、Ｂ_Ｂ２、Ｉ_Ｂ１、Ｂ_Ｂ３、Ｂ_Ｂ４、Ｐ_Ｂ１、Ｂ_Ｂ５、Ｂ_Ｂ６、Ｐ_Ｂ２
であり、ＧＯＰ（Ｂ１）からシーンＢに必要なピクチャは表示順で、
Ｂ_Ｂ４、Ｐ_Ｂ１、Ｂ_Ｂ５、Ｂ_Ｂ６、Ｐ_Ｂ２
である。このとき、Ｂ_Ｂ４、Ｐ_Ｂ１が参照するＩ_Ｂ１が欠落するため、図５（ｂ）に示すようにＢ_Ｂ４及びＰ_Ｂ１を再符号化対象画像として選択する。

続いて、再符号化対象画像に割り振れるビット量を算出して、所定の画像品質を満足できるか否かを判定し、満足できない場合には、図５（ｃ）に示すように再符号化範囲を拡大する。その後再度、再符号化対象画像に割り振れるビット量を算出して、所定の画像品質を満足できるか否かを判定し、満足できない場合には、満足できるまで再符号化範囲の拡大を反復する。

特開平１１−１９６３７６号公報特開２００１−１９７５０４号公報

特許文献１の方法は、最終ピクチャ又は先頭ピクチャとして指定されたピクチャが属するＧＯＰを、常に隣接ＧＯＰと結合するというものであるが、画像情報は多種多様であり、常に結合することが画像劣化を抑えるために最適であるとは限らない。

特許文献２の方法は、事前に再符号化対象画像に割り振れるビット量を算出して、所定の画像品質を満足できるか否かを判定するが、実際の符号化により発生するビット量が、前記算出したビット量と異なる場合には画像の劣化が生じる可能性がある。

従って、本発明は、符号化されたビデオ情報から、任意の位置及び範囲のシーンを切り出して、切り出した複数のシーンを結合して、新たなビデオ情報を生成するビデオ情報編集装置及び方法において、従来技術より品質劣化を低減する装置及び方法を提供することを目的とする。

本発明におけるビデオ情報編集方法によれば、
他のピクチャを参照しないイントラ符号により符号化された１枚のピクチャと、他のピクチャを参照するインター符号により符号化された複数のピクチャにより構成されるＧＯＰ構造を有するビデオ情報から、第１のＧＯＰに属する第１のピクチャ及び第２のＧＯＰに属する第２のピクチャを指定し、第２のピクチャ以降のピクチャを第１のピクチャの後続ピクチャとして編集するビデオ情報編集方法であって、第１のピクチャと第２のピクチャの相関値を求め、第１の閾値以上であるか否かを判定する第１のステップと、第１の閾値以上である場合は、第２のピクチャを、第１のＧＯＰに属するようにインター符号で再符号化し、第１の閾値未満である場合は、第２のピクチャを、イントラ符号により再符号化する第２のステップとを有することを特徴とする。

本発明のビデオ情報編集方法における他の実施形態によれば、
再符号化した第２のピクチャのビット量に基づき、第２のＧＯＰに後続する第３のＧＯＰの全ピクチャを第２のピクチャと同一ＧＯＰとして再符号化するか否かを判断するステップを有することも好ましい。

本発明のビデオ情報編集方法における他の実施形態によれば、
再符号化した第２のピクチャのビット量に基づき、第２のＧＯＰ内で第２のピクチャより後のピクチャの再符号化に割当可能なビット量を算出する第３のステップと、前記割当可能なビット量から、第２のＧＯＰ内で第２のピクチャより後のピクチャの再符号化に使用する量子化パラメータを予測又は算出する第４のステップと、前記算出した量子化パラメータが第２の閾値以上である場合は、第２のＧＯＰ内で第２のピクチャより後のピクチャと、第２のＧＯＰに後続する第３のＧＯＰの全ピクチャを、第２のピクチャと同一ＧＯＰとなるように再符号化する第５のステップとを有することも好ましい。

本発明におけるビデオ情報編集装置によれば、
他のピクチャを参照しないイントラ符号により符号化された１枚のピクチャと、他のピクチャを参照するインター符号により符号化された複数のピクチャにより構成されるＧＯＰ構造を有するビデオ情報に対して、第１のＧＯＰに属する第１のピクチャ及び第２のＧＯＰに属する第２のピクチャを指定し、第２のピクチャ以降のピクチャを第１のピクチャの後続ピクチャとして編集するビデオ情報編集装置であって、第１のピクチャと第２のピクチャを復号する復号手段と、復号手段により復号された第１のピクチャと第２のピクチャの相関値を求める相関判定手段と、閾値を有し、前記相関値が閾値以上である場合はインター符号を、閾値未満である場合はイントラ符号を、第２のピクチャの再符号化のピクチャモードとして決定する制御手段と、制御手段の決定したピクチャモードに従い、復号手段により復号された第２のピクチャを再符号化する再符号化手段とを有することを特徴とする。

本発明によるビデオ情報編集装置は、コンピュータプログラムにより実現することも好ましい。

第１のピクチャと第２のピクチャの相関値が閾値以上である場合は、第２のピクチャを、第１のＧＯＰに属するようにインター符号で再符号化することで、再符号化による第２のピクチャの、再符号化に伴うビット量の増加を抑え、よって、第２のＧＯＰの第２のピクチャの後続ピクチャに対する符号化ビットの削減量を減らし、画像の品質劣化を抑える。

更に、第２のＧＯＰの後続ピクチャに割当可能なビット量から、第２のＧＯＰの第２のピクチャの後続ピクチャに設定できる量子化パラメータを予測し又は求め、予測し又は求めた量子化パラメータが閾値以上である場合は、所定の画像品質の維持が不可能として、第２のＧＯＰに後続する第３のＧＯＰの全ピクチャも第２のピクチャと同一ＧＯＰとなるように再符号化する。これにより、第３のＧＯＰのイントラピクチャが、インターピクチャとなり、符号化のビット量が減るため、他のインターピクチャに割当て可能なビット量が増大し、よって、量子化パラメータを小さくすることができ、画像品質劣化を抑える。

本発明を実施するための最良の実施形態について、以下では図面を用いて詳細に説明する。尚、以下では図６（ａ）に示すように、ビデオ情報ＡのＧＯＰ（Ａ１）のピクチャＡ３を、切り出しの最終ピクチャとして指定し、ビデオ情報Ａの先頭から指定した最終ピクチャＡ３までをシーンＡとし、ビデオ情報ＢのＧＯＰ（Ｂ１）のピクチャＢ３を、切り出しの先頭ピクチャとして指定し、ピクチャＢ３からビデオ情報Ｂの最終ピクチャまでをシーンＢとし、シーンＡの後ろにシーンＢを結合して新たなビデオ情報を生成する場合を例にして説明を行う。

また、以下の説明においては、Ｐピクチャと、Ｂピクチャとを区別せずにインターピクチャとして説明する。これは、本処理において、ＢピクチャとＰピクチャが問題になるのは、シーンＡにおいて、切り出しの最終ピクチャより後ろに位置するＰピクチャを参照しているＢピクチャが存在する場合のみであり、この場合は、後にブロック図を用いて説明するように、参照符号が欠落したＢピクチャを単にＰピクチャに変更し、それ以外の処理では、ＢピクチャとＰピクチャを区別する必要がないからである。

図７は、本発明によるビデオ編集方法のフロー図である。

まず、切り出されたシーンＡの最終ピクチャであるピクチャＡ３と、切り出されたシーンＢの先頭ピクチャであるピクチャＢ３の相関値を求め（Ｓ１）、相関値が所定の閾値以上であるか否かを判定する（Ｓ２）。

相関値が閾値以上である場合は、ピクチャＢ３を、ピクチャＡ３と同じＧＯＰとすることで、ピクチャＢ３の符号量の増加を抑えることができるため、ピクチャＢ３を、インターピクチャＢ‘３として再符号化する（Ｓ４）。また、相関が閾値未満である場合は、ピクチャＡ３と同じＧＯＰとしても、ピクチャＢ３の符号量の増加を抑えることはできないため、ピクチャＢ３から新しいＧＯＰが始まるものとし、イントラピクチャＢ’３として再符号化する（Ｓ３）。

Ｓ３又はＳ４で再符号化したピクチャＢ’３の符号化のビット量から、バッファオーバフロー及びアンダーフローを発生させない、ピクチャＢ４及びＢ５に割当可能なビット量が算出でき、この値を元にピクチャＢ４及びＢ５の画像品質を所定の値以上確保できるか否かを判定する（Ｓ５）。

確保できる場合は、ピクチャＢ４及びピクチャ５を、ピクチャＢ‘３と同一ＧＯＰのインターピクチャＢ’４及びＢ’５として再符号化し（Ｓ６）、確保できない場合は、後続のＧＯＰであるＧＯＰ（Ｂ２）のピクチャと併せたピクチャＢ４〜Ｂ９を、ピクチャＢ‘３と同一ＧＯＰのインターピクチャＢ’４〜Ｂ‘９として再符号化する（Ｓ７）。

図８は、図６のビデオ情報を入力としたときの出力ビデオ情報を示す図である。図８（ａ）は、図７のＳ２で相関が閾値以上であり、Ｓ５で品質維持可能と判断された場合の出力を示し、（ｂ）は、図７のＳ２で相関が閾値未満であり、Ｓ５で品質維持可能と判断された場合の出力を示し、（ｃ）は、図７のＳ２で相関が閾値以上であり、Ｓ５で品質維持不可能と判断された場合の出力を示し、（ｄ）は、図７のＳ２で相関が閾値未満であり、Ｓ５で品質維持不可能と判断された場合の出力を示している。

図７のＳ１における相関値は、ピクチャＡ３とＢ３の同一画素間の絶対差分和や、ブロック単位での動き補償予測誤差の画面内総和等の値を用いる。また、輝度情報のみで行うことも、輝度情報及び色差情報との和により行うことも可能である。既に述べたように、先行側であるシーンＡの最終ピクチャと、後続するシーンＢの先頭ピクチャの相関が高い場合には、シーンＢの先頭ピクチャを、シーンＡの最終ピクチャを参照ピクチャとしてインター符号化することで、イントラピクチャが指定された場合以外は再符号化が必須であるシーンＢの先頭ピクチャの、再符号化によるビット量の増加を抑えることができる。よって、シーンＢの先頭ピクチャの符号化ビット量増分を補償するために、シーンＢの先頭ピクチャと同一ＧＯＰに属する後続ピクチャの符号化ビットから削減するビットの削減量を減らすことができ、画像品質の劣化を防止できる。

図７のＳ５での、画像品質維持が可能であるか否かの判定は、量子化パラメータにより行う。量子化パラメータとは、量子化ステップを規定するための値であり、量子化パラメータを大きくするほど、符号化のためのビット量は減少するが、量子化雑音が増大して画像品質が劣化する。まず、先に再符号化したピクチャＢ３の符号化のビット量から、バッファオーバフロー及びアンダーフローを発生させない、ピクチャＢ４及びＢ５に割当可能なビット量を算出する。このビット量を達成するために、ピクチャＢ４及びＢ５の再符号化のために使用する量子化パラメータを予測する又は求める。続いて、所定の量子化パラメータ値を閾値とし、前記求めた量子化パラメータが閾値以上である場合は、画像品質維持不可能と判断し、閾値未満である場合は、画像品質維持可能と判断する。

図７のＳ５において、画像の品質維持不可能と判定した場合は、後続ＧＯＰであるＧＯＰ（Ｂ２）の全ピクチャを、シーンＢの切り出し先頭ピクチャと同一ＧＯＰとなるように再符号化を行う。このとき、ＧＯＰ（Ｂ２）のイントラピクチャは、イントラピクチャより符号化ビット量の少ないインターピクチャに変更されるため、結果他のインターピクチャに割当可能なビット量が増大し、量子化パラメータ値を小さくすることが可能となる。

図９は、本発明によるビデオ編集装置のブロック図である。図９によると、ビデオ情報編集装置は、復号判定部１と、復号部２と、相関判定部３と、制御部４と、再符号化部５とを有し、編集対象であるビデオ情報Ａ及びＢは、復号判定部１に入力される。尚、以下の説明においても図６に示すように、シーンＡの最終ピクチャはＧＯＰ（Ａ１）に属し、シーンＢの先頭ピクチャはＧＯＰ（Ｂ１）に属し、ＧＯＰ（Ｂ２）はＧＯＰ（Ｂ１）の後続ＧＯＰである場合を例にして説明する。

復号判定部１は、ビデオ情報Ａ及びＢの切り出し位置情報を有し、切り出し位置情報に基づき、ビデオ情報Ａについては、切り出しにより参照符号の欠落が生じるピクチャ及び切り出し最終ピクチャを復号するために必要な情報を復号部２に出力する。また、ビデオ情報Ｂについては、切り出し先頭ピクチャが属するＧＯＰ（Ｂ１）のうち、切り出し先頭ピクチャ以降を復号するために必要な情報を復号部２に出力する。

また、制御部４からの復号制御情報による指示に基づき、シーンＢのうち、切り出し先頭ピクチャが属するＧＯＰ（Ｂ１）に続くＧＯＰ（Ｂ２）のピクチャを復号するために必要な情報についても復号部２に出力する。更に、シーンＡに属する全ピクチャと、シーンＢに属する全ピクチャを、そのまま再符号化部５に出力する。

復号部２は、復号判定部１から入力されたピクチャの復号を行い、復号したピクチャを相関判定部３と再符号化部５に出力する。またこのとき、ＧＯＰ（Ｂ１）の切り出し先頭ピクチャ以降の各ピクチャについて、ピクチャモード、符号化のビット量及び量子化パラメータを制御部４に通知する。

相関判定部３は、復号部２からのビデオ情報Ａの切り出し最終ピクチャと、ビデオ情報Ｂの切り出し先頭ピクチャとの同一画素間の絶対差分和や、ブロック単位での動き補償予測誤差の画面内総和等の相関値を算出して、制御部４に通知する。

制御部４は、相関判定部３からの相関値に基づき、ビデオ情報Ｂの切り出し先頭ピクチャを、ビデオ情報Ａの切り出し最終ピクチャが属するＧＯＰ（Ａ１）と同一のＧＯＰとするか否かを所定の閾値に基づき判定して、先頭ピクチャの元の量子化パラメータと共に、同一ＧＯＰとする場合はインターピクチャを、異なるＧＯＰとする場合はイントラピクチャを再符号化部５に通知する。

また、再符号化部５から通知される、切り出し先頭ピクチャの再符号化により発生したビット量及び仮想バッファ占有量情報と、復号部２からのピクチャモード、符号化ビット量及び量子化パラメータとに基づき、ＧＯＰ（Ｂ１）の切り出し先頭ピクチャより後の各ピクチャに割当可能なビット量を算出し、前記ビット量から使用する量子化パラメータを予測又は算出して、量子化パラメータに基づき、画像品質維持が可能であるか否かを、既に述べた方法で判定する。

画像品質維持が可能である場合は、ビデオ情報Ｂの切り出し先頭ピクチャと同一ＧＯＰ（Ｂ１）内の各ピクチャのピクチャモード及び量子化パラメータを、再符号化部５に通知する。この場合は、後続のＧＯＰ（Ｂ２）は変更されない。

画像品質維持が可能でない場合は、復号制御情報により、ビデオ情報Ｂの切り出し先頭ピクチャが属するＧＯＰ（Ｂ１）に続くＧＯＰ（Ｂ２）の全ピクチャを復号するために必要な情報を、復号部２に出力するように、復号判定部１に指示し、ビデオ情報Ｂの切り出し先頭ピクチャに続くピクチャから、切り出し先頭ピクチャが属するＧＯＰ（Ｂ１）に続くＧＯＰ（Ｂ２）の最後のピクチャまでの、ピクチャモード及び量子化パラメータを、再符号化部５に通知する。

再符号化部５は、ビデオ情報Ａについては、復号部２から入力される、切り出しによる参照符号の欠落が生じたピクチャを再符号化して、復号判定部１から直接入力されるＧＯＰ（Ａ１）内の符号化された対応するピクチャと置き換える。

ビデオ情報Ｂについては、制御部４の指示に基づき、シーンＢの切り出し先頭ピクチャから先頭ピクチャが属するＧＯＰ（Ｂ１）の最終ピクチャまで、或いは、シーンＢの切り出し先頭ピクチャから、先頭ピクチャが属するＧＯＰ（Ｂ１）の後続ＧＯＰ（Ｂ２）の最終ピクチャまで再符号化する。

続いて、シーンＢの再符号化したピクチャを、シーンＡの最終ピクチャの後ろに結合し、更に、復号判定部１から入力されるシーンＢの符号化されたピクチャのうち、再符号化部で再符号化されたピクチャ以降のピクチャを再符号化したピクチャの後に結合して出力し、図８に示す編集後のビデオ情報を得る。

ビデオ情報の簡略化した構造を示す図である。図１のＧＯＰ（１）の各ピクチャの参照ピクチャを示す図である。参照ピクチャ欠落の補償処理に伴う画像品質劣化について説明する図である。従来技術によるビデオ情報編集方法を説明する図である。従来技術によるビデオ情報編集方法を説明する図である。シーンＡ及びシーンＢのピクチャを示す図である。本発明によるビデオ編集方法のフロー図である。図６のビデオ情報を入力としたときの出力ビデオ情報を示す図である。本発明によるビデオ編集装置のブロック図である。

符号の説明

１復号判定部
２復号部
３相関判定部
４制御部
５再符号化部

Claims

他のピクチャを参照しないイントラ符号により符号化された１枚のピクチャと、他のピクチャを参照するインター符号により符号化された複数のピクチャにより構成されるＧＯＰ構造を有するビデオ情報から、
第１のＧＯＰに属する第１のピクチャ及び第２のＧＯＰに属する第２のピクチャを指定し、第２のピクチャ以降のピクチャを第１のピクチャの後続ピクチャとして編集するビデオ情報編集方法であって、
第１のピクチャと第２のピクチャの相関値を求め、第１の閾値以上であるか否かを判定する第１のステップと、
第１の閾値以上である場合は、第２のピクチャを、第１のＧＯＰに属するようにインター符号で再符号化し、第１の閾値未満である場合は、第２のピクチャを、イントラ符号により再符号化する第２のステップと、
を有することを特徴とするビデオ情報編集方法。
再符号化した第２のピクチャのビット量に基づき、第２のＧＯＰに後続する第３のＧＯＰの全ピクチャを第２のピクチャと同一ＧＯＰとして再符号化するか否かを判断するステップを有することを特徴とする請求項１に記載のビデオ情報編集方法。
再符号化した第２のピクチャのビット量に基づき、第２のＧＯＰ内で第２のピクチャより後のピクチャの再符号化に割当可能なビット量を算出する第３のステップと、
前記割当可能なビット量から、第２のＧＯＰ内で第２のピクチャより後のピクチャの再符号化に使用する量子化パラメータを予測又は算出する第４のステップと、
前記算出した量子化パラメータが第２の閾値以上である場合は、第２のＧＯＰ内で第２のピクチャより後のピクチャと、第２のＧＯＰに後続する第３のＧＯＰの全ピクチャを、第２のピクチャと同一ＧＯＰとなるように再符号化する第５のステップと、
を有することを特徴とする請求項１に記載のビデオ情報編集方法。
他のピクチャを参照しないイントラ符号により符号化された１枚のピクチャと、他のピクチャを参照するインター符号により符号化された複数のピクチャにより構成されるＧＯＰ構造を有するビデオ情報に対して、
第１のＧＯＰに属する第１のピクチャ及び第２のＧＯＰに属する第２のピクチャを指定し、第２のピクチャ以降のピクチャを第１のピクチャの後続ピクチャとして編集するビデオ情報編集装置としてコンピュータを機能させるプログラムであって、
コンピュータに、
第１のピクチャと第２のピクチャの相関値を求め、閾値以上であるか否かを判定する第１のステップと、
閾値以上である場合は、第２のピクチャを、第１のＧＯＰに属するようにインター符号で再符号化し、閾値未満である場合は、第２のピクチャを、イントラ符号により再符号化する第２のステップと、
を実行させることを特徴とするプログラム。
他のピクチャを参照しないイントラ符号により符号化された１枚のピクチャと、他のピクチャを参照するインター符号により符号化された複数のピクチャにより構成されるＧＯＰ構造を有するビデオ情報に対して、
第１のＧＯＰに属する第１のピクチャ及び第２のＧＯＰに属する第２のピクチャを指定し、第２のピクチャ以降のピクチャを第１のピクチャの後続ピクチャとして編集するビデオ情報編集装置であって、
第１のピクチャと第２のピクチャを復号する復号手段と、
復号手段により復号された第１のピクチャと第２のピクチャの相関値を求める相関判定手段と、
閾値を有し、前記相関値が閾値以上である場合はインター符号を、閾値未満である場合はイントラ符号を、第２のピクチャの再符号化のピクチャモードとして決定する制御手段と、
制御手段の決定したピクチャモードに従い、復号手段により復号された第２のピクチャを再符号化する再符号化手段と、
を有することを特徴とするビデオ情報編集装置。