JP2007174207A - 動画像処理装置 - Google Patents

Abstract

【課題】 記録時のビットレートにおける動画像の処理データ量を圧迫することなく，ランダムアクセスや編集が可能な動画像処理装置を提供する。
【解決手段】 上記動画像処理装置は，上記ストリームの復号に用いられる復号パラメータセットを生成する復号パラメータセット生成手段（１１２）と，上記復号パラメータセット生成手段により生成された上記復号パラメータセットを基にファイル化し，復号パラメータセットファイルを作成する第１のファイル作成手段（１１５）と，符号化された上記ストリームを基にファイル化し，動画像ファイルを作成する第２のファイル作成手段（１１６）と，第１のファイル作成手段及び上記第２のファイル作成手段により作成された復号パラメータセットファイルと動画像ファイルとを記録媒体に記録する記録媒体記録手段（１２８）とを備える。
【選択図】 図１

Description

本発明は，動画像処理装置に関する。

近年，情報技術の発達に伴い，ディジタル化された動画像などの動画像データを高品質，高圧縮率で伝送し，再生する技術が開発されている。そのなかの一つとして，例えば，Ｈ．２６４が存在している。

上記Ｈ．２６４とは，２００４年にＩＴＵ−Ｔ（国際電気通信連合・電気通信標準化セクタ）とＩＳＯ（国際標準化機構）が共同で標準化された，動画像コーデックの規格であり，ＭＰＥＧ４ ＡＶＣとも呼ばれている。

上記Ｈ．２６４は，ＭＰＥＧ−２の２倍以上，ＭＰＥＧ−４の１．５倍以上といわれる高いデータ圧縮率により，サイズをＭＰＥＧ−２の約半分に圧縮できる。また，同一のビットレートでも，これまでの動画像形式よりも高画質が実現できるので，映画や，コンサート，地上ディジタルテレビ放送などの大規模で高画質コンテンツから，コンパクトで高画質な動画像が求められる携帯電話用の動画像配信フォーマットまで，幅広い普及が期待されている。

なお，Ｈ．２６４では，ＳＰＳ（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ），ＰＰＳ（Ｐｉｃｔｕｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）と呼ばれるパラメータセット（又は，単にパラメータ）を使用する。上記双方のパラメータセットに含まれるパラメータの一例を示すと図２０のようになる。

上記ＳＰＳに含まれるパラメータの一例としては，図２０に示すように，ビットストリームのプロファイルを示す「ｐｒｏｆｉｌｅ＿ｉｄｃ」と，ビットストリームがベースラインプロファイルでデコード可能を示す「ｃｏｎｓｔｒａｉｎｔ＿ｓｅｔ０＿ｆｌａｇ」と，ビットストリームがメインプロファイルでデコード可能を示す「ｃｏｎｓｔｒａｉｎｔ＿ｓｅｔ１＿ｆｌａｇ」と，ビットストリームが拡張プロファイルでデコード可能を示す「ｃｏｎｓｔｒａｉｎｔ＿ｓｅｔ２＿ｆｌａｇ」と，ビットストリームのレベルを示す「ｌｅｖｅｌ＿ｉｄｃ」とが含まれている。

また，ＰＰＳに含まれるパラメータの一例としては，図２０に示すように，ＰＰＳのＩＤ（識別子）を示す「ｐｉｃ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ」と，当該ＰＰＳが参照するＳＰＳのＩＤを示す「ｓｅｑ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ」と，エントロピー符号（算術符号化）のモードをフラグとして示す「ｅｎｔｒｏｐｙ＿ｃｏｄｉｎｇ＿ｍｏｄｅ＿ｆｌａｇ」とが含まれている。

上記Ｈ．２６４の規格上，ＳＰＳ，ＰＰＳは，ストリームの先頭にのみ含まれれば良いが，先頭以外のフレームから再生，すなわちランダムアクセスをしようとしても，その再生開始するフレームを復号するためのＳＰＳ，ＰＰＳが存在しないため，再生することができない，という問題点があった。

かかる解決手段として，所定のアクセスユニット毎に上記ＳＰＳ，ＰＰＳを付加し，記録することで，ランダムアクセス時には，上記ＳＰＳ，ＰＰＳが付加されたアクセスユニット単位に復号し，再生する動画像符号化装置が存在する（例えば，特許文献１，参照。）。

特開２００４−２４８２５５号公報

しかしながら，特許文献１に記載の動画像符号化装置では，アクセスユニット毎に複数のＳＰＳ，ＰＰＳを付加するため，動画像記録時において上記ＳＰＳ，ＰＰＳを付加する分のデータ量だけ，ビットレートにおける動画像に割当てられた処理データ量を圧迫することになる。そのため，動画の圧縮効率が悪化し，その結果，圧縮された動画像の画質が低下してしまう，という問題があった。

また，上記ＳＰＳ，ＰＰＳが挿入されたアクセスユニット毎の再生・編集に限定されてしまうため，既に記録時にランダムアクセス，編集可能な位置が決まってしまい，利用者の利便性を低下させてしまう恐れがあった。

本発明は，上記問題点に鑑みてなされたものであり，本発明の目的は，記録時のビットレートにおける動画像の処理データ量を圧迫することなく，ランダムアクセスや編集が可能な，新規かつ改良された動画像処理装置を提供することである。

上記課題を解決するため，本発明の第１の観点によれば，上記動画像データを符号化しストリームを生成する動画像処理装置が提供される。上記動画像処理装置は，上記ストリームの復号に用いられる復号パラメータセットを生成する復号パラメータセット生成手段と；上記復号パラメータセット生成手段により生成された上記復号パラメータセットを基にファイル化し，復号パラメータセットファイルを作成する第１のファイル作成手段と；符号化された上記ストリームを基にファイル化し，動画像ファイルを作成する第２のファイル作成手段と；上記第１のファイル作成手段及び上記第２のファイル作成手段により作成された復号パラメータセットファイルと動画像ファイルとを記録媒体に記録する記録媒体記録手段とを備えることを特徴としている。かかる構成によれば，復号パラメータセットファイルと動画像ファイルとを記録媒体に別ファイルとして記録することで，動画像に対するビットレートを落とさずに画質の低下を最小限にすることができる。

上記第１のファイル作成手段は，さらに上記復号パラメータセットファイルを基に，その復号パラメータセットファイルのデータ量を示す復号パラメータセットデータ量情報を生成し；上記記録媒体記録手段は，上記復号パラメータセットデータ量情報と上記動画像ファイルとを，記録媒体に記録するようにしてもよい。

上記記録媒体に記録される動画像ファイルの動画像ストリームの先頭には，上記復号パラメータセットが付与されていないように構成しても良い。

また，上記課題を解決するために，本発明の別の観点によれば，記録媒体に記録された動画像ファイルを読み出す記録媒体読出手段と；上記記録媒体読出手段により読み出された上記動画像ファイルからペイロード部分である動画像ストリームを抽出する動画像ストリーム抽出手段と；上記動画像ストリームの先頭に付与されたパラメータセットであり，上記動画像ストリームの復号に用いられる復号パラメータセットを抽出する復号パラメータセット抽出手段と；上記復号パラメータセットを，上記動画像ストリームの復号開始する位置に該当するピクチャの前に挿入する挿入手段と；上記動画像ストリームを読み出して，その動画像ストリームに挿入された上記復号パラメータセットを基に，上記動画像ストリームを復号する復号手段とを備えることを特徴とする動画像処理装置が提供される。かかる構成によれば，任意の位置から動画像を再生することができる。なお，上記挿入手段による挿入先は，例えば，動画像ストリームに構成されるＩＤＲ（Instantaneous Decoder Refresh）ピクチャの直前である。

上記記録媒体には，動画像ストリームの復号に用いられる復号パラメータセットがファイル化された復号パラメータセットファイルが記録されており，上記記録媒体読出手段は，上記記録媒体から上記動画ファイルと上記復号パラメータセットファイルとを別ファイルとして読み出し，上記復号パラメータセット抽出手段は，上記記録媒体から読み出された上記復号パラメータセットファイルを基にして上記復号パラメータセットを抽出するように構成しても良い。

上記記録媒体に記録される動画像ファイルの動画像ストリームの先頭には，上記復号パラメータセットが付与されていないように構成しても良い。

また，上記復号パラメータセットは，所定の間隔で繰り返し上記挿入手段により挿入されるようにしてもよい。動画像ストリームの先頭からでなく任意の位置から動画像を再生することができる。

また，上記動画像処理装置は，外部にデータを出力することが可能なネットワーク通信手段を備え，上記挿入手段は，上記復号パラメータセットを，上記動画像ストリームの復号開始する位置に該当するピクチャの前に挿入した後，上記ネットワーク通信手段に出力するように構成しても良い。

上記挿入手段により挿入される復号パラメータセットは，上記動画像ストリームに構成されるＩＤＲピクチャの前であるようにしてもよい。

また，上記復号開始位置は，動画像ストリームを再生する再生開始位置として利用者により選択された位置に該当するようにしてもよい。

上記挿入手段は，上記ネットワークに上記外部から所定装置が接続するのを確認した後，上記復号パラメータセットを上記動画像ストリームに挿入するようにしてもよい。かかる構成により，外部装置は任意の位置から動画像を復号し再生することができる。

上記挿入手段は，所定の間隔で上記復号パラメータセットを上記動画像ストリームに挿入するようにしてもよい。かかる構成により，外部装置は任意の位置から動画像を復号し再生することができる。

以上説明したように，本発明によれば，記録時のビットレートにおける動画像のデータ量を圧迫することなく，ランダム再生やランダム編集が可能となる。

以下，本発明の好適な実施の形態について，添付図面を参照しながら詳細に説明する。なお，以下の説明及び添付図面において，略同一の機能及び構成を有する構成要素については，同一符号を付することにより，重複説明を省略する。

（第１の実施の形態について）
まず，図１を参照しながら，第１の実施の形態にかかる動画像記録装置（又は，動画像処理装置）について説明する。図１は，第１の実施の形態にかかる動画像記録装置の概略的な構成の一例を示すブロック図である。

図１に示すように，動画像記録装置１０１には，撮像部１１１と，エンコーダ１１２と，制御部１１３と，パラメータセットであるＳＰＳ，ＰＰＳを抽出する抽出部１１４と，パラメータファイル作成部（又は，第１のファイル作成手段）１１５と，動画像ファイル作成部（又は，第２のファイル作成手段）１１６と，記録媒体書込部１２８とが備わっている。

撮像部１１１は，ズームやワイド撮影機能などを具備し，被写体を撮像した動画像データをエンコーダ１１２に出力する。また，撮像部１１１は，光学部品と，撮像素子とを少なくとも備えている。

上記光学部品は，レンズ，または不要な波長を除去する光学フィルタであり，例えば，ＮＤフィルタなどが挙げられる。被写体から入射し，光学部品を透過した光は，撮像素子に取り込まれ，電気信号に変換される。

また，上記撮像素子（撮像デバイス）は，受光面に２次元的に設けられた光電変換素子からなる複数の画素により，被写体から受光した光学像を光電変換して電気的な動画像データとして出力することが可能である。例えば，撮像素子は，多種からなるＣＣＤなどの固体撮像デバイスが挙げられる。

なお，第１の実施の形態にかかる撮像部１１１は，被写体の撮影により動画像データを出力する場合を例に挙げて説明したが，かかる例に限らず，例えば，撮像部１１１は，マイクを備えて，動画像と音声とを出力しても良い。

上記制御部１１３は，動画像記録装置１０１のエンコーダ１１２，抽出部１１４，パラメータファイル作成部１１５，動画像ファイル作成部１１６，および記録媒体書込部１２８の処理を制御する。

上記撮像部１１１から入力された動画像データは，Ｈ．２６４方式で符号化するエンコーダ１１２によりエンコードされる。

上記エンコーダ１１２によりエンコードされた動画像ストリームは，抽出部１１４に入力される。

上記抽出部１１４は，入力した動画像ストリームからＳＰＳ（Ｓｅｑｕｅｎｃｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ），ＰＰＳ（Ｐｉｃｔｕｒｅ Ｐａｒａｍｅｔｅｒ Ｓｅｔ）のパラメータセット（復号パラメータセット）を抽出する。なお，上記ＳＰＳ，ＰＰＳの抽出については，後述する。

また，上記抽出部１１４は，エンコーダ１１２から入力する動画像ストリームを動画像ファイル作成部１１６に出力している。

次に，上記パラメータファイル作成部１１５は，抽出部１１４により抽出されたＳＰＳ，ＰＰＳを入力すると，そのＳＰＳ，ＰＰＳをファイル化し，ＳＰＳ，ＰＰＳファイル（復号パラメータセットファイル）を作成する。

また，上記動画像ファイル作成部１１６は，抽出部１１４から入力する動画像をファイル化し，動画像ファイルを作成する。

上記パラメータファイル作成部１１５及び動画像ファイル作成部１１６は，記録媒体１３１のフォーマット（例えば，ＦＡＴ１６，ＦＡＴ３２など）に対応するように，データをファイル化する。

上記記録媒体書込部１２８は，上記パラメータファイル作成部１１５及び動画像ファイル作成部１１６でファイル化されたＳＰＳ，ＰＰＳファイルと，動画像ファイルとを，記録媒体１３１に書き込んで，記録する。つまり，記録媒体１３１には，上記ＳＰＳ，ＰＰＳファイルと，動画像ファイルとが，別ファイルとして記録されている。

また，記録媒体書込部１２８は，例えば，ＳＰＳ，ＰＰＳファイルを先に記録媒体１３１に書込んで，動画像ファイルを順に記録媒体１３１に書き込むなど，別ファイルとして書き込むことにより，動画像ファイルに対するビットレート低下を防止することができる。即ち，動画像ファイルの書込では動画像以外のＳＰＳ，ＰＰＳのようなヘッダ情報の処理データ量を低減できるため，動画像ファイルに対するビットレートの処理データ量を最大限に割り当てることができ，画質の低下を最小限に留めることができる。

次に，図２を参照しながら，図１に示す抽出部１１４について，より詳細に説明する。なお，図２は，図１に示す抽出部の概略的な構成を示すブロック図である。

図２に示すように，抽出部１１４は，ストリーム解析部２０１と，カウンター２０３と，ＳＰＳ，ＰＰＳ総データ量設定部２０５と，比較器２０７と，出力選択部２０９とを備えている。

上記ストリーム解析部２０１にて，制御部１１３からエンコード開始信号が送られると，まずエンコーダ１１２から入力する動画像ストリームの解析を行う。

ストリーム解析部２０１でＳＰＳが検出されると，カウンター２０３にて，ＳＰＳ，ＰＰＳのデータ量のカウントが開始される。

また，ストリーム解析部２０１では，動画像ストリームの解析結果をＳＰＳ，ＰＰＳ総データ量設定部２０５に送信する。

上記ＳＰＳ，ＰＰＳ総データ量設定部２０５では，ストリーム解析部２０１から受信した解析結果を基に，ＳＰＳ，ＰＰＳの総データ量を算出し，比較器２０７に送信する。

比較器２０７は，上記算出されたＳＰＳ，ＰＰＳの総データ量と，カウンター２０３からのカウンター値とを比較し，比較結果を出力選択部２０９に出力する。

出力選択部２０９は，比較器２０７からの比較結果に従って，下記式１の場合には，データ出力先をパラメータファイル作成部１１５側に切り替え，ＳＰＳ，ＰＰＳデータをパラメータファイル作成部１１５に出力し，下記式２の場合には，データ出力先を動画像ファイル作成部１１６側に切り替え，動画像データを動画像ファイル作成部１１６に出力する。

カウンター値 ≧ 設定値（総データ量） …（式１）
カウンター値 ＜ 設定値（総データ量） …（式２）

ここで，上記抽出部１１４によるＳＰＳ，ＰＰＳの抽出処理の具体例を以下に示す。

ストリーム解析部２０１により，profile_idc(8bit),constraint_set1_flag(1bit),constraint_set0_flag(1bit),など固定長ｂｉｔ数のパラメータのデータ量と，seq_parameter_set_idやlog2_max_frame_num_minus4など指数ゴロム(ExponentialGolomb)符号で表されるパラメータやループ構造，条件分岐を解析し得られたデータ量を足し合わせ得られたデータ量に更にrbsp_trailing_bitを付加したデータ量をＳＰＳのデータ量とする。

同様に，pic_parameter_set_id , seq_parameter_set_idなど，指数ゴロム(Exponential Golomb)符号で表されるパラメータやループ構造，条件分岐を解析し得られたデータ量と，entropy_coding_mode_flag(1bit),pic_order_present_flag(1bit)など固定長ｂｉｔ数のパラメータのデータ量を，足し合わせることにより得られたデータ量に，rbsp_trailing_bitを付加したデータ量をＰＰＳのデータ量とする。

上記ＳＰＳ
とＰＰＳのデータ量をＳＰＳ，ＰＰＳ総データ量設定部２０５へ転送する。比較器２０７ではＳＰＳ，ＰＰＳ総データ量設定部２０５の値と，カウンター２０３の値を比較し，カウンター値＜設定値の場合はＳＰＳ,ＰＰＳと判断し，データをパラメータファイル作成部１１５に出力し，カウンター値≧設定値の場合は動画像データと判断し，データを動画像ファイル作成部１１６に出力する。なお，詳細は，H.264 規格書(ITU-T 勧告H.264 またはISO/IEC 国際標準14496-10)を参照のこと(ITU-T勧告H.264 03/2005 版p50〜p53など)。

次に，記録媒体書込部１２８により記録媒体１３１に書き込まれるデータ構造について説明すると，図３に示すように，動画像ファイルの先頭にＳＰＳ，ＰＰＳが付与されている場合と，付与されていない場合とが存在する。

また，図３に示すように，動画像ファイルには，１又は２以上のピクチャ３００（３００−１〜３００−ｎ）が含まれている。なお，上記ピクチャには，例えば，Ｉピクチャ（フレーム内符号化ピクチャ），Ｐピクチャ（フレーム間順方向予測符号化画像），Ｂピクチャ（双方向予測符号化画像）のタイプが存在する。

図３（ａ）では，動画像ファイルの先頭にＳＰＳ，ＰＰＳが付加された場合を示し，図３（ｂ）では，動画像ファイルの先頭にＳＰＳ，ＰＰＳが付加されていない場合のデータ構造を示している。

なお，動画像ファイルの先頭のＳＰＳ，ＰＰＳについては，例えば，動画像ファイル作成部１１６により，当該ＳＰＳ，ＰＰＳが除去されれば，図３（ｂ）のようになり，そのままファイル化されれば，図３（ａ）のようになるが，かかる例に限定されない。

図４に示すように，記録媒体１３１には，例えば，ｍｏｖｅ−１．ａｖｉ（動画像ファイル）とｈｅａｄ−１．ｄａｔ（ＳＰＳ，ＰＰＳファイル）とを一組としたファイルが，階層構造となるように，上記ファイルの他に複数組記録されているが，上記のようにｍｏｖｅ−１．ａｖｉ（動画像ファイル）と，ｈｅａｄ−１．ｄａｔ（ＳＰＳ，ＰＰＳファイル）の関連がわかる構造であれば，かかる例に限定されない。また，図４では，ＳＰＳ，ＰＰＳを１つのファイルとして扱っている（ｈｅａｄ−１．ａｖｉ）が各々別ファイル（ｈｅａｄ＿ＳＰＳ−１．ａｖｉ，ｈｅａｄ＿ＰＰＳ−１．ａｖｉ）としても構わない。

また，図４に示すように，記録媒体１３１上では，例えば，ＳＰＳ，ＰＰＳファイルと動画像ファイルに，１，２，３，…ｎなどのように同じ番号を付けるなどして管理されるが，上記のように，動画像ファイルと，ＳＰＳ，ＰＰＳファイルとの関連がわかるシグネチャなどが付加されていれば，かかる例に限定されない。

（第２の実施の形態について）
次に，図５を参照しながら，第２の実施の形態にかかる動画像記録装置（又は，動画像処理装置）について説明する。図５は，第２の実施の形態にかかる動画像記録装置の概略的な構成の一例を示すブロック図である。

なお，第２の実施の形態に係る動画像記録装置１０１ａの説明では，第２の実施の形態にかかる動画像記録装置１０１ａと，第１の実施の形態にかかる動画像記録装置１０１とを比較し，特に相違する点について説明する。その他については，特段の記載が無い場合実質的に同一であるため詳細な説明は省略する。

第１の実施の形態に係る動画像記録装置１０１では，上記説明したように，動画像ストリームから抽出したＳＰＳ，ＰＰＳをファイル化し，ＳＰＳ，ＰＰＳファイルを記録媒体１３１に書き込むのに対し，第２の実施の形態にかかる動画像記録装置１０１ａでは，動画像ストリームからＳＰＳ，ＰＰＳの総データ量を解析し，総データ量を記録媒体１３１ａに書き込む点で異なる。

図５に示すように，動画像記録装置１０１には，撮像部１１１と，エンコーダ１１２と，制御部１１３ａと，パラメータファイル作成部（第１のファイル作成手段）１１５ａと，動画像ファイル作成部（第２のファイル作成手段）１１６ａと，パラメータセットであるＳＰＳ，ＰＰＳのデータ量を抽出するデータ量抽出部１２１と，記録媒体書込部１２８とが備わっている。

図１に示す第１の実施の形態にかかる動画像記録装置１０１と図５に示す第２の実施の形態にかかる動画像記録装置１０１ａとは，特に，動画像記録装置１０１には，抽出部１１４が備わっているのに対して，動画像記録装置１０１ａには，データ量抽出部１２１が備わっている点で異なっている。

次に，上記データ量抽出部１２１について，図６を参照しながら，より詳細に説明する。なお，図６は，第２の実施の形態にかかるデータ量抽出部１２１の概略的な構成の一例を示すブロック図である。

図６に示すように，データ量抽出部１２１は，ストリーム解析部２０１ａと，ＳＰＳ，ＰＰＳ総データ量設定部２１０とを備えている。

上記ストリーム解析部２０１ａにて，制御部１１３からエンコード開始信号が送られると，まずエンコーダ１１２から入力する動画像ストリームの解析を行う。

ストリーム解析部２０１ａでは，動画像ストリームの解析結果をＳＰＳ，ＰＰＳ総データ量設定部２０５に送信する。

上記ＳＰＳ，ＰＰＳ総データ量設定部２０５では，ストリーム解析部２０１ａから受信した解析結果を基に，ＳＰＳ，ＰＰＳ全体の総データ量を求めて，ＳＰＳ，ＰＰＳの総データ量を出力する。

第２の実施の形態にかかる動画像記録装置１０１ａでは，ＳＰＳ，ＰＰＳファイルそのものよりもデータ量が少ないＳＰＳ，ＰＰＳの総データ量をファイル化し，記録媒体１３１ａに記録することで，記録処理の効率化を図り，記録媒体の記録容量を効率的に他の動画像ストリームなどに活用することができる。

次に，記録媒体書込部１２８ａにより記録媒体１３１ａに書き込まれるデータ構造について説明すると，図７（ａ）では，動画像ファイルの先頭にはＳＰＳ，ＰＰＳが付加されている。別ファイルとして，ＳＰＳ，ＰＰＳデータ量ファイル（復号パラメータセットデータ量情報）も存在する。図７（ｂ）では，動画像ファイルとして，例えば，動画像とＳＰＳ，ＰＰＳデータ量データをＲＩＦＦ形式のファイル（例えばａｖｉファイル）など，複数のデータを１つのファイルに一元化することが可能なフォーマットを使用し，１ファイルに保存した場合である。

また，図７に示すように，動画像ファイルには，１又は２以上のピクチャ３００（３００−１〜３００−ｎ）が含まれている。なお，上記ピクチャには，例えば，Ｉピクチャ，Ｐピクチャ，Ｂピクチャのタイプが存在する。

（第３の実施の形態について）
次に，図８を参照しながら，第３の実施の形態にかかる動画像再生装置（又は，動画像処理装置）について説明する。図８は，第３の実施の形態にかかる動画像再生装置の概略的な構成の一例を示すブロック図である。

図８に示す動画像再生装置１０２は，既に記録媒体１３１に記録された動画像ストリームを表示部１３９に出力して，画面上に動画像ストリームを表示することが可能な装置である。

図８に示すように，動画像再生装置１０２には，制御部１１３ｂと，記録媒体読出部１２３と，パラメータ抽出部１３５と，動画像抽出部１３６と，マルチプレクス１３７と，デコーダ１３８と，表示部１３９とが備わっている。なお，第２の実施の形態にかかる動画像再生装置１０２には，表示部１３９が一体型として備わっている場合を例に挙げて説明するが，かかる例に限定されず，例えば，動画像再生装置１０２は，別体として外部接続可能な表示部１３９をライン接続するなどの場合でもよい。

上記制御部１１３ｂは，動画像再生装置１０２の記録媒体読出部１２３，パラメータ抽出部１３５，動画像抽出部１３６，マルチプレクス１３７，およびデコーダ１３８の処理を制御する。

上記記録媒体読出部１２３は，制御部１１３ｂから記録媒体１３１の読出開始の信号を受け取ると，記録媒体１３１からＳＰＳ，ＰＰＳファイルと動画像ファイルを読み出す。

読み出されたＳＰＳ，ＰＰＳファイルは，パラメータ抽出部１３５に送信され，パラメータ抽出部１３５により，ＳＰＳ，ＰＰＳファイルからＳＰＳ，ＰＰＳのパラメータセットが抽出され，マルチプレクス１３７に出力される。

一方，読み出された動画像ファイルは，動画像抽出部１３６に送信され，動画像抽出部１３６により，ヘッダ情報等を含んだ動画像ファイルからペイロード部分の動画像ストリームが抽出され，マルチプレクス１３７に出力される。

上記パラメータ抽出部１３５及び動画像抽出部１３６は，ＳＰＳ，ＰＰＳファイル又は動画像ファイルに含まれたヘッダなどを取り除いた後，ＳＰＳ，ＰＰＳデータと動画像ストリーム各々を取り出す。

マルチプレクス１３７は，制御部１１３ｂからの命令に従い，上記取り出されたＳＰＳ，ＰＰＳデータを動画像ストリームに挿入し，即ちマルチプレクスし，デコーダ１３８に出力する。

なお，第３の形態にかかる動画像再生装置１０２には，マルチプレクス１３７が備わる場合を例に挙げて説明したが，例えば，動画像再生装置１０２には，セレクタ等のＳＰＳ，ＰＰＳデータを動画像ストリームに挿入可能な機能を有する部材が備われば，かかる例に限定されない。

上記マルチプレクス１３７により出力されたデータをデコーダ１３８が入力すると，デコーダ１３８は，Ｈ．２６４方式で，制御部１１３ｂからのデコード開始命令に従って，復号を開始する。

記録媒体１３１にＳＰＳ，ＰＰＳファイルと動画像ファイルが別ファイルとして記録され，動画像ファイルには少なくとも先頭にＳＰＳ，ＰＰＳが１つ存在すればよいため，動画像再生装置１０２は，復号時に読み出しても，画質が良い状態で復号し，再生することができる。

次に，図９を参照しながら，第３の実施の形態にかかる動画像再生装置１０２のマルチプレクス１３７による挿入処理について説明する。図９に示すように，マルチプレクス１３７に入力するデータには，動画像ストリームの先頭にＳＰＳ，ＰＰＳが付加されている。したがって，マルチプレクス１３７は，そのままデコーダ１３８に出力すれば，デコーダ１３８は，動画像ストリームの先頭からデコードすればＳＰＳ，ＰＰＳもデコードできるため，特別な工程は必要なく，ピクチャ３００を復号することができる。

また，図９に示すように，動画像ストリームの先頭にＳＰＳ，ＰＰＳが付加されずにマルチプレクス１３７に入力した場合，動画像ストリームの先頭１フレーム目からの再生の動作を示す。

上記の場合，図９に示すような動画像ストリームの先頭にはＳＰＳ，ＰＰＳが付加されていないため，まずマルチプレクス１３７は，ＳＰＳ，ＰＰＳを付加するためにパラメータ抽出部１３５から送信されるＳＰＳ，ＰＰＳを動画像ストリームにマルチプレクスする。

次に，マルチプレクス１３７は，その先頭にＳＰＳ，ＰＰＳが付加された動画像ストリームをデコーダ１３８に送信することで，デコーダ１３８は，新たに付加されたＳＰＳ，ＰＰＳを基にして，動画像ストリームを復号することができる。

次に，図１０に示すように，ランダム再生の動作について説明する。ランダム再生とは，例えば，利用者から再生開始として指定された位置から，動画像ストリームの復号を開始し，画面上に動画像を表示することであるが，かかる例に限定されない。なお，この場合，再生開始する毎にＳＰＳ，ＰＰＳデータを動画像ストリームの先頭に付加する必要があるため，その都度，マルチプレクス１３７は，ＳＰＳ，ＰＰＳデータと動画像ストリームのマルチプレクスを行う。

マルチプレクス１３７は，先頭にＳＰＳ，ＰＰＳデータを付加した動画像ストリームをデコーダ１３８に出力する。

以上から，マルチプレクス１３７が動画像ストリームとＳＰＳ，ＰＰＳとを別々に入力し，マルチプレクスすることで，エンコード時のビットレートにおけるデータ量を圧迫することなく，かつ自由な位置からランダムに再生することができる。

より具体的には，例えば，図１０に示すように，利用者からピクチャ３００−４から再生を開始すると指示があると，動画像再生装置１０２の記録媒体読出部１２３は，記録媒体１３１から動画像ファイルを動画像抽出部１３６に出力するとともに，パラメータ抽出部１３５にＳＰＳ，ＰＰＳファイルを出力する。

パラメータ抽出部１３５は，ＳＰＳ，ＰＰＳをマルチプレクス１３７に出力し，動画像抽出部１３６は，ピクチャ３００−４以降のピクチャを動画像ストリームとしてマルチプレクス１３７に出力する。

マルチプレクス１３７は，図１０に示すように，ＳＰＳ，ＰＰＳをピクチャ３００−４の前（直前）に付与し，デコーダ１３８に出力する。なお，かかるピクチャ３００−４は，例えば，ＩＤＲピクチャであるが，そのピクチャ以前のピクチャの情報を使用しなくてもそれ以後のピクチャが正しく復号できれば，かかる例に限定されない。

デコーダ１３８は，上記マルチプレクス１３７からのデータをＨ．２６４方式に従って，復号し，表示部１３９に出力する。

（第４の実施の形態について）
次に，図１１を参照しながら，第４の実施の形態にかかる動画像再生装置（又は，動画像処理装置）について説明する。図１１は，第４の実施の形態にかかる動画像再生装置の概略的な構成の一例を示すブロック図である。

なお，第４の実施の形態に係る動画像再生装置１０２ａの説明では，第４の実施の形態にかかる動画像再生装置１０２ａと，第３の実施の形態にかかる動画像再生装置１０２とを比較し，特に相違する点について説明する。その他については，特段の記載が無い場合実質的に同一であるため詳細な説明は省略する。

図１１に示すように，動画像再生装置１０２ａには，制御部１１３ｃと，記録媒体読出部１２３ａと，パラメータ抽出部１３５ａと，動画像抽出部１３６ａと，マルチプレクス１３７ａと，デコーダ１３８と，表示部１３９と，ＳＰＳ・ＰＰＳ抽出部１４０とが備わっている。

上記記録媒体読出部１２３ａは，制御部１１３ｃからの読出開始信号により，記録媒体１３１からＳＰＳ，ＰＰＳ総データ量ファイルと動画像ファイルとを読み出す。

パラメータ抽出部１３５ａ及び動画像抽出部１３６ａは，上記各々のファイルからファイルのヘッダ情報などを取り除いて，ＳＰＳ，ＰＰＳデータ量データと動画像ストリームとを抽出する。

上記ＳＰＳ・ＰＰＳ抽出部１４０は，抽出されたＳＰＳ，ＰＰＳデータ量データと動画像ストリームを基に，ＳＰＳ，ＰＰＳを抽出する。なお，当該ＳＰＳ，ＰＰＳの抽出については，後程説明する。

次に，マルチプレクス１３７ａは，制御部１１３ｃからの命令に従い，入力したＳＰＳ，ＰＰＳデータと動画像ストリームをマルチプレクスし，デコーダ１３８に出力する。

デコーダ１３８は，制御部１１３ｃからのデコード開始命令に従い，Ｈ．２６４方式でデコードを開始する。上記デコーダ１３８により復号された動画像は，表示部１３９の画面上に出力される。

次に，図１２を参照しながら，ＳＰＳ・ＰＰＳ抽出部１４０についてより詳細に説明する。なお，図１２は，図１１に示すＳＰＳ・ＰＰＳ抽出部１４０の概略的な構成を示すブロック図である。

図１２に示すように，ＳＰＳ・ＰＰＳ抽出部１４０は，ストリーム解析部２２１と，カウンター２２３と，比較器２２５と，ＳＰＳ・ＰＰＳバッファ２２７とを備えている。

上記ストリーム解析部２２１は，入力された動画像ストリームについて解析を行い，ＳＰＳを検出する。

上記ストリーム解析部２２１でＳＰＳが検出された場合，上記カウンター２２３は，カウントを開始し，カウンター値を比較器２２５に出力する。

上記比較器２２５は，ＳＰＳ，ＰＰＳのデータ量とカウンター値とを比較して，上記カウンター値がＳＰＳ，ＰＰＳのデータ量より小さい場合，ＳＰＳ・ＰＰＳバッファ２２７に動画像ストリームを書き込む。即ち，ＳＰＳ・ＰＰＳバッファ２２７に書き込まれるデータは，ＳＰＳ，ＰＰＳデータである。

これにより，動画像ストリームの先頭に付加されたＳＰＳ，ＰＰＳをＳＰＳ，ＰＰＳバッファに蓄えることができ，その後のランダム再生，転送などに使用される。

なお，第４の実施の形態にかかるマルチプレクス１３７ａによるＳＰＳ，ＰＰＳの挿入処理については，上述した第３の実施の形態にかかるマルチプレクス１３７による挿入処理とほぼ同様であるため，詳細な説明は省略する。

（第５の実施の形態について）
図１３を参照しながら，第５の実施の形態にかかる動画像処理システム１００について説明する。なお，図１３は，第５の実施の形態にかかる動画像処理システム１００の概略的な構成を示すブロック図である。

図１３に示すように，動画像処理システム１００には，動画像再生装置１０２ｂと，外部接続機器１０４と，上記動画像再生装置１０２ｂ及び外部接続機器１０４を接続するネットワーク１０３とが備わっている。

上記外部接続機器１０４は，例えば，ネットワーク１０３を介して動画像再生装置１０２ｂから送信されるマルチプレクスされた動画像ストリームを復号することが可能なデコーダを備えている。

図１３に示す動画像再生装置１０２ｂは，マルチプレクス１３７が，ＳＰＳ，ＰＰＳを動画像ストリームに挿入し，その動画像ストリームを，ＩＥＥＥ１３９４などのネットワーク１０３を介して，外部接続機器１０４に送信することが可能な装置である。

また，図１３に示す動画像再生装置１０２ｂには，制御部１１３ｂと，記録媒体読出部１２３と，パラメータ抽出部１３５と，動画像抽出部１３６と，マルチプレクス１３７と，デコーダ１３８と，表示部１３９と，ネットワーク通信部１５０とが備わっている。なお，上記動画像再生装置１０２ｂに備わる上記各部については，既に説明した図８に示す動画像再生装置１０２に備わる各部とほぼ同様であるため詳細な説明は省略する。

また，図１３に示す外部接続機器１０４は動画像再生装置１０２ｂに１台接続した場合を例に挙げて説明したが，かかる例に限定されず，例えば，動画像再生装置１０２ｂに複数台の外部接続機器１０４がネットワーク１０３で接続する場合，また動画像再生装置１０２ｂに接続した外部接続機器１０４からさらに他の外部接続機器１０４ａが接続する場合などでも実施可能である。

次に，図１４を参照しながら，第５の実施の形態にかかる動画像再生装置１０２ｂに外部接続機器１０４がネットワーク１０３を介して接続した場合の一連の処理について説明する。なお，図１４は，第５の実施の形態にかかる外部接続機器１０４が接続した場合における動画像再生装置１０２の一連の処理の概略を示すフローチャートである。

図１４に示すように，パラメータ抽出部１３５によりＳＰＳ，ＰＰＳデータがマルチプレクス１３７に出力され（Ｓ１４０１），動画像抽出部１３６により動画像ストリームがマルチプレクス１３７に出力（Ｓ１４０３）された以降に，即ち，動画像再生装置１０２ｂのマルチプレクス１３７からの動画像ストリーム出力中に，ストリーミング再生可能な外部接続機器１０４がネットワーク１０３を介して接続した場合（Ｓ１４０５），マルチプレクス１３７は，例えば，復号開始する先頭のＩＤＲピクチャの前にＳＰＳ，ＰＰＳを挿入したとしても，ステップＳ１４０５で接続したと確認すると，マルチプレクス１３７は，改めて，ＳＰＳ，ＰＰＳを，その接続したタイミングの近傍で入力したピクチャの前に挿入する（Ｓ１４０７）。

上記ステップＳ１４０７により，ネットワーク１０３に接続したと検出された後，直ちに外部接続機器１０４に対しＳＰＳ，ＰＰＳが挿入された動画像ストリームが送信され，外部接続機器１０４に備わるデコーダは，適切に動画像ストリームを復号することができる。

また，上記ステップＳ１４０３〜Ｓ１４０７の処理が，動画像ストリームの外部接続機器１０４への出力が終了するまで（Ｓ１４０９），継続して繰り返される。

以上，外部接続機器１０４が接続後直ちに復号することができるため，利用者は，待たされることなく動画像を視聴することが可能となる。また，動画像再生装置１０２ｂ側で動画像ストリームが読み出される記録媒体１３１は，エンコード時に動画像におけるデータ量が圧迫されないように，動画像ファイルとは別にＳＰＳ，ＰＰＳファイルを記録しているため，画質の劣化が最小限に抑えられる。

なお，従来では，動画像ストリームを出力後に接続した外部接続機器は，ＳＰＳ，ＰＰＳデータが新たに送信されてくるまで，再生できないことになる。これでは，途中から接続した際，最悪の場合，その動画像を復号できず，利用者は全く視聴することができない恐れがあった。また，タイミング良くＳＰＳ，ＰＰＳが送られてくるとは限らず，利用者は接続後，ＳＰＳ，ＰＰＳが外部接続機器１０４に送信されてくるまで待たされることになる。

図１５に示すように，マルチプレクス１３７は，パラメータ抽出部１３５からＳＳＰ，ＰＰＳが送信されず，先頭にＳＰＳ，ＰＰＳが付与された動画像ストリームを受信すると，挿入処理せずに，そのままデコーダ１３８に出力開始する。なお，外部接続機器１０４は，まだネットワーク１０３に接続されていないため，上記先頭に付与されたＳＰＳ，ＰＰＳを受信することはできない。なお，図１５は，第５の実施の形態にかかる動画像再生装置による一連の処理の概略を示す説明図である。

次に，マルチプレクス１３７は，ネットワーク１０３に外部接続機器１０４が接続完了したのを確認すると，図１５に示すように，マルチプレクス１３７は，接続完了後に入力したピクチャ３００ａ−ｎ＋１の直前にＳＰＳ，ＰＰＳデータを挿入し，デコーダ１３８又はネットワーク１０３を介して外部接続機器１０４に出力する。なお，ネットワーク１０３に接続完了を示す信号は，例えば，制御部１１３から送信されるが，かかる例に限定されない。

したがって，外部接続機器１０４は，ネットワーク１０３に接続すると直ちに，ＳＰＳ，ＰＰＳが挿入された動画像ストリームを受信することができるため，利用者を待たせることなく動画像を再生することができる。

なお，図１５に示す動画像ストリームの先頭には，ＳＰＳ，ＰＰＳが付与された場合を例に挙げて説明したが，かかる例に限定されず，例えば，ＳＰＳ，ＰＰＳが先頭に付与されていない場合でも実施可能である。かかる場合には，マルチプレクス１３７が，例えば，パラメータ抽出部１３５から受け取ったＳＰＳ，ＰＰＳを，上記動画像ストリームの先頭に挿入し，デコーダ１３８に出力することになる。

次に，図１６を参照すれば，パラメータ抽出部１３５から送信されたＳＰＳ，ＰＰＳを入力したマルチプレクス１３７は，上記ＳＰＳ，ＰＰＳを一時的に保持する。

次に，マルチプレクス１３７は，動画像抽出部１３６からピクチャ３００−１等を含んだ動画像ストリームを入力すると，図１６に示すように，先程のＳＰＳ，ＰＰＳを所定の間隔で動画像ストリームに挿入する。

図１６に示すように，ＳＰＳ，ＰＰＳは，ピクチャ３００ａ−ｎ＋１の前，ピクチャ３００ａ−２ｎ＋１の前，ピクチャ３００ａ−３ｎ＋１の前のように，所定の間隔で登場する上記ピクチャの前に挿入される。なお，当該挿入対象となる所定間隔で登場するピクチャ３００は，例えば，ＩＤＲピクチャなどを例に挙げることができる。

また，上記マルチプレクス１３７は，図１６に示すように，動画像ストリームの先頭にＳＰＳ，ＰＰＳが付与されていた場合，その先頭のＳＰＳ，ＰＰＳを基に，所定の間隔でＳＰＳ，ＰＰＳを動画像ストリームに挿入しても良い。なお，図１６は，第５の実施の形態にかかる動画像再生装置による一連の処理の概略を示す説明図である。

以上から，所定の間隔でＳＰＳ，ＰＰＳデータの挿入を行うことで，マルチプレクス１３７から動画像ストリーム出力中に，外部接続機器１０４がネットワーク１０３に新たに接続し，その接続を動画像再生装置１０２ｂ側で検知できなくても，外部接続機器１０４は，所定の間隔で送信されるＳＰＳ，ＰＰＳを受け取り，動画像ストリームを復号することができる。また，エンコード時，データ量が圧迫されずに記憶された動画像ストリームであるため，画質の低下することなく再生することができ，また，動画像ストリーム出力中に他の外部接続機器１０４がネットワーク１０３に接続しても，その他の外部接続機器１０４に対してもＳＰＳ，ＰＰＳを直ちに送信することができる。

なお，図１６に示す動画像ストリームの先頭（ピクチャ３００−１の前）には，ＳＰＳ，ＰＰＳが付与された場合を例に挙げて説明したが，かかる例に限定されず，例えば，動画像ストリームの先頭にＳＰＳ，ＰＰＳが付与されていない場合でも実施可能である。かかる場合，上述の通り，マルチプレクス１３７が，パラメータ抽出部１３５から受け取ったＳＰＳ，ＰＰＳを基に，動画像ストリームの先頭に挿入する。

（第６の実施の形態について）
次に，図１７を参照しながら，第６の実施の形態にかかる動画像処理システム１００ａについて説明する。なお，図１７は，第６の実施の形態にかかる動画像処理システム１００ａの概略的な構成を示すブロック図である。

図１７に示すように，動画像処理システム１００ａには，動画像再生装置１０２ｃと，外部記録装置１０５とが備わっている。

上記動画像再生装置１０２ｃには，制御部１１３ｂと，記録媒体読出部１２３と，パラメータ抽出部１３５と，動画像抽出部１３６と，マルチプレクス１３７と，外部装置通信部１５１とが備わっている。なお，上記動画像再生装置１０２ｃに備わる上記各部については，既に説明した図８に示す動画像再生装置１０２に備わる各部とほぼ同様であるため詳細な説明は省略する。

図１７を参照しながら，動画像再生装置１０２ｃから外部記録装置１０５に動画像ストリームを外部転送する処理について説明する。

上記制御部１１３ｂから記録媒体読出部１２３に記録媒体１３１からデータを読み出す処理を開始する信号が送られると，記録媒体読出部１２３は，ＳＰＳ，ＰＰＳファイルと動画像ファイルとを読み出してパラメータ抽出部１３５及び動画像抽出部１３６各々に上記ファイルを送信する。

上記記録媒体読出部１２３により読み出されたファイルはパラメータ抽出部１３５によりＳＰＳ，ＰＰＳが抽出され，動画像抽出部１３６によりファイルシステムのヘッダなどが取り除かれて動画像ストリームが抽出される。

上記抽出されたＳＰＳ，ＰＰＳデータ及び動画像ストリームはマルチプレクス１３７に入力すると，マルチプレクス１３７は，制御部１１３ｂからの命令に従いＳＰＳ，ＰＰＳデータと動画像ストリームをマルチプレクスする。

さらに，マルチプレクス１３７は，上記ＳＰＳ，ＰＰＳデータと動画像ストリームをマルチプレクスしたストリームを転送する。

動画像再生装置１０２ｃから外部記録装置１０５に動画像ストリームの先頭から，即ち１フレーム目から動画像ストリームを転送する場合，図１８に示すように，マルチプレクス１３７が受け取った動画像ストリームの先頭に予めＳＰＳ，ＰＰＳが付与されていれば，マルチプレクス１３７は，そのまま外部記録装置１０５に動画像ストリームの先頭から順に転送すればＳＰＳ，ＰＰＳも一緒に転送されるため，特段の挿入処理などを実行しない。なお，図１８は，第６の実施の形態にかかる動画像再生装置において，動画像ファイルにＳＰＳ，ＰＰＳが付加されて動画像ファイルが記録媒体に記録された場合の１フレーム目からの転送の動作の概略を示す説明図である。

また，図１８では，動画像ストリームの先頭にＳＰＳ，ＰＰＳが付与された場合を例に挙げて説明したが，かかる例に限定されず，例えば，動画像ストリームの先頭にＳＰＳ，ＰＰＳが付与されていない場合でも実施可能である。なお，かかる場合，マルチプレクス１３７は，パラメータ抽出部１３５からＳＰＳ，ＰＰＳを受け取り，そのＳＰＳ，ＰＰＳを動画像ストリームの先頭に付与した後，外部記録装置１０５に１フレーム目から順に出力する。

次に，図１９に示すように，動画像再生装置１０２ｃから外部記録装置１０５に動画像ストリーム上の任意な位置，ランダムな位置から動画像ストリームを転送する場合，マルチプレクス１３７は，動画像抽出部１３６から受け取った動画像ストリームの先頭（任意の位置に該当する先頭ピクチャ）に，制御部１１３ｂからの命令に従ってＳＰＳ，ＰＰＳを挿入する。

なお，上記の場合，マルチプレクス１３７は，外部記録装置１０５に動画像ストリームを転送する際に，少なくとも１回はＳＰＳ，ＰＰＳデータを動画像ストリームに挿入する必要があるため，必要に応じてその都度ＳＰＳ，ＰＰＳデータと動画像ストリームとをマルチプレクスする。

より具体的には，例えば，図１９に示すように，外部記録装置１０５に動画像再生装置１０２ｃからピクチャ３００−２を転送する場合，マルチプレクス１３７は，パラメータ抽出部１３５からのＳＰＳ，ＰＰＳを上記ピクチャ３００−２の前に挿入した動画像ストリームを外部記録装置１０５に送信する。

同様に，例えば，図１９に示すように，外部記録装置１０５に動画像再生装置１０２ｃからピクチャ３００−４〜ピクチャ３００−６を転送する場合，マルチプレクス１３７は，パラメータ抽出部１３５からのＳＰＳ，ＰＰＳを上記ピクチャのうち先頭であるピクチャ３００−４の前に挿入した動画像ストリームを外部記録装置１０５に送信する。

なお，図１９は，第６の実施の形態にかかる動画像再生装置において，動画像ファイルにＳＰＳ，ＰＰＳが付加されて記録媒体に記録された場合の任意のフレームからの転送の動作の概略を示す説明図である。

以上から，マルチプレクス１３７が外部記録装置１０５に転送する動画像ストリームの先頭にＳＰＳ，ＰＰＳデータを挿入し，そのＳＰＳ，ＰＰＳが挿入された動画像ストリームを外部記録装置１０５に転送する。こうすることで，エンコード時のデータ量を圧迫することなく，かつ自由な位置からの転送が可能となる。

また，図１９では，動画像ストリームの先頭にＳＰＳ，ＰＰＳが付与された場合を例に挙げて説明したが，かかる例に限定されず，例えば，動画像ストリームの先頭にＳＰＳ，ＰＰＳが付与されていない場合でも実施可能である。なお，かかる場合，マルチプレクス１３７は，パラメータ抽出部１３５からＳＰＳ，ＰＰＳを受け取り，そのＳＰＳ，ＰＰＳを動画像ストリームの先頭に付与した後，外部記録装置１０５に出力する。

以上，上述した一連の処理は，専用のハードウェアにより行うこともできるし，ソフトウェアにより行うこともできる。一連の処理をソフトウェアによって行う場合には，そのソフトウェアを構成するプログラムが，汎用のコンピュータやマイクロコンピュータ等の情報処理装置にインストールされ，上記情報処理装置を動画像記録装置１０１及び／又は動画像再生装置１０２として機能させる。

プログラムは，コンピュータに内蔵されている記録媒体としてのハードディスクドライブ（ＨＤＤ）やＲＯＭに予め記録しておくことができる。

あるいはまた，プログラムは，ハードディスクドライブに限らず，フレキシブルディスク，ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ），ＭＯ（Ｍａｇｎｅｔｏ Ｏｐｔｉｃａｌ）ディスク，ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ），磁気ディスク，半導体メモリなどのリムーバブル記録媒体に，一時的あるいは永続的に格納（記録）しておくことができる。このようなリムーバブル記録媒体は，いわゆるパッケージソフトウエアとして提供することができる。

なお，プログラムは，上述したようなリムーバブル記録媒体からコンピュータにインストールする他，ダウンロードサイトから，ディジタル衛星放送用の人工衛星を介して，コンピュータに無線で転送したり，ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ），インターネットといったネットワークを介して，コンピュータに有線で転送し，コンピュータでは，そのようにして転送されてくるプログラムを受信し，内蔵するハードディスクドライブにインストールすることができる。

ここで，本明細書において，コンピュータに各種の処理を行わせるためのプログラムを記述する処理ステップは，必ずしも上述した処理順序に沿って時系列に処理する必要はなく，並列的あるいは個別に実行される処理（例えば，並列処理あるいはオブジェクトによる処理）も含むものである。

また，プログラムは，１つのコンピュータにより処理されるものであっても良いし，複数のコンピュータによって分散処理されるものであっても良い。

以上，添付図面を参照しながら本発明の好適な実施形態について説明したが，本発明はかかる例に限定されない。当業者であれば，特許請求の範囲に記載された技術的思想の範疇内において各種の変更例または修正例を想定し得ることは明らかであり，それらについても当然に本発明の技術的範囲に属するものと了解される。

上記実施形態においては，動画像記録装置１０１に備わるパラメータファイル作成部１１５と動画像ファイル作成部１１６が別体である場合を例にあげて説明したが，本発明はかかる例に限定されない。例えば，動画像記録装置１０１に備わるパラメータファイル作成部１１５と動画像ファイル作成部１１６が一体である場合でもよい。

また，上記実施形態においては，動画像再生装置１０２に備わるパラメータ抽出部１３５と動画像抽出部１３６が別体である場合を例にあげて説明したが，本発明はかかる例に限定されない。例えば，動画像再生装置１０２に備わるパラメータ抽出部１３５と動画像抽出部１３６が一体である場合でもよい。

また，上記実施形態においては，動画像再生装置１０２には，マルチプレクス１３７が備わる場合を例に挙げて説明したが，ＳＰＳ，ＰＰＳを動画像ストリームに挿入可能であれば，かかる例に限定されない。

上記実施形態においては，動画像記録装置１０１に備わる撮像部１１１，エンコーダ１１２，制御部１１３，抽出部１１４，パラメータファイル作成部１１５，動画像ファイル作成部１１６，および記録媒体書込部１２８はハードウェアからなる場合を例にあげて説明したが，本発明はかかる例に限定されない。例えば，上記撮像部１１１，エンコーダ１１２，制御部１１３，抽出部１１４，パラメータファイル作成部１１５，動画像ファイル作成部１１６，または記録媒体書込部１２８のうち少なくとも１つは，１又は２以上のモジュールまたはコンポーネントから構成されるプログラムの場合であってもよい。

また，上記実施形態においては，動画像再生装置１０２に備わる制御部１１３ｂ，記録媒体読出部１２３，パラメータ抽出部１３５，動画像抽出部１３６，マルチプレクス１３７，デコーダ１３８，および表示部１３９はハードウェアからなる場合を例にあげて説明したが，本発明はかかる例に限定されない。例えば，上記制御部１１３ｂ，記録媒体読出部１２３，パラメータ抽出部１３５，動画像抽出部１３６，マルチプレクス１３７，デコーダ１３８，または表示部１３９のうち少なくとも１つは，１又は２以上のモジュールまたはコンポーネントから構成されるプログラムの場合であってもよい。

また，上記実施形態においては，動画像記録装置１０１は，動画像ストリームを記録媒体１３１に記録する場合に限定されず，例えば，動画像記録装置１０１は，記録媒体１３１から動画像ストリームを読み取り，復号し，動画像を再生することが可能な記録再生装置でもよい。

また，上記実施形態においては，動画像再生装置１０２は，記録媒体１３１から動画像ストリームを読み取り，復号し，動画像を再生する場合に限定されず，例えば，動画像再生装置１０２は，動画像ストリームを記録媒体１３１に記録することが可能な記録再生装置でもよい。

本発明は，Ｈ．２６４方式で符号化する動画像記録装置，Ｈ．２６４方式で復号する動画像再生装置などに適用可能である。

第１の実施の形態にかかる動画像記録装置の概略的な構成の一例を示すブロック図である。 図１に示す抽出部の概略的な構成を示すブロック図である。 データ構造の概略の一例を示す説明図である。 記録媒体に記録されるデータの概略的な構成を示す説明図である。 第２の実施の形態にかかる動画像記録装置の概略的な構成の一例を示すブロック図である。 第２の実施の形態にかかるデータ量抽出部の概略的な構成の一例を示すブロック図である。 第２の実施の形態にかかるデータ構造の概略の一例を示す説明図である。 第３の実施の形態にかかる動画像再生装置の概略的な構成の一例を示すブロック図である。 第３の実施の形態にかかる動画像再生装置のマルチプレクス１３７による挿入処理の概略を示す説明図である。 第３の実施の形態にかかる動画像再生装置のマルチプレクス１３７による挿入処理の概略を示す説明図である。 第４の実施の形態にかかる動画像再生装置の概略的な構成の一例を示すブロック図である。 図１１に示すＳＰＳ・ＰＰＳ抽出部の概略的な構成を示すブロック図である。 第５の実施の形態にかかる動画像処理システムの概略的な構成を示すブロック図である。 第５の実施の形態にかかる外部接続機器が接続した場合における動画像再生装置による一連の処理の概略を示すフローチャートである。 第５の実施の形態にかかる動画像再生装置による一連の処理の概略を示す説明図である。 第５の実施の形態にかかる動画像再生装置による一連の処理の概略を示す説明図である。 第６の実施の形態にかかる動画像処理システムの概略的な構成を示すブロック図である。 第６の実施の形態にかかる動画像再生装置による一連の処理の概略を示す説明図である。 第６の実施の形態にかかる動画像再生装置による一連の処理の概略を示す説明図である。 Ｈ．２６４におけるＳＰＳ及びＰＰＳのフォーマットの概略を示す説明図である。

符号の説明

１００ 動画像処理システム
１０１ 動画像記録装置
１０２ 動画像再生装置
１０３ ネットワーク
１０４ 外部接続機器
１０５ 外部記録装置
１１１ 撮像部
１１２ エンコーダ
１１３ 制御部
１１４ 抽出部
１１５ パラメータファイル作成部
１１６ 動画像ファイル作成部
１２１ データ量抽出部
１２３ 記録媒体読出部
１２８ 記録媒体書込部
１３１ 記録媒体
１３５ パラメータ抽出部
１３６ 動画像抽出部
１３７ マルチプレクス
１３８ デコーダ
１３９ 表示部
１４０ ＳＰＳ・ＰＰＳ抽出部
２０１ ストリーム解析部
２０３ カウンター
２０５ ＳＰＳ，ＰＰＳ総データ量設定部
２０７ 比較器
２０９ 出力選択部
２１０ ＳＰＳ，ＰＰＳ総データ量設定部
２２１ ストリーム解析部
２２３ カウンター
２２７ ＳＰＳ・ＰＰＳバッファ
３００ ピクチャ

Claims (10)

1. 動画像データを符号化しストリームを生成する動画像処理装置であって：
   前記ストリームの復号に用いられる復号パラメータセットを生成する復号パラメータセット生成手段と；
   前記復号パラメータセット生成手段により生成された前記復号パラメータセットを基にファイル化し，復号パラメータセットファイルを作成する第１のファイル作成手段と；
   符号化された前記ストリームを基にファイル化し，動画像ファイルを作成する第２のファイル作成手段と；
   前記第１のファイル作成手段及び前記第２のファイル作成手段により作成された前記復号パラメータセットファイルと前記動画像ファイルとを記録媒体に記録する記録媒体記録手段と；
   を備えることを特徴とする，動画像処理装置。
2. 前記第１のファイル作成手段は，さらに前記復号パラメータセットファイルを基に，その復号パラメータセットファイルのデータ量を示す復号パラメータセットデータ量情報を生成し；
   前記記録媒体記録手段は，前記復号パラメータセットデータ量情報と前記動画像ファイルとを，前記記録媒体に記録することを特徴とする，請求項１に記載の動画像処理装置。
3. 前記記録媒体に記録される動画像ファイルの動画像ストリームの先頭には，前記復号パラメータセットが付与されていないことを特徴とする，請求項１又は２に記載の動画像処理装置。
4. 記録媒体に記録された動画像ファイルを読み出す記録媒体読出手段と；
   前記記録媒体読出手段により読み出された前記動画像ファイルからペイロード部分である動画像ストリームを抽出する動画像ストリーム抽出手段と；
   前記動画像ストリームの先頭に付与されたパラメータセットであり，前記動画像ストリームの復号に用いられる復号パラメータセットを抽出する復号パラメータセット抽出手段と；
   前記復号パラメータセットを，前記動画像ストリームの復号開始する位置に該当するピクチャの前に挿入する挿入手段と；
   前記動画像ストリームを読み出して，その動画像ストリームに挿入された前記復号パラメータセットを基に，前記動画像ストリームを復号する復号手段と；
   を備えることを特徴とする，動画像処理装置。
5. 前記記録媒体には，動画像ストリームの復号に用いられる復号パラメータセットがファイル化された復号パラメータセットファイルが記録されており，
   前記記録媒体読出手段は，前記記録媒体から前記動画ファイルと前記復号パラメータセットファイルとを別ファイルとして読み出し，
   前記復号パラメータセット抽出手段は，前記記録媒体から読み出された前記復号パラメータセットファイルを基にして前記復号パラメータセットを抽出する
   ことを特徴とする，請求項４に記載の動画像処理装置。
6. 前記記録媒体に記録されている動画像ファイルの動画像ストリームの先頭には，前記復号パラメータセットが付与されていない
   ことを特徴とする，請求項５に記載の動画像処理装置。
7. 前記復号パラメータセットは，所定の間隔で繰り返し前記挿入手段により挿入される
   ことを特徴とする，請求項４，５，または６に記載の動画像処理装置。
8. 外部にデータを出力することが可能なネットワーク通信手段を備え，
   前記挿入手段は，前記復号パラメータセットを，前記動画像ストリームの復号開始する位置に該当するピクチャの前に挿入した後，前記ネットワーク通信手段に出力する
   ことを特徴とする，請求項４又は５に記載の動画像処理装置。
9. 前記挿入手段は，前記ネットワークに外部から所定装置が接続するのを確認した後，前記復号パラメータセットを前記動画像ストリームに挿入する
   ことを特徴とする，請求項８に記載の動画像処理装置。
10. 前記挿入手段は，所定の間隔で前記復号パラメータセットを前記動画像ストリームに挿入する
    ことを特徴とする，請求項８又は９に記載の動画像処理装置。

Images