JP4281721B2 - データ処理装置、データ処理方法、プログラムおよび記録媒体 - Google Patents
データ処理装置、データ処理方法、プログラムおよび記録媒体 Download PDFInfo
- Publication number
- JP4281721B2 JP4281721B2 JP2005243292A JP2005243292A JP4281721B2 JP 4281721 B2 JP4281721 B2 JP 4281721B2 JP 2005243292 A JP2005243292 A JP 2005243292A JP 2005243292 A JP2005243292 A JP 2005243292A JP 4281721 B2 JP4281721 B2 JP 4281721B2
- Authority
- JP
- Japan
- Prior art keywords
- picture data
- data
- decoding
- picture
- decoder
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/775—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
- H04N5/93—Regeneration of the television signal or of selected parts thereof
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/005—Reproducing at a different information rate from the information rate of recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/177—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/78—Television signal recording using magnetic recording
- H04N5/781—Television signal recording using magnetic recording on disks or drums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/78—Television signal recording using magnetic recording
- H04N5/782—Television signal recording using magnetic recording on tape
- H04N5/783—Adaptations for reproducing at a rate different from the recording rate
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
- H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
Description
このような再生装置は、例えば、被再生データを構成するI,P,Bのピクチャデータ(ピクチャデータ)を、GOPを単位として、各GOPのなかからピクチャデータの参照関係および再生速度に応じて選択したピクチャデータをデコードするタイミングおよび順序を決定するデコードスケジューリングを行い、当該デコードスケジューリングの結果に従って、ピクチャデータのデコード、並びにデコード結果の再生出力処理を行っている。
当該再生装置では、例えば、再生速度の変更指示を受けると、再生中のGOPの次のGOPのデコードスケジュールで当該変更後の再生速度に対応して上記デコードスケジュールの結果を生成している。
従って、再生速度の変更指示を受けてから変更後の再生速度に対応した再生出力を得るまでに長時間を要し、応答性が悪いという問題がある。
<第1実施形態>
当該実施形態では、再生装置が複数のデコーダを備えている場合を例示する。
先ず、本実施形態の構成要素と、本発明の構成要素との対応関係を説明する。
コンピュータ2が本発明のデータ処理装置に対応し、再生装置4が本発明の再生装置に対応している。また、再生用メモリ36_1〜36_3が本発明の再生用メモリに対応し、デコーダ34_1,34_2,34_3が本発明のデコーダに対応し、CPU42が本発明の処理回路に対応している。
また、入力用メモリ32が本発明の入力用メモリに対応している。また、本実施形態の速度変更指示が、本発明の再生速度の変更指示に対応している。また、被再生データENCが本発明の被再生データに対応している。また、本実施形態のピクチャデータが、本発明のピクチャデータに対応している。また、ピクチャデータが本発明のピクチャデータに対応し、GOPが本発明のピクチャデータ群に対応している。また、I,Pピクチャデータが本発明の第1の種類のピクチャデータに対応し、Bピクチャデータが本発明の第2の種類のピクチャデータに対応している。
図1に示すように、データ処理システム1は、例えば、コンピュータ2および再生装置4を有する。
[コンピュータ2]
図1に示すように、コンピュータ2は、HDD12、ブリッジ14、メモリ16、ブリッジ18、操作部19およびCPU20を有する。
HDD12は、例えば、MPEGで符号化された被再生データENCを記憶する。
被再生データENCは、図2に示すように、再生装置4において連続して順にデコード処理される複数のGOP(Group Of Picture)で構成されている。
図2に示す例では、GOP(N−1),(N),(N+1),(N+2),(N+3)の順でデコード処理される。
各GOPは、I,P,Bの3種類のピクチャデータ(フレームデータ)で構成される。
また、各GOP内には1つのIピクチャデータが含まれている。
本実施形態では、例えば、GOP内のピクチャデータの数が比較的多い、いわゆるlongGOPが用いられる。
なお、本願の図面において、GOP(N−1)に属するピクチャデータには左上に記号を付さず、GOP(N)に属するピクチャデータには左上に「*」を付し、GOP(N+1)に属するピクチャデータには左上に「+」を付し、GOP(N+2)に属するピクチャデータには左上に「−」を付し、GOP(N+3)に属するピクチャデータには左上に「/」を付す。
また、各図において、「I」,「P」,「B」の右あるは下に付された数字は、当該ピクチャデータのデコード結果が再生出力される順番を示している。
また、Pピクチャデータは、前方向予測符号化された画面のピクチャデータであり、時間的に過去に位置する(表示順が前の)IまたはPピクチャデータを参照してデコードされる。
なお、I,Pピクチャデータは、アンカーピクチャデータとも呼ばれる。
また、Bピクチャデータは、両方向予測符号化された画面のピクチャデータであり、時間的に前後に位置する(表示順が前および後の)IまたはPピクチャデータを参照してデコードされる。
なお、HDD12の読み出しレートは、再生装置4の最大再生レートに比べて遅い。
ブリッジ14は、基本的にブリッジ18と同じ機能を有しているが、ブリッジ18に比べてハンド幅が狭く、ブリッジ18に接続されるデバイスに比べて低速アクセスのデバイスが接続される。
操作部19は、キーボードやマウスなどの操作手段であり、ユーザの操作に応じた操作信号をCPU20に出力する。
操作部19は、図示しない操作画面に基づいたユーザの操作に応じて被再生データENCの再生ポイントの指定操作、当該指定した再生ポイントの再生開始指示操作、(再生)速度変更指示操作、並びにトランジェント指示操作を受け、それを示す操作信号をCPU20に出力する。
ブリッジ18は、ブリッジ14、メモリ16、PCIバス6およびCPU20と接続され、CPU20のアドレスバスおよびデータバスを介した伝送に伴うデータ変換を行う。
CPU20は、操作部19から再生ポイントの指定操作を示す操作信号を入力すると、当該指定された再生ポイントのピクチャデータを含むGOPをHDD12から読み出して、ブリッジ18およびPCIバス6を介して再生装置4に出力する。
また、CPU20は、操作部19から再生開始指示操作を示す操作信号を入力すると、ブリッジ18およびPCIバス6を介して再生装置4に再生ポイントを指定した再生開始指示を出力する。
また、CPU20は、操作部19から速度変更指示操作を示す操作信号を入力すると、速度変更指示を、ブリッジ18およびPCIバス6を介して再生装置4に出力する。
また、CPU20は、操作部19からトランジェント指示操作を示す操作信号を入力すると、トランジェント指示を、ブリッジ18およびPCIバス6を介して再生装置4に出力する。
また、CPU20は、被再生データENC内のGOPのうち、再生装置4において再生ポイントのピクチャデータを含むGOPに対して表示順が1つ前のGOPと表示順が1つ後のGOPとが再生装置4の入力用メモリ32に記憶されるように、GOPを再生装置4に出力する。
図1に示すように、再生装置4は、例えば、PCIブリッジ30、入力用メモリ32、デコーダ34_1〜34_3、再生用メモリ36_1〜36_3、セレクタ38、制御用メモリ40、CPU42および制御バス46を有する。
なお、制御用メモリ40は、所定のプログラム(本発明のプログラム)を記憶し、CPU42は当該プログラムを読み出して実行し、以下の処理を行う。
上記所定のプログラムは、半導体メモリなどの制御用メモリ40に記憶されていても良いし、その他、HDDや光ディスクなどのその他の記録媒体に記録されていてもよい。
PCIブリッジ30は、PCIバス6を介してコンピュータ2から入力するGOPおよび指示(コマンド)をバッファリングするメモリを備えている。また、ブリッジ18は、DMA(Dynamic Memory Access)転送機能を備えている。
「入力用メモリ32」:
入力用メモリ32は、SDRAM等の半導体メモリであり、PCIブリッジ30を介して入力されたGOPを一時的に記憶する。
デコーダ34_1は、CPU42から入力したデコードコマンド(CPU42の制御)に従ってPCIブリッジ30を介して入力用メモリ32から読み出された被再生データENCを入力し、これをMPEG方式でデコードして再生用メモリ36_1に書き込む。
具体的には、デコーダ34_1は、CPU42の制御に従って入力用メモリ32から読み出されたIピクチャデータを、他のピクチャデータのデコード結果を参照しないでデコードする。
また、デコーダ34_1は、CPU42の制御に従って入力用メモリ32から読み出されたPピクチャデータを、時間的に過去に位置し且つ既にデコード結果が再生用メモリ36_1に記憶されたIまたはPピクチャデータのデコード結果を参照してデコードする。
また、デコーダ34_1は、CPU42の制御に従って入力用メモリ32から読み出されたBピクチャデータを、時間的に前後に位置し且つ既にデコード結果が再生用メモリ36_1に記憶されたIまたはPピクチャデータのデコード結果を参照してデコードする。
図3、図4、並びに後述する対応する図面において、デコーダ34_1に対応付けて示されたバンク領域「0」〜「7」は再生用メモリ36_1内に規定されたバンク領域であり、デコーダ34_2に対応付けて示されたバンク領域「0」〜「7」は再生用メモリ36_2内に規定されたバンク領域であり、デコーダ34_3に対応付けて示されたバンク領域「0」〜「7」は再生用メモリ36_3内に規定されたバンク領域である。
また、「out0」,「out1」,「out2」は、それぞれデコーダ34_1,34_2,34_3からセレクタ38に出力されるデコード結果を示す。
また、最下段の「再生出力」は、セレクタ38から出力される再生出力を示す。
また、図3、図4、並びに後述する対応する図面において、太枠で囲った部分はデコーダ34_1,34_2,34_3によるデコード処理を示している。
例えば、デコーダ34_1は、I2,P5,P8,P11,P14,*I2のデコード結果を、GOP(N−1)の再生出力処理を終了した後も保持する。
これにより、後述するように速度変更指示が発生した場合に、速度変更直後の再生出力を、再生用メモリ36_1に記憶保持されたデコード結果を用いて1ピクチャ処理時間内に行うことができる。
すなわち、デコーダ34_1は、速度変更指示が発生した場合に、当該速度変更指示発生前に再生用メモリ36_1に既に記憶したI,Pピクチャデータのデコード結果を再生出力に用いることができる。
具体的には、デコード回路34_1は、速度変更指示後に、CPU42からの表示コマンドに従って、I,Pピクチャデータについては、再生用メモリ36_1に既に記憶した当該I,Pピクチャデータのデコード結果を読み出して再生出力する。
また、デコード回路34_1は、速度変更指示後に、Bピクチャデータについては、CPU42からのデコードコマンドに従って、再生用メモリ36_1に既に記憶した当該BピクチャデータのアンカーピクチャデータとなるI,Pピクチャデータのデコード結果を参照してデコードを行い、CPU42からの表示コマンドに従って、そのデコード結果を再生出力する。
図3および図4に示すように、再生用メモリ36_1,36_2,36_3の各々は、8個のバンク領域「0」〜「7」を有する。
本実施形態では、図3および図4に示すように、再生用メモリ36_1,36_2,36_3の各々が備える8個のバンク領域のうち、6個のバンク領域「0」〜「5」をI,Pピクチャデータのデコード結果を専用して記憶する記憶領域として固定的に用い、2個のバンク領域「6」,「7」をBピクチャデータのデコード結果を記憶する記憶領域として固定的に用いる。
すなわち、再生用メモリ36_1〜36_3の各々にデコーダ34_1,34_2,34_3でデコードするGOP内の全てのI,Pピクチャデータのデコード結果を同時に記憶し、当該記憶を当該デコーダが次にデコードするGOPのI,Pピクチャデータのデコード結果を書き込むまで保持する。
また、デコーダ34_2は、例えば、図3および図4に示すように、GOP(N)内のI2,P5,P8,P11,P14ピクチャデータと、GOP(N+1)内のI2ピクチャデータとをそれぞれ再生用メモリ36_2内のバンク領域「0」〜「5」に書き込む。
また、デコーダ34_3は、例えば、図4に示すように、GOP(N+1)内のI2,P5,P8,P11,P14ピクチャデータと、GOP(N+2)内のI2ピクチャデータとをそれぞれ再生用メモリ36_3内のバンク領域「0」〜「5」に書き込む。
また、デコーダ34_2は、GOP(N)内のBピクチャデータをデコードする際に、再生用メモリ36_2のバンク領域「0」〜「5」に記憶されているI,Pピクチャデータのデコード結果を参照する。
また、デコーダ34_3は、GOP(N+1)内のBピクチャデータをデコードする際に、再生用メモリ36_3のバンク領域「0」〜「5」に記憶されているI,Pピクチャデータのデコード結果を参照する。
なお、デコーダ34_1,34_2,34_3は、再生用メモリ36_1〜36_3のバンク「6」,「7」が記憶するBピクチャデータのデコード結果を、例えば、当該Bピクチャデータの3ピクチャ後のBピクチャデータのデコード結果で順に上書きする。
これにより、1GOP内の全てのBピクチャデータに対応したバンク領域を備える必要が無く、再生用メモリ36_1〜36_3を小規模にできる。
セレクタ38は、CPU42からの制御に従って、再生用メモリ36_1,36_2,36_3から読み出されたデコード結果を切り換えて選択して再生出力する。
CPU42は、制御用メモリ40に記憶されたプログラム、並びにデータを基に以下に示す処理を行い、再生装置4の動作を統括的に制御する。
CPU42は、コンピュータ2から入力したGOP(被再生データENC)を入力用メモリ32に書き込む。
具体的には、CPU42は、指定された再生速度において、当該GOPに含まれるピクチャデータのうちデコードするピクチャデータを選択し、当該選択したピクチャデータのうち先頭のピクチャデータ(例えば、Iピクチャデータ)をデコードするタイミング、並びに選択したピクチャデータをデコードする順序等を決定し、その結果を示すデコードスケジュール結果を生成する。
CPU42は、上記デコードスケジュール結果と指定された再生速度とに基づいてピクチャデータを単位として、各ピクチャデータをデコードするか否かを決定し、デコードすると決定した場合には当該ピクチャデータのデコードコマンドを発行し、以下に示すデコード処理をデコーダ34_1,34_2,34_3に実行させる。
また、CPU42は、上記デコードスケジュール結果と指定された再生速度とに基づいてピクチャデータを単位として、各ピクチャデータを再生出力するか否かを決定し、再生出力すると決定した場合には当該ピクチャデータの表示コマンドを発行する。
なお、本実施形態では、CPU42は、何れの再生速度が指定されている場合でも、各GOP内のI,PピクチャデータをBピクチャデータに優先させて先にデコードさせる。
従って、速度変更指示を受けた後に、速度変更後の再生出力が、I,P、Bピクチャデータの何れであっても、1ピクチャデータのデコード時間内に、そのデコード結果を得ることができ、速度変更後の再生出力を短時間で開始することができる。
CPU42は、例えば、GOP(N−1)内のI,Pピクチャデータと、当該I,Pピクチャデータのデコード結果を参照してデコードされるGOP(N)内のBピクチャデータとを、PCIブリッジ30を介して入力用メモリ32から読み出してデコーダ34_1に出力する。
ここで、本実施形態では、Bピクチャデータが異なるGOPのI,Pピクチャデータのデコード結果を参照してデコードされるオープンGOPを参照している。
具体的には、例えば、図2に示すGOP(N)内のB0,B1ピクチャデータが、GOP(N−1)内のI,Pピクチャデータのデコード結果を参照してデコードされる。
従って、CPU42は、GOP(N)内のB0,B1ピクチャデータをデコーダ34_1に出力する。
また、CPU42は、例えば、GOP(N+1)内のI,Pピクチャデータと、当該I,Pピクチャデータのデコード結果を参照してデコードされるGOP(N+2)内のBピクチャデータとを、PCIブリッジ30を介して入力用メモリ32から読み出してデコーダ34_3に出力する。
このとき、CPU42は、当該再生ポイントから指定された方向に指定されたスピードで再生出力が行われるように、デコーダ34_1,34_2,34_3によるBピクチャデータのデコード処理、再生用メモリ36_1,36_2,36_3からセレクタ38への読み出し動作、並びにセレクタ38の選択動作を制御する。
[第1の動作例]
以下、コンピュータ2において再生対象の画像データを指定してから、再生装置4において再生出力が行われるまでの動作例を説明する。
図5および図6は、当該動作例を説明するためのフローチャートである。
ステップST1:
コンピュータ2のCPU20は、操作部19から被再生データENC内の再生ポイントの指定操作を示す操作信号を入力したか否かを判断し、指定したと判断するとステップST2に進み、そうでない場合にはステップST1の処理を繰り返す。
コンピュータ2のCPU20は、ステップST1で指定された再生ポイントのピクチャデータを含むGOPと、その前後のGOPとの合計3個(複数)のGOPをHDD12から読み出す。
ステップST3:
コンピュータ2のCPU20は、ステップST2で読み出した複数のGOPを、ブリッジ18およびPCIバス6を介して再生装置4に出力する。
再生装置4のCPU42は、コンピュータ2からPCIブリッジ30を介して入力したGOPを入力用メモリ32に書き込む。
コンピュータ2のCPU20が、転送完了通知を再生装置4のCPU42に出力する。
当該転送完了通知は、ステップST3でコンピュータ2から再生装置4に出力(転送)したGOPの識別データ、当該GOPを書き込んだ入力用メモリ32内のアドレス、並びに当該GOPのデータサイズを示している。
また、当該転送完了通知は、上記出力したGOP内の各ピクチャデータの識別データ、当該ピクチャデータを書き込んだ入力用メモリ32内のアドレス、並びに当該ピクチャデータのデータサイズを示している。
CPU42は、当該転送完了通知を制御用メモリ40に書き込む。
ステップST5:
再生装置4のCPU42は、ステップST4の処理終了後に、準備完了通知をコンピュータ2のCPU20に出力する。
コンピュータ2のCPU20は、操作部19から再生ポイントを指定した再生開始指示操作を示す操作信号を入力したか否かを判断し、入力したと判断するとステップST7に進み、そうでない場合にはステップST6の処理を繰り返す。
当該再生開始指示では、例えば、再生速度が指定される。
ステップST7:
コンピュータ2のCPU20は、入力したと判断すると再生ポイントを指定した再生開始コマンドを再生装置4のCPU42に出力する。
再生装置4のCPU42は、ステップST7で入力した再生開始コマンドが示す再生ポイントのピクチャデータを含む入力用メモリ32に記憶された1GOP内のピクチャデータをデコードする順序とタイミングとをピクチャデータ間の参照関係、再生速度および再生方向を基に決定するデコードスケジュールを行う。
ステップST9:
再生装置4のCPU42は、ステップST8のデコードスケジュール結果を基に、処理対象のピクチャデータを順に特定する。
スケジュール10:
再生装置4のCPU42は、指定された再生速度が1倍速以上であるか否かを判断し、1倍速以上であると判断するとステップST11に進み、そうでない場合にはステップST12に進む。
スケジュール11:
再生装置4のCPU42は、スケジュール10で特定したピクチャデータをデコードするか否かを、指定された再生速度を基に決定する。
再生装置4のCPU42は、再生出力の更新タイミングであるか否かを、指定された再生速度を基に決定する。
ステップST13:
再生装置4のCPU42は、ステップST12で更新タイミングであると判断するとステップST14に進む。
再生装置4のCPU42は、ステップST11でデコードすると決定した場合、あるいはステップST13で更新タイミングであると判断した場合に、ステップST9で特定したピクチャデータのデコードコマンドをデコーダ34_1,34_2,34_3の何れかに出力する。
なお、CPU42は、ステップST9で特定したピクチャデータのデコード結果が再生用メモリ36_1,36_2,36_3に既に記憶されている場合には、デコードコマンドを出力しない。
再生装置4のデコーダ34_1,34_2,34_3は、ステップST14で入力したデコードコマンドが示すピクチャデータを入力用メモリ32から読み出してデコードし、そのデコード結果をそれぞれ再生用メモリ36_1〜36_3に書き込む。
ステップST16:
再生装置4のCPU42は、ステップST9で特定したピクチャデータのデコード結果を再生出力するか否かを、指定された再生速度を基に決定する。
ステップST17:
再生装置4のCPU42は、ステップST16で再生出力すると決定した場合には、当該ピクチャデータを指定した表示コマンドを、対応したデコーダ34_1,34_2,34_3に出力する。
ステップST18:
再生装置4のデコーダ34_1,34_2,34_3は、ステップST17で入力した表示コマンドを基に、当該表示コマンドで指定されたピクチャデータのデコード結果を再生用メモリ36_1,36_2,36_3から読み出し、これをセレクタ38に出力する。
これにより、当該指定されたピクチャデータのデコード結果が再生出力される。
コンピュータ2のCPU20は、トランジェント指示操作を示す操作信号を操作部19から入力したと判断するとステップST20に進み、そうでない場合にはステップST21に進む。
ステップST20:
コンピュータ2のCPU20は、再生装置4のCPU42にトランジェント指示(再生方向切換指示)を出力する。
当該トランジェント指示が発生した後は、CPU20およびCPU42は、切換え後の再生方向を基に処理を行う。
再生装置4は上述したステップST10〜ST19の処理をピクチャデータ単位で行う。
CPU20およびCPU42は、上記ステップST10〜ST19の処理を行ったピクチャデータが、GOP内の最後のピクチャデータであるか否かを判断し、最後のピクチャデータであると判断するとステップST22に進み、そうでない場合にはステップST9に戻って次のピクチャデータについての処理を行う。
ステップST22:
CPU20およびCPU42は、上記処理を行ったピクチャデータが属するGOPが被再生データENC内の最後のGOPであるか否かを判断し、最後のGOPであると判断すると処理を終了し、そうでない場合にはステップST23に進む。
コンピュータ2のCPU20は、再生方向に応じて次の1GOPをHDD12から読み出す。
ステップST24:
コンピュータ2のCPU20は、ステップST23で読み出した複数のGOPを、ブリッジ18およびPCIバス6を介して再生装置4に出力する。
再生装置4のCPU42は、コンピュータ2からPCIブリッジ30を介して入力したGOPを入力用メモリ32に書き込む。
コンピュータ2のCPU20が、ステップST24で出力したGOPの転送完了通知を再生装置4のCPU42に出力する。
CPU42は、当該転送完了通知を制御用メモリ40に書き込む。
ステップST26:
再生装置4のCPU42は、ステップST25の処理終了後に、準備完了通知をコンピュータ2のCPU20に出力する。
ステップST27:
再生装置4のCPU42は、例えば、再生方向に応じて次に再生ポイントのピクチャデータを含むGOPのスケジューリング処理が完了したか否か(すなわち、スケジューリング処理を要するか否か)を判断し、スケジューリング処理を完了していないと判断するとステップST8に進み、そうでない場合にはステップST9に進む。
当該動作例では、図6に示すステップST15のデコード処理を詳細に説明する。
再生装置4のCPU42は、上記スケジューリング処理の結果を基に、例えば、図3および図4を用いて前述したように、入力用メモリ32に記憶されたGOPに含まれるピクチャデータを読み出してデコーダ34_1,34_2,34_3に出力する。
そして、デコーダ34_1,34_2,34_3は、前述したようにデコード処理を行い、デコード結果を再生用メモリ36_1,36_2,36_3に書き込む。
すなわち、後述するようにGOP内の各ピクチャデータをデコードおよび再生出力している最中に再生速度の変更指示が発生した場合に、図6および図7に示すステップST9〜ST18の処理より、速度変更指示後、1ピクチャデータのデコード処理時間内に、変更後の再生速度でピクチャデータを再生出力できる。
例えば、図3に示すGOP(N−1)内のB9ピクチャデータをデコードして再生出力する場合には、GOP(N−1)内のP8,P11ピクチャデータのデコード結果を必要とする。
また、P8ピクチャデータをデコードするためにはP5ピクチャデータのデコード結果が必要であり、P5ピクチャデータをデコードするためにはI2ピクチャデータのデコード結果が必要である。
従って、上記B9ピクチャデータをデコードするには、I2,P5,P8,P11ピクチャデータのデコード結果を必要とする。
再生装置4によれば、図3に示すように、再生用メモリ36_1にI,Pピクチャデータを記憶することで、デコーダ34_1がGOP(N−1)のB9ピクチャデータを入力すれば、デコーダ34_1は、既に再生用メモリ36_1のバンク領域「2」,「3」に記憶されているP8,P11ピクチャデータを用いて、GOP(N−1)内のB9ピクチャデータをデコードして再生出力する処理を即座に行うことができる。
これにより、タイムラグのない再生速度変更を行うことができる。
以下、図3および図4に示すフォアワード(FWD)の1倍速再生を行っているときに、1.5倍速再生、3倍速再生および1倍速再生の順で再生速度が変更された場合の再生装置4の動作例を説明する。
図8および図9は、当該動作例を説明するための図である。
図8に示すように、デコーダ34_2がGOP(N)のB1ピクチャデータのデコード結果を再生出力中に、1.5倍速への速度変更指示を再生装置4のCPU42が受けると、CPU42は、図6および図7に示すステップST9〜ST18により、GOP(N)のデコードおよび再生出力を完了する前に、1.5倍速に対応したデコードおよび再生出力を行う。
これにより、GOP(N)のB4ピクチャデータの再生出力から1.5倍速の再生出力に移行できる。
すなわち、再生装置4では、1倍速再生としてデコードされたデコードスケジュール結果のなかでB0,B3,B6,B9ピクチャデータを再生出力しなければ1.5倍速を実現できるので、1.5倍速への速度変更指示が有効になるタイミングから、上記再生出力しないピクチャデータを無効化して時間的に詰めることで1.5倍速を簡単に実現できる。
このとき、再生装置4は、アンカーピクチャデータであるI,Pピクチャデータは、1倍速再生と同様にデコードして再生用メモリ36_1,36_2,36_3に書き込み、上述したように無効化を行って時間的に詰められたBピクチャデータをデコーダ34_1,34_2,34_3でデコードする。
これにより、GOP(N+1)のP11ピクチャデータの再生出力から3倍速の再生出力に移行できる。
このとき、GOP(N+3)のI,Pピクチャデータのデコード結果は再生用メモリ36_3に記憶されるため、3倍速再生から1倍速再生に短時間で移行できる。
このように再生装置4では、例えば、1倍速再生におけるデコード順をデコードスケジュールで予め決定し、再生速度が指定(変更)されたときに、デコードスケジュールにデコード順が示されるピクチャデータの有効性を判断し、有効と判断したピクチャデータのみをデコードすることで可変速再生を応答性良く行うことができる。
そのため、データ処理システム1によれば、GOPの再生処理中に再生速度の変更指示が生じた場合に、当該GOPの再生処理を完了する前に、ピクチャデータ単位で、変更後の再生速度に対応したデコードおよび再生出力を行うことができる。その結果、再生装置4が再生速度の変更指示を受けてから、当該変更後の再生速度に対応した再生出力が実際に行われるまでの時間を従来に比べて短縮できる。
また、再生装置4において、Bピクチャデータのデコード結果は再生用メモリ36_1,36_2,36_3内の固定バンクに順次上書きする。
これにより、再生用メモリ36_1〜36_3の記憶容量を大幅に増やすことなく、変更後の再生速度に対応した再生出力を短時間で行うことができる。
当該実施形態では、再生装置が単数のデコーダを備えている場合を例示する。
図10は、本発明の実施形態に係わるデータ処理システム1aの全体構成図である。
図10に示すように、データ処理システム1aは、例えば、コンピュータ2および再生装置4aを有する。
図10に示すコンピュータ2は、第1実施形態のコンピュータ2と同じである。
図10に示すように、再生装置4aは、例えば、PCIブリッジ30、入力用メモリ32、デコーダ34、再生用メモリ36、制御用メモリ40、CPU42aおよび制御バス46を有する。
図10に示す再生装置4aの構成のうち図1と同じ符号を付した構成要素は第1実施形態と同様である。
再生装置4aは、単数のデコーダ34および再生用メモリ36を有し、それに応じてCPU42aはピクチャデータのデコード処理および再生出力処理を制御する。
なお、再生装置4aの処理は、単数のデコーダ34のデコードおよび再生出力を制御するという点を除いて、図5〜図7の第1実施形態の再生装置4の処理と同じである。
図11および図12は、図10に示すデータ処理システム1aが、被再生データENCをリバース(REV)方向に再生した動作を説明するための図である。
図11および図12に示すように、デコーダ34は、先ず、リバース再生を行う場合には、GOP(N+3)のI,PピクチャデータとGOP(N+2)のI2ピクチャデータとをデコードし、そのデコード結果をデコーダ34のバンク領域「0」〜「5」に書き込む。
その後、デコーダ34は、GOP(N+3)のB13,B12ピクチャデータと、GOP(N+2)のP5ピクチャデータと、GOP(N+3)のB10,B9ピクチャデータと、GOP(N+2)のP8ピクチャデータとを順にデコードする。
そして、デコーダ34は、GOP(N+3)のP14,B13,B12,P11,P10、B9,....のデコード結果を順に再生出力する。
図13および図14は、当該動作例を説明するための図である。
図13に示すように、デコーダ34がGOP(N+3)のP5ピクチャデータのデコード結果を1倍速リバース再生で再生出力中に、1.5倍速リバース再生への速度変更指示を再生装置4のCPU42が受けると、CPU42は、図6および図7に示すステップST9〜ST18により、GOP(N+3)のデコードおよび再生出力を完了する前に、1.5倍速に対応したデコードおよび再生出力を行う。
これにより、GOP(N+3)のB4ピクチャデータの再生出力から1.5倍速リバース再生の再生出力に移行できる。
これにより、GOP(N+1)のP8ピクチャデータの再生出力から3倍速リバース再生の再生出力に移行できる。
このとき、GOP(N+3)のI,Pピクチャデータのデコード結果は再生用メモリ36に記憶されるため、3倍速リバース再生から1倍速リバース再生に短時間で移行できる。
このように再生装置4aでは、例えば、1倍速リバース再生におけるデコード順をデコードスケジュールで予め決定し、リバース再生速度が指定(変更)されたときに、デコードスケジュールにデコード順が示されるピクチャデータの有効性を判断し、有効と判断したピクチャデータのみをデコードすることでリバース再生においても可変速再生を応答性良く行うことができる。
データ処理システム1aによっても、第1実施形態のデータ処理システム1と同様の効果が得られる。
当該実施形態では、第1実施形態で説明したシステムにおいて、各ピクチャデータをデコードするか否かを示すピクチャ属性データPPをスケジュールバッファにスケジュールして記憶させ、それを基にデコードを行う場合を説明する。
図15は、本発明の実施形態に係わるデータ処理システム1bの全体構成図である。
図15に示すように、データ処理システム1bは、例えば、コンピュータ2および再生装置4bを有する。
図15に示すコンピュータ2は、第1実施形態のコンピュータ2と同じである。
図15に示すように、再生装置4bは、例えば、PCIブリッジ30、入力用メモリ32、デコーダ34、再生用メモリ36、制御用メモリ40、CPU42b、スケジュールバッファ45および制御バス46を有する。
図15に示す再生装置4bの構成のうち図1と同じ符号を付した構成要素は第1実施形態と同様である。
図16に示すように、スケジュールバッファ45は、スケジュールバッファ45_1〜45_3を有する。
スケジュールバッファ45_1は、図15に示すデコーダ34_1にデコードさせるピクチャデータを管理するために用いられ、1倍速再生においてデコーダ34_1にスケジューリングされるピクチャデータのピクチャ属性データPPがデコード順に読み出し可能に記憶される。
スケジュールバッファ45_2は、図15に示すデコーダ34_2にデコードさせるピクチャデータを管理するために用いられ、1倍速再生においてデコーダ34_2にスケジューリングされるピクチャデータのピクチャ属性データPPがデコード順に読み出し可能に記憶される。
スケジュールバッファ45_3は、図15に示すデコーダ34_3にデコードさせるピクチャデータを管理するために用いられ、1倍速再生においてデコーダ34_3にスケジューリングされるピクチャデータのピクチャ属性データPPがデコード順に読み出し可能に記憶される。
図17に示すように、ピクチャ属性データPPは、それに対応するピクチャデータのデコード結果を書き込む再生用メモリ36_1〜36_3のバンクへのポインタデータ(cur_p)、そのデコードに用いる前方向予測画像(ピクチャデータ)が記憶された再生用メモリ36_1〜36_3のバンクへのポインタデータ(fore_p)、そのデコードに用いる後方向予測画像(ピクチャデータ)が記憶された再生用メモリ36_1〜36_3のバンクへのポインタデータ(back_p)、デコード対象のGOPの番号、デコード(再生)を開始する時間(time)、並びにデコードの有無示す有効性フラグデータ(valid)を有する。
図18(A)に示すように、再生装置4bのCPU42bは、初期設定で、スケジュールバッファ45_1に記憶する全てのピクチャ属性データの有効性フラグデータvalidを有効に設定する
その後、CPU42bは、ユーザの操作に応じて2倍速変更指示を入力すると、図18(B)に示すように、再生中のピクチャデータのピクチャ属性データPP以降にスケジュールされたピクチャ属性データPPの有効性フラグデータvalidを、1つおきに無効に設定する。
その後、CPU42bは、ユーザの操作に応じて3倍速変更指示を入力すると、図18(C)に示すように、再生中のピクチャデータのピクチャ属性データPP以降にスケジュールされたピクチャ属性データPPの有効性フラグデータvalidを、2つおきに無効に設定する。
図19(A)に示すように、3倍速再生では、スケジュールバッファ45_1に記憶されたピクチャ属性データPPの有効性フラグデータvalidは、2つおきの有効を示す。
その後、CPU42bは、ユーザの操作に応じて2倍速変更指示を入力すると、図19(B)に示すように、再生中のピクチャデータのピクチャ属性データPP以降にスケジュールされたピクチャ属性データPPの有効性フラグデータvalidを、1つおきに有効を示すように設定する。
その後、CPU42bは、ユーザの操作に応じて1倍速変更指示を入力すると、図19(C)に示すように、再生中のピクチャデータのピクチャ属性データPP以降にスケジュールされたピクチャ属性データPPの有効性フラグデータvalidを全て有効に設定する。
図20〜図23は、図15に示すデータ処理システム1bの動作例を説明するためのフローチャートである。
ステップST51:
コンピュータ2のCPU20は、操作部19から被再生データENC内の再生ポイントの指定操作を示す操作信号を入力したか否かを判断し、指定したと判断するとステップST52に進み、そうでない場合にはステップST51の処理を繰り返す。
コンピュータ2のCPU20は、ステップST51で指定された再生ポイントのピクチャデータを含むGOPと、その前後のGOPとの合計3個(複数)のGOPをHDD12から読み出す。
ステップST53:
コンピュータ2のCPU20は、ステップST52で読み出した複数のGOPを、ブリッジ18およびPCIバス6を介して再生装置4bに出力する。
再生装置4bのCPU42bは、コンピュータ2からPCIブリッジ30を介して入力したGOPを入力用メモリ32に書き込む。
コンピュータ2のCPU20が、転送完了通知を再生装置4bのCPU42bに出力する。
当該転送完了通知は、ステップST53でコンピュータ2から再生装置4bに出力(転送)したGOPの識別データ、当該GOPを書き込んだ入力用メモリ32内のアドレス、並びに当該GOPのデータサイズを示している。
また、当該転送完了通知は、上記出力したGOP内の各ピクチャデータの識別データ、当該ピクチャデータを書き込んだ入力用メモリ32内のアドレス、並びに当該ピクチャデータのデータサイズを示している。
CPU42bは、当該転送完了通知を制御用メモリ40に書き込む。
ステップST55:
再生装置4bのCPU42bは、ステップST54の処理終了後に、準備完了通知をコンピュータ2のCPU20に出力する。
コンピュータ2のCPU20は、操作部19から再生ポイントを指定した再生開始指示操作を示す操作信号を入力したか否かを判断し、入力したと判断するとステップST57に進み、そうでない場合にはステップST56の処理を繰り返す。
ステップST57:
コンピュータ2のCPU20は、入力したと判断すると再生ポイントを指定した再生開始コマンドを再生装置4bのCPU42bに出力する。
再生装置4bのCPU42bは、新たに1GOP分のピクチャデータのデコード順をスケジューリングし、当該スケジュールした順序で図16に示すスケジュールバッファ45_1〜45_3にピクチャデータのピクチャ属性データPPを書き込む。
そして、CPU42bは、図18(A)に示すように、スケジュールバッファ45_1〜45_3に記憶されている全てのピクチャ属性データPPの有効性フラグデータvalidを有効に設定する。
再生装置4bのCPU42bは、スケジュールバッファ45_1〜45_3に記憶されているピクチャ属性データPPのうち、その有効性フラグデータvalidが有効を示すピクチャ属性データの再生(デコード)開始時間を決定し、これをピクチャ属性データPPの再生開始時間timeに設定する。
再生装置4bのCPU42bは、指定されている再生速度が1倍速以上であるか否かを判断し、1倍速以上であると判断するとステップST61に進み、そうでない場合にはステップST63に進む。
再生装置4bのCPU42bは、必要に応じて(速度変更指示があった場合など)、指定された再生速度に基づいて、スケジュールバッファ45_1〜45_3に記憶されているピクチャ属性データPPうち、直前に再生されたピクチャデータ以降の全てのピクチャデータのピクチャ属性データの有効性フラグデータvalidを有効にする。
ステップST62:
再生装置4bのCPU42bは、1倍速未満の再生(スロー再生)時における表示中のピクチャデータの次の更新タイミングを計算する。
ステップST63:
再生装置4bのCPU42bは、再生装置4bが備えた図示しないタイマが示す時刻が、ステップST62で計算した更新タイミングになったと判断するとステップST66に進み、そうでない場合にはステップST73に進む。
再生装置4bのCPU42bは、再生速度変更指示を入力したと判断するとステップST65に進み、そうでない場合にはステップST67に進む。
再生装置4bのCPU42bは、再生速度変更指示に応じた変更後の再生速度に応じて、スケジュールバッファ45_1〜45_3に記憶されているピクチャ属性データPPの有効性フラグデータvalidを有効化あるいは無効化する。すなわち、CPU42bは、スケジュールバッファ45_1〜45_3に記憶されたピクチャ属性データPPの有効性フラグデータvalidを再設定する。
CPU42bは、例えば、図18および図19を用いて前述したようにして当該処理を行う。
ステップST66:
再生装置4bのCPU42bは、スケジュールバッファ45_1〜45_3に記憶されているピクチャ属性データPPのうち、その有効性フラグデータvalidが有効を示すピクチャ属性データの再生(デコード)開始時間を再度決定し、これをピクチャ属性データPPの再生開始時間timeに設定する。
すなわち、CPU42bは、ステップST65の結果に基づいて、ピクチャ属性データPPの再生開始時刻timeを再設定する。
なお、再設定後の再生開始時刻timeは、例えば、直前の再生開始時刻に「1」を加算して算出される。
再生装置4bでは、ピクチャデータデータ単位でのデコード処理において、再生速度変更指示が出されると即座にステップST65,ST66を実行してスケジュールバッファ45_1〜45_3に記憶されているピクチャ属性データPPの有効性フラグデータvalidを再設定する。これにより、再生装置4bによれば、GOP全体の再生処理を完了する前に、ピクチャデータ単位で、変更後の再生速度に対応したデコードおよび再生出力を行うことができる。その結果、再生装置4が再生速度の変更指示を受けてから、当該変更後の再生速度に対応した再生出力が実際に行われるまでの時間を従来に比べて短縮できる。
再生装置4bのCPU42bは、スケジュールバッファ45_1〜45_3のうち処理対象として選択したスケジュールバッファに記憶されたピクチャ属性データPPの有効性フラグデータvalidを順に読み出す。
そして、CPU42bは、当該読み出したピクチャ属性データPPの有効性フラグデータvalidが有効を示すことを条件に、それに対応したピクチャデータのデコードコマンドをデコーダ34_1〜34_3に出力する。
デコーダ34_1,34_2,34_3は、ステップST67で入力したデコードコマンドが示すピクチャデータを入力用メモリ32から読み出してデコードし、そのデコード結果をそれぞれ再生用メモリ36_1〜36_3に書き込む。
ステップST69:
再生装置4bのCPU42bは、指定された再生方向と上記スケジューリング結果とに基づいて次に再生出力するデコード結果を特定し、当該デコード結果を示す表示コマンド、並びに所望の再生出力を行うためのセレクタ38の切換コマンドとを生成し、これを制御用メモリ40に書き込む。
ステップST70:
再生装置4bのCPU42bは、ステップST68で生成した表示コマンドをデコーダ34_1,34_2,34_3に出力し、切換コマンドをセレクタ38に出力する。
ステップST71:
デコーダ34_1,34_2,34_3は、入力した表示コマンドが示すデコード結果を再生用メモリ36_1〜36_3から読み出してセレクタ38に出力する。
また、セレクタ38は、ステップST12で入力した切換コマンドに基づいてデコーダ34_1,34_2,34_3から入力したデコード結果を切り換えて選択して再生出力する。
再生装置4bのCPU42bは、処理対象のスケジュールバッファ45_1〜45_3に記憶されたピクチャ属性データPPのうち、ステップST71でデコードしたピクチャデータに対応したピクチャ属性データPPの有効性フラグデータvalidを無効に設定する。
CPU20およびCPU42bは、上記処理を行ったピクチャデータが、GOP内の最後のピクチャデータであるか否かを判断し、最後のピクチャデータであると判断するとステップST74に進み、そうでない場合にはステップST60に進み次のピクチャデータについての処理を行う。
ステップST74:
CPU20およびCPU42bは、上記処理を行ったピクチャデータが属するGOPが被再生データENC内の最後のGOPであるか否かを判断し、最後のGOPであると判断すると処理を終了し、そうでない場合にはステップST75に進む。
コンピュータ2のCPU20は、再生方向に応じて次の1GOPをHDD12から読み出す。
ステップST76:
コンピュータ2のCPU20は、ステップST75で読み出したGOPを、ブリッジ18およびPCIバス6を介して再生装置4bに出力する。
再生装置4bのCPU42bは、コンピュータ2からPCIブリッジ30を介して入力したGOPを入力用メモリ32に書き込む。
コンピュータ2のCPU20が、GOPの転送完了通知を再生装置4bのCPU42bに出力する。
CPU42bは、当該転送完了通知を制御用メモリ40に書き込む。
ステップST78:
再生装置4bのCPU42bは、準備完了通知をコンピュータ2のCPU20に出力する。
ステップST79:
再生装置4bのCPU42bは、例えば、再生方向に応じて次に再生ポイントのピクチャデータを含むGOPのスケジューリング処理が完了しているか否か(すなわち、スケジューリング処理を要するか否か)を判断し、スケジューリング処理を完了していないと判断するとステップST58に進み、そうでない場合にはステップST60に進む。
そのため、データ処理システム1bによれば、GOPの再生処理中に再生速度の変更指示が生じた場合に、当該GOPの再生処理を完了する前に、ピクチャデータ単位で、変更後の再生速度に対応したデコードおよび再生出力を行うことができる。その結果、再生装置4bが再生速度の変更指示を受けてから、当該変更後の再生速度に対応した再生出力が実際に行われるまでの時間を従来に比べて短縮できる。
また、データ処理システム1bでは、スケジュールバッファ45_1〜45_3に記憶されているピクチャ属性データPPの有効性フラグデータvalidを設定する(書き換える)だけで、再生速度変更に対応する。すなわち、ピクチャ属性データPPの並べ替えなど処理負担が大きな処理を行う必要がない。そのため、データ処理システム1bによれば、速度変更に対して小さい処理負担で、しかも短時間で対応できる。
このような効果は、longGOPを採用した場合など、スケジュール対象のピクチャデータの数が多い場合に特に顕著である。
上述した実施形態では、複数のピクチャデータとして、MPEGのピクチャデータを例示したが、本発明は順にデコードされるものであれば、オーディオのピクチャデータであってもよい。
このとき、過去の可変速再生処理に用いた一連のスケジューリング、フラグ群の更新情報を、別途スケジューリングのメタデータ(履歴情報)として管理することも可能であり、必要に応じて、圧縮符号化データ中にシンタックスとして記述したり、記録媒体であるHDD12等に別途記録したりしても良い。
このようなメタデータ(履歴情報)を参照ることにより、過去の行われたスケジューリング処理を・再利用することができ、更に正確に高速に実行することが可能となる。
なお、このようなメタデータは、例えばデータベースとして外部装置で管理するような構成にしてもよい。
具体的には、例えば、デコーダ34_1〜34_3が、可変長符号に対する復号および逆量子化のみを行い、逆DCT変換を実行しない場合や、逆量子化を行うが可変長符号に対する復号を行わない場合などにおいても、本発明を適用することができる。このような場合、例えば、デコーダ34_1〜34_3は、例えば符号化処理および復号処理においてどの段階(例えば逆量子化の段階)まで処理が行われたかを示す履歴情報を必要に応じて生成し、不完全に復号されたデータに対応付けて出力することができるようにしても良い。
具体的には、デコーダ34_1〜34_3が、例えば、DCT変換および量子化が行われているが、可変長符号化処理が行われていない不完全に符号化されたデータに対して、逆DCT変換および逆量子化のみを行い、可変長符号に対する復号は実行しない場合などにおいても、本発明を適用することができる。
また、このような場合、例えば、CPU20は、不完全に符号化されたデータに対応付けられてHDD12に記憶されている符号化処理および復号処理の履歴情報を取得し、これらの情報に基づいて、デコーダ34_1〜34_3によるデコードのスケジューリングを行うことができるようにしても良い。
また、このような場合も、例えば、CPU20は、不完全に符号化されたデータに対応付けられてHDD12に記憶されている符号化処理および復号処理の履歴情報を取得し、これらの情報に基づいて、デコーダ34_1〜34_3によるデコードのスケジューリングを行うことができるようにしても良い。更に、この場合においても、デコーダ34_1〜34_3は、符号化処理および復号処理の履歴情報を必要に応じて生成し、不完全に復号されたデータに対応付けて出力することができるようにしても良い。
換言すれば、デコーダ34_1〜34_3が、CPU20の制御に基づいて、部分的な復号を行う(復号処理の工程のうちの一部を実行する)場合においても、本発明は適用可能であり、CPU20は、不完全に符号化されたデータに対応付けてHDD12に記憶されている符号化処理および復号処理の履歴情報を取得し、これらの情報に基づいて、デコーダ34_1〜34_3によるデコードのスケジューリングを行うことができ、デコーダ34_1〜34_3は、符号化および復号の履歴情報を必要に応じて生成し、不完全に復号されたデータに対応付けて出力することができるようにしても良い。
このとき、独立した装置として構成されているデコーダは、圧縮符号化データの供給を受けてこれを復号し、表示または出力するのみならず、上述した場合と同様にして、圧縮符号化データの供給を受け、中途段階まで部分的に復号して、符号化および復号の履歴情報とともに外部に出力したり、部分的に符号化されたデータの供給を受け、復号処理を行い、ベースバンド信号に変換して外部に出力したり、部分的に符号化されたデータの供給を受け、中途段階まで部分的に復号して、符号化および復号の履歴情報とともに外部に出力するようにしても良い。
同様に、上述の実施の形態においては、メモリ32,40等がそれぞれ別の形態で構成されているが、これに限らず、これらのメモリを再生装置4において1つのメモリとして構成する形態も考えられる。
Claims (19)
- 被再生データを構成する複数のピクチャデータをデコードするデータ処理装置であって、
前記ピクチャデータをデコードするデコーダと、
予め規定された複数の前記ピクチャデータを単位として、当該ピクチャデータを前記デコーダでデコードさせる順序を決定するデコードスケジュールを行い、当該デコードスケジュールで決定された前記順序で処理対象の前記ピクチャデータを選択する選択手段と、
前記選択手段により選択された処理対象のピクチャデータを対象として、ピクチャデータをデコードするか否かをピクチャデータ毎に示すピクチャ属性データを、指定された再生速度に応じて更新する更新手段と、
前記更新手段により更新されたピクチャ属性データに基づいて、前記ピクチャデータのデコードを行うか否かを決定してデコードするように、前記デコーダのデコードを制御する制御手段と、
を有するデータ処理装置。 - 前記デコーダは、前記ピクチャ属性データを更新する度に、デコードすることを示す前記ピクチャ属性データに対応した前記ピクチャデータの再生時刻を更新する
請求項1に記載のデータ処理装置。 - 前記ピクチャ属性データを記憶する制御記憶手段を更に有する
請求項1に記載のデータ処理装置。 - 前記デコーダによりデコードされて得られたデコード結果を記憶する再生記憶手段を更に有し、
前記デコーダは、前記再生記憶手段から読み出したデコード結果を再生する
請求項1に記載のデータ処理装置。 - 前記被再生データを構成する複数のピクチャデータを出力するデータ処理装置から出力された前記ピクチャデータを記憶する入力メモリを更に備える
請求項1に記載のデータ処理装置。 - 前記被再生データを構成する複数のピクチャデータを記録する記録媒体と、
前記記録媒体から前記ピクチャデータを読み出す読み出し手段と、
前記読み出し手段が読み出した前記ピクチャデータを記憶する入力メモリと、
を更に備える
請求項1に記載のデータ処理装置。 - 前記制御手段は、前記指定された再生速度が1倍速以上であることを条件に前記決定を行う
請求項1に記載のデータ処理装置。 - 前記制御手段は、単数の前記ピクチャデータを単位として、前記決定に基づいて当該ピクチャデータの前記デコードを制御する
請求項1に記載のデータ処理装置。 - 前記デコーダは、
前記デコード結果が他の前記ピクチャデータのデコードで参照される第1の種類の前記ピクチャデータと、デコード結果が他の前記ピクチャデータのデコードで参照されない第2の種類の前記ピクチャデータとを構成要素として構成される被再生データを、前記ピクチャデータを単位としてデコードし、
前記再生記憶手段内の前記第1の種類の前記ピクチャデータの前記デコード結果の記憶を保持し、
前記再生記憶手段に既に記憶された前記第1の種類のピクチャデータのデコード結果を参照して、前記第2の種類のピクチャデータをデコードして再生出力する
請求項4に記載のデータ処理装置。 - 前記デコーダは、前記被再生データを構成する複数の前記ピクチャデータのうち前記第1の種類のピクチャデータを、当該第1の種類のピクチャデータのデコード結果を参照してデコードされる前記第2の種類のピクチャデータに先立ってデコードする
請求項9に記載のデータ処理装置。 - 前記第1の種類のピクチャデータとして、他のピクチャデータのデコード結果を参照しないでデコードされるIピクチャデータと、他のピクチャデータのデコード結果を参照してデコードされるPピクチャデータとを有し、
前記第2の種類のピクチャデータは、他のピクチャデータのデコード結果を参照してデコードされるBピクチャデータであり、
前記デコーダは、デコード結果が前記メモリに記憶されている第1の前記Iピクチャデータと、複数の前記Iピクチャデータのうち前記第1のIピクチャデータに対して再生方向で次に位置する第2の前記Iピクチャデータとの間に位置する前記Pピクチャデータのデコード結果と、前記第1のIピクチャデータのデコード結果とを前記再生記憶手段内の第1の記憶領域内に同時に記憶保持させる
請求項10に記載のデータ処理装置。 - 前記再生記憶手段は、前記第1の記憶領域とは別に、前記Bピクチャデータを記憶する第2の記憶領域を有し、
前記デコーダは、再生出力した前記Bピクチャデータのデコード結果を、前記第1のIピクチャデータと前記第2のIピクチャデータとの間に位置する全ての前記Bピクチャデータのデコードを完了する前に順に、他の前記Bピクチャデータのデコード結果で上書きする
請求項11に記載のデータ処理装置。 - 前記被再生データを並列に処理する複数の前記デコーダと、
前記複数のデコーダの各々に対応して設けられた複数の前記再生記憶手段と、
同じ前記第1の種類のピクチャデータのデコード結果を参照する前記第2の種類のピクチャデータが同じ前記デコーダでデコードされ、且つ同じピクチャデータ群に含まれる前記第1の種類のピクチャデータが同じ前記デコーダでデコードされるように、前記ピクチャデータを前記デコーダにデコードさせる処理回路と
を有する請求項9に記載のデータ処理装置。 - 前記処理回路は、前記複数のデコーダに、連続して再生出力する複数の前記ピクチャデータで各々が構成され順に再生出力される複数のピクチャデータ群を異なる前記デコーダにデコードさせる
請求項13に記載のデータ処理装置。 - 前記デコーダは、第1の前記ピクチャデータ群の前記第1の種類のピクチャデータのデコード結果を、前記再生記憶手段に記憶されている前記第1のピクチャデータ群の直前に当該デコーダによってデコードされた第2のピクチャデータ群の前記第1の種類のピクチャデータのデコード結果に上書きする
請求項14に記載のデータ処理装置。 - 被再生データを構成する複数のピクチャデータをデコードするデコーダ及び前記デコーダを制御するコンピュータを有する再生装置によるデータ処理方法であって、
前記コンピュータが下記の制御工程、すなわち、
予め規定された複数の前記ピクチャデータを単位として当該ピクチャデータをデコードする順序を決定するデコードスケジュールを行う第1の工程と、
前記第1の工程で行った前記デコードスケジュールで決定された前記順序で処理対象の前記ピクチャデータを選択する第2の工程と、
前記第2の工程で選択された処理対象のピクチャデータを対象として、ピクチャデータをデコードするか否かをピクチャデータ毎に示すピクチャ属性データを、指定された再生速度に応じて更新する第3の工程と、
前記第3の工程により更新されたピクチャ属性データに基づいて 前記ピクチャデータのデコードを行うか否かを決定してデコードするように、前記デコーダのデコードの制御をする第4の工程と、
を行う
データ処理方法。 - 被再生データを構成する複数のピクチャデータをデコードするデコーダ及び前記デコーダを制御するコンピュータを有するデータ処理装置の前記コンピュータが実行するプログラムであって、
予め規定された複数の前記ピクチャデータを単位として当該ピクチャデータをデコードする順序を決定するデコードスケジュールを行う第1の手順と、
前記第1の手順で行った前記デコードスケジュールで決定された前記順序で処理対象の前記ピクチャデータを選択する第2の手順と、
前記第2の手順で選択された処理対象のピクチャデータを対象として、ピクチャデータをデコードするか否かをピクチャデータ毎に示すピクチャ属性データを、指定された再生速度に応じて更新する第3の手順と、
前記第3の手順により更新されたピクチャ属性データに基づいて 前記ピクチャデータのデコードを行うか否かを決定してデコードするように、前記デコーダのデコードの制御をする第4の手順と、
を前記コンピュータに実行させる
プログラム。 - 被再生データを構成する複数のピクチャデータをデコードするデコーダ及び前記デコーダを制御するコンピュータを有するデータ処理装置の前記コンピュータが実行するプログラムを記録する記録媒体であって、
前記記録媒体は、
予め規定された複数の前記ピクチャデータを単位として当該ピクチャデータをデコードする順序を決定するデコードスケジュールを行う第1の手順と、
前記第1の手順で行った前記デコードスケジュールで決定された前記順序で処理対象の前記ピクチャデータを選択する第2の手順と、
前記第2の手順で選択された処理対象のピクチャデータを対象として、ピクチャデータをデコードするか否かをピクチャデータ毎に示すピクチャ属性データを、指定された再生速度に応じて更新する第3の手順と、
前記第3の手順により更新されたピクチャ属性データに基づいて 前記ピクチャデータのデコードを行うか否かを決定してデコードするように、前記デコーダのデコードの制御をする第4の手順と、
を前記コンピュータに実行させるプログラムを記録している
記録媒体。 - 前記プログラムを実行する前記コンピュータを有する前記データ処理装置は、
前記被再生データを構成する複数のピクチャデータを記録する記録媒体と、
前記記録媒体から前記ピクチャデータを読み出す読み出し手段と、
前記読み出し手段が読み出した前記ピクチャデータを記憶する入力メモリと、
を備える
請求項18に記載の記録媒体。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005243292A JP4281721B2 (ja) | 2004-10-26 | 2005-08-24 | データ処理装置、データ処理方法、プログラムおよび記録媒体 |
US11/253,685 US20060088279A1 (en) | 2004-10-26 | 2005-10-20 | Reproduction apparatus, data processing system, reproduction method, program, and storage medium |
KR20050099835A KR101241968B1 (ko) | 2004-10-26 | 2005-10-21 | 재생장치, 데이터처리시스템, 재생방법, 프로그램 및기록매체 |
TW94137534A TWI291833B (en) | 2004-10-26 | 2005-10-26 | Reproduction apparatus, data processing system, reproduction method, program and recording medium |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004311596 | 2004-10-26 | ||
JP2005243292A JP4281721B2 (ja) | 2004-10-26 | 2005-08-24 | データ処理装置、データ処理方法、プログラムおよび記録媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006157876A JP2006157876A (ja) | 2006-06-15 |
JP4281721B2 true JP4281721B2 (ja) | 2009-06-17 |
Family
ID=36206263
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005243292A Expired - Fee Related JP4281721B2 (ja) | 2004-10-26 | 2005-08-24 | データ処理装置、データ処理方法、プログラムおよび記録媒体 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20060088279A1 (ja) |
JP (1) | JP4281721B2 (ja) |
KR (1) | KR101241968B1 (ja) |
TW (1) | TWI291833B (ja) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4375305B2 (ja) * | 2004-10-26 | 2009-12-02 | ソニー株式会社 | 情報処理装置および情報処理方法、記録媒体、並びに、プログラム |
US9100702B2 (en) | 2006-09-11 | 2015-08-04 | Tivo Inc. | Personal content distribution network |
JP4902854B2 (ja) * | 2006-09-12 | 2012-03-21 | パナソニック株式会社 | 動画像復号化装置、動画像復号化方法、動画像復号化プログラム、動画像符号化装置、動画像符号化方法、動画像符号化プログラム、及び動画像符号化復号化装置 |
KR100827107B1 (ko) * | 2006-10-20 | 2008-05-02 | 삼성전자주식회사 | 다중 연산부 구조의 h.264 복호화기 및 그 복호화기의압축 영상 데이터 복호화 방법 |
WO2008055180A2 (en) * | 2006-10-31 | 2008-05-08 | Tivo Inc. | Method and apparatus for downloading ancillary program data to a dvr |
US8270819B2 (en) * | 2006-10-31 | 2012-09-18 | Tivo Inc. | Performing trick play functions in a digital video recorder with efficient use of resources |
CN101523911B (zh) * | 2006-10-31 | 2013-08-28 | Tivo有限公司 | 用于将辅助节目数据下载到dvr的方法和装置 |
US20090094113A1 (en) * | 2007-09-07 | 2009-04-09 | Digitalsmiths Corporation | Systems and Methods For Using Video Metadata to Associate Advertisements Therewith |
US8359612B2 (en) | 2008-08-13 | 2013-01-22 | Tivo Inc. | Content distribution system using transportable memory devices |
JP2011227834A (ja) * | 2010-04-22 | 2011-11-10 | Sony Corp | 信号制御装置及び信号制御方法 |
KR101452368B1 (ko) * | 2012-10-18 | 2014-10-24 | 한국전자통신연구원 | 병렬처리 기반비디오 디코딩 방법 및 그 장치 |
KR102331537B1 (ko) * | 2014-01-13 | 2021-11-26 | 한화테크윈 주식회사 | 디코딩 장치 및 방법 |
KR102363686B1 (ko) * | 2015-06-30 | 2022-02-17 | 엘지디스플레이 주식회사 | 시퀀스가 제어된 타이밍 컨트롤러, 브릿지 집적회로 및 이를 구동하는 방법 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5956088A (en) * | 1995-11-21 | 1999-09-21 | Imedia Corporation | Method and apparatus for modifying encoded digital video for improved channel utilization |
US6201927B1 (en) * | 1997-02-18 | 2001-03-13 | Mary Lafuze Comer | Trick play reproduction of MPEG encoded signals |
JP3573396B2 (ja) * | 1997-06-20 | 2004-10-06 | 富士通株式会社 | 動画像復号方法及び装置 |
EP1191795A3 (en) * | 2000-09-22 | 2004-04-14 | Matsushita Electric Industrial Co., Ltd. | Image decoding method and apparatus |
JP3825719B2 (ja) | 2002-06-13 | 2006-09-27 | 三洋電機株式会社 | 画像再生方法、画像再生装置、および画像記録装置 |
ES2535957T3 (es) * | 2002-10-01 | 2015-05-19 | Panasonic Intellectual Property Corporation Of America | Dispositivo de codificación de imágenes, dispositivo de descodificación de imágenes y sus métodos |
JP4059857B2 (ja) * | 2004-03-02 | 2008-03-12 | 富士通株式会社 | 伝送装置及び伝送方法 |
-
2005
- 2005-08-24 JP JP2005243292A patent/JP4281721B2/ja not_active Expired - Fee Related
- 2005-10-20 US US11/253,685 patent/US20060088279A1/en not_active Abandoned
- 2005-10-21 KR KR20050099835A patent/KR101241968B1/ko not_active IP Right Cessation
- 2005-10-26 TW TW94137534A patent/TWI291833B/zh not_active IP Right Cessation
Also Published As
Publication number | Publication date |
---|---|
KR20060049140A (ko) | 2006-05-18 |
JP2006157876A (ja) | 2006-06-15 |
US20060088279A1 (en) | 2006-04-27 |
KR101241968B1 (ko) | 2013-03-11 |
TWI291833B (en) | 2007-12-21 |
TW200631421A (en) | 2006-09-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4281721B2 (ja) | データ処理装置、データ処理方法、プログラムおよび記録媒体 | |
CN100508585C (zh) | 用于控制数字视频比特流逆向播放的装置和方法 | |
US8437408B2 (en) | Decoding with reference image stored in image memory for random playback | |
JPH08214260A (ja) | 符号化データの特殊再生方法および特殊再生装置 | |
JP4244974B2 (ja) | データ処理システム、再生装置、データ処理装置、再生方法、データ処理方法、プログラムおよび記録媒体 | |
JP4281720B2 (ja) | データ処理装置、データ処理方法、データ処理システム、プログラムおよび記録媒体 | |
KR20060049355A (ko) | 재생장치, 데이터처리시스템, 재생방법, 프로그램 및기록매체 | |
KR20060050530A (ko) | 복호화 장치 및 복호화 방법, 프로그램, 기록 매체, 복호화제어 장치 및 복호화 제어 방법 | |
JP4492487B2 (ja) | データ処理装置、データ処理システム、プログラムおよび記録媒体 | |
JP4218626B2 (ja) | 復号化装置、復号化方法および復号化プログラム、再生システム、再生装置、再生方法および再生プログラム、ならびに、記録媒体 | |
JP3365109B2 (ja) | データ再生装置及びデータ再生方法 | |
US7433288B2 (en) | Recording device and method, recording medium and program | |
JP4281722B2 (ja) | 再生装置、再生方法、プログラムおよび記録媒体 | |
CN100466712C (zh) | 再现设备、数据处理系统以及再现方法 | |
JP4272753B2 (ja) | 再生装置及びその制御方法、並びにコンピュータ読み取り可能な記憶媒体 | |
JPH07193785A (ja) | 情報記録再生装置及び記録再生方法 | |
JP2001103427A (ja) | 圧縮画像再生装置及びプログラム記録媒体 | |
JP2002171523A (ja) | 画像復号装置,画像復号方法,及びプログラム記憶媒体 | |
JP2006128829A (ja) | 再生装置、データ処理システム、再生方法、プログラムおよび記録媒体 | |
JP2004135241A (ja) | データ処理装置およびデータ処理方法、並びにプログラム | |
JPWO2005086485A1 (ja) | 符号化データ復号装置 | |
JP2003283989A (ja) | データ処理装置および方法、プログラム格納媒体、並びにプログラム | |
JP2002158967A (ja) | ディスク記録再生装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070228 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080917 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080924 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081119 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081224 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090130 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090224 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090309 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120327 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130327 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |