JP2004208315A - 早送りモードのmpegピクチャを復号し、表示する方法および装置、そのような装置が組み込まれたビデオドライバ回路およびデコーダボックス - Google Patents
早送りモードのmpegピクチャを復号し、表示する方法および装置、そのような装置が組み込まれたビデオドライバ回路およびデコーダボックス Download PDFInfo
- Publication number
- JP2004208315A JP2004208315A JP2003424721A JP2003424721A JP2004208315A JP 2004208315 A JP2004208315 A JP 2004208315A JP 2003424721 A JP2003424721 A JP 2003424721A JP 2003424721 A JP2003424721 A JP 2003424721A JP 2004208315 A JP2004208315 A JP 2004208315A
- Authority
- JP
- Japan
- Prior art keywords
- pictures
- picture
- display
- delay
- type
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/78—Television signal recording using magnetic recording
- H04N5/782—Television signal recording using magnetic recording on tape
- H04N5/783—Adaptations for reproducing at a rate different from the recording rate
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/78—Television signal recording using magnetic recording
- H04N5/781—Television signal recording using magnetic recording on disks or drums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/84—Television signal recording using optical recording
- H04N5/85—Television signal recording using optical recording on discs or drums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
- H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Television Signal Processing For Recording (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
【課題】ハードディスクからのデータの抽出から表示までの一連のデータストリーム処理の仕様に基づいて、選択された速度におけるピクチャの表示を最適化することを可能にするルールを提案する。
【解決手段】 MPEG標準に準拠して符号化されたピクチャを、順方向モードで×Nの論理速度で復号し、表示する方法は、該論理速度において行われる表示によって指定される論理ピクチャに対する、表示されるピクチャの遅れの値に応じて、指定された閾値(N1、N2、N3、N4)に基づく復号ルールおよび表示ルールを適用する。
【選択図】 図6
【解決手段】 MPEG標準に準拠して符号化されたピクチャを、順方向モードで×Nの論理速度で復号し、表示する方法は、該論理速度において行われる表示によって指定される論理ピクチャに対する、表示されるピクチャの遅れの値に応じて、指定された閾値(N1、N2、N3、N4)に基づく復号ルールおよび表示ルールを適用する。
【選択図】 図6
Description
本発明の他の機能および利点は、添付の図面を参照して、非限定的で典型的な実施形態についての以下の説明によって明白になるであろう。
本発明は、個人的なデジタル記録機能(PVR:Personal Video Recorder)を有するビデオ復号器に応用される。このような復号器では、プログラムの記録は、ハードディスク、デジタルビデオカセット、DVD(「Digital Versatile Disk」)等といった大容量デジタル記録媒体(DSM:Digital Storage Media)になされている。
このような復号器は、特に、衛星、ケーブル、または地上デジタル放送(DVB:Digital Video Broadcasting)によりリアルタイムに放送されるデジタル信号のの入り口とアナログテレビジョンジョンとの間のインタフェースを提供するデコーダボックス(「Set−Top Boxes」)である。このようなデコーダボックスはスタンドアロンの装置である。しかし、本発明は、デジタルテレビジョンに組み込まれている内蔵復号器に、またはDVD読み出し装置、デジタルビデオカセット読み出し装置等のようなデジタル読み出し/記録装置にも適用される。
デコーダボックスは、1または2つ以上のプログラムを、圧縮されたデジタルデータのストリームの形式、すなわちビデオフレーム(すなわちピクチャ)およびオーディオフレームがデータ放送の容量を削減するように符号化された形式で受信する。例えば、この符号化は、MPEG2規格(ISO/lEC 13818−2)、以下、MPEG規格(「Motion Pictures Expert Group」)の仕様書に適合している。この規格は、動画や音声(特にデジタルテレビジョン用の)を符号化するデータ圧縮技術を定めている。
本明細書において、用語「プレゼンテーション」は、それがプログラムに関して使用される場合には、復号されたオーディオデータおよびビデオデータをユーザによってそれぞれ可聴および可視可能な形態で復元することを意味している。プログラムに関して使用される用語「再生」(または「読み出し」)は、より具体的には、ハードディスク上のプログラムの記録からのプログラムの復号、表示を意味している。用語「表示」は特に、ビデオフレームのプレゼンテーションを指するのに使用される。
ハードディスクは、多くの機能と、特に再生の高機能モード(すなわち「トリックモード」)、すなわち公称の送り速度(X1)とは異なる速度での読み出し、特に高速またはその他の場合の早送りおよび巻き戻しを実行することを可能にしている。
公称速度における(×1)順方向表示とは、フレーム、すなわち、ピクチャが、表示装置の各垂直同期イベント(以下、VSYNC)に、ピクチャの表示の順方向順序(前送り順序)で表示されるということを意味する。速度×2での表示とは、理論的には、あるVSYNCにおいてランクnのフレームが表示されるならば、つぎのVSYNCにはランクn+2のフレームが表示されるということを意味する。ここで、ランクとは、公称速度(×1)における、ピクチャの表示の順方向の順位のことである。表示されるピクチャのこのスキップは、速い速度での読み出しの印象を与える。さらに一般的に言えば、Nを厳格に0より大きい数として、速度×Nのときには、直前に表示されたフレームに対してランクNのフレームが、理論的には、VSYNC毎に表示される。換言すれば、理論的にはN個のうちの1個のピクチャが表示される。
速い順方向表示を行なうときに直面する問題は部分的に、まさに、MPEGストリームの構成に関連している。具体的には、ストリームの構造が固定されていないので、N個のピクチャ毎に1つのピクチャを表示するためには、いずれにせよ、データの全セットが処理されることが必要である。このことは、MPEG標準の意味におけるIピクチャのみが、それらのピクチャの復号に必要な情報の全セットを含んでいるので、表示されることが意図されていないピクチャを単に無視することにつながらない。
したがって、例えば、MPEG標準の意味におけるPピクチャを表示するためには、多数の以前のピクチャを復号することが必要になることがある。そのような理由で、復号器は、×1より大きい速度で表示するためには、理論的にはピクチャの全セットをより速く復号することができなければならない。
さらに、速い速度での順方向表示は、デコーダボックスの構成要素の全セットの処理速度、ビットレートまたはアクセス時間を明らかに制限する。したがって、考えられる制限する構成要素は、すぐ前に記載されている、MPEG復号器であるが、データが多重化され、および/またはスクランブルされて蓄積される場合には、アクセスが多重化されて行われるであろうディスク、デマルチプレクサ、デスクランブラー、およびスクランブル解読キーを有するカードとのインタフェースもその構成要素である。
したがって、速度×Nで高速の順方向表示を行なうことは、各VSYNCイベントにおいて、N個のピクチャから1個のピクチャを表示させる理論的規則と比較して、実際には、多数の次善の規則を必要とする。
従来技術による方法は、I型のピクチャのみを表示するか、または、理論的に表示されるべきピクチャが復号されるまで現在のピクチャをそのまま凍結することを提案している。しかし、これらの方法は完全に満足できるものではない。特に、第2のケースは、全処理をデコーダボックスの最も遅い要素の速度に制限することと同等である。
本発明の1つの目的は、とりわけ、ハードディスクからのデータの抽出から表示までの一連のデータストリーム処理の仕様に基づいて、選択された速度におけるピクチャの表示を最適化することを可能にす規則ルを提案することである。
したがって、本発明の第1の態様は、Nを公称速度×1に対する表示速度の係数に対応する、ゼロより大きい数であるとするとき、指定されたオーディオビジュアル・プログラムに対応する圧縮されたデータストリームの形式で大容量記憶ディジタル媒体上に蓄積されているタイプIピクチャ、タイプPおよび/またはBの予測されるピクチャを有する、MPEG標準に準拠して符号化されたピクチャの、指定された理論的速度×Nで順方向モードに順方向復号と順方向表示をおこなう方法を提案する。これらのステップは、どのピクチャが復号され、表示されるべきピクチャであるかを決定するために実行され、
理論的速度における表示によって特定された理論的ピクチャに対する、表示されるピクチャの遅れを、指定されたそれぞれの表示時点においてリアルタイムに評価するステップと、
もし、遅れが第1の指定された閾値より小さいならば、データストリームの全てのピクチャを復号するステップと、
もし、遅れが第1の閾値よりも大きいならば、データストリームの予測されたピクチャの少なくとも幾つかのピクチャをもはや復号しないステップと、
各表示時点において、表示のために使用することができ、かつ、公称速度で表示したときのピクチャの表示順序において前記表示時点に対応する理論的ピクチャの前にくる復号されたピクチャの中の、前記表示順序に従って理論的ピクチャに最も近い1つのピクチャを表示するステップと
を有する。
理論的速度における表示によって特定された理論的ピクチャに対する、表示されるピクチャの遅れを、指定されたそれぞれの表示時点においてリアルタイムに評価するステップと、
もし、遅れが第1の指定された閾値より小さいならば、データストリームの全てのピクチャを復号するステップと、
もし、遅れが第1の閾値よりも大きいならば、データストリームの予測されたピクチャの少なくとも幾つかのピクチャをもはや復号しないステップと、
各表示時点において、表示のために使用することができ、かつ、公称速度で表示したときのピクチャの表示順序において前記表示時点に対応する理論的ピクチャの前にくる復号されたピクチャの中の、前記表示順序に従って理論的ピクチャに最も近い1つのピクチャを表示するステップと
を有する。
復号されたピクチャの理論的速度に対する表示の遅れの例示的な計算を以下に説明する。
一般化のために、ここではピクチャの見地から記述されているが、本方法はインターリーブ表示システムの場合のピクチャの各フィールドに同様に適用されることに注意するべきである。
予測ピクチャがタイプBのピクチャを含んでいる場合を考える。もし、遅れが第1の閾値よりも大きいならば、本発明の方法は、有利な方法として、タイプBの予測ピクチャをもはや復号せず、したがって、もはや、表示しないことを提案する。タイプBのピクチャに対する復号処理と表示の時間に等しい大きさのスキップを実行することによって、それに応じて、タイプBのピクチャから予測されるピクチャは存在しないので他のピクチャの復号処理を阻害することなく理論的速度に対する表示遅れを小さくすることができる。
もし、遅れが第1の閾値よりも大きい第2の閾値よりも大きいならば、タイプPの予測ピクチャの少なくとも幾つか、およびタイプPの該予測ピクチャから予測されるピクチャもまた、もはや復号されないし、したがって、もはや表示されないことが望ましい。タイプPの予測ピクチャを復号しないことによって、このタイプPの予測ピクチャから予測されるタイプBおよびタイプPのピクチャを復号することが実際上不可能になる。これは、タイプBのピクチャのスキップが、遅れを第2の閾値よりも低い値に維持するために充分でない場合に発生する。
もし、遅れが、第2の閾値よりも大きい第3の閾値より大きいならば、有利なことに、タイプIのピクチャのみが復号され、したがって、表示される。換言すれば、予測ピクチャはもはや復号されない。
もし、遅れが、前記第3の閾値よりも大きい第4の閾値よりも大きいならば、圧縮データストリームにおいて順方向スキップが行われることが望ましい。
これらの規則によって理論的速度から過度に外れることを回避しながら、デコーダボックスの一連の処理の種々の構成要素の仕様にしたがって、最大可能な数のピクチャを復号することができる。
有利な実施態様においては、表示遅れは、表示の垂直同期イベント(VSYNC)に対して時間的に固定された仮想時間基準を基準にとり、表示されるピクチャを、理論的速度×Nに従って表示されるべきピクチャと、これらのイベントの各々において比較して、遅れに該当するピクチャの数と定義される。
遅れが第4の閾値よりも大きい場合にデータストリームにおいて順方向にスキップされるディジタルデータストリームのバイト数は、遅れに該当するピクチャの数と、大容量記憶ディジタル媒体からの前記圧縮データストリームの読み出しの平均ビットレートとに基づいて定められることが望ましい。この方法によって、圧縮データストリーム中においてピクチャの位置が分からないということを、部分的に克服することができる。具体的には、上記の遅れは、大容量記憶ディジタル媒体上のデータの構成に直接には対応していない単位(画像)の数として表現されているが、大容量記憶ディジタル媒体からのデータの読み出しにおけるそのようなスキップによって、上記の遅れを概ね補償することができる。
仮想時間基準は、表示の1垂直同期イベント当たりの通過ピクチャの理論的数に等しいパラメータによって定義されることが有利である。例えば、理論的速度が×2の場合には、1VSYNC当たりに通過するピクチャの理論的な数は2ピクチャ(公称速度×1の場合に1VSYNC当たり1ピクチャであるのに対して)である。このように定義された仮想時間基準は、表示の時点の時間基準の2倍の周波数を有する。さらに、パラメータは、「画像凍結」または「ピクチャ進みによる画像」のような動作に対して、それぞれ0または1に等しいことに注目すべきである。
表示の理論的速度はユーザによって制御され、そして公称表示速度、または、該公称速度に対して加速または減速された表示速度であることが望ましい。ユーザのコマンドは、例えば遠隔制御によって行なうことができる。特に、ビデオ・オン・デマンド方式(VDO)の用途においてユーザが支払い前に、ユーザが購入するかも知らないプログラムの高速プレゼンテーションにアクセスすることができる他の場合を考えられる。
本発明の主題である方法の有利な実施において、1垂直同期イベント当たりの通過ピクチャの理論的数に等しいパラメータは、MおよびQを整数とし、分数M/Qが約分されているとして、M/Qの型の分数である。具体的に言うと、実数ではなく、整数で動作させることによって、丸め誤差の伝搬と蓄積とを減少させることができる。例えば、NTSCスクリーンに対して、表示周波数を商30000/1001Hzに等しいと考えることが望ましい。さらに、約分された分数を考慮することによって、本発明の方法による処理を少なくすることができる。例えば、4/2の論理表示速度の場合、もし、仮想時間基準を、2VSYNC毎に4個の通過ピクチャと考えるよりも、1VSYNC毎に2個の通過ピクチャであると考えるならば、手順が最適化される。
データがMPEG復号器に入力として供給される速度について、または、MPEG標準の意味内におけるグループ・オブ・ピクチャ(GOP)の構造について、いかなる仮定もされていないことに注意すべきである。例えば、ストリームがタイプIのピクチャとタイプPの予測ピクチャを含んでいるならば、第1および第2の閾値に等しい値を与えれば充分である。
本発明の第2の態様は、上記の方法を実施する手段を含んでいる装置に関する。
本発明の第3の態様は、前記の第2の態様による装置を含んでいるビデオドライバ回路に関する。
本発明の第4の態様は、前記第3の態様によるビデオドライバ回路を含んでいるデコーダボックス(セット・トップ・ボックス)に関する。
本発明の他の特徴と利点は、以下の記述を読むときさらに明らかになるであろう。以下の記述は、純粋に説明のためのものであり、添付図面と併せて読まれるべきである。
次に本発明の実施の形態について図面を参照して説明する。
図1は本発明の方法を実施するための装置を概略的に示している。この装置は、
MPEG標準に準拠して符号化されたピクチャを含んでいるデータストリーム7が蓄積される、ハードディスクのような大量格納ディジタル媒体1と、
ハードディスク1から読み出された後に圧縮データストリームの一部5を蓄積するバッファメモリ2と、
ビデオデコーダ3、特に、バッファメモリ2の、特に、位置によって定められるMPEGピクチャを復号することができるMPEG復号器と、
復号されたピクチャを読み出し、表示に使用されるフォーマット、例えば、PAL、SECAMまたはNTSCフォーマットに、読み出されたピクチャを変換し、さらに、インターリーブされたピクチャの場合にはフィールドの選択を可能にする表示モジュール4と、
本装置の動作を管理し、デコーダ3と表示モジュール4とを制御する制御部10と
有している。制御部10は、表示遅延の値に応じて次の規則、すなわち、
a/ 各表示時点において、表示のために使用可能であって、公称速度で表示されるときのピクチャの表示順序において該表示時点に対応する理論的ピクチャに先行する複数の復号されたピクチャの1つであって、かつ、前記表示の順序にしたがって前記理論的ピクチャに最も近接したピクチャが表示され、
b/ もし、表示遅れが閾値N1以下であるならば、総てのピクチャが復号され、
c/ もし、表示遅れがN1より大きく、閾値N2以下であるならば、タイプBのピクチャは復号されず、そして表示されず、
d/ もし、表示遅れがN2より大きく、閾値N3以下であるならば、タイプBのピクチャ、少なくともタイプPのピクチャの中の幾つかのもの、および、これらのタイプPのピクチャから予測されたピクチャも復号されず、そして表示されず、
e/ もし、表示遅れがN3より大きく、閾値N4以下であるならば、Iタイプピクチャのみが復号されて表示され、そして、
f/ もし、表示遅れがN4より厳密に大きいならば、復号されるべきデータのスキップが行われる。
MPEG標準に準拠して符号化されたピクチャを含んでいるデータストリーム7が蓄積される、ハードディスクのような大量格納ディジタル媒体1と、
ハードディスク1から読み出された後に圧縮データストリームの一部5を蓄積するバッファメモリ2と、
ビデオデコーダ3、特に、バッファメモリ2の、特に、位置によって定められるMPEGピクチャを復号することができるMPEG復号器と、
復号されたピクチャを読み出し、表示に使用されるフォーマット、例えば、PAL、SECAMまたはNTSCフォーマットに、読み出されたピクチャを変換し、さらに、インターリーブされたピクチャの場合にはフィールドの選択を可能にする表示モジュール4と、
本装置の動作を管理し、デコーダ3と表示モジュール4とを制御する制御部10と
有している。制御部10は、表示遅延の値に応じて次の規則、すなわち、
a/ 各表示時点において、表示のために使用可能であって、公称速度で表示されるときのピクチャの表示順序において該表示時点に対応する理論的ピクチャに先行する複数の復号されたピクチャの1つであって、かつ、前記表示の順序にしたがって前記理論的ピクチャに最も近接したピクチャが表示され、
b/ もし、表示遅れが閾値N1以下であるならば、総てのピクチャが復号され、
c/ もし、表示遅れがN1より大きく、閾値N2以下であるならば、タイプBのピクチャは復号されず、そして表示されず、
d/ もし、表示遅れがN2より大きく、閾値N3以下であるならば、タイプBのピクチャ、少なくともタイプPのピクチャの中の幾つかのもの、および、これらのタイプPのピクチャから予測されたピクチャも復号されず、そして表示されず、
e/ もし、表示遅れがN3より大きく、閾値N4以下であるならば、Iタイプピクチャのみが復号されて表示され、そして、
f/ もし、表示遅れがN4より厳密に大きいならば、復号されるべきデータのスキップが行われる。
を適用する(表示遅延の値の計算は、以下に明示する)。
つぎに、本発明の方法の手順を図2の順方向モードで、理論的速度×Nで、フローチャートを参照して説明する。
この方法は、ハードディスク1上に蓄積されているストリーム7に含まれているピクチャを順方向モードで、理論的速度×Nで読み出す指令の受信21で開始する。ステップ22において、バッファメモリ2にはMPEG標準に準拠して符号化されたピクチャを含む圧縮データストリームの第1の部分5がロードされる。ストリームの第1の部分5の解析段階23は、特に、MPG標準の意味におけるGOPsを復号することを可能し、かつ、そのピクチャの各々についてピクチャのタイプI、P、またはBと、1つのGOP内における、各ピクチャに関するプレゼンテーション・タイムスタンプ(PTS)を定めることを可能になるスタートコードを含み、
図3は、12個のピクチャのGOPを構成するピクチャと、このGOPのピクチャ間の予測リンクを表している。そのGOPの各ピクチャは、タイプI、PまたはBと、公称速度(×1)における順方向表示の、該GOP内における順序を定めるPTSスタンプに対応する、0と11との間にある数によって特定される。したがって、B0は、該GOPのピクチャのうちで最初に表示されなければならないタイプBのピクチャであり、つぎに、順方向表示の順序でI1(タイプIピクチャ)が、そしてつぎにはP3(タイプPピクチャ)、そしてその後にB4等が来る。
図3は、12個のピクチャのGOPを構成するピクチャと、このGOPのピクチャ間の予測リンクを表している。そのGOPの各ピクチャは、タイプI、PまたはBと、公称速度(×1)における順方向表示の、該GOP内における順序を定めるPTSスタンプに対応する、0と11との間にある数によって特定される。したがって、B0は、該GOPのピクチャのうちで最初に表示されなければならないタイプBのピクチャであり、つぎに、順方向表示の順序でI1(タイプIピクチャ)が、そしてつぎにはP3(タイプPピクチャ)、そしてその後にB4等が来る。
矢印の始点は基準ピクチャを印し、矢印の先端はこの基準ピクチャから予測されるピクチャを示している。したがって、B0は前のGOPのピクチャP11から予測されると共に図示されているGOPのピクチャI1から予測される。I1は、いわゆるイントラ符号化ピクチャである。B2は、P3およびI1から予測される。P3はI1から予測され、P5はP3から予測され、等々である。
図4の配列は、解析段階23の内容が形成された、圧縮データストリームの例示された部分5を示している。この部分5には、0と39との間の指標番号によって、配列中に識別される40個のピクチャがあり、この指標番号は、読み出しを容易にするためのものである。第1列にはこの指標番号が含まれている。第2列には、第1列の指標番号によって識別される圧縮されたピクチャに関するデータの開始部(先頭)の、バッファメモリ2内のアドレスが含まれている。第3列には、ピクチャのタイプと、該ピクチャが所属しているGOPにおける(公称速度で表示するための)指標番号を示すタイムスタンプが含まれている。
図4において考察されている例においては、ストリームの部分5に収容されているピクチャは、図3に図示されている構造と類似の構造の、いくつかのGOPに属している。さらに、復号可能のピクチャの先頭は、この表のピクチャ番号2に位置し、ピクチャ番号2は、最初の全GOPのピクチャI1である。このイントラ符号化されたピクチャによって、少なくとも、そのピクチャが一部を構成するGOPのピクチャの幾つか、No.3ピクチャ(B0)からNo.12ピクチャ(P11)までを復号することができる。図では、ピクチャは、復号の順序で描かれていて、表示の順序では描かれていない。
もし、初期の論理表示速度Vが×Nに等しいならば、仮想時間基準は、1VSYNC当たりN個の通過ピクチャであって、これは、各VSYNCイベントに、N個のピクチャ毎に1個のピクチャを表示することになる。VSYNC(0)を、No.2ピクチャ(画像I1)の表示に対応する垂直同期イベントを表すとすると、VSYNC(0)の前方の、VSYNC(p)で表されるp番目の同期イベントにおける理論的な仮想時間基準にしたがって、公称速度(×1)で、表示の順序でI1の後にくる(N×p)番目のピクチャを表示するのが好都合である。
図5は、No.2ピクチャ(画像I1)の前方の、しかし、順方向の表示順序に配置された復号されるピクチャを表している。第1の列は、図4の配列の第1列に従って、このピクチャについての指標番号が含まれている。第2列は、各ピクチャに対するタイプとそのGOP内における指標番号を示している。第3列には、仮想時間基準のイベントを示す水平矢印が含まれている。すなわち1垂直同期VSYNC(2つのVSYNC間の時間は、一定で例えば0.04sである)に対してこの仮想時間基準に従ってN個のイベントがある。第4列は、理論的速度Vに従って表示される理論的ピクチャに対応する、複数の行で表示されている水平矢印がVSYNC毎に含まれている。第5列には、各VSYNCに実際に表示されるピクチャに対応する水平矢印が複数の行で含まれている。最後に、第6および最後の列は表示時間基準の各イベントにおける遅れを表示する鉛直線を含み、円形内の数値は、以下に計算される、ピクチャの数で表した遅れを示している。
したがって、復号は、ステップ25(図2)において、順方向モードでピクチャの全セットにわたって順次に行なわれる。
図6のグラフには、以下に説明される本発明の方法の例示的な実施において考慮される復号と表示動作における閾値N1、N2、N3、およびN4に対する、時点VSYNC(1)からVSYNC(6)までにおける遅れの値が、縦軸に沿って表示されている。
時点VSYNC(1)において、理論的速度×Nにしたがって表示されるべきピクチャが、仮想時間基準に基づいてステップ26において決定される。このピクチャは、用いられている理論的速度が例えば、×3に等しい場合には、No.7ピクチャ(B4)である。
さて、ピクチャI1の復号後、復号器は、この順序では、B2を復号するために必要なNo.4ピクチャ(P3)の復号を行い、つぎにB4を復号することができる前にNo.5ピクチャ(B2)の復号を行い、そしてNo.6ピクチャ(P5)の復号を行はなければならない。本例においては、時点VSYNC(1)では、現在復号されているピクチャはNo.5ピクチャ(B2)であって、No.7ピクチャ(B4)はまだ復号されていない。この理由のために、ステップ27において、時点VSYNC(1)では、復号されていて表示のために用いることができるピクチャが表示される、このピクチャは、公称速度における表示順序ではNo.7ピクチャ(B4)の前に、かつ、No.7ピクチャ(B4)に最も近いピクチャであるからである。本例では、このピクチャはNo.4ピクチャ(P3)であって、このピクチャはB2の復号に使用されるので使用可能である。
図5の配列の第3列に表されている仮想時間基準は、1VSYNC当たり3個の通過ピクチャ、すなわち、No.5、4、7ピクチャ(それぞれ、B2、P3、およびB4)の論理パラメータに基づいている。換言すれば、理論的時間基準は、この例では、M=3、Q=1としてパラメータM/Qで定義されている。この理論的時間基準によると、VSYNC(1)において表示されるべきピクチャは、図5の配列の第4列によって示されているように、No.7ピクチャ(B4)でなければならない。実際に表示されるピクチャは図5の配列の第5列の、No.4ピクチャ(P3)を指している矢印によって特定される。
理論的速度に対する表示の遅れは、つぎに、ステップ28において計算される。この場合、それは1ピクチャ(B4)に等しく、図5の配列の第6列に表されている。
つぎに、ステップ29において、この遅れは、一例においては、それぞれ、1ピクチャ、3ピクチャ、4ピクチャおよび7ピクチャである4つの閾値N1、N2、N3、およびN4と比較される。この例においては、遅れは、厳格には第1の閾値N1より大きくない。このために、前述の規則b/にしたがって、全てのピクチャが引き続いて復号され、表示される。
復号25はさらに続く。時点VSYNC(2)では、理論的時間基準にしたがって、表示されるべき次のピクチャの計算が実行される新たなステップ26が開始する。これは、No.7ピクチャ(B4)の後に、すなわち、No.8ピクチャ(P7)で表示されるべき第3のピクチャである。ところで、VSYNC(1)とVSYNC(2)との間では、復号器は、No.5ピクチャ(B2)の復号と、次に、No.6ピクチャ(P5)の復号を終了し、そして現在、No.4およびNo.6ピクチャ、すなわち、それぞれP3およびP5に基づいてNo.7ピクチャ(B4)を復号している。時点VSYNC(2)においては、No.8ピクチャ(P7)は、まだ、使用することができない。公称速度における表示順序で最も近い(表示に使用可能の)ピクチャはNo.6ピクチャ(P5)であり、したがって、そのNo.6ピクチャが表示されるであろう。遅れは2ピクチャであり、したがって、閾値N2に等しい。したがって、この場合には規則c/が適用される。タイプBの予測されたピクチャは復号されず、または表示されない。
理論的速度×Nにしたがって、時点VSYNC(3)において表示されるべきピクチャはNo.13ピクチャ(B10)である。復号処理は次のように継続する。No.8ピクチャ(P7)、次にNo.10ピクチャ(P9)が復号される。No.9ピクチャ(B6)は復号されない。時点VSYNC(3)において、No.12ピクチャ(P11)が現在復号されている。したがって、No.10ピクチャ(P9)が表示される。遅れは、この場合には1ピクチャに過ぎない。規則ルb/が適用可能であり、ピクチャの全セットの復号処理を再開することができる。
ユーザが、つぎに表示の理論的速度を×6に増加させると仮定する。このことは、理論的時間基準が、M=6およびQ=1としてパラメータM/Qで定まることを意味する。したがって、時点VSYNC(4)に表示されるべきピクチャはNo.19ピクチャ(B4)である。復号処理25はNo.13ピクチャからNo.15ピクチャに続く。時点VSYNC(4)において、No.16ピクチャ(P3)は現在復号されている。さらに、No.19ピクチャ(B4)に最も近く、その時復号されているピクチャはNo.15ピクチャ(B0)である。遅れは4ピクチャである。そのため、規則d/が適用される。
表示の理論的速度を再び増加させて×10にすることを仮定する。パラメータM/Qは、M=10およびQ=1である値になる。時点VSYNC(5)で表示されるべきピクチャはNo.29ピクチャ(B2)である。復号処理は、No.14ピクチャ(タイプIピクチャ)上で続けられ、Bピクチャは復号されず、No.16ピクチャ(P3)、したがって、P3から予測されるPタイプのピクチャ、すなわち、No.18、20、22、24のピクチャも復号されない。No.26ピクチャ(I1)、つぎにNo.28ピクチャ(28)が復号される。
時点VSYNC(5)において、No.29ピクチャ(B2)は復号されない。したがって、表示されるのはNo.26ピクチャ(I1)である。その理由は、No.26ピクチャ(I1)は、No.29ピクチャ(B2)の前に公称速度で順方向順序に表示されなければならず、かつNo.25ピクチャに最も近い位置にある、表示に使用可能なピクチャであるからである。遅れは1ピクチャである。全てのピクチャが復号される。復号処理はNo.29、30、31ピクチャ上で実行される。
時点VSYNC(6)において、No.39ピクチャが表示されなければならないにもかかわらず、復号処理は、現在、No.31ピクチャ上で進行している。遅れは8ピクチャであり、閾値N4を越えている(e/の場合)。したがって、表示されるべき次のピクチャ、すなわち、No.49ピクチャに到達するために、復号されるべきデータについてピクチャスキップが行われる。このピクチャはフレームメモリ2に格納されている圧縮データストリームの部分5にはない。したがって、ディスク上に蓄積されている圧縮データストリームのデータの読み出しのスキップを行うことが必要である。ディスク上の対応するピクチャを突き止めるために利用できる情報がないので、その位置の評価は、スキップされるべきピクチャ数にハードディスクからの読み出しの平均ビットレートを乗算して得られる数に等しいデータ量をスキップすることによって行なわれる。
実際には、0と×2の間の速度に対する、従来の用途においては、復調器は全てのピクチャを復調して然るべき時にそれらのピクチャを表示することができることがわかっている。×2と×6との間の速度に対しては、遅れが一般に1ピクチャを越すのでBピクチャがスキップされる。×6と×10との間の速度に対しては、Pピクチャがスキップされる。×10より大きな速度に対しては、もし、遅れがIピクチャのみの表示動作によって調整されないならば、復号されるべきデータにおいてスキップが行われる。
1 容量記憶ディジタル媒体
2 バッファメモリ
3 MPEG復号器
4 表示モジュール
5 圧縮データストリームの一部
7 データストリーム
18 制御部
21〜28 ステップ
2 バッファメモリ
3 MPEG復号器
4 表示モジュール
5 圧縮データストリームの一部
7 データストリーム
18 制御部
21〜28 ステップ
Claims (22)
- Nを表示の公称速度×1に対する表示速度の係数に対応する、ゼロより大きい数であるとするとき、指定されたオーディオビジュアル・プログラムに対応する圧縮されたデータストリーム(7)の形式で大容量記憶ディジタル媒体(1)上に蓄積されているタイプIピクチャ、タイプPおよび/またはBの予測されたピクチャを含む、MPEG標準に準拠して符号化されたピクチャを、指定された理論的速度×Nで順方向モードに復号および表示する方法において、
前記理論的速度における表示によって特定された理論的ピクチャに対する、表示されるピクチャの遅れを、指定されたそれぞれの表示時点においてリアルタイムに評価するステップ(28)、
もし、前記遅れが第1の指定された閾値(N1)より小さいならば、前記データストリームの全てのピクチャを復号するステップと、
もし、前記遅れが前記第1の閾値よりも大きいならば、前記データストリームの予測されたピクチャの少なくとも幾つかのピクチャをもはや復号しないステップと、
各表示時点において、表示のために使用することができ、かつ、前記公称速度で表示したときのピクチャの表示順序において前記表示時点に対応する前記理論的ピクチャの前にくる復号されたピクチャの中の、前記表示順序に従って前記理論的ピクチャに最も近い1つのピクチャを表示するステップを
有することを特徴とする、順方向モードで復号と表示を行う方法。 - 前記予測されたピクチャはタイプBのピクチャを含み、もし前記遅れが前記第1の閾値より大きいならば、該タイプBの予測ピクチャをもはや復号せず、したがって、もはや表示しない、請求項1に記載の方法。
- 前記予測されたピクチャはタイプPのピクチャを含み、もし前記遅れが第2の閾値(N2)より大きいならば、タイプPの予測されたピクチャの中の少なくとも幾つかと前記タイプPのピクチャから予測されたピクチャをもはや復号せず、したがって、もはや表示しない、請求項2に記載の方法。
- もし、前記遅れが第3の閾値(N3)よりも大きいならばタイプIのピクチャのみを復号し、したがって表示する、請求項3に記載の方法。
- もし、前記遅れが第4の閾値(N4)より大きいならば、圧縮データストリームに順方向のスキップを行う、請求項4に記載の方法。
- 表示の垂直同期イベント(VSYNC)に対して時間的に固定された仮想時間基準を用い、表示されるピクチャを、前記仮想時間基準に従って表示されるべきピクチャと比較することによって、表示の遅れが、遅れに該当するピクチャの数と定義されている、請求項1から5のいずれか1項に記載の方法。
- 前記データストリームの大容量記憶ディジタル媒体からの読み出しに対して順方向にスキップされるディジタルデータストリームのバイト数が、遅れに該当するピクチャの数と、前記大容量記憶ディジタル媒体からの、前記圧縮データストリームの読み出しの平均ビットレートとに基づいて定められている、請求項5および請求項6に記載の方法。
- 前記仮想時間基準が、表示の1垂直同期イベント当たりに通過するピクチャの理論的な数に等しいパラメータによって定義されている、請求項6または請求項7に記載の方法。
- 表示の速度がユーザによって制御され、公称速度、または該公称速度に対して速められた速度である、請求項1から8のいずれか1項に記載の方法。
- 1垂直同期イベント当たりに通過するピクチャの理論的な数に等しいパラメータが、MおよびQを整数とし、分数M/Qを約分して、タイプM/Qである、請求項8または請求項9に記載の方法。
- Nが表示の公称速度×1に対する速度の係数に対応する、ゼロより大きい数であるとするとき、指定されたオーディオビジュアル・プログラムに対応する圧縮されたデータストリーム(7)の形式で大容量記憶ディジタル媒体(1)上に蓄積されているタイプIピクチャ、およびタイプPおよび/またはBの予測されたピクチャを含む、MPEG標準に準拠して符号化されたピクチャを指定された理論的速度×Nで順方向モードに復号および表示をする装置において、
前記理論的速度における表示によって特定された理論的ピクチャに対する、表示されるピクチャの遅れを、指定されたそれぞれの表示時点においてリアルタイムに評価する手段と、
もし、前記遅れが第1の指定された閾値(N1)より小さいならば、前記データストリームの全てのピクチャを復号する手段と、
もし、前記遅れが前記第1の閾値よりも大きいならば、前記データストリームの予測ピクチャの少なくとも幾つかのピクチャをもはや復号しないように動作する手段と、
各表示時点において、表示のために使用することができ、かつ、前記公称速度で表示したときのピクチャの表示順序において前記表示時点に対応する前記理論的ピクチャの前にくる復号されたピクチャの中の、前記表示順序に従って前記理論的ピクチャに最も近い1つのピクチャを表示する手段と
を有する、順方向モードで復号と表示をおこなう装置。 - 前記予測ピクチャはタイプBのピクチャを含み、かつ、前記遅れが前記第1の閾値より大きいならば、該タイプBの予測ピクチャをもはや復号せず、したがって、もはや表示しないように動作する手段を有する、請求項11に記載の装置。
- 前記予測ピクチャはタイプPのピクチャを含み、もし前記遅れが第2の閾値(N2)より大きいならば、タイプPの予測ピクチャの中の少なくとも幾つか、または前記タイプPのピクチャから予測されるピクチャをもはや復号せず、したがって、もはや表示しないように動作する手段を有する、請求項12に記載の装置。
- もし、前記遅れが第3の閾値(N3)よりも大きいならばタイプIのピクチャのみを復号し、したがって表示する手段を有する、請求項13に記載の装置。
- もし、前記遅れが第4の閾値(N4)より大きいならば、圧縮データストリームに順方向のスキップを行う手段を有する、請求項14に記載の装置。
- 表示の垂直同期イベント(VSYNC)に対して時間的に固定された仮想時間基準を有し、遅れに該当するピクチャの数として定義された前記遅れを計算する手段は、表示されるピクチャを、前記仮想時間基準に従って表示されるべきピクチャと、比較することによって動作をする、請求項11から15のいずれか1項に記載の装置。
- データストリームの大容量記憶ディジタル媒体からの読み出しに対してスキップを行う手段が、遅れに該当するピクチャの数と、前記大容量記憶ディジタル媒体からの前記圧縮データストリームの読み出しの平均ビットレートとに基づいて定められるバイト数のディジタルデータストリームをスキップすることによって動作する、請求項15および請求項16に記載の装置。
- 前記仮想時間基準が、表示の1垂直同期イベント当たりに通過するピクチャの理論的な数に等しいパラメータによって定義されている、請求項16または請求項17に記載の装置。
- 表示の速度がユーザによって制御され、公称速度または該公称速度に対して速められた速度である、請求項11から18のいずれか1項に記載の装置。
- 前記1垂直同期イベント当たりに通過するピクチャの理論的な数に等しいパラメータが、MおよびQを整数とし、分数M/Qを約分して、タイプM/Qである、請求項18または請求項19に記載の装置。
- ビデオドライバ回路において、請求項11から20のいずれか1項に記載の装置を有することを特徴とするビデオドライバ回路。
- デコーダボックスにおいて、請求項21に記載のビデオドライバ回路を有することを特徴とするデコーダボックス。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR0216327A FR2849331A1 (fr) | 2002-12-20 | 2002-12-20 | Procede et dispositif de decodage et d'affichage en marche avant acceleree d'images mpeg, circuit pilote video et boitier decodeur incorporant un tel dispositif |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2004208315A true JP2004208315A (ja) | 2004-07-22 |
Family
ID=32338982
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003424721A Pending JP2004208315A (ja) | 2002-12-20 | 2003-12-22 | 早送りモードのmpegピクチャを復号し、表示する方法および装置、そのような装置が組み込まれたビデオドライバ回路およびデコーダボックス |
Country Status (4)
Country | Link |
---|---|
US (1) | US20040228408A1 (ja) |
EP (1) | EP1432247A1 (ja) |
JP (1) | JP2004208315A (ja) |
FR (1) | FR2849331A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI444047B (zh) * | 2006-06-16 | 2014-07-01 | Via Tech Inc | 用於視訊解碼的去方塊效應濾波器、視訊解碼器與圖形處理單元 |
US10277248B2 (en) * | 2015-07-07 | 2019-04-30 | Tidal Systems, Inc. | Compression engine with consistent throughput |
KR102576961B1 (ko) * | 2015-07-14 | 2023-09-12 | 삼성전자주식회사 | 디스플레이 구동 회로, 디스플레이 구동 방법, 및 전자 장치 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5847765A (en) * | 1993-11-12 | 1998-12-08 | Nec Corporation | Moving picture decoding control system |
US5809201A (en) * | 1994-06-24 | 1998-09-15 | Mitsubishi Denki Kabushiki Kaisha | Specially formatted optical disk and method of playback |
US5754241A (en) * | 1994-11-18 | 1998-05-19 | Sanyo Electric Co., Ltd | Video decoder capable of controlling encoded video data |
JP3824678B2 (ja) * | 1995-05-09 | 2006-09-20 | 株式会社ルネサステクノロジ | 画像復号表示装置 |
US7058721B1 (en) * | 1995-07-14 | 2006-06-06 | Broadband Royalty Corporation | Dynamic quality adjustment based on changing streaming constraints |
US5949948A (en) * | 1995-11-20 | 1999-09-07 | Imedia Corporation | Method and apparatus for implementing playback features for compressed video data |
US6034731A (en) * | 1997-08-13 | 2000-03-07 | Sarnoff Corporation | MPEG frame processing method and apparatus |
JP4230636B2 (ja) * | 2000-02-29 | 2009-02-25 | 株式会社東芝 | 動画像再生方法および動画像再生装置 |
US6819714B2 (en) * | 2000-04-20 | 2004-11-16 | Matsushita Electric Industrial Co., Ltd. | Video encoding apparatus that adjusts code amount by skipping encoding of image data |
AU2002239237A1 (en) * | 2000-10-10 | 2002-06-03 | Broadcom Corporation | System and method for special reproduction modes of a digitally encoded video data stream |
-
2002
- 2002-12-20 FR FR0216327A patent/FR2849331A1/fr active Pending
-
2003
- 2003-12-02 EP EP03293015A patent/EP1432247A1/fr not_active Withdrawn
- 2003-12-19 US US10/742,602 patent/US20040228408A1/en not_active Abandoned
- 2003-12-22 JP JP2003424721A patent/JP2004208315A/ja active Pending
Also Published As
Publication number | Publication date |
---|---|
EP1432247A1 (fr) | 2004-06-23 |
US20040228408A1 (en) | 2004-11-18 |
FR2849331A1 (fr) | 2004-06-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP1438845B1 (en) | Fast motion trick mode using non-progressive dummy predictive pictures | |
US7342967B2 (en) | System and method for enhancing performance of personal video recording (PVR) functions on hits digital video streams | |
CN100367786C (zh) | 在视频特技模式期间的闭路字幕信息显示 | |
US8009741B2 (en) | Command packet system and method supporting improved trick mode performance in video decoding systems | |
US6798839B2 (en) | Image processing device, television receiver and image reproducing device | |
US7149410B2 (en) | Trick modes using non-progressive dummy bidirectional predictive pictures | |
JP2004208319A (ja) | Mpegピクチャを復号し、巻き戻しモードにおいてそれを表示する方法と装置、およびこのような装置を組み込んだビデオドライバ回路とデコーダボックス | |
US7787746B2 (en) | Fast motion trick mode using non-progressive dummy bidirectional predictive pictures | |
US20060039676A1 (en) | Trick play behavior controlled by a user | |
JP4294481B2 (ja) | ダミーの予測ピクチャを使用したコマ落としトリックモード | |
US7974523B2 (en) | Optimal buffering and scheduling strategy for smooth reverse in a DVD player or the like | |
US7643724B2 (en) | Fast motion trick mode using non-progressive dummy predictive pictures | |
JP2004208315A (ja) | 早送りモードのmpegピクチャを復号し、表示する方法および装置、そのような装置が組み込まれたビデオドライバ回路およびデコーダボックス | |
JP2002290894A (ja) | ディジタルビデオデータ記録/再生装置 | |
US20080292263A1 (en) | Accessibility of Graphics During and After Trick Play | |
JP4829767B2 (ja) | 映像記録再生装置、その映像特殊再生方法 | |
US7577204B2 (en) | Hits stream rewind | |
US20070150440A1 (en) | Method and circuit for retrieving data | |
JPH0998382A (ja) | 動画像情報の再生装置及び再生方法 | |
US8149679B2 (en) | Recording/reproducing device and method, recording medium, and program | |
US20080279527A1 (en) | Method of high speed video playback and video playback apparatus using the same | |
WO2009090865A1 (ja) | 動画像データ復号再生装置及び動画像データ復号装置 | |
KR100690887B1 (ko) | 부가 저장장치를 내장한 디지털 비디오 레코더 | |
JP3069870U (ja) | デジタル映像の編集装置およびこれにより編集したデジタル映像の再生装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20061113 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090129 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090204 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20090701 |