JP6178565B2 - 立体ビデオ時間的フレーム・オフセット測定システム及び方法 - Google Patents

Description

本発明は、３次元（３Ｄ）テレビジョン（ＴＶ）ビデオ処理に関し、特に、立体ビデオの時間的フレーム・オフセットの測定に関する。

立体３次元テレビジョン（３Ｄ ＴＶ）ビデオは、立体フレーム対のシーケンスである。各フレーム対中の複数フレームの一方は、左目だけで見ることを意図されており、また、他方のフレームは、右目だけで見ることを意図されている。このように、フレーム対の両眼視によって、伝統的な画像の高さや幅と共に、奥行きという立体的な錯覚が作られる。これらフレーム対は、複数の左目（Ｌ）画像フレームと複数の右目（Ｒ）画像フレームとからなる別々のビデオ・ストリームとしても良い。各ストリームは、一般に、３Ｄカメラ・システムで撮影され、３Ｄカメラ・システムには実際に２つのカメラがあり、別々のビデオ出力があって、１つのシリアル・デジタル・デュアル・リンクを生成する。これら２つのカメラは、Ｌ及びＲフレーム対を同時にキャプチャできるように、同期していることが望ましい。

これらデュアル・リンク出力は、別々の圧縮ビデオ・ストリームとして、いくつかある方法のいずれかを用いて、画像対を一体化し、配信用に単一ストリームを生成する場所へと送られる。各ストリームは、Ｌ画像シーケンスに１つ、Ｒ画像シーケンスに１つという別々のコーダ／デコーダ（コーデック：CODEC）で圧縮しても良い。

米国特許第６７５２３６０号明細書

しかし、各コーデックは、不確定のフレーム遅延又は処理待ち時間が生じることが多い。結果として、伸張されたＬ及びＲフレームの出力シーケンスが、対となったフレーム同期となっていないことがある、つまり、時間的に不整合で、時間的なフレーム・オフセットのあるフレームが１つ以上あることがある。

テクトロニクス社に譲渡された２００４年６月１５日発行の米国特許第６,７５１,３６０号は、乱れたビデオ信号を対応する元々（ソース）のビデオ信号と時間的に整合させる高速時間的整合推定方法を記述している。時間的な特性カーブ（ＳＣ：signature curve）がビデオ信号の夫々について生成され、これら得られたＳＣは、２つのビデオ信号の対応するフレーム間の合致カ所を見つけ出すために互いに相互相関される。特性カーブは、ビデオ信号の独特の特性を示す。相互相関最大値の結果は、２つのビデオ信号の対応するフレーム間の時間的なずれの量を示す。しかし、図１ａのＳＣグラフに示すように、得られるＳＣには、大きなオフセットがある。この大きなオフセットのために、ＳＣからフレーム・オフセットを確実には決定することができず、また、大きなビット・サイズのデジタル積分回路のハードウェア（ＨＷ）での実装を必要とする。

ビデオ・コンテンツの事前知識が何もなくても、フレーム・オフセット、つまり、左右の時間的不整合を測定し、左右画像シーケンス間のどのような未修正の時間的フレーム・オフセットも確実に示す方法が望まれている。

そこで、本発明は、安定性が高く、ビデオ・コンテンツの事前知識を何ら必要としない立体ビデオ時間的フレーム・オフセット測定技術を提供する。立体ビデオ時間的フレーム・オフセット測定システムは、改良した特性カーブ発生装置を使用し、立体ビデオ信号の左及び右画像シーケンスの夫々について、ダイナミックな特性カーブを生成する。得られる特性カーブは、所定の相関範囲について相互相関され、相互相関係数が生成される。相互相関係数は、高いしきい値と比較され、そして、この高しきい値を超えた相互相関係数の夫々について時間的フレーム・オフセットが生成されて表示される。信頼性の高い新しい時間的フレーム・オフセットの夫々は、表示される際に強調されるか、さもなくば、最後の結果がバックグラウンド（遠景）に表示されるようになる。

具体的には、本発明の概念１は、立体ビデオ時間的フレーム・オフセット測定システムで使用する改良型特性カーブ発生装置であって、該改良型特性カーブ発生装置が、入力画像シーケンスを受けてフィルタ処理画像シーケンスを生成する入力ハイパス・フィルタと、所定数のフレーム／フィールドだけフィルタ処理画像シーケンスを遅延し、遅延画像シーケンスを生成するフレーム／フィールド遅延部と、上記フィルタ処理画像シーケンス及び上記遅延画像シーケンスから上記入力画像シーケンスに関する特性カーブを生成する相互相関器とを有し、このとき、改良点として、上記特性カーブを入力とし、ＡＣ成分を増加しつつ上記特性カーブの必要なダイナミック・レンジを減少させた改善された特性カーブを出力とする微分回路を具えている。

本発明の概念２は、立体ビデオ時間的フレーム・オフセット測定システムであって、
立体ビデオ信号を表す左画像シーケンス及び右画像シーケンスを入力とし、上記左及び右画像シーケンス夫々の特性カーブを出力として供給する特性発生装置と、
上記左及び右画像シーケンス間の時間的フレーム・オフセットを求めるために、上記左及び右画像シーケンスに関する上記特性カーブを相互相関させる手段と
を具えている。

本発明の概念３は、上記概念２記載の測定システムであって、
上記時間的フレーム・オフセットを表示し、上記相互相関手段によって上記時間的フレーム・オフセットが更新される度に、上記時間的フレーム・オフセットの最新値を更新の間維持しながら、上記時間的フレーム・オフセットを強調表示させる手段を更に具えている。

本発明の概念４は、上記概念２記載の測定システムであって、上記特性発生装置が、
上記左及び右画像シーケンス夫々の連続するフレーム／シーケンスを相互相関させて、相互相関係数を夫々生成する手段と、
上記左及び右画像シーケンス内の連続する相互相関係数を微分し、上記左及び右画像シーケンス夫々に関する連続する上記相互相関係数間の正規化第１過去差分を、上記左及び右画像シーケンス夫々に関する特性カーブとして生成する手段と
を有している。

本発明の概念５は、上記概念２記載の測定システムであって、このとき、上記特性カーブ相互相関手段が、
上記特性カーブを入力として受けて出力を供給する上記特性カーブ夫々に関するファースト・イン・ファースト・アウト・バッファと、
上記ファースト・イン・ファースト・アウト・バッファからの出力を入力として受け、上記時間的フレーム・オフセットを出力として供給するマイクロプロセッサ・システムとを有し、
上記マイクロプロセッサ・システムが、上記入力間のスライディング相互相関を実行して上記時間的フレーム・オフセットを生成する。

本発明の概念６は、上記概念２記載の測定システムであって、このとき、上記特性発生装置が、
上記左及び右画像シーケンスをローパス・フィルタ処理し、夫々のローパス・フィルタ処理画像シーケンスを生成する手段と、
上記ローパス・フィルタ処理画像シーケンスをインターリーブし、上記左及び右画像シーケンスを表す単一データ・ストリームを生成する手段と、
上記単一データ・ストリームをハイパス・フィルタ処理し、フィルタ処理単一データ・ストリームを生成する手段と、
上記フィルタ処理単一データ・ストリーム内の上記左及び右画像成分を相互相関し、上記特性カーブを相互相関させる手段に入力する夫々の上記特性カーブを生成する手段とを有している。

本発明の概念７は、上記概念２記載の測定システムであって、このとき、上記特性発生装置が、
ローパス・フィルタ、インターリーブ装置及びハイパス・フィルタに対応し、上記左及び右画像シーケンスを入力として受けて、単一データ・ストリームを出力する合成多相インターリーブ型有限インパルス応答フィルタと、
上記左及び右画像シーケンスの上記左及び右画像成分を相互相関し、上記マイクロプロセッサ・システムに入力される夫々の上記特性カーブを生成する手段と
を有している。

本発明の概念８は、立体ビデオ時間的フレーム・オフセットを測定する方法であって、
左画像シーケンスから微分左特性カーブを生成するステップと、
右画像シーケンスから微分右特性カーブを生成するステップと、
上記左及び右画像シーケンス間の時間的フレーム・オフセットを求めるために上記微分左及び右特性カーブを相互相関させるステップとを具えており、
このとき、上記左及び右画像シーケンスは、立体ビデオシーケンスを形成している。

本発明の概念９は、上記概念８記載の方法であって、
上記生成ステップの夫々が、
指定数のフレーム／フィールドだけ上記画像シーケンスを遅延し、夫々の遅延画像シーケンスを生成するステップと、
上記画像シーケンスの夫々を対応する上記遅延画像シーケンスと相互相関させ、夫々の初期特性カーブを生成するステップと、
上記初期特性カーブの夫々を微分し、正規化第１過去差分を上記微分左及び右特性カーブとして夫々生成するステップと
を有している。

本発明の概念１０は、上記概念８記載の方法であって、表示装置上に上記時間的フレーム・オフセットを表示するステップを更に具えている。

本発明の概念１１は、上記概念１０記載の方法であって、このとき、上記表示ステップが、上記相互相関させるステップで得られる上記時間的フレーム・オフセットが更新される度に、上記表示装置上で上記時間的フレーム・オフセットを強調表示する一方、更新と更新の間では、前の時間的フレーム・オフセットをバックグラウンド・モードで上記表示装置上に表示するステップを有している。

本発明の概念１２は、上記概念８記載の方法であって、上記相互相関させるステップが、上記微分左及び右特性カーブを指定範囲内においてスライディング相互相関させる処理を有している。

本発明の概念１３は、立体ビデオ時間的フレーム・オフセット測定システムであって、
立体ビデオ信号についてのフレーム／フィールド対を表す左画像シーケンス及び右画像シーケンスを入力とし、あるフレーム／フィールドからあるフレーム／フィールドへの正規化第１過去差分を表す相互相関係数値のシーケンスである左特性カーブ及び右特性カーブを出力とする時間的特性カーブ発生装置と、
上記左及び右特性カーブを入力とし、上記左及び右特性カーブの上記フレーム／フィールド対間の時間的差分を表す時間的フレーム・オフセット値を出力とする処理システムと
を具えている。

本発明の概念１４は、上記概念１３記載の測定システムであって、このとき、上記時間的特性カーブ発生装置が、夫々上記左及び右画像シーケンスのための１対の特性カーブ発生装置を有し、上記特性カーブ発生装置の夫々が、
上記画像シーケンスが入力されて遅延画像シーケンスを生成するフレーム／フィールド遅延部と、
上記画像シーケンス及び上記遅延画像シーケンスを入力として、相互相関係数の初期シーケンスを出力とする乗算累算部と、
上記相互相関係数の上記初期シーケンスを入力とし、上記特性カーブを出力とする微分回路とを有している。

本発明の概念１５は、上記概念１３記載の測定システムであって、このとき、上記処理システムが、
夫々が上記特性カーブを入力とし、上記特性カーブのセグメント（一部分）を一度に保持するの十分な長さを有して出力を供給し、夫々が上記左及び右特性カーブのための１対のファースト・イン／ファースト・アウト（ＦＩＦＯ）バッファと、
上記ＦＩＦＯバッファからの出力を入力とし、複数の相関結果を生成するために上記ＦＩＦＯバッファの出力間のスライディング相互相関を供給し、指定の高いしきい値を超えた相関結果に対応する時間的フレーム・オフセット値を出力として生成するプロセッサと
を有している。

本発明の概念１６は、上記概念１３記載の測定システムであって、上記プロセッサ・システムからの時間的フレーム・オフセット値を入力とする表示装置を更に具えている。

本発明の概念１７は、上記概念１６記載の測定システムであって、このとき、上記処理システムによって上記時間的フレーム・オフセット値が更新されたときに上記時間的フレーム・オフセット値が上記表示装置上で強調表示され、その他のときは上記表示装置上でバックグランドの形態で表示されることを特徴としている。

本発明の概念１８は、上記概念１３記載の測定システムであって、上記時間的特性カーブ発生装置が、
上記左及び右画像シーケンスを入力とし、インターリーブ画像シーケンス・ストリームを出力とするフィルタ／インターリーブ部と、
上記インターリーブ画像シーケンス・ストリームを入力とし、遅延インターリーブ画像シーケンス・ストリームを出力とするフレーム／フィールド遅延部と、
上記インターリーブ画像シーケンス・ストリーム及び上記遅延インターリーブ画像シーケンス・ストリームを入力とし、初期左及び右相互相関係数を出力とする変形乗算累算部と、
一方が左相互相関係数を入力とし、左特性カーブを出力とし、他方が右相互相関係数を入力とし、右特性カーブを出力とする１対の微分部と
を有している。

本発明の概念１９は、上記概念１８記載の測定システムであって、このとき、上記フィルタ／インターリーブ部が、
左及び右フィルタ処理画像シーケンスを生成するために、一方が上記左画像シーケンスをフィルタ処理し、他方が上記右画像シーケンスをフィルタ処理する別々のローパス・フィルタと、
上記左及び右フィルタ処理画像シーケンスをインターリーブし、単一データ・ストリームを生成する手段と、
上記単一データ・ストリームをフィルタ処理して上記インターリーブ画像シーケンス・ストリームを生成するハイパス・フィルタと
を有している。

本発明の概念２０は、上記概念１８記載の測定システムであって、このとき、上記フィルタ／インターリーブ部が、上記左及び右画像シーケンスを入力とし、上記フレーム／フィールド遅延部に入力される上記インターリーブ画像シーケンス・ストリームを出力とする多相インターリーブ型有限インパルス応答（ＦＩＲ）フィルタを有していることを特徴としている。

本発明の目的、効果及び他の新規な点は、以下の詳細な説明を添付の特許請求の範囲及び図面とともに読むことによって明らかとなろう。

図１は、本発明による立体ビデオ時間的フレーム・オフセット測定用の改良特性カーブ発生装置のブロック図である。 図１ａは、従来技術による非正規化相互相関Ｃ_ｆのグラフである。 図１ｂは、正規化第１過去差分Ｃｄ_ｆのグラフである。 図２ａは、本発明による立体視時間的フレーム・オフセット測定用システムのブロック図である。 図２ｂは、本発明による立体視時間的フレーム・オフセット測定用システムのブロック図である。 図３は、ハードウェア要件を減らした本発明による特性カーブ発生装置のブロック図である。 図４は、ハードウェア要件を更に減らした本発明による入力フィルタのブロック図である。

ここで図１を参照すると、ルミナンス画像のシーケンスＹ_ｆ（ｎ）が時間的特性カーブ（Ｃ_ｆ）発生装置１０に入力され、上述の米国特許第６,７５１,３６０号で説明されているように、フレーム毎の相互共分散（cross-covariance）出力を生成する。ルミナンス・シーケンスは、ハイパス・フィルタ（ＨＰＦ）１２に入力されて、ハイパス・フィルタ処理ルミナンス画像のシーケンスＹｈ_ｆ（ｎ）が生成され、これは、次にフレーム／フィールド遅延回路１４に入力され、これは、１フレーム／フィールド遅延されたルミナンス画像の出力シーケンスＹｈ_ｆ−１（ｎ）を供給する。得られる２つのルミナンス画像のシーケンスは、相互共分散量としても知られる非正規化相互相関量を生成する乗算累算回路１６に入力され、従来技術に従ってＳＣであるＣ_ｆを生成し、これは図１ａにグラフが描かれている。上述のように、この時点では、ＳＣには大きなオフセットがあるので、変動を直ちには見分けられない。そのためＳＣは、微分回路１８で更に処理され、微分回路１８は、フレーム毎の相互相関Ｃ_ｆの正規化第１過去差分Ｃｄ_ｆを供給し、このグラフは図１ｂに示されている。比較のために、Ｃｄ_ｆは、図１ｂに示すように、フレーム数Ｎで正規化される。図１ａと１ｂのグラフを比較すれば、変動が直ちに明確になっている、つまり、ＳＣのダイナミック・レンジが大幅に減少し、ＡＣ成分が増加していることが明らかである。

ここで図２を参照すると、図１の改良型ＳＣ発生装置を用いて、立体画像対のルミナンス成分画素ＹＬ_ｆ（ｎ）及びＹＲ_ｆ（ｎ）が、デュアルＳＣ発生装置２０に加えられ、第１過去差分ＣＬｄ_ｆ及びＣＲｄ_ｆが生成される。そして、フレーム／フィールド遅延回路１４の入力及び出力フレーム／フィールドの各画素（ｎで示される）は、個々の標準偏差に正規化されることなく、乗算累積回路１６によって相互相関され、各入力フレーム（ｆで示される）とその前のフレーム（ｆ−１で示される）のフレーム差の共分散量が生成される。これは、左シーケンスのフレーム／フィールド遅延回路１４Ｌ及び乗算累積回路１６Ｌ中のＹＬ_ｆ（ｎ）と、右シーケンスのフレーム／フィールド遅延回路１４Ｒ及び乗算累積回路１６Ｒ中のＹＲ_ｆ（ｎ）という左及び右入力フレーム・シーケンスについて、別々に実行される。ｆで示される左フレーム夫々について左乗算累積回路１６Ｌから得られる共分散値は、続いて微分回路１８Ｌで微分され、特性カーブ値ＣＬｄ_ｆが生成される。同様に、ｆで示される右フレーム夫々について右乗算累積回路１６Ｒから得られる共分散値は、続いて微分回路１８Ｒで微分され、特性カーブ値ＣＬｄ_ｆが生成される。この特性カーブ処理は、リアルタイムで処理できるように、ハードウェアで実現するのが好ましい。

Ｌ及びＲ画像シーケンスの改良型時間的特性カーブは、シーケンスのフレーム・レートでの離散的な値で、図２に示すグラフ中に重ねて示されている。この場合の例で示すように、フレーム１２では、右チャンネルが１フレームをスキップしているので、これら特性カーブが同期してない、つまり、そのフレーム・スキップの後、２チャンネル間に１フレームのオフセットがある。

第１過去差分の夫々は、指定の相関範囲Ｒの２倍に等しい長さを有する、夫々に対応するファースト・イン／ファースト・アウト（ＦＩＦＯ）バッファ２２Ｌ及び２２Ｒに入力される。ＦＩＦＯバッファ２２からの出力は、典型的なマイクロプロセッサ及びメモリ・システム２４で利用可能なものである。マイクロプロセッサ及びメモリ・システム２４は、図２に示すように、スライディング相関を演算する。マイクロプロセッサ２４は、フレーム・レートのサンプルの充分なレコードを取り込んだ後、リアルタイム・フレーム処理ハードウェア内のＦＩＦＯバッファ２２からＣＬｄ及びＣＲｄの過去のサンプルを読み出す。レコード長は、先に示したように、２×Ｒであり、ここでＲは、図２の式に示すように、相関演算範囲及びオフセット検出範囲である。

ＣＬｄ及びＣＲｄ夫々の相関範囲Ｒにおける二乗平均平方根（root mean square：rms）値を、示した式の分母で使用することで、−１から＋１の範囲の正規化相関係数が生成される。従って、所与の演算範囲Ｒ内において、全てのフレームが静止フレーム、つまり、同一で、そのために特性カーブのその部分のｒｍｓ値がゼロに近づく可能性がある。この状況を回避するため、マイクロプロセッサ２４は、ｒｍｓ値をある最小値と比較して試験し、ｒｍｓ値がその最小値よりも小さい場合には、相関範囲Ｒにおけるそれらフレームのグループを無視する。

図２に示す式は、２つの特性カーブＣＬｄ（ｆ）及びＣＲｄ（ｆ）間のオフセットの最も良い推定値を求めるために、いくつかのフレーム・オフセットｓに関して、範囲Ｒにおける相関係数Ｘｄｃ（ｓ，ｆ）を演算する。示した例では、オフセットｓの範囲は、−３から＋４フレームであり、相関範囲Ｒは８である。しかし、Ｘｄｃ（ｓ，ｆ）の演算において、もっと高い精度が得られるように、もっと広い相関範囲（＞８）を用いても良い。また、相関を取る前に、ＣＬｄ（ｆ）及びＣＲｄ（ｆ）を補間したり、サンプルをアップ・コンバージョンする一般的な方法を用いて、フレーム／フィールド時間の細かい部分に対してより高い時間分解能を実現するようにしても良い。各オフセットｓに関するＸｄｃの値は、あるしきい値よりも上か、典型的には０．９８よりも上か、を見るために試験される。もしＸｄｃの値がこのしきい値をよりも上なら、信頼性の高い左右フレーム・オフセットが見つかったことが示されており、対応するオフセットｓの値が、装置の表示装置２６のスクリーン上に表示される。上述の例では、ＬＲフレーム・オフセットの値は＋１であり、この値が表示される。計算されたＬＲフレーム・オフセットの夫々について、得られるオフセットｓは、信頼性が高いとわかると、更新されたことを示すために、強調表示される。もし表示値が更新されないと、新しく更新されずに、最後の良い値が表示されていることを示すために、表示値が灰色で示されるか又は強調表示がなされない。新しいフレームｆがＦＩＦＯバッファ２２に加わる度に、最も古い値が破棄されてＸｄｃ（ｓ，ｆ）の演算が繰り返され、もし値がしきい値より上だとわかると、表示装置２６上で表示値がこの信頼できる値に再度更新され、強調表示される。

長期間にわたる左右画像シーケンスの時間的オフセットの記録を生成するために、得られる更新されたフレーム・オフセットｓを時間に対してグラフで描くのも良い。これによって、耐え難いほど長い期間に関して、時間的不整合が予め定めたしきい値を超えた場合に、間隔をおいたタイム・スタンプを記録したり、警告（アラーム）を発したりすることが可能になる。

ハードウェアによる実現が好ましいが、全部のプロセスをソフトウェア（ＳＷ）で実現し、テストしても良い。示した例のしきい値及び相関範囲は、他の値を用いても良いが、こうしたテストから定められたものである。

必要なＨＷを削減するため、Ｌ及びＲ画像シーケンスのＹＬ（ｎ）及びＹＲ（ｎ）画素を係数２で間引きしてインターリーブし、図３に示すように、１つのサンプル・ストリームとしても良い。画像シーケンス夫々の画素は、入力フィルタ回路２８の一部であるローパス・フィルタ及びインターリーブ回路３０の夫々に対応するローパス・フィルタ（ＬＰＦ）３２Ｌ及び３２Ｒに入力される。夫々のＬＰＦ３２からの出力は、対応する間引き回路３４Ｌ及び３４Ｒに夫々入力されるが、このとき、これら間引き回路の１つの出力は、１画素間隔だけ遅延回路３６によって遅延される。遅延のない間引き回路３４Ｒからの出力と、遅延回路３６からの出力は、マルチプレクサ３８に入力され、Ｌ及びＲ画像シーケンスの画素がインターリーブされた１つの画素ストリームが生成される。得られた１つの画素ストリームは、続いてハイパス・フィルタ（ＨＰＦ）１２’に入力され、フレーム／フィールド遅延回路１４に入力される前に、ＤＣやルミナンス平均成分が除去される。フレーム／フィールド遅延回路１４の入力及び出力は、相互相関を生成する変形乗算累算回路１６’に入力され、ＣＬ_ｆ及びＣＲ_ｆストリームを夫々生成し、これらは夫々に対応する微分回路１８に入力され、図２に示すものと同じＳＣ出力を生成する。単一の乗算累算回路１６’は、その結果がフレームのｒｍｓ値で正規化されないので、ここでは実質的に相互共分散検出回路である。

図３におけるインターリーブのために、ＨＰＦフィルタ処理された別々のＬ及びＲルミナンス画素は、時間的に隣接するフレーム又はフィールド間の相互相関のために独立して累算され、続いて微分及び正規化されて、図２に示すマイクロプロセッサ２４への入力に適した望ましいＳＣ値となる。

図４に示すように、ＬＰＦ、インターリーブ処理及びＨＰＦフィルタ処理３０及び１２’を組み合わせることによって、ＨＷをさらに簡単にしても良い。ＬＰＦ３２及びＨＰＦ１２’のインパルス応答を合成する、つまり、畳み込み積分（コンボリューション）することによって、単一のインパルス応答にしても良い。次にその結果は、分解されて２位相実装選択マルチプレクサに入力され、ルミナンス成分ＹＬ（ｎ）及びＹＲ（ｎ）の夫々について、所望の総合水平周波数応答が生成される。その出力は、合成されたＬＰＦ及びＨＰＦ水平周波数応答を有するインターリーブ及び間引きされたルミナンス値であり、これが単一のフレーム／フィールド遅延回路１４に入力される。図４の上部分は、合成多位相インターリーブ型有限インパルス応答（ＦＩＲ）フィルタ４０の詳細なブロック図を示し、下部分は、畳み込み積分されたＬＰＦ及びＨＰＦインパルス応答が、合成多位相インターリーブ型ＦＩＲフィルタ中で、どのように単純化した別々の処理パスへと分解されるかを示している。

このように、本発明は、左及び右画像シーケンスについて特性カーブを生成する改良型特性カーブ発生装置を用いて立体ビデオ時間フレーム・オフセット測定システムを提供するもので、２つの画像シーケンス間の時間フレーム・オフセットを求めるために、これら特性カーブは互いに相関が取られる。

１０ 時間的特性カーブ（Ｃ_ｆ）発生装置
１２ ハイパス・フィルタ（ＨＰＦ）
１２’ ハイパス・フィルタ（ＨＰＦ）
１４ フレーム／フィールド遅延回路
１６ 乗算累積回路
１６’ 乗算累積回路
１８ 微分回路
２０ デュアル特性カーブ発生装置
２２ ＦＩＦＯバッファ
２４ マイクロプロセッサ及びメモリ・システム
２６ 装置の表示装置
２８ 入力フィルタ回路
３０ ＬＰＦ及びインターリーブ回路
３２ ＬＰＦ
３４ 間引き回路
３６ 遅延回路
３８ マルチプレクサ

Claims (2)

1. 立体ビデオ信号を表す左画像シーケンス及び右画像シーケンスを受けてフィルタ処理画像シーケンスを生成するハイパス・フィルタと、
   所定数のフレーム／フィールドだけ上記フィルタ処理画像シーケンスを遅延し、遅延画像シーケンスを生成するフレーム／フィールド遅延部と、
   上記フィルタ処理画像シーケンス及び上記遅延画像シーケンスを相互相関して上記左画像シーケンス及び上記右画像シーケンスに関する左特性カーブ及び右特性カーブを夫々生成する相互相関器と、
   上記左特性カーブ及び上記右特性カーブを受けて微分し、微分左特性カーブ及び微分右特性カーブを出力する微分回路と、
   上記微分左特性カーブ及び上記微分右特性カーブを相互相関させることによって、上記左画像シーケンス及び上記右画像シーケンス間の時間的フレーム・オフセットを求めるプロセッサと、
   を具える立体ビデオ時間的フレーム・オフセット測定システム。
2. 立体ビデオ信号を表す左画像シーケンス及び右画像シーケンスをハイパス・フィルタ処理してフィルタ処理画像シーケンスを生成するステップと、
   所定数のフレーム／フィールドだけ上記フィルタ処理画像シーケンスを遅延し、遅延画像シーケンスを生成するステップと、
   上記フィルタ処理画像シーケンス及び上記遅延画像シーケンスを相互相関して上記左画像シーケンス及び上記右画像シーケンスに関する左特性カーブ及び右特性カーブを夫々生成するステップと、
   上記左特性カーブ及び上記右特性カーブを微分し、微分左特性カーブ及び微分右特性カーブを出力するステップと、
   上記微分左特性カーブ及び上記微分右特性カーブを相互相関させることによって、上記左画像シーケンス及び上記右画像シーケンス間の時間的フレーム・オフセットを求めるステップと
   を具える立体ビデオ時間的フレーム・オフセット測定方法。

Images