JP2013118640A - 立体ビデオ時間的フレーム・オフセット測定システム及び方法 - Google Patents
立体ビデオ時間的フレーム・オフセット測定システム及び方法 Download PDFInfo
- Publication number
- JP2013118640A JP2013118640A JP2012266181A JP2012266181A JP2013118640A JP 2013118640 A JP2013118640 A JP 2013118640A JP 2012266181 A JP2012266181 A JP 2012266181A JP 2012266181 A JP2012266181 A JP 2012266181A JP 2013118640 A JP2013118640 A JP 2013118640A
- Authority
- JP
- Japan
- Prior art keywords
- characteristic curve
- image sequence
- cross
- frame
- sequence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/296—Synchronisation thereof; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/167—Synchronising or controlling image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0096—Synchronisation or controlling aspects
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】立体ビデオ時間的フレーム・オフセット測定システムは、改良型特性カーブ発生装置を用いて、立体ビデオ信号の左及び右画像シーケンスの夫々についての活発な特性カーブを生成する。得られた特性カーブは、相互相関係数を生成するために、指定相関範囲において相互相関される。相互相関係数は、高いしきい値と比較され、この高いしきい値を超える相互相関係数の夫々について、時間的フレーム・オフセットが生成されて表示される。新しい時間的フレーム・オフセットの夫々は、表示されたときに強調されるが、その他のときにはバックグランドの形態で最後の結果が表示される。
【選択図】図1
Description
立体ビデオ信号を表す左画像シーケンス及び右画像シーケンスを入力とし、上記左及び右画像シーケンス夫々の特性カーブを出力として供給する特性発生装置と、
上記左及び右画像シーケンス間の時間的フレーム・オフセットを求めるために、上記左及び右画像シーケンスに関する上記特性カーブを相互相関させる手段と
を具えている。
上記時間的フレーム・オフセットを表示し、上記相互相関手段によって上記時間的フレーム・オフセットが更新される度に、上記時間的フレーム・オフセットの最新値を更新の間維持しながら、上記時間的フレーム・オフセットを強調表示させる手段を更に具えている。
上記左及び右画像シーケンス夫々の連続するフレーム/シーケンスを相互相関させて、相互相関係数を夫々生成する手段と、
上記左及び右画像シーケンス内の連続する相互相関係数を微分し、上記左及び右画像シーケンス夫々に関する連続する上記相互相関係数間の正規化第1過去差分を、上記左及び右画像シーケンス夫々に関する特性カーブとして生成する手段と
を有している。
上記特性カーブを入力として受けて出力を供給する上記特性カーブ夫々に関するファースト・イン・ファースト・アウト・バッファと、
上記ファースト・イン・ファースト・アウト・バッファからの出力を入力として受け、上記時間的フレーム・オフセットを出力として供給するマイクロプロセッサ・システムとを有し、
上記マイクロプロセッサ・システムが、上記入力間のスライディング相互相関を実行して上記時間的フレーム・オフセットを生成する。
上記左及び右画像シーケンスをローパス・フィルタ処理し、夫々のローパス・フィルタ処理画像シーケンスを生成する手段と、
上記ローパス・フィルタ処理画像シーケンスをインターリーブし、上記左及び右画像シーケンスを表す単一データ・ストリームを生成する手段と、
上記単一データ・ストリームをハイパス・フィルタ処理し、フィルタ処理単一データ・ストリームを生成する手段と、
上記フィルタ処理単一データ・ストリーム内の上記左及び右画像成分を相互相関し、上記特性カーブを相互相関させる手段に入力する夫々の上記特性カーブを生成する手段とを有している。
ローパス・フィルタ、インターリーブ装置及びハイパス・フィルタに対応し、上記左及び右画像シーケンスを入力として受けて、単一データ・ストリームを出力する合成多相インターリーブ型有限インパルス応答フィルタと、
上記左及び右画像シーケンスの上記左及び右画像成分を相互相関し、上記マイクロプロセッサ・システムに入力される夫々の上記特性カーブを生成する手段と
を有している。
左画像シーケンスからダイナミックな左特性カーブを生成するステップと、
右画像シーケンスからダイナミックな右特性カーブを生成するステップと、
上記左及び右画像シーケンス間の時間的フレーム・オフセットを求めるためにダイナミックな上記左及び右特性カーブを相互相関させるステップとを具えており、
このとき、上記左及び右画像シーケンスは、立体ビデオシーケンスを形成している。
上記生成ステップの夫々が、
指定数のフレーム/フィールドだけ上記画像シーケンスを遅延し、夫々の遅延画像シーケンスを生成するステップと、
上記画像シーケンスの夫々を対応する上記遅延画像シーケンスと相互相関させ、夫々の初期特性カーブを生成するステップと、
上記初期特性カーブの夫々を微分し、正規化第1過去差分をダイナミックな上記左及び右特性カーブとして夫々生成するステップと
を有している。
立体ビデオ信号についてのフレーム/フィールド対を表す左画像シーケンス及び右画像シーケンスを入力とし、あるフレーム/フィールドからあるフレーム/フィールドへの正規化第1過去差分を表す相互相関係数値のシーケンスである左特性カーブ及び右特性カーブを出力とする時間的特性カーブ発生装置と、
上記左及び右特性カーブを入力とし、上記左及び右特性カーブの上記フレーム/フィールド対間の時間的差分を表す時間的フレーム・オフセット値を出力とする処理システムと
を具えている。
上記画像シーケンスが入力されて遅延画像シーケンスを生成するフレーム/フィールド遅延部と、
上記画像シーケンス及び上記遅延画像シーケンスを入力として、相互相関係数の初期シーケンスを出力とする乗算累算部と、
上記相互相関係数の上記初期シーケンスを入力とし、上記特性カーブを出力とする微分回路とを有している。
夫々が上記特性カーブを入力とし、上記特性カーブのセグメント(一部分)を一度に保持するの十分な長さを有して出力を供給し、夫々が上記左及び右特性カーブのための1対のファースト・イン/ファースト・アウト(FIFO)バッファと、
上記FIFOバッファからの出力を入力とし、複数の相関結果を生成するために上記FIFOバッファの出力間のスライディング相互相関を供給し、指定の高いしきい値を超えた相関結果に対応する時間的フレーム・オフセット値を出力として生成するプロセッサと
を有している。
上記左及び右画像シーケンスを入力とし、インターリーブ画像シーケンス・ストリームを出力とするフィルタ/インターリーブ部と、
上記インターリーブ画像シーケンス・ストリームを入力とし、遅延インターリーブ画像シーケンス・ストリームを出力とするフレーム/フィールド遅延部と、
上記インターリーブ画像シーケンス・ストリーム及び上記遅延インターリーブ画像シーケンス・ストリームを入力とし、初期左及び右相互相関係数を出力とする変形乗算累算部と、
一方が左相互相関係数を入力とし、左特性カーブを出力とし、他方が右相互相関係数を入力とし、右特性カーブを出力とする1対の微分部と
を有している。
左及び右フィルタ処理画像シーケンスを生成するために、一方が上記左画像シーケンスをフィルタ処理し、他方が上記右画像シーケンスをフィルタ処理する別々のローパス・フィルタと、
上記左及び右フィルタ処理画像シーケンスをインターリーブし、単一データ・ストリームを生成する手段と、
上記単一データ・ストリームをフィルタ処理して上記インターリーブ画像シーケンス・ストリームを生成するハイパス・フィルタと
を有している。
12 ハイパス・フィルタ(HPF)
12’ ハイパス・フィルタ(HPF)
14 フレーム/フィールド遅延回路
16 乗算累積回路
16’ 乗算累積回路
18 微分回路
20 デュアル特性カーブ発生装置
22 FIFOバッファ
24 マイクロプロセッサ及びメモリ・システム
26 装置の表示装置
28 入力フィルタ回路
30 LPF及びインターリーブ回路
32 LPF
34 間引き回路
36 遅延回路
38 マルチプレクサ
Claims (7)
- 立体ビデオ時間的フレーム・オフセット測定システムで使用する改良型特性カーブ発生装置であって、該改良型特性カーブ発生装置が、
入力画像シーケンスを受けてフィルタ処理画像シーケンスを生成する入力ハイパス・フィルタと、
所定数のフレーム/フィールドだけフィルタ処理画像シーケンスを遅延し、遅延画像シーケンスを生成するフレーム/フィールド遅延部と、
上記フィルタ処理画像シーケンス及び上記遅延画像シーケンスから上記入力画像シーケンスに関する特性カーブを生成する相互相関器とを有し、
上記特性カーブを入力とし、AC成分を増加しつつ上記特性カーブの必要なダイナミック・レンジを減少させた改善された特性カーブを出力とする微分回路を具えていることを改善点とする特性カーブ発生装置。 - 立体ビデオ信号を表す左画像シーケンス及び右画像シーケンスを入力とし、上記左及び右画像シーケンス夫々の特性カーブを出力として供給する特性発生装置と、
上記左及び右画像シーケンス間の時間的フレーム・オフセットを求めるために、上記左及び右画像シーケンスに関する上記特性カーブを相互相関させる手段と
を具える立体ビデオ時間的フレーム・オフセット測定システム。 - 上記特性発生装置が、
上記左及び右画像シーケンス夫々の連続するフレーム/シーケンスを相互相関させて、相互相関係数を夫々生成する手段と、
上記左及び右画像シーケンス内の連続する相互相関係数を微分し、上記左及び右画像シーケンス夫々に関する連続する上記相互相関係数間の正規化第1過去差分を、上記左及び右画像シーケンス夫々に関する特性カーブとして生成する手段と
を有する請求項2記載の測定システム。 - 左画像シーケンスからダイナミックな左特性カーブを生成するステップと、
右画像シーケンスからダイナミックな右特性カーブを生成するステップと、
上記左及び右画像シーケンス間の時間的フレーム・オフセットを求めるためにダイナミックな上記左及び右特性カーブの相互相関させるステップとを具えており、
上記左及び右画像シーケンスが立体ビデオシーケンスを形成することを特徴とする立体ビデオ時間的フレーム・オフセット測定方法。 - 上記生成ステップの夫々が、
指定数のフレーム/フィールドだけ上記画像シーケンスを遅延し、夫々の遅延画像シーケンスを生成するステップと、
上記画像シーケンスの夫々を対応する上記遅延画像シーケンスと相互相関させ、夫々の初期特性カーブを生成するステップと、
上記初期特性カーブの夫々を微分し、正規化第1過去差分をダイナミックな上記左及び右特性カーブとして夫々生成するステップと
を有する請求項4記載の立体ビデオ時間的フレーム・オフセット測定方法。 - 立体ビデオ信号についてのフレーム/フィールド対を表す左画像シーケンス及び右画像シーケンスを入力とし、あるフレーム/フィールドからあるフレーム/フィールドへの正規化第1過去差分を表す相互相関係数値のシーケンスである左特性カーブ及び右特性カーブを出力とする時間的特性カーブ発生装置と、
上記左及び右特性カーブを入力とし、上記左及び右特性カーブの上記フレーム/フィールド対間の時間的差分を表す時間的フレーム・オフセット値を出力とする処理システムと
を具える立体ビデオ時間的フレーム・オフセット測定システム。 - 上記時間的特性カーブ発生装置が、夫々上記左及び右画像シーケンスのための1対の特性カーブ発生装置を有し、上記特性カーブ発生装置の夫々が、
上記画像シーケンスが入力されて遅延画像シーケンスを生成するフレーム/フィールド遅延部と、
上記画像シーケンス及び上記遅延画像シーケンスを入力として、相互相関係数の初期シーケンスを出力とする乗算累算器と、
上記相互相関係数の上記初期シーケンスを入力とし、上記特性カーブを出力とする微分回路とを有する請求項6記載の測定システム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US13/310,972 | 2011-12-05 | ||
US13/310,972 US9479762B2 (en) | 2011-12-05 | 2011-12-05 | Stereoscopic video temporal frame offset measurement |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013118640A true JP2013118640A (ja) | 2013-06-13 |
JP6178565B2 JP6178565B2 (ja) | 2017-08-09 |
Family
ID=47458656
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012266181A Expired - Fee Related JP6178565B2 (ja) | 2011-12-05 | 2012-12-05 | 立体ビデオ時間的フレーム・オフセット測定システム及び方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9479762B2 (ja) |
EP (1) | EP2603007B1 (ja) |
JP (1) | JP6178565B2 (ja) |
CN (1) | CN103139596B (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150271471A1 (en) * | 2014-03-19 | 2015-09-24 | Htc Corporation | Blocking detection method for camera and electronic apparatus with cameras |
CN104284183A (zh) * | 2014-09-30 | 2015-01-14 | 重庆三峡学院 | 一种3d帧安全检测方法及装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62285590A (ja) * | 1986-06-04 | 1987-12-11 | Nippon Hoso Kyokai <Nhk> | 画像成分信号間位相差検出装置 |
US6751360B1 (en) * | 2000-11-14 | 2004-06-15 | Tektronix, Inc. | Fast video temporal alignment estimation |
US20110096173A1 (en) * | 2009-10-25 | 2011-04-28 | Tektronix, Inc | Av delay measurement and correction via signature curves |
JP2011205388A (ja) * | 2010-03-25 | 2011-10-13 | Sony Corp | 信号処理装置および方法、並びにプログラム |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003044318A (ja) * | 2001-08-02 | 2003-02-14 | Fujitsu Ltd | テスト支援プログラムおよびテスト支援方法 |
US6752360B2 (en) | 2002-08-14 | 2004-06-22 | Deere & Company | Hydraulic hose holder for an agricultural implement |
US7174279B2 (en) * | 2004-03-31 | 2007-02-06 | Teradyne, Inc. | Test system with differential signal measurement |
US7586515B2 (en) | 2005-05-23 | 2009-09-08 | Tektronix, Inc. | Instrument for real-time video quality measurement |
US20080260023A1 (en) * | 2007-04-18 | 2008-10-23 | Chih-Ta Star Sung | Digital video encoding and decoding with refernecing frame buffer compression |
US9342588B2 (en) * | 2007-06-18 | 2016-05-17 | International Business Machines Corporation | Reclassification of training data to improve classifier accuracy |
MY162861A (en) * | 2007-09-24 | 2017-07-31 | Koninl Philips Electronics Nv | Method and system for encoding a video data signal, encoded video data signal, method and system for decoding a video data signal |
US20100064001A1 (en) * | 2007-10-10 | 2010-03-11 | Power Takeoff, L.P. | Distributed Processing |
JP5602138B2 (ja) * | 2008-08-21 | 2014-10-08 | ドルビー ラボラトリーズ ライセンシング コーポレイション | オ−ディオ及びビデオ署名生成及び検出のための特徴の最適化及び信頼性予測 |
US8107750B2 (en) * | 2008-12-31 | 2012-01-31 | Stmicroelectronics S.R.L. | Method of generating motion vectors of images of a video sequence |
JP2011059658A (ja) * | 2009-08-11 | 2011-03-24 | Sony Corp | 表示装置、表示方法およびコンピュータプログラム |
US8456518B2 (en) * | 2010-03-31 | 2013-06-04 | James Cameron & Vincent Pace | Stereoscopic camera with automatic obstruction removal |
US8463414B2 (en) * | 2010-08-09 | 2013-06-11 | Motorola Mobility Llc | Method and apparatus for estimating a parameter for low bit rate stereo transmission |
-
2011
- 2011-12-05 US US13/310,972 patent/US9479762B2/en not_active Expired - Fee Related
-
2012
- 2012-12-05 CN CN201210596322.8A patent/CN103139596B/zh not_active Expired - Fee Related
- 2012-12-05 EP EP12195699.9A patent/EP2603007B1/en not_active Not-in-force
- 2012-12-05 JP JP2012266181A patent/JP6178565B2/ja not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62285590A (ja) * | 1986-06-04 | 1987-12-11 | Nippon Hoso Kyokai <Nhk> | 画像成分信号間位相差検出装置 |
US6751360B1 (en) * | 2000-11-14 | 2004-06-15 | Tektronix, Inc. | Fast video temporal alignment estimation |
US20110096173A1 (en) * | 2009-10-25 | 2011-04-28 | Tektronix, Inc | Av delay measurement and correction via signature curves |
JP2011091798A (ja) * | 2009-10-25 | 2011-05-06 | Tektronix Inc | 遅延を測定及び補正する装置及び方法 |
JP2011205388A (ja) * | 2010-03-25 | 2011-10-13 | Sony Corp | 信号処理装置および方法、並びにプログラム |
Also Published As
Publication number | Publication date |
---|---|
CN103139596A (zh) | 2013-06-05 |
EP2603007A1 (en) | 2013-06-12 |
CN103139596B (zh) | 2017-10-10 |
US20130141528A1 (en) | 2013-06-06 |
JP6178565B2 (ja) | 2017-08-09 |
US9479762B2 (en) | 2016-10-25 |
EP2603007B1 (en) | 2016-10-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7561621B2 (en) | Method of searching for motion vector, method of generating frame interpolation image and display system | |
US20100053306A1 (en) | Image Processing Apparatus, Image Processing Method, and Program | |
JP5811106B2 (ja) | 映像処理装置、表示装置および映像処理方法 | |
US8687053B2 (en) | Stereoscopic image display device | |
US11871127B2 (en) | High-speed video from camera arrays | |
EP0615387A1 (en) | Moving picture encoder | |
JP2004522382A (ja) | ステレオスコピック画像処理機器および方法 | |
WO2020135055A1 (zh) | 视频特效的添加方法、装置、设备及存储介质 | |
US20140347350A1 (en) | Image Processing Method and Image Processing System for Generating 3D Images | |
JP6178565B2 (ja) | 立体ビデオ時間的フレーム・オフセット測定システム及び方法 | |
EP3079360A1 (en) | Image processing apparatus, image processing method, and program | |
CN114339302A (zh) | 导播方法、装置、设备以及计算机存储介质 | |
EP2735165A1 (en) | Display apparatus for displaying 3d images | |
CN102215415B (zh) | 视频信号处理设备、显示设备和显示方法 | |
JP2010098700A5 (ja) | ||
KR20070107543A (ko) | 스트리밍 스테레오 영상을 처리하여 깊이-지도를 실시간으로 생성하는 장치 | |
US9336596B2 (en) | System and methods to efficiently measure stereoscopic disparity and to generate related mismatch images | |
KR101594364B1 (ko) | 입체 영상 처리 장치 및 방법 | |
EP2362646A2 (en) | Objective picture quality measurement | |
KR20150054195A (ko) | 영상신호의 노이즈 제거 방법과 이를 이용한 영상표시장치 | |
JP5327176B2 (ja) | 画像処理方法及び画像処理装置 | |
EP0427576B1 (fr) | Interpolateur pour un système de transmission à sous-échantillonnage | |
JPH11155099A (ja) | 電子ズーム処理装置 | |
JP5998889B2 (ja) | 映像信号処理装置及び映像信号処理方法 | |
JP2004120406A (ja) | 画像分割表示装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A625 | Written request for application examination (by other person) |
Free format text: JAPANESE INTERMEDIATE CODE: A625 Effective date: 20151002 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160609 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160621 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20160921 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20161121 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161221 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170516 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170714 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6178565 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |