JP5515988B2 - 信号処理装置、信号処理方法、表示装置及びプログラム - Google Patents

信号処理装置、信号処理方法、表示装置及びプログラム Download PDF

Info

Publication number
JP5515988B2
JP5515988B2 JP2010087175A JP2010087175A JP5515988B2 JP 5515988 B2 JP5515988 B2 JP 5515988B2 JP 2010087175 A JP2010087175 A JP 2010087175A JP 2010087175 A JP2010087175 A JP 2010087175A JP 5515988 B2 JP5515988 B2 JP 5515988B2
Authority
JP
Japan
Prior art keywords
signal
image signal
right image
left image
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010087175A
Other languages
English (en)
Other versions
JP2011223100A (ja
Inventor
秀喜 新井
信胤 千葉
泰行 上村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2010087175A priority Critical patent/JP5515988B2/ja
Priority to EP11154790A priority patent/EP2375758A2/en
Priority to TW100109701A priority patent/TWI461053B/zh
Priority to KR1020110027455A priority patent/KR20110112202A/ko
Priority to US13/065,693 priority patent/US20110242282A1/en
Priority to CN201110076726XA priority patent/CN102215410A/zh
Publication of JP2011223100A publication Critical patent/JP2011223100A/ja
Application granted granted Critical
Publication of JP5515988B2 publication Critical patent/JP5515988B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/133Equalising the characteristics of different image components, e.g. their average brightness or colour balance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/246Calibration of cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/257Colour aspects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/324Colour aspects

Description

本発明は、例えば、同一の被写体やテスト画像を撮像した2台のカメラが出力する画像を比較する場合に適用して好適な信号処理装置、信号処理方法、表示装置及びプログラムに関する。
従来、ユーザの左右の眼の視差に合わせて設置される2台のカメラが撮像した同一の被写体の画像を用いて、ユーザが立体視することができる3D画像を生成する技術がある。2台のカメラが撮像した画像は、ユーザの左右の眼に合わせて左画像と右画像(以下、左画像と右画像を「左右画像」とも総称する。)と呼ばれる。ここで、左右画像の色合いや輝度、撮像位置等の設定パラメータが2台のカメラで合っていなければ、3D画像として正しく表示できない。このため、カメラを操作する技術者は、左右又は上下に並べた2台のモニタ等に左右画像をそれぞれ映し出し、左右画像を比較しながら、設定パラメータを合わせていた。
特許文献1には、市松模様をなすように左右画像を表示する画素を配置して、立体視する技術が開示されている。
再表2004/46789号公報
ところで、左右画像に共通する被写体等の色合い等を調整する場合に、単に2台のモニタを左右に並べたり、上下に並べたりするだけでは、左右画像の局所的な部分における色、輝度、フォーカス等の撮像パラメータが合っているかどうか判断することは難しかった。また、特許文献1に開示された技術は、左右画像に違和感が生じないようにして立体視することを目的としているため、左右画像自体をユーザが識別可能な大きさに表示させて、撮像パラメータを合わせることは難しかった。
本発明はこのような状況に鑑みて成されたものであり、2台のカメラが撮像する左右画像の合わせ込みを容易に行うことを目的とする。
本発明は、視差を有して配置される2台のカメラから入力する左画像信号及び右画像信号よりそれぞれの水平同期信号及び垂直同期信号を分離する。
水平同期信号に基づいて1水平周期当たりの左画像信号及び右画像信号のドット数をカウントし、水平同期信号及び垂直同期信号に基づいて1垂直周期当たりの左画像信号及び右画像信号のライン数をカウントする。
水平周期当たりのドット数、及び垂直周期当たりのライン数より、入力する左画像信号及び右画像信号の画像表示領域の画素数を判別する。
ドット数、ライン数、及び画像表示領域の画素数より、左画像信号より左画像を表示し、右画像信号より右画像を表示する表示部の表示領域に以下の画像信号を出力する。すなわち、所定のドット数及びライン数で規定され、ユーザが表示部に表示された左画像又は右画像を認識しうる大きさの表示領域に左画像又は右画像を隣り合わせて表示するように、左右画像信号のいずれかを切替えて出力するタイミングを制御する。
そして、表示部が3以上の数で分割された表示領域に左画像及び右画像が交互に表示されるように、切替えた左画像信号又は右画像信号を表示部に出力するものである。
このようにしたことで、1つの表示部であって、ユーザが表示部に表示された左画像又は右画像を認識しうる大きさの表示領域に左右画像を隣り合わせて表示することが可能となった。
本発明によれば、1つの表示部であって、ユーザが表示部に表示された左画像又は右画像を認識しうる大きさの表示領域に左右画像を隣り合わせて表示するため、ユーザは被写体の色、輝度、フォーカス等の差を比較しやすくなる。これにより、左右画像のうちいずれかの画像を基準として、他の画像を撮像するカメラの設定を調整することが容易になるという効果がある。
本発明の一実施の形態におけるカメラの配置例を示す説明図である。 本発明の一実施の形態における信号処理装置の内部構成例を示すブロック図である。 本発明の一実施の形態におけるドットカウンタとラインカウンタが画像信号のドット数とライン数をカウントする例を示す説明図である。 本発明の一実施の形態における左右画像をチェッカー表示する例を示す説明図である。 本発明の一実施の形態におけるカラーバーの表示例を示す説明図である。 本発明の一実施の形態におけるカラーバーをチェッカー表示する例を示す説明図である。 本発明の一実施の形態におけるカラーバーをチェッカー表示し、片側の画像信号を出力させない場合における表示例を示す説明図である。 本発明の一実施の形態における左右画像の範囲を変えて表示する例を示す説明図である。
以下、発明を実施するための最良の形態(以下実施の形態とする。)について説明する。なお、説明は以下の順序で行う。
1.一実施の形態(左右画像信号の出力制御:表示部に左右画像をチェッカー表示する例)
2.変形例
<1.一実施の形態>
[表示部に左右画像をチェッカー表示する例]
以下、本発明の一実施形態について、図1〜図7を参照して説明する。本実施の形態では、所定の数に分割した表示領域に左右画像を隣り合わせて表示部19に表示する信号処理装置10とこの装置に用いられる信号処理方法に適用した例について説明する。なお、以下の説明では、信号処理装置10と表示部19を分離した形態に適用した例としているが、信号処理装置10と表示部19を組み合わせた表示装置に本発明を適用してもよい。
図1は、視差によって被写体が異なる見え方をすることの例を示す。
図1Aは、2台のカメラ1L,1Rが視差を有して配置される例を示す。
図1Bは、奥行き効果又は飛び出し効果による被写体の例を示す。
左画像信号を出力するカメラ1Lと、右画像信号を出力するカメラ1Rは、視差に合わせ、左右方向に隣り合わせて配置される。表示部19(後述する図2参照)には、左画像信号により左画像が表示され、右画像信号により右画像が表示される。視差4は、カメラ1L,1Rの焦点方向の交点を基準面3とした場合に、基準面3の交点とカメラ1L,1Rの焦点方向の角度から求めることができる。
ここで、被写体2bは、基準面3に位置するため、不図示の3Dモニタに表示される画像をユーザが見ても立体視することはできない。しかし、被写体2aは、基準面3に対してカメラ1L,1Rより奥に位置し、視差4aの奥行き効果により、ユーザは、3Dモニタに表示される被写体2aが基準面3より奥にあるように見える。一方、被写体2cは、基準面3に対してカメラ1L,1Rより手前に位置し、視差4cの飛び出し効果により、ユーザは、3Dモニタに表示される被写体2cが基準面3より手間にあるように見える。
図2は、信号処理装置10の内部構成例を示す。
信号処理装置10は、視差を有して配置されるカメラ1L,1Rから入力した左画像信号及び右画像信号からそれぞれ水平及び垂直同期信号を分離する同期分離部11を備える。また、信号処理装置10は、水平同期信号に基づいて1水平周期当たりの左画像信号及び右画像信号のドット数(ピクセル数)をカウントするドットカウンタ12を備える。また、信号処理装置10は、水平同期信号及び垂直同期信号に基づいて1垂直周期当たりの左画像信号及び右画像信号の垂直方向におけるライン数をカウントするラインカウンタ14を備える。本例では、図2の左画像信号と右画像信号とが同期していることを前提としている。従って、左画像信号からだけで、右画像の同期信号、ドット数、ライン数、画像領域の画素数を知ることができるため、図2のように同期分離部11、ドットカウンタ12、ラインカウンタ14、判別部13は左画像信号からの入力だけで正常に検出し得る。
また、信号処理装置10は、ドットカウンタ12から1水平周期当たりのドット数を受取り、及びラインカウンタ14から1垂直周期当たりのライン数を受け取る判別部13を備える。判別部13は、受け取ったドット数とライン数に基づいて、入力する左画像信号及び右画像信号の画像表示領域の画素数を判別する。一般に判別部13が判別した画像表示領域の画素数は、表示部19の画素数と等しい。本例では、表示部19を1920ピクセル×1080ラインで構成される2Dモニタとしており、判別部13が判別した画像表示領域の画素数は、1920ピクセル×1080ラインから求められる。
また、信号処理装置10は、制御部16の制御により切替えた左画像信号又は右画像信号を表示部19に出力する第1の画像信号切替部15を備える。第1の画像信号切替部15は、表示部19を所定の数で等分する表示領域に対して、左画像及び右画像が交互に表示されるように、左画像信号及び右画像信号を切替えて出力する。このため、表示部19は、判別部13が判別した画像表示領域を所定の数に分割した表示領域に左右画像を隣り合わせて表示することができる。
また、信号処理装置10は、ドットカウンタ12がカウントしたドット数、ラインカウンタ14がカウントしたライン数、及び判別部13が判別した左画像信号及び右画像信号の画像表示領域の画素数が入力する制御部16を備える。制御部16は、表示部の表示領域のうち、所定のドット数及びライン数で規定され、ユーザが表示部19に表示された左画像又は右画像を認識しうる大きさの表示領域に左画像又は右画像を隣り合わせて表示するように第1の画像信号切替部15に指示を行う。このとき、制御部16は、左画像信号又は右画像信号のいずれかを切替えて出力するタイミングを制御する。
また、信号処理装置10は、制御部16の制御によって、左画像又は右画像の調整に用いる基準画像を表示するための基準信号を出力する基準信号源17を備える。基準信号源17は、カラーバー信号又はテストパターン信号を基準信号として出力する。また、基準信号源17は、黒画像、白画像等の単色画像の元となる画像信号を基準信号として出力する場合もある。
また、信号処理装置10は、制御部16によって、第1の画像信号切替部15から出力された左画像信号及び右画像信号のいずれかの画像信号を、基準信号源から出力された基準信号に置き換えて表示部19に出力する第2の画像信号切替部18を備える。第2の画像信号切替部18により、左右画像のうち、いずれかの画像を基準画像で置き換えた画像を表示部19に表示したり、左右画像の境界に境界線を表示部19に表示したりすることができる。
また、信号処理装置10は、表示部19に出力する右画像又は左画像の表示領域を変える操作部20を備える。制御部16は、操作部20より右画像又は左画像の表示領域を変える操作がされた場合に、第1の画像信号切替部に対して、右画像又は左画像の範囲を変えた表示領域に右画像信号又は左画像信号を切替えて出力させる。操作部20は、ジョグダイヤル等のコントローラ21、テンキー22、マウス23を含み、操作信号を出力する機能を有する。ユーザが操作部20を用いて入力操作を行うと、操作信号が制御部16に入力する。そして、制御部16は、入力操作に従って、表示部19に表示する左右画像の大きさ等を変える。
表示部19には、オンスクリーンメニューが表示される。そして、ユーザは、オンスクリーンメニューを見ながら、操作指示を行う。オンスクリーンメニューには、制御部16に以下の動作を行わせるメニュー項目が表示される。以下に項目の内容を併記して説明する。
(1)チェッカー表示のオン/オフを選択する。
オン時には、表示部19がチェッカー表示を行う。オフ時には、予め決めた左右画像のいずれかの画像が表示部19に表示される。
(2)チェッカー表示の水平方向のドット数を選択する。
マウス23により、チェッカー表示の際に左右画像をそれぞれ表示するための表示領域の内、水平方向のドット数を選択することができる。予め、チェッカー表示における表示領域が定められているため、ユーザは決められたドット数を選択するだけでチェッカー表示の水平方向の幅を変えることができる。
(3)チェッカー表示の水平方向のドット数をキーインする。
テンキー22により、チェッカー表示の際に左右画像をそれぞれ表示するための表示領域の内、水平方向のドット数を入力することができる。これにより、微細な領域を指定して左右画像を比較することが可能となる。
(4)チェッカー表示の垂直方向のライン数を選択する。
マウス23により、チェッカー表示の際に左右画像をそれぞれ表示するための表示領域の内、垂直方向のライン数を選択することができる。予め、チェッカー表示における表示領域が定められているため、ユーザは予め決められたライン数を選択するだけでチェッカー表示の垂直方向の幅を変えることができる。
(5)チェッカー表示の垂直方向のライン数をキーインする。
テンキー22により、チェッカー表示の際に左右画像をそれぞれ表示するための表示領域の内、垂直方向のライン数を入力することができる。これにより、微細な領域を指定して左右画像を比較することが可能となる。
(6)チェッカー表示を行う際に境界線の表示又は非表示を選択する。
マウス23により、チェッカー表示を行う際に境界線を表示又は非表示とするか選択することができる。
(7)チェッカー表示の境界線の色を選択する。
マウス23により、チェッカー表示を行う際に表示する境界線の色を選択することができる。
(8)チェッカー表示の境界線の太さを選択する。
マウス23により、チェッカー表示を行う際に表示する境界線の太さを選択することができる。
(9)チェッカー表示の境界線の太さをキーインする。
テンキー22により、チェッカー表示を行う際に表示する境界線の太さを入力することができる。これにより、微細な線や太い線を境界線として表示することが可能となる。
(10)チェッカー表示の左右画像の位置を入れ替える。
コントローラ21により、隣り合わせて表示した左右画像を入れ替えて表示することができる。
(11)チェッカー表示の左画像信号を基準信号に切替える。
マウス23により、表示部19に表示されている左画像を基準画像に入れ替えることができる。
(12)チェッカー表示の右画像信号を基準信号に切替える。
マウス23により、表示部19に表示されている右画像を基準画像に入れ替えることができる。
(13)基準画像の色を選択する。
マウス23により、表示部19に表示されている基準画像の色を選択することができる。これにより、基準画像の色を白や黒だけでなく、様々な色に変えて表示することが可能となる。
(14)基準信号の信号レベルを選択する。
マウス23により、表示部19に表示されている基準画像の信号レベルを選択することができる。これにより、基準画像の輝度を予め定めた輝度に変えて表示することが可能となる。
(15)基準信号の信号レベルをキーインする。
テンキー22により、表示部19に表示されている基準画像の信号レベルを入力することができる。これにより、表示部19に表示されている左右画像の輝度に合わせて、基準画像の輝度をわずかに変えて表示することが可能となる。
図3は、ドットカウンタ12とラインカウンタ14の動作例を示す。
図3Aは、ドットカウンタ12の動作例を示す。
信号処理装置10に入力する左右画像信号は、同期分離部11によって左右画像信号毎に水平同期信号が分離される。1水平周期を規定する水平タイミングは水平同期信号によって定まる。このため、水平同期信号は、水平方向の1ラインを計数するためにドットカウンタ12に入力する。ドットカウンタ12は、1水平周期毎に入力する左右画像信号のドット数をカウントするが、このカウントは、1水平周期毎に水平タイミングに従ってリセットされる。これにより、ドットカウンタ12は、1水平周期当たりのドット数をカウントできる。
図3Bは、ラインカウンタ14の動作例を示す。
ラインカウンタ14には、同期分離部11で分離された水平同期信号と垂直同期信号が入力する。ここで、1画面(1フィールド又は1フレーム)を規定する垂直タイミングは垂直同期信号によって定まる。また、垂直タイミングを1画面分の複数の水平周期によって規定される。
垂直同期信号は、垂直方向の複数ラインを計数するためにラインカウンタ14に入力する。ラインカウンタ14は、入力する左右画像信号のライン数を1画面毎にカウントする。このカウントは、1垂直周期毎に垂直タイミングに従ってリセットされる。これにより、ラインカウンタ14は、1垂直周期当たりのライン数をカウントできる。
図4は、チェッカー表示の例を示す。
信号処理装置10は、局所的な比較を行いやすくなるように、左右画像それぞれを複数の長方形に分割した上で、隣り合う画像領域に左右画像を交互に配置して、表示部19にチェッカー表示を行わせる。従って、左右画像それぞれの半分は間引いて表示することになる。
図4Aは、信号処理装置10に入力する左画像信号によって表示部19に表示される左画像の例を示す。
図4Bは、信号処理装置10に入力する左画像信号によって表示部19に表示される右画像の例を示す。
図4では、左右画像の違いを強調するため、色分けして表示した例を示すが、実際にカメラ1L,1Rが撮像する被写体は同一であるため、色合いに生じる差はわずかである。
図4Cは、表示部19にチェッカー表示される左右画像の例を示す。
本例では、表示部19を垂直方向と水平方向にそれぞれ4分割×4分割(計16分割)した表示領域に、左右画像を交互に表示している。このように左右画像をチェッカー表示することによって、ユーザは、左右画像に生じた色合いのわずかな差を確認できる。
図4Dは、チェッカー表示した左右画像の境界に境界線を表示した例を示す。
本例では、表示部19を垂直方向と水平方向にそれぞれ4分割×8分割(計32分割)した表示領域を区切る境界線30を表示している。境界線30が表示部19に表示されることにより、ユーザはどの表示領域に左右画像が表示されているかを確認しやすくなる。
図5は、カラーパターン画像の例を示す。
カメラ1L,1Rがテスト用に設置されたカラーパターン画像を撮像すると、カメラ1L,1Rはそれぞれカラーパターン画像を出力する。このカラーパターンは、白、黄、シアン、緑、マゼンタ、赤、青、黒の順で垂直方向の所定の表示領域毎に色を塗り分けて用いられる。
図6は、カラーパターン画像から一部の画像を抜いた例を示す。
本例では、カメラ1Lが出力する画像信号から左画像を表示部19に表示する。そして、右画像を表示する表示領域から右画像信号を抜く。このとき、表示部19にはチェッカー表示された左画像が表示される。表示部19に表示される左右画像を分割する大きさ、分割位置は任意に設定可能とする。これにより、被写体の任意位置を左右画像の境界に設定することが可能となる。
図7は、カラーパターン画像と基準信号を交互に表示する例を示す。
本例では、カメラ1Lが出力する画像信号から左画像を表示部19に表示する。一方、右画像を表示する表示領域には、基準信号源17が出力した基準信号に基づいて基準画像31を表示する。基準画像31は、便宜的に影を点けて表示しているが、カメラ1Lが白い被写体を撮像した場合、この被写体の色に合わせて白い基準画像を表示するようにしてもよい。これにより、基準画像に合わせてカメラ1Lの露光等を調整することが可能である。また、カメラ1Rを調整する場合は、左画像を表示する表示領域に基準画像を表示し、右画像を表示すればよい。これにより、カメラ1L,1Rを共に調整することができる。
以上説明した本実施の形態に係る信号処理装置10によれば、従来、2台のモニタを用いて左右画像の合わせ込みを行っていた場合に比べて、表示部19に隣り合って表示される左右画像はユーザの視線移動が少なくなる。そして、2Dモニタとして用いられる表示部19に左右画像をチェッカー表示することにより、左右画像の色や輝度等の差を比較し易くなる。このように表示部19を分割した表示領域に交互に左右画像を表示することによって、左右画像の色合い等の各種のパラメータを合わせ易くなるという効果がある。
また、カメラ1L,1Rは視差を有しているため、同一の被写体を撮像すると、表示部19に表示される被写体にズレが生じてしまう。しかし、信号処理装置10は、視差を修正するものでなく、カメラ1L,1R毎に各種のパラメータを変えることによって、同じ品質の画像を得るものである。このため、ユーザが認識できる大きさで表示された左右画像によって容易にカメラ1L,1Rのパラメータ設定が可能となる。
また、信号処理装置10は、あくまでも2D表示を行うために左右画像信号を処理する。従って、モニタに信号処理装置10を設置するだけでなく、モニタ以外の3D信号処理用機器内の機能としても有用である。
また、カメラ1L,1Rは3D画像を撮像するために用いるが、カメラ1L,1Rの画像を確認するために必ずしも3D表示が可能なモニタは必要ない。このため、ユーザは裸眼で表示部19に表示される左右画像を確認することができ、利便性が向上する。
また、左右画像信号のいずれかに変えて基準信号源17が出力した基準信号を表示部19に出力できる。このため、基準信号から表示される基準画像に合わせて、カメラ1L,1Rを調整し、左右画像の色合い等を変えることができる。
<2.変形例>
なお、上述した実施の形態では、左右画像を複数の長方形に分割し、互いに市松模様状に並ぶ様に間引いて表示するものとしたが、左右画像のいずれであっても表示する表示領域を任意に変えるようにしてもよい。例えば、市松模様の様な、予め決まった形式での表示でなく、もう片側の絵をポインティングデバイス等による指定でPinP(Picture in Picture)表示を行い、左右画像を比較することも効果がある。この場合、あくまでも左右画像の全体表示は動かさず、指定して開けたPinPを窓として、もう片方の画像を表示させてもよい。ここで、ユーザがマウス23を用いた操作によって、左右画像の表示領域を変える例を説明する。
上述したように表示部19には、オンスクリーンメニューが表示される。そして、ユーザは、オンスクリーンメニューを見ながら、操作指示を行う。オンスクリーンメニューには、上述した(1)〜(15)のメニューに加えて、制御部16に以下の動作を行わせるメニュー項目が表示される。以下に項目の内容を併記して説明する。
(16)マウス23にて左画像の表示領域を指定する(指定外は右画像)
左画像を表示する領域の縁をマウス23により指定すると、指定した左画像の表示領域の大きさを変えることができる。
(17)マウス23にて右画像信号エリアを指定する(指定外は左画像)
右画像を表示する領域の縁をマウス23により指定すると、指定した右画像の表示領域の大きさを変えることができる。
図8は、左右画像を表示する表示領域を変えた場合の例を示す。
図8Aは、カメラ1Lが被写体32を撮像して得る左画像の例を示す。
図8Bは、カメラ1Rが被写体32を撮像して得る右画像の例を示す。
カメラ1L,1Rは、視差を有して設置されるため、被写体32の左右画像における水平方向の位置はわずかに異なる。
図8Cは、表示部19に表示する右画像の表示領域33を変えた第1の例を示す。
図8Dは、表示部19に表示する右画像の表示領域33を変えた第2の例を示す。
ユーザがマウス23を用いて右画像を表示する表示領域33の大きさを変えると、その表示領域33に合わせて右画像が表示される。
このとき、左画像も表示されるが、視差により被写体32の輪郭は一致しない。しかし、ユーザが色合い等を確認したい局所的な表示領域だけを特定し、他の部分との関係から左右画像の合わせ込みを行うことができる。
また、PinPを行う際には、予め用意しておいたテンプレートからユーザが任意の形状としたテンプレートを選んで、実行することもできる。このため、テンプレートは、長方形に限らず、円形、楕円形、多角形等様々な図形を用いればよい。
また、上述した実施の形態に係る信号処理装置10を表示装置に組み込んでもよい。この表示装置が表示部19を備えることにより、カメラ1L,1Rから入力した左右画像信号に基づいて、直接左右画像を表示することができる。この場合、信号処理装置10と表示部19を一体化することにより、小型化、軽量化することが可能であり、野外での撮影におけるカメラ1L,1Rの色合わせ等を行いやすくなる。
また、上述した実施の形態の機能を実現するソフトウェアのプログラムコードを記録した記録媒体を、カメラ1L,1Rに供給してもよい。また、制御部16が記録媒体に格納されたプログラムコードを読み出し実行することによっても、機能が実現されることは言うまでもない。
この場合のプログラムコードを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、磁気テープ、不揮発性のメモリカード、ROMなどを用いることができる。
また、制御部16が読み出したプログラムコードを実行することにより、上述した実施の形態の機能が実現される。加えて、そのプログラムコードの指示に基づき、制御部16上で稼動しているOSなどが実際の処理の一部又は全部を行う。その処理によって上述した実施の形態の機能が実現される場合も含まれる。
また、本発明は上述した実施の形態に限られるものではなく、特許請求の範囲に記載した本発明の要旨を逸脱しない限りその他種々の応用例、変形例を取り得ることは勿論である。
1L,1R…カメラ、2a〜2c…被写体、3…基準面、4…視差、10…信号処理装置、11…同期分離部、12…ドットカウンタ、13…判別部、14…ラインカウンタ、15…第1の画像信号切替部、16…制御部、17…基準信号源、18…第2の画像信号切替部、19…表示部、20…操作部、21…コントローラ、22…テンキー、23…マウス、30…境界線、31…基準画像、32…被写体、33…表示領域、100…カメラ

Claims (8)

  1. 視差を有して配置される2台のカメラから入力する左画像信号及び右画像信号よりそれぞれの水平同期信号及び垂直同期信号を分離する同期分離部と、
    前記水平同期信号に基づいて1水平周期当たりの前記左画像信号及び右画像信号のドット数をカウントするドットカウンタと、
    前記水平同期信号及び垂直同期信号に基づいて1垂直周期当たりの前記左画像信号及び右画像信号のライン数をカウントするラインカウンタと、
    前記ドットカウンタから受け取る前記1水平周期当たりのドット数、及び前記ラインカウンタから受け取る前記1垂直周期当たりのライン数より、入力する前記左画像信号及び右画像信号の画像表示領域の画素数を判別する判別部と、
    前記ドットカウンタがカウントした前記ドット数、前記ラインカウンタがカウントした前記ライン数、及び前記判別部が判別した前記画像表示領域の画素数より、前記左画像信号より左画像を表示し、前記右画像信号より右画像を表示する表示部の表示領域のうち、所定のドット数及びライン数で規定され、ユーザが前記表示部に表示された左画像又は右画像を認識しうる大きさの表示領域に前記左画像又は右画像を隣り合わせて表示するように、前記左画像信号又は右画像信号のいずれかを切替えて出力するタイミングを制御する制御部と、
    前記表示部が3以上の数で分割された前記表示領域に前記左画像及び右画像が交互に表示されるように、前記制御部の制御により切替えた前記左画像信号又は右画像信号を前記表示部に出力する第1の画像信号切替部と、を備える
    信号処理装置。
  2. 前記表示領域は、前記表示部を3以上の数で等分し、又は前記表示部を任意の大きさの矩形領域で分割したものである
    請求項1記載の信号処理装置。
  3. さらに、前記制御部の制御によって、前記左画像又は右画像の調整に用いる基準画像を表示するための基準信号を出力する基準信号源と、
    前記制御部の制御によって、前記第1の画像信号切替部から出力された前記左画像信号及び右画像信号のいずれかの画像を、前記基準信号源から出力された前記基準信号に置き換えて前記表示部に出力する第2の画像信号切替部と、を備える
    請求項1又は2記載の信号処理装置。
  4. さらに前記表示部に出力する右画像又は左画像の前記表示領域を変える操作部を備え、
    前記制御部は、前記操作部より右画像又は左画像の前記表示領域を変える操作がされた場合に、前記第1の画像信号切替部に対して、前記右画像又は左画像の範囲を変えた任意の大きさの表示領域に前記右画像信号又は左画像信号を切替えて出力させる
    請求項3記載の信号処理装置。
  5. 前記基準信号源は、カラーバー信号又はテストパターン信号を前記基準信号として出力する
    請求項3又は4記載の信号処理装置。
  6. 視差を有して配置される2台のカメラから入力する左画像信号及び右画像信号よりそれぞれの水平同期信号及び垂直同期信号を分離するステップと、
    前記水平同期信号に基づいて1水平周期当たりの前記左画像信号及び右画像信号のドット数をカウントするステップと、
    前記水平同期信号及び垂直同期信号に基づいて1垂直周期当たりの前記左画像信号及び右画像信号のライン数をカウントするステップと、
    記1水平周期当たりのドット数、及び前記1垂直周期当たりのライン数より、入力する前記左画像信号及び右画像信号の画像表示領域の画素数を判別するステップと、
    前記ドット数、前記ライン数、及び前記画像表示領域の画素数より、前記左画像信号より左画像を表示し、前記右画像信号より右画像を表示する表示部の表示領域のうち、所定のドット数及びライン数で規定され、ユーザが前記表示部に表示された左画像又は右画像を認識しうる大きさの表示領域に前記左画像又は右画像を隣り合わせて表示するように、前記左画像信号又は右画像信号のいずれかを切替えて出力するタイミングを制御するステップと、
    前記表示部が3以上の数で分割された前記表示領域に前記左画像及び右画像が交互に表示されるように、切替えた前記左画像信号又は右画像信号を前記表示部に出力するステップと、を含む
    信号処理方法。
  7. 視差を有して配置される2台のカメラから入力する左画像信号及び右画像信号よりそれぞれの水平同期信号及び垂直同期信号を分離する同期分離部と、
    前記水平同期信号に基づいて1水平周期当たりの前記左画像信号及び右画像信号のドット数をカウントするドットカウンタと、
    前記水平同期信号及び垂直同期信号に基づいて1垂直周期当たりの前記左画像信号及び右画像信号のライン数をカウントするラインカウンタと、
    前記ドットカウンタから受け取る前記1水平周期当たりのドット数、及び前記ラインカウンタから受け取る前記1垂直周期当たりのライン数より、入力する前記左画像信号及び右画像信号の画像表示領域の画素数を判別する判別部と、
    前記左画像信号より左画像を表示し、前記右画像信号より右画像を表示する表示部と、
    前記ドットカウンタがカウントした前記ドット数、前記ラインカウンタがカウントした前記ライン数、及び前記判別部が判別した前記画像表示領域の画素数より、前記表示部の表示領域のうち、所定のドット数及びライン数で規定され、ユーザが前記表示部に表示された左画像又は右画像を認識しうる大きさの表示領域に前記左画像又は右画像を隣り合わせて表示するように、前記左画像信号又は右画像信号のいずれかを切替えて出力するタイミングを制御する制御部と、
    前記表示部が3以上の数で分割された前記表示領域に対して、前記左画像及び右画像が交互に表示されるように、前記制御部の制御により切替えた前記左画像信号又は右画像信号を前記表示部に出力する第1の画像信号切替部と、を備える
    表示装置。
  8. 視差を有して配置される2台のカメラから入力する左画像信号及び右画像信号よりそれぞれの水平同期信号及び垂直同期信号を分離する手順と、
    前記水平同期信号に基づいて1水平周期当たりの前記左画像信号及び右画像信号のドット数をカウントする手順と、
    前記水平同期信号及び垂直同期信号に基づいて1垂直周期当たりの前記左画像信号及び右画像信号のライン数をカウントする手順と、
    記1水平周期当たりのドット数、及び前記1垂直周期当たりのライン数より、入力する前記左画像信号及び右画像信号の画像表示領域の画素数を判別する手順と、
    前記ドット数、前記ライン数、及び前記画像表示領域の画素数より、前記左画像信号より左画像を表示し、前記右画像信号より右画像を表示する表示部の表示領域のうち、所定のドット数及びライン数で規定され、ユーザが前記表示部に表示された左画像又は右画像を認識しうる大きさの表示領域に前記左画像又は右画像を隣り合わせて表示するように、前記左画像信号又は右画像信号のいずれかを切替えて出力するタイミングを制御する手順と、
    前記表示部が3以上の数で分割された前記表示領域に前記左画像及び右画像が交互に表示されるように、切替えた前記左画像信号又は右画像信号を前記表示部に出力する手順と、を
    コンピュータに実行させるためのプログラム。
JP2010087175A 2010-04-05 2010-04-05 信号処理装置、信号処理方法、表示装置及びプログラム Expired - Fee Related JP5515988B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2010087175A JP5515988B2 (ja) 2010-04-05 2010-04-05 信号処理装置、信号処理方法、表示装置及びプログラム
EP11154790A EP2375758A2 (en) 2010-04-05 2011-02-17 Signal processing device, signal processing method, display device and program product
TW100109701A TWI461053B (zh) 2010-04-05 2011-03-22 信號處理裝置、信號處理方法、顯示裝置、及程式產品
KR1020110027455A KR20110112202A (ko) 2010-04-05 2011-03-28 신호 처리 장치, 신호 처리 방법, 표시 장치 및 프로그램 제품
US13/065,693 US20110242282A1 (en) 2010-04-05 2011-03-28 Signal processing device, signal processing method, display device, and program product
CN201110076726XA CN102215410A (zh) 2010-04-05 2011-03-29 信号处理器件、信号处理方法、显示器件和程序产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010087175A JP5515988B2 (ja) 2010-04-05 2010-04-05 信号処理装置、信号処理方法、表示装置及びプログラム

Publications (2)

Publication Number Publication Date
JP2011223100A JP2011223100A (ja) 2011-11-04
JP5515988B2 true JP5515988B2 (ja) 2014-06-11

Family

ID=44201246

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010087175A Expired - Fee Related JP5515988B2 (ja) 2010-04-05 2010-04-05 信号処理装置、信号処理方法、表示装置及びプログラム

Country Status (6)

Country Link
US (1) US20110242282A1 (ja)
EP (1) EP2375758A2 (ja)
JP (1) JP5515988B2 (ja)
KR (1) KR20110112202A (ja)
CN (1) CN102215410A (ja)
TW (1) TWI461053B (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013186960A1 (ja) 2012-06-15 2013-12-19 パナソニック株式会社 画像データ処理装置及び画像データ処理方法
CN104517279A (zh) * 2013-11-14 2015-04-15 广东朗呈医疗器械科技有限公司 一种图像互相关比对方法
US9558553B2 (en) 2014-11-17 2017-01-31 Ricoh Company, Ltd. Image acquisition and management using a reference image
US9451170B2 (en) 2014-11-17 2016-09-20 Ricoh Company, Ltd. Image acquisition and management using a reference image
US10136050B2 (en) * 2015-03-06 2018-11-20 Ricoh Company, Ltd. Image acquisition and management using a reference image
US10217022B2 (en) 2015-03-06 2019-02-26 Ricoh Company, Ltd. Image acquisition and management

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2841301B2 (ja) * 1989-04-28 1998-12-24 池上通信機株式会社 カラーテレビカメラの色補正装置
JPH04119771A (ja) * 1990-09-10 1992-04-21 Nec Corp ハイビジョン受像機
CN1075213A (zh) * 1992-02-01 1993-08-11 贺守正 在电子计算机屏幕上观看立体图象的方法和装置
US5715013A (en) * 1996-02-09 1998-02-03 Lg Electronics Inc. Double picture producing apparatus for wide screen television
AUPO981997A0 (en) * 1997-10-15 1997-11-06 Lions Eye Institute Of Western Australia Incorporated, The Stereo optic disc analyser
US6704042B2 (en) * 1998-12-10 2004-03-09 Canon Kabushiki Kaisha Video processing apparatus, control method therefor, and storage medium
JP2000305555A (ja) * 1999-04-19 2000-11-02 Sony Corp 画像表示装置
US6552697B1 (en) * 1999-04-21 2003-04-22 Ati International S.R.L. Method and apparatus for generating stereoscopic three-dimensional images
JP3823929B2 (ja) 2002-05-17 2006-09-20 ソニー株式会社 情報処理装置、情報処理方法、およびコンテンツ配信装置、コンテンツ配信方法、並びにコンピュータ・プログラム
JP4346548B2 (ja) * 2002-06-28 2009-10-21 シャープ株式会社 画像データ配信システムならびにその画像データ送信装置および画像データ受信装置
WO2004046789A1 (ja) 2002-11-20 2004-06-03 Seijiro Tomita 立体映像表示装置
EP1617684A4 (en) * 2003-04-17 2009-06-03 Sharp Kk THREE-DIMENSIONAL IMAGE CREATION DEVICE, THREE-DIMENSIONAL IMAGE REPRODUCING DEVICE, THREE-DIMENSIONAL IMAGE PROCESSING DEVICE, THREE-DIMENSIONAL IMAGE PROCESSING PROGRAM, AND RECORDING MEDIUM CONTAINING THE SAME
JP3790764B2 (ja) * 2004-04-02 2006-06-28 一成 江良 投写型表示装置および投写型表示システム
JP4376194B2 (ja) * 2005-03-10 2009-12-02 稔 稲葉 ディジタルステレオカメラ又はディジタルステレオビデオカメラ並びに3dディスプレイ又は3dプロジェクタ並びにプリンタ
KR101342987B1 (ko) * 2006-11-21 2013-12-18 톰슨 라이센싱 3d 이미지의 컬러 보정을 위한 방법 및 시스템
JP2008164367A (ja) * 2006-12-27 2008-07-17 Matsushita Electric Ind Co Ltd 固体撮像装置、カメラ、車両及び監視装置
WO2008102366A2 (en) * 2007-02-25 2008-08-28 Humaneyes Technologies Ltd. A method and a system for calibrating and/or visualizing a multi image display and for reducing ghosting artifacts
JP5207719B2 (ja) * 2007-12-05 2013-06-12 株式会社トプコン カラーコード付き標識、カラーコード抽出手段及び三次元計測システム
CN101458888B (zh) * 2007-12-12 2011-06-29 群康科技(深圳)有限公司 平板显示器及其图像信号分辨率侦测方法
KR100924121B1 (ko) * 2007-12-15 2009-10-29 한국전자통신연구원 컬러 체커 챠트를 이용한 다중 카메라간 컬러 일치 방법
US8300086B2 (en) * 2007-12-20 2012-10-30 Nokia Corporation Image processing for supporting a stereoscopic presentation
US8102470B2 (en) * 2008-02-22 2012-01-24 Cisco Technology, Inc. Video synchronization system
JP5259325B2 (ja) 2008-09-30 2013-08-07 スピードファム株式会社 半導体ウエハの厚さ形状もしくは表面形状を修正するための多段局所ドライエッチング方法
EP2343907A4 (en) * 2008-10-10 2012-06-20 Lg Electronics Inc RECEPTION SYSTEM AND METHOD OF PROCESSING DATA
JP2011135252A (ja) * 2009-12-24 2011-07-07 Victor Co Of Japan Ltd 立体映像撮影用カメラ調整補助装置

Also Published As

Publication number Publication date
KR20110112202A (ko) 2011-10-12
TW201220822A (en) 2012-05-16
CN102215410A (zh) 2011-10-12
EP2375758A2 (en) 2011-10-12
TWI461053B (zh) 2014-11-11
US20110242282A1 (en) 2011-10-06
JP2011223100A (ja) 2011-11-04

Similar Documents

Publication Publication Date Title
JP5515988B2 (ja) 信号処理装置、信号処理方法、表示装置及びプログラム
EP2410753B1 (en) Image-processing method for a display device which outputs three-dimensional content, and display device adopting the method
US20150350626A1 (en) Method for providing three-dimensional (3d) image, method for converting 3d message, graphical user interface (gui) providing method related to 3d image, and 3d display apparatus and system for providing 3d image
CN102427504B (zh) 一种基于背景拼接墙的图像处理方法、装置及系统
US8358335B2 (en) Method for displaying image information and autostereoscopic screen
US20130002660A1 (en) Stereoscopic video display device and operation method of stereoscopic video display device
JP2007043274A (ja) 投写画像の位置調整方法
JP2011244044A (ja) 画像投射装置
KR101650381B1 (ko) 입체 영상 보정 장치 및 방법
JP2004102526A (ja) 立体画像表示装置、表示処理方法及び処理プログラム
JP5540848B2 (ja) 映像信号処理装置、表示装置、表示方法及びプログラム
US20140362197A1 (en) Image processing device, image processing method, and stereoscopic image display device
US20140118318A1 (en) Method and system for automatically adjusting autostereoscopic 3d display device
TWI556653B (zh) Tag display method, device, computer program, and computer readable memory media
JP5477129B2 (ja) 映像信号処理装置、表示装置、表示方法及びプログラム
EP2710581B1 (en) System for providing private viewing of multimedia contents of a display
JP4507843B2 (ja) 画像表示装置
US9578315B2 (en) Method and system for judging in a 3D imaging environment
JP2014174337A (ja) 画像投影装置
JP5561081B2 (ja) 画像表示装置
JP2012133179A (ja) 立体視装置、及び立体視装置の制御方法
KR20120011161A (ko) 3차원 표시를 위한 이미지를 변경하는 장치 및 방법
KR101651132B1 (ko) 3차원 컨텐츠 출력 방법 및 그 방법을 채용한 디지털 방송 수신기
JP2011029902A (ja) 表示装置
JP2017034461A (ja) 画像処理装置、画像処理装置の制御方法、およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130228

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131004

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131008

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140304

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140317

LAPS Cancellation because of no payment of annual fees