JP5349638B2

JP5349638B2 - 信号処理装置及び信号処理方法

Info

Publication number: JP5349638B2
Application number: JP2012096435A
Authority: JP
Inventors: 広幸神尾
Original assignee: Toshiba Corp
Current assignee: Toshiba Corp
Priority date: 2012-04-20
Filing date: 2012-04-20
Publication date: 2013-11-20
Anticipated expiration: 2030-07-29
Also published as: JP2012170125A

Description

本発明の実施形態は、映像信号を適応的に処理する信号処理技術に関する。

近年、３Ｄ映像(3-dimensional image)の表示が望まれている。ＢＳデジタル放送では、３Ｄ放送の提供が開始されようとしている。ＢＳデジタル放送では、MPEG-2 Videoの映像信号で３Ｄ放送の提供が開始されようとしている。一方、ＣＳ放送では、MPEG-4 AVC(H.264 Video)の映像信号で３Ｄ放送の提供が開始されている。そのため、３Ｄ映像に対応したテレビジョン受信機、映像記録再生装置が今後普及すると考えられる。

MPEG-4 AVCの映像信号には、映像信号に基づく画像が２Ｄ画像であるか３Ｄ画像であるかを示す情報（２Ｄ／３Ｄの識別情報と称す）が含まれている。そのため、テレビジョン受信機は、MPEG-4 AVCの映像信号を受信した場合、映像信号に基づく画像の表示形式を２Ｄ／３Ｄに応じて自動で切り替えてモニタに表示できる。

特開２００５−１７５５６６号公報

しかしながら、MPEG-2 Videoの映像信号には、２Ｄ／３Ｄの識別情報が含まれていない。そのため、ユーザは、３Ｄ放送が始まった後に画像の表示形式を手動で３Ｄに切り替え、２Ｄ放送に戻った後に画像の表示形式を２Ｄに切り替える必要がある。このような不都合を解消するために、MPEG Videoの映像信号に２Ｄ／３Ｄの識別情報を付加する方式が検討されている。

一方で、従来から、家庭用の映像記録再生装置（ＨＤＤ(Hard Disk Drive)レコーダなど）は、データ量の多いデジタル放送（MPEG-2 Video）の映像信号をH.264 Videoの映像信号に変換及び圧縮してＨＤＤに記録する方式が増えてきている。したがって、映像記録再生装置は、このように映像信号を高圧縮な映像信号に変換するトランスコーダを搭載している。

しかしながら、トランスコーダがMPEG2 Videoの映像信号を変換及び圧縮した後のH.264 Videoの映像信号をＨＤＤに記録した場合、２Ｄ／３Ｄの識別情報は、H.264 Videoの映像信号からは消失する。これは、トランスコーダがMPEG2 Videoの映像信号に基づく画像部分のみを復号し、その画像をH.264 Videoの画像に符号化するためである。そのため、映像記録再生装置は、トランスコーダで変換された後のH.264 Videoの映像信号に基づく画像が２Ｄ画象か３Ｄ画像か区別できなくなる。トランスコーダがH.264 Videoの映像信号を変換及び圧縮した後のH.264 Videoの映像信号をＨＤＤに記録する場合も同様である。

そこで、この発明は、復号された符号化信号を再び符号化する場合に、２Ｄ／３Ｄの識別情報を継承する信号処理装置及び信号処理方法を提供することを目的とする。

実施形態によれば、信号処理装置は、復号手段と、検出手段と、符号手段と、生成手段とを具備する前記復号手段は、第１の符号化方式で符号化された第１の映像信号を復号する。前記検出手段は、前記第１の映像信号に基づく画像が２Ｄ画象か３Ｄ画像かを検出する。前記符号手段は、前記第１の映像信号を第２の符号化方式で第２の映像信号に符号化する。前記生成手段は、前記検出手段による検出に基づいて、前記第２の映像信号に付加する２Ｄ画像か３Ｄ画像かを示す情報を生成する。

第1の実施形態に係る映像記録再生装置の概略構成を示すブロック図。 MPEG2 Videoで符号化された３Ｄ放送の映像信号に基づく画像の例を示す図。 MPEG2 Videoのビデオシーケンスのデータ構造を示す図。 MPEG2 Videoのユーザデータ内のデータ構造を示す図。 MPEG2 Videoのステレオビデオフォーマットシグナリングのデータ構造を示す図。ステレオビデオフォーマットシグナリングタイプに記録される値と画像の形式の種別の関係を説明する図。第1の実施形態に係るトランスコーダの構成を示すブロック図。 H.264 Videoの映像信号の映像ストリームの構成を示す図。第２の実施形態に係るトランスコーダの構成を示すブロック図。第３の実施形態に係るトランスコーダの構成を示すブロック図。第４の実施形態に係るトランスコーダの構成を示すブロック図。

以下、図面を参照して本実施形態について説明する。図１は、第1の実施形態に係る映像記録再生装置１（信号処理装置）の概略構成を示すブロック図である。映像記録再生装置１は、ユーザ操作入力部１０１、信号受光部１０２、表示部１０３、制御モジュール１０４、メモリ部１０５、チューナ部１０６、信号処理モジュール１０７、ディスクドライブ部１０８、ハードディスクドライブ部１０９、合成処理モジュール１１０、ＯＳＤ制御モジュール１１１、ネットワーク部１１２を備えている。

ユーザ操作入力部１０１は、映像記録再生装置１に対するユーザ操作が可能である。信号受光部１０２は、ユーザ操作によりリモートコントローラ１０２ａから送出される信号を受信する。表示部１０３は、ユーザに対する各種メッセージを表示する。制御モジュール１０４は、映像記録再生装置１の各構成の動作を制御する。メモリ１０５は、映像記録再生装置１に関する動作プログラムを保存する。

チューナ部１０６は、アンテナ３により受信された受信信号から指定されたチャンネルの放送信号を選択する。チューナ部１０６は、選択された放送信号を信号処理モジュール１０７へ出力する。信号処理モジュール１０７は、放送信号に含まれる映像信号及び音声信号をを復号する。その後、信号処理モジュール１０７は、録画処理が指定されている場合には、映像信号及び音声信号を符号化し、ディスクドライブ部１０８又はハードディスクドライブ部１０９へ映像信号及び音声信号を出力する。信号処理モジュール１０７による映像信号の復号、その後の符号化については、後に詳述する。一方、信号処理モジュール１０７は、再生処理が指定されている場合には、合成処理モジュール１１０へ映像信号及び音声信号を出力する。

ディスクドライブ部１０８は、符号化された映像信号及び音声信号を光ディスク１０８ａへ記録する。ハードディスクドライブ部１０９は、符号化された映像信号及び音声信号をハードディスクへ記録する。ＯＳＤ制御モジュール１１１は、画面に表示するための表示情報を生成し、合成処理モジュール１１０へ出力する。合成処理モジュール１１０は、表示情報を映像信号に合成する。合成処理モジュール１１０は、表示情報を合成した映像信号及び音声信号を映像表示装置２（表示手段）に出力する。ネットワークＩ／Ｆ(Interface) １１２は、映像記録再生装置１をインターネットなどの外部ネットワークまたは宅内の内部ネットワークに接続する。

次に、MPEG2 Videoで符号化された３Ｄ放送の映像信号について説明する。図２は、MPEG2 Videoで符号化された３Ｄ放送の映像信号に基づく画像の一例を示す図である。ここでは、３Ｄ放送は、サイドバイサイド(Side-by-Side)方式である。サイドバイサイド方式は、１画像が左半分に左目用画像、右半分に右目用画像で構成された映像信号を放送する方式である。サイドバイサイド方式の映像信号を受信した映像表示装置２は、左目用画像及び右目用画像を画面サイズに拡張して交互に表示する。ユーザは、電子シャッター式メガネにより、左目では左目用画像のみ、右目では右目用画像のみを見ることができる。つまり、３Ｄ放送がSide-by-Side方式の場合、映像表示装置２は、１画像から左目用画像及び右目用画像を抽出して表示する。したがって、映像表示装置２は、既存の設備で３Ｄ放送を表示できる。

なお、３Ｄ放送の方式は、既存の設備の映像表示装置２で表示可能な方式であればサイドバイサイド方式に限られない。３Ｄ放送の方式は、ラインバイライン(line by line)方式、トップアンドボトム(top and botom)方式、チェッカーサンプリング方式などであってもよい。

図３は、MPEG2 Videoの映像信号で定義されているビデオシーケンス(video_sequence)のデータ構造を示す図である。ビデオシーケンス内のピクチャレイヤには、ユーザデータ(user_data)が定義されている。ユーザデータは、種々の情報を任意に定義可能なエリアである。ユーザデータは、例えば字幕（クローズドキャプション）の定義に使用されている。

図４は、ユーザデータ内のデータ構造を示す図である。図４では、左列にデータ構造、真ん中の列にそのビット数、右列にそのビット列表記を示している。ユーザデータには、ステレオビデオフォーマットシグナリング（Stereo_Video_Format_Signaling）が定義されている。ステレオビデオフォーマットシグナリングは、映像信号に基づく画像の２Ｄ／３Ｄの識別情報である。

図５は、ステレオビデオフォーマットシグナリングのデータ構造を示す図である。図５では、左列にデータ構造、真ん中の列にビット数、右列にビット列表記を示している。ステレオビデオフォーマットシグナリングには、ステレオビデオフォーマットシグナリング長（Stereo_Video_Format_Signaling_length）及びステレオビデオフォーマットシグナリングタイプ（Stereo_Video_Format_Signaling_length）が定義されている。ステレオビデオフォーマットシグナリング長は、本フィールドより後のバイト長を示す。ステレオビデオフォーマットシグナリングタイプは、画像の形式の種別を示す。

図６は、ステレオビデオフォーマットシグナリングタイプに記録される値と、その値に対応する画像の形式の種別の関係を説明する図である。ステレオビデオフォーマットシグナリングタイプが0000011と記録されていれば、画像は、サイドバイサイド方式の３Ｄである。ステレオビデオフォーマットシグナリングタイプが000100０と記録されていれば、画像は、２Ｄである。ステレオビデオフォーマットシグナリングタイプは、他の３Ｄ放送の方式毎に上記以外の値が定義され得る。

図７は、第1の実施形態に係る信号処理モジュール１０７に含まれるトランスコーダ２０の構成を示すブロック図である。トランスコーダ２０は、録画処理が指定されている場合に、映像信号に基づく画像を復号、その後に符号化する。トランスコーダ２０は、デコーダ２０１、エンコーダ２０２を備える。第１の実施形態は、MPEG2 Video（第１の符号化方式）の映像信号に基づく画像をH.264 Videoの画像に変換すると共に、MPEG2 Videoの映像信号に含まれる２Ｄ／３Ｄの識別情報をH.264 Video（第２の符号化方式）の映像信号にも承継させる例である。

ここで、H.264 Videoの映像信号について説明する。図８は、H.264 Videoの映像信号の映像ストリームの構成を示す図である。図８の上段は、ＧＯＰ(Group of pictures)の先頭のアクセスユニットの映像ストリームを示す。図８の下段は、ＧＯＰの先頭以外のアクセスユニットの映像ストリームを示す。アクセスユニットには、各ＳＥＩ(Supplemental Enhancement Information:付加拡張情報)を定義するフレームが含まれている。各ＳＥＩには、各種情報が定義されている。H.264 Videoの映像信号は、画像毎にＳＥＩのフレームがアクセスユニットに含まれている。ＳＥＩのフレームは、フレーム格納配置ＳＥＩを付加している。フレーム格納配置ＳＥＩは、当該画像の２Ｄ／３Ｄの識別情報を記録する。

図７に示すように、デコーダ２０１は、画像復号モジュール２０１１、ＧＯＰ構成検出モジュール２０１２、ユーザデータ検出モジュール２０１３を備える。画像復号モジュール２０１１（復号手段）は、MPEG-2 Videoの映像信号に基づく画像を元の画像に復号する。画像復号モジュール２０１１は、復号した画像をエンコーダ２０２に出力する。ＧＯＰ構成検出モジュール２０１２は、MPEG-2 Videoの映像信号からＧＯＰの構成情報を検出する。ＧＯＰ構成検出モジュール２０１２は、検出したＧＯＰの構成情報をエンコーダ２０２に出力する。

ユーザデータ検出モジュール２０１３（検出手段）は、MPEG-2 Videoの映像信号に含まれるビデオシーケンスのユーザデータ部分を監視する。ユーザデータ検出モジュール２０１３は、ユーザデータのステレオビデオフォーマットシグナリングに基づいて、当該画像が２Ｄであるか３Ｄであるかを検出する。ユーザデータ検出モジュール２０１３は、当該画像が３Ｄの場合、ステレオビデオフォーマットシグナリングに基づく情報（３Ｄを示す情報及びその方式を示す情報）をエンコーダ２０２に出力する。なお、ユーザデータ検出モジュール２０１３は、当該画像が２Ｄの場合も、２Ｄであることを示す情報をエンコーダ２０２に出力してもよい。

エンコーダ２０２は、画像符号モジュール２０２１、ＳＥＩ生成モジュール２０２２を備える。画像符号モジュール２０２１（符号手段）は、復号された画像をH.264の画像に符号化する。画像符号モジュール２０２１は、H.264の画像を出力画像として出力する。ＳＥＩ生成モジュール２０２２（生成手段）は、H.264の画像のアクセスユニットに含める各ＳＥＩをＧＯＰの構成情報及びステレオビデオフォーマットシグナリングに基づく情報に基づいて生成する。ＳＥＩ生成モジュール２０２２は、ステレオビデオフォーマットシグナリングに基づく情報が３Ｄを示す情報である場合、当該画像のフレーム格納配置ＳＥＩに３Ｄを示す情報及びその方式を示す情報を記録する。なお、ＳＥＩ生成モジュール２０２２は、ステレオビデオフォーマットシグナリングに基づく情報が２Ｄを示す情報である場合、フレーム格納配置ＳＥＩに２Ｄを示す情報を記録してもよい。

第１の実施形態によれば、MPEG-2 Videoの映像信号がH.264 Videoの映像信号へトランスコードされても、２Ｄ／３Ｄの識別情報は消失することなくH.264 Videoの映像信号に継承される。したがって、映像記録再生装置１は、フレーム格納配置ＳＥＩに記録された２Ｄ／３Ｄの識別情報に基づいて、ユーザ操作を要することなくH.264 Videoの映像信号に基づく画像を２Ｄまたは３Ｄの適切な方式で自動で映像表示装置２に表示制御できる。

次に第２の実施形態について説明する。図９は、第２の実施形態に係るトランスコーダ３０の構成を示すブロック図である。映像記録再生装置１の構成は第１の実施形態と同様なので説明を省略する。第２の実施形態は、MPEG-4 AVC(H.264 Video)（第２の符号化方式）の映像信号に基づく画像をH.264 Video（第２の符号化方式）の映像信号に基づく画像に変換すると共に、MPEG-4 AVCの映像信号に含まれる２Ｄ／３Ｄの識別情報をH.264 Videoの映像信号にも承継させる例である。つまり、第2の実施形態は、ＣＳ放送またはＣＡＴＶなどで放送されているMPEG-4 AVCの映像信号をトランスコードする例である。MPEG-4 AVCの映像信号は、図8に示す映像ストリームの構成を含む。

トランスコーダ３０は、デコーダ３０１、エンコーダ３０２を備える。デコーダ３０１は、画像復号モジュール３０１１、ＧＯＰ構成検出モジュール３０１２、ＳＥＩ検出モジュール３０１３を備える。画像復号モジュール３０１１は、MPEG-4 AVCの映像信号に基づく画像を元の画像に復号する。ＧＯＰ構成検出モジュール３０１２は、MPEG-4 AVCの映像信号の映像ストリームからＧＯＰの構成情報を検出する。ＳＥＩ検出モジュール３０１３（検出手段）は、MPEG-4 AVCの映像信号の各画像の映像ストリームに含まれるフレーム格納配置ＳＥＩ部分を監視する。ＳＥＩ検出モジュール３０１３は、画像のフレーム格納配置ＳＥＩに記録された２Ｄ／３Ｄの識別情報に基づいて、当該画像が２Ｄであるか３Ｄであるかを検出する。ＳＥＩ検出モジュール３０１３は、当該画像が３Ｄの場合、３Ｄを示す情報をエンコーダ３０２に出力する。なお、ＳＥＩ検出モジュール３０１３は、当該画像が２Ｄの場合も、２Ｄを示す情報をエンコーダ３０２に出力してもよい。

エンコーダ３０２は、画像符号モジュール３０２１、ＳＥＩ生成モジュール３０２２を備える。画像符号モジュール３０２１は、復号された画像をH.264 Videoの画像に符号化する。画像符号モジュール３０２１は、H.264 Videoの画像を出力画像として出力する。ＳＥＩ生成モジュール３０２２は、ＳＥＩ生成モジュール２０２２と同様に、当該画像のフレーム格納配置ＳＥＩに３Ｄを示す情報及びその方式を示す情報を記録する。なお、ＳＥＩ生成モジュール３０２２は、ＳＥＩ検出モジュール３０１３が２Ｄを示す情報を検出した場合、フレーム格納配置ＳＥＩに２Ｄを示す情報を記録してもよい。

第２の実施形態によれば、MPEG-4 AVCの映像信号がH.264 Videoの映像信号へトランスコードされても、２Ｄ／３Ｄの識別情報は消失することなくH.264 Videoの映像信号に継承される。

次に第３の実施形態について説明する。図１０は、第３の実施形態に係るトランスコーダ４０の構成を示すブロック図である。映像記録再生装置１の構成は第１の実施形態と同様なので説明を省略する。第３の実施形態は、MPEG-2 Video（MPEG-4 AVCであってもよい）の映像信号に基づく画像を判別することで、H.264 Videoの映像信号に基づく画像に変換すると共に、２Ｄ／３Ｄの識別情報をH.264 Videoの映像信号に挿入する例である。

トランスコーダ４０は、デコーダ４０１、エンコーダ４０２を備える。デコーダ４０１は、画像復号モジュール４０１１、ＧＯＰ構成検出モジュール４０１２、特徴検出モジュール４０１３を備える。画像復号モジュール４０１１は、MPEG-2 Videoの映像信号に基づく画像を元の画像に復号する。ＧＯＰ構成検出モジュール４０１２は、MPEG-2 Videoの映像信号からＧＯＰの構成情報を検出する。

特徴検出モジュール４０１３（検出手段）は、MPEG-2 Videoの映像信号の各画像を監視する。特徴検出モジュール４０１３は、１画像を構成する左目用画像と右目用画像がほぼ同じか否かを検出する。特徴検出モジュール４０１３は、左目用画像と右目用画像が所定の確率以上一致すると検出した場合、当該画像がサイドバイサイド方式の３Ｄであると検出する。なお、特徴検出モジュール４０１３による１画像を構成する左目用画像と右目用画像の比較方法は、限定されない。特徴検出モジュール４０１３は、当該画像がサイドバイサイド方式の３Ｄであると判断した場合、サイドバイサイド方式の３Ｄを示す情報をエンコーダ４０２に出力する。なお、特徴検出モジュール４０１３は、当該画像が２Ｄの場合も、２Ｄを示す情報をエンコーダ４０２に出力してもよい。

エンコーダ４０２は、画像符号モジュール４０２１、ＳＥＩ生成モジュール４０２２を備える。画像符号モジュール４０２１は、復号された画像をH.264 Videoの画像に符号化する。画像符号モジュール４０２１は、H.264 Videoの画像を出力画像として出力する。ＳＥＩ生成モジュール４０２２は、ＳＥＩ生成モジュール２０２２と同様に、当該画像のフレーム格納配置ＳＥＩに３Ｄを示す情報及びその方式を示す情報を記録する。なお、ＳＥＩ生成モジュール３０２２は、特徴検出モジュール４０１３が２Ｄを示す情報を検出した場合、フレーム格納配置ＳＥＩに２Ｄを示す情報を記録してもよい。

第３の実施形態によれば、MPEG-2 Videoにステレオビデオフォーマットシグナリングが定義されていない場合であっても、トランスコーダ４０が第１または第２の実施形態のようなユーザデータ検出モジュール２０１３またはＳＥＩ検出モジュール３０１３を備えない場合であっても、MPEG-2 Videoの映像信号を２Ｄ／３Ｄの識別情報を付加したH.264 Videoの映像信号に変換できる。

次に第４の実施形態について説明する。図１１は、第４の実施形態に係るトランスコーダ５０の構成を示すブロック図である。映像記録再生装置１の構成は第１の実施形態と同様なので説明を省略する。第４の実施形態は、３Ｄの画像を２Ｄの画像に、または、２Ｄの画像を３Ｄに変換すると共に、２Ｄ／３Ｄの識別情報をH.264 Videoの映像信号に挿入する例である。

トランスコーダ５０は、デコーダ５０１、エンコーダ５０２を備える。デコーダ５０１は、画像復号モジュール５０１１、ＧＯＰ構成検出モジュール５０１２、ユーザデータ検出モジュール５０１３を備える。画像復号モジュール５０１１、ＧＯＰ構成検出モジュール５０１２、ユーザデータ検出モジュール５０１３は、第１の実施形態の画像復号モジュール２０１１、ＧＯＰ構成検出モジュール２０１２、ユーザデータ検出モジュール２０１３と同様の構成である。

エンコーダ５０２１は、画像符号モジュール５０２１、ＳＥＩ生成モジュール５０２２を備える。画像符号モジュール５０２１（符号手段）は、２Ｄ／３Ｄ変換モジュール５０２１ａ、３Ｄ／２Ｄ変換モジュール５０２１ｂを備える。２Ｄ／３Ｄ変換モジュール５０２１ａは、２Ｄの画像を３Ｄの画像に変換する。３Ｄ／２Ｄ変換モジュール５０２１ｂは、３Ｄの画像を２Ｄの画像に変換する。つまり、画像符号モジュール５０２１は、復号された画像を適応的に２Ｄの画像または３Ｄの画像に変換して、H.264 Videoの画像に符号化する。

例えば、画像符号モジュール５０２１は、ユーザデータ検出モジュール２０３の検出に基づいて、入力画像が既存の設備の映像表示装置２では表示できない方式の３Ｄの画像と判断した場合、２Ｄの画像に変換すると判断する。２Ｄ／３Ｄ変換モジュール５０２１ａは、２Ｄの画像を左目用画像及び右目用画像にサイズを縮小し、１画像に結合することで、２Ｄの画像をサイドバイサイド方式の３Ｄの画像に擬似的に変換する。なお、２Ｄ画像から３Ｄ画像への変換方法は、特に限定されない。

例えば、画像符号モジュール５０２１は、ユーザデータ検出モジュール２０３の検出に基づいて、入力画像が２Ｄの画像と判断した場合、３Ｄの画像に変換すると判断する。３Ｄ／２Ｄ変換モジュール５０２１ｂは、１画像を構成する左目用画像または右目用画像のいずれかのサイズを倍に拡大し、１画面を構成することで、サイドバイサイド方式の３Ｄの画像を２Ｄの画像に擬似的に変換する。なお、３Ｄ画像から２Ｄ画像への変換方法は、特に限定されない。

ＳＥＩ生成モジュール５０２２は、ユーザデータ検出モジュール５０１３が２Ｄを示す情報を検出したとしても、画像符号モジュール５０２１が２Ｄ画像を３Ｄ画像に変換した場合、フォーマット格納配置ＳＥＩに３Ｄを示す情報を記録する。ＳＥＩ生成モジュール５０２２は、ユーザデータ検出モジュール５０１３が３Ｄを示す情報を検出したとしても、画像符号モジュール５０２１が３Ｄ画像を２Ｄ画像に変換した場合、フォーマット格納配置ＳＥＩに２Ｄを示す情報を記録する。

なお、デコーダ５０１がユーザデータ検出モジュール５０１３の代わりにＳＥＩ検出モジュール３０１３と同様の構成を備えていれば、デコーダ５０１は、MPEG-4 AVCの映像信号に含まれる２Ｄ／３Ｄの識別情報を検出できる。したがって、画像符号化モジュール５０２１は、この２Ｄ／３Ｄの識別情報に基づいて、画像を２Ｄから３Ｄ、３Ｄから２Ｄへ変換できる。

第４の実施形態によれば、既存の設備の映像表示装置２では表示できない方式の３Ｄの画像であっても、３Ｄの画像を２Ｄの画像に自動で変換することで、特殊な設備を有さないユーザの利便性が向上する。また、２Ｄ画像を３Ｄの画像に擬似的に自動で変換することで、ユーザの利便性が向上する。なお、これらを組み合わせて、既存の設備の映像表示装置２では表示できない方式の３Ｄの画像をサイドバイサイド方式などの３Ｄの画像に変換することもできる。

なお、本実施形態は、MPEG2 Video（またはMPEG-4 AVC）の映像信号に基づく画像をH.264 Videoの画像に変換する例について説明したが、これらの符号化方式は一例である。符号化方式は、H.265などの次世代規格であってもよい。つまり、本実施形態は、第１の符号化方式で符号化された映像信号に基づく画像を第２の符号化方式で符号化された画像に変換する構成であれば適用できる。

なお、本実施形態は、電子シャッター式メガネを用いて視聴する３Ｄの方式であっても、裸眼で視聴する３Ｄの方式であっても適用できる。なお、本実施形態は、映像記録再生装置１を一例として説明したが、映像信号に基づく映像を表示する映像表示装置２を一体として備えたテレビジョン受信機であっても、セットトップボックスであっても適用できる。なお、上記したモジュールとは、ハードウェアで実現するものであっても良いし、ＣＰＵ等を使ってソフトウェアで実現するものであってもよい。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１…映像記録再生装置、２０…トランスコーダ、２０１…デコーダ、３０１…エンコーダ、２０１１…画像復号モジュール、２０１２…ＧＯＰ構成検出モジュール、２０１３…ユーザデータ検出モジュール、２０２１…画像符号モジュール、２０２２…ＳＥＩ生成モジュール、３０１３…ＳＥＩ検出モジュール、４０１３…特徴検出モジュール、５０２１ａ…２Ｄ／３Ｄ変換モジュール、５０２１ｂ…３Ｄ／２Ｄ変換モジュール。

Claims

２Ｄ画像か３Ｄ画像かを示す情報を含み、MPEG2 Videoで符号化された第１の映像信号を復号する復号手段と、
前記第１の映像信号内のUser dataに記載された２Ｄ画像か３Ｄ画像かを示す情報をピクチャ単位で抽出し判定することで、前記第１の映像信号に基づく画像が２Ｄ画像か３Ｄ画像かをピクチャ単位で検出する検出手段と、
前記第１の映像信号をMPEG-4 AVCで第２の映像信号に符号化する符号手段と、
前記検出手段による検出に基づいて、前記第２の映像信号に記録する２Ｄ画像か３Ｄ画像かを示す情報をピクチャ単位で生成し、前記第２の映像信号に含まれるピクチャ毎のＳＥＩ(Supplemental Enhancement Information)に、生成した情報を記録する生成手段と、
を備える信号処理装置。
前記検出手段が前記第１の映像信号に基づく画像が３Ｄ画像であると検出した場合、前記生成手段は、３Ｄ画像を示す情報を生成する請求項１の信号処理装置。
前記検出手段は、前記第１の映像信号に基づく左目用画像と右目用画像が所定の確率以上で一致するか否かを検出する請求項１の信号処理装置。
前記検出手段が前記所定の確率以上で一致すると検出した場合、前記符号手段は、３Ｄ画像を示す情報を生成する請求項３の信号処理装置。
前記検出手段が前記第１の映像信号に基づく画像が２Ｄ画像であると検出した場合、前記符号手段は、前記第２の映像信号に基づく画像を３Ｄ画像に変換する請求項１の信号処理装置。
前記生成手段は、３Ｄ画像を示す情報を生成する請求項５の信号処理装置。
前記検出手段が前記第１の映像信号に基づく画像が３Ｄ画像であると検出した場合、前記符号手段は、前記第２の映像信号に基づく画像を２Ｄ画像に変換する請求項１の信号処理装置。
前記符号手段は、前記第１の映像信号に基づく右眼用画像または左眼用画像のいずれかを倍の大きさに拡張して前記第２の映像信号に基づく画像に変換する請求項７の信号処理装置。
前記生成手段は、２Ｄ画像を示す情報を生成する請求項７の信号処理装置。
前記第２の映像信号に基づく画像を表示する表示手段を備える請求項１の信号処理装置。
２Ｄ画像か３Ｄ画像かを示す情報を含み、MPEG2 Videoで符号化された第１の映像信号を復号し、
前記第１の映像信号内のUser dataに記載された２Ｄ画像か３Ｄ画像かを示す情報をピクチャ単位で抽出し判定することで、前記第１の映像信号に基づく画像が２Ｄ画像か３Ｄ画像かをピクチャ単位で検出し、
前記第１の映像信号をMPEG-4 AVCで第２の映像信号に符号化し、
前記検出に基づいて、前記第２の映像信号に記録する２Ｄ画像か３Ｄ画像かを示す情報をピクチャ単位で生成し、前記第２の映像信号に含まれるピクチャ毎のＳＥＩ(Supplemental Enhancement Information)に、生成した情報を記録する、
信号処理方法。
２Ｄ画像か３Ｄ画像かを示す情報を含み、MPEG2 Videoで符号化された第１の映像信号を復号する復号手段と、
前記第１の映像信号内のUser dataに記載された２Ｄ画像か３Ｄ画像かを示す情報をピクチャ単位で抽出し判定することで、前記第１の映像信号に基づく画像が２Ｄ画像か３Ｄ画像かをピクチャ単位で検出する検出手段と、
前記第１の映像信号をMPEG-4 AVCで第２の映像信号に符号化する符号手段と、
前記検出手段による検出に基づいて、前記第２の映像信号に記録する２Ｄ画像か３Ｄ画像かを示す情報をピクチャ単位で生成し、前記第２の映像信号に含まれるピクチャ毎のＳＥＩ(Supplemental Enhancement Information)に、生成した情報を記録する生成手段と、
前記ＳＥＩに記録された情報に基づいて、前記第２の映像信号を再生処理する処理手段と、
を備える再生装置。