JP2006325090A

JP2006325090A - 映像処理装置、映像処理方法

Info

Publication number: JP2006325090A
Application number: JP2005148017A
Authority: JP
Inventors: Koichi Matsuda; 晃一松田
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2005-05-20
Filing date: 2005-05-20
Publication date: 2006-11-30

Abstract

【課題】タイムシフト視聴であっても視聴者の見る日時に応じて適切な情報を視聴者に提供できるようにする。
【解決手段】
例えば放送番組としてのストリーム映像信号に、最新情報を取得できる外部情報源のアドレス等の情報を埋め込んでおき、当該ストリーム映像信号を表示装置部で表示させる際には、その埋め込まれた情報（抽出情報）に基づいて取得した最新の情報等の提示情報を、ストリーム映像信号とともに表示させる。これにより、視聴者が実際に視聴する時点での、ストリーム映像信号に関する適切な情報を視聴者に提示できるようにする。
【選択図】図６

Description

本発明はテレビジョン放送等の受信映像や、再生映像についての処理を行う映像処理装置、映像処理方法に関する。

特開平９−４４９３２号公報

今日、さまざまな情報が放送波などのストリーム型データを介して伝えられ、リアルタイムで視聴されたり、ビデオレコーダなどの記録装置を用いて録画され、再生されて視聴されてる。特にテレビジョン放送番組では、多様な番組形態により視聴者が知りたい情報を提供することが行われる。
視聴者は、リアルタイムでテレビジョン放送されている情報番組を見たり、或いはビデオレコーダに一旦録画した情報番組を再生させて見ることで、番組内で紹介された情報を知ることができる。

ところでビデオレコーダの普及により、テレビジョン放送の放送時間ではなく、放送を録画しておき、自分の都合のよい時間に視聴するといういわゆる「タイムシフト」という概念に基づく視聴スタイルが定着している。このため、テレビジョン放送番組が、実際の放送時よりも後の時点で視聴されるという状況が多くなっている。特に放送から１ヶ月、２ヶ月など、かなり時間を経てから視聴されることも珍しくない。

放送される番組には、当然のことながら番組の放送時点で有効である情報が盛り込まれている。例えば店舗の紹介番組での特売情報やキャンペーン情報、或いは各種イベント情報などである。また、番組の合間に放送されるＣＭ（コマーシャル）もそのような放送時に有効な情報のひとつである。
これらの情報は、番組放送時に有効であることが想定された情報であるが、タイムシフト視聴として、ビデオレコーダで録画されて、しばらく時間がたった後で視聴した場合には、有効でなくなっている場合があった。例えば或る店舗を紹介した番組であったものが、タイムシフト視聴時にはその店舗が移転してしまっているような場合である。

このような状況は、番組の情報の価値を低くするだけでなく、視聴者に対して不適切な情報提示となってしまう。また番組にＣＭを提供しているスポンサーにとっても、番組価値の低下は好ましくない。さらには、ＣＭ自体が古い情報を視聴者に提示してしまうことは当然都合が悪い。
また、録画した番組を見る視聴者にとっては、番組で見た情報がその時点でも有効であるかどうかを知るには、電話やインターネットなどを駆使して調べる必要があり、非常に面倒であった。

そこで本発明は、視聴者の見る日時に応じて、つまり放送時点であってもタイムシフト視聴時点であっても、適切な情報を視聴者に提供できるようにすることを目的とする。

本発明の映像処理装置は、ストリーム映像信号に対する映像処理を行い、表示装置部に出力して表示させる映像信号処理手段と、上記ストリーム映像信号から、該ストリーム映像信号に埋め込まれた情報を抽出する抽出手段と、上記抽出手段で抽出された抽出情報に基づいて外部情報源と通信を行い、上記ストリーム映像信号に関連する提示情報を取得する提示情報取得手段と、上記表示装置部において上記ストリーム映像信号による映像の表示中に、上記提示情報取得手段で取得された提示情報に基づく映像が表示されるように処理する提示情報処理手段とを備える。
また上記提示情報処理手段は、一定時間、もしくは上記抽出情報内の時間指定情報に示された時間、上記提示情報に基づく映像が上記ストリーム映像信号による映像の表示中に表示されるように処理する。
また記録媒体に対して映像コンテンツの記録再生を行う記録再生手段をさらに備え、上記ストリーム映像信号は、上記記録再生手段によって上記記録媒体から再生された映像コンテンツのストリーム映像信号である。

また上記抽出手段による上記抽出情報の抽出処理と、上記提示情報取得手段による上記提示情報の取得処理は、上記映像信号処理手段が、上記ストリーム映像信号を上記表示装置部に出力して表示させているときに実行される。
また上記抽出手段による上記抽出情報の抽出処理と、上記提示情報取得手段による上記提示情報の取得処理は、上記記録再生手段によって再生された上記ストリーム映像信号について、上記映像信号処理手段が上記表示装置部に出力して表示させているときに実行される。
或いは、上記記録再生手段が、上記記録媒体に映像コンテンツを記録している際に、該映像コンテンツのストリーム映像信号に対して、上記抽出手段による上記抽出情報の抽出処理が実行される。
或いは、上記映像信号処理手段が上記表示装置部に対するストリーム映像信号の出力を実行していないときに、上記記録再生手段が、上記記録媒体に記録された映像コンテンツを再生し、該再生された映像コンテンツのストリーム映像信号に対して、上記抽出手段による上記抽出情報の抽出処理が実行される。
また、上記記録再生手段によって再生された上記ストリーム映像信号を、上記映像信号処理手段が上記表示装置部に出力して表示させているときに、予め上記抽出手段によって該ストリーム映像信号について抽出されていた抽出情報に基づいて、上記提示情報取得手段による上記提示情報の取得処理が実行される。
或いは、上記映像信号処理手段が上記表示装置部に対するストリーム映像信号の出力を実行していないときに、上記提示情報取得手段による上記提示情報の取得処理が、上記記録媒体に記録されている映像コンテンツのストリーム映像信号について上記抽出手段によって抽出されていた抽出情報に基づいて実行される。

本発明の映像処理方法は、ストリーム映像信号から、該ストリーム映像信号に埋め込まれた情報を抽出する抽出ステップと、上記抽出ステップで抽出された抽出情報に基づいて外部情報源と通信を行い、上記ストリーム映像信号に関連する提示情報を取得する提示情報取得ステップと、上記ストリーム映像信号による映像の表示中に、上記提示情報取得手段で取得された提示情報に基づく映像が表示されるように処理する提示情報処理ステップとを備える。

以上の本発明は、例えばテレビジョンチューナ装置、映像再生装置、情報処理装置、例えばホームネットワークなどのネットワーク上の情報処理装置や映像機器など、ユーザーに対して表示するストリーム映像信号を扱う装置において適用できる映像処理装置、映像処理方法である。ストリーム映像信号とは、例えばテレビジョン放送による映像信号であったり、録画機器で録画された後に再生された映像信号、或いはＤＶＤ（Digital Versatile Disc）、ブルーレイディスク（Blu-Ray Disc）などのパッケージメディアから再生された映像信号などを指す。
放送番組などのストリーム映像信号は、リアルタイムで、或いは一旦録画された後に再生されるなどして、テレビジョンモニタ等の表示装置部において映像として表示される。視聴者はその映像信号内容として各種の情報を知ることができるが、本発明では、視聴者が、その視聴の時点で適切な情報が提示されるようにする。つまり、ストリーム映像信号には、例えば最新情報を取得できる外部情報源のアドレス等の情報を埋め込んでおき、当該ストリーム映像信号を表示装置部で表示させる際には、その埋め込まれた情報（抽出情報）に基づいて取得した最新の情報等の提示情報を、ストリーム映像信号とともに表示させる。これにより、視聴者が実際に視聴する時点での、ストリーム映像信号に関する適切な情報を視聴者に提示できる。

本発明によれば、ストリーム映像信号から抽出された抽出情報に基づいて、視聴する時点で有効な提示情報が取得され、ストリーム映像信号とともに表示されるようにしている。このため、視聴者が視聴する時点での適切な情報提示を行うことができ、例えば放送番組のタイムシフト視聴などの状況にも適切に対応できる。例えば放送番組内容に関しての最新の情報や、或いは放送内容としての情報が有効でなくなっていることなどを視聴者に伝えることができる。
このように、視聴者の情報誤認をなくしたり、或いは視聴者に新たな情報を提示することで、タイムシフト視聴における映像コンテンツの価値の低下がなくなる。また視聴者が煩雑な情報確認作業を行う必要もない。

また情報抽出手段による情報抽出処理については、映像コンテンツの記録時や、記録後に映像出力を行っていない時点（ユーザーが再生を指示していない時点）において行うことで、前もって抽出情報を確認しておくことができ、再生時の処理負担を軽減できる。
また提示情報取得手段による提示情報の取得処理についても、前もって実行するようにすれば、再生時にの処理負担を軽減できる。

以下、本発明の実施の形態を次の順序で説明する。
［１．装置構成］
［２．提示情報を加えた表示例］
［３．処理例Ｉ］
［４．処理例II］
［５．処理例III］
［６．変形例］

［１．装置構成］

図１に本発明の映像処理装置として機能する装置の構成例を示す。この装置はテレビジョン放送のチューナを内蔵した録画再生機器の例であり、説明上は、ビデオレコーダ１と称することとする。
ビデオレコーダ１は、表示装置２と接続され、表示装置２に対して映像信号を供給して放送映像や再生映像を表示させる。表示装置２は、ＣＲＴモニタ装置、液晶パネル表示装置、或いはプラズマディスプレイパネル表示装置など、所定の表示デバイスによって構成される装置である。
なお、ここではビデオレコーダ１は表示装置２と別体の機器としているが、ビデオレコーダ１は表示装置２としての装置内に内蔵されるものであっても良い。
また、表示装置２は、映像出力だけでなく、映像と共に音声出力も行う。即ちビデオレコーダ１は映像信号と共に映像に対応する音声信号も表示装置２に供給するが、図１では音声信号系は省略してある。

ビデオレコーダ１において、チューナ部１２はアンテナ１３で受信された放送波についての受信復調処理を行い、放送番組としてのストリーム映像信号を得る。
なお、チューナ部１２が対応する放送方式は各種考えられ、地上波デジタル放送、地上波アナログ放送、ＢＳ，ＣＳ等のデジタル又はアナログ衛星放送などが考えられる。またチューナ部１２は、必ずしもアンテナ１３で受信する放送波を復調する形態ではなく、いわゆるケーブルテレビ放送や、インターネット等のネットワークを介して供給されるストリーミング放送に対応するチューナ又はデコーダとしてもよい。
またチューナ部１２では、放送信号に重畳されているＥＰＧ（Electronic Programming Guide：電子番組ガイド）データの分離も行われる。分離抽出されたＥＰＧデータはＥＰＧ抽出／記憶部２１に取り込まれ、ＥＰＧデータが構築されて記憶される。

記録再生処理部１７，ＨＤＤ（Hard Disc Drive）１６は、放送番組の記録（録画）及び再生を行う。即ち録画を行う場合は、チューナ部１２で得られたストリーム映像信号に対して、記録再生処理部１７で所定の記録用の圧縮処理やエンコード処理を行い、ＨＤＤ１６に供給する。ＨＤＤ１６は供給されたストリーム映像信号を記録していく。
再生時には、ＨＤＤ１６で読み出された映像データについて記録再生処理部１７でデコード処理や圧縮処理に対する伸長処理を行い、元のストリーム映像信号の形態で出力する。

スイッチ１４は、リアルタイム視聴と再生視聴の際に切り換えられる。放送番組のリアルタイム視聴が行われる場合、スイッチ１４はＴA端子が接続される。これによりチューナ部１２で受信／復調されたストリーム映像信号が映像信号処理部１５に供給される。またＨＤＤ１６に録画された放送番組を再生する場合は、スイッチ１４はＴB端子が接続される。これにより記録再生処理部１７で再生処理されたストリーム映像信号が映像信号処理部１５に供給される。

映像信号処理部１５は、表示装置２に表示させる映像信号に関する処理を行う。
例えばチューナ部１２又は記録再生処理部１７からスイッチ１４を介して供給されたストリーム映像信号は、映像信号処理部１５で必要な信号処理が施され、例えばＮＴＳＣ方式等の所定の方式の映像信号に変換され表示装置２に出力される。もちろんＰＡＬ方式、ＳＥＣＡＭ方式などの場合もある。さらに各方式における信号形態におけるコンポジットビデオ信号、Ｙ／Ｃ信号、ＲＧＢ信号など、出力信号形態は多様である。

ＱＲ検出部２０は、ストリーム映像信号にＱＲコードが付加されている場合に、そのＱＲコードにより記録された情報を検出する。
ＱＲ検出部２０で検出されたＱＲコードは、抽出情報デコード部２９でデコード処理され、ＱＲコードの形態でストリーム映像信号に埋め込まれていた情報が抽出される。抽出された情報はコントローラ１１に供給される。
説明上、ストリーム映像信号においてＱＲコード等の形態で埋め込まれ、それから抽出された情報を。説明上「抽出情報」と呼ぶ。
なお、ＱＲコードとは、二次元バーコードの一種であり、ここでは映像データに含まれている情報の例としてあげている。映像データにデータを埋め込む手法としてはＱＲコードに代表される二次元バーコードを映像として乗せる方式や、通常のバーコードを乗せる方式、また例えばアナログ映像信号のブランキング期間に情報信号を乗せる方式、さらにデジタル放送において映像データとともに付加的な情報を放送する方式など多様である。これらの一例として、ここではＱＲコードを挙げ、これに対応してＱＲ検出部２０及び抽出情報デコード部２９を設けるようにしているものである。
抽出情報としては、ＱＲコード以外の形態でストリーム映像信号に埋め込まれているものであってもよい。

ＯＳＤ（On Screen Display）処理部２８は、コントローラ１１の制御に基づいて表示用のイメージデータを発生する。ＯＳＤ処理部２８によって各種のキャラクタ、アイコン等のイメージデータが発生された場合、それらのイメージデータが映像信号処理部１５で映像信号に重畳されることで、表示装置２にイメージデータの表示が行われる。
ＯＳＤ処理部２８によって発生させるイメージデータは、例えば各種の操作メニュー画面、操作用のアイコン等のＧＵＩ画像、メッセージ、チャンネルや音量表示、予約登録のための画像、予約登録確認のための画像、さらには後述する提示情報に基づく画像などである。

ネットワーク通信部２６は、ネットワーク４を介して外部の情報サーバから、提示情報を取得する通信を行う。提示情報とは、ストリーム映像信号による映像表示を実行する際に、そのストリーム映像信号とともに表示させて視聴者に提示する情報である。
ネットワーク４は、インターネット等の公衆ネットワークでもよいし、提示情報を取得のための専用の通信回線であってもよい。情報サーバ５も同様に、一般のインターネット上のウェブサイトなどでもよいし、専用の提示情報サーバとされてもよい。
情報サーバ５は、例えば放送局などが運営し、放送番組についての最新情報等を提供する。放送局等は、放送時点や、その後にタイムシフト視聴される時点を考慮して、放送番組とともに視聴者に提示したい情報を情報サーバ５に蓄積させ、また必要に応じて蓄積させる情報内容を更新していく。

情報保持部３０は、コントローラ１１の処理に基づいて、抽出情報デコード部２９で得られた抽出情報や、ネットワーク通信部２６を介して取得された提示情報を記憶する部位である。
情報保持部３０は例えばフラッシュメモリ、或いは電源バックアップされたＳ−ＲＡＭなどで構成されてもよいし、メモリカード、光ディスク、光磁気ディスク、ＨＤＤなどの記録メディア及びそれらに対応する記録再生ドライブ機構によって構成されてもよい。
また本例のようにビデオレコーダ１として録画動作のためのＨＤＤ１６を有する場合、ＨＤＤ１６を情報保持部３０として兼用し、情報保持部３０を独立に設けない場合もあり得る。もちろん放送番組の録画用に、ＨＤＤ１６に代えて、光ディスク、光磁気ディスク、磁気テープなどを記録メディアとする機器の場合に、それらを情報保持部３０と兼用させても良い。

コントローラ１１はＣＰＵ（Central Processing Unit ）を備えたマイクロコンピュータにより形成され、ビデオレコーダ１の全体の制御を行う。即ちチューナ部１２での選局動作や記録再生処理部１７での録画又は再生のための処理の指示、ＨＤＤ１６の動作制御、スイッチ１４の切換制御、映像信号処理部１５での映像信号処理やＯＳＤ処理部２８でのＯＳＤ画像の生成指示、ネットワーク通信部２６による通信動作の指示、ＥＰＧ抽出／記憶部２１でのＥＰＧデータ抽出及び記憶動作の制御やＥＰＧデータの読込、情報保持部３０に対する情報の記憶／読出制御などを、ユーザーの操作や動作プログラムに従って行う。
ＲＡＭ２２、ＲＯＭ２３、フラッシュメモリ２４はコントローラ１１がアクセスするメモリ領域として示している。
ＲＯＭ２３には、コントローラ１０（ＣＰＵ）を動作させるプラットフォームソフトウェアモジュールや起動モジュール等が記憶されている。
ＲＡＭ２２は、ＲＯＭ２３に記憶されている起動モジュールやＯＳ等のプラットフォームソフトウェアプログラム、アプリケーションプログラム、または、その実行において適宜変化するパラメータを一時格納する。またコントローラ１１の各種演算処理のためのワーク領域として用いられる。
フラッシュメモリ２４は、例えば各種処理係数や履歴情報等、電源オフの際にも消失させない情報の記憶に用いられる。

ユーザーの操作のための操作入力手段としてはパネル操作部２５やリモートコマンダー３等が想定される。
パネル操作部２５は、ビデオレコーダ１の筐体上に設けられた操作キーや操作ダイヤル等の操作子であり、ユーザーはパネル操作部２５における操作子を操作して各種の指示や入力を行うことができる。コントローラ１１はパネル操作部２５による操作入力情報を検出して、所定の制御を行い、該ビデオレコーダ１にユーザーが指示した動作を実行させる。
同様の操作はリモートコマンダー３によっても可能である。ユーザーがリモートコマンダー３を操作することで、例えば赤外線信号として操作信号が出力される。この赤外線操作信号は受光部２７で受光され、電気信号に変換されてコントローラ１１に伝えられる。もちろんリモートコマンダー３は赤外線方式のみでなく、例えば電波を用いたものでもよい。
これらパネル操作部２５やリモートコマンダー３によるユーザーの操作としては、通常のチューナ付きビデオレコーダ１に対する操作として、例えば選局、録画、録画予約、再生、サーチ、再生停止、一時停止などが行われる。
なお、キーボードやマウス等の外部入力機器の接続端子が設けられ、その端子に外部入力機器を接続することで、外部入力機器による操作情報がコントローラ１１に伝えられるようにしてもよい。

図１のビデオレコーダ１は以上の構成となるが、この構成例は以下説明する動作を行うための構成の一例にすぎない。
またコントローラ１１は、上述した各種制御を行うためのソフトウエア機能が搭載されるが、後述する抽出情報に基づく提示情報の取得や表示制御の動作のため、図２に示すような機能ブロックがソフトウエアにより設けられることになる。図２は本実施の形態の後述する特徴的な動作のための要部構成を示しているが、図示するようにコントローラ１１には、情報内容判断機能４１、情報提示制御機能４２、ネットワーク処理機能４３、タイマ機能４４が設けられる。

情報内容判断機能４１は、抽出情報デコード部２９から供給される抽出情報について、その情報内容を判断する。
本例ではストリーム映像信号にＱＲコードが含まれる例としているが、例えばＱＲコード等によりストリーム映像信号に埋め込まれる抽出情報は、放送局側でストリーム映像信号に付加する情報である。この抽出情報の情報内容については放送局側の意図により多様に考えられる。
抽出情報の内容は、例えば放送する映像に関するものとして、出演者に関する情報でも良いし、店舗の紹介番組であれば店舗の住所等でも良い。或いは特に番組内容とは関連しないものである場合もあり得る。データ種別も、テキストデータ、画像データ、ＵＲＬ（Uniform Resource Locator）等のアドレスデータ、制御データ等、多様である。
本例では、情報内容判断機能４１は、提示情報の取得や表示制御のために用いるデータが抽出情報に含まれているか否かを判断する。即ち放送局側が、タイムシフト視聴などを想定して、視聴者に常に適切な情報提示を行うことを求めた場合、抽出情報として提示情報の取得や表示制御のために用いるデータを含むようにしてストリーム映像信号を放送するものであり、抽出情報がそのような情報であったか否かを情報内容判断機能４１によって判断するものである。
具体的にはＵＲＬ等のアドレス情報が、番組内容の最新情報を得るための情報源、つまり情報サーバ５との通信を行うための情報となる。また、提示情報の表示制御の情報として表示時間を指定する表示時間情報がある。また、表示制御の情報として画面上での表示位置、輝度、点滅表示などの表示態様等を指定する情報が含まれる場合もある。
情報内容判断機能４１は、抽出情報に提示情報の取得に用いる情報が存在した場合、その情報、例えばＵＲＬの情報をネットワーク処理機能４３に受け渡す。
また情報内容判断機能４１は、抽出情報に提示情報の表示制御に用いる情報が存在した場合、その情報、例えば表示時間情報等を情報提示制御機能４２に受け渡す。
また情報内容判断機能４１は抽出情報に、そのまま画面に表示してよい情報が含まれていた場合、つまり或る抽出情報がそのまま提示方法となる場合、その情報を情報提示制御機能４２に受け渡す。
なお、情報内容判断機能４１による情報の判断は、例えば抽出情報内の各情報に付加されたタグ等を判別することで可能となるようにすればよい。

ネットワーク処理機能４３は、情報内容判断機能４１から転送されてきたＵＲＬ等の情報に基づいて、ネットワーク通信部２６による情報サーバ５との間の通信動作を制御する。即ち情報サーバ５から、その時点での映像内容に関する最新の提示情報を取得するための通信動作を制御する。情報サーバ５から取得した提示情報は、情報提示制御機能４２に受け渡す。情報サーバ５から取得される提示情報としては、テキストデータ、制御データ、静止画データ、動画データなど、その情報種別は多様に考えられる。

情報提示制御機能４２は、提示情報に基づく映像を、ストリーム映像信号とともに表示させる制御を行う。即ち、提示情報として得られた情報に基づいて、ＯＳＤ処理部２８を制御して、提示情報に基づくＯＳＤ表示を実行させる。例えばテキストデータとしての提示情報で示された情報内容を表示装置２においてＯＳＤ表示させる。或いは提示情報が静止画データ、動画データ等であれば、その画像データ自体を映像信号処理部１５に供給して表示装置２で表示させる。この場合、例えば映像信号処理部１５にＰｉｎＰ（Picture in Picture）処理を実行させ、ストリーム映像信号の表示画像内の子画面として提示情報としての画像を表示させてもよいし、画面分割をせずに一時的にストリーム映像信号の映像を中断させて提示情報による映像に切り換えるようにしてもよい。
また情報提示制御機能４２は、抽出情報に含まれていた提示情報の表示制御データに基づいて、提示情報の表示動作を制御する。例えば提示情報を表示する時間は、抽出情報に含まれていた表示時間情報に従う。なお、抽出情報内に表示時間情報が存在しなければ、例えば一定時間、提示情報を表示させるようにすることが考えられる。
また、情報提示制御機能４２は、情報内容判断機能４１で抽出された抽出情報（そのまま表示される抽出情報については、それ自体が提示情報となる）や、ネットワーク処理機能４３によって取得された提示情報について、情報保持部３０に記憶させる処理や、映像再生時に情報保持部３０に記録された提示情報を読み出す処理なども行う。

タイマ機能４４は、情報提示制御機能４２が提示情報に基づく映像の表示時間を制御するために表示継続時間をカウントする。

以上の各機能を備えたコントローラ１１の制御に基づいて、後述する提示情報の表示処理が実現される。
なお、この図１，図２の構成例の場合、本発明請求項に記載した各手段は以下のように対応することになる。
映像信号処理部１５が本発明請求項の映像信号処理手段に相当する。
ＱＲ検出部２０、抽出情報デコード部２９、情報内容判断機能４１が本発明請求項の抽出手段に相当する。
ネットワーク通信部２６、ネットワーク処理機能４３が本発明請求項の提示情報取得手段に相当する。
情報提示制御機能４２、ＯＳＤ２８が本発明請求項の提示情報処理手段に相当する。
記録再生処理部１７，ＨＤＤ１６が本発明請求項の記録再生手段に相当する。

［２．提示情報を加えた表示例］

ストリーム映像信号による映像を表示させている際に、情報サーバ５から取得した提示情報に基づく映像を表示させる表示例を説明する。
まず図３は、放送局が放送する映像コンテンツ、即ち１つの放送番組を模式的に示している。

図３（ａ）は、或る１つの放送番組の構成を示している。この番組は、番組内容としての映像部分と、途中のＣＭで例えば１時間程度の内容が構成されているとする。番組内容としてラーメン屋の紹介が行われるものとする。
そして例えば番組開始からの或る時点ｔ１、ｔ２、ｔ３では、それぞれストリーム映像信号上にＱＲコードが含まれているとする。

時点ｔ１，ｔ２について映像例を挙げて説明する。
例えば番組が開始された後、時点ｔ１におけ番組映像が図４（ａ）のような或るラーメン屋の紹介画面５０であったとする。この場面において、放送局側は映像信号上にはＱＲコード５２を付加して放送しているとしている。また映像上にはラーメン屋の住所や電話番号のテロップ表示５１も含まれている。
この画面のＱＲコード５２には、例えば当該画面５０で紹介されているラーメン屋についての最新情報を保持する外部の情報サーバ５のＵＲＬや、提示情報の表示時間情報が含まれている。

例えばこのような番組を放送時にリアルタイムで視聴するとき、さらには一旦ＨＤＤ１６に録画した後、タイムシフト視聴として後の時点で再生させて視聴するときは、チューナ部１２或いは記録再生処理部１７からのストリーム映像信号が映像信号処理部１５に供給され、表示装置２で表示出力されるわけであるが、例えばこれらの時点で、ＱＲ検出部２０は、映像信号上に付加されているＱＲコードを検出し、抽出情報デコード部２９がＵＲＬや表示時間情報等の抽出情報をデコードすることになる。
コントローラ１１は、図２で説明した機能により、抽出情報として得られたＵＲＬに基づいて情報サーバ５にアクセスを行い、例えば当該ラーメン屋についての最新情報を提示情報として取得できる。
例えば放送しているときにリアルタイムで視聴した場合に、特に情報サーバ５に最新情報が存在せず、コントローラ１１が提示情報を取得できなければ、提示情報に関する表示処理は行われず、表示装置２ではｔ１時点の映像として図４（ａ）のような映像が表示されることになる。

一方、タイムシフト視聴として放送時より時間を経て当該番組が再生された時点においては、同じくコントローラ１１は、抽出情報として得られたＵＲＬに基づいて情報サーバ５にアクセスを行うことになるが、このとき情報サーバ５から、当該ラーメン屋についての最新情報として、店舗移転という提示情報が取得されたとする。
すると、コントローラ１１は、図２で説明した機能により、ＯＳＤ処理部２８に指示して、提示情報に基づく表示を実行させる。例えば図４（ｂ）のように、当該ラーメン屋についての最新の提示情報表示５３として、店舗が移転した旨のメッセージを表示する。この提示情報表示５３は、図３（ａ）に斜線部で示す表示期間ＴＤａ１として示すように、ｔ１時点から所定時間だけ行われる。例えば抽出情報における表示時間情報で指定された時間となる。
即ち、タイムシフト視聴時には、既に住所等の画像５１が無効な情報となっていることを視聴者に提示し、誤認を防ぐことができる。

また、図３（ａ）の番組内のｔ２時点においては、他のラーメン屋が紹介されているとし、このｔ２時点の放送映像は図５（ａ）のようなものであったとする。このｔ２時点の映像にも、ラーメン屋の紹介画像５０上にＱＲコード５２が含まれている。
ここで、放送時或いは再生時において、ＱＲコード５２から検出された抽出情報のＵＲＬによって情報サーバ５と通信を行ったところ、コントローラ１１はその時点の最新情報として、半額キャンペーン実施中という提示情報を取得したとする。すると表示期間ＴＤａ２だけ、放送映像に図５（ｂ）のような提示情報表示５３を実行制御する。
また、さらに後の時点で当該番組の再生が行われたとする。そのときには、情報サーバ５と通信を行ったところ、コントローラ１１はその時点の最新情報として、半額キャンペーン終了という提示情報を取得したとする。するとその場合は、表示期間ＴＤａ２だけ、放送映像に図５（ｃ）のような提示情報表示５３を実行制御する。

時点ｔ３でも、同様にＱＲコードから抽出された抽出情報に基づいて提示情報の取得が行われ、例えば表示時間ＶＤａ３だけ画面上での提示情報表示が行われる。
つまり、リアルタイム視聴時、タイムシフト視聴時に限らず、視聴者が実際に視聴する時点での最新情報を、提示情報表示５３として表示し、視聴者に情報提供することができる。

図３（ｂ）も１つの番組構成例を示しているが、例えばＣＭとしての映像が表示される時点ｔ４，ｔ５においてＱＲコードが含まれている例としている。
この場合、例えば同様にＱＲコードからの抽出情報に基づいて提示情報が取得され、それぞれ時点ｔ４、ｔ５から表示期間ＴＤａ１１、ＴＤａ１２として示す期間、提示情報が画面上に表示される。
例えばＣＭ内容に関する、視聴時点の最新情報が視聴者に提示されることになる。

また図３（ｃ）も１つの番組構成例を示しているが、この場合もＣＭとしての映像が表示される時点ｔ６，ｔ７においてＱＲコードが含まれている例としている。
この場合、ＱＲコードからの抽出情報に基づいて取得された提示情報が実際の動画映像であったとする。
例えばリアルタイムで視聴している際には、提示情報が得られなかったとすれば、その際には元々放送番組内に挿入されたＣＭ映像が表示されるが、タイムシフト視聴時において、提示情報として動画映像が得られた場合、図のように、提示情報自体の動画映像が表示期間ＴＤａ２１、ＴＤａ２２の期間、表示されるようにする。つまり、ＣＭ内容が、タイムシフト視聴時にあわせて差し替えられるような状態であり、視聴者の番組視聴時期に併せてＣＭ内容を変更することができる。

なお、１つの放送番組内のＣＭ映像は、最初から含まないようにし、ＱＲコードのみを番組内のＣＭのタイミングのストリーム映像信号上に乗せておくようにすることも可能である。つまり、リアルタイム視聴時も含めて、ＣＭのタイミングでは、常に情報サーバ５から取得された動画映像が表示されるようにするものである。
このように、放送の形態として、ＣＭをＱＲコードやバーコードだけの内容とし、視聴時に提示情報としてのＣＭ動画映像が表示されるようにすることで、実際のＣＭを含む番組の総放送時間を短くすることができる。放送局側から見れば、総放送時間を短くしてより多くの番組を放送することができたり、或いはタイムシフト視聴時にはリアルタイム視聴時よりもＣＭを多くすることなども可能となる。

［３．処理例Ｉ］

以上の例のように本例のビデオレコーダ１で実行される提示情報の表示のための処理例として、処理例Ｉ、処理例II、処理例IIIをそれぞれ説明していく。なお、以下説明する処理例Ｉ、処理例II、処理例IIIは、コントローラ１１において図２に示した情報内容判断機能４１、情報提示制御機能４２、ネットワーク処理機能４３、タイマ機能４４がそれぞれ機能して実行される処理である。
まず図６で処理例Ｉとしてのコントローラ１１の制御処理を説明する。処理例Ｉは、受信又は再生されたストリーム映像信号を表示出力する際に、同時処理で抽出情報や提示情報の取得を行う例である。なお、図６の処理はＨＤＤ１６に録画された番組の再生時の処理として説明するが、リアルタイム受信時であっても同様である。

図６は、ＨＤＤ１６に録画された映像が読み出され、記録再生処理部１７からストリーム映像信号が映像信号処理部１５に供給され、表示装置２で表示出力されているときに、図２に示したコントローラ１１の各機能で実行される処理である。このときＱＲ検出部２０はストリーム映像信号についてＱＲコードの検出処理を行っており、ＱＲコードが検出されたら、抽出情報デコード部２９でデコード処理が行われ、デコードされた抽出情報がコントローラ１１に供給される。

ステップＦ１０１では、コントローラ１１は、抽出情報デコード部２９から抽出情報が入力されることを監視している。抽出情報が入力されてない期間はステップＦ１０１→Ｆ１０７→Ｆ１０１の処理を経ながら抽出情報の入力を待機する。
抽出情報が入力された場合、コントローラ１１は処理をステップＦ１０１からＦ１０２に進める。ステップＦ１０２では、入力された抽出情報の内容を確認し、提示情報を取得するための情報が含まれているか否かを判断する。例えばＵＲＬとしての情報など、情報サーバ５などの情報源へアクセスするための情報の有無である。
上述したようにＱＲコードによってどのような情報を埋め込むかは放送局側の任意である。従って抽出情報には、本例の提示情報表示に関係のない情報のみが含まれている場合もある。そのような場合はステップＦ１０２→Ｆ１０７→Ｆ１０１と進み、次の抽出情報入力を待機する。

入力された抽出情報にＵＲＬ等の情報源アクセスのための情報が含まれていた場合、コントローラ１１はステップＦ１０２からＦ１０３に進み、ＵＲＬ等の情報を用いてネットワーク通信部２６からの情報サーバ５にアクセスを実行し、情報サーバ５から提示情報を取得する。
提示情報を取得したら、コントローラ１１はステップＦ１０４で、取得した提示情報の表示制御を行う。例えば上述のようにＯＳＤ処理部２８を制御して、ストリーム映像信号による映像上にＯＳＤ表示として提示情報内容に従った表示を実行させる。又は取得した提示情報が動画映像或いは静止画映像等の映像データであれば、ＰｉｎＰ等の画面分割で提示情報映像を表示させたり、或いは番組映像の表示を一時的に中断させて提示情報映像を表示させる。
このステップＦ１０４の映像表示は、ステップＦ１０５で所定の表示時間を経過したと判断するまで行われる。提示情報の表示時間は、抽出情報に表示時間情報が含まれていれば、それに示される時間とする。抽出情報に表示時間情報が含まれていなければ、予め設定された一定時間とすればよい。

表示時間を経過したら、ステップＦ１０５からＦ１０６に進み、提示情報の表示制御を終了させる。
ステップＦ１０７では、ユーザー操作や或いは番組再生完了などでＨＤＤ１６からの再生が終了されたか否かを判断し、終了していなければ、つまり録画した放送番組の再生視聴中であればステップＦ１０１に戻って、次の抽出情報入力を待機する。
なお、リアルタイムの放送視聴中であれば、ステップＦ１０７では、例えばユーザー操作によりチューナ部１２での受信が終了されたか否かを判断すればよい。

以上の処理により、表示装置２において番組の再生映像（又はリアルタイム受信映像）の表示出力中に、取得した提示情報に基づいて、その視聴時点における最新情報等が提示される。
従って、視聴者が視聴する時点での適切な情報提示を行うことができ、例えば放送番組のタイムシフト視聴などの状況にも適切に対応できる。例えば放送番組内容に関しての最新の情報や、或いは放送内容としての情報が有効でなくなっていることなどを視聴者に伝えることができる。
このように、視聴者の情報誤認をなくしたり、或いは視聴者に新たな情報を提示することで、タイムシフト視聴における映像コンテンツの価値の低下がなくなる。また視聴者が煩雑な情報確認作業を行う必要もない。
なお、この図６の処理においてステップＦ１０１，Ｆ１０２は図２の情報内容判断機能４１による処理となる。またステップＦ１０３はネットワーク処理機能４３による処理となる。またステップＦ１０４，Ｆ１０５，Ｆ１０６は情報提示制御機能４２及びタイマ機能４４の処理となる。

［４．処理例II］

続いて、図７、図８，図９で処理例IIとしてのコントローラ１１の制御処理を説明する。
上記処理例Ｉは放送番組の視聴中、つまり放送時や再生時の番組視聴中に、そのストリーム映像信号の表示処理と並行して抽出情報の処理や提示情報の取得処理を行っている。提示情報の取得に関しては、あくまで視聴時の時点の最新の情報として取得するため、図６のような処理が適切なのであるが、コントローラ１１には高速な処理が要求される。つまり番組映像の進行に間に合うように、提示情報を取得し、提示情報の表示制御を行わなくてはならない。
そこで処理例IIとして、時間的な余裕をもって、適切な提示情報を取得し、番組内容に合わせたタイミングで提示情報の表示処理ができるようにする例を説明する。

この処理例IIでは、タイムシフト視聴を前提とし、予めストリーム映像信号から抽出情報を取得して保存しておく。
図７（ａ）は抽出情報の抽出処理を示している。この図７（ａ）の処理は、例えば放送番組のＨＤＤ１６への録画時に行われるようにする。
コントローラ１１は、ステップＦ２０１として、チューナ部１２で受信された放送番組映像のＨＤＤ１６への録画を開始したら、ステップＦ２０２以下の処理を行う。なお、このとき例えばスイッチ１４はＴA端子に接続させ、録画している放送番組のストリーム映像信号がＱＲ検出部２０に供給されるようにし、録画番組についてのＱＲコード検出が可能となるようにする。

ステップＦ２０２では、コントローラ１１は、抽出情報デコード部２９から抽出情報が入力されることを監視している。抽出情報が入力されてない期間はステップＦ２０２→Ｆ２０５→Ｆ２０２の処理を経ながら抽出情報の入力を待機する。
抽出情報が入力された場合、コントローラ１１は処理をステップＦ２０２からＦ２０３に進める。ステップＦ２０３では、入力された抽出情報の内容を確認し、例えばＵＲＬ等の提示情報を取得するための情報が含まれているか否かを判断する。
抽出情報に、本例の提示情報表示に関係のない情報のみが含まれている場合は、ステップＦ２０３→Ｆ２０５→Ｆ２０２と進み、次の抽出情報入力を待機する。

入力された抽出情報にＵＲＬ等の情報源アクセスのための情報が含まれていた場合、コントローラ１１はステップＦ２０３からＦ２０４に進み、その抽出情報を、抽出情報が含まれていた映像信号のフレームナンバと対応させて情報保持部３０に記憶させる。なお、フレームナンバは、当該録画対象の番組のストリーム映像信号における先頭フレームからのナンバとすればよく、例えば録画処理において付与するタイムコード（録画開始フレームを先頭とする時／分／秒／フレームの値）を記録再生処理部１７から受け取って、それをフレームナンバとして用いれば良い。また、ＱＲ検出部２０が入力されるストリーム映像信号の各フレームについてカウントしてフレームナンバを発生させてもよい。
ステップＦ２０４でフレームナンバ及び抽出情報の記憶を行ったら、ステップＦ２０５で録画が終了したか否かを判断し、録画が終了していなければステップＦ２０２に戻って次の抽出情報入力を待機する。

以上の処理を、番組の録画終了まで実行することで、録画終了後の時点では、例えば情報保持部３０に図７（ｂ）のように、当該番組ＡにＱＲコードで付与されていた抽出情報Ｄｄ１，Ｄｄ２・・・Ｄｄ(M)が、そのＱＲコードが付加されたフレームナンバＦＮ１，ＦＮ２・・・ＦＮ(M)と対応づけられて記憶されることになる。これは例えば番組Ａとしての映像信号内に、提示情報の表示処理のためのＱＲコードがＭ箇所付加されていた場合である。

なお、図７（ａ）の処理は放送番組の録画時としたが、録画後に実行されてもよい。例えばユーザーが当該ビデオレコーダ１を使用していないときなどに実行しても良い。その場合、図７（ａ）のステップＦ２０１として、コントローラ１１はＨＤＤ１６に録画された番組についてＱＲコード検出のためのスキャン再生を開始させる。スイッチ１４はＴB端子に接続させ、再生されたストリーム映像信号がＱＲ検出部２０に供給されるようにする。なお、このときは表示装置２で映像表示を行わないため、映像信号処理部１５には何も処理を実行させなくてもよい。
そしてステップＦ２０２、Ｆ２０３、Ｆ２０４の処理で、同様に抽出情報をフレームナンバに対応させて記憶しておく。この処理をスキャン再生が終了されるまで行うことで、同様に図７（ｂ）のような記憶状態を得ることができる。

続いて録画した当該番組Ａを再生して視聴する場合の処理を説明する。再生時には図８（ａ）の処理と図９の処理を同時に実行する。
まず図８（ａ）の処理を説明する。
ＨＤＤ１６に録画した番組Ａの再生を開始したら、コントローラ１１は、図８（ａ）の提示情報取得処理を開始する。まずステップＦ３０１で、変数ｎ＝１とし、また変数Ｍに抽出情報数Ｍをセットする。Ｍとは、図７（ｂ）のように記憶された抽出情報の数である。

ステップＦ３０２では、情報保持部３０から番組Ａについての抽出情報Ｄｄ(n)を読み出す。最初はｎ＝１であるため図７（ｂ）の抽出情報Ｄｄ１を読み出すことになる。
次にコントローラ１１はステップＦ３０３で、抽出情報Ｄｄ１に含まれているＵＲＬ等の情報を用いてネットワーク通信部２６からの情報サーバ５にアクセスを実行し、情報サーバ５から提示情報を取得する。
提示情報を取得したら、コントローラ１１はステップＦ３０４で、取得した提示情報を抽出情報Ｄｄ１に対応させて情報保持部３０に記憶させる。

ステップＦ３０５では変数ｎ＝抽出情報数Ｍであるか否かを確認し、ｎ＝ＭでなければステップＦ３０６で変数ｎをインクリメントしてステップＦ３０２に戻る。従って、次には抽出情報Ｄｄ２を読み出し、ステップＦ３０３，Ｆ３０４の処理を行って、同様に取得した提示情報を記憶させる。
ステップＦ３０５で変数ｎ＝抽出情報数Ｍとなった時点で、この図８（ａ）の処理を終了する。この時点で、情報保持部３０には、図８（ｂ）のように番組Ａについての提示情報が記憶されていることになる。つまり、各抽出情報Ｄｄ１，Ｄｄ２・・・Ｄｄ(M)にそれぞれ対応して、抽出情報に基づいて取得された提示情報Ｄａ１，Ｄａ２・・・Ｄａ(M)が記憶された状態である。

再生中は、この図８（ａ）の提示情報取得処理とともに、図９の提示情報表示処理が行われる。
再生中には、コントローラ１１は図９のステップＦ４０１として表示出力される映像についてのフレームナンバをチェックする。例えば記録再生処理部１７から再生データのタイムコードをフレームナンバとして入力するようにすればよい。そしてステップＦ４０２で、フレームナンバが、図８（ｂ）のように、その番組Ａについて記憶されているフレームナンバに該当するか否かを判断する。
ステップＦ４０２で該当フレームナンバでないとされたら、ステップＦ４０２→Ｆ４０７→Ｆ４０１と進み、次のフレームナンバチェックを行う。

再生が進んで、再生中の映像信号フレームが、情報保持部３０に記憶されたフレームナンバに到達したら、ステップＦ４０２で該当フレームナンバと判断されてステップＦ４０３に進み、対応する抽出情報及び提示情報を読み出す。例えば再生動作がフレームナンバＦＮ１の映像フレームに到達したら、コントローラ１１は、ステップＦ４０３で、図８（ｂ）のようにフレームナンバＦＮ１に対応されて記憶されている抽出情報Ｄｄ１、提示情報Ｄａ１を読み込む。
そしてステップＦ４０４で、読み込んだ提示情報Ｄａ１の表示制御を行う。例えばＯＳＤ処理部２８を制御して、ストリーム映像信号による映像上にＯＳＤ表示として提示情報Ｄａ１の内容に従った表示を実行させる。又は提示情報Ｄａ１が動画映像或いは静止画映像等の映像データであれば、ＰｉｎＰ等の画面分割で提示情報映像を表示させたり、或いは番組映像の表示を一時的に中断させて提示情報映像を表示させる。
このステップＦ４０４の映像表示は、ステップＦ４０５で所定の表示時間を経過したと判断するまで行われる。提示情報の表示時間は、抽出情報Ｄｄ１に表示時間情報が含まれていれば、それに示される時間とする。抽出情報Ｄｄ１に表示時間情報が含まれていなければ、予め設定された一定時間とすればよい。

表示時間を経過したら、ステップＦ４０５からＦ４０６に進み、提示情報Ｄａ１の表示制御を終了させる。
ステップＦ４０６では、ユーザー操作や或いは番組再生完了などでＨＤＤ１６からの再生が終了されたか否かを判断し、終了していなければ、つまり録画した放送番組の再生視聴中であればステップＦ４０１に戻って、フレームナンバチェックを行う。
その後、再生動作がフレームナンバＦＮ２の映像フレームに進んだ時点では、同様にステップＦ４０３，Ｆ４０４，Ｆ４０５の処理が行われる。つまりフレームナンバＦＮ２に対応されて記憶されている抽出情報Ｄｄ２、提示情報Ｄａ２を情報保持部３０から読み込み、読み込んだ提示情報Ｄａ２に基づく表示を実行させる。
以上の処理を再生終了と判断されるまで行う。

以上の図７，図８，図９の処理が行われる処理例IIにより、表示装置２において番組の再生映像の表示出力中に、取得した提示情報に基づいて、その視聴時点における最新情報等が提示される。
そしてこの処理例IIの場合は、録画時等に、予め番組映像に含まれている抽出情報Ｄｄが抽出されて記憶される。このため再生時に抽出情報Ｄｄを抽出し、内容を判断する処理は必要なく、再生時の処理負担は軽減される。
また、図８の提示情報取得処理は、再生開始後に行われるわけであるが、この図８の処理は、既に再生番組についての抽出情報Ｄｄ１〜Ｄｄ(M)が情報保持部３０に記憶されているため、実際にストリーム映像信号上でＱＲコードが付加されたフレームに再生動作が到達する前に予め実行できる。例えば再生動作のためのＨＤＤアクセス等の予備的な動作期間中から開始でき、また、番組再生映像の表示が開始された後も、各抽出情報Ｄｄ１〜Ｄｄ(M)を用いて情報サーバ５のアクセスを次々に行なって提示情報Ｄａ１〜Ｄａ(M)を取得していくことで、表示すべきタイミングよりも先の時点で提示情報Ｄａ１〜Ｄａ(M)を取得できることになる。そして取得された提示情報Ｄａ１〜Ｄａ(M)に基づく映像は、図９の処理により、それぞれ再生中のストリーム映像信号のフレームナンバに合わせたタイミング、即ち元のストリーム映像信号にＱＲコードが付加されているタイミングで表示される。
つまり、提示情報Ｄａの取得も時間的に余裕をもって実行できるため、コントローラ１１の処理速度がさほど高くなくとも、適切なタイミングでの提示情報に基づく表示を実行できる。
もちろん、提示情報Ｄａの取得は再生開始時点以降で行われるため、再生時点の最新の情報を提示情報として得ることができる。

［５．処理例III］

続いて処理例IIIを説明する。この処理例IIIは、提示情報の取得についても、再生時より前の時点で実行する例である。コントローラ１１の処理を図１０に示す。
この図１０の処理は、１つの放送番組に関して、その放送番組を録画する際に行われ、またその後、例えばユーザーがビデオレコーダ１を使用していないときなどに繰り返し実行される。

図１０においてステップＦ５０１は、そのとき処理対象とする放送番組について既に抽出情報の記憶を行っているか否かの判断処理であり、最初に放送番組を録画する時点では、当然、まだ抽出情報の抽出を行っていないためステップＦ５０２に進む。
ステップＦ５０２，Ｆ５０３，Ｆ５０４，Ｆ５０５，Ｆ５０６は上記図７のステップＦ２０１，Ｆ２０２，Ｆ２０３，Ｆ２０４，Ｆ２０５と同様であり、詳細な説明は省略するが、録画中に抽出情報の抽出を行い、図７（ｂ）のように、その番組についての抽出情報Ｄｄ１〜Ｄｄ(M)を情報保持部３０に記憶させる処理である。
この処理も、録画時でなくとも、録画後に録画した放送番組のスキャン再生を実行させて行うようにしても良い。

ステップＦ５０２〜Ｆ５０６の処理でフレームナンバＦＮ１〜ＦＮ(M)に対応して抽出情報Ｄｄ１〜Ｄｄ(M)を記憶させたら、続いてステップＦ５０７に進む。
ステップＦ５０７、Ｆ５０８，Ｆ５０９，Ｆ５１０，Ｆ５１１，Ｆ５１２は、上記図８のステップＦ３０１，Ｆ３０２，Ｆ３０３，Ｆ３０４，Ｆ３０５，Ｆ３０６と同様であり、これも詳細な説明は省略するが、抽出情報Ｄｄ１〜Ｄｄ(M)について、それぞれ情報サーバ５にアクセスして提示情報を取得し、情報保持部３０に記憶させる処理である。
ステップＦ５０７〜Ｆ５１２の処理により、当該図１０の処理が終了された時点で、情報保持部３０には図８（ｂ）のように、フレームナンバＦＮ１〜ＦＮ(M)に対応して抽出情報Ｄｄ１〜Ｄｄ(M)、及び提示情報Ｄａ１〜Ｄａ(M)が記憶された状態となる。

以上のように、最初の録画時に、或いは録画後のスキャンを行って、放送番組についての抽出情報Ｄｄ１〜Ｄｄ(M)、及び提示情報Ｄａ１〜Ｄａ(M)を、予め取得しておく。
このようにしておくことで、再生時には上記図９の処理を行うのみで、提示情報Ｄａ１〜Ｄａ(M)に基づく表示制御が可能となる。

但し、この場合、提示情報Ｄａ１〜Ｄａ(M)が視聴時には古い情報となっている可能性がある。即ちユーザーが、録画した直後に、その番組を再生させて視聴するとは限らないためである。
そこで、例えば一定期間毎などに、提示情報Ｄａ１〜Ｄａ(M)の更新を行うようにする。例えば毎日、或いは数日おきなどのインターバルで、ユーザーがビデオレコーダ１を使用していない時間などに、コントローラ１１は自動的に図１０の処理を実行するようにする。
或る番組についての２回目以降の図１０の処理では、既に抽出情報Ｄｄ１〜Ｄｄ(M)は取得済であるので、ステップＦ５０１からＦ５０７に進み、ステップＦ５０７〜Ｆ５１２の処理により抽出情報Ｄｄ１〜Ｄｄ(M)に基づく提示情報Ｄａ１〜Ｄａ(M)の取得を行い、情報保持部３０における提示情報Ｄａ１〜Ｄａ(M)の内容を更新する。
これにより、再生して視聴する時点には、その時点で適切な提示情報Ｄａ１〜Ｄａ(M)が情報保持部３０に記憶されていることになり、図９の提示情報表示処理をおこなうことで、提示情報に基づく適切な映像を放送番組の映像と共に表示できることになる。

この処理例IIIでは、提示情報の更新のために、再生が行われるまで繰り返し提示情報取得処理を行わなければならないが、再生時には提示情報取得処理は必要なく、コントローラ１１の処理負担は軽減される。

［６．変形例］

以上、実施の形態を説明してきたが、本発明としては多様な変形例が考えられる。
実施の形態では、図１のビデオレコーダ１の構成に基づいて実施の形態を説明してきたが、本発明が適用できるハードウエア構成は多様である。
例えばビデオレコーダ１としての装置以外に、チューナ機能のない記録再生装置、録画再生機能のないチューナ機器（放送受信器）、チューナ内蔵或いは記録再生装置部内蔵のテレビジョン受信器、外部のチューナ装置や再生装置からのストリーム映像信号を入力して表示するモニタ表示装置などでも、本発明の構成を備えることで、実施の形態の如き動作は可能である。
また受信された放送映像信号ではなく、ＤＶＤ（Digital Versatile Disc）やブルーレイディスク（Blu-Ray Disc）等の光ディスクや他の各種メディアを再生する再生装置などであっても、本発明は適用できる。例えば上記光ディスクに記録された映像コンテンツにＱＲコード等の情報を付加しておく。再生装置は、再生時等にＱＲコードから抽出された抽出情報に基づいて提示情報を取得し、提示情報に基づいた映像を、再生映像と共に表示できるようにする。このようにすると、ＤＶＤ等のパッケージメディアとして販売される映像コンテンツ上でも、その再生時に、最新の情報をユーザーに提示することが可能となる。
ネットワークシステムとしてダウンロードされる映像コンテンツ等についても同様であり、再生装置側でユーザーの視聴時に合わせて最新の情報を提示できる。従って映像コンテンツをダウンロードして表示させる機器においても本発明は適用できる。特にパーソナルコンピュータ、ＰＤＡ（Personal Digital Assistant）、携帯電話機などであっても適用可能である。

提示情報として取得される情報とは、例えば図４，図５で説明したような情報番組の情報内容に関連する最新情報としても良いし、ドラマ、映画等の番組において、出演者や制作者の情報、続編の公開情報、関連番組の放送予定などであっても有効である。
また、必ずしも番組内容に関連しない情報であってもよい。例えば緊急のニュース情報とすれば、録画番組を見ている視聴者に対しても緊急ニュースを伝えることができるようになる。

本発明の実施の形態のビデオレコーダのブロック図である。実施の形態のビデオレコーダの要部のブロック図である。実施の形態のストリーム映像信号の例の説明図である。実施の形態の提示情報の表示例の説明図である。実施の形態の提示情報の表示例の説明図である。実施の形態の処理例Ｉのフローチャートである。実施の形態の処理例IIの情報抽出処理のフローチャート及び説明図である。実施の形態の処理例IIの提示情報取得処理のフローチャート及び説明図である。実施の形態の処理例IIの提示情報表示処理のフローチャートである。実施の形態の処理例IIIの提示情報取得処理のフローチャートである。

符号の説明

１ビデオレコーダ、２表示装置、３リモートコマンダー、４ネットワーク、５情報サーバ、１１コントローラ、１２チューナ部、１５映像信号処理部、１６ＨＤＤ、１７記録再生処理部、２０ＱＲ検出部、２１ＥＰＧ抽出／記憶部、２５パネル操作部、２６ネットワーク通信部、２７受光部、２８ＯＳＤ処理部、２９抽出情報デコード部、３０情報保持部、４１情報内容判断機能、４２情報提示制御機能、４３ネットワーク処理機能、４４タイマ機能

Claims

ストリーム映像信号に対する映像処理を行い、表示装置部に出力して表示させる映像信号処理手段と、
上記ストリーム映像信号から、該ストリーム映像信号に埋め込まれた情報を抽出する抽出手段と、
上記抽出手段で抽出された抽出情報に基づいて外部情報源と通信を行い、上記ストリーム映像信号に関連する提示情報を取得する提示情報取得手段と、
上記表示装置部において上記ストリーム映像信号による映像の表示中に、上記提示情報取得手段で取得された提示情報に基づく映像が表示されるように処理する提示情報処理手段と、
を備えたことを特徴とする映像処理装置。
上記提示情報処理手段は、一定時間、もしくは上記抽出情報内の時間指定情報に示された時間、上記提示情報に基づく映像が上記ストリーム映像信号による映像の表示中に表示されるように処理することを特徴とする請求項１に記載の映像処理装置。
記録媒体に対して映像コンテンツの記録再生を行う記録再生手段をさらに備え、
上記ストリーム映像信号は、上記記録再生手段によって上記記録媒体から再生された映像コンテンツのストリーム映像信号であることを特徴とする請求項１に記載の映像処理装置。
上記抽出手段による上記抽出情報の抽出処理と、上記提示情報取得手段による上記提示情報の取得処理は、
上記映像信号処理手段が、上記ストリーム映像信号を上記表示装置部に出力して表示させているときに実行されることを特徴とする請求項１に記載の映像処理装置。
上記抽出手段による上記抽出情報の抽出処理と、上記提示情報取得手段による上記提示情報の取得処理は、
上記記録再生手段によって再生された上記ストリーム映像信号について、上記映像信号処理手段が上記表示装置部に出力して表示させているときに実行されることを特徴とする請求項３に記載の映像処理装置。
上記記録再生手段が、上記記録媒体に映像コンテンツを記録している際に、該映像コンテンツのストリーム映像信号に対して、上記抽出手段による上記抽出情報の抽出処理が実行されることを特徴とする請求項３に記載の映像処理装置。
上記映像信号処理手段が上記表示装置部に対するストリーム映像信号の出力を実行していないときに、
上記記録再生手段が、上記記録媒体に記録された映像コンテンツを再生し、該再生された映像コンテンツのストリーム映像信号に対して、上記抽出手段による上記抽出情報の抽出処理が実行されることを特徴とする請求項３に記載の映像処理装置。
上記記録再生手段によって再生された上記ストリーム映像信号を、上記映像信号処理手段が上記表示装置部に出力して表示させているときに、予め上記抽出手段によって該ストリーム映像信号について抽出されていた抽出情報に基づいて、上記提示情報取得手段による上記提示情報の取得処理が実行されることを特徴とする請求項３に記載の映像処理装置。
上記映像信号処理手段が上記表示装置部に対するストリーム映像信号の出力を実行していないときに、
上記提示情報取得手段による上記提示情報の取得処理が、上記記録媒体に記録されている映像コンテンツのストリーム映像信号について上記抽出手段によって抽出されていた抽出情報に基づいて実行されることを特徴とする請求項３に記載の映像処理装置。
ストリーム映像信号から、該ストリーム映像信号に埋め込まれた情報を抽出する抽出ステップと、
上記抽出ステップで抽出された抽出情報に基づいて外部情報源と通信を行い、上記ストリーム映像信号に関連する提示情報を取得する提示情報取得ステップと、
上記ストリーム映像信号による映像の表示中に、上記提示情報取得手段で取得された提示情報に基づく映像が表示されるように処理する提示情報処理ステップと、
を備えたことを特徴とする映像処理方法。