WO2007111330A1

WO2007111330A1 - 映像表示装置および映像表示方法

Info

Publication number: WO2007111330A1
Application number: PCT/JP2007/056377
Authority: WO
Inventors: Junichi Imai; Masahiro Okamura
Original assignee: Pioneer Corporation
Priority date: 2006-03-27
Filing date: 2007-03-27
Publication date: 2007-10-04
Also published as: US20090109337A1; JPWO2007111330A1

Abstract

　Ｗｅｂページの任意の領域のみを主画面上の任意の位置に任意のサイズで表示することができる映像表示装置。　互いに異なる映像を合成し、単一の合成映像を生成する映像表示装置において、ネットワークを介してＷｅｂページを取得するＷｅｂページ取得手段と、Ｗｅｂページを画像データに変換するデータ変換手段と、画像データに変換されたＷｅｂページから指定領域を抽出する抽出手段と、指定領域のＷｅｂページ画像を指定の表示サイズに設定する表示サイズ設定手段と、指定領域のＷｅｂページ画像の表示位置を設定する表示位置設定手段と、を含み、映像信号合成手段は、指定表示サイズ設定および前記表示位置に基づき合成映像信号を生成する。

Description

明細書

映像表示装置および映像表示方法

技術分野

[0001] 本発明は、テレビジョン映像等を表示する主映像と Webページの任意の部分の映像とを同時表示する映像表示装置および映像表示方法に関する。

背景技術

[0002] 近年、テレビジョン受像機等の映像表示装置は、テレビジョン放送の映像を画面上に表示するのみならず、インターネット等のネットワークを介して受信した Webページを表示することができるものが知られている。また、これらのテレビジョン放送の映像と、 Webページを画面上に並べて表示する 2画面表示により、これらを同時に表示させることが可能となっている。これによりユーザはテレビ番組で放送された内容について、更に詳しい情報をインターネット上の Webページから取得したり、テレビ番組を視聴しながら、天気予報や、株価情報等のインターネット上に公開されているあらゆる情報を得ることができるのである。

[0003] 特開平 11— 136593号公報 (特許文献 1)は、上記したテレビジョン放送の映像とィンターネット上の Webページの画像を同時表示する手段について開示している。

[0004] また特開 2003— 319174号公報（特許文献 2)および特表 2002— 524791号公報 (特許文献 3)は、 Webページの構成部分を抽出し文字列の一部を拡大する手段および、複数の Webページ力指定した部分を抽出して単一の構成ファイルに再構成する手段にっ、て開示して、る。

特許文献 1：特開平 11— 136593号公報

特許文献 2：特開 2003— 319174号公報

特許文献 3：特表 2002— 524791号公報

発明の開示

発明が解決しょうとする課題

[0005] インターネット上に公開されて、る Webページの多くは、複数の画像、文字、図表等カゝら構成されるコンテンツ部分のみならす、広告を表示する部分や他の Webサイトへのリンク等も含まれており、ユーザは、必ずしもこれら全ての内容を必要としない場合がある。これら全ての内容を含む Webページをテレビジョン映像と同時に画面上に表示させることにより、所望の情報が小さく表示されることとなり、また、画面全体が煩雑であった。また、テレビ映像を表示する画面と Webページを表示する画面を左右に並べて同時表示させることにより、双方の画像が縮小表示されることとなり見難いといった問題があった。

[0006] また、特許文献 2および特許文献 3において Webページの構成部分から一部分を抽出する手段が記載されているが、いずれも抽出可能な単位は、予め設定された構成要素すなわち、 HTML文書のタグ単位で抽出を行うものであり、この場合においても不要な部分が含まれる場合があった。

[0007] 本発明は、上記した点に鑑みてなされたものであり、 Webページの任意の領域のみを主画面と同時に任意の位置に任意のサイズで表示することができる映像表示装置を提供することを目的とする。

課題を解決するための手段

[0008] 本発明の映像表示装置は、第 1の映像信号を生成する第 1映像信号生成手段と、前記第 1の映像信号とは異なる第 2の映像信号を生成する第 2映像信号生成手段と、前記第 1の映像信号と前記第 2の映像信号を合成し、単一の合成映像信号を生成する映像信号合成手段と、前記第 1の映像信号と前記第 2の映像信号と前記合成映像信号のいずれかを再生表示する表示手段と、を含む映像表示装置であって、前記第 2映像信号生成手段は、ネットワークに接続され、前記ネットワークを介して Webぺージを取得する Webページ取得手段と、前記 Webページを画像データに変換するデータ変換手段と、画像データに変換された Webページから指定領域を抽出する抽出手段と、前記指定領域の Webページ画像を指定の表示サイズに設定する表示サィズ設定手段と、前記指定領域の Webページ画像の表示位置を設定する表示位置設定手段と、を含み、前記映像信号合成手段は、前記指定表示サイズ設定および前記表示位置設定に基づき合成映像信号を生成する。

[0009] また、本発明の映像表示方法は、第 1の映像信号を生成する第 1映像信号生成ステツプと、前記第 1の映像信号とは異なる第 2の映像信号を生成する第 2映像信号生成ステップと、前記第 1の映像信号と前記第 2の映像信号を合成し、単一の合成映像信号を生成する映像信号合成ステップと、前記第 1の映像信号と前記第 2の映像信号と前記合成映像信号の!/ゝずれかを再生表示する表示ステップと、を含む映像表示方法であって、前記第 2映像信号生成ステップは、ネットワークを介して Webページを取得する Webページ取得ステップと、前記 Webページを画像データに変換するデータ変換ステップと、画像データに変換された Webページカゝら指定領域を抽出する抽出ステップと、前記指定領域の Webページ画像を指定の表示サイズに設定する表示サイズ設定ステップと、前記指定領域の Webページ画像の表示位置を設定する表示位置設定ステップと、を含み、前記映像信号合成ステップは、前記指定表示サイズ設定および前記表示位置設定に基づき合成映像信号を生成する。

図面の簡単な説明

[図 1]図 1は本発明の実施例である映像表示装置の概略構成図である。

[図 2]図 2は本発明の実施例である GUIを利用した Webページ指定画面の一例を示す図である。

[図 3]図 3は本発明の実施例である GUIを利用した表示領域指定画面の一例を示す図である。

[図 4]図 4は本発明の実施例である GUIを利用した表示設定画面の一例を示す図である。

[図 5]図 5は本発明の実施例である映像表示装置の動作を示すフローチャートである

[図 6]図 6は本発明の実施例によるモニタに表示された合成映像の一例を示す図である。

[図 7]図 7は本発明の第 2実施例である映像表示装置の概略構成図である。

[図 8]図 8は本発明の第 2実施例である映像表示装置の動作を示すフローチャートである。

[図 9]図 9は本発明の第 3実施例である映像表示装置の概略構成図である。

[図 10]図 10は本発明の第 3実施例である映像表示装置の動作を示すフローチャートである。 [図 11]図 11は本発明の第 3実施例である更新画像生成部の動作を示すフローチヤートである。

発明を実施するための最良の形態

[0011] 以下、本発明の実施例について図面を参照しつつ説明する。以下において説明する図において、実質的に同一又は等価な構成要素、部分には同一の参照符を付している。

実施例 1

[0012] 本発明の第 1実施例について図 1〜図 6を参照して説明する。図 1は、本発明の第 1の実施例である映像表示装置の全体構成を示す図である。チューナ 11は、ユーザが操作入力部 21の操作により選局操作を行うと、指定されたチャンネルを選局し、ァンテナ 10を介してそのチャンネルのテレビジョン電波を受信する。検波部 12は、受信されたテレビジョン電波信号 (RF信号)を中間波信号に周波数変換した後、検波する。映像処理部 13は、検波された映像信号から輝度信号、色差信号、水平、垂直同期信号およびカラーバーストを分離し、復調回路（図示せず）により RGB信号に復調する。復調された映像信号は映像合成部 25に供給される。

[0013] 操作入力手段 21は、ユーザが各種操作を行うためのものであり、テレビジョン放送の選局、閲覧したい Webページの指定、後述するモニタ 26の画面上に表示させるべき Webページの領域指定、表示位置指定、表示サイズ指定等を行うものである。操作入力手段 21は、例えばリモコンや、各種操作を行うためのアプリケーションソフト等により提供され、ユーザは、リモコン、マウス等のポインティングデバイス、キーボード（モニタ 26上に表示されたキーをリモコン等を使って入力する!、わゆるソフトウェアキーボードも含む)等によりこれらの操作入力を行う。

[0014] ネットワーク 30は、インターネット或、はローカルエリアネットワーク（LAN)等のデータ通信可能なネットワークである。本実施例においては、ネットワーク 30はインターネットとして説明する。 Webブラウザ 22は、 Webページを閲覧するためのアプリケーシヨンであり、ユーザが操作入力手段 21の操作により指定した URLに基づきインタ一ネットから HTMLファイル等をダウンロードし、レイアウトを解析して Webページに含まれる文字、画像、図表等を表示、再生するものである。 [0015] 図 2は、ユーザに所望の Webページを選択せしめるための操作入力手段 21としての GUI (Graphical User Interface)を利用した Webページ指定画面 100の一例を示す図である。ユーザは閲覧したい Webページの URLをキーボード操作等により UR L入力部 101に入力し、移動ボタン 102をクリックする力、登録済み URL—覧 103から所望の URLを選択することにより指定された Webページがダウンロードされる。また、登録ボタン 104は、登録済み URL—覧 103に新たに URLを登録するためのものであり、削除ボタン 105は登録済み URL—覧 103から不要となった URLを削除するためのものである。「次へ」ボタン 106は、後述する画像抽出部 23の処理に移行するためのものである。終了ボタン 107は、この Webページ指定画面を終了させるものである。

[0016] 画像抽出部 23は、 Webブラウザ 22が取得した Webページを HTML形式からビットマップ等の画像ファイル形式にデータ変換し、 Webページからユーザが指定した部分の領域の抽出を行う。この処理により抽出された部分が最終的にテレビジョン映像ととも〖こモニタ 26〖こ表示されることとなる。 Webページの画像データへの変換処理がなされると、図 3に示す如ぐ画像ファイルに変換された Webページとともに、ユーザが表示領域を指定するための操作入力手段 21としての GUIを利用した表示領域指定画面 200がモニタ 26に表示される。ダウンロードした Webページ 110が例えば、画像領域 111と、チャート領域 112と、文字領域 113により構成されているものとし、ュ一ザがこの Webページ 110のうち画像領域 111のみを表示させた!/、場合は、リモコン、マウス等のポインティングデバイスの操作より画面上のポインタで画像領域 111の表示範囲を指定した後、領域指定ボタン 121をクリックすると、当該指定範囲が抽出される。また、 Webページの一部の領域に限らず、表示された Webページ全体の領域を指定することも可能であり、この場合には、全体指定ボタン 122をクリックすることにより Webページ 110の全体の領域が抽出される。また、「次へ」ボタン 123をクリックすると、後述する表示設定部 24の処理に移行する。終了ボタン 124は、これらの処理を中断するためのものである。

[0017] 表示設定部 24は、画像抽出部 23の処理により抽出した Webページの一部又は全体の画像の表示形態の設定、表示サイズの設定およびモニタ 26上における表示位置の設定を行うものである。具体的には、図 4に示す如ぐ画像抽出部 23の処理により抽出した Webページの指定領域 111の画像が表示され、更にこの指定領域 111について表示形態、表示サイズおよび表示位置を設定するための操作入力手段 21としての GUIを利用した表示設定画面 300がモニタ 26に表示される。

[0018] 表示サイズ設定ウィンドウ 131は、抽出した Webページの画像 111の表示サイズを設定するためのものであり、ウィンドウ 131に拡大率を直接入力するかプルダウンニュー方式で表示される拡大率を選択することで、表示サイズが設定される。または、ポインティングデバイスの操作により抽出した画像 110のコーナー部にポインタの位置を合わせ、ドラッグ操作を行うことで、表示サイズを変更することとしてもよい。

[0019] 移動カーソル 132は、抽出した画像 111をモニタ 26上の任意の位置に移動せしめるためのものであり、移動方向を示す矢印形状のボタンをクリックすることで、抽出した画像 111を所望の位置に移動させることができる。または、ポインティングデバイスの操作により抽出した画像 111にポインタの位置を合わせ、ドラッグ操作を行うことで表示位置を移動させることとしてもよ、。

[0020] チェックボックス 133は、抽出した画像 111の表示形態を選択するためのものであり、リモコン、マウス等でチェックボックスをクリックすることにより、「重ね表示」と「並列表示」のいずれかが選択されるようになっている。「重ね表示」とは、テレビジョン映像の画面上に抽出した Webページの画像を重ねて表示させる表示形態を示すものであり、「並列表示」とは、テレビジョン映像の画面と抽出した Webページの画像とを左右に並べて表示させる表示形態を示すものである。尚、「並列表示」を選択したとき上記した表示位置を設定する操作を行わな、こととしてもよ!/、。

[0021] これらの設定が終了した後、完了ボタン 135をクリックすることにより、表示設定が完了し、表示設定部 24は、 Webページ力抽出した画像の映像信号とともに、上記の処理により生成される表示サイズ、表示位置および表示形態を示す表示設定データを映像合成部 25に供給する。「戻る」ボタン 134は、この表示設定の処理を中断して、上記した図 3の表示領域指定画面 200に移行するためのものである。

[0022] 映像合成部 25は、映像処理部 25から供給されるテレビジョン放送の映像信号と、表示設定部 24から供給される Webページの映像信号の合成処理を行う。この合成処理に際して、表示設定部 24から供給される表示設定データに基づいて合成処理が行われる。映像合成部 25の処理により合成された合成映像信号は、モニタ 26に供給される。

[0023] モニタ 26は映像合成部 25から供給される合成映像信号を再生し、合成映像を表示する。

[0024] 次に上記した構成における映像表示装置の動作について図 5に示すフローチヤ一トを参照しつつ説明する。

[0025] ユーザがリモコンボタン（図示せず）等の操作により Webページの検索を開始すベき指示を映像表示装置に送信すると、モニタ 26上に図 2に示す如き Webページ選択画面 100が表示される。ユーザが URLを直接入力する力、登録済み URL—覧 103 力閲覧した、Webページの URLを選択すると、 Webブラウザ 22がネットワーク 30 を介して、ネットワーク上の Webサーバ（図示せず）から当該 Webページをダウンロードする (ステップ SO 1)。

[0026] 次に画像抽出部 23は、ダウンロードした当該 Webページを HTML形式力もビットマップ等の画像ファイル形式にデータ変換処理を行う（ステップ S02)。モニタ 26には、図 3に示す如ぐ画像ファイルにデータ変換された Webページの画像とともに表示領域指定画面 200が表示される。ユーザが表示領域指定画面 200の操作により、ダゥンロードした Webページのうちモニタ 26上に表示させる部分の領域指定操作を行うと、画像抽出部 23は、これに基づき当該部分の画像の抽出を行う（ステップ S03)。続いてユーザが表示領域指定画面 200の「次へ」ボタン 123をクリックすると、画像処理部 23は抽出した部分の画像データを表示設定部 24に供給する。

[0027] 続いてモニタ 26には図 4に示す表示設定画面 300が表示される。ユーザはこの表示設定画面 300にお、て、「重ね表示」又は「並列表示」の!、ずれか一方を選択すると、表示設定部 24は、これに基づきステップ S03で抽出した Webページ画像の表示形態を示す表示形態設定データを生成する (ステップ S04)。

[0028] 続、てユーザが表示設定画面 300の操作により抽出した Webページ画像の拡大率を指定すると、表示設定部 24は、これに基づき抽出した Webページ画像の表示サィズを示す表示サイズ設定データを生成する (ステップ S05)。この際、モニタ 26上には指定サイズに拡大又は縮小された Webページの抽出画像が表示されるので、ュ一ザは設定された画像のサイズがどの程度になるかを視認することができる。

[0029] 次に、ユーザが表示設定画面 300の操作により抽出した Webページ画像の表示位置を指定すると、表示設定部 24は、これに基づき抽出した Webページ画像の表示位置を示す表示位置設定データを生成する (ステップ S06)。ユーザはこの表示位置の設定操作の過程において、抽出した画像を実際に移動させ、これを見ながら表示位置を指定することができる。

[0030] これらの表示設定が完了し、ユーザが表示設定画面 300の完了ボタン 135をクリツクすると、表示設定部 24は、抽出した Webページ画像の映像信号とともにステップ S 04〜ステップ S06の処理により生成した表示形態設定データ、表示サイズ設定データ、表示位置設定データからなる表示設定データを映像合成部 25に供給する。

[0031] 次に、映像合成部 25は、表示設定データに基づき映像処理部 25から受信したテレビジョン放送の映像信号と、表示設定部 24から受信した Webページ画像の映像信号の合成処理を行い、合成映像信号を生成する (ステップ S07)。すなわち、映像合成部 25は、 Webページ力抽出した画像について指定された表示形態、表示サイズ、表示位置に表示するべくテレビジョン映像との合成処理を行う。映像合成部 25は、合成映像信号をモニタ 26に供給する。

[0032] モニタ 26は、受信した合成映像信号を再生し、画面上に合成映像を表示する。これにより、モニタ 26の画面上には、テレビジョン映像とともに、 Webページ力も抽出した画像が指定サイズおよび指定位置に表示される (ステップ S08)。

[0033] 図 6は図 4の GUI画面にお!、て「重ね表示」が選択された場合のモニタ 26上に出力された合成映像の画面の一例を示す図である。抽出された Webページの画像 11 1は、テレビジョン映像画面 141 (主画面）上に、表示設定部 24により設定された表示サイズおよび表示位置に表示される。

[0034] 以上の説明から明らかなように、本実施例の映像表示装置によれば、インターネット等のネットワーク力ダウンロードした Webページ力任意の領域を抽出して、これをテレビジョン映像などの主画面と同時に、任意のサイズで且つ任意の位置に表示させることができる。従って、 Webページに掲載されている不要な部分は表示されずまた、その画像の大きさや、表示位置を自由に設定できる。また、ダウンロードされた W ebページは HTML形式から、画像データに変換され、これにより、抽出可能な領域は、タグによる制約を受けることなぐ自由に設定することができる。更に GUIを利用して表示したい部分の抽出、表示サイズ、表示位置、表示形態を設定することができ、ユーザは、これらの設定において表示イメージを見ながら設定することができ、操作性に優れる。

実施例 2

[0035] 次に本発明の第 2実施例について図 7〜図 8を参照して説明する。図 7は本発明の第 2実施例である映像表示装置の全体構成を示す図である。第 2実施例は、第 1実施例の構成に加え、モニタ 26の画面上に現在表示されて!、る Webページ画像の供給元である Webページが更新されたときに、その更新を検出し、更新があったことをユーザに報知する手段を含む構成となっている。以下において第 1実施例とは異なる部分について説明する。

[0036] メモリ 31は、モニタ 26の画面上に現在表示されている Webページ画像の供給元である Webページの URL情報を保持する。また、メモリ 31は、当該 Webページを表示するための表示情報として、当該 Webページを取得した際の Webページ全体の画像

データを保持する。すなわち、画像抽出部 23により画像データに変換された Webぺージカ Sメモリ 31に保持される。

[0037] 比較解析部 32は、所定期間（例えば 1時間）毎にモニタ 26の画面上に現在表示されている Webページ画像の供給元である Webページのダウンロード要求信号を We bブラウザ 22に送信する。この際、比較解析部 32は、メモリ 31に保持されている当該 Webページの URL情報を読み込んで、これも同時に Webブラウザ 22に送信する。これに応じて Webブラウザ 22が所定期間毎にネットワーク 30を介して新たに当該 W ebページをダウンロードする。

[0038] また、比較解析部 32は、メモリ 31から先に取得した Webページの表示情報である画像データを読み込んで、これと新たに取得した Webページの画像データとの比較を行い、 Webページの内容が更新された力否かの判断を行う。すなわち、更新の有無は、両者の画像データを構成する画素データすなわち、ビットデータレベルで一致しているカゝ否かを判断することにより検知することができ、比較解析部 32は、両者の画像データが完全に一致しない場合には、 Webページの更新があったものと判断し、更新報知部 33に向けて起動信号を送信する。

[0039] 更新報知部 33は、比較解析部 32から供給される起動信号を受信すると、 Webぺージの更新があったことをユーザに報知する。具体的には、更新報知部 33は、モニタ 26の画面上における文字や記号や絵等の表示、モニタの外部に設けられた LED やサブディスプレイによる表示、およびスピーカやブザー等の音による報知等、ユーザの視覚や聴覚を通じて認識される手段により更新の報知を行う。

[0040] 次に上記した構成の第 2実施例による映像表示装置が、 Webページの更新を検出し、これを報知する動作について図 8に示すフローチャートを参照しつつ説明する。ここで、初期状態として図 5に示すフローチャートのステップ S01〜S07の処理が完了し、モニタ 26の画面上にはユーザが指定した Webページ力も抽出した画像と、テレビジョン放送の映像が合成され、表示されているものとする。

[0041] 比較解析部 32は、メモリ 32から読み込んだ URL情報とともに、モニタ 26の画面上に現在表示されている画像の供給元である Webページのダウンロード要求信号を所定期間（例えば 1時間）毎に Webブラウザ 22に送信する。これを受信した Webブラウザ 22は、ネットワーク 30を介して当該 Webページを新たにダウンロードし、これを画像データに変換する (ステップ S 11)。

[0042] 続いて比較解析部 32は、メモリ 31に保持されている先に取得した Webページの画像データを読み込んで、これとステップ S 11にお、て新たに取得した Webページの画像データとの比較を行う（ステップ S 12)。尚、先に取得した Webページの画像データは、当該 Webページを画像データに変換した際、すなわち、図 5のフローチヤ一卜のステップ S02の後【こメモリ 31【こされる。

[0043] 比較解析部 32は、両者の画像データについて、画素データの比較を行い、これらが完全に一致するか否かによって Webページの更新の有無を判断する（ステップ S1 3)。

[0044] 比較解析部 32は、両者の画像データを比較した結果、これらの画像を構成する全ての画素データにっ、て完全に一致して、ることを検知した場合、 Webページは更新されていないものと判断し (ステップ S 13 No)、現在の状態をそのまま保持する（ステップ S 14)。

[0045] 一方、比較解析部 32は、両者の画像データを比較した結果、これらの画像を構成する全ての画素データにっ、て完全に一致して、な、ことを検知した場合、 Webぺージは更新されたものと判断し (ステップ S13 Yes)、更新報知部 33に向けて起動信号を送信する。更新報知部 33は、この起動信号を受信するとモニタ 26の画面上に「Webページが更新されました。」等のメッセージ表示や、音声等によりユーザに W ebページが更新されたことを報知する (ステップ S 15)。

[0046] 以上の説明から明らかなように、第 2実施例の映像表示装置によれば、モニタ 26の画面上に現在表示されている画像の供給元である Webページの内容が更新された場合には、更新があったことをユーザに報知することができ、ユーザは、 Webページの不定期な更新に対しても、迅速に対応することが可能となる。

[0047] 尚、上記した実施例においては、先に取得した Webページの画像と新たに取得した Webページの画像にお!、てこれらの画像データを構成する画素データにつ!、て比較を行、、画素データが完全に一致する力否かによって Webページの更新の有無を判断することとしたが、これに限定されない。例えば、両者において画素データがー致して!/、る部分と一致して!/、な!/、部分の画素数を測定することにより、変化率を求めることができ、この変化率に応じて Webページに更新があった力否かを判断することとしてもよい。具体的には両者の画素データの変化率について閾値を設け、その閾値より高いか、低いかで更新があった力否かを判断することができ、例えば、画素データの変化率が 10%未満の時は、更新なしと判断し、変化率が 10%以上のときは更新ありと判断する。

実施例 3

[0048] 次に本発明の第 3実施例について図 9〜図 11を参照して説明する。図 9は本発明の第 3実施例である映像表示装置の全体構成を示す図である。第 3実施例は、 Web ページの更新の有無を HTML文書を解析することにより検出し、更新があったことをユーザに報知するとともに、更新による Webページの変化の状態に応じて所定の対応を行う手段を含む構成となっている。以下において第 1実施例および第 2実施例とは異なる部分にっ、て説明する。

[0049] メモリ 31は、モニタ 26の画面上に現在表示されている Webページ画像の供給元である Webページの URL情報を保持する。またメモリ 31は、当該 Webページに掲載されている文書、画像、ハイパーリンクおよび Webページの構造、レイアウト等、その W ebページを構成し、且つ表示するために必要な表示情報を Webブラウザ 22から取り込んで保持する。すなわち、 Webページを記述するためのマークアップ言語として H TMLや XHTML等が挙げられ、メモリ 31は、表示情報として例えば HTML又は XH TMLのタグ情報を保持する。

[0050] さらに表示情報は、モニタ 26の画面上に現在表示されている Webページの抽出部分に対応するタグが当該表示情報中のどの部分に対応するかを示す抽出部分のタグ情報も含んでいる。力かる抽出部分のタグ情報は、モニタ 26の画面上に現在表示されている画像の表示処理の過程において、画像抽出部 23が表示領域の抽出処理を行った際に表示情報の付加情報としてメモリ 31に記録される。

[0051] また、メモリ 31は、モニタ 26の画面上に現在表示されている Webページ画像の抽出部分の Webページ全体における位置および抽出領域を示す抽出位置データを画像抽出部 23から読み込んでこれを保持する。すなわち、抽出位置データは、当該 W ebページのどの部分をどの範囲に亘つて抽出したのかを示すデータである。抽出した画像の Webページ全体における位置は、例えば Webページの所定位置を基準点とする座標で表すことができる。抽出領域はこの座標を用いて、抽出した画像領域の対角線上の 2点の座標により表すことができ、これを抽出位置データとすることができる。

[0052] また、メモリ 31は、モニタ 26の画面上に現在表示されている Webページの表示設定処理において、表示設定部 24が生成した表示サイズ設定データ、表示位置設定データおよび表示形態設定データ力なる表示設定データを表示設定部 24から読み込んでこれらを保持する。

[0053] 比較解析部 32は、所定期間（例えば 1時間）毎にモニタ 26の画面上に現在表示されている Webページ画像の供給元である Webページのダウンロード要求信号を We bブラウザ 22に送信する。この際、比較解析部 32は、メモリ 31に保持されている当該 Webページの URL情報を読み込んで、これも同時に Webブラウザ 22に送信する。これに応じて Webブラウザ 22が所定期間毎にネットワーク 30を介して新たに当該 W ebページをダウンロードする。

[0054] また、比較解析部 32は、メモリ 31から先に取得した Webページの構造や内容等を示す表示情報を読み込んで、これと新たに取得した Webページの表示情報との比較を行い、 Webページの内容が更新された力否かの判断を行う。更新の有無は、両者のタグを解析し、 Webページの構造、レイアウトおよび Webページに掲載されている文書、画像等について変化の有無を検知することで判断される。

[0055] 更に、比較解析部 32は Webページ更新による Webページの構造や内容の変化の状態を解析し、その解析結果に応じた対応の選択を行う。具体的には、 Webページの変化の状態に応じて、モニタ 26の画面上に現在表示されて!、る Webページの画像について、 1.そのままその画像の表示を保持する、 2.表示部分の画像を更新された新たな内容に差し替える、 3. Webページの抽出領域の再設定をすべき旨の通知を行う、のうちのいずれかの対応を選択する。

[0056] 以下に比較解析部 32が Webページの変化の状態を解析する方法とその解析結果に応じた上記 1〜3の対応を選択する方法について説明する。以下に示す (a)〜(d) は Webページの更新による変化の状態の類型を示すものであり、比較解析部 32は、その変化がこれらのうちのいずれに該当するかの解析を行う。

[0057] (a) Webページの構造が同一であり、全てのタグの内容に変化がない場合、すなわち Webページが更新されて!ヽな、場合。

[0058] (b) Webページの構造が同一であり、モニタ 26の画面上に現在表示されている We bページの抽出部分に対応するタグの内容に変化がないが、他の部分に変化がある

¾ O o

[0059] (c) Webページの構造が同一であり、モニタ 26の画面上に現在表示されている We bページの抽出部分に対応するタグの内容に変化があった場合。

[0060] (d) Webページの構造に変化があった場合。

[0061] 上記した Webページの構造が同一であるか否かは、タグの種類、数、順序を比較することにより検出される。また、モニタ 26の画面上に現在表示されている Webぺージの抽出部分に対応するタグ情報は、表示情報の付加情報として、メモリ 31に保持されており、これとこれに対応する新たに取得された Webページのタグの内容とが比較され、抽出部分に対応するタグの内容に変化があつたか否かが検出される。

[0062] 続、て、比較解析部 32は、これら (a)〜 (d)の変化の状態の類型の解析結果に基づき、上記した 1〜3の対応のうちのいずれかを選択する。

[0063] 変化の状態が（a)又は (b)に該当する場合は、 Webページの構造は変化しておらず、且つモニタ 26の画面上に現在表示されて!、る Webページからの抽出部分については何ら変化を生じていないため、比較解析部 32は、そのままその画像の表示を保持する対応を選択する（上記 1の対応)。但し (b)に該当する場合においては、モユタ 26の画面上に現在表示されて、る抽出部分につ!ヽては変化がな!、ものの、他の部分において変化が生じているため、比較解析部 32は更新報知部 33に向けて起動信号を送信する。

[0064] 一方（c)に該当する場合は、モニタ 26の画面上に現在表示されている Webページ力もの抽出部分について、変化が生じているものの、 Webページの構造は変化して Vヽな、為、更新された新たな Webページにぉ、て当該抽出部分にっ、て追跡することが可能となる。この場合、比較解析部 32は、その抽出部分の画像を更新された新たな画像に差し替える処理を行う対応を選択する（上記 2の対応)。 (c)に該当する場合、比較解析部 32は、更新報知部 33および更新画像生成部 34に向けて起動信号を送信する。

[0065] 一方 (d)に該当する場合は、 Webページの構造が変化しているため、更新された Webページにお!、て、モニタ 26の画面上に現在表示されて!、る Webページの抽出部分について追跡することができない。この場合、抽出領域の再設定をすべき指示を発する対応を選択する（上記 3の対応)。（d)に該当する場合、比較解析部 32は、更新報知部 33およびメッセージ送出部 35に向けて起動信号を送信する。

[0066] 更新報知部 33は、比較解析部 32により Webページの更新があったことが検出された場合、すなわち上記した変化の状態の類型のうち (b)、（c)、（d)に該当する場合に、比較解析部 32から供給される起動信号に基づき、 Webページの更新があったことをユーザに報知する。具体的には、更新報知部 33は、モニタ 26の画面上における文字や記号や絵等の表示、モニタの外部に設けられた LEDやサブディスプレイによる表示、およびスピーカやブザー等の音による報知等、ユーザの視覚や聴覚を通じて認識される手段により更新の報知を行う。

[0067] 更新画像生成部 34は、比較解析部 32が上記した変化の状態の類型のうち（c)に該当すると判断した場合、すなわち、 Webページの構造が同一であり、モニタ 26の画面上に現在表示されている Webページの抽出部分に対応するタグの内容に変化があった場合、比較解析部 32から供給される起動信号に基づき、更新された新たな Webページを画像データに変換し、当該抽出部分に対応する部分を抽出する。この抽出処理において、更新画像生成部 34は、メモリ 31に保持されている抽出位置データを読み込み、これに基づき新たな Webページ画像について抽出処理を行う。すなわち、更新画像生成部 34は、モニタ 26の画面上に現在表示されている Webぺージ画像の抽出部分と同一の位置および範囲の画像を抽出し、更新映像信号を生成する。更に、更新画像生成部 34は、メモリ 31に保持されている表示設定データを読み込み、これに基づき新たな Webページ画像について表示設定を行う。すなわち、更新画像生成部 34は、モニタ 26の画面上に現在表示されている Webページ画像の表示サイズ、表示位置、表示形態と同一の表示設定を行い、これに基づき表示設定データを生成する。更新画像生成部 34は上記した更新映像信号と、表示設定データを映像合成部 25に送信する。

[0068] メッセージ送出部 35は、比較解析部 32が上記した変化の状態の類型のうち（d)に該当すると判断した場合、すなわち、 Webページの構造に変化があった場合、比較解析部 32から供給される起動信号に基づき、 Webページの画像の抽出領域を再設定すべきメッセージデータをモニタ 26に出力する。これにより、モニタ 26には Web画像の抽出範囲を再設定すべきメッセージが表示される。

[0069] 次に上記した構成の第 3実施例による映像表示装置が、 Webページの更新を検出して更新による変化の状態に応じた対応を行う動作について図 10に示すフローチヤートを参照しつつ説明する。ここで、初期状態として図 5に示すフローチャートのステップ S01〜S07の処理が完了し、モニタ 26の画面上にはユーザが指定した Webぺージから抽出した画像と、テレビジョン放送の映像が合成され、表示されているものとする。

[0070] 比較解析部 32は、メモリ 32から読み込んだ URL情報とともに、モニタ 26の画面上に現在表示されている画像の供給元である Webページのダウンロード要求信号を所定期間（例えば 1時間）毎に Webブラウザ 22に送信する。これを受信した Webブラウザ 22は、ネットワーク 30を介して当該 Webページを新たにダウンロードする（ステップ S21)。

[0071] 続いて比較解析部 32は、メモリ 31に保持されている先に取得した Webページの構造や内容等を示す表示情報を読み込んで、これとステップ S21にお、て新たに取得した Webページの表示情報との比較を行う（ステップ S22)。具体的には両者のタグの比較がなされる。尚、先に取得した Webページの表示情報は、当該 Webページをダウンロードした際、すなわち、図 5のフローチャートのステップ S01の後にメモリ 31 に保持する。

[0072] 比較解析部 32は、タグの数、種類、順序および文書や画像の内容等を比較し、これらのうちのいずれかに変化が生じているか否かを検知して当該 Webページの更新の有無を判断する (ステップ S23)。

[0073] 比較解析部 32は、タグの数、種類、順序、タグ内の文字列若しくは文字数の！/ヽずれにも変化が生じて、な、と判断した場合、 Webページは更新されて、な、ものと判断し (ステップ S23 No)、モニタ 26の画面上に現在表示されて!、る Webページの画像はそのまま表示される (ステップ S29)。

[0074] 一方、比較解析部 32は、タグの数や、種類、順序、タグ内の文字列の若しくは文字数のいずれかに変化が生じていることを検出すると、 Webページが更新されたものと判断し (ステップ S23 Yes)、更新報知部 33に起動信号を送信する。更新報知部 3 3は、これに応じてモニタ 26の画面上に「Webページが更新されました。」等のメッセージ表示や、音声等によりユーザに Webページが更新されたことを報知する (ステツプ S24)。

[0075] 続、て、比較解析部 32は、 Webページが更新されたものと判断した場合には、更に Webページの構造に変化があつたか否かの判断を行う（ステップ S25)。 Webぺージの構造は、両者のタグの種類、数、順序を比較し、これらのうちのいずれかが変化しているときに、構造が変化しているものと判断され、これらのうちいずれも変化して V、な、ときは構造が変化して、な、ものと判断される。

[0076] 比較解析部 32は、更新により Webページの構造が変化したものと判断すると (ステップ S25 Yes)、メッセージ送出部 35に起動信号を送信する。メッセージ送出部 35 は、これに応じて、 Webページの画像の抽出範囲を再設定すべきメッセージデータをモニタ 26に送信すると、モニタ 26の画面上には「Web画像の表示範囲を再設定してくださ、。」等のメッセージが表示される (ステップ S26)。

[0077] 一方、比較解析部 32は、更新により Webページの構造が変化して、な、と判断すると（ステップ S25 No)、メモリ 31からモニタ 26の画面上に現在表示されている We bページの抽出部分に対応するタグ情報を読み込み、これとこれに対応する新たに取得した Webページにおけるタグ内の文字列や文字数の比較を行い、タグの内容に変化が生じて、る力否かの判断を行う（ステップ S27)。

[0078] 上記したステップ S27の処理内容を具体的に説明すると、モニタ 26の画面上には、 Webページ力も抽出した特定画像が表示されているものとする。メモリ 31には、抽出部分のタグ情報として、その画像の画像ファイル「picturel.gif」の表示を示すタグく i mg src=〃 picturel.gif > が保持されている。比較解析部 32は、抽出部分のタグ情報をメモリ 31から読み込み、これとこれに対応する新たに取得した Webページにおけるタグとの比較を行う。例えば、新たに取得した Webページにおいてその画像が更新され、タグの内容が例えばく img src=" picture2.gir〉となった場合、メモリ 31に保持されている内容力も変化が生じていることが検出され、比較解析部 32は、タグの内容に変化が生じたと判断する。

[0079] 比較解析部 32は、ステップ S27の処理によりタグの内容に変化が生じているものと判断すると (ステップ S27 Yes)、更新画像生成部 34に起動信号を送信する。更新画像生成部 34は、これに応じて、ステップ S21で新たにダウンロードした Webページを画像データに変換し、抽出領域、表示サイズ、表示位置、表示形態の設定を行い、更新映像信号および表示設定データを生成し、これを映像合成部 25に送信する。ここで、表示サイズ、表示位置、表示形態は、モニタ 26の画面上に現在表示されている状態と同一の状態に設定される。映像合成部 25は、これまで表示していた Web ページの画像に変えて、この更新映像信号と、テレビジョン放送の映像信号を合成し

、新たな合成映像信号を生成し、これをモニタ 26に送信する。モニタ 26は合成映像信号を再生し、画面上には更新された Web画像とテレビジョン放送の映像が同時に表示される（ステップ S28)。

[0080] 一方、比較解析部 32は、ステップ S27の処理によりタグの内容に変化が生じていないものと判断すると（ステップ S27 No)、モニタ 26の画面上に現在表示されている

Webページの画像はそのまま表示される（ステップ S29)。

[0081] 続いて以下に、図 10のフローチャートのステップ S28の処理において更新画像生成部 34が行う処理について図 11のフローチャートを参照しつつ説明する。

[0082] 更新画像生成部 34は、比較解析部 32から送信される起動信号に応じて、 Webブラウザ 22から更新された新たな Webページを取得する (ステップ S31)。

[0083] 次に、更新画像生成部 34は、ステップ S31で取得した新たな Webページを HTM

L形式力ビットマップ等の画像ファイル形式にデータ変換処理を行う（ステップ S32

) o

[0084] 次に、更新画像生成部 34は、メモリ 31から抽出位置データの読み込みを行い、更新された新たな Webページについて、抽出位置データに基づき、抽出領域の指定を行い、更新映像信号を生成する (ステップ S33)。すなわち、この処理により更新後の Webページ力抽出される部分の位置および範囲は、更新前の Webページ画像の抽出部分の位置および範囲と座標レベルで同一となる。尚、抽出位置データは、モユタ 26の画面上に現在表示されている画像の処理過程において、画像抽出部 23が表示領域の抽出を行った際、すなわち、図 5のフローチャートのステップ S03の後にメモリ 31に保持される。

[0085] 次に、更新画像生成部 34は、メモリ 31からモニタ 26の画面上に現在表示されている画像の表示サイズ設定データ、表示位置設定データおよび表示形態設定データ力なる表示設定データの読み込みを行い、新たな Webページの抽出部分について、当該表示設定データに基づき、表示サイズ、表示位置、および表示形態の設定を行い、表示設定データを生成する（ステップ S34)。すなわち、この処理により、モ- タ 26の画面上に現在表示されている画像の表示サイズ、表示位置、表示形態はそのままの状態が保持されることとなる。尚、表示設定データは、モニタ 26の画面上に現在表示されて！ヽる画像の処理過程にお!/ヽて、表示設定部 24の表示設定が完了した際、すなわち、図 5のフローチャートのステップ S06の後にメモリ 31に保持される。

[0086] 上記の処理により更新映像信号および表示設定データが生成され、更新画像生成部 34はこれを映像合成部 25に供給する (ステップ S35)。

[0087] 映像合成部 25は、表示設定データに基づき、これまで表示して、た画像に変えて、この更新映像信号と、テレビジョン放送の映像信号の合成処理を行い、新たな合成映像信号を生成し、これをモニタ 26に送信する。モニタ 26は新たな合成映像信号を再生表示する。

[0088] 以上の説明から明らかなように、第 3実施例の映像表示装置によれば、モニタ 26の画面上に現在表示されている画像の供給元である Webページの内容が更新された場合には、更新があったことをユーザに報知することができる。さらに、その更新による Webページの変化の状態に応じた、対応がなされるため、 Webページの更新に伴うユーザの操作の負担を軽減することができる。すなわち、 Webページが更新された場合であっても、モニタ 26の画面上に現在表示されて、る部分にっ、て変化がなヽ場合には、現在の画像がそのまま表示されるので、ユーザは、何も操作する必要がない。また、 Webページの構造に変化がなぐモニタ 26の画面上に現在表示されている部分について更新があった場合には、その部分について、更新された画像に差し替え処理を行うので、この場合についても、ユーザは何も操作する必要がない。また、 Webページの構造に変化があった場合は、表示領域を再設定すべきメッセージが画面上に表示されるので、ユーザは、このメッセージに基づき、対応することができる。

[0089] また、第 1実施例から第 3実施例にぉ、ては、主画面としてテレビジョン映像を例示したが、これに限定されず、例えば、主画面が Webページ画像であってもよい。

Claims

請求の範囲

[1] 第 1の映像信号を生成する第 1映像信号生成手段と、前記第 1の映像信号とは異なる第 2の映像信号を生成する第 2映像信号生成手段と、前記第 1の映像信号と前記第 2の映像信号を合成し、単一の合成映像信号を生成する映像信号合成手段と、前記第 1の映像信号と前記第 2の映像信号と前記合成映像信号のいずれかを再生表示する表示手段と、を含む映像表示装置であって、

前記第 2映像信号生成手段は、

ネットワークに接続され、前記ネットワークを介して Webページを取得する Webぺージ取得手段と、

前記 Webページを画像データに変換するデータ変換手段と、

画像データに変換された Webページカゝら指定領域を抽出する抽出手段と、前記指定領域の Webページ画像を指定の表示サイズに設定する表示サイズ設定手段と、

前記指定領域の Webページ画像の表示位置を設定する表示位置設定手段と、を含み、

前記映像信号合成手段は、前記指定表示サイズ設定および前記表示位置設定に基づき合成映像信号を生成することを特徴とする映像表示装置。

[2] 前記映像信号合成手段は、前記第 1の映像信号に基づく第 1の映像の上に、前記第 2の映像信号に基づく第 2の映像を重ねて表示する合成処理を行うことを特徴とする請求項 1に記載の映像表示装置。

[3] 前記第 1の映像信号は、テレビジョン映像信号であることを特徴とする請求項 1又は 2に記載の映像表示装置。

[4] 前記 Webページ取得手段により取得した Webページの表示情報を保持する記憶手段と、

所定期間毎に前記 Webページの供給元力新たな Webページを取得するページ更新取得手段と、

前記記憶手段に保持された前記 Webページの表示情報と、前記新たな Webぺージの表示情報を比較して前記 Webページの更新の有無を判断する比較手段と、前記比較手段が更新有りと判断したときに、前記更新を報知する更新報知手段と、をさらに含むことを特徴とする請求項 1乃至 3のいずれか 1に記載の映像表示装置

[5] 前記表示情報は、 Webページの外観を示す画像データであり、前記比較手段は、前記 Webページの画像データを構成する画素データを比較して前記 Webページの更新の有無を判断することを特徴とする請求項 4に記載の映像表示装置。

[6] 前記表示情報は、 Webページを記述する HTMLのタグ情報であることを特徴とする請求項 4に記載の映像表示装置。

[7] 前記比較手段は、前記 Webページの HTML文書と前記新たな Webページの HT

ML文書とを比較し、タグの数、種類、順序、タグ内の文字列若しくは文字数のうちのいずれかに差異があることを検出したときに前記 Webページが更新されたと判断することを特徴とする請求項 6に記載の映像表示装置。

[8] 前記比較手段により前記 Webページが更新されたと判断され、且つ前記 Webぺージと、前記新たな Webページのタグの数、種類、順序のうちのいずれかに差異があることが検出されたときに、前記指定領域を変更すべき表示を前記表示手段に表示する変更指示手段をさらに含むことを特徴とする請求項 7に記載の映像表示装置。

[9] 前記比較手段により前記 Webページが更新されたと判断され、且つ前記 Webぺージと、前記新たな Webページのタグの数、種類、順序のいずれにも差異がなく且つ前記タグ内の文字列若しくは文字数に差異があることが検出されたときに、前記新たな Webページから前記指定領域と同一部分を抽出し、更新映像信号を生成する更新映像信号生成手段をさらに含み、

前記映像信号合成手段は、前記更新映像信号と、前記第 1の映像信号を合成し、新たな合成映像信号を生成することを特徴とする請求項 7又は 8に記載の映像表示装置。

[10] 第 1の映像信号を生成する第 1映像信号生成ステップと、前記第 1の映像信号とは異なる第 2の映像信号を生成する第 2映像信号生成ステップと、前記第 1の映像信号と前記第 2の映像信号を合成し、単一の合成映像信号を生成する映像信号合成ステップと、前記第 1の映像信号と前記第 2の映像信号と前記合成映像信号のいずれかを再生表示する表示ステップと、を含む映像表示方法であって、

前記第 2映像信号生成ステップは、

ネットワークを介して Webページを取得する Webページ取得ステップと、前記 Webページを画像データに変換するデータ変換ステップと、

画像データに変換された Webページから指定領域を抽出する抽出ステップと、前記指定領域の Webページ画像を指定の表示サイズに設定する表示サイズ設定ステップと、

前記指定領域の Webページ画像の表示位置を設定する表示位置設定ステップと、を含み、

前記映像信号合成ステップは、前記指定表示サイズ設定および前記表示位置設定に基づき合成映像信号を生成することを特徴とする映像表示方法。

[11] 前記映像信号合成ステップは、前記第 1の映像信号に基づく第 1の映像の上に、前記第 2の映像信号に基づく第 2の映像を重ねて表示する合成処理を行うことを特徴とする請求項 10に記載の映像表示方法。

[12] 前記第 1の映像信号は、テレビジョン映像信号であることを特徴とする請求項 10又は 11に記載の映像表示方法。

[13] 前記 Webページ取得ステップにより取得した Webページの表示情報を記憶手段に保持するステップと、

所定期間毎に前記 Webページの供給元力新たな Webページを取得するステツプと、

前記記憶手段に保持された前記 Webページの表示情報と、前記新たな Webぺージの表示情報を比較して前記 Webページの更新の有無を判断する比較ステップと、前記比較ステップにおいて更新有りと判断したときに、前記更新を報知する更新報知ステップと、

をさらに含むことを特徴とする請求項 10乃至 12のいずれか 1に記載の映像表示方法。

[14] 前記表示情報は、 Webページの外観を示す画像データであり、

前記比較ステップは、前記 Webページの画像データを構成する画素データを比較して前記 Webページの更新の有無を判断することを特徴とする請求項 13に記載の映像表示方法。

[15] 前記表示情報は、 Webページを記述する HTMLのタグ情報であることを特徴とする請求項 13に記載の映像表示方法。

[16] 前記比較ステップは、前記 Webページの HTML文書と前記新たな Webページの HTML文書を比較し、タグの数、種類、順序、タグ内の文字列の若しくは文字数のうちのいずれかに差異があることを検出したときに前記 Webページが更新されたと判断することを特徴とする請求項 15に記載の映像表示方法。

[17] 前記比較ステップにお、て、前記 Webページが更新されたと判断され、且つ前記 Webページと、前記新たな Webページのタグの数、種類、順序のうちのいずれかに差異があることが検出されたときには、前記指定領域を変更すべき表示を行うステツプをさらに含むことを特徴とする請求項 16に記載の映像表示方法。

[18] 前記比較ステップにお、て、前記 Webページが更新されたと判断され、且つ前記 Webページと、前記新たな Webページのタグの数、種類、順序のいずれにも差異がなく且つ前記タグ内の文字列若しくは文字数に差異があることが検出されたときには、前記新たな Webページから前記指定領域と同一部分を抽出し、更新映像信号生成し、前記更新映像信号と、前記第 1の映像信号を合成し、新たな合成映像信号を生成することを特徴とする請求項 16又は 17に記載の映像表示方法。