JP2010205065A - 表示システム及び表示方法 - Google Patents

Abstract

【課題】ユーザが興味を持った放送内容についての情報を簡易な操作で表示することができるとともに、該情報の表示のために放送事業者が多大な投資を要することのない表示システム及び表示方法を提供する。
【解決手段】インターネット放送又はテレビ放送の受信映像を画面上に表示可能な表示システムであって、表示システムは、受信映像においてユーザによって指定された箇所の画像を抽出する（ステップＳ１０６）。そして、表示システムは、抽出された画像と意味的関連性のある文字列を取得する（ステップＳ１０８）。そして、表示システムは、取得された文字列に基づいてインターネット上の情報を検索し（ステップＳ１０９）、該検索した情報を前記画面上に表示する（ステップＳ１１３）。
【選択図】図２

Description

本発明は、インターネット放送又はテレビ放送の受信映像を画面上に表示可能な表示システム、及び該表示システムに適用される表示方法に関する。

近年では、一般家庭用に、インターネット接続機能を備えたテレビや、テレビ機能を備えたパソコンが販売されており、これらの機器において、テレビ放送を視聴しながら、インターネットを利用することが行われている。

そして、このような事情を背景にして、テレビの番組やＣＭでは、これらに関連するホームページへのアクセスを促すために、ＵＲＬ（Uniform Resource Locator）や検索用のキーワードが紹介されており、この紹介のあった番組やＣＭを視聴したユーザは、ブラウザへＵＲＬやキーワードの文字列を入力することで、前記番組等に関連するホームページを閲覧することができる。

また特許文献１には、煩雑なＵＲＬ等の入力操作を要せずに、テレビ番組に関連するホームページを表示可能なテレビ装置が開示されている。このテレビ装置では、番組で表示されるＵＲＬを抽出して、該ＵＲＬのホームページにアクセスするか否かをユーザに問い合わせ、ユーザからアクセス指示があった場合に、前記ＵＲＬのホームページを表示するようになっている。

また、近年行われているデジタル放送やワンセグ放送では、放送内容に関連する情報を、ユーザが視聴するテレビへ配信するサービスが行われている。

特開平１０−２５７４０１号公報

ところで特許文献１では、ＵＲＬ等の入力を要せず表示可能なホームページは、番組でＵＲＬが紹介されたホームページに限られるため、このホームページの表示により、ユーザが取得できる情報は放送事業者によって予定された情報だけである。これにより、ユーザが、これとは異なる情報をインターネットから入手したいと欲する場合には、ＵＲＬの文字列をブラウザに入力するなど、煩雑な操作を行う必要がある。

また、ユーザが視聴するテレビに情報を配信する方法では、放送事業者は、データ配信用の設備を構築するために、多大な投資を行う必要がある。

そこで本発明の目的は、上述した従来の技術が有する問題点を解消し、ユーザが興味を持った放送内容についての情報を簡易な操作で表示することができるとともに、該情報の表示のために放送事業者が多大な投資を要することのない表示システム及び表示方法を提供することにある。

上記目的を達成するために、本発明に係る表示システムは、インターネット放送又はテレビ放送の受信映像を画面上に表示可能な表示システムであって、
前記受信映像においてユーザによって指定された箇所の画像を抽出する画像抽出手段と、
前記画像抽出手段によって抽出された画像と意味的関連性のある文字列を取得する文字列取得手段と、
前記文字列取得手段によって取得された文字列に基づいてインターネット上の情報を検索する検索手段と、
前記検索手段によって検索された情報を前記画面上に表示する表示手段とを備えることを特徴とする。

上記目的を達成するために、本発明に係る表示方法は、インターネット放送又はテレビ放送の受信映像を画面上に表示可能な表示システムに適用される表示方法であって、
前記受信映像においてユーザによって指定された箇所の画像を抽出する画像抽出ステップと、
前記画像抽出ステップで抽出された画像と意味的関連性のある文字列を取得する文字列取得ステップと、
前記文字列取得ステップで取得された文字列に基づいてインターネット上の情報を検索する検索ステップと、
前記検索ステップで検索された情報を前記画面上に表示する表示ステップとを有することを特徴とする。

本発明によれば、インターネット放送又はテレビ放送の映像のうち、ユーザが指定した箇所の画像と意味関連性のある文字列が取得される。そして、この文字列に基づいてインターネット検索が行われて、その検索結果が画面上に表示される。これにより、ユーザが興味を持った放送内容に関する情報を、簡易な操作でリアルタイムに表示することができる。

また、放送内容に関する情報がインターネット検索により取得されるので、テレビ放送の放送事業者やインターネット放送局などの運営者、或いは複数の放送を束ねるポータルサイトなどの管理者は、前記放送内容に関する情報をユーザに提供するために、ユーザに対してデータを配信する必要がない。これにより、放送事業者等が多大な投資をする必要がない。

本発明の実施の形態における表示システムを示すブロック図である。 表示システムにおける処理を示すフロチャートである。 嗜好情報登録処理を示すフロチャートである。 図３のステップＳ２０２において、情報端末の表示部の画面上に表示される画像を示す図である。 カテゴリ嗜好テーブルを示す図である。 嗜好情報格納処理を示すフロチャートである。 視聴チャンネル選択処理を示すフロチャートである。 図７のステップＳ４０２において、情報端末の表示部の画面上に表示される画像を示す図である。 視聴チャンネルテーブルを示す図である。 映像受信処理を示すフロチャートである。 興味箇所選択処理を示すフロチャートである。 図１１のステップＳ６０１以降の処理が実行されることで情報端末の表示部の画面上に表示される画像を示す図である。 画像情報テーブルの例を示す図である。 関連情報テーブルの例を示す図である。 情報表示処理を示すフロチャートである。 図２の変形例を示すフロチャートである。

以下、本発明の実施の形態について図面を参照しながら詳細に説明する。

図１は、本発明の実施の形態における表示システム１を示すブロック図である。表示システム１は、情報配信サーバ１０と、情報端末２０とを備えており、情報配信サーバ１０と情報端末２０とは、インターネット３０を介して接続されている。

情報配信サーバ１０は、ワークステーションなどの情報処理装置であり、放送受信部１１と、画像認識部１２と、画像情報処理部１３と、検索部１４と、情報格納部１５と、データ通信部１６とを備えている。

この情報配信サーバ１０では、放送受信部１１によりインターネット放送やテレビ放送の映像を受信することができ、画像認識部１２により受信映像に含まれる画像を抽出することができ、画像情報処理部１３により複数の画像の類似性を判定することができ、検索部１４によりインターネット３０上の情報を検索することができ、情報格納部１５により各種データを格納することができる。

情報端末２０は、パーソナルコンピュータなどの情報処理装置であり、表示部２１と、データ通信部２２と、操作部２３とを備えている。

この情報端末２０では、データ通信部２２により情報配信サーバ１０のデータ通信部１６とデータの送受信を行うことができ、表示部２１により情報配信サーバ１０の放送受信部１１が受信した映像を画面上に表示することができる。また操作部２３は、マウス等のポインティングデバイスやキーボードであり、各種の入力を行うために使用される。

次に、表示システム１における処理の流れについて図２を用いて具体的に説明する。

まず、情報端末２０は、嗜好情報登録処理を行う（ステップＳ１０１）。この処理では、図３に示すように、ユーザが操作部２３により自身のＩＤとパスワードを入力することで、情報端末２０は、ユーザのログイン認証を行う（ステップＳ２０１）。このログイン認証が行われると、情報端末２０は、インターネット３０を介して情報配信サーバ１０と接続される。

次に、情報端末２０は、ユーザに対して、嗜好する番組のカテゴリを問い合わせる（ステップＳ２０２）。

図４は、このステップＳ２０２の処理において、情報端末２０の表示部２１の画面上に表示される画像を示している。図４に示す画像では、情報配信サーバ１０がテレビ放送やインターネット放送を通じて受信する番組のカテゴリが列挙されており、これらカテゴリの左側には、チェックボックス４０が配置されている。図４に示す例では、「ファッション」や「コンピュータ」の左側のチェックボックス４０にチェックマークが入れられている。これは、ユーザが嗜好するカテゴリとして「ファッション」や「コンピュータ」が指定された状態を示しており、チェックマークの入力は、ユーザが情報端末２０の操作部２３を操作することで行われる。

図５は、ステップＳ２０２の処理により作成されるカテゴリ嗜好テーブル（カテゴリ嗜好情報）を示している。このカテゴリ嗜好テーブルでは、ステップＳ２０２で表示部２１の画面上に表示されたカテゴリが示されており、ユーザが嗜好するものとして指定を行った「ファッション」や「コンピュータ」のカテゴリについては、１が対応付けて記録され、ユーザの指定が行われていないカテゴリについては、０が対応付けて記録されている。

そして図３に示すように、ステップＳ２０２の処理が実行されると、情報端末２０は、カテゴリ嗜好テーブルを情報配信サーバ１０に送信する（ステップＳ２０３）。

以上の嗜好情報登録処理（ステップＳ１０１）が実行されると、図２に示すように、情報配信サーバ１０は、嗜好情報格納処理を行う（ステップＳ１０２）。

この処理では、図６に示すように、情報配信サーバ１０は、情報端末２０からカテゴリ嗜好テーブルを受信して（ステップＳ３０１）、該受信したカテゴリ嗜好テーブルを情報格納部１５に格納する（ステップＳ３０２）。

またステップＳ１０１の嗜好情報登録処理が実行されると、図２に示すように、情報端末２０は、視聴チャンネル選択処理を実行する（ステップＳ１０３）。

この処理では、図７に示すように、情報端末２０は、ユーザが視聴を望む放送が、インターネット放送であるか、テレビ放送であるかを問い合わせる（ステップＳ４０１）。この処理においては、上記２つの放送のうち、いずれか１つの選択を促す画像が表示部２１の画面上に表示され、ユーザは、操作部２３によりインターネット放送とテレビ放送とのいずれかを選択する操作を行う。

次に、情報端末２０は、ステップＳ４０１で選択された放送（テレビ放送又はインターネット放送）において、ユーザが視聴を望むチャンネルを問い合わせる（ステップＳ４０２）。図８は、この処理において、情報端末２０の表示部２１の画面上に表示される画像を示している。図８に示す画像は、ステップＳ４０１で選択された放送において、現時点で映像が受信可能なチャンネル・番組名が列挙されている。そして、これらチャンネル・番組名を示す各行の左側には、チェックボックス５０が配置されている。この画像の表示中において、ユーザは、情報端末２０の操作部２３により、いずれかのチェックボックス５０にチェックマークを入れる操作を行う。図８に示す例では、「１チャンネル」の左側のチェックボックス５０にチェックマークが入れられている。これは、ユーザが視聴を望むチャンネルとして、「１チャンネル」が指定された状態を示している。

図９は、ステップＳ４０１，４０２の処理により作成される視聴チャンネルテーブルを示している。この視聴チャンネルテーブルでは、ステップＳ４０１で選択された放送の名称と、ステップＳ４０２で指定されたチャンネルと、該チャンネルで現時点において放送されている番組の放送時間とが示されている。

そして図７に示すように、ステップＳ４０２が実行されると、情報端末２０は、視聴チャンネルテーブルを情報配信サーバ１０に送信する（ステップＳ４０３）。

以上の視聴チャンネル選択処理（ステップＳ１０３）が行われると、図２に示すように、情報配信サーバ１０は、映像受信処理を実行する（ステップＳ１０４）。

この処理では、図１０に示すように、情報配信サーバ１０は、情報端末２０から視聴チャンネルテーブルを受信して（ステップＳ５０１）、該受信した視聴チャンネルテーブルを情報格納部１５に格納する（ステップＳ５０２）。

次に、情報配信サーバ１０は、視聴チャンネルテーブルに基づき映像を受信する（ステップＳ５０３）。例えば、図９に示す視聴チャンネルテーブルがステップＳ５０１，５０２で受信・格納された場合には、テレビ放送の「１チャンネル」の映像を受信する。

次に、情報配信サーバ１０は、受信した映像を情報端末２０に送信する（ステップＳ５０４）。

以上の映像受信処理（ステップＳ１０４）が実行されると、図２に示すように、情報端末２０は、興味箇所指定処理を実行する（ステップＳ１０５）。この処理では、図１１に示すように、情報端末２０は、情報配信サーバ１０から映像を受信して（ステップＳ６０１）、該受信した映像と、該映像のチャンネル情報とを、表示部２１の画面上に表示する（ステップＳ６０２）。

図１２は、ステップＳ６０１以降の処理が実行されることで情報端末２０の表示部２１の画面上に表示される画像を示している。図１２に示す画像は、ステップＳ６０１以降の処理が進行することに伴い段階的に表示される範囲ａ，ｂ，ｃ，ｄ，ｅ，ｆ，ｇをまとめて示しており、ステップＳ６０１で受信された映像は範囲ａに表示され、前記映像のチャンネル情報は範囲ｂに表示されている。

次に、情報端末２０は、ステップＳ６０２で表示された範囲ａの映像において、ユーザが興味を持った箇所の指定を受け付ける。この処理における興味箇所の指定は、ユーザが操作部２３を操作することで行われ、図１２に示す例では、箇所ｘが指定されている。

以上の興味箇所指定処理（ステップＳ１０５）が実行されると、情報配信サーバ１０は、汎用的な画像抽出技術により、ユーザによって指定された箇所の画像を抽出する（ステップＳ１０６）。例えば、ユーザによって図１２に示す箇所ｘが指定されていた場合には、箇所ｘに含まれているリボンの画像が抽出される。

次に、情報配信サーバ１０は、ステップＳ１０６で抽出された画像と、後述の画像情報テーブル（図１３参照）に記録されている画像とを比較して、該画像情報テーブルに記録されている画像のうち、ステップＳ１０６で抽出された画像に最も類似する画像を特定する（ステップＳ１０７）。

図１３は、画像情報テーブルの例を示す図である。画像情報テーブルは、情報配信サーバ１０の情報格納部１５に予め格納されているものであって、情報配信サーバ１０がテレビ放送やインターネット放送を通じて受信する映像に含まれる画像と、該画像に対して意味的関連性のある文字列とが対応付けて記録されている。

図１３に示す画像情報テーブルでは、前記情報配信サーバ１０の受信映像に含まれる画像として、図形１〜５が記録されており、ステップＳ１０６で箇所ｘ（図１２参照）のリボンの画像が抽出された場合には、該リボンの画像に最も類似する画像として、図形１が特定される。

次に、図２に示すように、情報配信サーバ１０は、画像情報テーブルにおいて、ステップＳ１０７で特定した類似画像に対応付けられている文字列を取得する（ステップＳ１０８）。例えば、ステップＳ１０７の処理で、図１３の図形１が類似画像として特定された場合には、図形１に対応付けられている「リボン」の文字列が取得される。

次に、情報配信サーバ１０は、ステップＳ１０８で取得された文字列に基づき、インターネットを検索する（ステップＳ１０９）。この処理では、ステップＳ１０８で取得された文字列を検索キーにして、インターネット３０上の情報が検索されてもよいし、またステップＳ１０８で取得された文字列が複数の単語に分解され、該分解された単語を検索キーにしてインターネット３０上の情報が検索されてもよい。また、ステップＳ１０８で取得された文字列から抽出される概念が解析され、該解析された概念を検索キーにしてインターネット３０上の情報が検索されてもよい。

このステップＳ１０９では、前記インターネット検索の結果、検索キーに関連するホームページのＵＲＬやタイトルなどの情報が取得される。例えば、上述の「リボン」の文字列が検索キーとして使用された場合には、「リボン」に関連するホームページのＵＲＬ等の情報が取得される。

次に、情報配信サーバ１０は、ステップＳ１０４の映像受信処理で受信した映像が、ユーザが嗜好するカテゴリに属する番組の映像であるか否かを判定する（ステップＳ１１０）。この処理は、カテゴリ嗜好テーブル（図５参照）と、視聴チャンネルテーブル（図９参照）と、後述の関連情報テーブル（図１４参照）とに基づき行われる。

図１４は、関連情報テーブルの例を示す図である。この関連情報テーブルは、予め情報格納部１５に格納されるものであって、画像情報テーブル（図１３参照）に示される図形が放送されるチャンネル・放送時間と、前記図形が放送される番組のカテゴリと、画像情報テーブルに示されている文字列と、該文字列に関連する情報（以下、関連情報）とが対応付けて記録されている。

図１４に示す行Ｌは、図１３の行Ｍに対応する行であり、この行Ｌでは、行Ｍの図形１が放送されるチャンネル・放送時間として「１チャンネル」「１０：００〜１２：００」が示され、図形１が放送される番組のカテゴリとして「ファッション」が示され、画像情報テーブルに示されている文字列として「リボン」が示され、「リボン」の関連情報として「リボン」の製造元を示す情報が示されている。なお、関連情報としては、「リボン」の広告を示す情報が記録されてもよい。

そして、ステップＳ１１０における判定処理は以下のようにして行われる。

まず、情報配信サーバ１０は、関連情報テーブル（図１４参照）において、視聴チャンネルテーブル（図９参照）に示されるチャンネル・放送時間と対応付けて記録されているカテゴリを特定する。図９，１４に示されるテーブルが使用される場合には、「１チャンネル」・「１０：００〜１２：００」に対応するカテゴリとして、「ファッション」が特定される。

そして、情報配信サーバ１０は、上述の特定されたカテゴリが、カテゴリ嗜好テーブル（図５参照）で１が付されているか否かを識別する。この結果、カテゴリ嗜好テーブルで１が付されている場合には、情報配信サーバ１０は、ステップＳ１０４の受信映像が、ユーザが嗜好するカテゴリに属する番組の映像であると判定し（ステップＳ１１０でＹＥＳ）、０が付されている場合には、ステップＳ１０４の受信映像が、嗜好カテゴリに属する番組の映像ではないと判定する（ステップＳ１１０でＮＯ）。例えば、上述の特定されたカテゴリが「ファッション」であった場合に、図５のカテゴリ嗜好テーブルに基づきステップＳ１１０の判定が行われると、「ファッション」に１が付されていることから、ＹＥＳと判定される。

そして上述のステップＳ１１０でＹＥＳと判定された場合には、情報配信サーバ１０は、ステップＳ１０６で抽出した画像の情報と、ステップＳ１０８で取得した文字列の情報と、該文字列に関連情報テーブル（図１４参照）において対応付けられている関連情報と、ステップＳ１０９の検索結果を示す情報とを、情報端末２０に送信する（ステップＳ１１１）。

一方、ステップＳ１１０でＮＯと判定された場合には、情報配信サーバ１０は、ステップＳ１１１で送信される情報のうち、関連情報を除いた情報を、情報端末２０に送信する（ステップＳ１１２）。

以上のステップＳ１１１又はステップＳ１１２の処理が行われると、図２に示すように、情報端末２０は、情報表示処理を実行する（ステップＳ１１３）。

この処理では、図１５に示すように、情報端末２０は、ステップＳ１１１又はステップＳ１１２で情報配信サーバ１０から送信された各種情報を受信する（ステップＳ７０１）。

次に、情報端末２０は、ステップＳ７０１で受信した情報を、表示部２１の画面上に表示する（ステップＳ７０２）。具体的には、ステップＳ１１１が実行されていた場合には、ステップＳ１０６の抽出画像と、ステップＳ１０８で特定された文字列と、該文字列の関連情報と、ステップＳ１０９の検索結果とが、表示部２１の画面上に表示される。また、ステップＳ１１２が実行されていた場合には、ステップＳ１０６の抽出画像と、ステップＳ１０８で特定された文字列と、ステップＳ１０９の検索結果とが、表示部２１の画面上に表示される。

図１２に示す範囲ｃは、ステップＳ１０６の抽出画像が表示される範囲であり、ユーザが指定した箇所ｘのリボンの画像が表示されている。ユーザは、範囲ｃの画像を確認することで、自身が指定した箇所の画像が、正確に抽出されているかを確認することができる。

また、範囲ｄは、ステップＳ１０８で取得された文字列が表示される範囲であり、箇所ｘの画像と意味的関連性のあるキーワードとして「リボン」が表示されている。ユーザは、範囲ｄを確認することで、自身が指定した箇所ｘの画像について、正確な意味の解釈が行われているか否かを確認することができる。

また、範囲ｅは、文字列の関連情報が表示される範囲である。この関連情報は、ステップＳ１０４の受信映像がユーザの嗜好カテゴリに属する番組の映像であると判定された結果（ステップＳ１１０でＹＥＳ）、ステップＳ１１１が実行されることで表示されるものであって、ユーザは、この関連情報を確認することで、自身が指定した箇所ｘの画像に関して、詳細な情報を得ることができる。

また、範囲ｆ，ｇは、ステップＳ１０９の検索結果が表示される範囲である。範囲ｆでは、「一般ウェブサイト」というタイトルが付されており、「リボン」の結び方や歴史の説明を行うホームページのリンクが表示されている。また範囲ｇでは、「スポンサーサイト」というタイトルが付されており、「リボン」の広告が行われているホームページのリンクが表示されている。

ユーザは、操作部２３により、範囲ｆ，ｇに表示されたリンクを指定する操作を行うことで、「リボン」に関連したホームページを、表示部２１の画面上に表示させることができる。

本実施の形態によれば、インターネット放送又はテレビ放送の映像のうち、ユーザが指定した箇所の画像と意味関連性のある文字列が取得される。そして、この文字列に基づいてインターネット検索が行われて、その検索結果が画面上に表示される。これにより、ユーザが興味を持った放送内容に関する情報を、簡易な操作でリアルタイムに表示することができる。

また、インターネット検索に使用される文字列が画面上に表示されることから、ユーザは、インターネット検索に用いられる用語を把握することができる。これにより、画面上に表示された検索結果が所望の情報であるか否かを判断することができる。

また、放送内容に関する情報がインターネット検索により取得されるので、テレビ放送の放送事業者やインターネット放送局などの運営者、或いは複数の放送を束ねるポータルサイトなどの管理者は、前記放送内容に関する情報をユーザに提供するために、ユーザに対してデータを配信する必要がない。これにより、放送事業者等が多大な投資をする必要がない。

また、情報配信サーバ１０に受信される映像がユーザの嗜好カテゴリに属する番組の映像である場合には、表示部２１の画面上に、インターネット検索の結果とともに、予め表示システム１に登録されている前記文字列の関連情報が表示される。これにより、ユーザの嗜好に応じてユーザに提供する情報量の調整が図れ、受信映像が嗜好カテゴリに属する番組の映像である場合には、ユーザは、興味を持った放送内容について詳細な情報を得ることができる。

本発明は、上述の実施の形態に限定されず、特許請求の範囲において種々改変することができる。

例えば、図２に示すフロチャートは、図１６に示すフロチャートのように変更されても良い。図１６中の（）内には、図１６の各処理が対応する図２の処理の番号を示している。図１６のフロチャートでは、ステップＳ１１０に対応するステップＳ８０９の処理が、ステップＳ１０９に対応するステップＳ８１０，８１２の処理の前に行われており、ステップＳ８０９でＹＥＳ，ＮＯと判定されたいずれの場合においても、その後、ステップＳ８１０又はステップＳ８１２でインターネット検索が行われる。

そして、ステップＳ８０９でＹＥＳと判定された処理の流れでは、ステップＳ８１０の後に、ステップＳ８０６で抽出した画像の情報と、ステップＳ８０８で取得した文字列の情報と、該取得した文字列に関連情報テーブルにおいて対応付けられている関連情報と、ステップＳ８１０の検索結果を示す情報とを、情報端末２０に送信する（ステップＳ８１１）。

また、ステップＳ８０９でＮＯと判定された処理の流れでは、ステップＳ８１２の後に、ステップＳ８０６で抽出した画像の情報と、ステップＳ８０８で取得した文字列の情報と、ステップＳ８１２の検索結果を示す情報とを、情報端末２０に送信する（ステップＳ８１３）。

このようにしても、ステップＳ８１４の情報表示処理において、図１２の画像中に示される各種情報を、表示部２１の画面上に表示させることができる。

また、情報配信サーバ１０と情報端末２０とはローカルエリアネットワークを介して接続され、情報配信サーバ１０のみがインターネット３０に接続されるようにしてもよい。

また本実施形態の表示システム１における各種処理を行う手段および方法は、専用のハードウェア回路、またはプログラムされたコンピュータのいずれによっても実現することが可能である。ここで、上記プログラムは、例えばフレキシブルディスクやＣＤ−ＲＯＭ等のコンピュータ読取可能な情報記録媒体によって提供されてもよい。この場合、コンピュータ読取可能な情報記録媒体に記録されたプログラムは、通常、ハードディスク等の記憶部に転送されて記憶される。また、上記プログラムは、単独のアプリケーションソフトとして提供されてもよいし、装置の一機能としてその装置のソフトウェアに組み込まれてもよい。

本発明に係る表示システムについて、好ましくは、前記受信画像に含まれる画像と、該画像に対して意味的関連性のある文字列とを対応付けて格納する画像情報格納手段をさらに有し、
前記文字列取得手段は、前記画像情報格納手段に格納されている画像のうち、前記画像抽出手段によって抽出された画像と最も類似する画像を検索するとともに、該検索した画像に対応付けて前記画像情報格納手段に格納されている文字列を取得することを特徴とする。

また、あるいはさらに、前記インターネット放送又はテレビ放送によって放送される番組のうち、ユーザが嗜好する番組のカテゴリを識別可能なカテゴリ嗜好情報を格納する嗜好情報格納手段と、
前記嗜好情報格納手段に格納されたカテゴリ嗜好情報に基づき、前記受信映像が、ユーザが嗜好するカテゴリに属する番組の映像であるか否かを判定する判定手段と、
前記画像情報格納手段に格納されている文字列と、該文字列の関連情報とを対応付けて格納する関連情報格納手段とをさらに有し、
前記表示手段は、前記判定手段によって前記受信映像が前記ユーザが嗜好するカテゴリに属する番組の映像であると判定された場合、前記検索手段によって検索された情報とともに、前記関連情報格納手段において前記文字列取得手段によって取得された文字列に対応付けて格納されている関連情報を、前記画面上に表示する情報を表示することを特徴とする。

また、あるいはさらに、前記表示手段は、前記検索手段によって検索された情報とともに、前記文字列取得手段が取得した文字列を画面上に表示することを特徴とする。

また、あるいはさらに、前記検索手段は、前記文字列取得手段によって取得された文字列を検索キーにして、インターネット上の情報を検索することを特徴とする。

また、あるいはさらに、前記検索手段は、前記文字列取得手段によって取得された文字列を複数の単語に分解して、該分解した単語を検索キーにして、インターネット上の情報を検索することを特徴とする。

また、あるいはさらに、前記検索手段は、前記文字列から抽出される概念を解析して、該解析した概念を検索キーにして、インターネット上の情報を検索することを特徴とする。

本発明に係る表示方法について、好ましくは、前記表示システムには、前記受信画像に含まれる画像と、該画像に対して意味的関連性のある文字列とを対応付けて格納する画像情報格納手段が設けられ、
前記文字列取得ステップでは、前記画像情報格納手段に格納されている画像のうち、前記画像抽出ステップで抽出された画像と最も類似する画像が検索されるとともに、該検索された画像に対応付けて前記画像情報格納手段に格納されている文字列が取得されることを特徴とする。

また、あるいはさらに、前記表示システムには、インターネット放送又はテレビ放送によって放送される番組のうち、ユーザが嗜好する番組のカテゴリを識別可能なカテゴリ嗜好情報を格納する嗜好情報格納手段、及び前記画像情報格納手段に格納されている文字列と該文字列の関連情報とを対応付けて格納する関連情報格納が設けられ、
前記嗜好情報格納手段に格納されたカテゴリ嗜好情報に基づき、前記受信映像が、ユーザが嗜好するカテゴリに属する番組の映像であるか否かを判定する判定ステップをさらに有し、
前記表示ステップでは、前記判定ステップで前記受信映像が前記ユーザが嗜好するカテゴリに属する番組の映像であると判定された場合、前記検索ステップで検索された情報とともに、前記関連情報格納手段において前記文字列取得ステップで取得された文字列と対応付けて格納されている関連情報が、前記画面上に表示されることを特徴とする。

また、あるいはさらに、前記表示ステップでは、前記検索ステップによって検索された情報とともに、前記文字列取得ステップで取得された文字列が画面上に表示されることを特徴とする。

また、あるいはさらに、前記検索ステップでは、前記文字列取得ステップで取得された文字列を検索キーにして、インターネット上の情報が検索されることを特徴とする。

また、あるいはさらに、前記検索ステップでは、前記文字列取得ステップで取得された文字列が複数の単語に分解されるとともに、該分解された単語を検索キーにしてインターネット上の情報が検索されることを特徴とする。

また、あるいはさらに、前記検索ステップでは、前記文字列取得ステップで取得された文字列から抽出される概念が解析されるとともに、該解析された概念を検索キーにしてインターネット上の情報が検索されることを特徴とする。

１ 表示システム
１０ 情報配信サーバ
１１ 放送受信部
１２ 画像認識部
１３ 画像情報処理部
１４ 検索部
１５ 情報格納部
１６ 情報配信サーバのデータ通信部
２０ 情報端末
２１ 表示部
２２ 情報端末のデータ通信部
２３ 操作部
３０ インターネット

Claims (14)

1. インターネット放送又はテレビ放送の受信映像を画面上に表示可能な表示システムであって、
   前記受信映像においてユーザによって指定された箇所の画像を抽出する画像抽出手段と、
   前記画像抽出手段によって抽出された画像と意味的関連性のある文字列を取得する文字列取得手段と、
   前記文字列取得手段によって取得された文字列に基づいてインターネット上の情報を検索する検索手段と、
   前記検索手段によって検索された情報を前記画面上に表示する表示手段とを備えることを特徴とする表示システム。
2. 前記受信画像に含まれる画像と、該画像に対して意味的関連性のある文字列とを対応付けて格納する画像情報格納手段をさらに有し、
   前記文字列取得手段は、前記画像情報格納手段に格納されている画像のうち、前記画像抽出手段によって抽出された画像と最も類似する画像を検索するとともに、該検索した画像に対応付けて前記画像情報格納手段に格納されている文字列を取得することを特徴とする請求項１に記載の表示システム。
3. 前記インターネット放送又はテレビ放送によって放送される番組のうち、ユーザが嗜好する番組のカテゴリを識別可能なカテゴリ嗜好情報を格納する嗜好情報格納手段と、
   前記嗜好情報格納手段に格納されたカテゴリ嗜好情報に基づき、前記受信映像が、ユーザが嗜好するカテゴリに属する番組の映像であるか否かを判定する判定手段と、
   前記画像情報格納手段に格納されている文字列と、該文字列の関連情報とを対応付けて格納する関連情報格納手段とをさらに有し、
   前記表示手段は、前記判定手段によって前記受信映像が前記ユーザが嗜好するカテゴリに属する番組の映像であると判定された場合、前記検索手段によって検索された情報とともに、前記関連情報格納手段において前記文字列取得手段によって取得された文字列に対応付けて格納されている関連情報を、前記画面上に表示する情報を表示することを特徴とする請求項２に記載の表示システム。
4. 前記表示手段は、前記検索手段によって検索された情報とともに、前記文字列取得手段が取得した文字列を画面上に表示することを特徴とする請求項１ないし３のいずれか１項に記載の表示システム。
5. 前記検索手段は、前記文字列取得手段によって取得された文字列を検索キーにして、インターネット上の情報を検索することを特徴とする請求項１ないし４のいずれか１項に記載の表示システム。
6. 前記検索手段は、前記文字列取得手段によって取得された文字列を複数の単語に分解するとともに、該分解した単語を検索キーにしてインターネット上の情報を検索することを特徴とする請求項１ないし４のいずれか１項に記載の表示システム。
7. 前記検索手段は、前記文字列取得手段によって取得された文字列から抽出される概念を解析するとともに、該解析した概念を検索キーにしてインターネット上の情報を検索することを特徴とする請求項１ないし４のいずれか１項に記載の表示システム。
8. インターネット放送又はテレビ放送の受信映像を画面上に表示可能な表示システムに適用される表示方法であって、
   前記受信映像においてユーザによって指定された箇所の画像を抽出する画像抽出ステップと、
   前記画像抽出ステップで抽出された画像と意味的関連性のある文字列を取得する文字列取得ステップと、
   前記文字列取得ステップで取得された文字列に基づいてインターネット上の情報を検索する検索ステップと、
   前記検索ステップで検索された情報を前記画面上に表示する表示ステップとを有することを特徴とする表示方法。
9. 前記表示システムには、前記受信画像に含まれる画像と、該画像に対して意味的関連性のある文字列とを対応付けて格納する画像情報格納手段が設けられ、
   前記文字列取得ステップでは、前記画像情報格納手段に格納されている画像のうち、前記画像抽出ステップで抽出された画像と最も類似する画像が検索されるとともに、該検索された画像に対応付けて前記画像情報格納手段に格納されている文字列が取得されることを特徴とする請求項８に記載の表示方法。
10. 前記表示システムには、インターネット放送又はテレビ放送によって放送される番組のうち、ユーザが嗜好する番組のカテゴリを識別可能なカテゴリ嗜好情報を格納する嗜好情報格納手段、及び前記画像情報格納手段に格納されている文字列と該文字列の関連情報とを対応付けて格納する関連情報格納が設けられ、
    前記嗜好情報格納手段に格納されたカテゴリ嗜好情報に基づき、前記受信映像が、ユーザが嗜好するカテゴリに属する番組の映像であるか否かを判定する判定ステップをさらに有し、
    前記表示ステップでは、前記判定ステップで前記受信映像が前記ユーザが嗜好するカテゴリに属する番組の映像であると判定された場合、前記検索ステップで検索された情報とともに、前記関連情報格納手段において前記文字列取得ステップで取得された文字列と対応付けて格納されている関連情報が、前記画面上に表示されることを特徴とする請求項９に記載の表示方法。
11. 前記表示ステップでは、前記検索ステップによって検索された情報とともに、前記文字列取得ステップで取得された文字列が画面上に表示されることを特徴とする請求項８ないし１０のいずれか１項に記載の表示方法。
12. 前記検索ステップでは、前記文字列取得ステップで取得された文字列を検索キーにして、インターネット上の情報が検索されることを特徴とする請求項８ないし１１のいずれか１項に記載の表示方法。
13. 前記検索ステップでは、前記文字列取得ステップで取得された文字列が複数の単語に分解されるとともに、該分解された単語を検索キーにしてインターネット上の情報が検索されることを特徴とする請求項８ないし１１のいずれか１項に記載の表示方法。
14. 前記検索ステップでは、前記文字列取得ステップで取得された文字列から抽出される概念が解析されるとともに、該解析された概念を検索キーにしてインターネット上の情報が検索されることを特徴とする請求項８ないし１１のいずれか１項に記載の表示方法。