JP2009118411A - デジタル放送受信装置及び画像対象物検索システム - Google Patents

Abstract

【課題】より容易に、画像データから所定の対象物を特定することができるデジタル放送受信装置及び画像対象物検索システムを実現する。
【解決手段】デジタル放送受信装置１００において、アンテナ１を介して受信したデジタル放送信号に基づく映像を視聴中のユーザが、その映像中の対象物である人物の名前や、その人物に関する詳しい情報を知りたい場合などに、抽出した画像データを画像照合装置３００に送出することによって、その画像照合装置３００の基準画像データＤＢ３０ａに蓄積されている無数の基準画像データと、抽出された画像データとのマッチング処理を行い、その画像データに対応する基準画像データに関連付けられている対象物情報を取得して、その対象物情報である人物の名前や、その人物に関するプロフィールなどの情報を映像出力部２０１に表示することを可能にした。
【選択図】図１

Description

本発明は、デジタル放送受信装置及び画像対象物検索システムに関する。

従来、人物が含まれている画像データから顔画像を抽出し、その抽出した顔画像における特徴点データ等に基づき、その人物を特定する技術が知られている（例えば、特許文献１〜５参照。）。
特開２００６−３５０９２５号公報 特開２００５−１９７９８７号公報 特開２００７−２１９７１３号公報 特開２００６−３１８３７５号公報 特開２００４−１９２２１３号公報

しかしながら、上記従来技術の場合、人物を特定するための特徴点データや、その人物に関連する付随データなどが少ないために、画像データから人物などの対象物を特定する処理に時間を要してしまうなど、その対象物特定処理が困難になることがあるという問題があった。

本発明の目的は、より容易に、画像データから所定の対象物を特定することができるデジタル放送受信装置及び画像対象物検索システムを提供することである。

以上の課題を解決するため、請求項１に記載の発明は、
デジタル放送信号を受信して、その受信したデジタル放送信号に基づく映像を表示部に表示するデジタル放送受信装置であって、
前記表示部に表示される映像から、所望する対象物に関する複数の画像データを抽出する画像抽出手段と、
前記画像抽出手段により抽出された複数の画像データを、様々な対象物に関連付けられている無数の基準画像データを蓄積している画像照合装置において、その基準画像データと照合するために、前記画像照合装置に送出する画像データ送出手段と、
前記画像照合装置によって前記画像データと照合された前記基準画像データが示す、前記対象物に関する対象物情報を取得する対象物情報取得手段と、
前記対象物情報取得手段により取得された対象物情報を、前記表示部に表示する対象物情報表示制御手段と、
を備えることを特徴とする。

請求項２に記載の発明は、請求項１に記載のデジタル放送受信装置において、
前記画像抽出手段により抽出された前記画像データに対応する前記対象物に関連する付属情報を入力する付属情報入力手段を備え、
前記画像データ送出手段は、前記複数の画像データとともに、前記付属情報入力手段により入力された前記付属情報を前記画像照合装置に送出することを特徴とする。

請求項３に記載の発明は、
デジタル放送信号を受信して、その受信したデジタル放送信号に応じた映像データに基づく映像を表示部に表示するデジタル放送受信装置と、様々な対象物に関連付けられている無数の基準画像データを蓄積している画像照合装置とが、通信回線を介して接続されている画像対象物検索システムであって、
前記デジタル放送受信装置は、
前記表示部に表示される映像から、所望する対象物に関する複数の画像データを抽出する画像抽出手段と、
前記画像抽出手段により抽出された複数の画像データに対応する前記対象物に関連する付属情報を入力する付属情報入力手段と、
前記画像抽出手段により抽出された複数の画像データと、前記付属情報入力手段により入力された前記付属情報を、前記画像照合装置に送出する画像データ送出手段と、
前記画像照合装置によって前記画像データと照合された前記基準画像データが示す、前記対象物に関する対象物情報を取得する対象物情報取得手段と、
前記対象物情報取得手段により取得された対象物情報を、前記表示部に表示する対象物情報表示制御手段と、を備え、
前記画像照合装置は、
前記デジタル放送受信装置から送出された前記複数の画像データと、予め蓄積している前記無数の基準画像データとを照合する照合手段と、
前記照合手段により前記画像データと照合された前記基準画像データが示す、前記対象物に関する対象物情報を、前記デジタル放送受信装置に返送する対象物情報返送手段と、を備えることを特徴とする。

本発明によれば、デジタル放送受信装置や、そのデジタル放送受信装置を備える画像対象物検索システムにおいて、受信されたデジタル放送信号に基づいて表示部に表示される映像から、その映像中の対象物（例えば、人物）に関する複数の画像データ（例えば、人物の顔画像）を抽出することができる。
そして、映像を視聴中のユーザが、その映像中の対象物の名前や名称、その対象物に関する詳しい情報を知りたい場合などに、抽出した画像データを画像照合装置に送出することによって、その画像照合装置において蓄積されている無数の基準画像データと、抽出された画像データとのマッチング処理を行い、その画像データに対応する基準画像データに関連付けられている対象物情報を取得して、その対象物情報である対象物の名前や名称、その対象物に関する詳しい情報などを表示部に表示することができる。
よって、ユーザは、デジタル放送受信装置において映像を視聴中に、その名前や名称を思い出せない対象物や、より詳しい情報を知りたい対象物が映像中にあった場合に、その対象物に関する画像データを抽出して、画像照合装置に送出することにより、画像照合装置において照合されて検索された、その対象物に関する対象物情報を得ることができる。

特に、デジタル放送受信装置において複数の画像データを抽出して、その複数の画像データに基づき対象物の検索を行うことや、また、その画像データに対して、ユーザが知り得る付属情報を付与して、その付属情報に基づく検索情報の絞り込みを行うなどすることによって、より正確に対象物の検索を行ったり、より短時間で対象物の検索を行ったりすることが可能になる。
このように、デジタル放送受信装置や画像対象物検索システムにおいて、表示部に表示される映像中の対象物に関する複数の画像データを抽出することによって、その映像中の対象物ついて、名前や名称などの情報を検索して調べることができる。そして、複数の画像データや、その画像データに関する付属情報に基づき、対象物の検索を行うことによって、より容易に画像データから所定の対象物を特定することができる。

以下、図を参照して、本発明に係るデジタル放送受信装置及び画像対象物検索システムの実施形態を詳細に説明する。なお、本実施形態におけるデジタル放送受信装置は、デジタルテレビ放送を受信し、放送番組の視聴を可能にするデジタルテレビを例に説明する。
なお、発明の範囲は、図示例に限定されない。

デジタル放送受信装置１００は、図１に示すように、アンテナ１、チューナ２、復調部３、分離部４、デコーダ５、ＯＳＤ処理部６、操作部７、通信部８、制御部１０等を備えて構成されている。
また、デジタル放送受信装置１００は、映像を表示する表示部としての映像出力部２０１と、音声を出力する音声出力部２０２と、を有する映像／音声出力装置２００を備えている。

更に、デジタル放送受信装置１００は、通信回線が結ばれたネットワークＮを介して、画像照合装置３００と接続されている。
このデジタル放送受信装置１００と画像照合装置３００とがネットワークを介して接続されて、画像対象物検索システム４００が構成されている。

アンテナ１は、例えば、パラボラアンテナやＵＨＦアンテナ等であり、デジタル放送信号を受信し、ＲＦ（Radio Frequency）信号をチューナ２に出力する。このデジタル放送信号に含まれる物理チャンネルの放送データは、例えば、ＭＰＥＧ２−ＴＳ方式により多重化されている。

チューナ２は、例えば、ミキサ（図示省略）や選局回路（図示省略）等を備えて構成される。そして、チューナ２におけるミキサや選局回路等により、アンテナ１から入力されたＲＦ信号から、ユーザが所望する物理チャンネルのＩＦ（Intermediate Frequency）信号が生成される。チューナ２により生成されたＩＦ信号は、復調部３に出力される。

復調部３は、例えば、逆インタリーブ回路（図示省略）、誤り訂正回路（図示省略）、復調回路（図示省略）等を備えて構成される。そして、復調部３における逆インタリーブ回路、誤り訂正回路、復調回路等により、チューナ２において生成されたＩＦ信号に誤り訂正処理や復調処理等が施され、放送データとしてのＴＳ（Transport Stream）信号に変換される。復調部３により生成されたＴＳ信号は、分離部４に出力される。

分離部４は、例えば、復調部３やデコーダ５と接続されており、復調部３から入力されるＴＳ信号を映像データ、音声データ、ＰＳＩ／ＳＩ（Program Specific Information/Service Information）に分離して、デコーダ５に出力する。

デコーダ５は、例えば、分離部４から入力される映像データや音声データに復号処理を行って、その映像データや音声データを、映像／音声出力装置２００に出力する。

ＯＳＤ処理部６は、例えば、デコーダ５から映像／音声出力装置２００へ出力される映像データに、制御部１０から入力される制御信号に従ってＯＳＤ（On Screen Display）信号を合成する。

操作部７は、例えば、デジタル放送受信装置１００の本体に一体に設けられた操作パネルや、装置本体（１００）とは別体に設けられたリモコン機器などであって、デジタル放送受信装置１００を動作させるために、様々な操作入力を行うための各種スイッチやキーなどを備えている。

通信部８は、例えば、ネットワークＮを介して画像照合装置３００等とインターネット接続されており、各種データや情報の送受信を行う。

映像出力部２０１は、例えば、液晶パネル等であって、デジタル放送信号に応じた映像データに基づく映像や、ＯＳＤ画面、ポップアップ画面などを表示する

音声出力部２０２は、例えば、スピーカ等であって、デジタル放送信号に応じた音声データに基づく音声を出力する。

制御部１０は、図１に示すように、ＣＰＵ（Central Processing Unit）１１、ＲＡＭ（Random Access Memory）１２、記憶部１３等を備えて構成されている。
そして、制御部１０は、チューナ２、復調部３、分離部４、デコーダ５、ＯＳＤ処理部６、操作部７、通信部８、映像／音声出力装置２００等と接続され、デジタル放送受信装置１００の各部の制御を行う。

ＣＰＵ１１は、記憶部１３に格納された処理プログラム等を読み出して、ＲＡＭ１２に展開して実行することにより、デジタル放送受信装置１００全体の制御を行う。

ＲＡＭ１２は、ＣＰＵ１１により実行された処理プログラム等を、ＲＡＭ１２内のプログラム格納領域に展開するとともに、入力データや上記処理プログラムが実行される際に生じる処理結果や処理データ等をＲＡＭ１２内のデータ格納領域に格納する。

記憶部１３は、例えば、プログラムやデータ等が予め記憶されている記録媒体（図示省略）を有しており、この記録媒体は、例えば、半導体メモリ等で構成されている。
また、記憶部１３は、ＣＰＵ１１がデジタル放送受信装置１００全体を制御する機能を実現させるための各種データ、各種処理プログラム、これらプログラムの実行により処理されたデータ等を記憶する。より具体的に、記憶部１３は、例えば、図１に示すように、画像抽出プログラム１３ａ、付属情報入力プログラム１３ｂ、画像データ送出プログラム１３ｃ、対象物情報取得プログラム１３ｄ、対象物情報表示制御プログラム１３ｅ等を格納している。

画像抽出プログラム１３ａは、映像出力部２０１に表示される映像から、所望する対象物（例えば、人物）に関する複数の画像データを抽出する機能をＣＰＵ１１に実現させるプログラムである。
つまり、ＣＰＵ１１が画像抽出プログラム１３ａを実行することにより、映像出力部２０１に表示されている映像中、任意の範囲に表示されている対象物の画像に対応する画像データを複数抽出する画像抽出手段として機能する。
例えば、画像抽出手段としてのＣＰＵ１１は、映像出力部２０１に表示されている映像に応じた画像データをスクリーンキャプチャして抽出し、ＲＡＭ１２に保存する処理を行う。なお、画像抽出手段としてのＣＰＵ１１によるスクリーンキャプチャによって、対象物としての人物の顔画像を抽出する場合に、周知の顔画像認識処理に応じて自動的にフレームによって囲われた領域の顔画像を抽出してもよく、また、リモコン操作などによりユーザが所望する範囲に合わせて調整したサイズのフレームで囲った領域の顔画像を切り出すように抽出してもよい。

付属情報入力プログラム１３ｂは、画像抽出手段としてのＣＰＵ１１により抽出された複数の画像データに対応し、その画像中の対象物に関連する付属情報を入力する機能をＣＰＵ１１に実現させるプログラムである。
つまり、ＣＰＵ１１が付属情報入力プログラム１３ｂを実行することにより、ユーザによる操作部７の操作などによって、画像データに対応する対象物に関連する付属情報を、その画像データに対応付けるように入力する付属情報入力手段として機能する。なお、この操作部７は、付属情報入力手段の一部として機能することとなる。
例えば、付属情報入力手段としてのＣＰＵ１１は、画像データとして抽出された対象物としての人物に関してユーザが認識している事柄、例えば、男女といった性別や、俳優かスポーツ選手かといったその人物が属するジャンルなどの付属情報の入力を受け付けて、その画像データに対応付ける処理を行う。

画像データ送出プログラム１３ｃは、画像抽出手段としてのＣＰＵ１１により抽出された複数の画像データと、付属情報入力手段としてのＣＰＵ１１により入力された付属情報を、通信部８を介して画像照合装置３００に送出する機能をＣＰＵ１１に実現させるプログラムである。
つまり、ＣＰＵ１１が画像データ送出プログラム１３ｃを実行することにより、抽出された複数の画像データを画像照合装置３００において蓄積されている無数の基準画像データと照合するために、その画像データを付属情報とともに通信部８を介しネットワークＮを通じて、画像照合装置３００に送出する画像データ送出手段として機能する。
なお、この通信部８は、画像データ送出手段の一部として機能することとなる。

対象物情報取得プログラム１３ｄは、画像照合装置３００によって画像データと照合された基準画像データが示す対象物に関する対象物情報を、通信部８を介して取得する機能をＣＰＵ１１に実現させるプログラムである。
つまり、ＣＰＵ１１が対象物情報取得プログラム１３ｄを実行することにより、画像照合装置３００における照合処理によって、画像データと照合された基準画像データが示す対象物に関する対象物情報を、ネットワークＮを通じ、通信部８を介して受信するように取得する対象物情報取得手段として機能する。
なお、この通信部８は、対象物情報取得手段の一部として機能することとなる。

対象物情報表示制御プログラム１３ｅは、対象物情報取得手段としてのＣＰＵ１１により取得された対象物情報を、映像出力部２０１に表示する機能をＣＰＵ１１に実現させるプログラムである。
つまり、ＣＰＵ１１が対象物情報表示制御プログラム１３ｅを実行することにより、通信部８を介して取得した対象物情報を映像出力部２０１に表示する対象物情報表示制御手段として機能する。

画像照合装置３００は、図示しないＣＰＵ、ＲＡＭ、記憶部などを備えている制御部３０等を有しており、その制御部３０の記憶部には、基準画像データＤＢ（データベース）３０ａ、照合プログラム３０ｂ、対象物情報返送プログラム３０ｃ等が格納されている。

基準画像データＤＢ３０ａは、様々な対象物に関連付けられている無数の基準画像データを蓄積しているデータベースである。
例えば、基準画像データＤＢ３０ａは、様々な人物の顔画像を示す基準画像データに対して、その人物の名前やプロフィールなどの対象物情報を関連付けて記憶し、蓄積している。
なお、基準画像データＤＢ３０ａにおいて、様々な人物の顔画像を示す基準画像データは、男女別、職業などのジャンル別（俳優、スポーツ選手、政治家、お笑い芸人、その他）に分類されて格納されている。

照合プログラム３０ｂは、デジタル放送受信装置１００から送出された複数の画像データと、基準画像データＤＢ３０ａに予め蓄積している無数の基準画像データとを照合する機能を制御部３０のＣＰＵに実現させるプログラムである。
つまり、制御部３０のＣＰＵが照合プログラム３０ｂを実行することにより、デジタル放送受信装置１００から送出された対象物の画像データと基準画像データＤＢ３０ａの基準画像データとを照合することで、その画像データにおける特徴点と共通する特徴点を有している基準画像データや、その画像データと所定の割合以上に類似している基準画像データを選出する処理を行う照合手段として機能する。
例えば、照合手段としての制御部３０のＣＰＵは、画像データにおける対象物としての人物の顔画像と、基準画像データにおける人物の顔画像とのマッチング処理を行い、輪郭や目鼻口などの特徴点が類似するポイントを照合することで、その画像データと所定の割合以上に類似している基準画像データを選出する。なお、照合手段としての制御部３０のＣＰＵは、例えば、マッチング処理によって６０％以上の割合で類似していると照合した複数の基準画像データを選出するように、８５％類似の基準画像データを第１候補、７０％類似の基準画像データを第２候補として、複数の候補を選出するようにしてもよく、また、最良と判断される１つの候補を選出するようにしてもよい。
なお、この画像データを照合するマッチング処理の際に、画像データに付加されている付属情報を参考にし、対象となる基準画像データを絞り込むなどして照合することが好ましい。

対象物情報返送プログラム３０ｃは、照合手段としての制御部３０のＣＰＵにより画像データと照合された基準画像データが示す、対象物に関する対象物情報を、デジタル放送受信装置１００に返送する機能を制御部３０のＣＰＵに実現させるプログラムである。
つまり、制御部３０のＣＰＵが、対象物情報返送プログラム３０ｃを実行することにより、照合されて選出された基準画像データに関連付けられている対象物に関する対象物情報を基準画像データＤＢ３０ａから取り出し、その対象物情報をネットワークＮを通じてデジタル放送受信装置１００に返送する対象物情報返送手段として機能する。
例えば、対象物情報返送手段としての制御部３０のＣＰＵは、第１候補として選出された基準画像データに関連付けられている対象物である人物に関するプロフィール（対象物情報）と、第２候補として選出された基準画像データに関連付けられている対象物である人物に関するプロフィール（対象物情報）を、デジタル放送受信装置１００から送出された対象物の画像データに応じた対象物情報として、ネットワークＮを介してデジタル放送受信装置１００に返送する。

次に、本発明に係るデジタル放送受信装置１００（画像対象物検索システム４００）における画像検索処理について、図２に示すフローチャートに基づき説明する。

まず、デジタル放送受信装置１００の電源が投入されると、図３に示すように、ＣＰＵ１１はアンテナ１を介して受信したデジタル放送信号に基づく映像を映像出力部２０１に表示する（ステップＳ１０１）。

そして、映像出力部２０１に表示されている映像を視聴中のユーザが、その映像中の人物の名前がわからないなどしたために、ユーザがリモコンなどの操作部７を操作して画像検索処理を実行すると（ステップＳ１０２；Ｙｅｓ）、図４に示すように、映像中の対象物である人物の顔画像を抽出するためのフレームＦが、ＣＰＵ１１によって映像出力部２０１に表示される（ステップＳ１０３）。

次いで、ユーザがリモコンなどの操作部７を操作することにより、フレームＦによって囲われた範囲の顔画像の画像データを抽出すると（ステップＳ１０４；Ｙｅｓ）、ステップＳ１０５へ進む。
なお、周知の顔画像認識処理に応じて、自動的にフレームＦによって囲われた顔画像を抽出する場合には、ユーザがリモコン（操作部７）の所定のスイッチを押下し操作したタイミングに、そのフレームＦによって囲われていた顔画像の画像データが抽出される。
また、リモコン操作などによりユーザが所望する範囲から顔画像をフレームＦで囲って抽出する場合には、ユーザがリモコン（操作部７）における所定のキー操作を行い、フレームＦの大きさを調整して任意の範囲をフレームＦで囲って切り出した顔画像の画像データが抽出される。

ステップＳ１０５において、ＣＰＵ１１は、図５に示すように、映像出力部２０１に、付属情報入力画面２１を表示する（ステップＳ１０５）。
なお、この付属情報入力画面２１には、ステップＳ１０４において抽出された複数（本実施形態、図５では２つ）の画像データに対応する顔画像２０ａ、２０ｂが表示されている。
そして、この付属情報入力画面２１において、対象物である人物の付属情報の入力が行われる（ステップＳ１０６）。例えば、ユーザは、検索対象の人物が男性であって、スポーツ選手であることを認識しているので、リモコン（操作部７）操作によって付属情報入力画面２１において、「男性」「スポーツ選手」を選択して、付属情報として入力する。

次いで、付属情報入力画面２１における決定キー２１ａを、ユーザがリモコン（操作部７）操作によって指示選択することで、付属情報の入力が完了すると（ステップＳ１０６；Ｙｅｓ）、ＣＰＵ１１は、抽出された画像データ（顔画像２０ａ、２０ｂに対応する画像データ）と、付属情報（「男性」「スポーツ選手」）を、通信部８を介しネットワークＮを通じて、画像照合装置３００に送出する（ステップＳ１０７）。
なお、ユーザが検索対象の人物についての予備知識が無いような場合には、ここで付属情報を入力しなくてもよく、画像データのみを画像照合装置３００に送出するようにすればよい。

画像照合装置３００において、その制御部３０は、デジタル放送受信装置１００から送出された人物の顔画像の画像データと、基準画像データＤＢ３０ａに格納されている基準画像データとを照合することで、その画像データに対応する基準画像データを選出する処理を実行する。なお、画像照合装置３００の制御部３０（ＣＰＵ）は、画像データに付加されている付属情報に基づいて、基準画像データＤＢ３０ａ中の基準画像データを絞り込んで、最適な基準画像データを選出する。
更に、画像照合装置３００の制御部３０は、照合されて選出された基準画像データに関連付けられている人物の顔画像に関する対象物情報を基準画像データＤＢ３０ａから取得し、ネットワークＮを通じてデジタル放送受信装置１００に返送する。

そして、デジタル放送受信装置１００のＣＰＵ１１は、画像照合装置３００から返送された対象物情報（つまり、画像照合装置３００における照合処理によって、画像データと照合された基準画像データが示す対象物（人物）に関する対象物情報）を、ネットワークＮを通じ、通信部８を介して受信するように取得する（ステップＳ１０８）。

次いで、ＣＰＵ１１は、図６に示すように、映像出力部２０１に、取得した対象物情報を表示するための対象物情報表示画面２２を表示する（ステップＳ１０９）。
この対象物情報表示画面２２には、抽出された複数（本実施形態、図６では２つ）の画像データに対応する顔画像２０ａ、２０ｂと、その画像データに基づき照合された基準画像データが示す対象物（人物）に関する対象物情報が表示されている。
なお、この画像データ（顔画像２０ａ、２０ｂ）に基づくマッチング処理によって得られた対象物情報として、図６に示すように、第１候補「山田太郎；プロゴルファー」、第２候補「田中誠；プロ野球選手」、との検索結果情報が表示されている。
また、対象物情報表示画面２２に表示されている詳細情報検索キー２２ｂを、ユーザがリモコン（操作部７）操作によって指示選択することによって、その対象物（人物）に関するより詳細な情報を検索可能なサーチエンジンやホームページ等に、ネットワークＮを介して接続することができるようになっている。

そして、この対象物情報表示画面２２における閉キー２２ａを、ユーザがリモコン（操作部７）操作によって指示選択することで、画像検索処理が終了すると（ステップＳ１１０；Ｙｅｓ）、ステップＳ１０１に戻る。

以上のように、本発明に係るデジタル放送受信装置１００、画像対象物検索システム４００は、アンテナ１を介して受信したデジタル放送信号に基づく映像から、その映像中の対象物である人物の顔画像に関する複数の画像データを抽出することができる。
そして、映像を視聴中のユーザが、その映像中の人物の名前や、その人物に関する詳しい情報を知りたい場合などに、抽出した画像データを画像照合装置３００に送出することによって、その画像照合装置３００の基準画像データＤＢ３０ａに格納され蓄積されている無数の基準画像データと、抽出された画像データとのマッチング処理を行い、その画像データに対応する基準画像データに関連付けられている対象物情報を取得して、その対象物情報である人物の名前や、その人物に関するプロフィールなどの情報を映像出力部２０１に表示することができる。

特に、デジタル放送受信装置１００において複数の画像データを抽出して、その複数の画像データに基づき対象物である人物の検索を行うことや、また、その画像データに対して、ユーザが知り得る付属情報を付与して、その付属情報に基づく基準画像データの絞り込みを行うなどすることによって、より正確に対象物（人物）の検索を行ったり、より短時間で対象物（人物）の検索を行ったりすることが可能になる。

このように、デジタル放送受信装置１００、画像対象物検索システム４００において、映像出力部２０１に表示される映像中の対象物である人物の顔画像に関する画像データを抽出することによって、その映像中の人物について、名前やプロフィールなどを調べることができる。特に、複数の画像データや、その画像データに関する付属情報に基づき、対象物（人物）の検索を行うことによって、より容易に、画像データから所定の対象物（人物）を特定する検索を行うことができる。

なお、以上の実施の形態においては、対象物として人物が含まれる映像から、その人物の顔画像を画像データとして抽出して、その人物の名前などを検索可能にする技術を例に説明したが、本発明はこれに限定されるものではなく、例えば、建物や風景に関する映像中の画像に基づき、その映像中の地名（例えば、検索結果「日本；京都」）や、地域名（例えば、検索結果「世界遺産；紀伊山地の霊場」）などを検索するようにして表示するようにしてもよい。
また、人物や建物などの映像中の画像から対象物検索を行うことに限らず、例えば、字幕スーパーやエンドロールなどの文字情報をＯＣＲ（Optical Character Reader（Recognition））機能によって読み取って、その文字情報に基づいて、より詳細なデータや情報を検索して取得するようにしてもよい。

また、その他、具体的な細部構造等についても適宜に変更可能であることは勿論である。

本発明に係るデジタル放送受信装置及び画像対象物検索システムの要部構成を示すブロック図である。 本発明に係るデジタル放送受信装置（画像対象物検索システム）における画像検索処理を示すフローチャートである。 デジタル放送受信装置の映像出力部における映像表示画面の一例を示す説明図である。 デジタル放送受信装置の映像出力部における映像表示画面に表示されるフレームを示す説明図である。 デジタル放送受信装置の映像出力部において付属情報を入力するための入力画面の一例を示す説明図である。 デジタル放送受信装置の映像出力部において対象物情報を表示するための表示画面の一例を示す説明図である。

符号の説明

１ アンテナ
２ チューナ
３ 復調部
４ 分離部
５ デコーダ
６ ＯＳＤ処理部
７ 操作部（付属情報入力手段）
８ 通信部（画像データ送出手段、対象物情報取得手段）
１０ 制御部
１１ ＣＰＵ（画像抽出手段、付属情報入力手段、画像データ送出手段、対象物情報取得手段、対象物情報表示制御手段）
１２ ＲＡＭ
１３ 記憶部
１３ａ 画像抽出プログラム
１３ｂ 付属情報入力プログラム
１３ｃ 画像データ送出プログラム
１３ｄ 対象物情報取得プログラム
１３ｅ 対象物情報表示制御プログラム
１００ デジタル放送受信装置
２００ 映像／音声出力装置
２０１ 映像出力部（表示部）
２０２ 音声出力部
３００ 画像照合装置
３０ 制御部（照合手段、対象物情報返送手段）
３０ａ 基準画像データＤＢ
３０ｂ 照合プログラム
３０ｃ 対象物情報返送プログラム
４００ 画像対象物検索システム
Ｎ ネットワーク

Claims (3)

1. デジタル放送信号を受信して、その受信したデジタル放送信号に基づく映像を表示部に表示するデジタル放送受信装置であって、
   前記表示部に表示される映像から、所望する対象物に関する複数の画像データを抽出する画像抽出手段と、
   前記画像抽出手段により抽出された複数の画像データを、所定の画像照合装置において蓄積されている無数の基準画像データと照合するために、前記画像照合装置に送出する画像データ送出手段と、
   前記画像照合装置によって前記画像データと照合された前記基準画像データが示す、前記対象物に関する対象物情報を取得する対象物情報取得手段と、
   前記対象物情報取得手段により取得された対象物情報を、前記表示部に表示する対象物情報表示制御手段と、
   を備えることを特徴とするデジタル放送受信装置。
2. 前記画像抽出手段により抽出された前記画像データに対応する前記対象物に関連する付属情報を入力する付属情報入力手段を備え、
   前記画像データ送出手段は、前記複数の画像データとともに、前記付属情報を前記画像照合装置に送出することを特徴とする請求項１に記載のデジタル放送受信装置。
3. デジタル放送信号を受信して、その受信したデジタル放送信号に基づく映像を表示部に表示するデジタル放送受信装置と、様々な対象物に関連付けられている無数の基準画像データを蓄積している画像照合装置とが、通信回線を介して接続されている画像対象物検索システムであって、
   前記デジタル放送受信装置は、
   前記表示部に表示される映像から、所望する対象物に関する複数の画像データを抽出する画像抽出手段と、
   前記画像抽出手段により抽出された複数の画像データに対応する前記対象物に関連する付属情報を入力する付属情報入力手段と、
   前記画像抽出手段により抽出された複数の画像データと、前記付属情報入力手段により入力された前記付属情報を、前記画像照合装置に送出する画像データ送出手段と、
   前記画像照合装置によって前記画像データと照合された前記基準画像データが示す、前記対象物に関する対象物情報を取得する対象物情報取得手段と、
   前記対象物情報取得手段により取得された対象物情報を、前記表示部に表示する対象物情報表示制御手段と、を備え、
   前記画像照合装置は、
   前記デジタル放送受信装置から送出された前記複数の画像データと、予め蓄積している前記無数の基準画像データとを照合する照合手段と、
   前記照合手段により前記画像データと照合された前記基準画像データが示す、前記対象物に関する対象物情報を、前記デジタル放送受信装置に返送する対象物情報返送手段と、を備えることを特徴とする画像対象物検索システム。

Images