JP2010272077A - 情報再生方法及び情報再生装置 - Google Patents

Abstract

【課題】顔認識を利用した操作を基本として、同席している場合、再生する映像や音声を予め設定されている規則に従って選択して再生する情報再生装置および情報再生方法を提供する。
【解決手段】この発明の一つの実施の形態は、視聴者の顔を顔イメージ画像として取り込むカメラモジュールと、このカメラモジュールが取り込んだ顔イメージ画像から特徴点を抽出して符号化または文字列化する符号化モジュールと、この符号化モジュールにより符号化または文字列化された特徴点に従い、視聴者を特定する視聴者特定モジュールと、この視聴者特定モジュールにより特定された視聴者ごとに、再生が認められて情報を再生する情報再生モジュールと、を有することを特徴とする情報再生装置である。
【選択図】図１５

Description

この発明は、映像や音声を、視聴する利用者に合わせて選択して再生する映像音声再生装置に関する。

映像や音声を再生する映像音声再生装置として、テレビジョン受信装置、モニタ装置とプレーヤ装置、ビデオカメラ、パーソナルコンピュータ、携帯可能端末、デジタルフォトフレーム等の多様な機器が実用化され、既に広く普及している。

また、ネットワーク網の充実と、その高速化かつ大容量化に伴い、再生対象であるコンテンツ（番組）は、空間波あるいは光ファイバ等による送信側（配信局）からの一方的な供給に加え、オンデマンド方式の普及により、視聴者の要求に従う任意の時間に取得可能である。

また、ネットワーク上で提供されるニューステロップや、予め設定した特定分野の情報を、テレビジョン受信装置やデジタルフォトフレームあるいはパーソナルコンピュータの画面に独立して表示可能なウィジェット（情報画面）の普及に伴い、オンデマンド方式による視聴者からの要求とは異なる観点で提供される映像や音声の取得とその再生が可能である。

ところで、例えば、リビングに置いたデジタルフォトフレームに、視聴者とその家族が自分勝手に任意数のウィジェット（情報画面）を設定した場合、各人にとっては、見辛いものとなる。また、来訪者があった場合は、デジタルフォトフレームをオフし、あるいは来訪者が見ることのできないよう、隠す等の対応が求められる。

特許文献１（先行技術文献）は、鑑賞者を検出し、検出された鑑賞者に関連のある画像を選択して表示する電子アルバム表示システムを開示する。

特開２００６−２３６２１８

特許文献１が開示する電子アルバム表示システムは、鑑賞者を特定して鑑賞者に関連のある画像（写真）を表示するが、鑑賞者以外の人が同席しても画像を表示することから、鑑賞者が鑑賞者以外の人に見てほしくない、不本意な画像も表示される。

この発明の目的は、顔認証を用い、視聴中の視聴者ごとに特定の条件で設定された映像や音声を再生する、特に視聴者として同席している人がいる場合、再生する映像や音声を予め設定されている規則に従って選択して再生する映像音声再生装置および映像音声再生方法を提供することである。

この発明は、上記問題点に基づきなされたもので、視聴者の顔画像データを取り込み、取り込んだ顔画像データから視聴者を特定し、予め視聴者毎に区分された規則に従って、在席する視聴者に応じた情報を提示する情報再生方法を提供するものである。

この発明の一つの実施の形態によれば、視聴者（操作者）が見たときに、表示される写真あるいは再生されるコンテンツを任意に選ぶことができる。また、同様に、起動されるウィジェットを、視聴者（操作者）に応じて任意に設定することができる。特に、室内（その場）にいる視聴者（操作者）が１人である場合には、実質的に各人専用端末化された映像音声再生装置として利用できる。すなわち、操作者（視聴者）が視線を合わせることで、一目で（個人に合わせた）情報を得ることができる。なお、個人向け表示条件は、１度設定すれば、引き続く操作は実質的に不要となる。特に、同席者や家族に対して見せないと決めた映像等は、操作者のみが在席の場合以外は再生されないため、映像音楽再生装置を共用する各人の同席を気にする必要がなくなる。

また、この発明の一つの実施の形態によれば、顔認識により、周りにいる人に応じた動作が可能であって、見る人に合わせた情報や音楽を自動的に表示もしくは再生することができる。また、ウィジェットを見せる人を選択する手段とウィジェットを表示する手段を持ち、選択した人が画面を見たら、登録したウィジェットが表示される。さらに、時間帯を区切って、時間情報に基づいて異なるウィジェットを表示することができる。なお、ウィジェットを見せない人を選択する手段を持ち、見せないと設定した人がいたら特定のウィジェットについては表示しないことができる。逆に、視聴者（操作者）のみが在席である場合には、予め設定した全てのウィジェットを再生できる。

さらに、この発明の一つの実施の形態によれば、視聴者（操作者）の会話から話題（キーワード）を取得し、取得したキーワードに属性が一致する情報を提示できる。なお、視聴する人がいなくなった場合には、表示を停止することで省エネルギーを実現できる。

この発明の実施の形態が適用可能な顔認証を用い、視聴者ごとに、特定の条件で設定された映像や音声を再生する映像音声再生システムの一例を示す概略図。 図１に示したシステムに組み込まれる映像音声再生システムに好適に適用可能な映像音声再生装置の一例であるデジタルフォトフレームの構成の一例を示す概略図。 図１に示したシステムに適用される視聴者ごとの映像や音声の再生条件（ウィジェット（情報画面））の設定を管理するウィジェット管理テーブルの一例を示す概略図。 図３に示したウィジェット管理テーブルが参照する家族ＩＤ管理テーブルの一例を示す概略図。 図３に示したウィジェット管理テーブルが参照するウィジェットインプット情報テーブルの一例を示す概略図。 図１に示したシステムに組み込まれる映像音声再生装置（図２に示したデジタルフォトフレーム）に適用可能なウィジェット（情報画面）の具体例を示す概略図。 図１に示したシステムに組み込まれる映像音声再生装置（図２に示したデジタルフォトフレーム）に表示されるウィジェットの表示例を示す概略図。 図７に示したウィジェット（表示）が見ている人（視聴者）に応じて変化される例を示す概略図。 図７に示したウィジェット（表示）が見ている人（視聴者）に応じて変化される例を示す概略図。 図７に示したウィジェット（表示）が見ている人（視聴者）と、その人が設定した特有の設定（時間変化）に応じて変化される例を示す概略図。 図１に示したシステムに組み込まれる映像音声再生装置（図２に示したデジタルフォトフレーム）に視聴者ごとの特定の条件に対応可能なウィジェットを設定する方法を説明する概略図（画面遷移例）。 図１に示したシステムに組み込まれる映像音声再生装置（図２に示したデジタルフォトフレーム）において、視聴者の有無を検出し、視聴者ごとに決められている条件でウィジェットを再生する方法をソフトウエア的に説明する概略図（フローチャート）。 図１に示したシステムに組み込まれる映像音声再生装置（図２に示したデジタルフォトフレーム）において、視聴者の会話の内容（話題）に従い、話題に即した情報を提供可能なウィジェットが選択されている場合に、そのウィジェットのコンテンツを変更する方法をソフトウエア的に説明する概略図（フローチャート）。 図１に示したシステムに組み込まれる映像音声再生装置（図２に示したデジタルフォトフレーム）に視聴者ごとの特定の条件に対応可能なウィジェットを設定する方法の別の一例を説明する概略図（画面遷移例）。 図１に示したシステムに組み込まれる映像音声再生装置に適用される顔認証／照合処理装置の一例を示す概略図。

以下、図面を参照して、本発明の実施の一形態について説明する。

図１は、顔認証を利用したメールシステム全体の概略を説明する。なお、以下に説明するさまざまな要素において、「モジュール」と呼称する要素は、ハードウエアで実現するものであってもよいし、ＣＰＵ（マイクロコンピュータ）等を用いてソフトウエアで実現するものであってもよい。

図１に概略を示す、顔認証を用いて視聴者ごとに、特定の条件で設定された映像や音声を再生する映像音声再生システムは、空間波を用いた無線方式あるいは光ファイバ等を用いた有線伝送方式により放送事業者もしくは中継事業者から提供されるテレビジョン放送信号を受信して再生するテレビジョン受信装置（家庭内ユーザ端末１）１０、ハードディスクドライブ（ＨＤＤ）に代表される大容量記録装置を保持したビデオレコーダ装置（家庭内ユーザ端末２）２０、あるいはデジタルフォトフレーム等に代表される映像音声再生装置（家庭内ユーザ端末３）１００の少なくとも１つと、ネットワーク網、例えば光ファイバ網あるいは公衆通信網を介して家庭内ユーザ端末（１〜３）のそれぞれと相互に接続されるビデオレターサーバ１０００と、により達成される。

ビデオレターサーバ１０００には、ネットワーク網、例えばインターネット網を通じ、家庭内ユーザ端末１〜３、すなわちテレビジョン受信装置１０、ビデオレコーダ装置２０もしくはデジタルフォトフレーム１００が設置される場所とは異なる、例えば親族宅や知人宅等に代表される任意の位置に設けられるカメラ付テレビジョン装置２００（ユーザ端末４）、パーソナルコンピュータ（ＰＣ）３００（ユーザ端末５）、外部ネットワーク網とのアクセスが可能な携帯可能端末、例えばカメラ付ゲーム機４００（ユーザ端末６）やカメラ付携帯電話５００（ユーザ端末７）が、任意にアクセス可能である。

ビデオレターサーバ１０００は、家庭内ユーザ端末（テレビジョン受信装置１０、ビデオレコーダ装置２０あるいはデジタルフォトフレーム１００、およびそれを操作する送信者）から送信されたメール（ビデオメール）や写真もしくは動画ファイル等を一旦保持するとともに、相手先（受信者）に、メール（ビデオメール）や写真、もしくは動画ファイルが着信したことを報知する。なお、ビデオメールには、テレビジョン受信装置１０、ビデオレコーダ装置２０、もしくはデジタルフォトフレーム１００に付属するカメラ（１０ａ，２０ａ，１００ａ）の前にいるユーザ（すなわち送信者）の映像・音声の他に、既存のコンテンツを付加することもできる。既存のコンテンツ（著作権等、他人の権利を侵さない範囲に限る）としては、ユーザが撮影したビデオ映像、ユーザが撮影したデジタルカメラ画像、ユーザが録音した音声・音楽、ビデオレコーダに録画済みの放送番組の映像・音声（音楽）、パブリックドメインに属するインターネット配信映像・音声（音楽）などがある。

ビデオレターサーバ１０００とネットワーク上で接続された（ビデオレターサーバ１０００にアクセス可能な）カメラ付デジタルテレビジョン装置２００、パーソナルコンピュータ（ＰＣ）３００、カメラ付ゲーム機４００、あるいは携帯電話器５００を保持する相手方（受信者）は、テレビジョン受信装置１０、ビデオレコーダ装置２０もしくはデジタルフォトフレーム１００に付属するカメラ（１０ａ，２０ａ，１００ａ）の前にいるユーザ（すなわち送信者）が送信した映像・音声の他と付加されているコンテンツを、任意のタイミングで再生できる。なお、テレビジョン装置１０（あるいはレコーダ装置２０）、もしくはデジタルフォトフレーム１００のそれぞれは、カメラ１０ａ（２０ａ），１００ａに加えて、それぞれの機器の前または近傍にいる（在席する）人物すなわち視聴者の音声を取り込むマイク１０ｃ（２０ｃ），１００ｃを含む。

また、送信側ユーザ端末（１０，２０，１００）および受信側端末（２００，３００，４００，５００）のそれぞれには，図１５を用いて後段に説明する顔認証／照合処理装置１が組み込まれている。顔認証／照合処理装置１は、各ユーザ端末に一体的に設けられるカメラ（１０ａ，２０ａ，１００ａ，２００ａ，３００ａ，４００ａ，５００ａ）の前にいるユーザの顔の特徴をコード化し、あるいはカメラ前のユーザの顔の特徴と登録済みの顔の特徴とを照合できる。また、各ユーザ端末のカメラで取り込まれたユーザの顔の画像データ、その顔の特徴を顔認証／照合処理装置１によりコード化した特徴点データ等は、サーバ１０００に設けられた宛先管理テーブル１００１に登録される。

各ユーザからのビデオメール自体（メールコンテンツ）は、宛先管理テーブル１００１の登録内容に関連づけられて、サーバ１０００内の図示しないデータストレージ（大容量記憶装置）に格納される。

図１に示す映像音声再生システムにおいては、ユーザ自身が視認できる顔画像を宛先として、ユーザの家庭内ローカルエリアネットワーク経由で、家族内の伝言メールの送受信が可能である。また、インターネット網を経由して、遠隔地にいる別のユーザ（親族宅や知人宅等）にビデオメールを送信するとともに、各ユーザからのビデオメールを受信することができる。

なお、送信側ユーザの家庭内あるいは受信側ユーザの家庭内では、例えばテレビジョン装置１０やレコーダ装置２０の図示しないＨＤＤ（大容量記憶装置）、もしくはデジタルフォトフレーム１００の半導体メモリ装置（ＨＤＤの場合もある）、あるいはＰＣ（パーソナルコンピュータ）３００やカメラ付テレビジョン装置２００の同様の記憶装置に、管理情報テーブル１００１の内容をコピーしておくことができる。これにより、テレビジョン装置１０あるいはレコーダ装置２０もしくはデジタルフォトフレーム１００等の機器の単独利用により、家族内においてビデオメール（または伝言）を交換することもできる。

このとき、伝言を、例えば「公開（家族の全員が見ることができる）」とすることで、家庭内でテレビジョン装置１０をオンした任意の家族（家人）やデジタルフォトフレーム１００の前にいる人物（カメラ１００ａにより認識される在席者すなわち視聴者）に、伝言を伝達することができる。なお、家庭内においてビデオメールや伝言を公開する場合、テレビジョン装置１０またはレコーダ装置２０（またはデジタルフォトフレーム１００）がホームサーバとしての機能を持つことで、容易に実現できる。

なお、サーバ１０００は、インターネット上（ネットワーク網）にあり、そのサーバにビデオメール自体（＝コンテンツ）と宛先管理テーブルを持つ顔イメージが、宛先相当であり、インターネットに出力する際はメールアドレスを用いることはいうまでもない。

また、ユーザが見ている（視聴中である）テレビ番組やＨＤＤレコーダにおいて再生中であるコンテンツに関する情報を、カメラで撮影したユーザの顔イメージと関連づけ留とともに個々の嗜好を学習し、その結果をサーバ１０００において一定期間保持することにより、サーバを介して接続可能な企業は、例えばユーザの思考に応じた広告メールをピンポイントでユーザに送ることができる。この場合、メール一覧の中にビデオ広告が入ることとなり、ユーザの目につきやすくなる。

図２は、図１に示したシステムに組み込まれる映像音声再生システムに好適に適用可能な映像音声再生装置の一例であるデジタルフォトフレームのシステムロジックを示す。

デジタルフォトフレーム１００は、カメラ１００ａからの映像を取り込むカメラ制御・入力部１５１、マイク１００ｃからの音声を取り込むマイク入力部１５３、表示部１６０に一体に形成されたタッチパネル（タッチスクリーン）に映像を出力する映像制御・出力部１６１、およびタッチパネル１６０による入力を受けつけ、所定の制御信号を出力するタッチ入力制御部１６２、等を含む。なお、カメラ制御・入力部１５１の出力は、蓋有無判断部１５２により、カメラ１００ａにカバー（蓋）１００ｂがつけられたままか否か、がチェックされる。例えば、蓋有無判断部１５２により、カメラ１００ａが映像を取り込むことができない状態であることが検知できた場合、以下に説明するウィジェットの表示およびコンテンツの再生は、実行されない。

ウィジェット登録部１０１は、デジタルフォトフレーム１００の表示部１６０および、以下に説明する音声制御・出力部１６４に接続されるスピーカ（音声再生装置）１５４が再生する映像および音声（コンテンツ）を、さまざまな再生形態により再生可能とする任意数のウィジェット（情報画面）を、ユーザ（視聴者）の登録／変更／削除動作に従い、設定されたウィジェットを選択的に動作させる。なお、ウィジェットは、周知の通り、例えばデジタルフォトフレーム１００の表示部１６０、あるいはテレビジョン受信装置１の表示部の表示領域中に、１または複数、映像または写真（静止画）もしくは音楽等を再生可能な情報画面であり、デジタルフォトフレーム１００が再生中の写真（静止画）等の再生状態とは独立に、選択されたウィジェットが所望するさまざまな動作を提供できる。例えば、図１は、デジタルフォトフレーム１００の表示部１６０あるいはテレビジョン受信装置１０の表示装置において、それぞれ２つのウィジェットＷａ，Ｗｂが設定されている状態を概略的に示す。

デジタルフォトフレーム１００はまた、半導体メモリ、例えばメモリカードＭを媒体として供給される映像（写真データ）を取り込むメディア入力部１６３、ウィジェットが再生する映像（コンテンツ）が音声あるいは音楽を伴う場合、それを出力する音声制御・出力部１６４、入力された映像および音楽のデータを保持する映像・音楽記録部１６５、マイク１００ｃにより取得した音声を認識して形態素を解析し、話題（キーワード）を抽出する音声認識・形態素解析・話題抽出部１６６、等を含む。なお、明暗判断部１６７は、デジタルフォトフレーム１００が設置されている環境、すなわち視聴者が在席中の部屋の明るさを検知するもので、検知した部屋の明るさに従ってウィジェットおよび表示部１６０が表示する映像の明るさを調整し、あるいは照明が消された等の変化を検知して、ウィジェットおよびデジタルフォトフレーム１００そのものの映像の再生を停止する等の制御に有益である。

デジタルフォトフレーム１００はさらに、ネットワーク網（主としてインターネット）を介して接続されるビデオレターサーバ１０００や同サーバ１０００を介して接続される他の家庭内ユーザ端末、すなわちデジタルフォトフレーム１００が設置される場所とは異なる、例えば親族宅や知人宅等に代表される任意の位置に設けられる上述のカメラ付テレビジョン装置２００、同パーソナルコンピュータ（ＰＣ）３００、同外部ネットワーク網とのアクセスが可能な携帯可能端末、例えばカメラ付ゲーム機４００や、カメラ付携帯電話５００とのアクセスを可能とする通信部１７１、デジタルフォトフレーム１００の表示部１６０のオン（映像の表示）やオフ（映像非表示）の制御、およびタイマー機能による起動条件（時間帯指定）等を実行する電源制御部１８１等を含む。なお、デジタルフォトフレーム１００には、詳述しないさまざまな外部機器、例えば外部に付属することが許可される大容量記憶装置（ＨＤＤ）や、ＵＳＢ（Universal Serial Bus）メモリ等との信号の受け渡し等に利用される各種機能制御部（拡張機能制御部）１９１も設けられる。

図３は、図１に示したシステムに適用される視聴者ごとの映像や音声の再生条件（ウィジェット（情報画面））の設定を管理するウィジェット管理テーブルの一例を示す。

デジタルフォトフレーム１００に、任意数のウィジェットを用意し、その動作を可能とする場合、
ア）視聴者が機器操作者（ウィジェット設定者）本人のみである場合、
イ）視聴者が機器操作者本人とその家族である場合、
ウ）視聴者が機器操作者本人とその友人等、機器操作者本人の家族以外を含む場合
等の場合分けが、可能である。なお、機器操作者は、デジタルフォトフレーム１００の映像を視聴可能に、デジタルフォトフレーム１００の前、あるいはデジタルフォトフレーム１００の近傍に居る人物であり、１人のみである場合には、本人と称する人物が、ウィジェット設定者として認識される。また、家族は、予め視聴が許可された特定の在席者のグループを指す（家族以外であっても、同居の親族等が該当する）。

このことは、例えば視聴者が機器操作者本人以外である場合等において、ウィジェットが再生する映像（コンテンツ）が、機器操作者本人以外には見てほしくない、あるいは同席者には見せないほうが好ましいと判断できる映像、例えば子供を授からない友人に登録者本人が自分の子供と遊んでいる映像等である場合、友人が同席した時点で、デジタルフォトフレーム１００が再生する映像（ウィジェットが再生するコンテンツ）として、子供の映像を除外する、等の判断が必要となる場合に有益である。

図３は、上述したア）〜ウ）の場合分けを、カメラ１００ａが取り込む視聴者の情報に従って選択可能とする管理テーブルの一例であり、例えば
＜＜存在（誰が見ているか）＞＞
自分（本人）だけ（見ている）
（本人と）家族のみ（見ている）
家族外の人＜友人等＞が（見ている）、あるいは＜企業内すなわち本人が自身の勤務先のパーソナルコンピュータに設定したウィジェット＞
として場合分けできる。

なお、デジタルフォトフレーム１００（あるいはテレビジョン受信装置１０）の表示部において再生されるウィジェットは、再生されている時間帯に応じて、
＜＜時間（ウィジェットが再生されている時間帯）＞＞
朝［５ａｍ〜］
昼［１１ａｍ〜］
夕方［４ｐｍ〜］
夜［８ｐｍ〜］
深夜［１１ｐｍ〜］
ＡＬＬ（終日）
のように、場合分けできる。

例えば、朝と昼については、スーパーマーケットの当日の安売り情報等を表示するが、スーパーマーケットの営業時間が終わった以降の夜と深夜においては、スライドショーにより任意数の写真を再生するとともに、夜間帯に好適な音楽（睡眠を誘うＢＧＭ）、等を再生することが望ましい。

また、ウィジェットは、デジタルフォトフレーム１００の表示部１６０（テレビジョン受信装置１０の表示装置）の表示領域の大きさに依存するが、例えば［左上］／［右上］／［左下］／［右下］等により特定される４箇所程度であれば、同時に配置（再生）してもデジタルフォトフレーム１００（テレビジョン受信装置１０）が再生中の写真や映像の視認に支障を与えないと判断でき、例えば、［カレンダー］／［時計］／［（当日の）天気（予報）］／［電車の運行状況］等が予め選択されたウィジェットセットが選択され、再生されることを可能とする（＜＜表示位置＞＞）。なお、表示位置としては、同時に動作するウィジェットが４つ程度であれば、後段に例示する再生例のように、例えば右側に上下方向に４つ位置されてもよいことはいうまでもない。

なお、図３に示した場合分け（ウィジェット管理テーブル）では、視聴者の組み合わせに応じて、動作するウィジェットも随時変更されることは上述した通りである。

図４は、図１に示したシステムに適用される視聴者ごとの映像や音声の再生条件（ウィジェット（情報画面））の設定を管理するウィジェット管理テーブルを示す。

図４において、予め登録されている家族は、例えば本人（ＩＤ１）、同居している親族（ＩＤ２）、同じく親族（ＩＤ３）として管理される。なお、それぞれの家族は、個々の顔を予め撮影した写真または識別符号（メールアドレス）により特定される。また、顔を撮影した写真によりメールアドレスとすることもできる。なお、顔（写真）をアドレスとする方法および照合については、図１５を用いて後段に説明する顔認証／照合処理装置１による「顔認証」処理／「照合」処理による。

図５は、図３に示したウィジェット管理テーブルが参照するウィジェットインプット情報テーブルの一例を示す。

図１に示した映像音声再生システムに適用される映像音声再生装置であるデジタルフォトフレーム（図２参照）１００やテレビジョン受信装置１０は、それぞれ視聴者すなわち任意の映像音声再生装置が再生する映像（および音声（音楽））を目視し、あるいは再生される音楽を聴取しているユーザ（家人）や来訪者（友人）等の会話から音声認識・形態素解析・話題抽出部１６６により、話題（キーワード）を抽出する。例えば、会話に登場するキーワード（話題）が旅行である場合、ネットワーク網（インターネット）を介して旅行先の天気を取得し、再生することができる。また、キーワードが旅行である場合、その地域の食の情報（「グルメ」情報）やお土産のランキング等を再生することができる。なお、ウィジェットインプット情報テーブルは、キーワードの入力すなわち会話から抽出できるキーワードに従い、「Ｉｎｐｕｔ＃１」、「Ｉｎｐｕｔ＃２」・・・「Ｉｎｐｕｔ＃ｎ（ｎは正の整数）」のように、任意に、情報を保持できる。

図６は、図２に映像音声再生装置の一例として説明したデジタルフォトフレーム１００のウィジェット登録部１０１に登録することで動作可能な保持するウィジェット（情報画面）の一例を示す。なお、ウィジェットの種類（個々のウィジェット）としては、目的地までに利用すべき交通機関と所要時間等を案内するものや、定期的（一日に数回）に配信されるニュースを再生するもの、あるいは予め登録した小売店や量販店の価格情報を報知するもの、株価や天気を知らせるもの等、さまざまである。

また、ウィジェットは、ネットワーク網（インターネット）を経由して、あるいは半導体メモリＭを介したメディア入力部１６３への供給により、随時取得することができる。もちろん、既に取得したウィジェットの削除や動作させるウィジェットの変更も、以下に説明するウィジェットの交換／新規登録／削除に基づいて、随時可能である。

図７〜図１０は、図２を用いて説明した映像音声再生装置（デジタルフォトフレーム）に表示されるウィジェットの例を示す。なお、図２により説明したデジタルフォトフレームに対しては、図３〜図６を用いて説明した再生条件が適用されるものとする。

すなわち、図３で示した視聴者の在席や時間情報と図４に示した家族ＩＤに従い、動作するウィジェットが変化する。また、視聴者（在席者）の会話に従い、キーワードが抽出できた場合、図５に示したようなウィジェットインプット情報テーブルを保持した特定のウィジェットが動作され、キーワードに対応する情報が取得され、再生される。

図７は、視聴者に関する限定（条件）がない（最も多くの視聴者向け）のウィジェットが動作された状態のデジタルフォトフレーム１００の画像再生状態を示す。

すなわち、特定の視聴者向けの限定がないため、起動されたウィジェットは、時刻表示（時計）と気温（地域温度）のみが表示されている。

図８は、視聴者が登録者本人のみであり、図４に示した家族ＩＤから父親と想定している人物である場合に動作されるウィジェットの組み合わせを示している。

すなわち、登録者本人のみが視聴することを想定し、時刻表示（時計）と気温（地域温度）のウィジェットに加え、カレンダー表示ウィジェットや、株価表示ウィジェット等が追加されていることが認められる。

図９は、視聴者が登録者本人のみであり、図４に示した家族ＩＤから母親と想定している人物が、朝方（午前中）に視聴している場合に動作されるウィジェットの組み合わせを示している。

すなわち、登録者本人のみが視聴することを想定し、時刻表示（時計）と気温（地域温度）のウィジェットに、カレンダー表示ウィジェットとスーパーマーケットあるいは量販店の特売情報表示ウィジェットが追加されていることが認められる。

図１０は、視聴者の条件は図９の例に準じて図４に示した家族ＩＤから母親と想定している人物が、昼以降（昼間〜夕方）に視聴している場合に動作されるウィジェットの組み合わせを示している。

すなわち、図１０では起動されるウィジェットの組み合わせとして、時刻表示（時計）と気温（地域温度）のウィジェットおよびカレンダー表示ウィジェットに、ニュース再生ウィジェットが追加されていることが認められる。

このように、例えば付属するあるいは連動可能に設けられたカメラにより取得した視聴者の在席情報と時刻（ウィジェットが再生されている時間帯）とに基づいて、起動すべきウィジェットを任意に組み合わせる（組み合わせを変更する）ことにより、視聴者とその家族のそれぞれが必要と判断した情報のみを、在席している視聴者に対応して提供可能なあたかも個人向けのようなウィジェット再生動作を、１つの映像音声再生装置により実現できる。

なお、カメラにより視聴者の在席情報を常時取得することにより、視聴者が不在となった場合には、ウィジェットをオフするとともに、デジタルフォトフレーム（テレビジョン受信装置）の表示部の電源もオフできる。また、カメラにより取得した視聴者の顔情報から、登録者本人／家族／家族と登録者等の人物の存在（在席）を特定できるため、例えばネコや犬等のペットのみが在室している場合には、同様にウィジェットをオフするとともに、デジタルフォトフレーム（テレビジョン受信装置）の表示部の電源もオフすることができる。このことは、今日の省エネルギーの要求に対しても有益である。

図１１は、図７〜図１０に示した表示例を実現するためのウィジェットの登録と削除、ならびに視聴者（家族）の登録と削除の手順を、表示画面の遷移例によりソフトウエア的に示す。

付属するリモコン端末（図示せず）等の操作、もしくは表示部１６０のウィジェットの非表示領域への操作者の指の接触により、ウィジェット設定モードが起動すると、［１］面のように、
１．ウィジェット（セット）登録・変更＜＜ボタン［赤］＞＞
２．ウィジェット（セット）削除＜＜ボタン［青］＞＞
３．家族の登録・変更＜＜ボタン［黄］＞＞
４．家族の削除＜＜［削除］キー＞＞
５．終了（戻る）＜＜［戻る］キー＞＞
等の次の指示、すなわちウィジェット（セット）の登録・変更／ウィジェット（セット）の削除／家族の登録・変更／家族の削除／終了（戻る）等のいずれかを選択する入力信号を受けつける設定画面が表示される。

リモコン端末（図示せず）等による数字入力または特定のボタンによる制御コマンドの発行、あるいは画面（表示部）１６０の所定の文字列への操作者の指の接触により、特定の作業（入力待ち画面）が選択されることで、例えば［２］〜［５］で示す各種入力画面が表示される。

例えば、「ウィジェット（セット）登録・変更」が選択されることで、［２］面が表示され、
○変更するウィジェット（セット）を選んでください○
１．新規追加＜＜ボタン［緑］＞＞
２．時計、カレンダー、［任意の１つ］
３．時計、消費電力、家族
４．時計、天気、温度、特売（朝）
５．時計、天気、温度、特売
６．終了（戻る）
等の次の指示、すなわち登録（選択）するウィジェット（セット）が入力可能な設定画面が表示される。

例えば、「新規追加」が選択されることで、［２１］面が表示され、
○ウィジェット［１つめ］の表示位置を選んでください○
１．表示領域 →☆［左上］☆／☆［右上］☆／☆［左下］☆／☆［右下］☆
２．カーソルを移動して［左上］／［右上］／［左下］／［右下］を決定
３．終了（戻る）
等の次の指示、すなわち登録（選択）する１つめのウィジェットの位置を入力可能な設定画面が表示される。

以下、表示される［２２］面（図６に示した一覧画面に類似）から任意のウィジェットが選択されると、［２１］面で設定した位置において動作されるべきウィジェットが選択される。引き続き、［２３］面において、［２２］面で選択したウィジェットを起動すべき時間帯の入力が要求される。なお、設定しようとするウィジェットの数だけ、［２１］〜［２３］面の表示が順に繰り返される。従って、操作者は、表示（面）に従って、順次ウィジェットの選定、起動位置（画面上の配置）および起動条件（時間帯）を、入力（選択）すればよい。なお、起動条件（時間帯）としては，［２３］面に概略を示すが、
☆［朝］☆
☆［昼］☆
☆［夕方］☆
☆［夜］☆
☆［深夜］☆
☆［全ての時間帯］☆
○終了（戻る）
に大別される。

選択すべき全てのウィジェットについて、表示位置と起動時間帯が設定されると、起動時の視聴者を設定するための入力画面（［２４］面）が表示され、操作者による入力（設定）の終了が指示されることで（［２５］面）、ウィジェットの登録（新規追加）が完了する（［２６面］）。なお、起動時の視聴者としては、例えば、
☆自分☆
☆父親☆
☆母親☆
☆兄弟／姉妹（１人め）☆
☆兄弟／姉妹（２人め）☆
☆家族全員☆
☆家族以外を含む全員☆
○終了（戻る）
等の［２４］面の表示から、選択すればよい。

［１］面において、例えば「ウィジェット（セット）削除」が選択されると、［３］面が表示され、
○削除するウィジェット（セット）を選んでください○
１．時計、カレンダー、［任意の１つ］
２．時計、消費電力、家族
３．天気、温度、特売（朝）
４．天気、温度、特売
５．終了（戻る）
等の次の指示、すなわち削除するウィジェット（セット）が入力可能な設定画面が表示される。

以下、選択されたウィジェット（セット）が表示され（［３１］面）、表示された［３１］面において、『はい（あるいはＯＫ）』が選択されることで、［３１］面に表示されたウィジェット（セット）が削除される。

一方、［１］面において、例えば「家族の登録・変更」が選択された場合には、［４］面が表示され、
○家族を登録します○
１．アドレス帳から＜＜ボタン［緑］＞＞
２．撮影して登録＜＜ボタン［黄］＞＞
３．終了（戻る）
等の次の指示、すなわち家族の追加あるいは変更を入力可能な設定画面が表示される。

例えば、「撮影して登録」が選択されると、［４１］面が表示され、付属するカメラによる撮影後、撮影した操作者の顔の写真が表示される。なお、ここでは、『撮りなおし』を可能としている（［４１］面）。

以下、撮影した写真の操作者またはアドレス帳から選択した写真に該当する家族が既に登録されている場合には、例えば「４２］面のように、
○登録済みです
○変更しますか
○終了（戻る）
等の次の指示、すなわち写真の変更を入力可能な設定画面が表示される。

一方、撮影した写真の操作者またはアドレス帳から選択した写真に該当する家族が登録されていない場合には、例えば「４４］面のように、
○登録しますか
○終了（戻る）
等の次の指示、すなわち写真の家族を追加する変更を入力可能な設定画面が表示される。

なお、既に登録されている家族を削除する場合は、［１］面において、「家族の削除」を選択することで、［５］面のように、削除対象となる家族の写真が表示され、
○削除する家族を選んでください○
自分（写真→ａｂｃｄ？）
父親（写真→ａａｃｄ？）
母親（写真→ｂｂｃｄ？）
○終了（戻る）
により、削除対象の家族を選択入力可能な入力画面が表示される。

以下、削除が指示された家族が、図４により説明した家族ＩＤ管理テーブルから削除される。

以上のような手順に従い、ウィジェット（セット）の登録・変更／ウィジェット（セット）の削除／家族の登録・変更／家族の削除が簡単な作業で完了する。

以下、［６］面に一例を示すが、『戻る』表示が表示され、入力（設定）モードが解除可能となる。なお、［１］面のような次の作業を受けつける表示が表示されて、次の入力を受けつけ可能な待機状態が継続されてもよいことは、いうまでもない。

図１２は、図７〜図１０に示した複数のウィジェットの選択的な起動を実現する工程をソフトウエア的に説明する概略図である。なお、図１２においては、ウィジェットが動作する対象の装置を図２により説明したデジタルフォトフレームとするが、もちろん図１に示したテレビジョン受信装置や、ＰＣ（パーソナルコンピュータ）であっても同様であることはいうまでもない。

はじめに、付属するカメラ（１００ａ）が起動され、視聴者（操作者）が装置の近傍、あるいは室内にいるか否かがチェックされる［０１］。

操作者（視聴者）が存在しない場合［０２−ＹＥＳ］、表示部１６０への写真（画像）の表示（再生）は実行されず、スタンバイ状態（表示部１６０への映像の表示をしない）が維持される［１１］。

操作者（視聴者）が存在する場合［０２−ＮＯ］、カメラにより顔画像が取り込まれ、顔認証／照合部１により認識される［０３］。

顔認証／照合部１により認識された操作者（視聴者）の顔画像は、図４に一例を示した家族ＩＤ管理テーブルに登録されている家族の顔画像データと比較され、該当する顔画像データが存在するか否かがチェックされる［０４］。

はじめに、家族ＩＤ管理テーブルに登録されていない非登録者（家族外）の人がいるかいないかがチェックされる［０５］。

非登録者（家族外）の人がいる場合［０５−ＹＥＳ］には、一例を図７に示したような家族外の人がいる（同席している）場合においても再生可能なウィジェットが検索される［１０］。

非登録者（家族外）の人がいない場合［０５−ＮＯ］には、視聴者が操作者（本人）のみであるか家族の誰かが同席しているかがチェックされる［０６］。

視聴者が操作者（本人）のみである場合［０６−ＹＥＳ］には、図３に示した管理テーブルに従い、操作者に対して起動が設定されているウィジェットが検索される［０７］。

一方、視聴者が操作者（本人）を含む同席者（１人以上の家族）がいる場合［０６−ＮＯ］には、家族のみに対して起動が設定されているウィジェットが検索される［０９］。

以下、［１０］／［０７］／［０９］で検索されたウィジェット（ウィジェットセットを含む）のいずれかが起動される［０８］。

このように、視聴者として本人（操作者）以外の人が同席している場合、再生する映像や音声すなわちウィジェットを、予め設定されている規則に従って詮索して起動（再生）することにより、操作者としては第三者には見てほしくない映像等が不所望に再生されることが抑止でき、同席者としては操作者が見てほしくないと感じる映像等を視聴することになるという事態から解放される。

図１３は、図５に示したインプット情報テーブルを用いて、特定のウィジェットが起動されている状態において、例えば視聴者の会話に即した新たなウィジェットを起動し、あるいは既に起動中のウィジェットが再生する内容を（視聴者の会話に沿って）変更できることを、ソフトウエア的に説明する概略図である。なお、図１３においてもウィジェットが動作する対象の装置を図２により説明したデジタルフォトフレームとするが、もちろん図１に示したテレビジョン受信装置や、ＰＣ（パーソナルコンピュータ）であっても同様であることはいうまでもない。

視聴者がデジタルフォトフレームの近傍にいることが付属するカメラ１００ａによって検知されている状態においては、音声認識・形態素解析部１６６により視聴者の会話から話題（キーワード）が、広く実用化されている音声認識および形態素解析の技巧に従い、適宜、抽出される［１０１］。

次に、取得（抽出）できたキーワード（話題）に基づき、現在表示（起動）されているウィジェットのうちの任意の１つが選択され［１０３］、話題とウィジェットの属性情報とが照合される［１０３］。

照合の結果、属性情報が話題に一致する場合［１０５−ＹＥＳ］、そのウィジェットに属性がインプットされる［１０６］。

以下、インプットされた属性情報に関連するウィジェットが更新される（属性情報に関連のあるウィジェットにおいて、属性情報に関連した内容が再生される）［０７］。

また、現在起動（表示されている）残りのウィジェットについても、（話題に対する）属性情報の一致／不一致が順に照合される［１０３］／［１０４］。なお、全てのウィジェットについて話題に対する属性情報が照合された時点で、属性情報が関連しているウィジェットが、次の話題が抽出されるまで、順に再生される［１０２］。

例えば、会話が『旅行』であり、ウィジェットとして、「天気」・「グルメ」等が起動されている場合、「天気」のウィジェットにおいて、旅先（目的地）や日時（何日後）がインプットされることにより、ネットワーク網を介して目的地の該当する日時の天気（予報）が取得され、再生される。また、「グルメ」のウィジェットにおいては、同目的地において著名な食べ物に関する情報がネットワーク網を介して取得され、ウィジェット内で再生される。

このように、視聴者の希望する、あるいは必要があると予想される項目について、現在起動されているウィジェットにおいて表示（再生）可能な属性情報を、視聴者の会話から取り込んでキーワードとして設定し、ネットワーク網を介して、あるいは内臓の辞書ファイル等を参照して属性情報が一致するものを順に再生（表示）することで、視聴者の利便性を向上できる。なお、カメラにより取得した顔画像データに基づいて、性別や年齢層を判別することにより、属性情報に基づいて取得するウィジェットが表示すべき情報の内容を、より視聴者の好みに整合させることが可能となる。

図１４は、図１１により説明したウィジェットの登録と削除を実現する別の実施の例を表示画面の遷移例により示す。

任意のウィジェットが起動されている状態（画面例［１０１］）においてウィジェットが表示されていない領域を、操作者が触れることで、予め保持されているウィジェットを追加するモードが起動される（画面例［１１１］）。

追加しようとしているウィジェットを画面例［１１１］面内でドラッグ（操作者の指が触れている状態を維持しながら表示領域内を移動）し、ウィジェットを動作させたい位置で、指を離すことで、画面例［１１１］で選択されたウィジェットが、動作させたい位置に移動され、登録される（画面例［１１２］）。

以下、画面例［１１２］で移動された位置でドラッグしたウィジェットを起動してよ異場合には、その位置で『はい（あるいは「ＯＫ」）』を入力することで、ウィジェットが追加される（画面例［１１３］）。

一方、既に登録（表示領域内で起動）されているウィジェットを削除する場合は、削除しようとするウィジェットに触れることで、削除モードが起動されるとともに削除のために選択されたウィジェットをその位置へ移動するか否かを確認する設定画面が表示される（画面例［１２１］）。なお、画面例［１２１］においては、削除、あるいは移動された位置においてウィジェットを継続して利用するかが、操作者の入力指示により設定可能である。

また、表示領域内に表示されているが起動していないウィジェットについては、表示されているウィジェットに操作者が触れることで、ウィジェットが起動し、ウィジェットに固有の動作（ウィジェットが所望する動作）が実行される（画面例［１３１］）。

なお、図１４に示した例は、タッチスクリーンの機能を利用してウィジェットの追加と削除（起動位置の変更）を実行するための制御の一例であり、タッチスクリーンを用いる表示装置において広く利用されている任意の制御方法を用いることができる。また、個々のウィジェットは、表示領域内の任意の位置に配置できる。

また、ウィジェットに固有の動作（ウィジェットが所望する動作）とは、ウィジェットが、例えば「音楽プレーヤ」である場合には、操作者によるタッチ（ウィジェットへの指の接触）により、プレーヤとしての機能が開始され、あるいは既に動作中である場合において、例えば「音量設定（変更）」や「トラック選曲画面表示」およびそれらからの入力設定、等をあげることができる。なお、ウィジェットが、例えば「天気予報」である場合には、「予報対象地域変更」や「予報対象条件変更（翌日の予報や週間予報）」等を表示させることができる。

図１５は、顔認証／照合処理装置の構成例を説明する図である。

図２により説明したデジタルフォトフレームにおいて、付属するカメラ１００ａにより撮影された顔画像データは、顔認証／照合処理装置１により、顔情報（顔イメージ画像）として取得され、認証と照合が実行される、なお、顔認証処理／照合処理以外は、カメラが付属する側の機器（この例ではデジタルフォトフレーム）の制御部に分担される（図２のデジタルフォトフレームにおいては、主制御回路１２０と呼称する）により処理されることは、言うまでもない。

顔認証／照合処理装置１は、（認証・照合用）主制御部１１１、画像インタフェース部１１２、通信インタフェース部１１３、顔検出部１１４、顔照合部１１５、記憶部１１７等を含む。なお、記憶部１１７には、照合データベースが格納されている。

主制御部１１１は、図示しないが、プログラムメモリ、ワークメモリなどを持つＭＰＵにより構成され、ＭＰＵがプログラムメモリに記憶されているプログラム（ファームウエア）を実行することにより種々な機能を実現している。

画像インタフェース部１１２は、カメラ１００ａにより撮影された画像（カメラの画素数に応じた解像度のビットマップデータ）を、顔認証／照合処理装置１に入力するためのインタフェースである。また、通信インタフェース部１１３は、映像音声再生装置の主制御回路１２０との通信を行うためのインタフェースである。

顔認証／照合処理装置１は、主制御回路１２０からの要求に応じてカメラ１００ａから取り込んだ顔画像の認証と照合を実行し、その結果を、通信インタフェース部１１３を介して主制御回路１２０へフィードバックする。

顔照合部１１５は、顔検出部１１４で検出した顔画像と記憶部１１７が保持するデータベース（顔イメージ、顔の特徴点に相当する情報を含むデータベース）に記憶されている特定の人物の顔画像データと、照合する。

顔検出部１１４は、カメラ１００ａにより撮影された画像から撮影された人物の顔画像を検出する。その際、顔検出部１１４では、撮影された画像データの階調やコントラストを適宜変え、輪郭強調処理をするなどして、写っている顔画像のエッジ（顔の輪郭、目、鼻、口の輪郭など）を浮き出させ、目、鼻、口などを含む顔のパターンを検出しやすくする。これにより、顔画像が存在する領域とその周辺の背景画像が存在する領域との境界が明確となり、背景画像部分の削除処理が容易になる。

以下、顔画像を含む矩形領域の左上隅を原点とする２次元の座標値等を用い、顔画像を含む２次元領域ＦＡを定める。

続いて、顔検出部１１４により、顔画像の２次元領域ＦＡにおいて、顔検出テンプレート（予め用意された１以上の標準顔パターン）を移動させながら、領域ＦＡ上の顔パターンと予め用意された標準顔パターンとの相関値を求める。

このようにして、２次元座標で表される特定位置（ｘ，ｙ）にある顔パターンの特徴点（目、鼻、口等）について、標準パターンとの相関値をコード化する。その結果が、図１に示したサーバ１０００の宛先管理テーブル１００１における顔の特徴点に記載される。このとき、テーブル１００１において顔の特徴点が記載される行は、顔の相関値を求めた原顔画像のイメージが登録された行となる（例えばＩＤ＝１の行に登録された顔イメージの特徴点の相関値コードは、ＩＤ＝１の行に記載される）。

いま、予め用意されたサイズの異なる複数の標準顔パターンをｇｓ（ｉ，ｊ）とし、この標準顔パターンｇｓ（ｉ，ｊ）と２次元領域ＦＡの画像ｆ（ｘ，ｙ）内の局所領域（目、鼻、口などの領域）との相関をＭｓ（ｘ，ｙ）とする。この場合、局所領域における相関Ｍｓ（ｘ，ｙ）は、例えば
Ｍｓ（ｘ，ｙ）＝
Σｆ（ｘ＋ｉ，ｙ＋ｉ）・ｇｓ（ｉ，ｊ）／
｛Σｆ（ｘ＋ｉ，ｙ＋ｉ）・Σｇｓ（ｉ，ｊ）｝ …（１）
として求めることができる。ここで、サイズの異なる標準顔パターンｇｓ（ｉ，ｊ）は、決められたサイズで予め収集した顔パターンを平均するなどして作成できる。

上述した相関Ｍｓの求め方については、公知の方法を採用することができる。その一例として、特開２００３−１０８９３５号公報開示された「証明用媒体発行装置および本人照合装置」を参考までに挙げておく（この公報の段落００４３〜００５７には、顔認証／照合処理で利用可能な具体例が示されている）。

顔認証／照合処理装置１に顔認証／照合処理を指示し、その処理結果を受けて上述した処理を実行する映像音声再生装置の主制御回路１２０には、機器構成に応じて差異があるが、顔画像表示やビデオメール再生を行う表示部１２１、メール着信の音声案内やビデオメール内の音声出力を行うスピーカ１２２、スピーカ１２２から出す音声案内の音声データメモリを持ち、その音声データから音声信号を合成する音声合成部１２３、表示部１２１で表示するサムネイルやダイアログあるいは絵文字が展開されるビデオメモリ１２４、ユーザ操作を受けるリモコン１２５、ビデオレターやその他の情報を保持するハードディスクドライブ（ＨＤＤ）１２６、ビデオレターやその他の情報を保持するメモリ（ＩＣカード）１２７等が接続されている。この顔認証／照合処理装置１は、インターネットあるいはホームネットワーク経由で、ビデオレターサーバ１０００の宛先管理テーブル１００１との間で、その内容を、適宜取り出し、あるいはその内容を適宜書き替える（追加登録や不要情報の削除）ことができることはいうまでもない。なお、顔照合部１１５においては、詳述しないが、顔イメージから、性別や年齢層を推定（判断）することができることも周知である。

また、図１５に示した顔認識・照合装置１および映像音声再生装置の主制御回路１２０の機能は、図１に一例を示したさまざまな家庭内ユーザ端末装置である電子機器（テレビジョン受信装置１０、レコーダ装置２０、テレビジョン受信装置２００、パーソナルピュータ３００、ゲーム機４００、携帯電話５００等）のそれぞれに組み込むことができる。ただし、顔認証の処理能力は、個々の機器で異なっていてもよい。例えば、テレビジョン受信装置２００やパーソナルコンピュータ３００では、１画面に複数の顔があってもそれらを別々に認識できるものとし、ゲーム機４００や携帯電話５００においては、カメラの前のユーザの顔を、１人だけ認識するものとすることができる。

以上説明したように、この発明の一つの実施の形態によれば、視聴者（操作者）が見たときに、表示される写真あるいは再生されるコンテンツを任意に選ぶことができる。また、同様に、起動されるウィジェットを、視聴者（操作者）に応じて任意に設定することができる。特に、室内（その場）にいる視聴者（操作者）が１人である場合には、実質的に各人専用端末化された映像音声再生装置として利用できる。すなわち、操作者（視聴者）が視線を合わせることで、一目で（個人に合わせた）情報を得ることができる。なお、個人向け表示条件は、１度設定すれば、引き続く操作は実質的に不要となる。特に、同席者や家族に対して見せないと決めた映像等は、操作者のみが在席の場合以外は再生されないため、映像音楽再生装置を共用する各人の同席を気にする必要がなくなる。

またさらに、この発明の一つの実施の形態によれば、顔認識により、周りにいる人に応じた動作が可能であって、見る人に合わせた情報や音楽を自動的に表示もしくは再生することができる。また、ウィジェットを見せる人を選択する手段とウィジェットを表示する手段を持ち、選択した人が画面を見たら、登録したウィジェットが表示される。さらに、時間帯を区切って、時間情報に基づいて異なるウィジェットを表示することができる。なお、ウィジェットを見せない人を選択する手段を持ち、見せないと設定した人がいたら特定のウィジェットについては表示しないことができる。逆に、視聴者（操作者）のみが在席である場合には、予め設定した全てのウィジェットを再生できる。

またさらに、この発明の一つの実施の形態によれば、視聴者（操作者）の会話から話題（キーワード）を取得し、取得したキーワードに属性が一致する情報を提示できる。

なお、視聴する人がいなくなった場合には、表示を停止することで省エネルギーを実現できる。

１…顔認証／照合処理装置（ハードウエアまたはファームウエアもしくはソフトウエア）、１０…テレビジョン受信装置（家庭内ユーザ端末１）、１０ａ…テレビジョン受信装置一体型デジタルカメラ（視聴者（ユーザ）の顔情報／視聴者（ユーザ）の在席状況収集用）、２０…ビデオレコーダ装置（家庭内ユーザ端末２）、２０ａ…ビデオレコーダ装置一体型デジタルカメラ（視聴者（ユーザ）の顔情報／視聴者（ユーザ）の在席状況収集用）、１００…デジタルフォトフレーム（映像音声再生装置／家庭内ユーザ端末３）、１００ａ…デジタルフォトフレーム一体型デジタルカメラ（視聴者（ユーザ）の顔情報／視聴者（ユーザ）の在席状況収集用）、１２０…デジタルフォトフレーム等の映像音声再生装置（家庭内ユーザ端末）の制御部、２００…デジタルテレビジョン受信装置、２００ａ…テレビジョン受信装置一体型デジタルカメラ（視聴者（ユーザ）の顔情報収集用）、３００…パーソナルコンピュータ、３００ａ…パーソナルコンピュータ一体型デジタルカメラ（視聴者（ユーザ）の顔情報収集用）、４００…コンピュータゲーム機（カメラ付ゲーム機）、４００ａ…ゲーム機一体型デジタルカメラ（視聴者（ユーザ）の顔情報収集用）、５００…携帯電話器）、５００ａ…携帯電話器のカメラ装置（視聴者（ユーザ）の顔情報収集用）、１０００…ビデオレターサーバ、１００１…宛先管理テーブル。

Claims (11)

1. 視聴者の顔画像データを取り込み、
   取り込んだ顔画像データから視聴者を特定し、
   予め視聴者毎に区分された規則に従って、在席する視聴者に応じた情報を提示する情報再生方法。
2. 在席する視聴者が本人のみである場合、予め設定された全ての情報を提示することを特徴とする請求項１記載の情報再生方法。
3. 在席する視聴者が本人と予め視聴が許可された特定の在席者である場合、予め視聴が許可された特定の在席者への提示が指定されている全ての情報を提示することを特徴とする請求項１記載の情報再生方法。
4. 在席する視聴者が本人と予め視聴が許可された特定の在席者とそれ以外の在籍者である場合、全ての視聴者への提示が指定されている情報のみを提示することを特徴とする請求項１記載の情報再生方法。
5. 在席者の顔の情報を取り込む手段と、
   この取り込む手段により取り込まれた在席者の顔の情報を、予め保持したデータベースが保持する顔の情報と比較する手段と、
   この比較する手段の比較結果に基づいて、情報の再生を許可する顔情報照合手段と、
   この顔情報照合手段による照合結果に基づいて、前記取り込む手段が顔の情報を取り込んだ在席者に対して提示する情報を設定する設定手段と、
   この設定手段による設定結果に基づいて、前記取り込む手段が顔の情報を取り込んだ在席者に対して提示することが設定された情報を再生する再生手段と、
   を有することを特徴とする情報再生装置。
6. 前記設定手段は、前記取り込む手段が顔の情報を取り込んだ在席者に対して提示することが禁止されている情報を除いた情報についてのみ前記再生手段による再生を許可することを特徴とする請求項５記載の情報再生装置。
7. 前記設定手段は、前記取り込む手段が顔の情報を取り込んだ在席者が一人のみである場合に、その在席者に対する提示が許可されている全ての情報について前記再生手段による再生を許可することを特徴とする請求項５記載の情報再生装置。
8. 前記設定手段による設定を時間とともに変更する手段をさらに有し、前記設定手段により提示が許可されている情報を、時間の経過に合わせて変更して前記再生手段により再生することを特徴とする請求項６または７記載の情報再生装置。
9. 在席者の会話を取得し、その会話からキーワードを抽出する手段をさらに有し、前記設定手段により提示が許可されている情報と抽出されたキーワードに関連のある情報を取得して前記再生手段により再生することを特徴とする請求項６または７記載の情報再生装置。
10. 前記取り込む手段により在席者がないことが検知された場合に、前記再生手段の動作を停止する手段をさらに有することを特徴とする請求項５記載の情報再生装置。
11. 機器操作者の顔を顔イメージ画像として取り込むカメラモジュールと、
    このカメラモジュールが取り込んだ顔イメージ画像から特徴点を抽出して符号化または文字列化する符号化モジュールと、
    この符号化モジュールにより符号化または文字列化された特徴点に従い、機器操作者を特定する操作者特定モジュールと、
    この操作者特定モジュールにより特定された操作者について再生が認められて情報を再生する情報再生モジュールと、
    を有することを特徴とする情報再生装置。

Images