WO2010089989A1

WO2010089989A1 - 情報表示装置及び情報表示方法

Info

Publication number: WO2010089989A1
Application number: PCT/JP2010/000595
Authority: WO
Inventors: 坂田幸太郎; 前田茂則
Original assignee: パナソニック株式会社
Priority date: 2009-02-05
Filing date: 2010-02-02
Publication date: 2010-08-12
Also published as: JPWO2010089989A1; EP2395420A1; US20110267374A1; JP5286371B2; EP2395420A4; EP2395420B1

Abstract

　ユーザに唐突な印象を与えずに通知情報をユーザに提示することができる情報表示装置を提供する。ユーザに通知するための情報である通知情報を画面に表示する情報表示装置（１０）であって、ユーザの物理的な状態を示すユーザ状態を検出するユーザ状態検出部（１１）と、検出されたユーザ状態に基づいて、画面に対するユーザの集中度合いを示す集中度を推定する集中度推定部（１２）と、ユーザによって視認される領域である有効視野領域の外部に初期表示位置が位置するように、推定された集中度に基づいて通知情報の初期表示位置を決定するアプリケーション制御部（１３）と、決定された初期表示位置に通知情報を表示し、かつ、表示後の通知情報の表示位置及び表示態様の少なくとも一方を変化させる画面描画部（１４）とを備える。

Description

情報表示装置及び情報表示方法

　本発明は、ユーザに通知するための情報である通知情報を画面に表示する情報表示装置に関する。

　ディスプレイの大画面化・薄型化に伴い、ＴＶは単に放送コンテンツを視聴するために利用されるだけでなく、複数の情報の同時利用、大量の情報の一覧といった新しい利用方法への可能性が広がりつつある。ＴＶの進化の一例として、家庭のリビングルームの壁一面をディスプレイとして備えるＴＶが提案されている。このようなＴＶでは、生活に密着したさまざまな情報を適切なタイミングで提示することができる。

　また、家庭内ネットワークが普及したことにより、ＴＶ、ＢＤレコーダー、及びネットワークカメラなどを互いに連携させることが実現されている。その結果、ユーザは、一つのリモコンを用いて複数の機器を操作できる。さらに、ユーザは、ＴＶの画面でネットワークカメラの映像を確認することもできる。また、これらの機器に加えて、洗濯機あるいは電子レンジといった白物家電が家庭内ネットワークにつながれば、ユーザは各機器の状態をＴＶで確認することも可能となる。すなわち、ネットワークに接続された複数の機器が、互いに連携し、ＴＶなどの表示装置に各機器からの通知情報を提示することで、ユーザはＴＶの前にいながらにして、さまざまな機器の情報を取得できる。

　このような通知情報をユーザに提示する方法として、従来、通知情報をユーザに提示するタイミングを制御する方法が提案されている（例えば、特許文献１を参照）。特許文献１に記載の方法では、通知情報を提示する適切なタイミングを判断するためのポリシーと、割り込みについてのユーザのコストなどユーザの状況とを考慮して、通知情報がユーザに提示される。

　ところで、ユーザの有効視野の大きさを考慮して、情報をユーザに提示する方法も提案されている（例えば、特許文献２を参照）。特許文献２に記載の方法では、画面上に表示される画像の表示位置と視野中心までの距離とに応じて画像の大きさが調整される。これにより、視野中心部と視野周辺部とでユーザによる画像の認知に差がでないようにすることができる。

特開２００４－２６６８１５号公報特開２００１－３１８７４７号公報

　ところで、ユーザがコンテンツを視聴中に当該コンテンツと関係のない通知情報が画面に突然表示されれば、ユーザは、唐突な印象を受けることにより煩わしく感じる。上記従来の方法では、このような課題を解決することはできない。

　そこで、本発明は、上記従来の課題を解決するものであって、ユーザに唐突な印象を与えずに通知情報をユーザに提示することができる情報表示装置を提供することを目的とする。

　上記目的を達成するために、本発明の一態様に係る情報表示装置は、ユーザに通知するための情報である通知情報を画面に表示する情報表示装置であって、前記ユーザの物理的な状態を示すユーザ状態を検出するユーザ状態検出部と、前記ユーザ状態検出部により検出されたユーザ状態に基づいて、前記画面に対する前記ユーザの集中度合いを示す集中度を推定する集中度推定部と、前記ユーザによって視認される領域である有効視野領域の外部に初期表示位置が位置するように、前記集中度推定部により推定された集中度に基づいて通知情報の初期表示位置を決定するアプリケーション制御部と、前記アプリケーション制御部により決定された初期表示位置に通知情報を表示し、かつ、表示後の通知情報の表示位置及び表示態様の少なくとも一方を変化させる画面描画部とを備える。

　この構成により、初期表示位置が有効視野領域の外部に位置するように、通知情報の初期表示位置を決定することができるので、通知情報が初期表示された際にユーザに唐突な印象を与えることを抑制することができる。さらに、表示後の通知情報の表示位置又は表示態様を変化させることにより、ユーザにさりげなく通知情報を気付かせることができ、唐突な印象を与えずに通知情報をユーザに提示することができる。

　また、前記ユーザ状態検出部は、前記画面を含む平面上における前記ユーザの注視点の位置を、前記ユーザ状態として検出し、前記アプリケーション制御部は、前記集中度推定部により推定された集中度が小さいほど、前記ユーザ状態検出部により検出された注視点の位置により定まる位置から遠くなるように、前記初期表示位置を決定することが好ましい。

　この構成により、集中度が小さいほど注視点の位置により定まる位置から遠くなるように初期表示位置を決定することができ、初期表示位置が有効視野領域の外部に位置するように初期表示位置を容易に決定することができる。

　また、前記アプリケーション制御部は、さらに、前記集中度推定部により推定された集中度が大きいほど移動速度が大きくなるように移動速度を決定し、前記画面描画部は、前記アプリケーション制御部により決定された移動速度で通知情報の表示位置を移動させることにより、通知情報の表示位置を変化させることが好ましい。

　この構成により、集中度に応じて通知情報の表示位置の移動速度を決定することができるので、より唐突な印象を与えずに通知情報をユーザに提示することができる。

　また、前記ユーザ状態検出部は、前記画面を含む平面上におけるユーザの注視点の位置を、前記ユーザ状態として検出し、前記画面描画部は、前記ユーザ状態検出部により所定期間内に検出された複数の注視点の位置を代表する位置に向けて通知情報の表示位置を移動させることにより、通知情報の表示位置を変化させることが好ましい。

　この構成により、所定期間内に検出された複数の注視点を代表する位置に向けて通知情報の表示位置を移動させることができるので、より唐突な印象を与えずに通知情報をユーザに提示することができる。

　また、前記画面描画部は、前記画面に表示されたコンテンツの表示領域内の所定位置に向けて通知情報の表示位置を移動させることにより、通知情報の表示位置を変化させることが好ましい。

　この構成により、コンテンツの表示領域内の位置に向けて通知情報の表示位置を移動させることができるので、より唐突な印象を与えずに通知情報をユーザに提示することができる。

　また、前記画面描画部は、前記画面に表示されたコンテンツの表示領域外の位置であって、かつ前記コンテンツの表示領域の境界近傍の位置に向けて、通知情報の表示位置を移動させることにより、通知情報の表示位置を変化させることが好ましい。

　この構成により、コンテンツの表示領域外の位置であって、かつコンテンツの表示領域の境界近傍の位置に向けて通知情報の表示位置を移動させることができるので、より唐突な印象を与えずに通知情報をユーザに提示することができる。

　また、前記アプリケーション制御部は、さらに、前記集中度推定部により推定された集中度が大きいほど表示領域が大きくなるように表示領域の大きさを決定し、前記画面描画部は、前記アプリケーション制御部により決定された初期表示位置に通知情報を表示する際に、決定された大きさの表示領域に通知情報を表示することが好ましい。

　この構成により、集中度に応じた大きさで通知情報を表示することができるので、より唐突な印象を与えずに通知情報をユーザに提示することができる。

　また、さらに、前記画面に表示されたコンテンツと前記通知情報との関連度合いを示す関連度を推定する関連度推定部を備え、前記ユーザ状態検出部は、前記画面を含む平面上におけるユーザの注視点の位置を、前記ユーザ状態として検出し、前記アプリケーション制御部は、前記関連度推定部により推定された関連度が小さいほど、前記ユーザ状態検出部により検出された注視点の位置により定まる位置から初期表示位置が遠くなるように、前記初期表示位置を決定することが好ましい。

　この構成により、通知情報とコンテンツとの関連度に基づいて通知情報の初期表示位置を決定することができるので、より唐突な印象を与えずに通知情報をユーザに提示することができる。

　また、前記アプリケーション制御部は、さらに、前記関連度推定部により推定された関連度が大きいほど移動速度が大きくなるように移動速度を決定し、前記画面描画部は、決定された移動速度で通知情報の表示位置を移動させることにより、通知情報の表示位置を変化させることが好ましい。

　この構成により、通知情報とコンテンツとの関連度に基づいて通知情報の移動速度を決定することができるので、より唐突な印象を与えずに通知情報をユーザに提示することができる。

　また、さらに、前記通知情報の重要度合いを示す重要度、又は前記通知情報の緊急度合いを示す緊急度を取得する重要度／緊急度取得部を備え、前記アプリケーション制御部は、前記重要度／緊急度取得部により取得された重要度又は緊急度が小さいほど、前記ユーザ状態検出部により検出された注視点の位置により定まる位置から初期表示位置が遠くなるように、前記初期表示位置を決定することが好ましい。

　この構成により、通知情報の重要度又は緊急度に基づいて通知情報の初期表示位置を決定することができるので、重要度又は緊急度が大きい通知情報を、より早くユーザに提示することができる。

　また、前記アプリケーション制御部は、さらに、前記重要度／緊急度取得部により取得された重要度又は緊急度が大きいほど移動速度が大きくなるように移動速度を決定し、前記画面描画部は、決定された移動速度で通知情報の表示位置を移動させることにより、通知情報の表示位置を変化させることが好ましい。

　この構成により、通知情報の重要度又は緊急度に基づいて通知情報の移動速度を決定することができるので、重要度又は緊急度が大きい通知情報を、より早くユーザに提示することができる。

　また、前記ユーザ状態検出部は、前記画面を含む平面上におけるユーザの注視点の位置を、前記ユーザ状態として検出し、前記集中度推定部は、前記ユーザ状態検出部により所定期間内に検出された複数の注視点からなる注視点分布に基づいて、前記集中度を推定することが好ましい。

　この構成により、ユーザの集中度を高精度に推定することができる。

　また、前記ユーザ状態検出部は、前記画面を含む平面上におけるユーザの注視点の位置を、前記ユーザ状態として検出し、前記集中度推定部は、前記ユーザ状態検出部により検出された注視点の移動量に基づいて、前記集中度を推定することが好ましい。

　また、前記ユーザ状態検出部は、ユーザの顔向きを前記ユーザ状態として検出し、前記集中度推定部は、前記ユーザ状態検出部により所定期間内に検出された複数の顔向きからなる顔向き分布に基づいて、前記集中度を推定することが好ましい。

　また、前記ユーザ状態検出部は、ユーザの姿勢を前記ユーザ状態として検出し、前記集中度推定部は、前記ユーザ状態検出部により検出された姿勢に基づいて、前記集中度を推定することが好ましい。

　また、さらに、集中度と有効視野領域の大きさを示す有効視野領域情報とを対応付けて格納しているユーザ情報データベースとを備え、前記ユーザ状態検出部は、前記画面を含む平面上におけるユーザの注視点の位置を、前記ユーザ状態として検出し、前記アプリケーション制御部は、前記ユーザ情報データベースを参照することにより、前記集中度推定部により推定された集中度に対応する有効視野領域情報を取得し、取得した有効視野領域情報と、前記ユーザ状態検出部により検出された注視点とを用いて推定される有効視野領域の外部に前記初期表示位置を決定することが好ましい。

　この構成により、ユーザ情報データベースを参照して、集中度に対応する有効視野領域情報を取得することにより、初期表示位置が有効視野領域の外部に位置するように、通知情報の初期表示位置を容易に決定することができる。

　また、前記アプリケーション制御部は、さらに、前記画面描画部によって通知情報の表示位置が変化させられている間に、通知情報の表示位置とユーザの注視点の位置との距離が閾値未満であるか否かを判定し、距離が閾値未満であると判定された場合に、当該表示位置を用いて、前記ユーザ情報データベースに格納された有効視野領域情報を更新することが好ましい。

　この構成により、ユーザ情報データベースに格納される有効視野領域情報の精度を高めることができる。

　また、さらに、前記画面の前方にいるユーザを識別するユーザ識別部を備え、前記ユーザ情報データベースは、ユーザごとに、集中度と有効視野領域の大きさを示す有効視野領域情報とを対応付けて格納し、前記アプリケーション制御部は、前記ユーザ識別部により識別されたユーザに対応する有効視野領域情報を取得することが好ましい。

　この構成により、初期表示位置が有効視野領域の外部に位置するように高精度に初期表示位置を決定することができる。

　また、本発明の一態様に係る情報表示方法は、ユーザに通知するための情報である通知情報を画面に表示する情報表示方法であって、ユーザの物理的な状態を示すユーザ状態を検出するユーザ状態検出ステップと、前記ユーザ状態検出ステップにおいて検出されたユーザ状態に基づいて、前記画面に対するユーザの集中度合いを示す集中度を推定する集中度推定ステップと、前記ユーザによって視認される領域である有効視野領域の外部に初期表示位置が位置するように、前記集中度推定ステップにおいて推定された集中度に基づいて通知情報の初期表示位置を決定するアプリケーション制御ステップと、前記アプリケーション制御ステップにおいて決定された初期表示位置に通知情報を表示し、かつ、表示後の通知情報の表示位置及び表示態様の少なくとも一方を変化させる画面描画部とを含む。

　これにより、上記情報表示装置と同様の効果を奏することができる。

　なお、本発明は、このような情報表示方法をコンピュータに実行させるためのプログラムとして実現することもできる。そして、そのようなプログラムは、ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ　Ｄｉｓｃ　Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）等のコンピュータ読取可能な記録媒体、あるいはインターネット等の伝送媒体を介して配信することができるのは言うまでもない。

　以上の説明から明らかなように、本発明の一態様に係る情報表示装置によれば、初期表示位置がユーザの有効視野領域の外部に位置するように、通知情報の初期表示位置を決定することができる。したがって、情報表示装置は、通知情報が初期表示された際にユーザに唐突な印象を与えることを抑制することができる。さらに、情報表示装置は、表示後の通知情報の表示位置又は表示態様を変化させることにより、ユーザにさりげなく通知情報を気付かせることができ、唐突な印象を与えずに通知情報をユーザに提示することができる。

図１は、本発明の実施の形態１における情報表示装置の外観を示す図である。図２は、本発明の実施の形態１における情報表示装置の機能構成を示すブロック図である。図３は、本発明の実施の形態１における情報表示装置の動作を示すフローチャートである。図４は、本発明の実施の形態１における情報表示装置の動作を説明するための図である。図５は、本発明の実施の形態２における情報表示装置の機能構成を示すブロック図である。図６は、本発明の実施の形態２におけるユーザ情報データベースの一例を示す図である。図７は、本発明の実施の形態２における情報表示装置の動作を示すフローチャートである。図８は、本発明の実施の形態３における情報表示装置の外観と関連機器とのインタフェースの一例を説明するための図である。図９は、本発明の実施の形態３における情報表示装置の機能構成を示すブロック図である。図１０Ａは、本発明の実施の形態３におけるユーザ状態検出部によるユーザ位置の算出方法を説明するための図である。図１０Ｂは、本発明の実施の形態３におけるユーザ状態検出部によるユーザ位置の算出方法を説明するための図である。図１１は、本発明の実施の形態３における視線方向の検出に関する処理の流れを示すフローチャートである。図１２は、本発明の実施の形態３におけるユーザの顔向きを検出する処理を説明するための図である。図１３は、視線方向基準面について説明するための図である。図１４は、黒目中心の検出について説明するための図である。図１５は、黒目中心の検出について説明するための図である。図１６Ａは、本発明の実施の形態３におけるユーザ情報データベースの一例を示す図である。図１６Ｂは、本発明の実施の形態３におけるユーザ情報データベースの一例を示す図である。図１６Ｃは、本発明の実施の形態３におけるユーザ情報データベースの一例を示す図である。図１７Ａは、本発明の実施の形態３における通知情報の一例を示す図である。図１７Ｂは、本発明の実施の形態３における通知情報の一例を示す図である。図１７Ｃは、本発明の実施の形態３における通知情報の一例を示す図である。図１８Ａは、本発明の実施の形態３における情報表示装置のユースシーンを説明するための図である。図１８Ｂは、本発明の実施の形態３における情報表示装置のユースシーンを説明するための図である。図１９は、本発明の実施の形態３における情報表示装置の処理の流れを示すフローチャートである。図２０は、本発明の実施の形態３における情報表示装置の動作例を説明するための図である。図２１は、本発明の実施の形態３における情報表示装置の動作例を説明するため図である。図２２Ａは、本発明の実施の形態３の変形例１における情報表示装置の機能構成を示すブロック図である。図２２Ｂは、本発明の実施の形態３の変形例１における情報表示装置の処理の流れを示すフローチャートである。図２３Ａは、本発明の実施の形態３の変形例１における情報表示装置の動作例を説明する図である。図２３Ｂは、本発明の実施の形態３の変形例１における情報表示装置の動作例を説明する図である。図２４Ａは、本発明の実施の形態３の変形例２におけるユーザ位置に基づく表示領域の制御方法の概略を説明するための図である。図２４Ｂは、本発明の実施の形態３の変形例２におけるユーザ位置に基づく表示領域の制御方法の概略を説明するための図である。図２４Ｃは、本発明の実施の形態３の変形例２におけるユーザ位置に基づく表示領域の制御方法の概略を説明するための図である。図２５は、本発明の実施の形態３の変形例２における情報表示装置の動作例を説明するための図である。図２６Ａは、本発明の実施の形態３の変形例３における情報表示装置の動作例を説明するための図である。図２６Ｂは、本発明の実施の形態３の変形例３における情報表示装置の動作例を説明するための図である。図２７Ａは、本発明の実施の形態３の変形例４における情報表示装置の動作例を説明するための図である。図２７Ｂは、本発明の実施の形態３の変形例４における情報表示装置の動作例を説明するための図である。図２７Ｃは、本発明の実施の形態３の変形例４における情報表示装置の動作例を説明するための図である。図２８Ａは、本発明の実施の形態３の変形例５における情報表示装置の動作例を説明するための図である。図２８Ｂは、本発明の実施の形態３の変形例５における情報表示装置の動作例を説明するための図である。図２９Ａは、本発明の実施の形態３の変形例６における情報表示装置の動作例を説明するための図である。図２９Ｂは、本発明の実施の形態３の変形例６における情報表示装置の動作例を説明するための図である。図３０Ａは、本発明の実施の形態３の変形例６における情報表示装置の動作例を説明するための図である。図３０Ｂは、本発明の実施の形態３の変形例６における情報表示装置の動作例を説明するための図である。図３１Ａは、本発明の実施の形態３の変形例７における情報表示装置の動作例を説明するための図である。図３１Ｂは、本発明の実施の形態３の変形例７における情報表示装置の動作例を説明するための図である。図３１Ｃは、本発明の実施の形態３の変形例７における情報表示装置の動作例を説明するための図である。図３２は、本発明の実施の形態３の変形例８における情報表示装置の動作例を説明するための図である。

　以下、本発明の実施の形態について、図面を参照しながら説明する。
（実施の形態１）
　図１は、本発明の実施の形態１における情報表示装置の外観を示す図である。また、図２は、本発明の実施の形態１における情報表示装置の機能構成を示すブロック図である。

　本実施の形態における情報表示装置１０は、通知情報を画面に表示する装置であって、ユーザの有効視野領域の外部に通知情報が初期表示されるように、通知情報を画面に表示することを特徴とする。図１に示すように、情報表示装置１０は、大画面ディスプレイに適用されるのが好適である。

　図２に示すように、情報表示装置１０は、ユーザ状態検出部１１と、集中度推定部１２と、アプリケーション制御部１３と、画面描画部１４とを備える。

　ユーザ状態検出部１１は、ユーザの物理的な状態を示すユーザ状態を検出する。具体的には、ユーザ状態検出部１１は、例えば、画面を含む平面上におけるユーザの注視点の位置をユーザ状態として検出し、検出したユーザ状態を保持する。ユーザの注視点の位置を検出する方法については、実施の形態３において詳細に説明する。

　なお、ユーザ状態検出部１１は、ユーザの顔向き又はユーザの姿勢などをユーザ状態として検出してもよい。この場合、ユーザ状態検出部１１は、例えば、カメラによって撮影されたユーザの顔の像などを利用して、ユーザの顔向きを検出する。また例えば、ユーザ状態検出部１１は、カメラによって撮影されたユーザの像、又は画面の前方の床面に設置された圧力センサなどを利用して、ユーザの姿勢を検出する。

　集中度推定部１２は、検出されたユーザ状態に基づいて、画面に対するユーザの集中度合いを示す集中度を推定する。

　具体的には、集中度推定部１２は、ユーザ状態検出部１１によって所定期間内に検出された複数の注視点からなる注視点分布に基づいて集中度を推定する。例えば、集中度推定部１２は、注視点分布の分散が大きいほど集中度が小さいと推定する。ここで所定期間は、例えば、注視点が検出された直近の時刻から一定時間遡った時刻までの期間である。

　また、集中度推定部１２は、ユーザ状態検出部１１によって検出された注視点の移動量に基づいて集中度を推定してもよい。この場合、例えば、集中度推定部１２は、ユーザ状態検出部１１によって所定期間内に検出された複数の注視点の位置から注視点の移動量を算出し、算出した注視点の移動量が大きいほど集中度が小さいと推定する。

　また、集中度推定部１２は、ユーザ状態検出部１１によって所定期間内に検出された複数の顔向きからなる顔向き分布に基づいて集中度を推定してもよい。この場合、例えば、集中度推定部１２は、ユーザ状態検出部１１によって所定期間内に検出された複数の顔向きを示す値の分散が大きいほど集中度が小さいと推定する。

　また、集中度推定部１２は、ユーザ状態検出部１１によって検出されたユーザの姿勢に基づいて集中度を推定してもよい。この場合、例えば、集中度推定部１２は、姿勢（立位、座位又は臥位など）に対応する集中度が格納されたデータベースを参照することにより、検出されたユーザの姿勢に対応する集中度を推定する。

　アプリケーション制御部１３は、ユーザによって視認される領域である有効視野領域の外部に初期表示位置が位置するように、推定された集中度に基づいて通知情報の初期表示位置を決定する。具体的には、アプリケーション制御部１３は、推定された集中度が小さいほど、検出された注視点の位置により定まる位置から遠くなるように、初期表示位置を決定する。なお、アプリケーション制御部１３は、推定された集中度が小さいほど、例えば、画面に表示されたコンテンツの表示領域の中心位置又は画面の中心位置から遠くなるように、初期表示位置を決定してもよい。

　ここで、有効視野領域とは、ユーザが表示された画像などを比較的明瞭に認知できる領域であり、ユーザの集中度合いに応じて大きさが変化する領域である。例えば、有効視野領域は、注視点分布の中心位置が中心である円形又は楕円形の領域であって、ユーザの集中度が小さいほどその大きさが大きくなる領域と推定される。この有効視野領域内にいきなり通知情報が表示されれば、ユーザは、唐突な印象を受け煩わしく感じる。

　また、注視点の位置により定まる位置とは、例えば、注視点の位置そのもの、又は所定期間内に検出された複数の注視点からなる注視点分布の重心位置もしくは中心位置などである。

　また、通知情報とは、ユーザに通知するための情報である。具体的には、通知情報は、例えば、情報表示装置１０とネットワークを介して接続された機器の状態を示すテキスト情報もしくは画像情報、又は表示コンテンツに関連するテキスト情報もしくは画像情報などである。より具体的には、通知情報は、例えば、電子レンジによる加熱処理が終了したことを示す電子レンジの外観を示すアイコンなどである。

　画面描画部１４は、例えばプラズマディスプレイパネル（ＰＤＰ：Ｐｌａｓｍａ　Ｄｉｓｐｌａｙ　Ｐａｎｅｌ）又は液晶パネル（Ｌｉｑｕｉｄ　Ｃｒｙｓｔａｌ　Ｐａｎｅｌ）などの画面に通知情報を表示する。

　具体的には、画面描画部１４は、まず、決定された初期表示位置に通知情報を表示する。そして、画面描画部１４は、表示後の通知情報の表示位置及び表示態様の少なくとも一方を変化させる。

　さらに具体的には、画面描画部１４は、例えば、通知情報を示す画像をターゲット位置に移動させることにより、通知情報の表示位置を変化させる。ここでターゲット位置は、例えば、所定期間内に検出された複数の注視点を代表する位置であって、典型的には、注視点分布の中心位置である。また、ターゲット位置は、表示コンテンツの表示領域内の位置であって、典型的には、表示コンテンツの表示領域の中心位置であってもよい。また、ターゲット位置は、表示コンテンツの表示領域外の位置であって、かつ表示コンテンツの表示領域の境界近傍の位置であってもよい。

　また、例えば、画面描画部１４は、通知情報を示す画像の色もしくは鮮明度、又は通知情報の表示領域の大きさなどを変化させることにより、通知情報の表示態様を変化させる。具体的には、画面描画部１４は、通知情報の表示領域を徐々に大きくする。また、画面描画部１４は、通知情報を示す画像の鮮明度を徐々に高くしてもよい。また、画面描画部１４は、通知情報を示す画像の色を徐々に彩度が高い色に変化させてもよい。

　なお、画面描画部１４は、通知情報の表示位置及び表示態様の両方を変化させてもよい。

　次に、以上のように構成された情報表示装置１０における各種動作について説明する。

　図３は、本発明の実施の形態１における情報表示装置の動作を示すフローチャートである。

　まず、ユーザ状態検出部１１は、ユーザの物理的な状態を示すユーザ状態を検出する（Ｓ１０２）。続いて、集中度推定部１２は、検出されたユーザ状態に基づいて、画面に対するユーザの集中度合いを示す集中度を推定する（Ｓ１０４）。

　そして、アプリケーション制御部１３は、初期表示位置が有効視野領域の外部に位置するように、推定された集中度に基づいて通知情報の初期表示位置を決定する（Ｓ１０６）。

　続いて、画面描画部１４は、決定された初期表示位置に通知情報を表示する（Ｓ１０８）。そして、画面描画部１４は、表示後の通知情報の表示位置及び表示態様の少なくとも一方を変化させ（Ｓ１１０）、処理を終了する。

　図４は、本発明の実施の形態１における情報表示装置の動作を説明するための図である。具体的には、図４は、画面に表示された通知情報の経時変化を示す図である。

　周辺視野領域は、ユーザが高い解像度で物体を認知できる領域である中心視を取り囲む領域であり、ユーザが物体の動き又は変化などを認知できる領域である。一般的に、周辺視野領域の外縁は、ユーザの視野角が約１８０～２１０度となる位置である。

　有効視野領域は、この周辺視野領域のうち、ユーザが物体を比較的明瞭に認知できる領域である。この有効視野領域の大きさは、ユーザの心理的要因によって変化し、ユーザの集中度が大きいほど小さくなる。一般的に、有効視野領域の外縁は、ユーザの視野角が約４～２０度となる位置である。

　したがって、画面が大きい場合、又はユーザの位置が画面から近い場合などには、図４に示すように、有効視野領域の外部に画面領域が存在する。そこで、情報表示装置１０は、まず、集中度に基づいて、周辺視野領域のうち有効視野領域の外部の画面領域に初期表示位置が位置するように、初期表示位置を決定する。そして、情報表示装置１０は、決定した初期表示位置に通知情報を表示する。これにより、情報表示装置１０は、通知情報を表示することによってユーザに唐突な印象を与えることを抑制することができる。

　続いて、情報表示装置１０は、周辺視野領域のうち有効視野領域の外部の画面領域に表示した通知情報の表示位置及び表示態様の少なくとも一方を変化させる。例えば図４に示すように、情報表示装置１０は、有効視野領域の外部に表示した通知情報を有効視野領域の中心位置（中心視）へ向かう方向に移動させるとともに、通知情報が示す画像の大きさを徐々に大きくする。これにより、情報表示装置１０は、周辺視野領域に表示される通知情報をユーザにさり気なく気づかせることができる。

　以上のように、本実施の形態における情報表示装置１０は、初期表示位置がユーザの有効視野領域の外部に位置するように、通知情報の初期表示位置を決定することができる。したがって、情報表示装置１０は、通知情報が初期表示された際にユーザに唐突な印象を与えることを抑制することができる。さらに、情報表示装置１０は、表示後の通知情報の表示位置又は表示態様を変化させることにより、ユーザにさりげなく通知情報を気付かせることができ、唐突な印象を与えずに通知情報をユーザに提示することができる。

　また、情報表示装置１０は、集中度が小さいほど注視点の位置により定まる位置から遠くなるように初期表示位置を決定することができ、有効視野領域の外部に位置するように容易に初期表示位置を決定することができる。

　また、情報表示装置１０は、注視点の分布、注視点の移動量、ユーザの顔向き、又はユーザの姿勢などのユーザ状態に基づいて、高精度にユーザの集中度を推定することができる。

　（実施の形態２）
　次に、本発明の実施の形態２について、実施の形態１と異なる点を中心に図面を参照しながら説明する。本実施の形態における情報表示装置２０は、ユーザ情報データベース２３を参照して初期表示位置を決定する点が、実施の形態１における情報表示装置１０と主として異なる。

　図５は、本発明の実施の形態２における情報表示装置の機能構成を示すブロック図である。図５において、図２と同一の構成要素については同一の符号を付し、説明を省略する。

　アプリケーション制御部２１は、ユーザによって視認される領域である有効視野領域の外部に初期表示位置が位置するように、推定された集中度に基づいて通知情報の初期表示位置を決定する。

　具体的には、アプリケーション制御部２１は、ユーザ情報データベース２３を参照することにより、推定された集中度に対応する有効視野領域情報を取得する。そして、アプリケーション制御部２１は、取得した有効視野領域情報と、検出された注視点とを用いて推定される有効視野領域の外部に初期表示位置を決定する。

　より具体的には、例えば、有効視野領域情報が注視点分布の中心位置からの距離を示す場合、アプリケーション制御部２１は、検出された注視点分布の中心位置から、有効視野領域情報が示す距離に一定距離加算した距離だけ離れた位置を、初期表示位置と決定する。また、例えば、有効視野領域情報がユーザの視野角を示す場合、アプリケーション制御部２１は、ユーザ位置と注視点分布の中心位置とを結ぶ直線と、ユーザ位置と初期表示位置とを結ぶ直線とのなす角が視野角以上となるように、初期表示位置を決定する。

　アプリケーション制御部２１は、さらに、画面描画部２２によって通知情報の表示位置が変化させられている間に、通知情報の表示位置とユーザの注視点の位置との距離が閾値未満であるか否かを判定する。ここで閾値は、ユーザの注意が通知情報に向いていると推定される距離の上限値であり、経験あるいは実験により予め与えられる値である。

　そして、アプリケーション制御部２１は、距離が閾値未満であると判定された場合に、当該表示位置を用いて、ユーザ情報データベース２３に格納された有効視野領域情報を更新する。

　具体的には、例えば、有効視野領域情報が注視点分布の中心位置からの距離を示す場合、アプリケーション制御部２１は、通知情報の表示位置とユーザの注視点との距離が閾値未満であると判定されたとき、通知情報の表示位置と注視点分布の中心位置との距離を算出する。そして、アプリケーション制御部２１は、有効視野領域情報が示す距離を算出した距離に更新する。

　また例えば、有効視野領域情報が視野角を示す場合、アプリケーション制御部２１は、通知情報の表示位置及びユーザの目の位置を結ぶ直線と、注視点分布の中心位置及びユーザの目の位置を結ぶ直線とのなす角度を算出する。そして、アプリケーション制御部２１は、有効視野領域情報が示す視野角を算出した角度に更新する。

　画面描画部２２は、決定された初期表示位置に通知情報を表示する。そして、画面描画部２２は、表示後の通知情報の表示位置を変化させる。

　ユーザ情報データベース２３は、図６に示すように、集中度と有効視野領域情報とを対応付けて格納している。

　図６は、本発明の実施の形態２におけるユーザ情報データベースの一例を示す図である。

　有効視野領域情報は、有効視野領域の大きさを示し、図６では、注視点分布の中心位置からの距離を示す。例えば、図６に示すユーザ情報データベース２３は、集中度が「０．８」の場合、注視点分布の中心位置から「０．５」ｍ以上離れた位置が有効視野領域の外部に位置することを示す。

　次に、以上のように構成された情報表示装置２０における各種動作について説明する。

　図７は、本発明の実施の形態２における情報表示装置の動作を示すフローチャートである。図７において、図３と同一の処理については同一の符号を付し、説明を省略する。

　アプリケーション制御部２１は、ユーザ情報データベース２３を参照することにより、推定された集中度に対応する有効視野領域情報を取得する（Ｓ２０２）。続いて、アプリケーション制御部２１は、取得した有効視野領域情報と、注視点分布の中心位置とを用いて有効視野領域を推定し、推定した有効視野領域の外部に初期表示位置を決定する（Ｓ２０４）。

　そして、画面描画部２２は、決定された初期表示位置に通知情報を表示する（Ｓ２０６）。さらに、画面描画部２２は、表示後の通知情報の表示位置を変化させる（Ｓ２０８）。次に、ユーザ状態検出部１１は、新たにユーザの注視点を検出する（Ｓ２１０）。

　続いて、アプリケーション制御部２１は、現在の通知情報の表示位置と、ステップＳ２０９において検出された注視点との距離が閾値以下であるか否かを判定する（Ｓ２１２）。ここで、表示位置と注視点との距離が閾値以下である場合（Ｓ２１２のＹｅｓ）、アプリケーション制御部２１は、現在の表示位置を用いて、ユーザ情報データベース２３に格納された有効視野領域情報を更新し（Ｓ２１４）、処理を終了する。一方、表示位置と注視点との距離が閾値より大きい場合（Ｓ２１２のＮｏ）、ステップＳ２０８の処理に戻る。

　以上のように、本実施の形態における情報表示装置２０は、ユーザ情報データベース２３を参照して、集中度に対応する有効視野領域情報を取得することにより、初期表示位置が有効視野領域の外部に位置するように、容易に初期表示位置を決定することができる。

　また、情報表示装置２０は、通知情報の表示位置とユーザの注視点との距離が閾値未満である場合に、当該表示位置を用いて有効視野領域情報を更新することにより、ユーザ情報データベース２３に格納される有効視野領域情報の精度を高めることができる。

　なお、本実施の形態におけるアプリケーション制御部２１は、ユーザ情報データベース２３を更新したが、必ずしもユーザ情報データベース２３を更新する必要はない。アプリケーション制御部２１がユーザ情報データベース２３を更新しない場合であっても、情報表示装置２０は、ユーザ情報データベース２３を参照することにより、初期表示位置が有効視野領域の外部に位置するように、初期表示位置を決定することができる。

　また、本実施の形態において、アプリケーション制御部２１は、通知情報の表示位置とユーザの注視点との距離が閾値未満であるか否かを判定していたが、通知情報の表示位置とユーザの注視点との距離が閾値未満である状態が所定時間以上継続しているか否かを判定してもよい。これにより、注視点の誤検知などによる判定精度の低下を抑制することができる。

　（実施の形態３）
　本実施の形態における情報表示装置３０は、１以上のユーザにより視聴される大画面ディスプレイに適用されるのに好適であり、表示コンテンツに対するユーザの視聴状況に基づいて通知情報の表示制御を行う。

　図８は、本発明の実施の形態３における情報表示装置の外観と関連機器とのインタフェースの一例を説明するための図である。情報表示装置３０は、放送番組を受信するためのアンテナ１０１のほか、一つまたは複数のユーザ検出カメラ１０２からコンテンツ及び画像情報を取得する。また、ユーザ検出カメラ１０２は、図８のように情報表示装置３０に敷設されるのではなく、画面が設置されている壁あるいは天井に敷設されてもよい。また、ユーザ検出カメラ１０２は、情報表示装置３０と、壁あるいは天井との両方にそれぞれ敷設されてもよい。

　また、情報表示装置３０は、携帯電話１０３、ネットワークカメラ１０４、及び家電機器群１０５（例えば、冷蔵庫、洗濯機、電子レンジ、エアコン、及び照明機器など）などの通知ソース１０６と無線ネットワーク又は有線ネットワークなどを介して接続されている。また、情報表示装置３０は、ルータ／ハブ１０７を介してインターネットにも接続されている。

　図９は、本発明の実施の形態３における情報表示装置の機能構成を示すブロック図である。

　図９に示すように、情報表示装置３０は、ユーザ識別部３１と、ユーザ状態検出部３２と、集中度推定部３３と、ユーザ情報データベース３４と、関連度推定部３５と、アプリケーション制御部３６と、画面描画部３７と、画面３８とを備える。

　以下、図９の各ブロックについて、他の図面を参照しながら説明する。

　ユーザ検出カメラ１０２は、画面３８の周囲に設置されたＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）あるいはＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　Ｍｅｔａｌ　Ｏｘｉｄｅ　Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）などのイメージセンサを備えるカメラである。

　ユーザ検出カメラ１０２は画面３８の前方に存在するユーザを撮影する。

　ユーザ識別部３１は、ユーザ検出カメラ１０２によって撮影された画像から顔領域の抽出を行った後、あらかじめ登録された顔画像と抽出した顔画像の照合を行うことで、ユーザを特定する。そして、ユーザ識別部３１は、特定したユーザを識別するためのユーザ識別情報を出力する。

　ユーザ状態検出部３２は、画面３８上におけるユーザの注視点の位置を検出する。ユーザ状態検出部３２は、ユーザ位置及び視線方向を検出し、検出結果に基づいて注視点の位置を検出する。以下、ユーザ位置の検出、視線方向の検出、及び注視点の位置の検出について、順に説明する。

　まず、ユーザ位置の検出について説明する。

　ユーザ状態検出部３２は、ユーザ検出カメラ１０２により撮影された複数の画像のそれぞれにおいて、ユーザが写っている領域（以下、単に「ユーザ領域」という）の抽出を行う。その後、ユーザ状態検出部３２は、ステレオ視による視差を利用して、複数の画像におけるユーザ領域の対応関係からユーザと画面３８との相対位置（以下、単に「ユーザ位置」という）を算出する。

　図１０Ａ及び図１０Ｂは、本発明の実施の形態３におけるユーザ状態検出部によるユーザ位置の算出方法を説明するための図である。

　図１０Ａに示すように、ユーザ検出カメラ１０２は、２台一組にして互いに間隔Ｂだけ離して、画面３８に対して平行に設置される。そして、ユーザ状態検出部３２は、それぞれのユーザ検出カメラ１０２で撮影された画像内のユーザ領域を抽出する。そして、ユーザ状態検出部３２は、画像間の対応するユーザ領域の位置のずれに基づいて、画面３８との距離Ｄを算出する。

　具体的には、ユーザ状態検出部３２は、例えば、予めユーザのいない状態でそれぞれのカメラで撮影された画像を保存し、ユーザが撮影範囲（ユーザ検出可能領域）に現れたときに撮影された画像と保存した画像との差分を求めることにより、ユーザ領域を抽出する。また、ユーザ状態検出部３２は、顔画像検出及び顔画像の照合により得られるユーザの顔領域をユーザ領域として抽出することもできる。

　図１０Ｂは、２つの画像上の対応するユーザ領域の位置関係を基に、ユーザとカメラ設置面（画面３８）との距離Ｄを求める際に用いるステレオ視による測距原理を示した図である。位置測定対象であるユーザの像は、２台のユーザ検出カメラ１０２それぞれのイメージセンサの撮影面に、図１０Ｂに示すように投影される。このように投影された位置測定対象の像の画像上のずれをＺと表したとき、ユーザ状態検出部３２は、カメラの焦点距離ｆとカメラの光軸間の距離Ｂとを用いて、ユーザと画面３８との距離Ｄを式（１）のように算出することができる。

　また、ユーザ状態検出部３２は、画面３８に平行な方向のユーザ位置については、画像中のユーザ領域の位置と式（１）により算出された距離Ｄとを基に求めることができる。ユーザ状態検出部３２は、このように画面３８に対するユーザの相対的な位置を検出し出力する。

　なお、ユーザ状態検出部３２は、必ずしもステレオ視差に基づいてユーザ位置を検出する必要はない。例えば、ユーザ状態検出部３２は、光波測距（Ｔｉｍｅ　ｏｆ　Ｆｌｉｇｈｔ）の原理により得られる距離情報から、ユーザ位置を検出してもよい。この場合、ユーザ検出カメラ１０２は、光波距離の原理を利用して距離情報を出力する距離画像センサを備え、少なくとも１台設置されればよい。

　また、ユーザ状態検出部３２は、画面３８の前方の床面に設置された床圧力センサから得られる圧力値を用いて、ユーザ位置を検出してもよい。この場合、ユーザ位置の検出のためにユーザ検出カメラ１０２を設置する必要はない。

　次に、視線方向の検出について、図１１～図１５を用いて説明する。

　ユーザ状態検出部３２は、以下に説明するように、ユーザの視線方向を検出する。

　図１１は、本発明の実施の形態３における視線方向の検出に関する処理の流れを示すフローチャートである。

　図１１に示すように、ユーザ状態検出部３２は、ユーザの顔向きを検出する処理（Ｓ５１０）の結果と、顔向きに対する相対的な視線方向である相対視線方向を検出する処理（Ｓ５３０）の結果とに基づいて、視線方向を検出する（Ｓ５５０）。

　そこでまず、ユーザの顔向きを検出する処理（Ｓ５１０）について以下に説明する。

　まず、ユーザ状態検出部３２は、ユーザ検出カメラ１０２によって撮影された、画面３８の前方に存在するユーザの画像から顔領域の検出を行う（Ｓ５１２）。次に、ユーザ状態検出部３２は、検出された顔領域に対し、各基準顔向きに対応した顔部品特徴点の領域を当てはめ、各顔部品特徴点の領域画像を切り出す（Ｓ５１４）。

　そして、ユーザ状態検出部３２は、切り出された領域画像と、あらかじめ保持されたテンプレート画像との相関度を計算する（Ｓ５１６）。続いて、ユーザ状態検出部３２は、各基準顔向きが示す角度を、計算された相関度に応じて重み付けして加算した重み付け和を求め、これを検出した顔領域に対応するユーザの顔向きとして検出する（Ｓ５１８）。

　以上のように、ユーザ状態検出部３２は、ステップＳ５１２～ステップＳ５１８の処理を実行することにより、ユーザの顔向きを検出する。

　次に、相対視線方向を検出する処理（Ｓ５３０）について説明する。

　まず、ユーザ状態検出部３２は、ユーザ検出カメラ１０２によって撮影された画像を用いて、ユーザの左右の目頭の３次元位置を検出する（Ｓ５３２）。続いて、ユーザ状態検出部３２は、ユーザ検出カメラ１０２によって撮影された画像を用いて、ユーザの左右の黒目中心の３次元位置を検出する（Ｓ５３４）。そして、ユーザ状態検出部３２は、左右の目頭の３次元位置から得られる視線方向基準面と左右の黒目中心の３次元位置とを用いて、相対視線方向を検出する（Ｓ５３６）。

　以上のように、ユーザ状態検出部３２は、ステップＳ５３２～ステップＳ５３６の処理を実行することにより、相対視線方向を検出する。

　そして、ユーザ状態検出部３２は、上記のように検出された、ユーザの顔向きと相対視線方向とを用いて、ユーザの視線方向を検出する。

　次に、図１２～図１５を用いて視線方向の検出処理の詳細を説明する。

　図１２は、本発明の実施の形態３におけるユーザの顔向きを検出する処理を説明するための図である。

　まず、ユーザ状態検出部３２は、図１２（ａ）に示すように、各基準顔向きに対応した顔部品特徴点の領域を記憶している顔部品領域ＤＢから、顔部品特徴点の領域を読み出す。続いて、ユーザ状態検出部３２は、図１２（ｂ）に示すように、撮影された画像の顔領域に対し顔部品特徴点の領域を基準顔向きごとに当てはめ、顔部品特徴点の領域画像を基準顔向きごとに切り出す。

　そして、ユーザ状態検出部３２は、図１２（ｃ）に示すように、切り出された領域画像と、顔部品領域テンプレートＤＢに保持されたテンプレート画像との相関度を基準顔向きごとに計算する。また、ユーザ状態検出部３２は、このように計算された相関度が示す相関度合いの高さに応じて、基準顔向きごとの重みを算出する。例えば、ユーザ状態検出部３２は、基準顔向きの相関度の総和に対する各基準顔向きの相関度の比を重みとして算出する。

　続いて、ユーザ状態検出部３２は、図１２（ｄ）に示すように、基準顔向きが示す角度に算出された重みを乗算した値の総和を計算し、計算結果をユーザの顔向きとして検出する。図１２（ｄ）の例では、基準顔向き＋２０度に対する重みが「０．８５」、０度に対する重みが「０．１４」、－２０度に対する重みが「０．０１」であるので、ユーザ状態検出部３２は、顔向きを１６．８度（＝２０×０．８５＋０×０．１４＋（－２０）×０．０１）と検出する。

　なお、本実施の形態では、ユーザ状態検出部３２は、顔部品特徴点の領域画像を対象として相関度を計算したが、必ずしも顔部品特徴点の領域画像を対象とする必要はない。例えば、ユーザ状態検出部３２は、顔領域全体の画像を対象として相関度を計算してもよい。

　また、顔向きを検出するその他の方法としては、顔画像から目・鼻・口などの顔部品特徴点を検出し、顔部品特徴点の位置関係から顔向きを計算する方法がある。顔部品特徴点の位置関係から顔向きを計算する方法としては、１つのカメラから得られた顔部品特徴点に最も一致するように、あらかじめ用意した顔部品特徴点の３次元モデルを回転・拡大縮小してマッチングし、得られた３次元モデルの回転量から顔向きを計算する方法がある。また、顔部品特徴点の位置関係から顔向きを計算する他の方法として、２台のカメラにより撮影された画像を基にステレオ視の原理を用いて、左右のカメラにおける顔部品特徴点位置の画像上のずれから各顔部品特徴点の３次元位置を計算し、得られた顔部品特徴点の位置関係から顔向きを計算する方法がある。具体的には例えば、両目及び口の３次元座標点で張られる平面の法線方向を顔向きとして検出する方法などがある。

　次に、相対視線方向を検出する方法について、図１３、図１４及び図１５を用いて説明する。本実施の形態では、ユーザ状態検出部３２は、まず視線方向基準面を検出し、次に黒目中心の３次元位置を検出し、最後に相対視線方向を検出する。

　まず、視線方向基準面の検出について説明する。

　図１３は、視線方向基準面について説明するための図である。本実施の形態では、ユーザ状態検出部３２は、左右の目頭（左目及び右目の鼻側の端点）の３次元位置を検出することにより、視線方向基準面を検出する。

　視線方向基準面は、相対視線方向を検出する際に基準となる面であり、図１３に示すように顔の左右対称面と同一である。なお、目頭の位置は、目尻、口角、あるいは眉などの他の顔部品の位置に比べて、表情による変動が少なく、また誤検出が少ない。したがって、本実施の形態では、ユーザ状態検出部３２は、顔の左右対称面である視線方向基準面を目頭の３次元位置を用いて検出する。

　具体的には、ユーザ状態検出部３２は、２つのユーザ検出カメラ１０２で同時に撮影された２枚の画像のそれぞれにおいて、顔検出モジュールと顔部品検出モジュールとを用いて、左右の目頭領域を検出する。そして、ユーザ状態検出部３２は、検出した目頭領域の画像間の位置のずれ（視差）を利用して、左右の目頭それぞれの３次元位置を検出する。さらに、ユーザ状態検出部３２は、図１３に示すように、検出した左右の目頭の３次元位置を端点とする線分の垂直二等分面を視線方向基準面として検出する。

　次に、黒目中心の検出に関して説明する。

　図１４及び図１５は、黒目中心の検出について説明するための図である。

　人は、対象物からの光が瞳孔を通って網膜に届き、電気信号に変換され、その電気信号が脳に伝達されることにより、対象物を視覚的に認識する。したがって、瞳孔の位置を用いれば、視線方向を検出することができる。しかし、日本人の虹彩は、黒又は茶色であるので、画像処理によって瞳孔と虹彩とを判別することが難しい。また、瞳孔の中心と黒目（瞳孔及び虹彩の両方を含む）の中心とは、ほぼ一致する。そこで本実施の形態では、ユーザ状態検出部３２は、相対視線方向を検出する際に、黒目中心の検出を行う。

　ユーザ状態検出部３２は、まず、撮影された画像から目尻と目頭との位置を検出する。そして、ユーザ状態検出部３２は、図１４に示すような、目尻と目頭とを含む領域の画像から、輝度が小さい領域を、黒目領域として検出する。具体的には、ユーザ状態検出部３２は、例えば、輝度が所定閾値以下なる領域であって、所定の大きさよりも大きい領域を黒目領域として検出する。

　次に、ユーザ状態検出部３２は、図１５に示すような、第１領域と第２領域とからなる黒目検出フィルタを黒目領域の任意の位置に設定する。そして、ユーザ状態検出部３２は、第１領域内の画素の輝度と第２領域内の画素の輝度との領域間分散が最大となるような黒目検出フィルタの位置を探索し、探索結果が示す位置を黒目中心として検出する。ユーザ状態検出部３２は、上記と同様に、同時に撮影された２枚の画像における黒目中心の位置のずれを利用して、黒目中心の３次元位置を検出する。

　最後に、相対視線方向の検出について説明する。

　ユーザ状態検出部３２は、検出した視線方向基準面と、黒目中心の３次元位置とを用いて、相対視線方向を検出する。成人の眼球直径は、ほとんど個人差がないことが知られており、例えば日本人の場合約２４ｍｍである。したがって、基準となる方向（例えば正面）を向いたときの黒目中心の位置が分かっていれば、そこから現在の黒目中心位置までの変位を求めることで視線方向に変換算出することができる。

　従来手法では基準となる方向を向いた時の黒目中心の位置が既知ではないため、キャリブレーションを必要としていた。しかし、本手法では、正面を向いたときは、左右の黒目中心を結んだ線分の中点が、顔の中心、すなわち視線方向基準面上に存在することを利用する。つまり、ユーザ状態検出部３２は、左右の黒目中心を結んだ線分の中点と視線方向基準面との距離を算出することにより、相対視線方向を検出する。

　具体的には、ユーザ状態検出部３２は、眼球半径Ｒと左右の黒目中心を結んだ線分の中点と視線方向基準面との距離ｄとを用いて、式（２）に示すように、顔向きに対する左右方向の回転角θを相対視線方向として検出する。

　以上のように、ユーザ状態検出部３２は、視線方向基準面と黒目中心の３次元位置とを用いて、相対視線方向を検出する。そして、ユーザ状態検出部３２は、検出された顔向きと相対視線方向とを用いて、ユーザの視線方向を検出する。

　最後に、注視点の位置の検出について説明する。

　ユーザ状態検出部３２は、上記のように検出されたユーザ位置とユーザの視線方向とを用いて、画面を含む平面上におけるユーザの注視点の位置を検出する。具体的には、ユーザ状態検出部３２は、ユーザ位置から視線方向に伸びる直線と画面を含む平面との交点を算出することにより、ユーザの注視点の位置を検出する。

　このように、ユーザ状態検出部３２は、ユーザの注視点の位置をユーザ状態として検出するが、さらに、注視点の位置を検出する際に検出したユーザの顔向きをユーザ状態として検出してもよい。またさらに、ユーザ状態検出部３２は、ユーザの姿勢をユーザ状態として検出してもよい。

　図９の各ブロックについての説明に戻る。

　集中度推定部３３は、ユーザ状態検出部３２が検出したユーザ状態を用いて、ユーザ識別部３１によって識別された、表示コンテンツの視聴対象であるユーザごとの集中度を推定する。具体的には、集中度推定部３３は、例えば、所定時間毎のユーザの顔向きの分布を基にユーザの集中度を算出すればよい。また、集中度推定部３３は、所定時間毎のユーザの注視点の分布を基にユーザの集中度を算出してもよい。さらに、集中度推定部３３は、ユーザの姿勢を基にユーザの集中度を算出してもよい。

　集中度の算出方法の具体的な方法については、後述する。

　ユーザ情報データベース３４は、図１６Ａ～図１６Ｃに示す各種情報を格納している。

　図１６Ａ～図１６Ｃは、本発明の実施の形態３におけるユーザ情報データベースの一例を示す図である。

　ユーザ情報データベース３４は、図１６Ａ～図１６Ｃに示す、基本属性情報と身体特徴情報と認知特性情報とを格納している。具体的には、ユーザ情報データベース３４は、図１６Ａに示すように、ユーザを識別するためのＩＤに対応付けて、例えば氏名、性別、年齢、誕生日、及び続柄などの基本属性情報を格納している。

　さらに、ユーザ情報データベース３４は、図１６Ｂに示すように、ユーザを識別するためのＩＤに対応付けて、立位での身長と目の高さ、座位での身長と目の高さ、利き手、利き目、視力、及び聴力など、ユーザの姿勢別の身体形状及び視聴能力などの身体特徴情報を格納している。

　またさらに、ユーザ情報データベース３４は、図１６Ｃに示すように、認知特性情報をユーザごとに格納している。具体的には、ユーザ情報データベース３４は、時刻と集中度と有効視野領域情報とを関連付けた認知特性情報をユーザごとに格納している。なお、図１６Ｃに示す認知特性情報では、有効視野領域情報として視野角が格納されている。

　また、ユーザ情報データベース３４は、さらに表示コンテンツの内容（地上波放送の５ｃｈのドラマ、写真閲覧アプリケーションなど）、及び周囲にいる人の位置関係（「ＨＧ００３（０．４、０．６）」など）を、集中度と関連付けて格納してもよい。ここで、「ＨＧ００３（０．４、０．６）」とは、ｘ座標方向に０．４ｍ、ｙ座標方向に０．６ｍ離れた位置に、ＩＤがＨＧ００３のユーザが位置することを示す。

　通知ソース１０６は、通知情報を情報表示装置３０に出力する。通知ソース１０６としては、図８に示すように、冷蔵庫、洗濯機、及び電子レンジといった家庭内ネットワークに接続された家電機器群１０５、ネットワークカメラ１０４、並びに携帯電話１０３などが例として挙げられる。

　図１７Ａ～図１７Ｃは、本発明の実施の形態３における通知情報の一例を示す図である。

　通知情報としては、図１７Ａに示すような通知アイコン、図１７Ｂに示すような通知テキスト、又は図１７Ｃに示すようなサムネイル画像／映像などの画像情報又はテキスト情報が挙げられる。

　以下では、「電子レンジからの調理完了の通知」を通知情報の一例として説明するが、もちろん通知情報はこの例に限られるものではない。機器の状態もしくは作業の進捗状況の通知、電子メールなどの着信、又はスケジュールの通知など、さまざまな情報が通知情報となりえる。

　関連度推定部３５は、通知情報と表示コンテンツとの関連度合いを示す関連度ｒを算出する。関連度の算出方法については、後述する。

　アプリケーション制御部３６は、ユーザ識別部３１が出力するユーザ識別情報、ユーザ状態検出部３２が出力するユーザ状態、集中度推定部３３が出力するユーザの集中度を入力情報として用いて、表示制御を行なう。また、アプリケーション制御部３６は、これらの入力情報に加えて、ユーザ情報データベース３４、通知ソース１０６、及び関連度推定部３５から出力された入力情報を用いて、表示制御を行う。

　画面の描画内容の更新を行う場合は、アプリケーション制御部３６は、その描画内容の更新情報を画面描画部３７に出力する。画面描画部３７は、描画内容を画面３８へ提示する。

　図１８Ａ及び図１８Ｂは、本発明の実施の形態３における情報表示装置のユースシーンを説明するための図である。

　図１８Ａ及び図１８Ｂでは、ユーザが画面３８の一部を表示領域とする表示コンテンツ（主コンテンツ）を視聴しているときに、情報表示装置３０は、機器から出力された通知情報を示すアイコンを画面上の初期表示位置に面積Ｓの大きさで表示する。この初期表示位置は、第１ターゲット位置から距離ｄ１だけ離れた位置であり、第２ターゲット位置から距離ｄ２だけ離れた位置である。

　なお、注視点分布中心４１は、所定時間毎に検出された複数の注視点からなる注視点分布の中心位置である。また、現在注視点４２は、直近に検出されたユーザの注視点の位置である。

　そして、情報表示装置３０は、アイコンを、初期表示位置からユーザが視聴する表示コンテンツの表示領域に向かって、速度ｖで徐々に接近させることで、ユーザに対して必要以上に唐突な印象を与えないように通知情報を表示する。ここで、アイコンが接近するターゲット位置は、第１ターゲット位置と第２ターゲット位置とからなる。

　情報表示装置３０は、アイコンを、初期表示位置から、まず第１ターゲット位置に向けて接近させる。そして、アイコンが第１ターゲット位置に到達してもユーザが所定の時間以上継続して当該アイコンに視線を向けなければ、情報表示装置３０は、アイコンを第１ターゲット位置から第２ターゲット位置に向けて接近させる。

　第１ターゲット位置は、図１８Ａ及び図１８Ｂに示すように、主コンテンツの表示領域の境界から所定の距離Δｄだけ離れた位置である。つまり、第１ターゲット位置は、主コンテンツの表示領域外の位置であって、かつ主コンテンツの表示領域の境界近傍の位置である。ここで、所定の距離Δｄは、通知情報を示すアイコンの大きさの横幅の半分であることが好ましい。これにより、アイコンが第１ターゲット位置に表示された際に、アイコンが主コンテンツの表示領域内に入ることを防ぐことができる。

　また、第２ターゲット位置は、コンテンツの表示領域内の所定位置、あるいは所定期間内に検出された複数の注視点を代表する位置である。具体的には、第２ターゲット位置は、図１８Ａに示すように表示コンテンツの表示領域の中心、あるいは、図１８Ｂに示すようにユーザの注視点分布中心４１である。

　なお、第２ターゲット位置は、必ずしも表示コンテンツの表示領域の中心、あるいはユーザの注視点分布中心４１である必要はない。例えば、第２ターゲット位置は、表示コンテンツの表示領域の一部に表示されている画像の中心であってもよい。また例えば、第２ターゲット位置は、注視点分布の重心であってもよい。

　次に、以上のように構成された情報表示装置３０における各種動作について説明する。

　図１９は、本発明の実施の形態３における情報表示装置の処理の流れを示すフローチャートである。また、図２０は、本発明の実施の形態３における情報表示装置の動作例を説明するための図である。

　図２０には、情報表示装置３０の前方に、ユーザＡとユーザＢがおり、表示コンテンツとして、ニュース番組が表示されており、この表示コンテンツの視聴ユーザはユーザＡであり、ユーザＢは視聴ユーザでない状況を示している。図２０（ａ）に示す状況で、ユーザＡがニュース番組を視聴しているときに、図２０（ｂ）に示すように、電子レンジからの通知情報を示すアイコンが初期表示位置に表示される。そして、図２０（ｃ）に示すように、アイコンが徐々に第１ターゲット位置に接近する。そして、図２０（ｄ）に示すように、アイコンにユーザの視線が注がれたときに、例えば、アイコンにリンクされた詳細情報「調理完了しました」が表示される。

　以下、図２０に示されるシーンを例に、図１９のフローチャートに沿って情報表示装置３０の動作を説明する。

　まず、ユーザ識別部３１は、ユーザ検出カメラによってユーザの顔が撮影された場合、あらかじめ登録されたユーザ情報データベース３４に格納されている身体特徴情報との照合により、ユーザ識別を行う（Ｓ３０１）。そして、ユーザ状態検出部３２は、識別された各ユーザに対して、ユーザ位置を検出する（Ｓ３０２）。また、ユーザ状態検出部３２は、識別された各ユーザに対して、顔向きと視線方向とを検出する（Ｓ３０３）。さらに、ユーザ状態検出部３２は、ユーザ位置と視線方向とに基づいて、現在注視点４２を検出し、保持する。

　次に、ユーザ状態検出部３２は、表示コンテンツの視聴ユーザを判別する（Ｓ３０４）。例えば、ユーザ状態検出部３２は、表示コンテンツから所定の距離内にいるユーザを視聴ユーザとして判別すればよい。なお、ユーザ状態検出部３２は、所定の時間継続して画面に視線が向いていないユーザを視聴ユーザではないと判別することが好ましい。図２０のシーンでは、ユーザＢは画面に視線を向けず遊んでいるので、ユーザＢは視聴ユーザではないと判別される。したがって、以後の処理は、視聴ユーザであるユーザＡに対して行われる。

　次に、集中度推定部３３は、所定時間毎に検出された複数の注視点からなる注視点分布の中心位置（注視点分布中心４１）を算出する（Ｓ３０５）。そして、集中度推定部３３は、算出した注視点分布中心４１と各注視点の位置との距離の分散σを用いて、次式（３）に従って集中度ｃを算出する（Ｓ３０６）。

　なお、集中度ｃは、その値が大きいほど、ユーザが表示コンテンツに対して集中していることを意味する。

　ここで、集中度推定部３３は、許容通知強度Ｉｎｔを次式（４）に従って設定する。許容通知強度とは、通知情報をユーザにどれだけの強度で気づかせるべき状況にあるかを示すものである。許容通知強度が高い場合には、情報表示装置３０は、「気づかせる情報通知」を行う必要がある。一方、許容通知強度が低い場合には、情報表示装置３０は、「さりげない情報通知」を行うことで、通知情報に対してユーザが唐突な印象をもたずに通知情報に気づくようにする必要がある。

　ここで、ｎは、ゲインである。

　集中度ｃが大きい、すなわち、ユーザが表示コンテンツに対して集中している場合より、集中度ｃが小さい、すなわち、ユーザが表示コンテンツに対して集中していない場合の方が、ユーザは、表示コンテンツ以外の情報に気づきやすい状況にある。したがって、集中度ｃが小さい、すなわち、ユーザが表示コンテンツに対して集中していない場合の方が許容通知強度Ｉｎｔは小さくなる。

　次に、関連度推定部３５は、通知情報と表示コンテンツとの関連度ｒを算出する（Ｓ３０８）。関連度ｒは０以上１以下の数値とする。主コンテンツがテレビ番組の場合、関連度推定部３５は、通知情報が番組内容に関するものであれば、関連度は高くなるように算出し、通知情報が番組内容に関係ないものであれば、関連度は低くなるように算出する。例えば、関連度は、低い場合は０、高い場合は１というように２値で設定されてもよい。

　そして、関連度ｒがあらかじめ設定された閾値未満であれば（Ｓ３０９のＹｅｓ）、関連度推定部３５は、関連度ｒの値に応じて許容通知強度を弱める（Ｓ３１０）。また、関連度ｒがあらかじめ設定された閾値以上であれば（Ｓ３０９のＮｏ）、関連度推定部３５は、関連度ｒの値に応じて許容通知強度を強める（Ｓ３１１）。

　そして、アプリケーション制御部３６は、許容通知強度Ｉｎｔを用いて、通知情報の表示パラメータを決定する（Ｓ３１２）。ここでいう表示パラメータとは、通知情報の初期表示位置と、サイズと、第１ターゲット位置又は第２ターゲット位置への接近方法とを示す情報である。アプリケーション制御部３６は、関連度が低い場合には、ユーザが通知情報に対して唐突な印象を持たないように、表示パラメータを決定する。

　したがって、通知情報の初期表示位置とターゲット位置との距離ｄｉは、次式（５）に従って算出される。

　ここで、ｇｄはゲインであり、ｄ０は予め定められた一定値である。

　また、通知情報の移動速度ｖと通知情報の表示面積Ｓとは、次式（６）及び（７）に従って算出される。

　ここで、ｇｖ及びｇＳはゲインであり、ｖ０及びＳ０は予め定められた一定値である。

　なお、ここでは以下の式（８）～（１０）の関係が成り立つ。

　すなわち、アプリケーション制御部３６は、推定された集中度ｃ又は関連度ｒが小さいほど、検出された注視点の位置により定まる位置から遠くなるように、初期表示位置を決定する。また、アプリケーション制御部３６は、推定された集中度ｃ又は関連度ｒが大きいほど、移動速度ｖが大きくなるように移動速度ｖを決定する。また、アプリケーション制御部３６は、推定された集中度ｃ又は関連度ｒが大きいほど、表示領域が大きくなるように表示領域の大きさ（表示面積Ｓ）を決定する。

　そして、画面描画部３７は、表示パラメータに従って、画面３８に通知情報を表示する（Ｓ３１３）。そして、図２０（ｄ）に示すように、ユーザが表示した通知情報に注意を向ける、すなわち、所定の時間以上継続して通知情報に視線を向けた場合、画面描画部３７は、通知情報の詳細情報を画面３８に表示する。つまり、アプリケーション制御部３６は、注視点と通知情報の表示位置との距離が閾値未満である状態が所定時間以上継続しているか否かを判定する。そして、画面描画部３７は、継続していると判定された場合に通知情報の内容を変更する。すなわち、通知情報は、はじめはアイコンの形態で表示されており、ユーザの注意が向いた後に、アイコンにリンクされた所定の情報を確認可能な形態で表示される。

　図２１は、本発明の実施の形態３における情報表示装置の動作例を説明するため図である。具体的には、図２１は、ユーザ情報データベースの更新方法を説明するための図である。

　図２１（ａ）に示すように、画面描画部３７は、通知情報の表示位置を、ユーザＡの注視点分布中心４１に向けて移動させる。そして、図２１（ｂ）に示すように、アプリケーション制御部３６は、通知情報の表示位置にユーザの現在注視点４２が移動した時点で、現在注視点４２と注視点分布中心４１との距離ｄを算出する。そして、アプリケーション制御部３６は、注視点分布中心４１を中心とする半径ｄの円の内部を有効視野領域と推定し、ユーザ情報データベース３４に格納された有効視野領域情報を更新する。なお、図２１（ｃ）に示すように、ユーザと画面との距離をｈと表した場合、アプリケーション制御部３６は、視野角ｋを次式（１１）に従って算出する。

　そして、アプリケーション制御部３６は、図１６Ｃに示すユーザ情報データベース３４を更新する。

　以上のように、本実施の形態における情報表示装置３０は、実施の形態１又は実施の形態２の情報表示装置１０又は２０と同様の効果を奏することができる。

　さらに、情報表示装置３０は、第１ターゲット位置又は第２ターゲット位置に向けて通知情報の表示位置を移動させることができるので、より唐突な印象を与えずに通知情報をユーザに提示することができる。

　またさらに、情報表示装置３０は、ユーザを識別することができるので、ユーザごとに情報が格納されたユーザ情報データベース３４を利用して、より高精度に初期表示位置を決定することができる。

　（実施の形態３の変形例１）
　次に、実施の形態３の変形例１について説明する。本変形例において、情報表示装置３０は、さらに、通知情報の重要度合いを示す重要度ｕ、又は通知情報の緊急度合いを示す緊急度ｕを考慮して、表示パラメータを決定する。

　図２２Ａは、本発明の実施の形態３の変形例１における情報表示装置の機能構成を示すブロック図である。

　図２２Ａに示すように、本変形例における情報表示装置３０は、実施の形態３における情報表示装置が備える構成要素に加えて、さらに、重要度／緊急度取得部３９を備える。

　重要度／緊急度取得部３９は、通知情報の重要度合いを示す重要度、又は前記通知情報の緊急度合いを示す緊急度を取得する。具体的には、重要度／緊急度取得部３９は、例えば、通知情報を出力する通知ソース１０６から、当該通知情報の重要度又は緊急度を取得する。また例えば、重要度／緊急度取得部３９は、通知情報を出力した通知ソース又は通知情報の種別などに対応付けて保持された重要度又は緊急度を読みだすことにより、通知情報の重要度又は緊急度を取得してもよい。

　図２２Ｂは、本発明の実施の形態３の変形例１における情報表示装置の処理の流れを示すフローチャートである。

　図２２Ｂは、図１９のフローチャートに、通知情報の重要度あるいは緊急度を取得し、取得した重要度の大きさに応じて、許容通知強度を調整するステップが加わっている。このステップ（図２２ＢのステップＳ４０１～Ｓ４０４）を経ることにより、情報表示装置３０は、通知情報の重要度あるいは緊急度をふまえた通知制御が可能となる。すなわち、情報表示装置３０は、通知情報の重要度あるいは緊急度が高い場合には、許容通知強度を高めることで、主コンテンツに優先して通知情報に気づかせるようにできる。

　なお、通知情報の重要度又は緊急度をｕと表現した場合、以下の関係が成り立つ。

　すなわち、アプリケーション制御部３６は、取得された重要度ｕ又は緊急度ｕが小さいほど、検出された注視点により定まる位置から遠くなるように、初期表示位置を決定する。また、アプリケーション制御部３６は、取得された重要度ｕ又は緊急度ｕが大きいほど、移動速度ｖが大きくなるように移動速度ｖを決定する。また、アプリケーション制御部３６は、取得された重要度ｕ又は緊急度ｕが大きいほど、表示領域が大きくなるように表示領域の大きさ（表示面積Ｓ）を決定する。

　図２３Ａ及び図２３Ｂは、本発明の実施の形態３の変形例１における情報表示装置の動作例を説明する図である。

　図２３Ａに示すように、通知情報が洗濯機からの作業完了通知である場合、通知情報の緊急度が高くないため、情報表示装置３０は、許容通知強度を弱める。そうすることで、通知情報の初期表示位置とターゲット位置との距離が所定の値より長く設定され、「さりげない情報通知」が可能となる。

　一方、図２３Ｂに示すように、通知情報が来客を知らせる通知である場合、通知情報の緊急度が高いため、情報表示装置３０は、許容通知強度を強める。そうすることで、通知情報の初期表示位置とターゲット位置との距離が所定の値より短く設定され、「気づかせる情報通知」が可能となる。

　（実施の形態３の変形例２）
　次に、実施の形態３の変形例２について説明する。本変形例では、主コンテンツの表示位置あるいは大きさなどがユーザの動きに応じて変更される場合について説明する。

　図２４Ａ～図２４Ｃは、本発明の実施の形態３の変形例２におけるユーザ位置に基づく表示領域の制御方法の概略を説明するための図である。

　アプリケーション制御部３６は、ユーザ状態検出部３２が検出するユーザ位置に基づいて、例えば当該ユーザに提示すべき主コンテンツの画面上の表示位置を決定する。これにより、図２４Ａと図２４Ｂに示すように、情報表示装置３０は、ユーザが動いても常にユーザから見やすい位置に主コンテンツを提示し続けることが可能となる。

　例えば、図２４Ａに示すように、アプリケーション制御部３６は、ユーザが画面３８の前方で移動すれば、ユーザの位置に近い画面上の位置に情報を表示させることができる。また、図２４Ｂに示すように、ユーザが画面３８に対して近づく、または遠ざかる場合は、アプリケーション制御部３６は、情報の表示サイズを縮小または拡大することにより、ユーザにとって見やすい大きさで表示させることができる。特に、ユーザが画面３８に対して近づき、表示されている情報に興味を抱いていると判断されうる場合には、アプリケーション制御部３６は、主コンテンツとして表示する情報をより詳細な情報に変更することが好ましい。さらに、図２４Ｃに示すように、アプリケーション制御部３６は、ユーザ情報データベース３４を参照することにより得られる各ユーザの顔の高さ位置に応じて、各ユーザが見やすい高さに主コンテンツを表示させることができる。

　図２５は、本発明の実施の形態３の変形例２における情報表示装置の動作例を説明するための図である。

　この図２５では、ユーザが画面の前を通過する際に、主コンテンツの表示位置がユーザ位置に追従する例が示されている。この場合、アプリケーション制御部３６は、ユーザが移動するにつれて、通知情報のターゲット位置も移動させる。つまり、アプリケーション制御部３６は、主コンテンツの表示位置が移動する場合には、主コンテンツの表示位置の移動に追従して、通知情報のターゲット位置も移動させる。

　以上により、本変形例における情報表示装置３０は、主コンテンツの表示位置が変更される場合であっても、ユーザに通知情報が表示されていることを気付かせることができる。

　（実施の形態３の変形例３）
　次に、実施の形態３の変形例３について説明する。本変形例では、複数の視聴ユーザが判別された場合について説明する。

　図２６Ａ及び図２６Ｂは、本発明の実施の形態３の変形例３における情報表示装置の動作例を説明するための図である。図２６Ａ及び図２６Ｂでは、複数の視聴ユーザが画面３８の前方にいる場合が示されている。

　具体的には、図２６Ａは、ユーザＡとユーザＢとの各々に対応付けられた表示コンテンツが画面上に表示されている状態を示す図である。また、図２６Ｂは、ユーザＡとユーザＢとの共通の表示コンテンツが画面上に表示されている状態を示す図である。

　図２６Ａに示す状態の場合は、情報表示装置３０は、ユーザＡとユーザＢとの各々に対して、図１９又は図２２Ｂに示した処理を適用する。

　図２６Ｂに示す状態の場合は、情報表示装置３０は、ユーザＡとユーザＢのうち、集中度の高い方のユーザを選択し、選択したユーザの集中度を基に許容通知強度を算出する。または、情報表示装置３０は、ユーザＡの集中度とユーザＢの集中度との平均値を基に許容通知強度を算出してもよい。

　以上により、本変形例における情報表示装置３０は、複数の視聴ユーザが存在する場合であっても、視聴ユーザの集中度に応じて、有効視野領域の外部に位置するように、通知情報の初期表示位置を決定することなどができる。

　（実施の形態３の変形例４）
　次に、実施の形態３の変形例４について説明する。本変形例では、情報表示装置３０が、主コンテンツが表示されていない領域の大きさに応じて、通知情報の表示方法を変更することについて説明する。

　図２７Ａ～図２７Ｃは、本発明の実施の形態３の変形例４における情報表示装置の動作例を説明するための図である。

　図２７Ａ～図２７Ｃにおいて、通知情報の表示に利用できる領域の幅をｗ１、ｗ２と表し、通知情報の初期表示位置と主コンテンツの表示領域の境界近傍に位置する第１ターゲット位置との距離をｄ１と表した場合、図２７Ａは、「幅ｗ１＜距離ｄ１、幅ｗ２＞距離ｄ１」、図２７Ｂは、「幅ｗ１＜距離ｄ１、幅ｗ２＞距離ｄ１」、図２７Ｃは、「幅ｗ１、幅ｗ２＜距離ｄ１」の状態を示している。

　図２７Ａのように「幅ｗ１、幅ｗ２＞距離ｄ１」の関係が成り立つ場合には、情報表示装置３０は、領域Ａと領域Ｂとのどちらに又は両方に通知情報を表示してもよい。しかし、図２７Ｂのように「幅ｗ１＜距離ｄ１、幅ｗ２＞距離ｄ１」の関係が成り立つ場合には、情報表示装置３０は、距離ｄ１よりも長い幅をもつ領域Ｂで通知情報を表示する。また、図２７Ｃのように、「幅ｗ１、幅ｗ２＜距離ｄ１」の場合には、領域Ａ及び領域Ｂともに幅が距離ｄ１よりも短いため、情報表示装置３０は、より幅の長い領域Ｂに通知情報を表示する。

　（実施の形態３の変形例５）
　次に、実施の形態３の変形例５について説明する。本変形例では、情報表示装置３０は、許容通知強度の高さに応じて、表示後の通知情報の表示態様を変化させる。

　図２８Ａ及び図２８Ｂは、本発明の実施の形態３の変形例５における情報表示装置の動作例を説明するための図である。

　情報表示装置３０は、許容通知強度が閾値より高い場合、図２８Ａに示すように、通知情報が示す画像の大きさを一定に保ちながらターゲット位置に近づける。一方、情報表示装置３０は、許容通知強度が閾値より低い場合、図２８Ｂに示すように、通知情報を徐々に大きくしながらターゲット位置に近づける。

　以上により、本変形例における情報表示装置３０は、ユーザの集中度、通知情報と表示コンテンツとの関連度、又は通知情報の重要度もしくは緊急度に基づいて、表示後の通知情報の表示態様を変化させることができるので、よりさりげない印象をユーザに与えることができる。

　（実施の形態３の変形例６）
　次に、実施の形態３の変形例６について説明する。本変形例では、通知情報の表示位置をターゲット位置に移動させた後の動作について説明する。

　図２９Ａ、図２９Ｂ、図３０Ａ及び図３０Ｂは、本発明の実施の形態３の変形例６における情報表示装置の動作例を説明するための図である。

　本変形例におけるアプリケーション制御部３６は、通知情報がターゲット位置の近傍に表示されている間に、ユーザの注視点と当該ターゲット位置との距離が閾値未満である状態が所定期間以上続いているか否かを判定する。そして、当該状態が所定時間以上続いていないと判定された場合、画面描画部３７は、ユーザが通知情報に気付きにくくなるように、通知情報の表示位置及び表示態様の少なくとも一方を変化させる。

　具体的には、例えば、図２９Ａに示すように、画面描画部３７は、通知情報の重要度又は緊急度が高くない場合に、通知情報の表示位置がターゲット位置から所定の範囲内にある状態で所定の時間が経過してもユーザの注意が所定の度合い以上に高まらなければ、通知情報の表示サイズを徐々に小さくしながら非表示にする。また例えば、図２９Ｂに示すように、画面描画部３７は、通知情報が有効視界領域から遠ざかるように、通知情報をターゲット位置から徐々に遠ざけてもよい。

　また例えば、図３０Ａ及び図３０Ｂに示すように、画面描画部３７は、通知情報がターゲット位置に到達してから一定時間を経過しても、ユーザが所定時間以上継続して通知情報に視線を向けなければ、通知情報をターゲット位置から所定の遠ざかる方向に移動させる。

　このように、通知情報が、徐々にユーザの有効視野領域から離れて、注意を引きにくい位置に移動することで、ユーザの表示コンテンツに対する注意を必要以上に妨げないことができる。

　（実施の形態３の変形例７）
　次に、実施の形態３の変形例７について説明する。本変形例では、情報表示装置３０が同時に複数の通知情報をユーザに提示する場合について説明する。

　図３１Ａ～図３１Ｃは、本発明の実施の形態３の変形例７における情報表示装置の動作例を説明するための図である。

　図３１Ａ～図３１Ｃに示すように同時に複数の通知情報をユーザに提示する場合にも、勿論本発明は適用できる。具体的には、例えば、図３１Ａ又は図３１Ｂに示すように、情報表示装置３０は、複数の通知情報を主コンテンツの表示領域の左右の一方からターゲット位置に接近させる。また例えば、図３１Ｃに示すように、情報表示装置３０は、複数の通知情報を主コンテンツの表示領域の左右の両側からターゲット位置に接近させる。

　なお、本変形例においても、情報表示装置３０は、各通知情報と表示コンテンツとの関連度に応じて、通知情報の初期表示位置及び速度などの表示パラメータを決定する。

　（実施の形態３の変形例８）
　次に、実施の形態３の変形例８について説明する。本変形例では、主コンテンツが画面の全領域に表示されている場合について説明する。

　図３２は、本発明の実施の形態３の変形例８における情報表示装置の動作例を説明するための図である。

　上記実施の形態３では、これまで、主コンテンツが画面の一部領域に表示されている場合について説明したが、図３２に示すように主コンテンツが画面全体に表示されている場合にも、勿論本発明は適用できる。本変形例では、図３２（ａ）に示すように、画面全体に複数のオブジェクトが表示されているような主コンテンツを例として説明する。

　図３２（ａ）は、魚が画面上を遊泳している、あるいは壁紙画像が画面全体に表示されているような状況を示す。そこで、図３２（ｂ）に示すように、情報表示装置３０は、通知情報を初期表示位置に表示し、表示した通知情報をターゲット位置に接近させる。そして、情報表示装置３０は、図３２（ｃ）に示すようにユーザの注意が通知情報に向いたことを検知した後に、図３２（ｄ）に示すように、当該通知情報に予め関連付けられた副コンテンツを画面に表示する。

　なお、情報表示装置３０は、ユーザの注意が通知情報に向いたことを検知した後に、通知情報に関連付けられた副コンテンツを画面３８に表示するか否かをユーザに問うメニュー画面を表示してもよい。その場合、情報表示装置は、表示したメニュー画面において、リモコンあるいはジェスチャにより、副コンテンツを表示することをユーザに明示的に指定されたときに、図３２（ｄ）に示すように副コンテンツを画面３８に表示すればよい。

　なお、上記実施の形態３において、第１ターゲット位置は、図１８Ａ及び図１８Ｂに示すように、主コンテンツの表示領域の境界から所定の距離Δｄだけ離れた位置に設定されていたが、本変形例では、図３２に示すように、主コンテンツの表示領域の境界は画面３８の枠となり、画面外の位置に設定されてしまう。したがって、主コンテンツが画面全体に表示される場合には、第１ターゲット位置は、ユーザの注視点分布中心４１又は主コンテンツの表示領域の中心（画面３８の中心）から所定の距離だけ離れた位置に設定されることが好ましい。

　以上、本発明の一態様に係る情報表示装置について、実施の形態及びその変形例に基づいて説明したが、本発明は、これらの実施の形態又はその変形例に限定されるものではない。本発明の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態又はその変形例に施したもの、あるいは異なる実施の形態又はその変形例における構成要素を組み合わせて構築される形態も、本発明の範囲内に含まれる。

　例えば、上記実施の形態において、情報表示装置は、プラズマディスプレイパネル又は液晶パネルなどの画面を備えていたが、必ずしも画面を備える必要はない。例えば、情報表示装置は、スクリーン又は壁面などの投影面にコンテンツを投影するプロジェクタなどであってもよい。

　さらに、本発明は、以下のように変形することもできる。

　（１）上記の各装置は、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭ、ハードディスクユニット、ディスプレイユニット、キーボード、マウスなどから構成されるコンピュータシステムである。前記ＲＡＭ又は前記ハードディスクユニットには、コンピュータプログラムが記憶されている。前記マイクロプロセッサが、前記コンピュータプログラムに従って動作することにより、各装置は、その機能を達成する。ここで、コンピュータプログラムは、所定の機能を達成するために、コンピュータに対する指令を示す命令コードが複数個組み合わされて構成されたものである。なお、各装置は、マイクロプロセッサ、ＲＯＭ、ＲＡＭ、ハードディスクユニット、ディスプレイユニット、キーボード、マウスなどの全てを含むコンピュータシステムに限らず、これらの一部から構成されているコンピュータシステムであってもよい。

　（２）上記の各装置を構成する構成要素の一部又は全部は、１個のシステムＬＳＩ（Ｌａｒｇｅ　Ｓｃａｌｅ　Ｉｎｔｅｇｒａｔｉｏｎ：大規模集積回路）から構成されているとしてもよい。システムＬＳＩは、複数の構成部を１個のチップ上に集積して製造された超多機能ＬＳＩであり、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭなどを含んで構成されるコンピュータシステムである。前記ＲＡＭには、コンピュータプログラムが記憶されている。前記マイクロプロセッサが、前記コンピュータプログラムに従って動作することにより、システムＬＳＩは、その機能を達成する。

　なお、ここでは、システムＬＳＩとしたが、集積度の違いにより、ＩＣ、ＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。また、集積回路化の手法はＬＳＩに限るものではなく、専用回路又は汎用プロセッサで実現してもよい。ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Ｆｉｅｌｄ　Ｐｒｏｇｒａｍｍａｂｌｅ　Ｇａｔｅ　Ａｒｒａｙ）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。

　さらには、半導体技術の進歩又は派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適用等が可能性としてありえる。

　（３）上記の各装置を構成する構成要素の一部又は全部は、各装置に脱着可能なＩＣカード又は単体のモジュールから構成されているとしてもよい。前記ＩＣカード又は前記モジュールは、マイクロプロセッサ、ＲＯＭ、ＲＡＭ、などから構成されるコンピュータシステムである。前記ＩＣカード又は前記モジュールは、上記の超多機能ＬＳＩを含むとしてもよい。マイクロプロセッサが、コンピュータプログラムに従って動作することにより、前記ＩＣカード又は前記モジュールは、その機能を達成する。このＩＣカード又はこのモジュールは、耐タンパ性を有するとしてもよい。

　（４）本発明は、上記に示す情報表示装置が備える特徴的な構成部の動作をステップとする方法であるとしてもよい。また、これらの方法をコンピュータにより実現するコンピュータプログラムであるとしてもよいし、前記コンピュータプログラムからなるデジタル信号であるとしてもよい。

　また、本発明は、前記コンピュータプログラム又は前記デジタル信号をコンピュータ読み取り可能な記録媒体、例えば、フレキシブルディスク、ハードディスク、ＣＤ―ＲＯＭ、ＭＯ、ＤＶＤ、ＤＶＤ－ＲＯＭ、ＤＶＤ－ＲＡＭ、ＢＤ（Ｂｌｕ－ｒａｙ　Ｄｉｓｃ（登録商標））、半導体メモリなど、に記録したものとしてもよい。また、これらの記録媒体に記録されている前記コンピュータプログラム又は前記デジタル信号であるとしてもよい。

　また、本発明は、前記コンピュータプログラム又は前記デジタル信号を、電気通信回線、無線又は有線通信回線、インターネットを代表とするネットワーク、データ放送等を経由して伝送するものとしてもよい。

　また、本発明は、マイクロプロセッサとメモリとを備えたコンピュータシステムであって、前記メモリは、上記コンピュータプログラムを記憶しており、前記マイクロプロセッサは、前記コンピュータプログラムに従って動作するとしてもよい。

　また、前記プログラム又は前記デジタル信号を前記記録媒体に記録して移送することにより、又は前記プログラム又は前記デジタル信号を前記ネットワーク等を経由して移送することにより、独立した他のコンピュータシステムにより実施するとしてもよい。

　（５）上記実施の形態及び上記変形例をそれぞれ組み合わせるとしてもよい。

　本発明の一態様に係る情報表示装置は、ユーザの有効視野領域の外部に通知情報を初期表示することにより、ユーザに唐突な印象を与えずに通知情報に気づかせることができるので、通知情報を表示する情報表示装置、例えば１人以上のユーザに視聴される大画面ディスプレイとして利用することができる。

　　１０、２０、３０　　情報表示装置
　　１１、３２　　ユーザ状態検出部
　　１２、３３　　集中度推定部
　　１３、２１、３６　　アプリケーション制御部
　　１４、２２、３７　　画面描画部
　　２３、３４　　ユーザ情報データベース
　　３１　　ユーザ識別部
　　３５　　関連度推定部
　　３８　　画面
　　３９　　重要度／緊急度取得部
　　４１　　注視点分布中心
　　４２　　現在注視点
　１０１　　アンテナ
　１０２　　ユーザ検出カメラ
　１０３　　携帯電話
　１０４　　ネットワークカメラ
　１０５　　家電機器群
　１０６　　通知ソース
　１０７　　ルータ／ハブ

Claims

　ユーザに通知するための情報である通知情報を画面に表示する情報表示装置であって、
　前記ユーザの物理的な状態を示すユーザ状態を検出するユーザ状態検出部と、
　前記ユーザ状態検出部により検出されたユーザ状態に基づいて、前記画面に対する前記ユーザの集中度合いを示す集中度を推定する集中度推定部と、
　前記ユーザによって視認される領域である有効視野領域の外部に初期表示位置が位置するように、前記集中度推定部により推定された集中度に基づいて通知情報の初期表示位置を決定するアプリケーション制御部と、
　前記アプリケーション制御部により決定された初期表示位置に通知情報を表示し、かつ、表示後の通知情報の表示位置及び表示態様の少なくとも一方を変化させる画面描画部とを備える
　情報表示装置。
　前記ユーザ状態検出部は、前記画面を含む平面上における前記ユーザの注視点の位置を、前記ユーザ状態として検出し、
　前記アプリケーション制御部は、前記集中度推定部により推定された集中度が小さいほど、前記ユーザ状態検出部により検出された注視点の位置により定まる位置から遠くなるように、前記初期表示位置を決定する
　請求項１に記載の情報表示装置。
　前記アプリケーション制御部は、さらに、前記集中度推定部により推定された集中度が大きいほど移動速度が大きくなるように移動速度を決定し、
　前記画面描画部は、前記アプリケーション制御部により決定された移動速度で通知情報の表示位置を移動させることにより、通知情報の表示位置を変化させる
　請求項１に記載の情報表示装置。
　前記ユーザ状態検出部は、前記画面を含む平面上におけるユーザの注視点の位置を、前記ユーザ状態として検出し、
　前記画面描画部は、前記ユーザ状態検出部により所定期間内に検出された複数の注視点の位置を代表する位置に向けて通知情報の表示位置を移動させることにより、通知情報の表示位置を変化させる
　請求項１に記載の情報表示装置。
　前記画面描画部は、前記画面に表示されたコンテンツの表示領域内の所定位置に向けて通知情報の表示位置を移動させることにより、通知情報の表示位置を変化させる
　請求項１に記載の情報表示装置。
　前記画面描画部は、前記画面に表示されたコンテンツの表示領域外の位置であって、かつ前記コンテンツの表示領域の境界近傍の位置に向けて、通知情報の表示位置を移動させることにより、通知情報の表示位置を変化させる
　請求項１に記載の情報表示装置。
　前記アプリケーション制御部は、さらに、前記集中度推定部により推定された集中度が大きいほど表示領域が大きくなるように表示領域の大きさを決定し、
　前記画面描画部は、前記アプリケーション制御部により決定された初期表示位置に通知情報を表示する際に、決定された大きさの表示領域に通知情報を表示する
　請求項１に記載の情報表示装置。
　さらに、
　前記画面に表示されたコンテンツと前記通知情報との関連度合いを示す関連度を推定する関連度推定部を備え、
　前記ユーザ状態検出部は、前記画面を含む平面上におけるユーザの注視点の位置を、前記ユーザ状態として検出し、
　前記アプリケーション制御部は、前記関連度推定部により推定された関連度が小さいほど、前記ユーザ状態検出部により検出された注視点の位置により定まる位置から初期表示位置が遠くなるように、前記初期表示位置を決定する
　請求項１に記載の情報表示装置。
　前記アプリケーション制御部は、さらに、前記関連度推定部により推定された関連度が大きいほど移動速度が大きくなるように移動速度を決定し、
　前記画面描画部は、決定された移動速度で通知情報の表示位置を移動させることにより、通知情報の表示位置を変化させる
　請求項８に記載の情報表示装置。
　さらに、
　前記通知情報の重要度合いを示す重要度、又は前記通知情報の緊急度合いを示す緊急度を取得する重要度／緊急度取得部を備え、
　前記アプリケーション制御部は、前記重要度／緊急度取得部により取得された重要度又は緊急度が小さいほど、前記ユーザ状態検出部により検出された注視点の位置により定まる位置から初期表示位置が遠くなるように、前記初期表示位置を決定する
　請求項１に記載の情報表示装置。
　前記アプリケーション制御部は、さらに、前記重要度／緊急度取得部により取得された重要度又は緊急度が大きいほど移動速度が大きくなるように移動速度を決定し、
　前記画面描画部は、決定された移動速度で通知情報の表示位置を移動させることにより、通知情報の表示位置を変化させる
　請求項１０に記載の情報表示装置。
　前記ユーザ状態検出部は、前記画面を含む平面上におけるユーザの注視点の位置を、前記ユーザ状態として検出し、
　前記集中度推定部は、前記ユーザ状態検出部により所定期間内に検出された複数の注視点からなる注視点分布に基づいて、前記集中度を推定する
　請求項１に記載の情報表示装置。
　前記ユーザ状態検出部は、前記画面を含む平面上におけるユーザの注視点の位置を、前記ユーザ状態として検出し、
　前記集中度推定部は、前記ユーザ状態検出部により検出された注視点の移動量に基づいて、前記集中度を推定する
　請求項１に記載の情報表示装置。
　前記ユーザ状態検出部は、ユーザの顔向きを前記ユーザ状態として検出し、
　前記集中度推定部は、前記ユーザ状態検出部により所定期間内に検出された複数の顔向きからなる顔向き分布に基づいて、前記集中度を推定する
　請求項１に記載の情報表示装置。
　前記ユーザ状態検出部は、ユーザの姿勢を前記ユーザ状態として検出し、
　前記集中度推定部は、前記ユーザ状態検出部により検出された姿勢に基づいて、前記集中度を推定する
　請求項１に記載の情報表示装置。
　さらに、
　集中度と有効視野領域の大きさを示す有効視野領域情報とを対応付けて格納しているユーザ情報データベースとを備え、
　前記ユーザ状態検出部は、前記画面を含む平面上におけるユーザの注視点の位置を、前記ユーザ状態として検出し、
　前記アプリケーション制御部は、前記ユーザ情報データベースを参照することにより、前記集中度推定部により推定された集中度に対応する有効視野領域情報を取得し、取得した有効視野領域情報と、前記ユーザ状態検出部により検出された注視点とを用いて推定される有効視野領域の外部に前記初期表示位置を決定する
　請求項１に記載の情報表示装置。
　前記アプリケーション制御部は、さらに、前記画面描画部によって通知情報の表示位置が変化させられている間に、通知情報の表示位置とユーザの注視点の位置との距離が閾値未満であるか否かを判定し、距離が閾値未満であると判定された場合に、当該表示位置を用いて、前記ユーザ情報データベースに格納された有効視野領域情報を更新する
　請求項１６に記載の情報表示装置。
　さらに、
　前記画面の前方にいるユーザを識別するユーザ識別部を備え、
　前記ユーザ情報データベースは、ユーザごとに、集中度と有効視野領域の大きさを示す有効視野領域情報とを対応付けて格納し、
　前記アプリケーション制御部は、前記ユーザ識別部により識別されたユーザに対応する有効視野領域情報を取得する
　請求項１７に記載の情報表示装置。
　ユーザに通知するための情報である通知情報を画面に表示する情報表示方法であって、
　ユーザの物理的な状態を示すユーザ状態を検出するユーザ状態検出ステップと、
　前記ユーザ状態検出ステップにおいて検出されたユーザ状態に基づいて、前記画面に対するユーザの集中度合いを示す集中度を推定する集中度推定ステップと、
　前記ユーザによって視認される領域である有効視野領域の外部に初期表示位置が位置するように、前記集中度推定ステップにおいて推定された集中度に基づいて通知情報の初期表示位置を決定するアプリケーション制御ステップと、
　前記アプリケーション制御ステップにおいて決定された初期表示位置に通知情報を表示し、かつ、表示後の通知情報の表示位置及び表示態様の少なくとも一方を変化させる画面描画部とを含む
　情報表示方法。
　請求項１９に記載の情報表示方法をコンピュータに実行させるためのプログラム。