JP2006086717A - 画像表示システム、画像再生装置及びレイアウト制御装置 - Google Patents

Abstract

【課題】ユーザーの位置によらずに、ユーザーにとって見やすい表示ができるようにすること。
【解決手段】鑑賞者が鑑賞する画像を表示する画面を持った画像表示手段と、上記画像表示手段の画面と鑑賞者との相対的位置関係を表す鑑賞者位置情報を検出する鑑賞者検出手段と、上記鑑賞者検出手段によって検出された鑑賞者位置情報に従って上記画像表示手段の画面のレイアウト制御を行うレイアウト制御手段とにより、画像表示システムを構成する。
【選択図】 図１

Description

本発明は、画像表示システム、画像再生装置及びレイアウト制御装置に関し、特に大型の表示画面を有効に活用して、表示画面と鑑賞者との相対的位置関係に関わらず、鑑賞者にとって最も見やすい画像表示を行う画像表示システム、画像再生装置及びレイアウト制御装置に関する。

近年、テレビジョン受像機のような画像表示装置の大画面化が流行となっている。そのような大画面化に伴って、鑑賞者数の増加や鑑賞者の鑑賞位置の多様化が予期される。そのため、鑑賞者の人数や位置に応じた適切な画面表示を行わなければ、鑑賞者にとって見えにくい画面表示となってしまう。従って、鑑賞者位置及び人数等に応じた適切な制御、及びユーザー向けにカスタマイズされた画面表示を可能とする画像表示技術が望まれていた。

従来、画像表示領域を有効に利用する画像表示技術に関するものとしては、例えば以下のような技術が知られている（特許文献１参照）。

この技術による画像表示装置は、観察位置の方向の異なる複数の観察者に対して、１つの表示素子により異なる画像を観察することができる方向別画像表示素子と、同時に表示する方向別画像数と画像の表示方向を切り替えるための方向別画像設定回路とを備える。

このため、画面の表示領域を分割せずに、１つの表示装置によって複数の観察者がそれぞれ異なる画像を観察する多画面表示を可能としている。

また、ユーザーの個人認証を行うことによって、適切なカスタマイズを行う双方向テレビシステムとして、以下の技術が知られている（特許文献２参照）。

この技術では、双方向番組の視聴者がリモコンにて入力した応答情報にその操作をした視聴者の個人ＩＤを付加して応答サーバに転送する。応答サーバでは、家族データベースを参照して個人ＩＤで特定される個人の情報を取得して個人認証を行う。これにより、実際に双方向番組を視聴し、応答情報を入力した個人を認証することができる双方向テレビシステム、テレビ受信機が可能となる。

さらに、画面表示に関する技術としては、表示領域が表示画面より大きな画像データである場合の対策をする技術として、以下の技術が知られている（特許文献３参照）。

この技術では、画像が表示画面よりも大きい場合、画像を表示画面上で表示可能なサイズの複数のサブ画像に分割し、この複数のサブ画像を位置情報とともに蓄積し、この複数のサブ画像の各々を位置情報に基づいて表示画面に適宜切り替え表示する。これにより、位置情報に基づいて複数のサブ画像を順次切り替え表示しながら閲覧することにより、例えば移動電話端末の小さな表示画面において、いつでもどこでもＦＡＸ画像や電子メールに添付された大きな画像でも画像全体を簡単に閲覧することを可能としている。
特開平１１−２０５８２２号公報 特開２０００−１１５７４７号公報 特開２００２−９９４８１号公報

しかしながら、上記特許文献１による装置においては、１つの画像表示装置によって複数の鑑賞者がそれぞれ異なる画像を鑑賞する多画面表示を可能としているが、近年急速に進んでいる表示画面の大型化により生じる問題点が考慮されていない。

表示画面の大型化に伴う問題とは、例えば以下のようである。まず、画面全体が視野に捉えきれず、画面全体の鑑賞が困難となる。その為、ある鑑賞者の視界に入らない部分に、重要な表示が為されることが生じる。また、小画面サイズの画像表示装置での鑑賞の場合より、大画面の画像表示装置での鑑賞の場合は多人数で鑑賞する場面が多いと考えられ、そのような際に画像再生中に他人に見られたくない画像まで表示されてしまう可能性も増す。さらに、大型画面では同時に複数の情報を表示することが可能であり、複数の鑑賞者により鑑賞される場合にはそれぞれの人にとって必要な情報を同時に表示する事ができるが、その際にある観察者にとって必要な情報だけでなく当該観察者には不要な情報も表示される可能性が生じる。

また、上記特許文献２による技術では、個人認証を用いることにより、ユーザーにとってカスタマイズされた双方向テレビシステムが可能となるが、鑑賞者と表示画面との相対的位置関係による画面の見え方にまで踏み込んだカスタマイズは行っていない。

また、上記特許文献３による技術では、表示画面より大きな表示サイズとなってしまう画像データでも、小さな表示画面で自由な方向から自在に見ることができるように表示することを可能とする。しかしながら、画像表示の際にユーザー情報を加味した制御までは行っていない。

本発明は、上記事情に鑑みてなされたもので、大型の表示画面上に各ユーザー（鑑賞者）にとって見やすい表示を行える画像表示システム、画像再生装置及びレイアウト制御装置を提供することを目的とする。

上記の目的を達成する為に、本発明の第１の態様の画像表示システムは、鑑賞者が鑑賞する画像を表示する画面を持った画像表示手段と、上記画像表示手段の画面と鑑賞者との相対的位置関係を表す鑑賞者位置情報を検出する鑑賞者検出手段と、上記鑑賞者検出手段によって検出された鑑賞者位置情報に従って上記画像表示手段の画面のレイアウト制御を行うレイアウト制御手段と、を具備することを特徴とする。

また、上記の目的を達成する為に、本発明の第２の態様の画像表示システムは、鑑賞者が鑑賞する表示画面を有する画像表示手段と、上記画像表示手段の画面と上記鑑賞者との相対的位置関係を表す鑑賞者位置情報を検出する鑑賞者検出手段と、上記鑑賞者検出手段によって検出された鑑賞者位置情報に従って、上記画像表示手段の画面の表示内容及び表示位置のうち少なくとも一方を切り換える制御手段と、を具備することを特徴とする画像表示システム。

また、上記の目的を達成する為に、本発明の第３の態様の画像表示システムは、鑑賞者の鑑賞する表示画面を有する画像表示手段と、上記画像表示手段の画面に対し所定の範囲内の鑑賞者を判定する鑑賞者判定手段と、上記鑑賞者判定手段による判定結果に基づき、上記画像表示手段の表示画面に表示する複数の画像を選択すると共に、それら選択した各画像の上記画像表示手段の表示画面上におけるレイアウトを決定する画像選択手段と、上記画像選択手段によって決定されたレイアウトに従って上記選択された画像の上記画像表示手段の表示画面への表示制御を行う表示制御手段と、を具備することを特徴とする。

また、上記の目的を達成する為に、本発明の第４の態様の画像再生装置は、画像を表示する表示画面を有する画像表示装置と接続可能である画像再生装置であって、上記画像表示装置の表示画面に対する鑑賞者の位置を検出する鑑賞者検出手段と、上記鑑賞者検出手段によって検出された鑑賞者の位置に従って上記画像表示装置の表示画面のレイアウト制御を行うレイアウト制御手段と、を具備することを特徴とする。

また、上記の目的を達成する為に、本発明の第５の態様のレイアウト制御装置は、画像を表示する表示画面を有する画像表示装置に表示する複数の画像のレイアウトを制御するレイアウト制御装置であって、上記画像表示装置の画面に対し所定の範囲内を検出範囲とする検出手段の検出結果をネットワークを介して受信し、その検出手段の検出結果に基づいて、鑑賞者の上記画像表示装置の表示画面に対する相対位置を判定する鑑賞者判定手段と、上記鑑賞者判定手段による判定結果に基づいて、上記画像表示装置の表示画面に表示する複数の画像の上記画像表示装置の表示画面上におけるレイアウトを決定して、その決定したレイアウトを示す情報をネットワークを介して送信するレイアウト制御手段と、を具備することを特徴とする。

本発明によれば、大型の表示画面上に各ユーザー（鑑賞者）にとって見やすい表示を行える画像表示システム、画像再生装置及びレイアウト制御装置を提供することができる。

以下、図面を参照して本発明の実施形態について説明する。

図１に、本発明の一実施形態に係る画像表示システムの構成を示す。

同図は、鑑賞者２が、画像表示装置３の大画面である表示画面４を見ている状況である。ここでは、例えば鑑賞者２が、居間や食堂に設置された大画面画像表示装置３の表示画面４を見ようとしている状況を想定している。近年では、大画面画像表示装置として大画面テレビが普及しているが、この表示画面で鑑賞される画像は、テレビ番組に限らない。つまり、従来のようにテレビ画面を見ると言っても、大画面であればその一部のみにテレビ番組を表示すればよく、その他の部分には、受信した電子メールや、デジタルカメラでの撮影画像、及び個人向けの案内広告等を表示することも可能である。

また、表示画面の大画面化に伴い、鑑賞者の位置及び視野を考慮した画像表示を行う必要が生じる。例えば、映画の字幕などでは画面上の表示位置が不適切だと、鑑賞が苦痛となってしまう場合がある。従って、画像表示の制御を行うことにより、鑑賞者にとって見やすい表示位置に画像表示を行ったほうが良い。

表示画面の大画面化が進む程、こうした画面分割をはじめとする画像表示制御に関する技術が必要となってくる。本発明は上述のような状況を考慮している。

なお、図１においては、理解を容易にするために、便宜的に各構成要素を画像表示装置３の外部に設けた図としているが、同図における破線で囲まれている構成要素以外は、全て画像表示装置３に設けられているとする。しかしながら、画像表示装置３に設けるとした上述の構成要素は、その機能を画像表示装置３に接続可能な機器に有させ、該機器を上記画像表示装置３に接続することにより、その機能を担わせる構成を採っても勿論よい。

図１に示すように画像表示装置３は、鑑賞者２の像信号を検出するセンサ部６を有している。なお、センサ部６を一対の視差を有するセンサとすることで、鑑賞者２の立体画像の像信号である３Ｄ情報データを検出できるようにしても勿論よい。この場合は、鑑賞者判定手段１２において、より精密な鑑賞者位置や距離の測定、及び後述する個人認証の際にも、より精密な制御が可能となる。また、画像データ回路８が画像表示装置３に設けられ、これが上記センサ部６の出力信号、例えばアナログ電気信号である鑑賞者２の像信号を、送受信しやすいデジタル画像データに変換する。このデジタル画像データに変換された鑑賞者２の像信号は、送信手段１０により鑑賞者判定手段１２へ送信される。

さらに、画像データ等が記録されているデータベース１２ａが上記鑑賞者判定手段１２に併設されている。ここで、鑑賞者判定手段１２により、デジタル画像データに変換された鑑賞者２の像信号とデータベース１２ａ内に記録された画像データ等とを照合し、鑑賞者２の鑑賞位置を特定することで、鑑賞者位置情報を取得する。

さらに、送信手段１０から送信されるデータとデータベース１２ａ内のデータとの比較の際に、鑑賞者判定手段１２において個人認証も行うと、更にきめ細かな制御が可能となる。なお、個人認証の際に鑑賞者２の声や指紋等を参考にして鑑賞者の特定をより正確化しても、勿論よい。但し、その場合は、個人認証に要するデータをデータベース１２ａに予め記録しておく必要がある。また、単純に画像表示装置３の操作部材（不図示）等で当該画像表示装置３のユーザー（鑑賞者）を選択して鑑賞者及びその位置を特定できるようにしても、勿論よい。なお、画像表示装置３に設計上の余裕があれば、個人認証機能をモニタに持たせても、勿論よい。

また、上述の方法により鑑賞者の位置等が特定されると、鑑賞者判定手段１２が、鑑賞者位置情報等を送信画像選択手段１４へ送信する（個人認証をも行う場合は、個人認証情報も送信する）。これを受け、送信画像選択手段１４は、各鑑賞者の位置から最も見やすい画面分割構成のモニタ表示及び各鑑賞者の趣向に合わせた画像再生を行うように、各鑑賞者がアルバム１４ａ等に記録したデータから送信画像を選択し、画像信号、該画像信号と対応する音声信号、及びユーザー（鑑賞者）に応じた画面分割方法を示す画面分割信号を配信する。ここでアルバム１４ａとは、データを記録するために送信画像選択手段１４に接続して設けられた記憶装置である。

以下、上述の鑑賞者判定手段１２、データベース１２ａ、送信画像選択手段１４及びアルバム１４ａとからなる部分を送信データ選択部１６と称する（図１の破線部内）。一方、それら送信データ選択部１６内に設けられていない（図１の破線部内でない）上述した各構成要素は、画像表示装置３に設けられる。勿論、送信データ選択部１６とその他の構成要素を、画像表示装置３に接続可能な１つの筐体内に内蔵させて、画像再生装置として提供してもよいし、テレビの放送局等が送信データ選択部１６の機能を有してもよい。また、インターネットによって接続された基地局等が送信データ選択部１６の機能を有しても勿論よい（この場合、送信データ選択部１６は、センサ部６の検出結果をインターネットを介して受信し、その検出結果に基づいて、鑑賞者の表示画面４に対する相対位置を判定し、その判定結果に基づいて表示画面上におけるレイアウトを決定し、その決定したレイアウトを示す情報をインターネットを介して送信するレイアウト制御装置として、基地局等に構成される）。

以下、インターネットによって接続された基地局等が送信データ選択部１６の機能を有している場合を例に説明する。なお、この場合、送信手段１０は、インターネットを介して送信データ選択部（基地局）１６にデータを送信することとなる。また、テレビの放送局等が送信データ選択部１６の機能を有した場合も、インターネットを介してのデータ送信が可能である。

また、受信手段１８が、上記送信画像選択手段１４により選択された送信画像を受信するために、画像表示装置３に設けられている。つまり、上述のように送信画像が選択された後、送信データ選択部１６内の送信画像選択手段１４から、その送信画像の画像信号（及び該画像信号と対応する音声信号）と、ユーザー（鑑賞者）に応じた画面分割方法を示す画面分割信号とが配信され、これらの信号を受信手段１８が受信する。このように受信手段１８に到った画像信号（及び音声信号）は画像加工手段２０に送られ、また、画面分割信号は画像表示制御手段２２に送られる。ここで、画像表示制御手段２２は、送信データ選択部１６からの画面分割信号を基に、画像加工手段２０による画像加工を制御する。このようにして、送信データ選択部１６から送信されたデータに従い、画像表示制御手段２２により制御される画像加工手段２０によって、画像信号はユーザーに対応した表示形態に加工され、（音声信号と共に）再生手段２４へ送られて、該再生手段２４によって上記表示画面４に再生される（また、図示しないスピーカで音声信号が再生される）。

また、上記画像加工手段２０には、メモリ２６が接続して設けられている。表示画像としては送信画像選択手段１４から配信された画像のみでなく、鑑賞者２がデジタルカメラやカメラ付き携帯電話等で撮影し、画像表示装置３に接続された機器（例えば、デジタルカメラやカメラ付き携帯電話）内に収められたメモリ２６に記録された画像も同時に再生するようにしても、もちろんよい。また、上述のように機器内に収められたメモリでなく、機器から取り外し可能なメモリに関しては、画像表示装置３にメモリ専用の接続スロットを設けることにより、メモリ単体でも画像表示装置３に接続できるように構成しても勿論よい。

また、デジタルカメラ等で撮影してメモリ２６に格納した画像は、不図示のリモートコントローラや当該機器（例えば、デジタルカメラやカメラ付き携帯電話）に設けられた操作部材（不図示）類の操作指示により、または、時間等で自動的に、順次入れかえ表示するようにする。

いずれにせよ、表示画面４上での画面や字幕などの表示方法を切り換える制御を行う画像表示制御手段２２の制御により画像加工を行う画像加工手段２０と、表示画面４を制御するドライバとしての再生手段２４は、本画像表示システム内に構成される。

以下、本実施形態に係る画像表示システムの動作手順を図２のフローチャートを用いて説明する。

まず、Ｓ１において、センサ部６が鑑賞者２の像信号（後の鑑賞者位置情報の取得及び鑑賞者の個人認証に要する）を検出する。更に、センサ部６の取得した鑑賞者２の像（アナログ電気信号）を画像データ回路８がデジタル画像データに変換する。

次に、Ｓ２において、Ｓ１により得られたデジタル画像データを、送信手段１０が送信データ選択部（基地局）１６内の鑑賞者判定手段１２へ送信する（３Ｄ情報データや音声データ等を併用するために送信してもよい）。送信データ選択部（基地局）１６内では以下のようにして、鑑賞者２と表示画面４との相対的位置を表す鑑賞者位置情報及び鑑賞者２の個人認証データを割り出す。

まず、鑑賞者判定手段１２が、送信手段１０から送信されてきたデジタル画像データから鑑賞者位置情報を割り出し、更に上記デジタル画像データとデータベース１２ａに格納されているデータとの比較により、個人認証も行う（なお、この際に、上述の３Ｄ情報データ、または音声情報データを用いて、個人認証の精度をより向上させても勿論よい。）。このようにして取得した鑑賞者２の鑑賞者位置情報及び鑑賞者２の個人認証データは、送信画像選択手段１４へ送信される。送信画像選択手段１４では、これらの情報を基に鑑賞者の位置及び各鑑賞者の好み（例えば、後述の、ユーザー設定プロセスにより設定する。）に応じて、画面分割方法及び送信画像を選択し、画像信号、該画像信号と対応する音声信号、及びユーザーに応じた画面分割方法を示す画面分割信号を、送信データ選択部（基地局）１６からインターネットを介して画像表示装置３に設けられている受信手段１８へ送信する。

Ｓ３において、これらの送信されたデータを受信手段１８が取得する。続くＳ４にて、取得された鑑賞者位置情報や個人認証データに基づいた画面分割方法に基づく画面分割信号に従った画像表示制御手段２２の制御により、画像加工手段２０が画像信号に対しユーザーに対応した加工を施し、再生手段２４により表示画面４に表示させる。

画面分割の例としては、二分割する場合は、表示画面４に第１の画像（例えば送信データ選択部１６により配信された画像）及び第２の画像（例えばメモリ９内の画像データ）を表示する（Ｓ５，６）。なお、この場合の画面分割は、後述のユーザー設定プロセスにより、ユーザーの好みに分割可能である。また、画像表示制御手段２２が、画像加工手段２０を制御することにより、画面分割及び画像加工を行う。その結果、鑑賞者２用に最適化された分割画像が、Ｓ７において再生手段２４により表示画面４上に表示される。

Ｓ７にて為される表示画面４上の画像表示は、鑑賞者２が操作部材（不図示）等により終了操作をした場合（Ｓ８におけるＹ分岐）、及びＳ９でセンサ部６により検出されて画像データ回路８によりデジタル画像データ化された鑑賞者２の像信号が、Ｓ１０でその変化が大きいと判定された場合（Ｓ１０におけるＹ分岐）以外は継続される。一方、Ｓ８において、Ｙ分岐した場合は、本画像再生システムは画像再生を終了する。また、Ｓ１０でＹ分岐した場合はＳ２へ戻り、再び送信データ選択部１６による送信画像選択ステップからやり直す。

また、Ｓ１やＳ９の鑑賞者の像信号検出ステップにおいて、複数の人が検出された際には、どの人の認証結果を用いるかを決定しなければならない。このような場合には例えば、最初に表示画面４の操作をした人を優先したり、表示画面４に対して最も正面に近い人を優先したりと、様々な制御が可能である。なお、単純に検出人数によってのみで画面を切り換えても勿論良い。

図３は、上述のシステムによる画像表示例を示した図である。以下、図３を用いて画像表示例を説明する。

図３（ａ）は、鑑賞者が、例えばその家の父親である時の画像表示例を示した図である。なお、同図に示すように、座席位置３２ａ，３２ｂ，３２ｃを定め、ダイニングルームにおける鑑賞者（父親）の座席位置３２ｂが、テーブルの右側であるとする。送信データ選択部１６は、このような座席位置３２ｂに鑑賞者が居る場合、表示画面４を５つの画像表示部に分割し、それぞれに以下のような表示を行うよう、例えば詳細は後述するようにして設定されている。即ち、表示画面４中で最も大きい面積を占める主画面を画像表示部３０ａとして例えば音楽会のライブ中継放送を表示し、その下側にある横長の画像表示部を画像表示部３０ｂとして上記画像表示部３０ａの映像の解説を表示する。また、上記画像表示部３０ａ，３０ｂの右側にある縦長の画像表示部は、座席位置３２ｂからはやや見えづらく、主画面の表示には適さないと画像表示部である。そこで、ここは副画面として画像表示部２８ａ，２８ｂ，２８ｃに分割して旅行先で撮影した画像（例えばメモリ２６内の画像）を表示し、主画面がコマーシャル等で鑑賞者が主画面から目を離した時に鑑賞できるようにする。なお、この場合は送信データ選択部１６の機能はテレビの放送局が有している構成となる。

また、テーブル左部の座席位置３２ｃに鑑賞者（例えば、その家の娘）が位置した場合を考える。この場合は、例えば図３（ｂ）に示すように４つの画像表示部に画面分割を行う。つまり、最も大きい面積を占める主画面である画像表示部を画像表示部３６ａとし、その右側にある縦長の画像表示部を副画面として画像表示部３６ｂとする。また、画像表示部３６ａ，３６ｂの下側にある画像表示部を副画面として画像表示部３４ａ，３６ｃに分割する。

ここでは、例えば画像表示部３４ａにはその人が最近撮ってもらったポートレート写真を表示する（これは、メモリ２６内のデータでもよいし、送信データ選択部（基地局）１６が有するアルバム１４ａに携帯電話などで入力したデータでもよい）。また、電子メールの受信結果を画像表示部３６ｃに表示するなどして（この場合は、例えば基地局６のメモリに記録されたものである。）、表示画面４を電子メールの受信表示画面として重視する形でレイアウトしてもよい。その際でも、大画面を占める画像表示部３６ａには例えばいつも見ているトレンディドラマを、画像表示部３６ｂにはその字幕を再生表示するようにしてもよい。なお、画像表示部３６ｃには電子メールがない時には、個人当て広告等を表示しても良い。このように鑑賞者の位置（及び個人認証結果）によって分割方法を切り替える画像表示は、上述の図２で示したフローチャートに従った動作制御により可能となる。

ここで、画面分割のユーザー設定プロセスを、図４に示すフローチャートを用いて説明する。

まず、ユーザーはＳ２１にて名前を操作部材（不図示）により入力し、Ｓ２２においてユーザー画像データ（例えば、声や指紋のデータでもよい）を入力して、画面分割のレイアウトをＳ２３で選択する。このＳ２３のステップは、いくつかの画面分割パターンから選択しても良いし、スイッチ操作部材（不図示）類の操作によりユーザーが任意に画面分割できるようにしてもよい。上記のプロセスから得られた結果をＳ２４でデータベース１２ａに登録すると、以降再びこのプロセスを踏まずにユーザー好みの画面分割を得られる。

なお、上記のプロセスから得られた結果を登録するのは、データベース１２ａに限らず、画像再生装置に設けられた記録手段（不図示）に記録しても勿論よい。例えば上述のように、図４のフローチャートの各ステップを実行することで、図３及び図９に示すような好きな画面分割で必要な人が必要な多くの情報を一度に見ることができるモニタが提供できる。

図５は、図４のフローチャートにおけるＳ２３の詳細を表すフローチャートである。

まず、Ｓ３０にてユーザーが好みの画像分割のレイアウトを選択する。なおここでは、通常図６のように画面分割レイアウト例が表示画面４に並んで示され、ユーザーがその表示例の中から選ぶ方法を採る。その後、Ｓ３１〜Ｓ３７において操作部材（不図示）の操作により、それぞれの画像表示部に、ＴＶ画面、字幕表示位置、写真画面、メール画面、メール添付画像画面、広告画面、予定表（カレンダー）画面を対応させる。この一連の設定後に、Ｓ３８にてユーザー名を入力し、続くＳ３９において登録を行う。なお、Ｓ３８及びＳ３９は、ユーザーの新規登録ではない場合は省略してもよい。

図７は、鑑賞者が複数いる場合に人数を考慮して、その表示形態を切り換える場合のフローチャートを示す。図７のフローチャートは、ユーザーがあらかじめ、上述の図４及び図５のフローチャートに従った画面分割のユーザー設定プロセスを実行していることを前提としている。

なお、図７のフローチャートは、図２のフローチャートのプロセスを踏んだ上で行う動作制御を示すフローチャートである。また、図７のフローチャートにおけるＳ４０〜Ｓ４１は、図２のフローチャートにおけるＳ１〜Ｓ３に対応し、Ｓ１〜Ｓ３の動作制御に加えて付加的に行う動作制御であると言える。

したがって、図２のフローチャートにおけるＳ１〜Ｓ３の動作は、図７のフローチャートにおけるＳ４０〜Ｓ４１においても当然に行われるので、Ｓ１〜Ｓ３における動作はここでは一部省略して簡略化した説明を行う。

まずＳ４０にて、ユーザー（鑑賞者）の像信号（アナログ電気信号）が、センサ部６で検出され、更に画像データ回路でデジタル画像データに変換され、送信手段１０により送信データ選択部１６内の鑑賞者判定手段１２に送られる。上述のように取得した鑑賞者のデジタル画像データから、鑑賞者判定手段１２が鑑賞者の人数を判断する。

続いてＳ４１にて、鑑賞者判定手段１２がユーザーが複数か否かを判定する。なお、判定後はその結果を送信画像選択手段１４へ送り、それに基づき送信画像選択手段１４により選択された送信画像を受信手段１８へ送信する。もし、ユーザーが複数の場合はＳ４２へＹ分岐する。また、ユーザーが一人の場合はＳ５０へＮ分岐する。

Ｓ４２へ分岐した場合は、複数の人が大型の表示画面４を見ている場合である。ここでは、例えば家族で鑑賞する場合の画面表示例を図９（ａ）に示す。同図に示すように、表示画面４を主画面である画像表示部４０ａと、画像表示部の上側にある横長の画像表示部３８ａと、画像表示部４０ａの下側にある横長の画像表示部３８ｂとに画面分割を行う。なお、図８に示すように座席位置３２ｂ，３２ｃの両鑑賞者が居る場合、同図に示す画像表示部４０ｂ及び４０ｃは、両鑑賞者から見やすい画像表示部であるとは言えないので用いない。

ここでは、Ｓ４２にて家族でとった写真を画像表示部３８ａに表示する。これらの写真は、順次切り換えたり、コマーシャルの時だけ表示されたりするような工夫で制御してもよい。続くＳ４３にて家族の予定のカレンダー等を画像表示部３８ｂに表示する。これにより、家族全員の重要な予定が見逃されることなく把握される。続くＳ４４，Ｓ４５にて、主画面である画像表示部４０ａをテレビ番組再生表示として用いる。なお、Ｓ４２〜Ｓ４５にて行われる画像表示は、送信データ選択部１６からの送信画像に基づき、画像表示制御手段２２の制御により、画像加工手段２０及び再生手段２４が行う。上述のように画像表示することによって、座席位置３２ｂ，３２ｃに居る鑑賞者が共に楽しめる画面配分とすることができる。

またＳ４１においてＳ５０へＮ分岐した場合では、ユーザーは所定の個人一人と判断された場合であるので、主画面である画像表示部４０ａ以外の画像表示部には、Ｓ５０にてプライベート画像の表示を行うようにしてもよい。ここで用いる画像は、例えば電子メールに添付されてきた画像や、本人がデジタルカメラで撮影した画像であってもよい。

続く、Ｓ５１にてメールチェックを行うことができる。もし、受信メールが有る場合にはＳ５２をＹ分岐してＳ５３に進み、受信メールが無い場合にはＳ５２をＮ分岐してＳ５７へ進む。なお、上述したように図２のフローチャートにおけるＳ１〜Ｓ３の動作は、本フローチャートにおけるＳ４０〜Ｓ４１で行われている。つまり、鑑賞者の個人認証は行われているので、プライベート画像の表示も問題なく行われる。また、上述した図３（ａ）では鑑賞者（父親）は１人での鑑賞にも関わらず、メール表示をせずに家族写真の表示をしたが、操作部材（不図示）での操作により、１人での鑑賞であっても、複数人での鑑賞の場合と同じ画像表示をすることは可能となる。

一方、Ｓ５２をＳ５３にＹ分岐した場合は、更に添付画像が有るか否かの判断をし、添付画像が有る場合には、Ｓ５３にてＹ分岐してＳ５５へ進み、Ｓ５５にてメールとその添付画像を表示画面４に表示する。

また、Ｓ５２でＮ分岐した場合はＳ５７へ進み、Ｓ５０におけるプライベート画像表示のままで、Ｓ５８にて受信メールが無い旨を表示する。

ここでは、図８における座席位置３２ｃの位置に鑑賞者がいる事が判定されているので、更に個人認証結果に基づいて、まず、見やすい位置に個人認証結果に応じたメール表示を行う仕様としている。

また、Ｓ５５における画像表示とＳ５８における画像表示とでは、画像表示の際の画面分割の仕方が異なるので、一方を画像表示Ａ、他方を画像表示Ｂで表現した。

例えば、受信メールに画像が添付されている場合に、添付画像を大きく表示し、文字も大きく表示して添付画像の内容を分かりやすくしたのが、図９（ｂ）のような分割表示である。この場合、画像表示部４２ａはＴＶ画面として使用し、広告を表示する画像表示部４２ｃを縮小し、メール本文の画像表示部４４ｂと添付画像の画像表示部４４ａを大きめに表示する（Ｓ５５の画像表示Ａに相当）。

また、受信メールに添付画像が無い場合には、例えば図９（ｃ）のような画面分割を行う。この場合、テレビ画面としての画像表示部４６ａは同図に示すようにやや大きめに取り、受信メールの画像表示部４６ｂは、画像表示部４６ａの次の大きさを取り、広告表示の画像表示部４６ｃや４６ｄ及びプライベート画像の画像表示部４８ａは小さめに表示した。

なお、プライベート画像については、図９（ｄ）に示す様に画像表示の開始時（Ｓ５０時）にまず大きく表示し、その後図９（ｃ）で示す本来の画面分割に戻してもよい。このようにプライベート画像を再生すると、画面表示がプライベートモード（プライベート画像を表示するモード）に切り替わった事を、ユーザーが認識しやすくなる。

なお、ユーザーの操作部材（不図示）操作を画像表示制御手段２２が判定して、分割表示のうち見たい画面を図９（ｄ）のように拡大表示できるように構成してもよい。

以上説明したように、本発明の第１実施形態によれば、ユーザーの鑑賞位置に対応した画像表示を行う為、鑑賞位置に関わらず、ユーザーにとって最も見やすく、死角のない画像表示を行える。さらに、ユーザーを個人認証することにより、ユーザーの必要とする画像表示のみを行い、大画面を効率よく利用できる画像表示システム、画像表示装置及びレイアウト制御装置が実現する。

さらに、受信メールも表示できる為、メールをチェックするために何度もパソコンや携帯電話の画面を確認したりする必要も無くなる。また、デジタルカメラ等で撮影した写真を見る為にコンピューターを立ち上げる手間も省ける。つまり、テレビ番組を楽しむと同時に、様々な情報をユーザーにとって最も見やすい表示画面の位置から入手することができる。また、鑑賞者の位置及び人数に従い画面分割を制御することにより、ユーザーの位置を考慮して見やすい位置に画像表示制御を行っている。

また、ユーザーの好きな画面分割レイアウトとそれに当てはめた表示画像で、同時に種々の情報を楽しめるモニタを使いこなすことも可能となる。また、センサ部６を利用することにより、１人で鑑賞中にはプライベート画像を再生し、センサ部６が他人を検知した時、つまり鑑賞者が複数になった時には、プライベート画像の再生を中止するといったかたちでプライベート画像を鑑賞することが可能である。

［第２実施形態］
次に、本発明の第２実施形態に係る画像表示システムについて説明する。なお、第１実施形態に係る画像表示システムと同様の構成部分については、図示及び説明は省略する。なお、上述の第１実施形態における場合と同様に、本実施形態からも画像再生装置及びレイアウト制御装置の構成が抽出される。以下、図面を用いて本実施形態に係る画像表示システムについて説明する。

ここで、図１０（ａ）のように、座席位置３２ｂ，３２ｃが図に示すようにテーブルを挟んで向かい合って位置し、両座席位置についている鑑賞者が表示画面４を見る場合と、図１０（ｂ）のように一人の鑑賞者が座席位置３２ａで表示画面４を見る場合とでは、それぞれ鑑賞者の視野が異なる。つまり、鑑賞者が複数いる場合は、各鑑賞者が表示画面を見やすいように切り換えたほうがよい。

例えば、図１１のように座席位置３２ｂの鑑賞者にとっては、表示画面４の全域を見るのは困難であり、画面部４ａ，４ｂは見やすく、画面部４ｃの位置は死角となり、ここに、例えばドラマの重要人物、映画の字幕等が表示されると、首を大きく曲げる必要があり、長い鑑賞時中に痺れてしまう。

一方、図１０（ａ）のように、座席位置３２ｂ，３２ｃにそれぞれ鑑賞者が居る場合には、二人の鑑賞者の内どちらかの死角となる所にはメインとなる画面を表示しないようにしなければならない。この時の実際の表示画面は、図１２（ａ）に示すようになる。同図から分かるように、両鑑賞者から見える画面部４ａにはメインとなる画面を縮小表示し、座席位置３２ｂの位置の人には、画面部４ｂの位置に字幕を、座席位置３２ｃの位置の人には画面部４ｃの位置に字幕を出すようにする。

どの座席位置に鑑賞者が居るかの検出には、テーブル上においたセンサ部６を用いる。このセンサ部６は、全方位を検出する魚眼レンズ付きのイメージセンサのようなもので実現できる。なお、モニタとしては大型ＬＣＤディスプレイやプラズマディスプレイのみならず、センサ部６を有するプロジェクタ５２によって、スクリーン５４に画像を投射するようにしても、もちろんよい（図１０（ｃ）参照）。

上記のような、制御をするために図１における送信データ選択部１６及び画像表示制御手段２２が図１３のようなフローチャートによる制御を行うようにする。つまり、Ｓ６０においてセンサによるユーザーの位置を判定する（なお、ここでは説明を単純化するために、ユーザー認証を含め、第１実施形態に係る画像再生システムと同様の構成、動作及び機能については、必要な場合を除きその説明を省略する。）。

続くＳ６１，Ｓ６２，Ｓ６３，Ｓ６４において、図１０の座席位置３２ａ，３２ｂ，３２ｃの何れの位置に鑑賞者が居るかを判定、分岐していく。

まず、座席位置３２ａのみに鑑賞者が居る場合、Ｓ６１においてＹ分岐してＳ７０へ進む。図１０（ｂ）のような状況であると判定されると、Ｙ分岐してＳ７０に進み、全画面表示が表示画面４に表示される。さらに、Ｓ７１へ進んで字幕も表示する。この時、実際の表示画面としては図１２（ｃ）のように、表示画面４を全領域使用して画像表示を行い、字幕は表示画面４の下部（画面部４ｄ）に表示する。

一方、Ｓ６１においてＮ分岐してＳ６２へ進むと、鑑賞者が座席位置３２ｂに居るかどうかを判定する。居ると判定した場合はＹ分岐して、Ｓ６４へ進む。更にＳ６４において座席位置３２ｃにも鑑賞者が居るかどうかを判定し、居ると判定されるとＳ６４をＹ分岐してＳ７４へ進み、画面部４ａにメイン画像を、画面部４ｂ，４ｃに字幕を表示する。この時の実際の表示画面は、図１２（ａ）のようになる。同図から分かるように、座席位置３２ｂ，３２ｃにいる両鑑賞者にとって死角にならない画面部４ａにメイン画面を縮小表示し、図１２（ａ）のように画面両サイドの画面部４ｂ，４ｃに同じ字幕を表示させる。これにより、座席位置３２ｂ，３２ｃについている両鑑賞者が、それぞれ最も見やすい位置に字幕が表示されることとなる。

一方、Ｓ６４においてＮ分岐する（座席位置３２ｂのみに鑑賞者が居る）場合は、Ｓ６４をＮ分岐し、Ｓ７３へ進む。図１２（ｂ）のように、画面部４ａと画面部４ｂの部分を合わせた所に図１２（ｂ）のようにメイン画面を表示し、字幕は画面部４ｃに表示する。画面部４ｃは座席位置３２ｂにいる鑑賞者の死角となるので画像表示を行わない。これにより、画素の明るさ制御にエネルギーを要する表示装置の場合は、省エネ効果も期待できる。

また、座席位置３２ａ，３２ｂ共に鑑賞者がおらず、座席位置３２ｃにのみ鑑賞者がいる場合には、Ｓ６３においてＹ分岐してＳ７５へ進む。この時の実際の表示画面は、座席位置３２ｂにのみ鑑賞者が居る場合と逆で、画面部４ａにメイン画面を、画面部４ｃに字幕を表示し、鑑賞者の死角となる画面部４ｂには表示を行わない。これにより、Ｓ７３における表示（図１２（ｂ））の時と同様に、画素の明るさ制御にエネルギーを要する表示装置の場合は、省エネ効果も期待できる。

また、Ｓ６１，Ｓ６２，Ｓ６３全てＮに分岐して進んでいった場合、Ｓ７６，Ｓ７７にて、図１２（ｃ）のような画面表示を行う。この画面表示は、センサ部６の検出範囲では検出できない程遠くに鑑賞者が居ると判定したことによる。よって、できるだけ大きく表示して、遠くからもよく見えるようにした表示である。

以上説明したように、本発明の第２実施形態によれば、鑑賞者の位置から各鑑賞者の死角を考慮し、不要な表示は行わずに必要な表示はなるべく大きく迫力をもって表示するようにし、大画面を無駄なく利用できる画像表示システム、画像再生装置及びレイアウト制御装置を提供することができる。

また、二人の鑑賞者がいる場合には、それぞれの鑑賞者の死角となる画面部分を考慮して字幕表示を行う為、どの座席位置の鑑賞者にとっても、体に負担をかけない姿勢を保ったままで、見やすい画面及び字幕表示を実現した。なお、字幕表示に限らず、電子メールやコマーシャルなど様々なインフォメーションを表示する場合でも、もちろん同様の画面表示を用いることができる。

以上、本発明の実施形態について説明したが、本発明は上述した実施形態以外にも、本発明の要旨を逸脱しない範囲で種々の変形実施が可能なことは勿論である。例えば、上述のセンサ部６を赤外線や超音波を検知するセンサとし、これらによって鑑賞者２とモニタとの相対的位置関係や人数を検出しても、勿論よい。

本発明の第１実施形態に係る画像表示システムの構成を示す図である。 本発明の第１実施形態に係る画像表示システムの動作手順を示したフローチャートである。 実際の画像表示例を示した図である。 画面分割のユーザー設定プロセスを示すフローチャートである。 図４で画面分割したそれぞれの画像表示部に何の画像を対応させ表示させるかの選択方法を示すフローチャートである。 画面分割レイアウト例が、並んで示される場合の表示例を示す図である。 鑑賞するユーザーの人数を考慮して、その表示形態を切り換える場合のフローチャートを示す。 鑑賞者が複数の場合の、両鑑賞者の視野を示す図である。 （ａ）は、複数の鑑賞者が共に楽しめる画面配分とする場合の実際のモニタ画面の例を示す。（ｂ）は、受信メールに画像が添付されている場合に、添付画像を大きく表示し、文字も大きく表示して添付画像の内容を分かりやすくした表示を表す図である。（ｃ）は、受信メールに添付画像が無い場合であり、テレビ画面としての画像表示部はやや大きめに取り、広告表示の画像表示部及びプライベート画像の画像表示部を小さめにした表示を表す図である。（ｄ）は、プライベート画像を画像表示の開始時にまず大きく表示した場合の画像表示を表す図である。 （ａ）は、二人の鑑賞者がテーブルを挟んで向かい合って位置してモニタ画面を見る場合の鑑賞者の視野を示す図である。（ｂ）は、一人の鑑賞者が正面から画面を見る場合の視野を示す図である。（ｃ）は、センサ部を有するプロジェクタによって、スクリーンに画像を投射するようにした場合の、画像投射時の該プロジェクタ及び該スクリーンの概観を表す図である。 テーブルについている人の視野及びそれに対応する画面分割を表す図である。 第２実施形態に係る画像表示システムの実際の表示画面例を表す図である。 画像表示制御手段が行う制御を示すフローチャートである。

符号の説明

２…鑑賞者、 ３…画像表示装置、 ４…表示画面、 ４ａ，４ｂ，４ｃ…画面部、 ６…センサ部、 ８…画像データ回路、 １０…送信手段、 １２…鑑賞者判定手段、 １２ａ…データベース、 １４…送信画像選択手段、 １４ａ…アルバム、 １６…送信データ選択部、 １８…受信手段、 ２０…画像加工手段、 ２２…画像表示制御手段、 ２４…再生手段、 ２６…メモリ、 ２８ａ，２８ｂ…画像表示部、 ３０ａ，３０ｂ…画像表示部、 ３２ａ，３２ｂ，３２ｃ…座席位置、 ３４ａ…画像表示部、 ３６ａ，３６ｂ，３６ｃ…画像表示部、 ３６ａ，３６ｂ，３６ｃ…画像表示部、 ３８ａ，３８ｂ…画像表示部、 ４０ａ，４０ｂ…画像表示部、 ４２ａ，４２ｃ…画像表示部、 ４４ａ，４４ｂ…画像表示部、 ４６ａ，４６ｂ，４６ｃ…画像表示部、 ４８ａ…画像表示部、 ５２…プロジェクタ、 ５４…スクリーン。

Claims (14)

1. 鑑賞者が鑑賞する画像を表示する画面を持った画像表示手段と、
   上記画像表示手段の画面と鑑賞者との相対的位置関係を表す鑑賞者位置情報を検出する鑑賞者検出手段と、
   上記鑑賞者検出手段によって検出された鑑賞者位置情報に従って上記画像表示手段の画面のレイアウト制御を行うレイアウト制御手段と、
   を具備することを特徴とする画像表示システム。
2. 上記レイアウト制御手段は、上記鑑賞者位置情報に従って、上記画像表示手段の画面に表示される表示画像の表示位置及び大きさの少なくとも一方を切り換えることを特徴とする請求項１に記載の画像表示システム。
3. 上記レイアウト制御手段は、上記鑑賞者位置情報に従って上記画像表示手段の画面に表示される表示画像の画面占有の割合を切り換えることを特徴とする請求項１に記載の画像表示システム。
4. 上記鑑賞者検出手段は、上記鑑賞者の人数を表す鑑賞者人数情報を更に検出し、
   上記レイアウト制御手段は、上記画像表示手段の画面のレイアウト制御を行う場合に、更に上記鑑賞者人数情報に従うことを特徴とする請求項１に記載の画像表示システム。
5. 上記レイアウト制御手段は、上記鑑賞者位置情報及び上記鑑賞者人数情報に従って、上記画像表示手段の画面に表示される表示画像の表示位置及び大きさの少なくとも一方を切り換えることを特徴とする請求項４に記載の画像表示システム。
6. 上記レイアウト制御手段は、上記鑑賞者位置情報及び上記鑑賞者人数情報に従って、上記画像表示手段の画面に表示される表示画像の画面占有の割合を切り換えることを特徴とする請求項４に記載の画像表示システム。
7. 鑑賞者が鑑賞する表示画面を有する画像表示手段と、
   上記画像表示手段の画面と上記鑑賞者との相対的位置関係を表す鑑賞者位置情報を検出する鑑賞者検出手段と、
   上記鑑賞者検出手段によって検出された鑑賞者位置情報に従って、上記画像表示手段の画面の表示内容及び表示位置のうち少なくとも一方を切り換える制御手段と、
   を具備することを特徴とする画像表示システム。
8. 鑑賞者の鑑賞する表示画面を有する画像表示手段と、
   上記画像表示手段の画面に対し所定の範囲内の鑑賞者を判定する鑑賞者判定手段と、
   上記鑑賞者判定手段による判定結果に基づき、上記画像表示手段の表示画面に表示する複数の画像を選択すると共に、それら選択した各画像の上記画像表示手段の表示画面上におけるレイアウトを決定する画像選択手段と、
   上記画像選択手段によって決定されたレイアウトに従って上記選択された画像の上記画像表示手段の表示画面への表示制御を行う表示制御手段と、
   を具備することを特徴とする画像表示システム。
9. 上記表示制御手段は、上記鑑賞者判定手段で判定された上記鑑賞者の位置及び人数に関する情報に従って、上記画像表示手段の表示画面に表示される上記選択された画像の表示位置及び大きさの少なくとも一方を切り換えることを特徴とする請求項８に記載の画像表示システム。
10. 上記表示制御手段は、上記鑑賞者の位置及び人数に従って、上記選択された画像の上記画像表示手段の表示画面における画面占有の割合を切り換えることを特徴とする請求項８に記載の画像表示システム。
11. 上記鑑賞者判定手段及び上記画像選択手段は、上記画像表示手段、上記検出手段、及び上記表示制御手段に対して遠隔地に配された基地局内に設けられ、
    上記検出手段は、上記基地局の上記鑑賞者判定手段へネットワークを介して上記検出結果を送信する送信手段を有し、
    上記表示制御手段は、上記基地局の上記画像選択手段からネットワークを介して上記選択された画像を受信する受信手段を有することを特徴とする請求項８に記載の画像表示システム。
12. 画像を表示する表示画面を有する画像表示装置と接続可能である画像再生装置であって、
    上記画像表示装置の表示画面に対する鑑賞者の位置を検出する鑑賞者検出手段と、
    上記鑑賞者検出手段によって検出された鑑賞者の位置に従って上記画像表示装置の表示画面のレイアウト制御を行うレイアウト制御手段と、
    を具備することを特徴とする画像再生装置。
13. 上記鑑賞者を特定するための鑑賞者認証手段を更に具備し、
    上記レイアウト制御手段は、上記鑑賞者認証手段による鑑賞者の特定結果に基づいて、上記画像表示装置の表示画面に表示する画像の選択を行い、その選択した画像のレイアウト制御を上記鑑賞者検出手段によって検出された鑑賞者位置情報に従って行うことを特徴とする請求項１２に記載の画像再生装置。
14. 画像を表示する表示画面を有する画像表示装置に表示する複数の画像のレイアウトを制御するレイアウト制御装置であって、
    上記画像表示装置の画面に対し所定の範囲内を検出範囲とする検出手段の検出結果をネットワークを介して受信し、その検出手段の検出結果に基づいて、鑑賞者の上記画像表示装置の表示画面に対する相対位置を判定する鑑賞者判定手段と、
    上記鑑賞者判定手段による判定結果に基づいて、上記画像表示装置の表示画面に表示する複数の画像の上記画像表示装置の表示画面上におけるレイアウトを決定して、その決定したレイアウトを示す情報をネットワークを介して送信するレイアウト制御手段と、
    を具備することを特徴とするレイアウト制御装置。

Images