JP2005218103A - 顔の特徴を表示する装置 - Google Patents

Abstract

【課題】 ＴＶ会議などの遠隔ミーティングにおいても現実に近いコミュニケーションを提供できるようにする。
【解決手段】 非平面表面４０４と、非平面表面４０４上に顔の特徴を有する画像を作成する画像生成装置４１０、４１２、４１４と、該画像を前記非平面表面上に配置して、視線方向を示し、前記顔の特徴に関連する非言語コミュニケーションを向上させる位置決めシステム６００とを含んでなる、顔の特徴を表示する装置を提供する。
【選択図】 図８

Description

本発明は、ＴＶ会議などの遠隔ミーティングにおいて参加者の顔の特徴を伝達して表示する装置に関する。

ＴＶ会議は、人々が対話する様式を大幅に変えることを約束するものである。飛行機旅行が高価であり、化石燃料が高くつき、テロリズムおよび新しい感染性疾病がある時代では、効果的なＴＶ会議が大いに必要とされる。効果的なＴＶ会議は、向かい合ってのミーティングのインパクトを実現しようとする、すなわちテレプレゼンス（telepresence）を生み出さそうとしなければならない。ＴＶ会議を向かい合っての対話により近づけるようにするためには、非言語情報をすべての参加者に伝えること、各参加者の中での視線を検出して伝えること、アイコンタクトならびに他の視覚情報および聴覚情報を維持することを含む複数の要因を改善する必要がある。

現行のＴＶ会議およびヒューマン−コンピュータ対話技術は、多くの場合に以下からなる。すなわち、ローカルカメラが参加者の正面の画像を録画し、その情報をリモート位置のフラットディスプレイに送信する。リモート参加者の画像がリモートカメラを使用して録画され、ローカル参加者に向けてローカルフラットディスプレイ上に表示される。録画するカメラは表示と一致しないため、参加者は話している間または聞いている間にアイコンタクトを維持することができない。さらに、離れた場所にいる人の視線位置（すなわち、その人が見ている場所）を求めることは困難である。このような非言語情報は、人の関心の表れおよび関わり合い、理解等のレベルを提供する。最後に、現行のＴＶ会議は、良好な距離（または奥行）知覚および画像の三次元提示を提供しない。複数のカメラアングルには特殊なガラスまたはゴーグルが必要であり、このことは消費者へのアピールを制限することが証明されている。

同様に、ヒューマン−コンピュータ対話の場合には、一般的な手法は平坦な動画化された画像をフラットスクリーン上に投影するというものである。コンピュータの人物像の視線は、対話中の人のメッセージまたは位置に関連しない。表示は二次元であり、むしろ嵩張るため、ロボット工学等のモバイルプラットフォームで使用することは難しく、高価である。

本発明は、上記および他の問題に解決策を提供するとともに、よりリアルな表現および表示と、遠隔ミーティング中の視線保存を通してより真に迫ったコミュニケーション経験とを提供する。

本発明は、限定ではなく例として添付図面の図に示される。

本発明の一態様は、顔の特徴を表示する方法を特徴とする。表示動作は、顔の特徴を有する画像を非平面表面上に生成するステップと、画像を非平面表面上に配置して、注視あるいは視線の方向を示し、顔の特徴に関連する非言語コミュニケーションを向上させるステップとを含んでなる。

本発明の別の態様は、顔の特徴を表示する装置を含む。この装置は、非平面表面、顔の特徴を有する画像を非平面表面上に作成する画像生成装置と、非平面表面上に画像を配置して、注視または視線の方向を示し、顔の特徴に関連する非言語コミュニケーションを向上させる位置決めシステムとを含んでなる。

図１は、一実施形態による非平面ディスプレイを使用するビデオシステムを示す。システム１００は、第１の位置にいるローカルユーザ１１０と、第１の位置にある１台以上のカメラ１０６および１０８と、第１の位置にあるマイクロフォン１１２と、第２の位置にある、顔の特徴１０４が表示される非平面ディスプレイ１０２とを含む。

この実施形態での非平面ディスプレイ１０２は、画像生成表示表面を有する三次元頭部形状を含む。一実施形態では、非平面ディスプレイ１０２は、非平面頭部の表面をカバーするように傾けられるフレキシブルエリア保存投影ディスプレイパッチから形成される。エリア保存パッチは、表面を正確にカバーするように設計され、非平面表面上に折り重なり、重複または間隙なしでそれぞれのエッジに沿って交わる。このような実施形態では、顔の特徴がローカルユーザからシームレスに見えるようにするために、コンピュータまたは他の処理装置は各ディスプレイパッチ上に見えるように画像を配置する。

カメラ１０６およびカメラ１０８は、マイクロフォン１１２がスピーチを収集している間に、ローカルユーザ１１０の２つの対応するビデオ画像を撮影する。そして、これらの装置は、非平面ディスプレイ１０２およびスピーカでそれぞれ再生するために、ビデオ情報およびオーディオ情報を送信する。実施態様により、画像が併合され、投影歪みが補正され、非平面頭部ディスプレイ１０２上に表示される。ローカルユーザ１１０が頭部を回転させると、表示システムは非平面ディスプレイ１０２上の画像を回転させる。ローカルユーザ１１０が目をいずれかの方向に向けると、画像１０４の目の部分も対応して変化する。このようにして、視線方向および感情の存在および非言語コミュニケーションの他の指示は、非平面ディスプレイ１０２を観察している人に向けて明確に示される。

図２は、ローカルユーザ２０２およびリモートユーザ２１０によって使用されるＴＶ会議の実施形態を示す。この図は、斜視画像を収集して、ローカルユーザのアイコンタクトと視線情報(gaze information)と他の非言語手掛かりとの保存を助ける実施形態を示す。この構成は、ローカルユーザ２０２の場所にある頭部形状非平面ディスプレイ２０４と、リモートユーザ２１０の場所にある頭部形状非平面ディスプレイ２０６と、各ディスプレイ上に現れる顔の画像の各目の位置に実質的に埋め込まれるカメラ２０８とを含む。

ミーティングまたは他の対話中に、ローカルユーザ２０２はカメラ２０９を通してリモートユーザ２１０に話しかける。非平面ディスプレイ２０４上のリモートユーザ２１０の画像に組み合わせられたカメラ２０９の位置により、ローカルユーザ２０２が、リモートユーザ２１０とアイコンタクトをとるか、またはアイコンタクトを避けることが助けられる。同様に、リモートユーザ２１０は、図示のように位置決めされた非平面ディスプレイ２０４上のローカルユーザ２０８の画像と組み合わせられたカメラ２０８の位置により、ローカルユーザ２０２とのアイコンタクトをよりよく制御することができる。一対のカメラ２０８および２０９によって収集された視点情報は、ローカルユーザ２０２およびリモートユーザ２０８が両者とも非言語情報を識別する能力を大幅に向上させる。たとえば、視点情報(perspective information)は、顔の表現の対称性または非対称性、視線またはアイコンタクトまたは人とのコミュニケーション中に使用される顔の表現の他の任意の様々な部分に相対する顔の表現の要素の位置についての情報を含む。

実質的にリモートユーザ２１０の画像の片目または両目の位置に１台以上のカメラを非平面ディスプレイ２０４上に位置決めすることにより、リモートユーザ２１０に関しても視線情報を同様に保存することができる。

図３Ａと図３Ｂと図４とは、異なる実施形態により視線を保存する異なるカメラ構成を提供する。図３Ａに示す一実施態様では、カメラ３０２は、実質意的に画像の一方の目が表される領域に配置され、他方の目に対応するエリア３０４にカメラは現れない。この構成では、カメラ３０２は片目の視点から画像を収集し、他方の目からのエリア３０４は視線情報をディスプレイ表面上に表示する。エリア３０４における片目からの視線情報は、他のどこかで使用するために、カメラ３０２が視線情報を収集する間の視線の程度を保存する。

図３Ｂに示す別の実施態様では、半透明ディスプレイ３０８により、１台以上のローカルカメラ３０６を使用してビデオを同時に収集しながらリモートユーザの両目３１０の画像を生成することができる。この構成では、より多くの視線情報が、非平面ディスプレイ上に表示されるリモートユーザの両目から保存される。同様に、一対のカメラ３０６も、非平面ディスプレイ、平面ディスプレイ、またはビデオシステムの他のどこかを使用してリモートユーザが見ているローカルユーザからより多くの視線情報および視点情報を収集する。カメラ３０６の位置が非平面ディスプレイ上のリモートユーザの目３１０の位置に近いほど、より高い程度の視線情報および非言語情報が保存される。

図４に示すさらに別の構成では、カメラ３１２は非平面ディスプレイ上に現れる顔の特徴の画像のうちの鼻梁付近に配置された開口部３１４を通してローカルユーザのビデオを収集する。この実施形態は、人が鼻梁に固定された視線と、目そのもの自体に固定された視線とを区別することができないことを利用する。カメラ３１２は、ローカルユーザから視線情報を収集するが、どちらの目にも直接位置決めされていないため、先に述べた代替の実施形態ほど多くの視点情報を保存しない。しかし、目３１６および目３１８は、ローカルユーザに向けて非平面ディスプレイ上に表示され、リモートユーザの視線を反映するように現れる。したがって、この実施形態は視線を生成し、それでもなお視線を保存するように動作することにより費用効果が大きい場合がある。

図５Ａと図５Ｂと図６とは、実施形態による非平面表面上に顔の画像を生成する様々な可能性を示す。図５Ａは、頭部形状非平面表面４０４に固定されたフレキシブルディスプレイ４０２の使用を示す。等面積マッピングも使用して、エリア４０８ａと４０８ｂと４０８ｃと４０８ｄとを有するフレキシブルディスプレイのセグメントから非平面ディスプレイ４０６を構築することができる。等面積マッピングは、面積が同じままであり、平坦でフレキシブルな材料が湾曲した表面をカバーすることができるように、湾曲した表面を平坦な材料上にマッピングする設計方法である。この例では、エリア４０８ａはリモートユーザの右頬部分に対応するフレキシブルディスプレイ材料であり、エリア４０８ｂはリモートユーザの左頬部分に対応し、エリア４０８ｃはリモートユーザの顔の中央エリアに対応し、エリア４０８ｄはリモートユーザの額領域に対応する。これら様々なエリアをカバーするフレキシブルディスプレイ材料は、視点および他の多くの非言語手掛かり（nonverbal cue）を通して、視線や顔の表情やジェスチャーを記述する。

図５Ｂは、複数のプロジェクタ４１０と４１２と４１４がローカルユーザ４１８に提示するために画像を非平面ディスプレイ表面４１６上に作成する実施形態を示す。この実施形態は、現在利用可能な技術を使用するため、最も容易で低コストに実施することができるという利点を有する。非平面表面４１６は、円筒形表面もしくはマネキンの頭部、または人の三次元頭部に似た他の表面を使用して実施することができる。

プロジェクタ４１０と４１２と４１４とを非平面ディスプレイ４１６上で使用するには、適宜機能するために追加の処理および画像向上動作も必要な場合がある。画像処理ルーチンは、リモートユーザの画像を処理して、顔を非平面ディスプレイ表面４１６の中心軸にセンタリングしたまま保つことができる。顔認識動作を使用して、非平面ディスプレイ４１６の中心軸と比較して、ビデオ撮影されているリモートユーザの中心軸を特定することができる。リモートユーザの中心軸は、軸位置が非平面ディスプレイ表面４１６に一致するまでリモートユーザの撮影中の１以上の画像をシフトすることにより、位置合わせすることができる。

別の実施形態は、非平面ディスプレイ４１６上に適宜再現されない顔の特徴を処理し補正することができる。たとえば、リモートユーザの画像を撮影中のカメラにより導入される物体またはひずみが、顔の特徴を場合によっては隠し、影を落とす場合がある。顔の特徴または表情についての統計情報を使用して、影または暗いエリアを表示する代わりにこれらエリアまたはドロップアウトしたものを再作成することができる。たとえば、頬や額の比較的に平坦なエリアの認識を用いて、これら領域でのエリアを平滑化または近似し、表示される画像に連続性を提供することができる。これは、視線を維持し、いくらかの収差に起因する歪みを回避するに十分に正確な顔の特徴の再現を提供する。

さらに別の画像処理態様では、リモートユーザの比較的小さな頭部の動きを解像することができる。この場合には、顔認識ルーチンおよび目追跡ルーチンも使用されて、画像を撮影中のカメラに対するリモートユーザの頭部の回転位置が特定される。視線およびローカルユーザ４１８とのアイコンタクトを維持するために、ローカルユーザの画像を撮影中のカメラ４１６は、リモートユーザの新しい目の位置を反映するように変更される。たとえば、実施態様では、リモートユーザからの頭部の回転程度に応じて、右側または左側のカメラ４１６から撮影された画像を収集して使用することができる。結果として得られる左画像、右画像、もしくはこれらの組み合わせを使用することにより、リモートユーザは、新しくより正確なアイコンタクト位置とともにローカルユーザ４１８が向けた異なる視点を見ることができる。

図６は、一実施形態による半透明非平面表面上に内部投影するシステムを示す。このシステムは、半透明非平面表面４２０と、光源４２２と、画像をローカルユーザ４２６に提示するための液晶光弁（liquid crystal light valve）４２４とを含む。光弁４２４は、光源４２２をフィルタリングし、結果として得られる画像を半透明非平面表面４２０上に投影する。このシステムは、表示ソースおよび半透明非平面表面４２０が内蔵されて搬送できるため有利である。先に述べたほかのシステムのように、リモートユーザの投影画像は顔の表情を含み、ローカルユーザ４２６に向けて視線および他の非言語手掛かりを保存する。

図７は、一実施形態による、ユーザの顔の特徴を収集して非平面ディスプレイ上に表示することに関わるステップを示すフローチャートである。まず、非平面表示装置が、リモートユーザの顔の特徴の１以上の画像を受信する（ステップ５０２）。そして、先に述べたように、１台以上のカメラを使用して画像を収集し、非平面表示装置上に画像を表示することができる。たとえば、非平面ディスプレイ上に位置決めされた各目にカメラをほぼ一致させて、非平面ディスプレイ上の片目付近または一対の目の間の鼻梁付近に配置することができる。

次いで、撮影されたリモートユーザの画像が非平面表面上に位置決めされ、リモートユーザのローカルユーザに対する視線を示す（ステップ５０４）。リモートユーザの顔の表情は、画像の目を、目が非平面ディスプレイ上に現れるであろう位置に、またはその位置付近に位置決めすることによって視線を保存する。また、様々な画像から収集された視点情報により、視線および他の非言語情報を、非平面ディスプレイを見ているローカルユーザに伝えることが助けられる。先に述べたように、顔の画像は、いくつかのプロジェクタを使用して非平面ディスプレイ上に投影することも、非平面表面に取り付けられたフレキシブルディスプレイを使用して表示することも、または半透明非平面表面内からの画像の内部投影を通して表示することもできる。

上記動作と同時に、または平行して、ローカルユーザの近くの非平面ディスプレイに位置決めされたカメラは、ローカルユーザの顔の画像または表情の画像を収集する（ステップ５０６）。複数の画像によりローカルユーザの様々な視点を収集して、ローカルユーザの視線および他の非言語手掛かりの取り込みも同様に向上させることができる。用途に応じて、様々な画像処理ルーチンを収集された画像に適用して、頭部の回転と、頭部の傾きと、視線およびリモートユーザとローカルユーザとの間のアイコンタクトの保存に干渉する可能性のある画像中の他のばらつきとを補正することができる。この処理が完了すると、ローカルユーザの画像はリモートユーザの非平面ディスプレイ上に表示するために送信され（ステップ５０８）、上の動作が繰り返される。上の動作は特定の順序で提供されるが、上の動作は全体的に並列に、または様々な順序で行って、非平面ディスプレイ上への画像形成のパフォーマンスおよび効率を向上させることができることが理解される。

図８は、本明細書に詳述する装置または方法を実行する一実施態様において使用されるシステム６００のブロック図である。システム６００は、実行プログラムを保持するメモリ６０２（通常、ランダムアクセスメモリ（ＲＡＭ）またはフラッシュＲＯＭ等の読み取り専用メモリ（ＲＯＭ））と、ディスプレイ、すなわち出力装置をインタフェースして駆動することが可能な提示装置インタフェース６０４と、プロセッサ６０６と、ドライバまたは他の頻繁に使用されるプログラムを保持するプログラムメモリ６０８と、データ通信のためのネットワーク通信ポート６１０と、補助記憶装置コントローラおよび入出力（Ｉ／Ｏ）ポートを有する補助記憶装置６１２と、コントローラ６１４とを含んでなり、これらは共にバス６１６を介して動作可能に結合される。システム６００は、たとえば、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）技術を使用してＲＯＭに予めプログラムすることができ、またプログラムを別のソース（たとえば、フロッピー（登録商標）ディスク、ＣＤ−ＲＯＭ、または別のコンピュータから）ロードすることによってプログラム（または再プログラム）することができる。また、システム６００は、カスタマイズされた特定用途向け集積回路（ＡＳＩＣ）を使用して実施することもできる。

一実施態様では、メモリ６０２は、非平面画像収集構成要素６１８、非平面画像処理構成要素６２０と、非平面ディスプレイ構成要素６２２と、非平面頭部追跡構成要素６２４と、システム６００において上の構成要素の１以上を処理する際に使用されるシステム資源を管理するランタイムモジュール６２６とを含む。

図示のように、これらの様々なモジュールは単一のコンピュータシステムに見られる。しかし、代替の実施態様では、これら構成要素を１以上の異なる構成要素に分散させて、処理需要とスケーラビリティと高可用性と他の設計制約とに適応することができる。同様に、図８に示す構成要素は離散し互いに別個に示される。代替の実施態様は、これら構成要素の１以上のものを組み合わせて、より高い効率、より低いコスト、または大規模企業または小規模動作環境において実施形態の実施に必要な他の任意の設計制約を実現することができる。

非平面画像収集構成要素６１８は、非平面ディスプレイに関連する１台以上のカメラからローカルユーザの画像を収集する。非平面画像処理構成要素６２０は、収集された画像に対して１以上の画像処理動作を行い、結果として非平面ディスプレイ上の表示を向上させる。先に述べたように、これら画像処理動作は、リモートユーザの頭部の傾きの補正と、リモートユーザの頭部の回転の考慮、収差または歪みを受ける顔の画像のエリアの平滑化と、視線および／または他の非言語手掛かりの保存を向上させる他の任意のプロセスとを含む。

非平面ディスプレイ構成要素６２２は、画像をさらに処理し、本明細書に説明した詳細に従って設計された特定の表示を作成する。この非平面ディスプレイ構成要素６２２は、プロジェクタ、フレキシブル表示装置、非平面ディスプレイ内部用の表示ディスプレイ、または他の任意の様々な実施形態とより良好に動作するように画像を変更することができる。

非平面頭部追跡構成要素６２４は、画像を収集して送信しているときにリモートユーザの頭部の位置を追跡する１以上の動作を含む。この非平面頭部追跡構成要素６２４は、リモートユーザの目ならびにリモートユーザの完全な顔の特徴を追跡する動作を実施することができる。

例および実施態様について述べたが、これらは本発明のいずれの態様も限定する働きをするものではない。したがって、本発明の実施態様はアナログ回路、デジタル電子回路、コンピュータハードウェア、ファームウェア、ソフトウェア、またはこれらの組み合わせで実施することができる。本発明の装置は、アナログ電子回路、またはプログラマブルプロセッサにより実行される機械読み取り可能な記憶装置に有形に具現化されるコンピュータプログラム製品内のデジタル電子回路を使用することによって実施することができ、本発明の方法ステップは、入力データに対して動作して出力を生成することにより、本発明の機能を実行するプログラム命令を実行するプログラマブルプロセッサによって行うことができる。本発明は、結合されてデータ記憶システムからデータおよび命令を受け取り、データおよび命令をデータ記憶システムに送る少なくとも１つのプログラマブルプロセッサと、少なくとも１つの入力装置と、少なくとも１つの出力装置とを含むプログラマブルシステムで実行可能な１以上のコンピュータプログラムにおいて有利に実施することができる。各コンピュータプログラムは、高水準手続き型またはオブジェクト指向型プログラミング言語、または所望であればアセンブリ言語または機械語で実装することができ、いずれの場合でも、言語はコンパイル型言語またはインタプリタ型言語でありうる。適したプロセッサとしては、例として、汎用マイクロプロセッサおよび特定用途マイクロプロセッサの両方が挙げられる。一般に、プロセッサは、命令およびデータを読み取り専用メモリおよび／またはランダムアクセスメモリから受け取る。一般に、コンピュータはデータファイルを記憶する１以上の大容量記憶装置を含み、このような装置としては、内部ハードディスクおよびリムーバブルディスク等の磁気ディスクと、光磁気ディスクと、光ディスクとが挙げられる。コンピュータプログラム命令およびデータを有形に具現することに適した記憶装置としては、例としてＥＰＲＯＭやＥＥＰＲＯＭやフラッシュメモリデバイス等の半導体メモリデバイスと、内部ハードディスクおよびリムーバブルディスク等の磁気ディスクと、光磁気ディスクと、ＣＤ−ＲＯＭディスクとを含むすべての形態の不揮発性メモリを挙げることができる。上記のいずれもＡＳＩＣにより補足されても、またはＡＳＩＣ内に組み込まれていてもよい。

特定の実施形態について例示を目的として本明細書に述べたが、本発明の精神および範囲から逸脱することなく様々な変更を行うことが可能である。たとえば、様々なディスプレイ技術が市販されており、記載の本発明の具現に使用することが可能である。さらに、提示される画像の作成は様々な方法で行うことができる。非平面表面上に現れる画像は、ビデオカメラによって取り込まれて、コンピュータアルゴリズムまたはコンピュータハードウェアによって処理されて作成されたリモートユーザの画像であっても、またはヒューマン−コンピュータ対話のためにコンピュータにより生成されるものであってもよい。したがって、本発明は上記実施態様に限定されず、添付の特許請求の範囲により、それぞれの等価物の全範囲を鑑みて規定される。

リモートユーザが一人であり、その画像が複数の外部カメラによって収集されている場合の本発明の実施形態を示す概略図である。 ２人のユーザにより異なる場所で遠隔会議のために同時に使用される本発明の２つの実施形態を示す概略図である。 Ａは、カメラが片目の略背後に配置されて、視線情報を保存しながらリモートユーザに画像を送信する本発明の一実施形態による非平面ディスプレイの切り抜きを示す斜視図である。Ｂは、１台のカメラがそれぞれの目の略背後に配置されて、視線情報を保存しながらリモートユーザに画像を送信する本発明の一実施形態により設計された非平面ディスプレイの切り抜きを示す斜視図である。 カメラが鼻梁の略背後に配置されて、視線情報を保存しながらリモートユーザに画像を送信する、これもまた本発明の一実施形態により設計された非平面ディスプレイの切り抜きを示す斜視図である。 Ａは、単一のフレキシブルディスプレイが非平面表面を包み込む本発明の一実施形態と、複数のフレキシブルディスプレイが非平面表面を覆って傾けられる代替の実施形態とを示す斜視図である。Ｂは、顔の特徴が複数のアングルから投影される、本発明の一実施形態による頭部形状の非平面ディスプレイと対話するユーザを示す斜視図である。 半透明非平面ディスプレイ内からの画像投影を利用する、本発明の実施形態を示す斜視図である。 本発明の一実施態様による、リモートユーザの顔の特徴を表示し、ローカルユーザの画像をリモートユーザに送信する動作のフローチャートである。 本発明の装置または方法を実行するために、一実施態様において使用されるシステムのブロック図である。

符号の説明

６０２ メモリ
６０４ 非平面ディスプレイインタフェース
６０６ プロセッサ
６０８ プログラムメモリ
６１０ ネットワーク通信ポート
６１２ 補助記憶装置
６１４ I／Ｏポート
６１８ 非平面画像収集構成要素
６２０ 非平面画像処理構成要素
６２２ 非平面ディスプレイ構成要素
６２４ 非平面頭部追跡構成要素
６２６ ランタイムモジュール

Claims (10)

1. 非平面表面と、
   該非平面表面上に顔の特徴を有する画像を作成する画像生成装置と、
   該画像を前記非平面表面上に配置して、視線方向を示し、前記顔の特徴に関連する非言語コミュニケーションを向上させる位置決めシステムと
   を含んでなる、顔の特徴を表示する装置。
2. 前記非平面表面は、実質的に頭部の形状を有するものである請求項１に記載の装置。
3. 実質的に頭部形状である前記非平面表面は、球面、回転楕円面、または長円形の閉じた表面を含む頭部形状の集合から選択されるものである請求項２に記載の装置。
4. 前記画像生成装置は、前記非平面表面外から光を投影する１以上の投影装置を含む請求項１に記載の装置。
5. 前記画像生成装置は、前記非平面表面内から光を投影する１以上の投影装置を含む請求項１に記載の装置。
6. 前記画像生成装置は、前記非平面表面と実質的に一致するフレキシブルディスプレイを含む請求項１に記載の装置。
7. 前記画像生成装置は、フレキシブルＬＣＤディスプレイと、フレキシブル有機発光ダイオードディスプレイと、フレキシブル無機エレクトロルミネセンスディスプレイと、フレキシブル発光ポリマーディスプレイとを含む集合から選択されるフレキシブルディスプレイ技術を用いて実施されるものである請求項６に記載の装置。
8. 前記位置決めシステムは、前記画像収集装置を使用して収集された前記顔の特徴の動きに関連して、前記画像および該画像に含まれる目を、前記非平面表面の或る部分から別の部分に移動させるものである請求項１に記載の装置。
9. 実質的に前記非平面表面上または付近の視点から顔の特徴のビデオ画像を収集する１以上のビデオ収集装置をさらに含む請求項１に記載の装置。
10. 前記非平面表面の視点からの音声および他の音を伝達するスピーカをさらに含む請求項１に記載の装置。
    

Images