JP6124005B2 - 表示制御装置、表示システム、表示制御プログラム、表示装置 - Google Patents

Description

本発明は、一の画面を２台の表示装置に分担して表示させる表示制御装置、表示システム、表示制御プログラム、表示装置に関する。

複数台の表示装置を並置し、一の画面を、これらに分担させて大きく表示する技術が種々提案されている（特許文献１、２、３参照）。

たとえば、画像表示部を備えた携帯端末を複数台並べて用い、複数の画像表示部を組み合わせて１つの大きな画面に見立てて拡大画像表示を行う表示システムがある（特許文献４参照）。

また、携帯端末でコンテンツを拡大等し、その一部（表示エリアに表示可能な範囲）のみを表示する場合に、卓上での携帯端末の移動を検出し、その移動方向および移動距離に合わせて、コンテンツ内の表示部分を移動させる技術がある（特許文献５参照）。

このほか、現在設定されている表示倍率および、表示位置に基づき表示画面上にオブジェクトが表示されている時に、ユーザの視線位置から表示画面までの視点距離が変動した場合や、視線位置が変動した場合に、オブジェクトが見かけ上、同一サイズ及び同一位置となるように、現在設定されている表示倍率および表示位置を調整する技術がある（たとえば、特許文献６参照）。

特開２００２−００６８２２号公報 特開２００５−３３９１４４号公報 特開２００７−１６４０６０号公報 特開２０１１−１１４３５２号公報 特開２０１０−２０４９９０号公報 特開２００５−１４９１７５号公報

携帯端末などの手持ちされる表示装置を複数台並置して、一の画面をこれら複数台の表示装置に分担して表示させる場合、手で持っている複数台の表示装置を安定に位置合わせした状態に保持することは難しい。そのため、手振れが起きると、表示内容が位置ずれして見難くなってしまう。

この場合、いずれかの表示装置の表示内容を移動させて位置ズレを補正すればよいが、どちらの表示装置の表示内容を移動させるかの選択を誤ると、位置ズレを補正したことによって、却って画面が見難くなって操作性・視認性が低下してしまう。

本発明は、上記の問題を解決しようとするものであり、一の画面を分担表示している並置された表示装置の相対位置が変化した場合に、表示内容の位置ずれを、より適切な一方の表示装置を選択して位置補正することのできる表示制御装置、表示システム、表示制御プログラム、表示装置を提供することを目的としている。

かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。

［１］第１表示装置とこれに並置して使用される第２表示装置との相対位置を示す相対位置情報を取得する相対位置情報取得部と、
前記第１表示装置と前記第２表示装置を並置して使用する使用者の視線の検出情報を取得する視線検出情報取得部と、
前記相対位置情報に基づいて、一の画面に係る表示を、前記第１表示装置とこれに並置された前記第２表示装置とにそれらの表示内容が連続するように分担させて行わせる分担表示制御部と、
を有し、
前記分担表示制御部は、表示中に前記第１表示装置と前記第２表示装置の相対位置が変化した場合に、前記視線の検出情報に基づいて前記第１表示装置と前記第２表示装置の一方を位置補正の対象に選択し、該選択した表示装置の表示内容のみを、他方の表示装置の表示内容と連続するように位置補正する
ことを特徴とする表示制御装置。

上記［１］および下記［１０］、［１１］に係る発明では、表示中に第１表示装置と第２表示装置の相対位置が変化した場合に、これらの表示装置の使用者の視線の検出結果に基づいて、第１表示装置と第２表示装置の一方を位置補正の対象に選択し、その選択した表示装置の表示内容のみを、他方の表示装置の表示内容と連続するように位置補正する。たとえば、使用者が第１表示装置と第２表示装置のどちらを見ていたか、どのように視線を移動させて見ていたか、どの位置から見ていたかなどに基づいて、位置補正対象の表示装置を決定する。

［２］前記分担表示制御部は、前記視線の検出情報に基づいて、前記相対位置が変化する前に前記使用者が最後に見た表示装置を特定し、該特定した表示装置と異なる方の表示装置を、前記位置補正対象に選択する
ことを特徴とする［１］に記載の表示制御装置。

上記［２］および下記［１２］に係る発明では、使用者は、相対位置が変化する前に最後に見ていた表示装置を相対位置が変化した後も見ていると想定し、使用者が見ていない方の表示装置の表示内容を移動させて位置補正する。すなわち、手振れなどにより、意図せずに相対位置がずれた場合、使用者が見ている方の表示装置の表示内容を移動させると見難くなるので、使用者が見ていない方の表示装置の表示内容を移動させて位置補正する。

［３］前記分担表示制御部は、前記相対位置が変化する直前の所定時間における前記使用者の視線の動きから前記使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する
ことを特徴とする［１］に記載の表示制御装置。

上記［３］および下記［１３］に係る発明では、相対位置が変化する直前における使用者の視線の動きから使用者が次に見る箇所を推定し、その推定した箇所を表示している表示装置と異なる方の表示装置の表示内容を移動させて位置ずれを補正する。使用者の視線が移動している状態で、手振れなどにより、意図せずに相対位置がずれた場合には、使用者が次に見ると推定される箇所を含む表示装置の表示内容を移動させると見難くなるので、使用者が次に見ると推定される箇所を含む表示装置と異なる方の表示装置の表示内容を移動させて位置補正する。

［４］前記分担表示制御部は、複数の使用者の視線が検出されている場合は、前記相対位置が変化する前により多くの使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する
ことを特徴とする［１］に記載の表示制御装置。

上記［４］および下記［１４］に係る発明では、並置した表示装置を複数の使用者が見ている場合には、相対位置が変化する前により多くの使用者が最後に見ていた表示装置と異なる方の表示装置の表示内容を移動させて位置補正する。

［５］前記分担表示制御部は、複数の使用者の視線が検出されている場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、前記相対位置が変化する前に前記メイン使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する
ことを特徴とする［１］に記載の表示制御装置。

上記［５］および下記［１５］に係る発明では、並置した表示装置を複数の使用者が見ている場合には、表示装置に対する視線の位置に基づいてメイン使用者を特定し、相対位置が変化する前にメイン使用者が最後に見た表示装置と異なる方の表示装置の表示内容を移動させて位置補正する。たとえば、表示装置の表示面に対する視線の位置が成す角度が９０度に最も近い使用者（表示装置を最も正面から見ている使用者）をメイン使用者に特定する、あるいは視線の位置から表示装置の表示面までの距離が最も短い使用者をメイン使用者に特定する。

［６］前記分担表示制御部は、複数の使用者の視線が検出されている場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、前記相対位置が変化する直前の所定時間における前記メイン使用者の視線の動きから前記メイン使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する
ことを特徴とする［１］に記載の表示制御装置。

上記［６］および下記［１６］に係る発明では、並置した表示装置を複数の使用者が見ている場合には、表示装置に対する視線の位置に基づいてメイン使用者を特定し、メイン使用者の視線の動きからメイン使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置の表示内容を移動させて位置補正する。

［７］前記位置補正対象の選択基準として、
前記相対位置が変化する前に前記使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する第１選択基準、
前記相対位置が変化する直前の所定時間における前記使用者の視線の動きから前記使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する第２選択基準、
前記視線検出部が複数の使用者の視線を検出している場合は、前記相対位置が変化する前により多くの使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する第３選択基準、
前記視線検出部が複数の使用者の視線を検出している場合は、表示装置に対する視線の位置に基づいてメイン使用者に特定し、前記相対位置が変化する前に前記メイン使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する第４選択基準、
前記視線検出部が複数の使用者の視線を検出している場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、前記相対位置が変化する直前の所定時間における前記メイン使用者の視線の動きから前記メイン使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する第５選択基準、
のうちの少なくとも２以上を備え、
前記選択に使用する選択基準を切り替える選択基準切り替え部を有する
ことを特徴とする［１］に記載の表示制御装置。

上記［７］および下記［１７］に係る発明では、位置補正対象の表示装置を選択するための選択基準を切り替えることができる。

［８］前記第１表示装置および第２表示装置はそれぞれ、使用者の視線を検出する視線検出部を備え、
前記視線検出情報取得部は、前記視線検出部の検出結果を示す検出情報を取得する
ことを特徴とする［１］乃至［７］のいずれか１つに記載の表示制御装置。

［９］［１］乃至［８］のいずれか１項に記載の表示制御装置と、
前記第１表示装置と、
前記第２表示装置と、
を有する
ことを特徴とする表示システム。

［１０］情報処理装置を、
第１表示装置とこれに並置される第２表示装置との相対位置を示す相対位置情報に基づいて、一の画面に係る表示を、前記第１表示装置とこれに並置された前記第２表示装置とにそれらの表示内容が連続するように分担させて行わせると共に、
前記第１表示装置と前記第２表示装置を並置して使用する使用者の視線の検出情報を取得し、
表示中に前記第１表示装置と前記第２表示装置の相対位置が変化した場合に、前記視線の検出情報に基づいて前記第１表示装置と前記第２表示装置の一方を位置補正の対象に選択し、該選択した表示装置の表示内容のみを、他方の表示装置の表示内容と連続するように位置補正するように機能させる
ことを特徴とする表示制御プログラム。

［１１］他の表示装置と並置して使用される表示装置であって、
当該表示装置と前記他の表示装置との相対位置を検出する相対位置検出部と、
当該表示装置と前記他の表示装置とを並置して使用する使用者の視線を検出する視線検出部と、
前記相対位置検出部の検出結果に基づいて、一の画面に係る表示を、当該表示装置とこれに並置された前記他の表示装置とにそれらの表示内容が連続するように分担させて行わせる分担表示制御部と、
を有し、
前記分担表示制御部は、表示中に当該表示装置と前記他の表示装置の相対位置が変化した場合に、前記視線検出部の検出結果に基づいて当該表示装置と前記他の表示装置の一方を位置補正の対象に選択し、該選択した一方の表示内容のみを、他方の表示内容と連続するように位置補正する
ことを特徴とする表示装置。

［１２］前記分担表示制御部は、前記視線検出部の検出結果に基づいて、前記相対位置が変化する前に前記使用者が最後に見た表示装置を特定し、該特定した表示装置と異なる方の表示装置を、前記位置補正対象に選択する
ことを特徴とする［１１］に記載の表示装置。

［１３］前記分担表示制御部は、前記相対位置が変化する直前の所定時間における前記使用者の視線の動きから前記使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する
ことを特徴とする［１１］に記載の表示装置。

［１４］前記分担表示制御部は、複数の使用者の視線が検出されている場合は、前記相対位置が変化する前により多くの使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する
ことを特徴とする［１１］に記載の表示装置。

［１５］前記分担表示制御部は、複数の使用者の視線が検出されている場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、前記相対位置が変化する前に前記メイン使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する
ことを特徴とする［１１］に記載の表示装置。

［１６］前記分担表示制御部は、複数の使用者の視線が検出されている場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、前記相対位置が変化する直前の所定時間における前記メイン使用者の視線の動きから前記メイン使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する
ことを特徴とする［１１］に記載の表示装置。

［１７］前記位置補正対象の選択基準として、
前記相対位置が変化する前に前記使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する第１選択基準、
前記相対位置が変化する直前の所定時間における前記使用者の視線の動きから前記使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する第２選択基準、
前記視線検出部が複数の使用者の視線を検出している場合は、前記相対位置が変化する前により多くの使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する第３選択基準、
前記視線検出部が複数の使用者の視線を検出している場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、前記相対位置が変化する前に前記メイン使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する第４選択基準、
前記視線検出部が複数の使用者の視線を検出している場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、前記相対位置が変化する直前の所定時間における前記メイン使用者の視線の動きから前記メイン使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する第５選択基準、
のうちの少なくとも２以上を備え、
前記選択に使用する選択基準を切り替える選択基準切り替え部を有する
ことを特徴とする［１１］に記載の表示装置。

本発明に係る表示制御装置、表示システム、表示制御プログラム、表示装置によれば、一の画面を分担表示している並置された表示装置の相対位置が変化した場合に、表示内容の位置ずれを、より適切な一方の表示装置を選択して位置補正することができる。

本発明の実施の形態に係る表示制御装置の機能を備えたリモート操作パネルと、このリモート操作パネルと連携して表示を行う携帯端末の一例を示す図である。 リモート操作パネルの概略構成を示すブロック図である。 携帯端末の概略構成を示すブロック図である。 設定項目を選択する設定選択画面を連携表示機能を使用してリモート操作パネルと携帯端末に分担表示させた状態を示す図である。 図４の状態から携帯端末が下方に位置ズレした場合であって表示内容を位置補正する前の状態を示す図である。 図５のように位置ズレした場合に、リモート操作パネル側の表示内容を下方に移動させて位置補正した状態を示す図である。 図５のように位置ズレした場合に、携帯端末側の表示内容を上方に移動させて位置補正した状態を示す図である。 並置したリモート操作パネル１０と携帯端末３０の表示領域での視線の移動例を示す図である。 並置したリモート操作パネル１０と携帯端末３０の表示領域での視線の他の移動例を示す図である。 使用者の視線の位置と、表示装置の表示面に対して使用者の視線が成す角度を示す図である。 リモート操作パネルが行う連携表示中の位置補正に係る処理を示す流れ図である。 図１１の続きを示す流れ図である。 第１選択基準選択処理（図１２のステップＳ１１９）の詳細を示す流れ図である。 第２選択基準選択処理（図１２のステップＳ１２０）の詳細を示す流れ図である。 次に見る位置の推定処理（図１４のステップＳ１４１）の詳細を示す流れ図である。 第３選択基準選択処理（図１２のステップＳ１２１）の詳細を示す流れ図である。 第４選択基準選択処理（図１２のステップＳ１２２）の詳細を示す流れ図である。 第５選択基準選択処理（図１２のステップＳ１２３）の詳細を示す流れ図である。 使用者の意図する移動に対する位置補正の例を示す図である。 変形例に対応した第１選択基準選択処理（図１２のステップＳ１１９）を示す流れ図である。 変形例に対応した第２選択基準選択処理（図１２のステップＳ１２０）を示す流れ図である。 変形例に対応した第３選択基準選択処理（図１２のステップＳ１２１）を示す流れ図である。 変形例に対応した第４選択基準選択処理（図１２のステップＳ１２２）を示す流れ図である。 変形例に対応した第５選択基準選択処理（図１２のステップＳ１２３）を示す流れ図である。

以下、図面に基づき本発明の実施の形態を説明する。

図１は、本発明の実施の形態に係る表示制御装置の機能を備えたリモート操作パネル１０と、このリモート操作パネル１０と連携して表示を行う携帯端末３０の一例を示している。リモート操作パネル１０は、複合機５と無線通信可能であり、複合機５を離れた場所から操作するための操作パネルである。リモート操作パネル１０は、たとえば、Ｂ５サイズほどの平板形状を成しており、本体表面のほぼ全域が表示面になっている。

複合機５は、原稿を光学的に読み取ってその複製画像を記録紙に印刷するコピージョブ、読み取った原稿の画像データをファイルにして保存したり外部端末へネットワークを通じて送信したりするスキャンジョブ、端末装置からネットワークを通じて受信した印刷データに係る画像を記録紙上に形成して印刷出力するプリントジョブなどの複数種類のジョブを実行する機能を備えた画像処理装置である。

携帯端末３０は、文書や画像データの入力、作成、表示、編集、外部機器への出力などの機能を備えた携帯型の情報処理端末である。携帯端末３０は、たとえば、Ｂ５サイズほどの平板形状を成しており、本体表面のほぼ全域が表示面になっている。

リモート操作パネル１０は、複合機５に対するジョブの投入操作や各種の設定操作などをユーザから受け付ける機能を有する。また、一の画面（操作画面や設定画面など）を、リモート操作パネル１０とその近傍に並置された携帯端末３０とに、それぞれの表示内容が連続するように分担して表示させる連携表示機能を備えている。たとえば、宛先リストのうち、リモート操作パネル１０に表示しきれない部分が並置された携帯端末３０に表示される。

図２は、リモート操作パネル１０の概略構成を示すブロック図である。リモート操作パネル１０は、当該リモート操作パネル１０の動作を統括制御するＣＰＵ(Central Processing Unit)１１を有している。ＣＰＵ１１にはバスを通じてＲＯＭ(Read Only Memory)１２と、ＲＡＭ(Random Access Memory)１３と、不揮発メモリ１４と、認証部１５と、操作部１６と、表示部１７と、ネットワーク通信部１８と、近接無線通信部１９と、相対位置情報取得部２１と、視線検出部２２とが接続されている。

ＣＰＵ１１は、ＯＳ（Operating System）プログラムをベースとし、その上で、ミドルウェアやアプリケーションプログラムなどを実行する。また、ＣＰＵ１１は、当該リモート操作パネル１０の表示部１７への単独表示および並置された携帯端末３０と連携して表示を行う連携表示機能に関する制御を行う制御部（分担表示制御部）としての機能を果たす。

ＲＯＭ１２には、各種のプログラムが格納されており、これらのプログラムに従ってＣＰＵ１１が各種処理を実行することでリモート操作パネル１０の機能が実現される。

ＲＡＭ１３は、ＣＰＵ１１がプログラムに基づいて処理を実行する際に各種のデータを一時的に格納したり、表示データを格納したりするためのワークメモリとして使用される。

不揮発メモリ１４は、電源をオフにしても記憶内容が破壊されないメモリ（フラッシュメモリ）であり、各種設定情報の保存などに使用される。

認証部１５は、当該リモート操作パネル１０を使用するユーザを認証する。ＩＤカード、指紋、ユーザＩＤとパスワードの照合などにより認証される。

表示部１７は、液晶ディスプレイ（ＬＣＤ…Liquid Crystal Display）などで構成され、各種の操作画面、設定画面、プレビュー画面などを表示する機能を果たす。操作部１６は、スタートボタンなどの各種操作スイッチと、表示部１７の表示面上に設けられたスクリーン状のタッチパネル１６ａを備えている。タッチパネル１６ａは、タッチペンや指などで押下された座標位置や、フリック操作やドラッグ操作、スクロールバーに対する操作を検出する。

ネットワーク通信部１８は、ＬＡＮ(Local Area Network)などのネットワークを通じて複合機５や他の外部装置との間でデータを通信する機能を果たす。

近接無線通信部１９は、リモート操作パネル１０の近傍に配置された携帯端末３０と無線通信する機能を果たす。近接無線通信部１９の通信可能距離は５０ｃｍ程度で十分である。通信方式には各種の近距離無線通信方式を採用することができる。

相対位置情報取得部２１は、リモート操作パネル１０とこれに並置された携帯端末３０との相対位置を示す情報を取得する。ここでは、リモート操作パネル１０に設けられたセンサが、このセンサに対する携帯端末３０の相対位置を検出する。たとえば、携帯端末３０の周縁にスケールを印刷しておき、センサがこのスケールを読み取ることで、リモート操作パネル１０に対する携帯端末３０の相対位置を検出する。

より詳細には、並置された際にリモート操作パネル１０に当接される携帯端末３０の一辺に、その一辺における携帯端末３０の表示部３７（図３参照）の表示領域の一端からの距離を示すスケール（目盛り）を設け、この目盛りをリモート操作パネル１０側のセンサで光学的に読み取ることで、携帯端末３０の表示領域の相対位置が検出される。携帯端末３０に上記センサを設け、リモート操作パネル１０側のスケールを読み取るようにしてもよい。

なお、相対位置の検出方法は任意でよい。リモート操作パネル１０と携帯端末３０の双方にセンサを設けて、これらが共同して相対位置を検出するといった方法でもよい。

視線検出部２２は、リモート操作パネル１０の使用者の視線を検出する。視線の検出方法は任意でよい。たとえば、リモート操作パネル１０の表面の上部中央にカメラを設け、このカメラが撮影した画像を解析し、顔の向きや目の中の瞳の位置などから使用者の視線を検出する。視線検出部２２は、複数人の視線を同時に検出することができる。

図３は、携帯端末３０の概略構成を示すブロック図である。携帯端末３０は、当該携帯端末３０の動作を統括制御するＣＰＵ３１を有している。ＣＰＵ３１にはバスを通じてＲＯＭ３２と、ＲＡＭ３３と、不揮発メモリ３４と、認証部３５と、操作部３６と、表示部３７と、ネットワーク通信部３８と、近接無線通信部３９と、視線検出部４０とが接続されている。

ＲＯＭ３２および不揮発メモリ３４には、各種プログラムやデータが格納され、これらのプログラムに従ってＣＰＵ３１が各種の処理を実行することで携帯端末３０の各機能が実現される。ＲＡＭ３３はＣＰＵ３１がプログラムを実行する際に各種のデータを一時的に格納するワークメモリや表示データを一時記憶するメモリとして使用される。

不揮発メモリ３４は、電源がオフになっても記憶内容が保持されるメモリである。不揮発メモリ３４には、文書や画像ファイル、各種の設定内容、ユーザ情報、端末情報（ネットワークアドレスなど）、アプリケーションプログラム、リモート操作パネル１０からの指示に基づいて表示する機能を実行するためのプログラムなどが記憶される。

認証部３５は、当該携帯端末３０を使用するユーザを認証する。

表示部３７は、液晶ディスプレイなどで構成される。

操作部３６は、表示部３７の表示面上の全面に設けられ、指やペンなどによってタッチされた位置を検出するタッチパネル３６ａで構成される。少数の操作スイッチを備えてもよい。タッチパネル３６ａの検知方式は、静電容量、アナログ/デジタル抵抗膜、赤外線、超音波、電磁誘導等、任意でよい。

ネットワーク通信部３８は、無線通信によりネットワークと接続して各種の外部装置と通信する機能を果たす。近接無線通信部３９は、近傍のリモート操作パネル１０が備える近接無線通信部１９などと無線通信する機能を果たす。通信可能距離、通信方式等はリモート操作パネル１０の近接無線通信部１９と同一である。

視線検出部４０は、携帯端末３０の使用者の視線を検出する。視線の検出方法は任意でよい。視線検出部４０は、複数人の視線を同時に検出することができる。

なお、リモート操作パネル１０の視線検出部２２がリモート操作パネル１０の使用者の視線とリモート操作パネル１０に並置された携帯端末３０の使用者の視線の双方を検出可能であれば、携帯端末３０は視線検出部４０を備える必要はなく、リモート操作パネル１０の視線検出部２２で双方の使用者の視線を検出すればよい。すなわち、リモート操作パネル１０は、並置された携帯端末３０とリモート操作パネル１０との相対位置を相対位置情報取得部２１で検出しているので、リモート操作パネル１０の視線検出部２２で検出した視線の方向に携帯端末３０が存在すれば、その使用者が携帯端末３０を見ていると認識することができる。

図４は、設定項目を選択する設定選択画面６０を、連携表示機能を使用して、リモート操作パネル１０の表示部１７と携帯端末３０の表示部３７とに、それらの表示内容が連続するように分担して表示させた状態（連携表示とする）を示している。

携帯端末３０とリモート操作パネル１０はそれぞれ使用者に手持ちされ、横に並べて使用される。なお。リモート操作パネル１０を複合機５に装着した場合には、使用者が手で持った携帯端末３０を複合機５に装着されたリモート操作パネル１０の横に並べて使用する。

設定選択画面６０には、各種設定の選択釦が縦横のマトリクス状に配列されている。同図に示すように、リモート操作パネル１０の右隣に携帯端末３０を並置して連携表示した状態では、設定選択画面６０の左側の一部分がリモート操作パネル１０に表示され、その続きの右側部分が、リモート操作パネル１０の表示内容と連続するように位置合わせして、携帯端末３０の表示部３７に表示される。同図の例では、第１行の中ほどにある設定Ｅの選択釦と、第２行の中ほどにある設定Ｎの選択釦が、リモート操作パネル１０と携帯端末３０との境界部分にあって両者に跨るように表示されている。

なお、一の画面のうち、連携表示機能によってリモート操作パネル１０に表示される部分を第１表示画像６１、携帯端末３０に表示される部分を第２表示画像６２と呼ぶものとする。

携帯端末３０が、図４に示す位置から下方へ位置ズレした場合、リモート操作パネル１０での第１表示画像６１の表示位置および携帯端末３０での第２表示画像６２の表示位置がそのままならば、図５に示すように（図中の破線は、位置ズレ前の位置を示している）、第１表示画像６１より第２表示画像６２の表示が下に位置ズレして、連続性が崩れる。

そこで、上記のように相対位置が変化したとき、第１表示画像６１と第２表示画像６２のいずれか一方を移動させ、第１表示画像６１と第２表示画像６２の表示内容の連続性が確保されるように位置補正する。図６は、リモート操作パネル１０側で第１表示画像６１を下方に移動させて位置補正した状態を示している。図中、実線の太い矢印は表示装置の移動を示し、破線の太い矢印は表示内容の移動を示している。

位置補正において、リモート操作パネル１０に表示されている第１表示画像６１と携帯端末３０に表示されている第２表示画像６２のいずれを移動させるかの選択基準として、以下の５つがある。

（１）第１選択基準
相対位置が変化する前に使用者が最後に見た表示装置と異なる方の表示装置を、位置補正対象の表示装置に選択する。

図５のように、リモート操作パネル１０と携帯端末３０との相対位置が変化したとき、該変化の直前に使用者が携帯端末３０側の表示内容を見ていたならば、図６に示すように、使用者の見ていない方の表示装置であるリモート操作パネル１０の表示内容を移動させて、表示内容の連続性が確保されるように、位置補正する。

一方、相対位置が変化する直前に使用者がリモート操作パネル１０側の表示内容を見ていたならば、図７に示すように、使用者の見ていない方の表示装置である携帯端末３０の表示内容を移動させて、表示内容の連続性が確保されるように、位置補正する。

（２）第２選択基準
相対位置が変化する直前の所定時間における使用者の視線の動きから使用者が次に見る箇所を推定し、その推定した箇所を表示している表示装置と異なる方の表示装置を、位置補正対象の表示装置に選択する。

たとえば、図８では、視線が矢印Ａのように移動しており、使用者の視線が設定釦Ｇにきたときに、リモート操作パネル１０と携帯端末３０の相対位置が変化したとする。この場合、使用者が次に見る箇所は、矢印Ａの延長上にある設定釦Ｈと推定される。そこで、設定釦Ｈを表示している表示装置（携帯端末３０）と異なる方の表示装置（リモート操作パネル１０）を位置補正対象に選択する。

図９では、視線が矢印Ｂのようにジグザグに移動しており、使用者の視線が、２行面の右端の設定釦Ｒに至ったときに、リモート操作パネル１０と携帯端末３０との相対位置が変化したとする。この場合、使用者は視線を表示されている設定釦の１行目に沿って右へ移動させ、右端に至ると２行目の左端に移動させ、２行目に沿って右へ移動させるようにジグザグに移動させている。そして、相対位置が変化する直前には、２行目の右端に視線があるので、使用者が次に見る箇所は、３行目の左端の設定釦Ｊと推定される。そこで、設定釦Ｊを表示している表示装置（リモート操作パネル１０）と異なる方の表示装置（携帯端末３０）を位置補正対象に選択する。

（３）第３選択基準
複数の使用者の視線が検出されている場合は、相対位置が変化する前により多くの使用者が最後に見た表示装置と異なる方の表示装置を、位置補正対象に選択する。

たとえば、並置されて連携表示を行っているリモート操作パネル１０と携帯端末３０を３人の使用者が見ている状態でリモート操作パネル１０と携帯端末３０との相対位置が変化した場合、その変化の直前に、２人の使用者がリモート操作パネル１０を見ていたならば、携帯端末３０を位置補正対象の表示装置に選択する。

（４）第４選択基準
複数の使用者の視線が検出されている場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、相対位置が変化する前にメイン使用者が最後に見た表示装置と異なる方の表示装置を、位置補正対象の表示装置に選択する。

たとえば、図１０に示すように、表示装置の表示面を、使用者Ａと使用者Ｂが見ているとする。図１０の例では、表示装置の表示面に対して使用者Ａの視線の位置が成す角度はほぼ９０度であり、表示装置の表示面に対して使用者Ｂの視線の位置が成す角度はほぼ１３５度である。

この角度が９０度に最も近い使用者ほど、表示装置を正面に近い位置から見ている使用者なので、上記の角度が９０度に最も近い使用者をメイン使用者に特定する。そして、相対位置が変化する前にメイン使用者が最後に見た表示装置と異なる方の表示装置を、位置補正対象の表示装置に選択する。すなわち、メイン使用者を特定し、その特定したメイン使用者に対して第１選択基準を適用したものが第４選択基準である。

なお、メイン使用者の特定方法は、上記の角度に限定されず、たとえば、表示装置の表示面から視線の位置までの距離が最も短い使用者をメイン使用者としてもよいし、角度と距離にそれぞれ得点を付与し、その合計点が最も高い使用者をメイン使用者とするなど、角度と距離の双方を基準にメイン使用者を特定してもよい。

（５）第５選択基準
複数の使用者の視線が検出されている場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、相対位置が変化する直前の所定時間におけるメイン使用者の視線の動き（視線動向）からメイン使用者が次に見る箇所を推定し、その推定した箇所を表示している表示装置と異なる方の表示装置を、位置補正対象に選択する。

すなわち、第４選択基準の場合と同様にメイン使用者を特定し、その特定したメイン使用者に対して第２選択基準を適用したものが第５選択基準である。

リモート操作パネル１０は、以上の５つの選択基準のうちのいずれの選択基準を使用するかの設定操作を予め所定の設定画面でユーザから受け付け、その設定された選択基準を示す選択基準情報を不揮発メモリ１４に記憶する。

図１１、図１２は、連携表示中の位置補正に係る処理の流れを示している。この処理は、リモート操作パネル１０のＣＰＵ１１が携帯端末３０と連携して行う。

リモート操作パネル１０のＣＰＵ１１は、設定選択画面６０など表示対象の画面を初期状態として、リモート操作パネル１０に単独表示する（ステップＳ１０１）。この状態で、携帯端末３０と近接通信可能か否かを判断する（ステップＳ１０２）。作動中の携帯端末３０がリモート操作パネル１０に並置されると、近接通信可能な状態になる。

近接通信可能でなければ（ステップＳ１０２；Ｎｏ）、リモート操作パネル１０での単独表示を継続する。

近接通信可能な場合は（ステップＳ１０２；Ｙｅｓ）、携帯端末３０の表示能力を取得する（ステップＳ１０３）。ここでは、リモート操作パネル１０から携帯端末３０に表示能力要求を送信し、これを受信した携帯端末３０が自端末の表示能力を示す情報をリモート操作パネル１０に返信する。表示能力には、画面サイズ、解像度などがある。

次に、リモート操作パネル１０のＣＰＵ１１は、リモート操作パネル１０と携帯端末３０との相対位置を示す情報を相対位置情報取得部２１により取得する（ステップＳ１０４）。前述したように、相対位置情報取得部２１は、携帯端末３０の側部に付されているスケールを読み取ることでリモート操作パネル１０に対する携帯端末３０の相対位置を認識する。

次に、リモート操作パネル１０のＣＰＵ１１は、リモート操作パネル１０と携帯端末３０とによる連携表示を開始させる（ステップＳ１０５）。具体的には、表示中の画面を携帯端末３０の存在する方向に拡張した場合に携帯端末３０に表示される第２表示画像６２の表示データを作成し、これを携帯端末３０に送信して携帯端末３０の表示部３７に表示させる。これにより図４等に例示したように、一の画面が、リモート操作パネル１０と携帯端末３０とに、それらの表示内容が連続するように分担して表示される。

その後は、周期的に、表示内容が連続するように位置補正を行う。詳細には以下のように動作する。まず、各使用者の視線および視線動向を検出し（ステップＳ１０６）、使用者毎に、検出した視線および視線動向を時間情報と共に、視線の履歴情報として記憶する（ステップＳ１０７）。連携表示の動作中は、携帯端末３０においても使用者の視線および視線動向の検出が行われ、その検出結果が携帯端末３０からリモート操作パネル１０へ送信される。リモート操作パネル１０は携帯端末３０から受信した視線および視線動向の情報を時間情報と共に視線の履歴情報として記憶する。なお、携帯端末３０で検出した視線動向に関する履歴情報は携帯端末３０で記憶しておき、リモート操作パネル１０からの要求に応じて、携帯端末３０側の履歴情報をリモート操作パネル１０へ送信するように構成されてもよい。

次に、リモート操作パネル１０のＣＰＵ１１は、位置補正の１周期に相当する時間を計測するブレ検知周期タイマを起動する（ステップＳ１０８）。

ブレ検知周期タイマがタイムアップしていなければ（ステップＳ１０９；Ｎｏ）、リモート操作パネル１０と携帯端末３０のいずれかで使用者から何らかの操作を受けたか否かを調べる（ステップＳ１１０）。使用者から操作を受けない場合は（ステップＳ１１０；Ｎｏ）、ステップＳ１０９へ戻り、何らかの操作を受けた場合は（ステップＳ１１０；Ｙｅｓ）、その操作内容に応じてリモート操作パネル１０と携帯端末３０の表示内容を更新して（ステップＳ１１１）、ステップＳ１０９へ戻る。

ブレ検知周期タイマがタイムアップすると（ステップＳ１０９；Ｙｅｓ）、リモート操作パネル１０と携帯端末３０との現時点での相対位置を示す情報を取得する（ステップＳ１１２）。リモート操作パネル１０のＣＰＵ１１は、前回取得した情報が示す相対位置と今回取得した情報が示す相対位置との比較により、相対位置が変化したか否かを判断する（ステップＳ１１３）。相対位置が変化していない場合は（ステップＳ１１３；Ｎｏ）、ステップＳ１０６に戻って動作を継続する。

相対位置が変化した場合は（ステップＳ１１３；Ｙｅｓ）、不揮発メモリ１４から位置補正対象の表示装置の選択基準情報を取得する（ステップＳ１１４）。リモート操作パネル１０のＣＰＵ１１は、選択基準情報の示す選択基準が第１選択基準ならば（ステップＳ１１５；Ｙｅｓ）、前述した第１選択基準に従って位置補正対象の表示装置を決定する第１選択基準選択処理を行って（ステップＳ１１９）、ステップＳ１０６に移行する。

リモート操作パネル１０のＣＰＵ１１は、選択基準情報の示す選択基準が第２選択基準ならば（ステップＳ１１６；Ｙｅｓ）、前述した第２選択基準に従って位置補正対象の表示装置を決定する第２選択基準選択処理を行って（ステップＳ１２０）、ステップＳ１０６に移行する。

リモート操作パネル１０のＣＰＵ１１は、選択基準情報の示す選択基準が第３選択基準ならば（ステップＳ１１７；Ｙｅｓ）、前述した第３選択基準に従って位置補正対象の表示装置を決定する第３選択基準選択処理を行って（ステップＳ１２１）、ステップＳ１０６に移行する。

リモート操作パネル１０のＣＰＵ１１は、選択基準情報の示す選択基準が第４選択基準ならば（ステップＳ１１８；Ｙｅｓ）、前述した第４選択基準に従って位置補正対象の表示装置を決定する第４選択基準選択処理を行って（ステップＳ１２２）、ステップＳ１０６に移行する。

リモート操作パネル１０のＣＰＵ１１は、選択基準情報の示す選択基準が第５選択基準ならば（ステップＳ１１８；Ｎｏ）、前述した第５選択基準に従って位置補正対象の表示装置を決定する第５選択基準選択処理を行って（ステップＳ１２３）、ステップＳ１０６に移行する。

図１３は、第１選択基準選択処理（図１２のステップＳ１１９）の詳細を示している。リモート操作パネル１０のＣＰＵ１１は、相対位置が変化する直前のリモート操作パネル１０での視線検出結果と、相対位置が変化する直前の携帯端末３０での視線検出結果とを比較する（ステップＳ１３１）。リモート操作パネル１０のＣＰＵ１１は、この比較結果より、相対位置が変化する前に使用者が最後に見た表示装置を特定する（ステップＳ１３２）。なお、並置されているリモート操作パネル１０と携帯端末３０の使用者は一人とする。

そして、リモート操作パネル１０のＣＰＵ１１は、相対位置が変化する前に使用者が最後に見た表示装置以外の表示装置を位置補正対象の表示装置に決定する（ステップＳ１３３）。

次に、リモート操作パネル１０のＣＰＵ１１は、ステップＳ１３３で決定した表示装置が携帯端末３０か否かを判断し（ステップＳ１３４）、携帯端末３０ならば（ステップＳ１３４；Ｙｅｓ）、表示内容が連続するように携帯端末３０の表示内容を位置補正して（ステップＳ１３５）、本処理を終了する（リターン）。具体的には、相対位置が変化した距離だけ相対位置が変化した方向と逆方向に携帯端末３０の表示内容を移動させた表示データを作成し、該表示データを携帯端末３０に送信して表示を更新させる。

ステップＳ１３３で決定した表示装置が携帯端末３０でない場合は（ステップＳ１３４；Ｎｏ）、表示内容が連続するようにリモート操作パネル１０の表示内容を位置補正して（ステップＳ１３６）、本処理を終了する（リターン）。具体的には、相対位置が変化した距離だけ相対位置が変化した方向と逆方向にリモート操作パネル１０の表示内容を移動させた表示データを作成し、該表示データを表示部１７に表示して表示部１７の表示内容を更新する。

図１４は、第２選択基準選択処理（図１２のステップＳ１２０）の詳細を示している。リモート操作パネル１０のＣＰＵ１１は、次に見る位置の推定処理を行う（ステップＳ１４１）。図１５は、次に見る位置の推定処理（ステップＳ１４１）の詳細を示している。まず、不揮発メモリ１４に記憶されている視線動向の履歴情報を参照する（ステップＳ１５１）。

ここでは、リモート操作パネル１０の視線検出部２２で検出されたリモート操作パネル１０の使用者の視線動向の履歴情報と、携帯端末３０の視線検出部４０で検出された携帯端末３０の使用者の視線動向の履歴情報の双方を参照する。なお、リモート操作パネル１０の視線検出部２２がリモート操作パネル１０の使用者と携帯端末３０の使用者の双方の視線を検出可能であれば、リモート操作パネル１０の視線検出部２２で検出された視線動向の履歴情報のみを参照すれば足りる。また、ここでは、並置されているリモート操作パネル１０と携帯端末３０の使用者は一人とする。

視線動向の履歴情報から、相対位置が変化する前の所定時間（たとえば、２秒）内に使用者の視線が動いたか否かを判断する（ステップＳ１５２）。相対位置が変化する前の所定時間内に使用者の視線が動いていない場合は（ステップＳ１５２；Ｎｏ）、使用者が最後に見た位置を次に見る位置に推定して（ステップＳ１５４）、本処理を終了する（リターン）。

相対位置が変化する前の所定時間内に使用者の視線が動いていた場合は（ステップＳ１５２；Ｙｅｓ）、その視線の動きの履歴からその使用者が次に見る位置を推定して（ステップＳ１５３）、本処理を終了する（リターン）。具体的には、視線の動きの軌跡（直線、弧、ジグザグなどを含む）からその軌跡を延長した位置を、次に使用者が見る位置として推定する。

図１４に戻って説明を続ける。リモート操作パネル１０のＣＰＵ１１は、ステップＳ１４１で推定した「次に見る位置」を含む表示装置を特定し（ステップＳ１４２）、この特定した表示装置以外の表示装置を位置補正対象の表示装置に決定する（ステップＳ１４３）。

次に、リモート操作パネル１０のＣＰＵ１１は、ステップＳ１４３で決定した表示装置が携帯端末３０か否かを判断し（ステップＳ１４４）、携帯端末３０ならば（ステップＳ１４４；Ｙｅｓ）、表示内容が連続するように携帯端末３０の表示内容を位置補正して（ステップＳ１４５）、本処理を終了する（リターン）。

ステップＳ１４３で決定した表示装置が携帯端末３０でない場合は（ステップＳ１４４；Ｎｏ）、表示内容が連続するようにリモート操作パネル１０の表示内容を位置補正して（ステップＳ１４６）、本処理を終了する（リターン）。

図１６は、第３選択基準選択処理（図１２のステップＳ１２１）の詳細を示している。リモート操作パネル１０のＣＰＵ１１は、相対位置が変化する直前のリモート操作パネル１０での視線検出結果と、相対位置が変化する直前の携帯端末３０での視線検出結果とを比較する（ステップＳ１６１）。この比較結果より、リモート操作パネル１０のＣＰＵ１１は、相対位置が変化する前により多くの使用者が最後に見た表示装置を特定する（ステップＳ１６２）。なお、並置されているリモート操作パネル１０と携帯端末３０の使用者が一人の場合は、その一人の使用者が最後に見た表示装置を特定する。

そして、リモート操作パネル１０のＣＰＵ１１は、ステップＳ１６２で特定した表示装置（相対位置が変化する前により多くの使用者が最後に見た表示装置）以外の表示装置を、位置補正対象の表示装置に決定する（ステップＳ１６３）。

次に、リモート操作パネル１０のＣＰＵ１１は、ステップＳ１６３で決定した表示装置が携帯端末３０か否かを判断し（ステップＳ１６４）、携帯端末３０ならば（ステップＳ１６４；Ｙｅｓ）、表示内容が連続するように携帯端末３０の表示内容を位置補正して（ステップＳ１６５）、本処理を終了する（リターン）。ステップＳ１６３で決定した表示装置が携帯端末３０でない場合は（ステップＳ１６４；Ｎｏ）、表示内容が連続するようにリモート操作パネル１０の表示内容を位置補正して（ステップＳ１６６）、本処理を終了する（リターン）。

図１７は、第４選択基準選択処理（図１２のステップＳ１２２）の詳細を示している。リモート操作パネル１０のＣＰＵ１１は、複数の使用者の視線が検出されるのを待ち（ステップＳ１７１；Ｎｏ）、複数の使用者の視線が検出されたら（ステップＳ１７１；Ｙｅｓ）、視線毎に、表示装置の表示面に対する視線の角度を算出する（ステップＳ１７２）。

次に、表示装置の表示面に対する視線の角度が９０度に最も近い使用者を選択し、該使用者をメイン使用者に特定する（ステップＳ１７３）。なお、一人の使用者の視線のみが検出されている場合に（ステップＳ１７１；Ｎｏ）、その一人の使用者をメイン使用者に特定してステップＳ１７４へ移行するようにしてもよい。

次に、リモート操作パネル１０のＣＰＵ１１は、相対位置が変化する直前のリモート操作パネル１０でのメイン使用者に関する視線検出結果と、相対位置が変化する直前のメイン使用者に関する携帯端末３０での視線検出結果とを比較する（ステップＳ１７４）。この比較結果より、リモート操作パネル１０のＣＰＵ１１は、相対位置が変化する前にメイン使用者が最後に見た表示装置を特定する（ステップＳ１７５）。

そして、リモート操作パネル１０のＣＰＵ１１は、相対位置が変化する前にメイン使用者が最後に見た表示装置以外の表示装置を位置補正対象の表示装置に決定する（ステップＳ１７６）。

次に、リモート操作パネル１０のＣＰＵ１１は、ステップＳ１７６で決定した表示装置が携帯端末３０か否かを判断し（ステップＳ１７７）、携帯端末３０ならば（ステップＳ１７７；Ｙｅｓ）、表示内容が連続するように携帯端末３０の表示内容を位置補正して（ステップＳ１７８）、本処理を終了する（リターン）。

ステップＳ１７６で決定した表示装置が携帯端末３０でない場合は（ステップＳ１７７；Ｎｏ）、表示内容が連続するようにリモート操作パネル１０の表示内容を位置補正して（ステップＳ１７９）、本処理を終了する（リターン）。

図１８は、第５選択基準選択処理（図１２のステップＳ１２３）の詳細を示している。リモート操作パネル１０のＣＰＵ１１は、複数の使用者の視線が検出されるのを待ち（ステップＳ１８１；Ｎｏ）、複数の使用者の視線が検出されたら（ステップＳ１８１；Ｙｅｓ）、視線毎に、表示装置の表示面に対する視線の角度を算出する（ステップＳ１８２）。

次に、表示装置の表示面に対する視線の角度が９０度に最も近い使用者を選択し、該使用者をメイン使用者に特定する（ステップＳ１８３）。なお、一人の使用者の視線のみが検出されている場合に（ステップＳ１８１；Ｎｏ）、その一人の使用者をメイン使用者に特定してステップＳ１８４へ移行するようにしてもよい。

リモート操作パネル１０のＣＰＵ１１は、メイン使用者が次に見る位置の推定処理を行う（ステップＳ１８４）。この処理は、図１５に示す処理を、メイン使用者を対象に行えばよい。

リモート操作パネル１０のＣＰＵ１１は、ステップＳ１８４で推定した「次に見る位置」を含む表示装置を特定し（ステップＳ１８５）、この特定した表示装置以外の表示装置を位置補正対象の表示装置に決定する（ステップＳ１８６）。

次に、リモート操作パネル１０のＣＰＵ１１は、ステップＳ１８６で決定した表示装置が携帯端末３０か否かを判断し（ステップＳ１８７）、携帯端末３０ならば（ステップＳ１８７；Ｙｅｓ）、表示内容が連続するように携帯端末３０の表示内容を位置補正して（ステップＳ１８８）、本処理を終了する（リターン）。

ステップＳ１８６で決定した表示装置が携帯端末３０でない場合は（ステップＳ１８７；Ｎｏ）、表示内容が連続するようにリモート操作パネル１０の表示内容を位置補正して（ステップＳ１８９）、本処理を終了する（リターン）。

以上説明したように、本実施の形態では、並置されたリモート操作パネル１０と携帯端末３０とを使用して連携表示している間に、これらの相対位置が変化したとき、使用者の視線の状態（注視状態）に応じて、位置補正対象の表示装置を選択するので、手ぶれなどの意図しない位置ズレに対する表示内容の位置補正を、使用者に見やすく実施することができる。

次に、第１の実施の形態の変形例について説明する。

変形例では、リモート操作パネル１０と携帯端末３０の相対位置が変化したとき、該変化の直前に使用者が見ていた箇所の表示装置内での位置（上、下、中央、右、左など）を特定する。次に、その特定した位置と、相対位置が変化する直前に使用者が見ていた表示装置の、相対位置が変化したときの他方の表示装置に対する移動方向（上、下、右、左）とが一致するか否かを判断する。そして、一致する場合には、相対位置が変化する直前に使用者が見ていた表示装置を位置補正対象の表示装置に決定する。

図１９は、山と雲を含む景色の画像をリモート操作パネル１０と携帯端末３０に連携表示した状態を示している。同図（ａ）は、相対位置が移動する直前の状態である。使用者の見ている箇所Ｇは、リモート操作パネル１０の表示領域内の上部である。

同図（ｂ）は、相対位置が変化した状態を示しており、リモート操作パネル１０は携帯端末３０に対して上方向に移動している。

この場合、相対位置が変化する直前に使用者の見ている箇所Ｇの表示領域内での位置（上部）と、使用者が見ていた表示装置（リモート操作パネル１０）の他方の表示装置（携帯端末３０）に対する移動方向（上方向）とが一致するので、同図（ｃ）に示すように、使用者が見ていた表示装置（リモート操作パネル１０）の表示内容を移動させて表示内容が連続するように位置補正する。

このように、相対位置が変化する直前に使用者が見ていた箇所の表示領域内での位置と、相対位置が変化する直前に使用者が見ていた表示装置の、相対位置が変化したときの他の表示装置に対する移動方向とが一致する場合は、相対位置が変化する直前に使用者が見ていた表示装置を使用者が意図的に移動させたと推定できる。

すなわち、使用者は、図１９（ａ）の状態でリモート操作パネル１０の表示領域の上部にある雲を見ていたが、それよりさらに上にある雲の状況を見たいために同図（ｂ）に示すようにリモート操作パネル１０を上方に移動させたと推定できる。すなわち、リモート操作パネル１０の表示内容をスクロールさせるためにリモート操作パネル１０を移動させたと判断できる。そこで、使用者の意図に沿うように、リモート操作パネル１０の表示内容を移動（スクロール）させて位置補正する（同図（ｃ））。

なお、相対位置が変化する直前に使用者が見ていた箇所の表示領域内での位置と、相対位置が変化する直前に使用者が見ていた表示装置の、相対位置が変化したときの他の表示装置に対する移動方向とが一致しない場合は、手振れにより、思わず、表示装置が移動したと判断できる。そのため、前述した第１選択基準から第５選択基準に従って位置補正対象の表示装置を決定する。

図２０は、変形例に対応した第１選択基準選択処理（図１２のステップＳ１１９）を示している。図１３に示す第１選択基準選択処理と同一部分には同じステップ番号を付してある。

リモート操作パネル１０のＣＰＵ１１は、相対位置が変化する直前のリモート操作パネル１０での視線検出結果と、相対位置が変化する直前の携帯端末３０での視線検出結果とを比較する（ステップＳ１３１）。この比較結果より、リモート操作パネル１０のＣＰＵ１１は、相対位置が変化する前に使用者が最後に見た表示装置を特定する（ステップＳ１３２）。なお、並置されているリモート操作パネル１０と携帯端末３０の使用者は一人とする。

次に、リモート操作パネル１０のＣＰＵ１１は、特定した表示装置の他方の表示装置に対する移動方向と、使用者の見ていた箇所の表示領域内での位置（注視位置とする）とを比較する（ステップＳ２０１）。

上記の移動方向と注視位置とが一致しない場合は（ステップＳ２０２；Ｎｏ）、手ぶれにより位置ずれとみなし、相対位置が変化する前に使用者が最後に見た表示装置以外の表示装置を位置補正対象の表示装置に決定して（ステップＳ１３３）、ステップＳ１３４へ移行する。

一方、上記の移動方向と注視位置とが一致する場合は（ステップＳ２０２；Ｙｅｓ）、スクロールを意図した位置ズレとみなし、ステップＳ１３２で特定した表示装置を位置補正対象の表示装置に決定して（ステップＳ２０３）、ステップＳ１３４へ移行する。

ステップＳ１３４では、ステップＳ１３３もしくはステップＳ２０３で決定した表示装置が携帯端末３０か否かを判断し、携帯端末３０ならば（ステップＳ１３４；Ｙｅｓ）、表示内容が連続するように携帯端末３０の表示内容を位置補正して（ステップＳ１３５）、本処理を終了する（リターン）。

ステップＳ１３３もしくはステップＳ２０３で決定した表示装置が携帯端末３０でない場合は（ステップＳ１３４；Ｎｏ）、表示内容が連続するようにリモート操作パネル１０の表示内容を位置補正して（ステップＳ１３６）、本処理を終了する（リターン）。

図２１は、変形例に対応した第２選択基準選択処理（図１２のステップＳ１２０）を示している。図１４に示す第２選択基準選択処理と同一部分には同じステップ番号を付してある。

リモート操作パネル１０のＣＰＵ１１は、次に見る位置の推定処理を行う（ステップＳ１４１）。次に、ステップＳ１４１で推定した「次に見る位置」を含む表示装置を特定する（ステップＳ１４２）。

次に、リモート操作パネル１０のＣＰＵ１１は、ステップＳ１４２で特定した表示装置の他方の表示装置に対する移動方向と、使用者が次に見る箇所の表示領域内での位置（注視位置とする）とを比較する（ステップＳ２０１）。

上記の移動方向と注視位置とが一致しない場合は（ステップＳ２０２；Ｎｏ）、手ぶれによる位置ズレとみなし、ステップＳ１４２で特定した表示装置以外の表示装置を位置補正対象の表示装置に決定して（ステップＳ１４３）、ステップＳ１４４へ移行する。

一方、上記の移動方向と注視位置とが一致する場合は（ステップＳ２０２；Ｙｅｓ）、スクロールを意図した位置ズレとみなし、ステップＳ１４２で特定した表示装置を位置補正対象の表示装置に決定して（ステップＳ２０３）、ステップＳ１４４へ移行する。

ステップＳ１４４では、リモート操作パネル１０のＣＰＵ１１は、ステップＳ１４３もしくはステップＳ２０３で決定した表示装置が携帯端末３０か否かを判断し（ステップＳ１４４）、携帯端末３０ならば（ステップＳ１４４；Ｙｅｓ）、表示内容が連続するように携帯端末３０の表示内容を位置補正して（ステップＳ１４５）、本処理を終了する（リターン）。

ステップＳ１４３もしくはステップＳ２０３で決定した表示装置が携帯端末３０でない場合は（ステップＳ１４４；Ｎｏ）、表示内容が連続するようにリモート操作パネル１０の表示内容を位置補正して（ステップＳ１４６）、本処理を終了する（リターン）。

図２２は、変形例に対応した第３選択基準選択処理（図１２のステップＳ１２１）を示している。図１６に示す第３選択基準選択処理と同一部分には同じステップ番号を付してある。

リモート操作パネル１０のＣＰＵ１１は、相対位置が変化する直前のリモート操作パネル１０での視線検出結果と、相対位置が変化する直前の携帯端末３０での視線検出結果とを比較する（ステップＳ１６１）。この比較結果より、リモート操作パネル１０のＣＰＵ１１は、相対位置が変化する前により多くの使用者が最後に見た表示装置を特定する（ステップＳ１６２）。なお、並置されているリモート操作パネル１０と携帯端末３０の使用者が一人の場合は、その一人の使用者が最後に見た表示装置を特定する。

次に、リモート操作パネル１０のＣＰＵ１１は、ステップＳ１６２で特定した表示装置の他方の表示装置に対する移動方向と、相対位置が変化する前により多くの使用者の見ていた箇所の表示領域内での位置（注視位置とする）とを比較する（ステップＳ２０１）。

上記の移動方向と注視位置とが一致しない場合は（ステップＳ２０２；Ｎｏ）、意図しない手振れによる位置ズレとみなし、相対位置が変化する前により多くの使用者が最後に見た表示装置以外の表示装置を位置補正対象の表示装置に決定して（ステップＳ１６３）、ステップＳ１６４へ移行する。

一方、上記の移動方向と注視位置とが一致する場合は（ステップＳ２０２；Ｙｅｓ）、スクロールを意図した位置ずれとみなし、ステップＳ１６２で特定した表示装置を位置補正対象の表示装置に決定して（ステップＳ２０３）、ステップＳ１６４へ移行する。

ステップＳ１６４では、ステップＳ１６３もしくはステップＳ２０３で決定した表示装置が携帯端末３０か否かを判断し、携帯端末３０ならば（ステップＳ１６４；Ｙｅｓ）、表示内容が連続するように携帯端末３０の表示内容を位置補正して（ステップＳ１６５）、本処理を終了する（リターン）。

ステップＳ１６３もしくはステップＳ２０３で決定した表示装置が携帯端末３０でない場合は（ステップＳ１６４；Ｎｏ）、表示内容が連続するようにリモート操作パネル１０の表示内容を位置補正して（ステップＳ１６６）、本処理を終了する（リターン）。

図２３は、変形例に対応した第４選択基準選択処理（図１２のステップＳ１２２）を示している。図１７に示す第４選択基準選択処理と同一部分には同じステップ番号を付してある。

リモート操作パネル１０のＣＰＵ１１は、複数の使用者の視線が検出されるのを待ち（ステップＳ１７１；Ｎｏ）、複数の使用者の視線が検出されたら（ステップＳ１７１；Ｙｅｓ）、視線毎に、表示装置の表示面に対する視線の角度を算出する（ステップＳ１７２）。

次に、表示装置の表示面に対する視線の角度が９０度に最も近い使用者を選択し、該使用者をメイン使用者に特定する（ステップＳ１７３）。なお、一人の使用者の視線のみが検出されている場合に（ステップＳ１７１；Ｎｏ）、その一人の使用者をメイン使用者に特定してステップＳ１７４へ移行してもよい。

次に、リモート操作パネル１０のＣＰＵ１１は、相対位置が変化する直前のリモート操作パネル１０でのメイン使用者に関する視線検出結果と、相対位置が変化する直前のメイン使用者に関する携帯端末３０での視線検出結果とを比較する（ステップＳ１７４）。この比較結果より、リモート操作パネル１０のＣＰＵ１１は、相対位置が変化する前にメイン使用者が最後に見た表示装置を特定する（ステップＳ１７５）。

次に、リモート操作パネル１０のＣＰＵ１１は、ステップＳ１７５で特定した表示装置の他方の表示装置に対する移動方向と、相対位置が変化する前にメイン使用者の見ていた箇所の表示領域内での位置（注視位置とする）とを比較する（ステップＳ２０１）。

上記の移動方向と注視位置とが一致しない場合は（ステップＳ２０２；Ｎｏ）、メイン使用者の意図しない手振れによる位置ズレとみなし、相対位置が変化する前にメイン使用者が最後に見た表示装置以外の表示装置を位置補正対象の表示装置に決定して（ステップＳ１７６）、ステップＳ１７７へ移行する。

一方、上記の移動方向と注視位置とが一致する場合は（ステップＳ２０２；Ｙｅｓ）、メイン使用者によるスクロールを意図した位置ズレとみなし、ステップＳ１７５で特定した表示装置を位置補正対象の表示装置に決定して（ステップＳ２０３）、ステップＳ１７７へ移行する。

次に、リモート操作パネル１０のＣＰＵ１１は、ステップＳ１７６もしくはステップＳ２０３で決定した表示装置が携帯端末３０か否かを判断し（ステップＳ１７７）、携帯端末３０ならば（ステップＳ１７７；Ｙｅｓ）、表示内容が連続するように携帯端末３０の表示内容を位置補正して（ステップＳ１７８）、本処理を終了する（リターン）。

ステップＳ１７６もしくはステップＳ２０３で決定した表示装置が携帯端末３０でない場合は（ステップＳ１７７；Ｎｏ）、表示内容が連続するようにリモート操作パネル１０の表示内容を位置補正して（ステップＳ１７９）、本処理を終了する（リターン）。

図２４は、変形例に対応した第５選択基準選択処理（図１２のステップＳ１２３）を示している。図１８に示す第５選択基準選択処理と同一部分には同じステップ番号を付してある。

リモート操作パネル１０のＣＰＵ１１は、複数の使用者の視線が検出されるのを待ち（ステップＳ１８１；Ｎｏ）、複数の使用者の視線が検出されたら（ステップＳ１８１；Ｙｅｓ）、視線毎に、表示装置の表示面に対する視線の角度を算出する（ステップＳ１８２）。

次に、表示装置の表示面に対する視線の角度が９０度に最も近い使用者を選択し、該使用者をメイン使用者に特定する（ステップＳ１８３）。なお、一人の使用者の視線のみが検出されている場合に（ステップＳ１８１；Ｎｏ）、その一人の使用者をメイン使用者に特定してステップＳ１８４へ移行してもよい。

リモート操作パネル１０のＣＰＵ１１は、メイン使用者が次に見る位置の推定処理を行う（ステップＳ１８４）。この処理は、図１５に示す処理を、メイン使用者を対象に行えばよい。

リモート操作パネル１０のＣＰＵ１１は、ステップＳ１８４で推定した「次に見る位置」を含む表示装置を特定する（ステップＳ１８５）。

次に、リモート操作パネル１０のＣＰＵ１１は、ステップＳ１８５で特定した表示装置の他方の表示装置に対する移動方向と、メイン使用者が次に見る箇所の表示領域内での位置（注視位置とする）とを比較する（ステップＳ２０１）。

上記の移動方向と注視位置とが一致しない場合は（ステップＳ２０２；Ｎｏ）、手振れによる位置ズレとみなし、ステップＳ１８５で特定した表示装置以外の表示装置を位置補正対象の表示装置に決定して（ステップＳ１８６）、ステップＳ１８７へ移行する。

一方、上記の移動方向と注視位置とが一致する場合は（ステップＳ２０２；Ｙｅｓ）、メイン使用者のスクロールを意図した位置ずれとみなし、ステップＳ１８５で特定した表示装置を位置補正対象の表示装置に決定して（ステップＳ２０３）、ステップＳ１８７へ移行する。

ステップＳ１８７では、リモート操作パネル１０のＣＰＵ１１は、ステップＳ１８６もしくはステップＳ２０３で決定した表示装置が携帯端末３０か否かを判断し（ステップＳ１８７）、携帯端末３０ならば（ステップＳ１８７；Ｙｅｓ）、表示内容が連続するように携帯端末３０の表示内容を位置補正して（ステップＳ１８８）、本処理を終了する（リターン）。

ステップＳ１８６もしくはステップＳ２０３で決定した表示装置が携帯端末３０でない場合は（ステップＳ１８７；Ｎｏ）、表示内容が連続するようにリモート操作パネル１０の表示内容を位置補正して（ステップＳ１８９）、本処理を終了する（リターン）。

以上説明したように、本実施の形態の変形例では、相対位置が変化した際に、表示内容をスクロールさせるために使用者が意図的に表示装置を移動させたか否かを判断し、意図的に移動させた場合は、その意図に沿ってスクロールされるように位置補正対象の表示装置を選択する。すなわち、使用者の意図しない手振れ等による位置ズレか、スクロールさせるための使用者の意図した位置ズレかに応じて、位置補正対象の表示装置を選択して、表示のズレを補正するので、使用者にとって、見やすく適切に表示のズレを補正することができる。

以上、本発明の実施の形態を図面によって説明してきたが、具体的な構成は実施の形態に示したものに限られるものではなく、本発明の要旨を逸脱しない範囲における変更や追加があっても本発明に含まれる。

実施の形態では、意図しない位置ズレを基本にして第１から第５選択基準を設定したが、使用者の意図した位置ズレ、すなわち、画面のスクロールを意図した位置ずれに対応するように、位置補正対象を選択してもよい。具体的には、第１選択基準を「相対位置が変化する前に使用者が最後に見た表示装置を位置補正対象に選択する」とし、第２選択基準を「相対位置が変化する直前の所定時間における使用者の視線の動きから使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置を位置補正対象に選択する」とし、第３選択基準を「複数の使用者の視線を検出している場合は、相対位置が変化する前により多くの使用者が最後に見た表示装置を位置補正対象に選択する」とし、第４選択基準を「複数の使用者の視線を検出している場合は、表示装置に対する視線の位置に基づいてメイン使用者に特定し、相対位置が変化する前にメイン使用者が最後に見た表示装置を位置補正対象に選択する」とし、第５選択基準を「複数の使用者の視線を検出している場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、相対位置が変化する直前の所定時間におけるメイン使用者の視線の動きからメイン使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置を位置補正対象に選択する」としてもよい。

また、変形例では、相対位置が変化する直前に使用者が見ていた箇所の表示領域内での位置と、相対位置が変化する直前に使用者が見ていた表示装置の、相対位置が変化したときの他の表示装置に対する移動方向とが一致した場合に、当該相対位置の変化を使用者の意図した位置ズレと判断したが、判断方法はこれに限定されない。たとえば、相対位置が変化した際に、どちらの表示装置が移動したかを検出（絶対位置の変化を検出）し、相対位置が変化する直前に使用者が見ていた表示装置と移動した表示装置とが一致する場合は、使用者の意図した位置ズレであると判断してもよい。

また、相対位置が変化する直前に使用者が見ていた箇所の表示領域内での位置と、相対位置が変化する直前に使用者が見ていた表示装置の、相対位置が変化したときの他の表示装置に対する移動方向とが一致し、かつ、相対位置が変化する直前に使用者が見ていた表示装置と移動した表示装置とが一致する場合に、使用者の意図した位置ズレであると判断してもよい。

実施の形態では、リモート操作パネル１０は、複合機５と別体に構成されたが、リモート操作パネル１０に代えて複合機１０が着脱不能に備える操作パネルとし、この操作パネルと携帯端末３０とで連携表示を行うように構成されてもよい。なお、並置される表示装置の一方が複合機５のリモート操作パネル１０や操作パネルである必要はなく、複数台の携帯端末３０同士を連携させる構成でもよい。この場合、いずれか１台の携帯端末３０がマスタ機となって連携表示や位置補正を制御すればよい。

また、外部のサーバなどを連携表示や位置補正に関する制御を行う表示制御装置とし、該サーバがリモート操作パネル１０や携帯端末３０などの並置された複数台の表示装置に対して表示データを送信し、連携表示および位置補正を行うといった構成でもよい。また本発明は、表示制御装置と並置される２台の表示装置とを含む表示システムとして構成されてもよい。

実施の形態では、周期的に位置補正したが、連携表示開始後は、常に位置補正する構成であってもよい。あるいは、相対位置を監視し、相対位置が、たとえば、所定の閾値以上変化した場合に位置補正するように構成されてもよい。

実施の形態では、設定選択画面６０を連携表示する場合を例示したが、連携表示される画面の内容は任意でよい。

実施の形態では、リモート操作パネル１０と携帯端末３０が視線検出部２２、４０を有する構成を示したが、視線検出部は、リモート操作パネル１０や携帯端末３０と別体に設けられてもよい。たとえば、クリップなどで、視線検出部をリモート操作パネル１０や携帯端末３０に装着する構成でもかまわない。

５…複合機
１０…リモート操作パネル
１１…ＣＰＵ
１２…ＲＯＭ
１３…ＲＡＭ
１４…不揮発メモリ
１５…認証部
１６…操作部
１６ａ…タッチパネル
１７…表示部
１８…ネットワーク通信部
１９…近接無線通信部
２１…相対位置情報取得部
２２…視線検出部
３０…携帯端末
３１…ＣＰＵ
３２…ＲＯＭ
３３…ＲＡＭ
３４…不揮発メモリ
３５…認証部
３６…操作部
３６ａ…タッチパネル
３７…表示部
３８…ネットワーク通信部
３９…近接無線通信部
４０…視線検出部
６０…設定選択画面
６１…第１表示画像
６２…第２表示画像

Claims (17)

1. 第１表示装置とこれに並置して使用される第２表示装置との相対位置を示す相対位置情報を取得する相対位置情報取得部と、
   前記第１表示装置と前記第２表示装置を並置して使用する使用者の視線の検出情報を取得する視線検出情報取得部と、
   前記相対位置情報に基づいて、一の画面に係る表示を、前記第１表示装置とこれに並置された前記第２表示装置とにそれらの表示内容が連続するように分担させて行わせる分担表示制御部と、
   を有し、
   前記分担表示制御部は、表示中に前記第１表示装置と前記第２表示装置の相対位置が変化した場合に、前記視線の検出情報に基づいて前記第１表示装置と前記第２表示装置の一方を位置補正の対象に選択し、該選択した表示装置の表示内容のみを、他方の表示装置の表示内容と連続するように位置補正する
   ことを特徴とする表示制御装置。
2. 前記分担表示制御部は、前記視線の検出情報に基づいて、前記相対位置が変化する前に前記使用者が最後に見た表示装置を特定し、該特定した表示装置と異なる方の表示装置を、前記位置補正対象に選択する
   ことを特徴とする請求項１に記載の表示制御装置。
3. 前記分担表示制御部は、前記相対位置が変化する直前の所定時間における前記使用者の視線の動きから前記使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する
   ことを特徴とする請求項１に記載の表示制御装置。
4. 前記分担表示制御部は、複数の使用者の視線が検出されている場合は、前記相対位置が変化する前により多くの使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する
   ことを特徴とする請求項１に記載の表示制御装置。
5. 前記分担表示制御部は、複数の使用者の視線が検出されている場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、前記相対位置が変化する前に前記メイン使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する
   ことを特徴とする請求項１に記載の表示制御装置。
6. 前記分担表示制御部は、複数の使用者の視線が検出されている場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、前記相対位置が変化する直前の所定時間における前記メイン使用者の視線の動きから前記メイン使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する
   ことを特徴とする請求項１に記載の表示制御装置。
7. 前記位置補正対象の選択基準として、
   前記相対位置が変化する前に前記使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する第１選択基準、
   前記相対位置が変化する直前の所定時間における前記使用者の視線の動きから前記使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する第２選択基準、
   前記視線検出部が複数の使用者の視線を検出している場合は、前記相対位置が変化する前により多くの使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する第３選択基準、
   前記視線検出部が複数の使用者の視線を検出している場合は、表示装置に対する視線の位置に基づいてメイン使用者に特定し、前記相対位置が変化する前に前記メイン使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する第４選択基準
   前記視線検出部が複数の使用者の視線を検出している場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、前記相対位置が変化する直前の所定時間における前記メイン使用者の視線の動きから前記メイン使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する第５選択基準、
   のうちの少なくとも２以上を備え、
   前記選択に使用する選択基準を切り替える選択基準切り替え部を有する
   ことを特徴とする請求項１に記載の表示制御装置。
8. 前記第１表示装置および第２表示装置はそれぞれ、使用者の視線を検出する視線検出部を備え、
   前記視線検出情報取得部は、前記視線検出部の検出結果を示す検出情報を取得する
   ことを特徴とする請求項１乃至７のいずれか１つに記載の表示制御装置。
9. 請求項１乃至８のいずれか１項に記載の表示制御装置と、
   前記第１表示装置と、
   前記第２表示装置と、
   を有する
   ことを特徴とする表示システム。
10. 情報処理装置を、
    第１表示装置とこれに並置される第２表示装置との相対位置を示す相対位置情報に基づいて、一の画面に係る表示を、前記第１表示装置とこれに並置された前記第２表示装置とにそれらの表示内容が連続するように分担させて行わせると共に、
    前記第１表示装置と前記第２表示装置を並置して使用する使用者の視線の検出情報を取得し、
    表示中に前記第１表示装置と前記第２表示装置の相対位置が変化した場合に、前記視線の検出情報に基づいて前記第１表示装置と前記第２表示装置の一方を位置補正の対象に選択し、該選択した表示装置の表示内容のみを、他方の表示装置の表示内容と連続するように位置補正するように機能させる
    ことを特徴とする表示制御プログラム。
11. 他の表示装置と並置して使用される表示装置であって、
    当該表示装置と前記他の表示装置との相対位置を検出する相対位置検出部と、
    当該表示装置と前記他の表示装置とを並置して使用する使用者の視線を検出する視線検出部と、
    前記相対位置検出部の検出結果に基づいて、一の画面に係る表示を、当該表示装置とこれに並置された前記他の表示装置とにそれらの表示内容が連続するように分担させて行わせる分担表示制御部と、
    を有し、
    前記分担表示制御部は、表示中に当該表示装置と前記他の表示装置の相対位置が変化した場合に、前記視線検出部の検出結果に基づいて当該表示装置と前記他の表示装置の一方を位置補正の対象に選択し、該選択した一方の表示内容のみを、他方の表示内容と連続するように位置補正する
    ことを特徴とする表示装置。
12. 前記分担表示制御部は、前記視線検出部の検出結果に基づいて、前記相対位置が変化する前に前記使用者が最後に見た表示装置を特定し、該特定した表示装置と異なる方の表示装置を、前記位置補正対象に選択する
    ことを特徴とする請求項１１に記載の表示装置。
13. 前記分担表示制御部は、前記相対位置が変化する直前の所定時間における前記使用者の視線の動きから前記使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する
    ことを特徴とする請求項１１に記載の表示装置。
14. 前記分担表示制御部は、複数の使用者の視線が検出されている場合は、前記相対位置が変化する前により多くの使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する
    ことを特徴とする請求項１１に記載の表示装置。
15. 前記分担表示制御部は、複数の使用者の視線が検出されている場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、前記相対位置が変化する前に前記メイン使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する
    ことを特徴とする請求項１１に記載の表示装置。
16. 前記分担表示制御部は、複数の使用者の視線が検出されている場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、前記相対位置が変化する直前の所定時間における前記メイン使用者の視線の動きから前記メイン使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する
    ことを特徴とする請求項１１に記載の表示装置。
17. 前記位置補正対象の選択基準として、
    前記相対位置が変化する前に前記使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する第１選択基準、
    前記相対位置が変化する直前の所定時間における前記使用者の視線の動きから前記使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する第２選択基準、
    前記視線検出部が複数の使用者の視線を検出している場合は、前記相対位置が変化する前により多くの使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する第３選択基準、
    前記視線検出部が複数の使用者の視線を検出している場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、前記相対位置が変化する前に前記メイン使用者が最後に見た表示装置と異なる方の表示装置を、前記位置補正対象に選択する第４選択基準
    前記視線検出部が複数の使用者の視線を検出している場合は、表示装置に対する視線の位置に基づいてメイン使用者を特定し、前記相対位置が変化する直前の所定時間における前記メイン使用者の視線の動きから前記メイン使用者が次に見る箇所を推定し、該推定した箇所を表示している表示装置と異なる方の表示装置を、前記位置補正対象に選択する第５選択基準、
    のうちの少なくとも２以上を備え、
    前記選択に使用する選択基準を切り替える選択基準切り替え部を有する
    ことを特徴とする請求項１１に記載の表示装置。