JP6129136B2 - 機器操作装置及び機器操作方法 - Google Patents

Description

本発明は、複数の機能を有する電子機器の操作をする機器操作装置及び機器操作方法に関するものである。

電子機器の操作性を向上させるために、電子機器と連携動作が可能な操作用端末上の画面を用いて、電子機器の各種機能の操作を行う技術が知られている。電子機器を使用するユーザーは、例えばタブレット端末のタッチパネルを用いた操作により電子機器を操作できるので、電子機器の操作性が向上する。特許文献１には、操作用端末により撮影した映像データに含まれる電子機器の識別番号を読み取ることで電子機器を特定し、電子機器を操作するための仮想のユーザーインターフェイスを生成して表示する技術が公開されている。

特開２０１３−１７２４３２号公報

しかしながら、従来の操作用端末は、電子機器を特定した後に電子機器の機能一覧を取得して表示していたので、ユーザーは、表示された機能一覧から操作をしたい機能を選択する必要があった。したがって、ユーザーが、機能一覧から所望の機能を選択する操作を行う必要があったので、操作性が悪いという問題があった。

また、操作用端末は、機能一覧を電子機器から取得するために電子機器とやり取りを行う必要があった。したがって、操作用端末と電子機器との間で通信する時間が発生するので、機能一覧を表示することができるまでに待ち時間が発生していた。その結果、所望の機能の操作をするまでに長い時間を要するという問題もあった。

そこで、本発明は上述した点に鑑みてなされたものであり、電子機器の操作性を向上することができる機器操作装置を提供することを目的とする。

上記の課題を解決するために、本発明の機器操作装置は、複数の機能を有する電子機器の一部を含む撮影画像を取得する撮影手段と、前記撮影画像に含まれる、前記電子機器が有する操作手段を含む画像に基づいて、前記撮影画像に関連する前記電子機器の機能を特定する特定手段と、前記特定手段が特定した前記機能に対応する操作画面を表示する表示手段と、前記操作画面において入力された操作内容を取得する取得手段と、前記操作内容に基づいて、前記機能の動作を設定する設定指示情報を前記電子機器に送信する送信手段と、を有することを特徴とする。

本発明によれば、電子機器の操作性を向上することができるという効果を奏する。

第１の実施形態に係る機器操作システムＳの概念図である。 画像表示装置１及びタブレット端末２の構成を示す図である。 画像表示装置１のＣＰＵ１０、及びタブレット端末２のＣＰＵ２０により実行される機能の構成を示す機能構成図である。 タブレット端末２における制御部４０の処理を示すフローチャートである。 撮影部４１を用いて撮影した撮影画像の一例を示す図である。 機器状態管理部３０が管理する設定情報の一例を示す図である。 ＵＩ生成部４６で生成した操作画面８０の一例を示す図である。 部位特定部４２の処理を示すフローチャートである。 二次元バーコードと部位との対応情報の例を示す図である。 本実施形態におけるＯＳＤ画面の一例を示す図である。 撮影部４１を用いて撮影した撮影画像の一例を示す図である。 二次元バーコードと部位ＩＤとの対応情報の例を示す図である。 機器状態管理部３０が管理する設定情報の一例を示す図である。 ＵＩ生成部４６が生成する操作画面の一例を示す図である。 画像表示装置１に表示されているＯＳＤ画面の一例を示す図である。 タブレット端末２に表示される操作画面の一例を示す図である。 画像表示装置１のＣＰＵ１０、及びタブレット端末２のＣＰＵ２０内で実行する処理を表す機能構成図である。 制御部２１０の処理のフローチャートである。 拡縮率算出部２１５の処理のフローチャートである。 初期画像及び撮影画像の一例を示す図である。 画像表示装置１の一例を示す図である。 タブレット端末２で画像表示装置１の二次元バーコードを撮影した撮影画像の一例を示す図である。

＜第１の実施形態＞
［機器操作システムＳの基本構成］
図１は、第１の実施形態に係る機器操作システムＳの概念図である。機器操作システムＳは、画像表示装置１及びタブレット端末２を含んで構成されている。画像表示装置１は、例えば液晶ディスプレイであり、電源オン／オフ機能及び画質調整機能等の複数の機能を提供する電子機器の一種である。タブレット端末２は、電子機器の機能を操作するために用いられる機器操作装置の一種である。画像表示装置１とタブレット端末２とは、例えば無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）等のネットワークを介して、双方向に通信が可能である。本実施形態において、画像表示装置１とタブレット端末２とが無線により通信できるものとして説明するが、これに限らず、画像表示装置１とタブレット端末２とが、有線により通信してもよい。

タブレット端末２は、例えばスマートフォン又はタブレットのような、タッチパネルを用いたタッチ操作が可能な端末である。図１に示すユーザー３は、タブレット端末２を操作することで、画像表示装置１の機能を実行することができる。

タブレット端末２は、撮影画像を撮影可能なカメラを有している。ユーザー３は、当該カメラを用いて、複数の機能を有する画像表示装置１の一部の部位を含む撮影画像を撮影することができる。タブレット端末２は、カメラによる撮影により得られた撮影画像に関連する画像表示装置１の機能を特定し、特定した機能に対応する操作画面を生成して、表示パネルに操作画面を表示する。タブレット端末２は、ディスプレイに表示した操作画面を介して、ユーザー３の操作内容を取得する。タブレット端末２は、取得した操作内容に基づいて、特定した機能の動作を設定する設定指示情報を画像表示装置１に送信する。画像表示装置１は、受信した設定指示情報に基づいて機能を動作させたり、保持している設定値を更新したりする。

例えば、タブレット端末２は、撮影画像に電源ボタンの画像が含まれている場合、画像表示装置１の表示パネルの電源をオン又はオフさせるための操作画面を表示する。タブレット端末２は、ユーザー３から、画像表示装置１の電源をオンする操作を受けると、画像表示装置１の電源をオンすることを指示する設定指示情報を画像表示装置１に送信する。画像表示装置１は、タブレット端末２から受信した設定指示情報が、電源をオンする指示を含むことを検出すると、表示パネルの電源をオンする。

また、タブレット端末２は、自身の属性を検出するためのセンサーを有している。タブレット端末２は、例えばジャイロセンサーを有しており、当該センサーにより自身の向きを検出し、縦向きか横向きかを示す属性を特定する。タブレット端末２は、特定したタブレット端末２の属性に基づく態様で、撮影画像により特定される機能に対応する操作画面を表示する。例えば、タブレット端末２は、ユーザー３が縦向きにタブレット端末２を持っている場合に、縦方向に長い操作画面を表示し、ユーザー３が横向きにタブレット端末２を持っている場合に、横方向に長い操作画面を表示する。

［画像表示装置１の構成］
図２は、画像表示装置１及びタブレット端末２の構成を示す図である。画像表示装置１は、ＣＰＵ１０と、記憶部１１と、表示部１２と、操作部１３と、通信部１４とを有する。これらの各ブロックは、バス１５を介して相互に通信可能である。

ＣＰＵ１０は、中央演算装置であり、記憶部１１に記憶された処理プログラムを展開して実行することにより、画像表示装置１を機能させる。ＣＰＵ１０は、画像表示装置１の各ブロックの制御を司る。

記憶部１１は、ＣＰＵ１０により実行される画像表示装置１の処理プログラムを記憶するＲＯＭ、及びＣＰＵ１０が処理するデータを記憶するＲＡＭを有する。ＣＰＵ１０は、予めＲＯＭに記憶されたプログラムをＲＡＭに展開してからプログラムを実行することにより、各種の処理を行う。また、記憶部１１は、画像表示装置１の複数の機能に関連付けて、各機能の設定内容に関連する設定情報を記憶している。

表示部１２は、例えば液晶ディスプレイであり、画像表示装置１に入力された映像データ若しくは画像データ、又は操作画面を表示する。
操作部１３は、ユーザー３が画像表示装置１の操作に用いるユーザーインターフェイスである。操作部１３は、例えばジョグスイッチであり、ユーザー３の操作内容に応じた信号を発生する。

通信部１４は、タブレット端末２とデータを送受信するための通信インターフェイスである。通信部１４は、例えば無線ＬＡＮインターフェイスであり、ネットワークＮを介してタブレット端末２とデータを送受信する。

［タブレット端末２の構成］
タブレット端末２は、ＣＰＵ２０と、記憶部２１と、表示部２２と、操作部２３と、通信部２４と、センサー２５と、カメラ２６とを有する。これらの各ブロックは、バス２７を介して相互に通信可能である。

ＣＰＵ２０は、中央演算装置であり、記憶部２１に記憶された処理プログラムを展開して実行することにより、タブレット端末２を機能させる。ＣＰＵ２０は、タブレット端末２の各ブロックの制御を司る。

記憶部２１は、ＣＰＵ２０により実行されるタブレット端末２の処理プログラムを記憶するＲＯＭ、及びＣＰＵ２０が処理するデータを記憶するＲＡＭを有する。ＣＰＵ２０は、予めＲＯＭに記憶されたプログラムをＲＡＭに展開してからプログラムを実行することにより、各種の処理を行う。

表示部２２は、例えば液晶ディスプレイであり、ユーザー３が画像表示装置１を操作するための操作画面を表示する。
操作部２３は、例えば、表示部２２に重ねて設けられたタッチパネルである。操作部２３は、ユーザー３が操作画面にタッチした位置を検出し、検出した位置を示す情報をＣＰＵ２０に通知する。

通信部２４は、画像表示装置１とデータを送受信するための通信インターフェイスである。通信部２４は、例えば無線ＬＡＮインターフェイスであり、ネットワークＮを介して画像表示装置１とデータを送受信する。
センサー２５は、タブレット端末２の動き又は向きを検出する。センサー２５は、例えば、ジャイロセンサー、加速度センサー等である。
カメラ２６は、撮像素子及びレンズ等から構成される。カメラ２６は、ＣＰＵ２０の制御に基づいて、被写体の画像を含む撮影画像を生成する。

［画像表示装置１及びタブレット端末２の機能構成図］
図３は、画像表示装置１のＣＰＵ１０、及びタブレット端末２のＣＰＵ２０により実行される機能の構成を示す機能構成図である。

まず、ＣＰＵ１０により実行される画像表示装置１の機能の構成について説明する。
ＣＰＵ１０は、機器状態管理部３０、操作排他処理部３１、機器設定処理部３２、及び通信処理部３３として機能する。
機器状態管理部３０は、画像表示装置１の各機能に関する設定情報を管理する。設定情報は、機能毎に設定可能な値又は特性等の選択肢、現在の設定値、及び補足情報等である。これらの設定情報は、通信処理部３３を介して、タブレット端末２により参照される。設定情報の詳細については、後述する。

操作排他処理部３１は、タブレット端末２からの排他指示に応じて、画像表示装置１の操作の排他処理を行う。具体的には、操作排他処理部３１は、ＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）などのＵＩ（Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）画面を表示中に、タブレット端末２からの排他指示を取得した場合、表示中のＯＳＤを非表示とし、タブレット端末２からの排他指示が解除されるまで、画像表示装置１での機器の操作をロックする。

操作排他処理部３１は、機器設定処理部３２が、現在の設定値等の設定情報をタブレット端末２に送信してから所定時間は、タブレット端末２が送信する設定指示情報以外の情報に基づいて、設定情報を更新しないように制御することにより、画像表示装置１での機器の操作をロックしてもよい。このようにすることで、ユーザー３がタブレット端末２を用いて画像表示装置１を操作している間に、他のユーザー３が画像表示装置１の操作画面を用いて画像表示装置１の機能を設定することを防止できる。したがって、タブレット端末２における操作内容と画像表示装置１における操作内容とが競合することを防止できる。

機器設定処理部３２は、画像表示装置１の各種機能に関する設定情報を管理し、タブレット端末２におけるユーザー３の操作に応じて設定情報の更新処理を行う。具体的には、機器設定処理部３２は、タブレット端末２からの要求に応じて、最新の設定情報をタブレット端末２に送信し、新たな設定情報を反映する指示をタブレット端末２から取得すると、取得した指示に基づいて、管理している設定情報を更新する。機器設定処理部３２は、例えば、記憶部１１に記憶されている設定値のうち、タブレット端末２から受信した設定情報に対応する設定値を、受信した設定情報に含まれる値に更新することにより、画像表示装置１の設定を行う。なお、機器設定処理部３２は、現在の設定値等の設定情報をタブレット端末２に送信してから所定時間は、タブレット端末２が送信する設定指示情報以外の情報に基づいて、設定情報を更新しない。

通信処理部３３は、通信部１４を介してタブレット端末２に送信するデータを生成する。また、通信処理部３３は、通信部１４を介してタブレット端末２から受信したデータを解読し、機器状態管理部３０、操作排他処理部３１、機器設定処理部３２へ、解読したデータの内容を通知する。通信処理部３３は、最新の設定情報の要求をタブレット端末２から受信し、受信した要求に応じて、記憶部１１に記憶している設定情報をタブレット端末２に送信する。また、通信処理部３３は、タブレット端末２から、画像表示装置１の機能に関する設定値を受信する。

続いて、ＣＰＵ２０により実行されるタブレット端末２の機能の構成について説明する。
ＣＰＵ２０は、制御部４０、撮影部４１、部位特定部４２、機能特定部４３、操作方法決定部４４、属性情報管理部４５、ＵＩ生成部４６、表示制御部４７、操作入力Ｉ／Ｆ部４８、設定処理部４９、排他指示部５０、及び通信処理部５１として機能する。

制御部４０は、タブレット端末２の全体の制御を行うブロックである。タブレット端末２には、画像表示装置１と相互通信することにより画像表示装置１を制御するためのアプリケーションがインストールされており、制御部４０は、当該アプリケーションが起動している状態で処理を開始する。制御部４０が行う処理の詳細については後述する。

撮影部４１は、ユーザー３の操作に応じた制御部４０からの撮影指示を受けて、タブレット端末２が備えるカメラ２６を用いて、画像表示装置１の一部の部位を含む撮影画像を撮影する。撮影部４１は、撮影した撮影画像を制御部４０に提供する。

部位特定部４２は、画像表示装置１の一部の部位（例えば、操作部）を含む撮影画像を用いて、撮影画像に含まれる画像表示装置１の部位を特定する。具体的には、部位特定部４２は、撮影画像に含まれる画像表示装置１の部位を特定する指示と撮影画像とを制御部４０から取得し、撮影画像を解析することで、撮影画像に含まれている部位を特定する。部位特定部４２は、例えば、記憶部２１に記憶された画像表示装置１の各部位の画像と制御部４０から取得した撮影画像とをマッチングさせ、記憶部２１に記憶された画像のうち、撮影画像との相関度が最も大きい画像を特定する。

部位特定部４２は、記憶部２１に記憶された、各部位の画像と各部位の識別情報（以下、部位ＩＤという）とを関連付けたテーブルを参照し、特定した画像に対応する部位ＩＤを特定する。部位特定部４２は、特定した部位ＩＤを制御部４０へ通知する。なお、部位特定部４２は、撮影画像が、画像表示装置１の操作部に関連付けられた位置に設けられたＱＲコード（登録商標）やバーコード等のような、部位の特定に使用可能な情報を含む画像を含んでいる場合に、当該画像に含まれている情報に基づいて部位を特定してもよい。ここで、操作部に関連付けられた位置とは、当該位置と操作部との間の距離が、当該位置と他の操作部との間の距離よりも短い位置であり、例えば、操作部に隣接する位置である。

機能特定部４３は、撮影画像に関連する機能を特定する。具体的には、機能特定部４３は、撮影画像に含まれる、画像表示装置１の一部の部位（例えば、操作部）を含む撮影画像を用いて特定された部位ＩＤに基づいて、撮影画像に関連する機能を特定する。より具体的には、機能特定部４３は、機能を特定する指示と部位ＩＤとを制御部４０から取得し、取得した部位ＩＤに対応する機能の種別を示す機能ＩＤを特定する。機能特定部４３は、例えば記憶部２１に記憶された部位ＩＤと機能ＩＤとの対応テーブルに基づいて、部位特定部４２が特定した部位ＩＤに対応する機能ＩＤを特定する。上記のテーブルには、例えば、部位ＩＤ０１に対応する機能ＩＤが、電源オン／オフ機能（機能ＩＤ：ＦＵＮＣ００１）であることが関連付けられている。機能特定部４３は、特定した機能ＩＤを制御部４０へ通知する。

操作方法決定部４４は、操作方法を決定する指示を制御部４０から取得すると、属性情報管理部４５が管理するタブレット端末２の属性情報を参照することにより、操作方法を特定する。具体的には、操作方法決定部４４は、機能ＩＤに関連付けて記憶部２１に記憶された複数の操作方法のうち、タブレット端末２の属性に適した操作方法を選択する。タブレット端末２がジャイロセンサーを備えている場合、操作方法決定部４４は、ジャイロセンサーが示しているタブレット端末２の向きを示す属性情報に基づいて、ユーザー３がタブレット端末２を持っている向きに適した操作方法を選択する。操作方法決定部４４は、例えば、タブレット端末２が縦向きの場合、縦向き用の操作画面を用いた操作方法に決定し、タブレット端末２が横向きの場合、横向き用の操作画面を用いた操作方法に決定する。操作方法決定部４４は、決定した操作方法を制御部４０に通知する。

ＵＩ生成部４６は、操作画面を生成する指示、及び操作方法決定部４４が決定した操作方法を制御部４０から取得すると、制御部４０から取得した操作方法に基づいて、対象機能に関する設定を行うための操作画面の内容を決定して、操作画面を生成する。ＵＩ生成部４６は、例えば、縦向き用の操作画面を用いた操作方法に対しては、縦方向に長い操作画面を生成する。ＵＩ生成部４６は、操作画面を生成すると、画像表示装置１に表示された操作画面を用いた画像表示装置１の機能の設定を禁止させるための排他要求を排他指示部５０に通知する。

表示制御部４７は、機能特定部４３が特定した機能に対応する操作画面を表示部２２に表示させる。具体的には、表示制御部４７は、ＵＩ生成部４６が生成した操作画面とタブレット端末２に表示する画像データとを合成して表示データを生成し、表示部２２に表示データに基づく画像を表示させる。

操作入力Ｉ／Ｆ部４８は、操作部２３を介して、操作画面において入力された操作内容を取得し、取得した操作内容を制御部４０に通知する。例えば、操作入力Ｉ／Ｆ部４８は、操作部２３を介して取得するユーザー３の操作内容を示す操作情報として、操作画面においてユーザー３が入力した、画像表示装置１の設定情報を更新した更新情報を取得し、取得した更新情報を制御部４０に通知する。具体的には、操作入力Ｉ／Ｆ部４８は、操作部２３がタッチパネルである場合、ユーザー３がタッチした位置の座標を操作部２３から取得し、操作画面における、取得した座標に対応する位置に表示されている内容を特定する。操作入力Ｉ／Ｆ部４８は、特定した内容が示す更新情報を制御部４０に通知する。

設定処理部４９は、更新情報を反映する指示と更新情報とを制御部４０から取得すると、取得した更新情報に基づいて、画像表示装置１との通信に必要な通信コマンドを生成する。具体的には、設定処理部４９は、操作入力Ｉ／Ｆ部４８が取得した操作内容に基づいて、機能特定部４３が特定した機能の動作に関する設定情報を更新するための指示を示す設定指示情報を含む通信コマンドを生成する。設定処理部４９は、通信コマンドを通信処理部５１に提供する。

排他指示部５０は、通信処理部５１を介して画像表示装置１へ排他指示を行う。具体的には、排他指示部５０は、制御部４０が画像表示装置１から現在の設定情報を受信した後に、当該設定情報に基づく内容を含む操作画面を生成したＵＩ生成部４６からの指示に基づいて、他の装置による画像表示装置１の動作の設定を禁止する排他指示を画像表示装置１に送信する。

通信処理部５１は、通信部２４を介して画像表示装置１に送信するデータを生成する。通信処理部５１は、例えば、設定処理部４９から取得した設定指示情報を含む通信コマンドを画像表示装置１に送信する。また、通信処理部５１は、通信部２４を介して画像表示装置１からデータを受信する。通信処理部５１は、例えば、機能特定部４３が特定した機能に関連する設定情報を画像表示装置１から受信する。また、通信処理部５１は、設定が完了した旨を示す設定完了通知を画像表示装置１から受信して、制御部４０に通知する。

［タブレット端末２の動作フローチャート］
図４は、タブレット端末２における制御部４０の処理を示すフローチャートである。
まず、制御部４０は、ユーザー３の操作に応じて、撮影部４１を用いて撮影画像の撮影を行う（Ｓ１０１）。

図５は、撮影画像の一例である。タブレット端末２のパネル６０に表示されている画像が撮影画像である。撮影画像には、画像表示装置１に設けられているＩｎｐｕｔボタン６１の画像が含まれている。Ｉｎｐｕｔボタン６１の横には、撮影されたボタンがＩｎｐｕｔボタン６１であることを示す情報を含む二次元バーコード６２が印字されており、撮影画像は、二次元バーコード６２の画像も含んでいる。

続いて、制御部４０は、部位特定部４２に対して部位の特定を指示し、撮影部４１から取得した撮影画像を提供する（Ｓ１０２）。制御部４０は、部位特定部４２から部位ＩＤの通知を受けた場合（Ｓ１０３においてｙｅｓの場合）、部位ＩＤに基づいて部位を特定する（Ｓ１０４）。本実施形態においては、部位ＩＤ＝０１であり、当該部位ＩＤに対応する部位は、入力切換ボタンであるとする。部位特定部４２が部位を特定する処理の詳細については、図８を参照して後述する。

続いて、制御部４０は、機能特定部４３に対して機能の特定を指示する（Ｓ１０５）。制御部４０は、機能特定部４３が特定した機能を示す情報を含む通知を機能特定部４３から受けた場合（Ｓ１０６においてｙｅｓの場合）、受けた通知に基づいて機能を特定する。本実施形態においては、Ｓ１０４において部位ＩＤ＝０１が特定されているため、制御部４０は、部位ＩＤ＝０１に対応する機能ＩＤとして、入力切換機能に対応するＦＵＮＣ００１を特定する（Ｓ１０７）。

続いて、制御部４０は、操作方法決定部４４に対して操作方法の決定を指示する（Ｓ１０８）。操作方法決定部４４は、例えばタブレット端末２の向きが縦向きであると判断し、縦向きに対応する操作方法を制御部４０へ通知する。制御部４０は、操作方法決定部４４が決定した操作方法を示す情報を操作方法決定部４４から受信した場合（Ｓ１０９においてｙｅｓの場合）、受信した情報に基づいて操作方法を特定する（Ｓ１１０）。

続いて、制御部４０は、通信処理部５１を介して、画像表示装置１の機器状態管理部３０から、操作の対象となる機能の設定情報を取得する（Ｓ１１１）。具体的には、制御部４０は、機器状態管理部３０に対して機能ＩＤを送信することにより、送信した機能ＩＤに対応する対象機能の設定情報を取得する。ここで、制御部４０は、機器状態管理部３０から設定情報を受信した後に、排他指示部５０に指示して、他の装置による画像表示装置１の動作の設定を禁止する排他指示を画像表示装置１に送信させる。

図６は、機器状態管理部３０が管理する設定情報の一例を示す図である。設定情報には、機能ＩＤ７０、対象機能名称７１、選択肢７２、現在の設定値７３、補足情報７４が含まれている。図６においては、機能ＩＤがＦＵＮＣ００１の入力切換機能に関する設定情報７５が示されている。選択肢７２には、入力切換機能が、Ｉｎｐｕｔ１／Ｉｎｐｕｔ２／Ｉｎｐｕｔ３という選択肢を有することを示す情報が含まれている。現在の設定値７３には、現在の設定値がＩｎｐｕｔ１であることを示す情報が含まれている。また、補足情報７４には、Ｉｎｐｕｔ１＝ＰＣ、Ｉｎｐｕｔ２＝カメラ、Ｉｎｐｕｔ３＝カメラ２に対応することを示す情報が含まれている。

図４に戻って、Ｓ１１１の後の動作について説明する。制御部４０は、Ｓ１１１で取得した設定情報とＳ１１０で特定した操作方法をＵＩ生成部４６へ渡し、操作画面の生成を指示する（Ｓ１１２）。ＵＩ生成部４６は、制御部４０が画像表示装置１から取得した設定情報に基づく内容を含む操作画面を生成する。

図７は、ＵＩ生成部４６が生成した操作画面の一例を示す図である。図７（ａ）は、タブレット端末２が縦向きの場合の操作画面の例を示す。図７（ａ）における画像８０は、ＵＩ生成部４６が生成した機能設定用の操作画面であり、Ｉｎｐｕｔ１／Ｉｎｐｕｔ２／Ｉｎｐｕｔ３の選択肢を長方形のボタン画像で表現した操作画面となっている。ユーザー３は、これらのボタン画像をタッチ操作により選択することで、所望の入力に切り換えることができる。なお、画像８０に示すＩｎｐｕｔ１ボタン８１は、制御部４０が画像表示装置１から取得した設定情報が示す現在の設定値であり、他の選択肢とは模様及び色が異なる態様で表示されている。

図７（ｂ）は、タブレット端末２が横向きの場合の操作画面の例を示す。操作方法が横向きの場合は、縦向きの場合と比べて、タブレット端末２上に表示可能な領域が広い。そこで、ＵＩ生成部４６は、図６における選択肢７２に対応する画像とともに、補足情報７４に対応する画像８２を表示する。図７（ｂ）に示す例においては、選択肢７２に対応する画像に関連付けて、補足情報７４に対応するＰＣ１、カメラ１、カメラ２というテキストを含む画像８２が、選択肢７２に対応する画像８０の横に表示されている。

なお、本実施形態では、Ｉｎｐｕｔボタンを示す二次元バーコード６２の直下を起点にして操作画面を表示するものとしている。操作画面の表示位置は、タブレット端末２の他の任意の位置（例えば、タブレット端末２の左上の位置）を起点として表示してもよい。

図４に戻って、Ｓ１１２の後の動作について説明する。ユーザー３が、図７に示す操作画面の画像８０におけるＩｎｐｕｔ２ボタンをタッチした場合（Ｓ１１３においてｙｅｓの場合）、制御部４０は、操作入力Ｉ／Ｆ部４８から、設定情報としてのＩｎｐｕｔ２を受信する。

続いて、制御部４０は、Ｓ１１１で取得した設定情報を、Ｓ１１３で取得した新たな設定情報（すなわち、更新情報）に更新する設定情報反映指示を、設定処理部４９に通知する（Ｓ１１４）。本実施形態において、制御部４０は、新たな設定情報としてＩｎｐｕｔ２を通知する。設定処理部４９は、通信処理部５１を介して、Ｉｎｐｕｔ２への入力切換を画像表示装置１に行わせるための入力切換要求を画像表示装置１に送信する。画像表示装置１は、入力切換要求を受信すると、Ｉｎｐｕｔ１からＩｎｐｕｔ２への入力切換を実行する。

図８は、部位特定部４２の処理を示すフローチャートである。
部位特定部４２は、制御部４０から部位特定指示を取得する（Ｓ２０１）。この際、部位特定部４２は、制御部４０から撮影画像も同時に取得する。

続いて、部位特定部４２は、制御部４０から取得した撮影画像を解析して、撮影画像に含まれている対象部位を特定する（Ｓ２０２）。ここで、部位特定部４２での部位特定方法について図５及び図９を用いて説明する。部位特定部４２は、図５に示す撮影画像を取得し、撮影画像に含まれる二次元バーコード６２の画像部分を切り出す。二次元バーコード６２は、画像表示装置１における操作手段の近傍に印字されており、当該操作手段の部位を識別する情報を含んでいる。図９は、タブレット端末２に予め記憶されている二次元バーコードと部位との対応情報の一例を示す図である。

対応情報は、二次元バーコード６５と、部位ＩＤ６６と、部位名称６７とが関連付けられた情報である。本実施形態における二次元バーコード６５に対応する二次元バーコードは、図５に示す二次元バーコード６２であり、対応情報６８において、「部位ＩＤ６６＝０１」及び「部位名称６７＝入力切換ボタン」に関連付けられている。図８に示すように、部位特定部４２は、Ｓ２０２で特定した部位ＩＤを制御部４０に通知する（Ｓ２０３）。

本実施形態では、部位特定部４２が、二次元バーコード６２を用いた画像解析によって部位を特定する例について説明したが、これに限らない。部位特定部４２は、画像表示装置１のボタン毎に設けられた複数のランプの点灯パターンに基づいて、部位又は機能を特定してもよい。

また、部位特定部４２は、例えば撮影画像内に写っている画像表示装置１の各ボタンの形状や文字を画像解析し、タブレット端末２で予め保持している各ボタンの形状や文字のパターン画像と比較することで、部位を特定してもよい。また、部位特定部４２は、撮影画像内に複数の部位を認識した場合は、認識した各部位の画像表示装置１における位置に基づいて、部位を特定してもよい。例えば、部位特定部４２は、画像表示装置１の右下に位置する部位であることを認識することにより、撮影画像に含まれている部位がＩｎｐｕｔボタンであることを特定することができる。

［第１の実施形態における効果］
以上述べたように、本実施形態によれば、タブレット端末２は、画像表示装置１の一部の部位として、操作部や操作部の近傍に設けられている二次元バーコードを撮影し、撮影した画像に含まれている部位を特定する。そして、タブレット端末２は、特定した部位に対応する機能を特定することで、画像表示装置１を制御するための操作画面を表示することができる。ユーザー３は、表示された操作画面を操作することで画像表示装置１を操作できるので、ユーザー３による画像表示装置１の操作性が向上する。さらに、タブレット端末２は、タブレット端末２の属性情報に基づいて、表示する操作画面の内容を切り換えるので、タブレット端末２の仕様や状態に応じて、最適なＵＩを表示することができる。その結果、ユーザー３の利便性を向上することができる。

＜第２の実施形態＞
本発明の第２の実施形態について説明する。本実施形態の説明においては、第１の実施形態と異なる機能について詳しく説明し、第１の実施形態と同様の機能については、説明を省略する。第１の実施形態においては、画像表示装置１のボタン付近に二次元バーコードが印字されている例について説明したが、本実施形態に係る画像表示装置１は、ＯＳＤ画面内に、機能を識別するための情報を含む識別画像としての二次元バーコードを表示する点で第１の実施形態と異なる。本実施形態に係るタブレット端末２は、撮影画像に含まれる二次元バーコードに基づいて、機能を特定する。

図１０は、本実施形態におけるＯＳＤ画面の一例を示す図である。本実施形態において、画像表示装置１は、キャリブレーションの実行をユーザー３に促すＯＳＤ画面９０が、定期的に自動表示されるものとする。ＯＳＤ画面９０には「キャリブレーションを実行してください」との文言に加えて、キャリブレーション実行ボタン９１及びキャンセルボタン９２の２つのボタンが含まれている。ＯＳＤ画面９０には、キャリブレーション実行ボタン９１の近傍に、ＯＳＤ画面９０に表示されている内容がキャリブレーション機能であることを示す二次元バーコード９３が表示されている。

図１１は、撮影部４１を用いて、図１０に示した画面の一部の部位を撮影した撮影画像の一例を示す図である。本実施形態では、図１１に示すとおり、撮影画像に二次元バーコード９３が含まれている。

図１２は、部位特定部４２が撮影画像を画像解析して部位を特定する際に用いる、二次元バーコードと部位ＩＤとの対応情報の一例を示す図である。図１１に示した撮影画像に含まれている二次元バーコード９３は、図１２に示す対応情報１００に含まれており、二次元バーコード９３は、「部位ＩＤ＝０２」及び「部位名称＝キャリブレーションボタン」に対応している。機能特定部４３は、記憶部２１に記憶された部位ＩＤと機能ＩＤとの対応テーブルに基づいて、「部位ＩＤ＝０２」に対応する機能ＩＤがＦＵＮＣ００２であると特定する。

制御部４０は、機能特定部４３が特定した機能ＩＤに対応する設定情報を画像表示装置１から取得する。具体的には、制御部４０は、画像表示装置１に対して設定情報を要求し、画像表示装置１は、機器状態管理部３０が管理している設定情報を制御部４０に送信する。ＵＩ生成部４６は、制御部４０が取得した設定情報を含む操作画面を生成する。

図１３は、機器状態管理部３０が管理する設定情報の一例を示す図である。制御部４０は、複数の設定情報のうち、機能ＩＤ＝ＦＵＮＣ００２に対応する、キャリブレーション機能に関する設定情報１１０を特定する。キャリブレーション機能は、選択肢が目標値設定／目標値コピーであり、現在の設定値は輝度＝１２０ｃｄ／ｍ^２、色温度＝５０００Ｋ、色域＝ＡｄｏｂｅＲＧＢである。

図１４は、本実施形態におけるＵＩ生成部４６が生成する操作画面の一例を示す図である。本実施形態では、操作方法が横向きであり、且つパネルサイズが大きく表示領域が広い場合の画面例を用いて説明する。図１４（ａ）は、ＵＩ生成部４６が生成した操作画面１２０を示している。操作画面１２０は、「目標値設定」及び「目標値コピー」の２つの選択肢をボタンで表現した操作画面である。

ユーザー３は、これらのボタンをタッチ操作により選択することで、所望の項目を選択することができる。図１４（ａ）は、目標値設定ボタンが選択された状態を示しているものとし、目標値設定ボタンの右横には、現在の設定情報に対応する設定値が表示されている。

ボタン１２１は、機能に関する説明を表示させる指示を受け付けるためのヘルプボタンであり、各ヘルプボタンに対応して、各設定値の詳細についてヘルプ情報が関連付けられている。ユーザー３がボタン１２１をタッチすると、図１４（ｂ）に示すような画面１３０を表示し、輝度設定に関する詳細な説明を表示する。また、ユーザー３が、ボタン１３１の画面を閉じるボタンをタッチすると、図１４（ａ）に示す状態に画面表示を戻す。

ＵＩ生成部４６は、表示部２２が操作画面を表示する領域のサイズが所定の条件を満たす場合に、ヘルプボタンを含む操作画面を生成し、表示部２２に表示させる。例えば、ＵＩ生成部４６は、タブレット端末２の表示部２２の表示領域のサイズが、機能特定部４３が特定した機能に対応する操作画面のサイズに対して十分に大きい場合に、ヘルプボタンを含む操作画面を生成する。ＵＩ生成部４６は、表示部２２の表示領域のサイズが、当該機能に関する詳細な説明を表示するために必要なサイズよりも大きい場合に、ヘルプボタンを含む操作画面を生成してもよい。

ＵＩ生成部４６は、図１４に示した態様と異なる操作画面を生成してもよい。例えば、ＵＩ生成部４６は、画像表示装置１に表示されているＯＳＤ画面と異なる態様の操作画面を生成してもよい。

図１５は、画像表示装置１に表示されているＯＳＤ画面の一例を示す図である。図１６は、図１５に示したＯＳＤ画面が表示されている場合にタブレット端末２に表示される操作画面の一例を示す図である。図１５に示す画像表示装置１には、画質設定機能のＯＳＤ画面１４０とともに、ＯＳＤ画面１４０に対応する機能が画質設定であることを示す二次元バーコード１４１が表示されている。ＯＳＤ画面１４０が示すとおり、ユーザー３は、スライダーを用いて各設定値を操作することができる。タブレット端末２は、二次元バーコード１４１を撮影することで、画像表示装置１に表示されているＯＳＤ画面１４０が画質設定機能に対応する画面であることを特定し、画像表示装置１から、画質設定機能の設定情報を取得する。

図１６に示すように、ＵＩ生成部４６は、タブレット端末２が取得した設定情報に基づいて、図１５に示す画像表示装置１のＯＳＤ画面１４０と異なり、タッチ操作に適した操作画面を生成する。具体的には、タブレット端末２に表示される操作画面においては、ユーザー３が、つまみ１５１を画像１５０の円周に沿ってタッチ操作で移動することにより設定操作を行うことができる。なお、ＵＩ生成部４６は、タブレット端末２の表示領域に余裕がある場合は、ヘルプ情報１５２をさらに表示してもよい。

なお、本実施形態では、タブレット端末２が１個の二次元バーコードを撮影する例について説明したが、タブレット端末２が複数の二次元バーコードを同時に撮影してもよい。この場合、機能特定部４３は、ユーザー３の操作によりタブレット端末２が認識した二次元バーコードのうち、所望の機能をユーザー３に選択させることにより、機能を特定してもよい。

［第２の実施形態における効果］
以上述べたように、本実施形態によれば、画像表示装置１は、ＯＳＤの階層ごとに二次元バーコードを表示し、タブレット端末２は、表示された二次元バーコードに基づいて機能を特定する。したがって、タブレット端末２は、第１の実施形態よりも詳細な機能を特定し、特定した機能の操作画面を提供することができる。また、タブレット端末２は、パネルサイズが広く表示領域に余裕がある場合は、より詳細な設定情報の表示やヘルプ情報の表示をすることができるので、ユーザー３の利便性がさらに向上する。

＜第３の実施形態＞
本発明の第３の実施形態について説明する。本実施形態では第１の実施形態と異なる機能について詳しく説明し、第１の実施形態と同様の機能については説明を省略する。
第１の実施形態ではタブレット端末２の向きによって操作画面の表示内容を切り換える例について説明した。本実施形態では、ユーザー３が、タブレット端末２を用いて二次元バーコードを撮影中に拡大／縮小操作することで、画像表示装置１に表示する表示画像を拡大又は縮小する例について説明する。

第３の実施形態に係るタブレット端末２においては、表示部２２が、撮影画像として二次元バーコードを含む操作画面を表示する。タブレット端末２は、操作画面に含まれる二次元バーコードの大きさを変更する操作内容を取得すると、操作内容が示す二次元バーコードの大きさに基づいて、画像表示装置１が画面に表示する画像の大きさを設定する設定指示情報を画像表示装置１に送信する。

図１７は、本実施形態に係る画像表示装置１のＣＰＵ１０、及びタブレット端末２のＣＰＵ２０内で実行する処理を表す機能構成図である。ＣＰＵ１０は、操作排他処理部２００、機器設定処理部２０１及び通信処理部２０２で構成される。操作排他処理部２００、機器設定処理部２０１、通信処理部２０２は、図３に示す操作排他処理部３１、機器設定処理部３２、通信処理部３３と同様であるため説明を省略する。

ＣＰＵ２０は、制御部２１０、撮影部２１１、機能特定部２１２、操作方法決定部２１３、属性情報管理部２１４、拡縮率算出部２１５、ＵＩ生成部２１６、表示制御部２１７、操作入力Ｉ／Ｆ部２１８、設定処理部２１９、排他指示部２２０及び通信処理部２２１で構成される。

制御部２１０は、第１の実施形態で説明した制御部４０の機能に加えて、拡縮率算出部２１５で算出した拡大率又は縮小率（以下、拡縮率という）を参照し、設定処理部２１９に対して、画像表示装置１に表示中の映像データの拡大／縮小を指示する。本実施形態では、画像表示装置１で映像を表示している間に、ユーザー３がＯＳＤ画面上で拡大縮小機能を選択すると、画像表示装置１上に拡大縮小機能を示す二次元バーコードが表示されるものとする。制御部２１０は、撮影部２１１を用いて上記二次元バーコードを撮影し、機能特定部２１２を用いて、対象機能が拡大縮小機能であることを特定する。制御部２１０の処理の詳細については、後述する。

撮影部２１１、機能特定部２１２、操作方法決定部２１３、属性情報管理部２１４は、図３で示す撮影部４１、機能特定部４３、操作方法決定部４４、属性情報管理部４５と同様であるため説明を省略する。ただし、本実施形態における機能特定部２１２は、制御部２１０からの機能特定の指示とともに取得する撮影画像内の二次元バーコードを解析することで、機能を特定するものとする。

拡縮率算出部２１５は、撮影部２１１から取得した撮影画像に含まれている二次元バーコードのサイズの変化量に基づいて、拡縮率を算出する。具体的には、拡縮率算出部２１５は、撮影部２１１から撮影画像を取得した時点における二次元バーコードの第１サイズを算出する。続いて、操作入力Ｉ／Ｆ部４８を介してユーザー３による拡大／縮小操作を検出すると、拡縮率算出部２１５は、ユーザー３が操作した後に撮影部２１１が撮影した二次元バーコードの第２サイズを算出する。続いて、拡縮率算出部２１５は、第１サイズに対する第２サイズの比を、拡縮率として算出する。

ＵＩ生成部２１６、表示制御部２１７、操作入力Ｉ／Ｆ部２１８、設定処理部２１９、排他指示部２２０、通信処理部２２１は、図３で示すＵＩ生成部４６、表示制御部４７、操作入力Ｉ／Ｆ部４８、設定処理部４９、排他指示部５０、通信処理部５１と同様であるため説明を省略する。

図１８は、本実施形態における制御部２１０の処理のフローチャートである。Ｓ２０１は、図４におけるＳ１０１と同様であり、Ｓ２０２〜Ｓ２０７は、図４におけるＳ１０５〜Ｓ１１０と同様であるため説明を省略する。ただし、本実施形態では、Ｓ２０４で特定する対象機能は拡大縮小機能とし、Ｓ２０７で特定する操作方法は「カメラによる撮影」であるとする。

制御部２１０は、Ｓ２０８において、操作入力Ｉ／Ｆ部２１８を介してユーザー３による拡大／縮小操作を行った入力情報を受信した場合（Ｓ２０８においてｙｅｓの場合）、ＵＩ生成部２１６に操作画面を生成するように指示する（Ｓ２０９）。続いて、制御部２１０は、拡縮率算出部２１５から拡縮率を取得する（Ｓ２１０）。拡縮率算出部２１５の処理の詳細については、後述する。

続いて、制御部２１０は、設定処理部２１９に対して、Ｓ２１０において取得した拡縮率で拡縮するように、設定情報の反映指示を行う（Ｓ２１１）。制御部２１０は、Ｓ２１０において取得した拡縮率が例えば９倍である場合、画像表示装置１に対して、９倍の拡大率で映像データを表示するように依頼する。画像表示装置１は、制御部２１０からの依頼を受けて、表示中の映像データを９倍に拡大する。続いて、制御部２１０は、アプリケーションを終了するか否かを確認し（Ｓ２１２）、まだ終了しないと判定した場合（Ｓ２１２においてｎｏの場合）、Ｓ２０８〜Ｓ２１１を繰り返す。

図１９は、拡縮率算出部２１５の処理のフローチャートである。
拡縮率算出部２１５は、撮影部２１１から撮影画像を取得するまで待機する（Ｓ３０１）。拡縮率算出部２１５は、撮影部２１１から撮影画像を取得した場合（Ｓ３０１においてｙｅｓの場合）、アプリケーションの起動後、初回の取得であれば（Ｓ３０２においてｙｅｓの場合）、撮影画像を初期画像として記憶する（Ｓ３０３）。

図２０は、初期画像及び撮影画像の一例を示す図である。図２０（ａ）は、初期画像の一例を示す図である。画像表示装置１には、映像データ１６０とともに、二次元バーコード１６１が表示される。映像データ１６０には、太陽と山の景色が表示されている。二次元バーコード１６１は拡大縮小機能を示す二次元バーコードであるとする。

拡縮率算出部２１５は、Ｓ３０３で記憶した初期画像内に写っている二次元バーコードの面積を算出する（Ｓ３０４）。ここで、初期画像内に写っている二次元バーコードとは、図２０（ａ）に示す二次元バーコード１６１ａである。拡縮率算出部２１５は、撮影画像において二次元バーコード１６１ａが占める幅ｗと高さｈの画素数を解析し、幅ｗ×高さｈで面積を求める。本実施形態において、例えば初期画像に含まれる二次元バーコード１６１ａの幅ｗを１０ｐｉｘｅｌ、高さｈを１０ｐｉｘｅｌとすると、二次元バーコード１６１ａの面積は１００ｐｉｘｅｌとなる。

拡縮率算出部２１５は、Ｓ３０１で取得した撮影画像がアプリケーション起動後の初回の取得でない場合（Ｓ３０２においてｎｏの場合）、Ｓ３０２〜Ｓ３０３の処理を実行しない。即ち、拡縮率算出部２１５は、Ｓ３０２〜Ｓ３０３の処理を、アプリケーション起動後の初回のみ実行する。

続いて、拡縮率算出部２１５は、ユーザー３がタブレット端末２上で拡大操作を行った後に撮影部２１１から取得した撮影画像の面積を算出する（Ｓ３０５）。図２０（ｂ）は、ユーザー３がタブレット端末２上で拡大操作を行った後に撮影した画像を示しており、図２０（ａ）に示した初期画像における二次元バーコード１６１ａよりも大きな二次元バーコード１６１ｂが写っている。ここで、拡大操作とは、図２０（ｂ）における矢印１７０で示す方向にユーザー３が画面をタッチ操作することとする。この場合、二次元バーコード１６１はタブレット端末２上では、二次元バーコード１６１ｂの大きさで撮影される。ここで、二次元バーコード１６１ｂの幅ｗ’を３０ｐｉｘｅｌ、高さｈを３０ｐｉｘｅｌとすると、二次元バーコード１６１ｂの面積は９００ｐｉｘｅｌとなる。

続いて、拡縮率算出部２１５は、Ｓ３０４で算出した初期画像の二次元バーコード１６１ａの面積と、Ｓ３０５で算出した撮影画像の二次元バーコード１６１ｂの面積から拡縮率を算出する（Ｓ３０６）。ここで、拡縮率は、（撮影画像の二次元バーコード１６１ｂの面積）／（初期画像の二次元バーコード１６１ａの面積）により算出される。本実施形態では、Ｓ３０４で算出した初期画像の二次元バーコード１６１ａの面積が１００ｐｉｘｅｌ、Ｓ３０５で算出した撮影画像の二次元バーコード１６１ｂの面積が９００ｐｉｘｅｌのため、拡縮率は９倍となる。

制御部２１０は、拡縮率算出部２１５から取得した拡縮率に基づいて、画像表示装置１に対して拡大又は縮小の要求を行う。その結果、画像表示装置１は、図２０（ｂ）に示す映像データ１６２のように、図２０（ａ）における映像データ１６０よりも拡大された映像を表示する。本実施形態では、画像表示装置１が映像データの右上を起点として拡大する例で示したが、その他の位置を起点としてもよい。

なお、本実施形態では、タブレット端末２上でユーザー３が拡大操作することで画像表示装置１の映像データを拡大する例について説明したが、タブレット端末２上で、例えばユーザー３が図２０（ｂ）の矢印１７０とは逆方向に縮小操作することで、画像表示装置１の映像データを縮小することも可能である。

また、本実施形態では、タブレット端末２を操作することで画像表示装置１の映像データを拡大又は縮小する例について説明したが、画像表示装置１は、タブレット端末２の傾きに応じて画像表示装置１に表示している映像データを上下左右に移動してもよい。また、タブレット端末２は、タブレット端末２の回転操作を利用して、画像表示装置１に表示する映像データを調整してもよい。

［第３の実施形態における効果］
以上述べたように、本実施形態によれば、ユーザー３は、画像表示装置１に表示された二次元バーコードを撮影した後にタブレット端末２においてタッチ操作をすることで、画像表示装置１の映像データを容易に拡大したり縮小したりすることができる。したがって、ユーザー３は、複雑な操作をすることなく、画像表示装置１の映像データの大きさを操作することができるので、さらに操作性が向上する。

＜第４の実施形態＞
本発明の第４の実施形態について説明する。なお、本実施形態では、第１の実施形態と異なる機能について詳しく説明し、同様の機能については説明を省略する。
第１の実施形態では、タブレット端末２で画像表示装置１のボタン付近に印字された二次元バーコードを撮影して部位を特定した後に機能を特定する例で述べた。本実施形態に係る機能特定部４３は、撮影画像に関連する画像表示装置１の機能を特定する前に、機能の種別を特定し、特定した機能の種別と撮影画像とに基づいて、画像表示装置１の機能を特定する。本実施形態では、タブレット端末２のアプリケーション上で機能の種別を特定し、タブレット端末２で撮影する画像表示装置１の二次元バーコードが示す機能に応じて、タブレット端末２上の表示を切り換える例について説明する。

図２１は、本実施形態における画像表示装置１の一例を示す図である。画像表示装置１には、Ｉｎｐｕｔボタン６１と、Ｉｎｐｕｔボタン６１がＩｎｐｕｔボタンであることを示す二次元バーコード６２と、Ｐｏｗｅｒボタン１８０と、Ｐｏｗｅｒボタン１８０がＰｏｗｅｒボタンであることを示す二次元バーコード１８１とが、予め備え付けられている。

本実施形態では、ユーザー３が、画像表示装置１に予め印字されているヘルプ機能を示す二次元バーコード（不図示）を、タブレット端末２を用いて撮影することで、対象機能の種別がヘルプ機能であることを特定しているという場合について説明する。

図２２は、タブレット端末２で画像表示装置１の二次元バーコードを撮影した撮影画像の一例を示す図である。図２２（ａ）は、ユーザー３がＩｎｐｕｔボタン６１を示す二次元バーコード６２を撮影した撮影画像の例である。タブレット端末２は、機能特定部４３を用いて、二次元バーコード６２に基づいて、Ｉｎｐｕｔボタン６１に対応する機能が入力切換機能であることを特定し、入力切換機能に関するヘルプ画面１９０をタブレット端末２に表示する。ヘルプ画面１９０には、Ｉｎｐｕｔボタン６１に対応する機能が入力切換機能であることを示す機能名称、及び当該機能に関する説明が表示される。

図２２（ｂ）は、ユーザー３が図２２（ａ）の撮影に続けてＰｏｗｅｒボタン１８０を示す二次元バーコード１８１を撮影した撮影画像の例である。タブレット端末２は、機能特定部４３を用いて、二次元バーコード１８１に基づいて、Ｐｏｗｅｒボタン１８０に対応する機能が電源制御機能であることを特定し、電源制御機能に関するヘルプ画面１９１をタブレット端末２に表示する。ヘルプ画面１９１には、Ｐｏｗｅｒボタン１８０に対応する機能が電源制御機能であることを示す機能名称、及び当該機能に関する説明が表示される。

以上の説明において、画像表示装置１は、画像表示装置１が有する複数の機能のうちのいずれかの機能に関する説明を表示するヘルプ機能を示す二次元バーコードが印字されていた。そして、ユーザー３がタブレット端末２を用いて二次元バーコードを撮影することで、タブレット端末２は、二次元バーコードに対応する機能の種別がヘルプ機能であることを特定し、撮影画像に基づいて特定した部位に基づいて、特定した部位に関連する機能のヘルプ機能を実行した。しかし、タブレット端末２が、ユーザー３が実行したい機能の種別がヘルプ機能であることを特定する方法は上記の例に限らない。タブレット端末２は、タブレット端末２にインストールされている画像表示装置１を制御するアプリケーション上でのユーザー３の操作に基づいて、ユーザー３が実行したい機能の種別がヘルプ機能であることを特定し、撮影画像に基づいて特定した部位に基づいて、特定した部位に関連する機能のヘルプ機能を実行してもよい。

［第４の実施形態における効果］
以上述べたように、本実施形態によれば、タブレット端末２が、ユーザー３が実行したい機能の種別がヘルプ機能であると特定した後に、タブレット端末２が撮影した撮影画像に含まれる画像表示装置１の部位に応じて、タブレット端末上に表示する画面の内容を切り換えることが可能となった。その結果、ユーザー３が、特定の機能に従属する機能を起動させたい場合に、ユーザー３の操作時間を短縮できるので、ユーザー３の利便性をさらに向上することができる。

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されず、その要旨の範囲内で種々の変形及び変更が可能である。

４１ 撮影部
４３ 機能特定部
４７ 表示制御部
４８ 操作入力Ｉ／Ｆ部
４９ 設定処理部

Claims (15)

1. 複数の機能を有する電子機器の一部を含む撮影画像を取得する撮影手段と、
   前記撮影画像に含まれる、前記電子機器が有する操作手段を含む画像に基づいて、前記撮影画像に関連する前記電子機器の機能を特定する特定手段と、
   前記特定手段が特定した前記機能に対応する操作画面を表示する表示手段と、
   前記操作画面において入力された操作内容を取得する取得手段と、
   前記操作内容に基づいて、前記機能の動作を設定する設定指示情報を前記電子機器に送信する送信手段と、
   を有することを特徴とする、機器操作装置。
2. 前記特定手段が特定した前記機能に関連する設定情報を前記電子機器から受信する受信手段をさらに有し、
   前記表示手段は、前記設定情報に基づく内容を含む前記操作画面を表示し、
   前記取得手段は、前記設定情報を更新した更新情報を取得し、
   前記送信手段は、前記更新情報を含む前記設定指示情報を前記電子機器に送信することを特徴とする、
   請求項１に記載の機器操作装置。
3. 前記送信手段は、前記受信手段が前記設定情報を受信した後に、他の装置による前記電子機器の動作の設定を禁止する排他指示を前記電子機器に送信することを特徴とする、
   請求項２に記載の機器操作装置。
4. 前記特定手段は、前記撮影画像に含まれる、前記電子機器が有する複数の操作手段のうち第１の操作手段からの距離が、前記電子機器が有する他の操作手段からの距離よりも小さい位置に設けられた、前記第１の操作手段を識別する情報を含む識別画像に基づいて、前記機能を特定することを特徴とする、
   請求項１から３のいずれか１項に記載の機器操作装置。
5. 前記特定手段は、前記撮影画像に含まれる、前記電子機器に表示される操作画面に表示され、前記機能を識別するための情報を含む識別画像に基づいて、前記機能を特定することを特徴とする、
   請求項１から３のいずれか１項に記載の機器操作装置。
6. 前記表示手段は、前記機能に対応する前記操作画面の表示領域のサイズが所定の条件を満たす場合に、前記機能に関する説明を表示させる指示を受け付ける画像を表示することを特徴とする、
   請求項１から５のいずれか１項に記載の機器操作装置。
7. 前記表示手段は、前記撮影画像を含む前記操作画面を表示し、
   前記取得手段は、前記操作画面に含まれる前記撮影画像の大きさを変更する前記操作内容を取得し、
   前記送信手段は、前記操作内容が示す前記撮影画像の大きさに基づいて、前記電子機器が画面に表示する画像の大きさを設定する前記設定指示情報を前記電子機器に送信することを特徴とする、
   請求項１から６のいずれか１項に記載の機器操作装置。
8. 前記特定手段は、前記撮影手段が前記撮影画像を取得する前に行われたユーザーの操作に基づいて、前記撮影画像に含まれる、前記電子機器が有する操作手段を含む画像により特定される前記機能の種別を特定し、前記種別を特定した後に、前記機能の種別と前記電子機器が有する操作手段を含む画像とに基づいて、前記操作手段に対応する機能を特定することを特徴とする、
   請求項１から７のいずれか１項に記載の機器操作装置。
9. 複数の機能を有する電子機器の一部を含む撮影画像を取得するステップと、
   前記撮影画像に含まれる、前記電子機器が有する操作手段を含む画像に基づいて、前記撮影画像に関連する前記電子機器の機能を特定するステップと、
   特定した前記機能に対応する操作画面を表示する制御を行うステップと、
   前記操作画面において入力された操作内容を取得するステップと、
   前記操作内容に基づいて、前記機能の動作を設定する設定指示情報を前記電子機器に送信するステップと、
   を有することを特徴とする、機器操作方法。
10. 前記特定するステップにおいて特定した前記機能に関連する設定情報を前記電子機器から受信するステップをさらに有し、
    前記表示するステップにおいて、前記設定情報に基づく内容を含む前記操作画面を表示し、
    前記取得するステップにおいて、前記設定情報を更新した更新情報を取得し、
    前記送信するステップにおいて、前記更新情報を含む前記設定指示情報を前記電子機器に送信することを特徴とする、
    請求項９に記載の機器操作方法。
11. 前記受信するステップの後に、他の装置による前記電子機器の動作の設定を禁止する排他指示を前記電子機器に送信するステップを有することを特徴とする、
    請求項１０に記載の機器操作方法。
12. 前記機能に対応する前記操作画面の表示領域のサイズが所定の条件を満たすか否かを判定するステップと、
    前記操作画面の表示領域のサイズが前記所定の条件を満たす場合に、前記機能に関する説明を表示させる指示を受け付ける画像を表示するステップと、
    をさらに有することを特徴とする、
    請求項９から１１のいずれか１項に記載の機器操作方法。
13. 前記撮影画像を含む前記操作画面を表示するステップと、
    前記操作画面に含まれる前記撮影画像の大きさを変更する前記操作内容を取得するステップと、
    を有し、
    前記送信するステップにおいて、前記操作内容が示す前記撮影画像の大きさに基づいて、前記電子機器が画面に表示する画像の大きさを設定する前記設定指示情報を前記電子機器に送信することを特徴とする、
    請求項９から１２のいずれか１項に記載の機器操作方法。
14. 前記撮影画像を取得するステップを実行する前に行われたユーザーの操作に基づいて、前記撮影画像に含まれる、前記電子機器が有する操作手段を含む画像により特定される前記機能の種別を特定するステップをさらに有し、
    前記電子機器の機能を特定するステップにおいて、前記機能の種別と前記電子機器が有する操作手段を含む画像とに基づいて、前記操作手段に対応する機能を特定することを特徴とする、
    請求項９から１３のいずれか１項に記載の機器操作方法。
15. コンピュータに、
    複数の機能を有する電子機器の一部を含む撮影画像を取得するステップと、
    前記撮影画像に含まれる、前記電子機器が有する操作手段を含む画像に基づいて、前記撮影画像に関連する前記電子機器の機能を特定するステップと、
    特定した前記機能に対応する操作画面を表示する制御を行うステップと、
    前記操作画面において入力された操作内容を取得するステップと、
    前記操作内容に基づいて、前記機能の動作を設定する設定指示情報を前記電子機器に送信するステップと、
    を実行させることを特徴とする、機器操作用プログラム。