JP2022146234A - 電子機器、システム、方法及びプログラム - Google Patents

Abstract

【課題】装置の構成を簡単にするとともに、操作などのコマンドを容易かつ確実に実行することである。【解決手段】システム１αの電子機器、投影装置としてのプロジェクター１は、外部機器３０から送信される入力画像データに含まれるコマンド画像データを取得し、取得された前記コマンド画像データに基づいて、コマンドを認識し、認識された前記コマンドに応じた処理を実行する、少なくとも１つのプロセッサとしてのＣＰＵ１１を備える。【選択図】図２

Description

本発明は、電子機器、システム、方法及びプログラムに関する。

従来、静止画又は動画の入力画像（映像）をスクリーンに投影するプロジェクター（投影装置）が知られている。プロジェクターに対して何かしらの操作を行う場合は、通常は本体又はリモコンのボタン操作を用いる方法がある。また、別の方法として、制御用の通信を経由して操作の内容をプロジェクターに通知する方法もある。

また、時刻設定のガイド画像をスクリーンに投影し、当該スクリーンに日時の文字をユーザが記入（手書き）し、当該スクリーンを撮像して文字を認識することにより、認識した文字の日時を設定する画像表示装置が知られている（特許文献１参照）。

特開２０１３－１７４６８６号公報

しかし、上記本体又はリモコンのボタン操作を用いる方法の場合、人の手を介して操作を行う必要が生じるため、ボタン操作が困難な環境、状況ではプロジェクターに対する操作ができないおそれがあった。また、上記制御用の通信を経由する方法の場合、プロジェクターで投映する入力画像データの通信とは別の、制御用の通信の仕組みを用意しなくてはいけなく、装置の構成が複雑となる。

また、上記特許文献１の画像表示装置では、スクリーンに文字を手書きするため、ユーザの作業負担が大きく、また入力画像の投影と並行して装置への操作ができない。さらに、上記画像表示装置では、スクリーンを撮像する撮像部など、追加の部品が必要となり、装置の構成がさらに複雑となる。

本発明の課題は、装置の構成を簡単にするとともに、操作などのコマンドを容易かつ確実に実行することである。

上記課題を解決するために、本発明の電子機器は、外部機器から送信される入力画像データに含まれるコマンド画像データを取得し、取得された前記コマンド画像データに基づいて、コマンドを認識し、認識された前記コマンドに応じた処理を実行する、少なくとも１つのプロセッサを備える。

また、本発明のシステムは、コマンド画像データを含む入力画像データを出力する外部機器と、投影装置と、を含み、前記投影装置が、前記外部機器により出力された前記入力画像データを取得し、取得された前記入力画像データに含まれるコマンド画像データに基づいて、コマンドを認識し、認識された前記コマンドに応じた処理を実行する。

本発明によれば、装置の構成を簡単にできるとともに、コマンドを容易かつ確実に実行できる。

本発明の実施の形態のプロジェクターの外観図である。 システムの回路構成を示すブロック図である。 本体部の機能構成を示すブロック図である。 コマンドテーブルを示す図である。 画像認識処理を示すフローチャートである。 文字認識処理を示すフローチャートである。 実施の形態の入力画像を投影する本体部を示す図である。 第１の変形例の入力画像を投影する本体部を示す図である。 第２の変形例の入力画像を投影する本体部を示す図である。 コマンドシリアル番号及びコマンド文字列の一例を示す図である。

以下、添付図面を参照して本発明に係る実施の形態及び第１～第４の変形例を順に詳細に説明する。なお、本発明は、図示例に限定されるものではない。

（実施の形態）
図１～図７を参照して、本発明に係る実施の形態を説明する。まず、図１～図３を参照して、本実施の形態の装置構成を説明する。図１は、本実施の形態のプロジェクター１の外観図である。図２は、本体部１０の回路構成を示すブロック図である。図３は、本体部１０の機能構成を示すブロック図である。

図１に示すように、電子機器、投影装置としてのプロジェクター１は、オフィスなどに設置され、静止画又は動画の入力画像データの入力画像をスクリーンに投影する装置である。プロジェクター１は、本体部１０と、電力供給部２０と、を備える。本体部１０は、入力画像の投影を行うプロジェクター１の本体である。本体部１０は、例えば、略直方体形状の筐体を有するが、筐体の角が落とされていたり丸められていたり、あるいは、各面に凹凸などを有したりしていてもよい。あるいは、本体部１０の筐体は、直方体とは異なる形状、例えば、楕円柱形状などの曲面を有する形状であってもよい。本体部１０の筐体には、投影光の出射口としての投影レンズ１４１が配置されている。

本体部１０の筐体の前面に隣接する面の１つ（底面／下面）には、長さを変更して固定することのできる脚部１０１が複数、例えば、３本（ここでは２本を図示）設けられており、それぞれの長さを調整することで、投影光の出射方向、すなわち、画像の投影方向を定めることができる。本体部１０は、必ずしもこの底面を設置面としなくてもよく、９０度回転させて縦置きがなされてもよい。縦置きされた場合にも投影方向の調整が可能に、脚部が底面以外の面にも設けられていてもよいし、底面の脚部を取り外して他の面に取り付け可能な取付部を有していてもよい。本体部１０の筐体の底面とは反対側の面（上面）には、（押し）ボタンなどを含む操作部１２が設けられている。

本体部１０の筐体の底面に垂直な４面（前面を含む）などには、それぞれ適宜吸気口１０２が設けられ、前面には排気口１０３が設けられている。また、本体部１０の筐体の前面と対向する背面には、外部機器３０（図２、図３）と接続されるケーブルの入力端子や、電力供給部２０の本体部２１と接続する電力供給ケーブル２２の接続端子などが位置している。外部機器３０は、投影用の入力画像データをプロジェクター１に送信する装置であり、例えば、ＰＣ（Personal Computer）である。電力供給ケーブル２２は、本体部１０を動作させない状況では、本体部１０の筐体の接続端子から取り外しが可能である。

電力供給部２０は、本体部１０へ電力を供給し、バッテリ、ＡＣ（Alternating Current）／ＤＣ（Direct Current）変換部などを有する本体部２１と、電力供給ケーブル２２と、ケーブル２３と、を備える。電力供給部２０は、本体部２１のバッテリから入力される電力を、又は外部電源（外部のＡＣ電源、主に商用電源）Ｃ１から入力される電力をＡＣ／ＤＣ変換部で変換して、所定の直流電圧で本体部１０へ供給する。電力供給部２０は、外部電源（例えば、交流１００Ｖの商用電源の電力供給端子（コンセント））Ｃ１と電力供給部２０の本体部２１との間は、ケーブル２３により接続される。ケーブル２３は、本体部２１と着脱可能であってよい。

ついで、図２、図３を参照して、プロジェクター１の本体部１０の内部の回路構成を説明する。図２に示すように、システム１αは、プロジェクター１（図２では電力供給部２０の図示略）と、外部機器３０と、を備える。プロジェクター１の本体部１０は、ＣＰＵ（Central Processing Unit）１１と、操作部１２と、ＲＡＭ（Random Access Memory）１３と、投影部１４と、記憶部１５と、通信部１６と、音声出力部１７と、ＲＴＣ（Real Time Clock）１８と、電源部１９と、を備える。本体部１０の電源部１９を除く各部は、バスＢ１を介して互いに接続されている。

ＣＰＵ１１は、本体部１０の動作を統括制御するハードウェアプロセッサである。ＣＰＵ１１は、記憶部１５に記憶されたプログラムのうち、指定されたプログラムをＲＡＭ１３に展開し、展開したプログラムとの協働で、各種処理を実行する。

本実施の形態においては、ＣＰＵ１１は、記憶部１５に記憶された画像認識プログラムＰ１、文字認識プログラムＰ２に従い、後述する画像認識処理、文字認識処理を実行する。より具体的には、図３に示すように、ＣＰＵ１１は、画像認識プログラムＰ１、文字認識プログラムＰ２に従い、画像認識処理部１１１、文字認識処理部１１２、映像信号入力部１１３、投影制御部１１４、プロジェクター制御部１１５として機能する。

画像認識処理部１１１は、映像信号入力部１１３から入力された入力画像データの入力画像（フレーム）をキャプチャしてキャプチャ画像データを生成する。文字認識処理部１１２は、画像認識処理部１１１でされたキャプチャ画像データを文字認識し、認識された文字列に対応する操作のコマンドを取得する。映像信号入力部１１３は、通信部１６を介して外部機器３０から受信された入力画像データを映像信号（入力画像信号）に変換し、また当該入力された入力画像データを画像認識処理部１１１に出力する。投影制御部１１４は、投影部１４の制御を行い、映像信号入力部１１３から入力された映像信号に従い、入力画像を投影部１４によりスクリーンＳＣに投影させる。スクリーンＳＣは、プロジェクター１から投影された画像を映し出す平面である。

プロジェクター制御部１１５は、文字認識処理部１１２で取得されたコマンドに応じて、投影制御部１１４（投影部１４）などの本体部１０の各部を制御する。画像認識処理部１１１、文字認識処理部１１２、映像信号入力部１１３、投影制御部１１４、プロジェクター制御部１１５の動作は、より具体的に後述する。

図２に戻り、操作部１２は、各種ボタン（キー）を有し、ユーザなどの外部からのキー操作を受け付け、操作情報としてＣＰＵ１１へ出力する。各種ボタンは、例えば、上下左右の入力を受け付けるカーソルキーと、決定の入力を受け付けるＥＮＴＥＲキーと、解除の入力を受け付けるＥＳＣキーと、メニュー表示、終了などの入力を受け付けるＭＥＮＵキーと、を含む。操作部１２は、電源キーを含んでもよい。なお、操作部１２は、リモートコントローラと、当該リモートコントローラからの信号（赤外線信号など）を受け付ける受信部と、を有する構成としてもよい。

ＲＡＭ１３は、情報を読み出し及び書き込み可能な揮発性の半導体メモリである。ＲＡＭ１３は、ＣＰＵ１１に作業用のワークエリアを提供し、データ及びプログラムを一時的に記憶する。

投影部１４は、ＣＰＵ１１の指示に従い、ＲＧＢ各色の光を生成し、入力された画像データに応じた画素位置及びタイミングで投影光を生成して出射させる。投影部１４は、例えば、光源としての発光部と、投影レンズ１４１などの光学系と、モータなどの駆動部と、熱排出（排気）用のファンと、を有する。この光学系は、レンズ、プリズム、ミラー、フィルタなどの一部又は全部の光学部品を有し、各光学部品のうち少なくとも一部は、焦点位置の調整のために光軸方向に移動可能であってよい。また、この光学系には、ＤＬＰ（Digital Light Processing）に係る可動ミラー、例えば、表示画素数に応じて二次元配列されたデジタル（マイクロ）ミラーデバイス（ＤＭＤ：Digital Mirror Device）などが含まれていてもよい。

記憶部１５は、情報を読み出し及び書き込み可能なフラッシュメモリなどの記憶部であり、各種データ及びプログラムが記憶される。特に、記憶部１５には、画像認識プログラムＰ１、文字認識プログラムＰ２と、後述するコマンドテーブル４０と、が記憶されている。

通信部１６は、所定の通信規格により、外部機器３０との間で有線式の通信を行う。ＣＰＵ１１は、通信部１６を介して、外部機器３０との間で情報の送受信が可能である。所定の通信規格は、アナログＲＧＢ信号、ＵＳＢ（Universal Serial Bus）、ＨＤＭＩ（High Definition Multimedia Interface；登録商標）などが挙げられ、これらのうち複数から選択的に使用可能であってもよい。

また、通信部１６は、ＩＥＥＥ８０２．１１などの無線ＬＡＮ（Local Area Network）の規格により、外部機器３０との間で無線式の通信を行う無線ＬＡＮ通信部を含む構成としてもよい。

音声出力部１７は、アンプ、スピーカーなどを有し、ＣＰＵ１１から入力された音声データに従い、音声の電気信号を生成し適宜増幅して音声出力する。特に、音声出力部１７は、外部機器３０から入力された動画の入力画像データの音声データに従い音声出力が可能である。

ＲＴＣ１８は、現在の日時を計時する計時部であり、計時した現在の日時情報をＣＰＵ１１に出力する。

電源部１９は、電力供給部２０を介して供給された直流電力を本体部１０の各部に供給するＤＣ／ＤＣコンバータなどの電源部である。

つぎに、図４を参照して、記憶部１５に記憶される情報を説明する。図４は、コマンドテーブル４０を示す図である。

図４に示すように、記憶部１５には、コマンドテーブル４０が記憶されている。コマンドテーブル４０は、コマンド文字列４１と、プロジェクター制御内容４２と、の項目を有する。コマンド文字列４１は、プロジェクター１を制御するための操作のコマンドを識別する文字列である。プロジェクター制御内容４２は、コマンド文字列４１のコマンドの制御内容を示す情報である。

例えば、コマンド文字列４１の「ＢＲＩＧＨＴ：「数値」」は、投影部１４の投影の明るさを「数値」の明るさに設定するコマンドである。コマンド文字列４１の「ＶＯＬＵＭＥ：「数値」」は、音声出力部１７の出力音声のボリュームを「数値」のボリュームに設定するコマンドである。コマンド文字列４１の「ＢＬＡＮＫ：ＯＮ／ＯＦＦ」は、投影部１４により映像信号（入力画像）をスクリーンに投影するか（ＯＮ）否か（ＯＦＦ）を示すコマンドである。ただし、コマンド文字列４１及びプロジェクター制御内容４２のコマンドは、これらに限定されるものではない。

つぎに、図５～図７を参照して、プロジェクター１（本体部１０）の動作を説明する。図５は、画像認識処理を示すフローチャートである。図６は、文字認識処理を示すフローチャートである。図７は、入力画像２００Ａを投影する本体部１０を示す図である。

あらかじめ、外部機器３０に格納されている投影対象の入力画像データには、プロジェクター１を制御するため操作のコマンドの文字列が投影時の適切なタイミングに含められているものとする。動画又は静止画（例えば、スライドショー）の入力画像データにおいて、コマンドの文字列が当該コマンドを実行するタイミング（のフレーム）の少なくとも１フレームの全面又はその一部に含められているものとする。換言すれば、ユーザは、プロジェクター１に対して、例えば後述する明るさの設定を行う等の所定の制御を行いたい場合に、あらかじめ設定されたコマンドが文字列として含まれる入力画像を外部機器３０から入力すればよい。

図３に示すように、電力供給部２０により電力供給されている本体部１０において、電源がオンされ、ＣＰＵ１１は、映像信号入力部１１３、投影制御部１１４として機能しているものとする。映像信号入力部１１３は、通信部１６を介して、外部機器３０から受信された入力画像データを映像信号に変換して投影制御部１１４に出力する。投影制御部１１４は、映像信号入力部１１３から入力された映像信号に従い、投影部１４により当該映像信号の画像（入力画像）をスクリーンＳＣに投影し、音声出力部１７に、適宜当該映像信号の音声データ（音声信号）を音声出力させる。

上記投影と並行して、本体部１０において、電源がオンされたことをトリガーとして、ＣＰＵ１１は、記憶部１５に記憶されている画像認識プログラムＰ１に従い、画像認識処理を実行し、記憶部１５に記憶されている文字認識プログラムＰ２に従い、文字認識処理を実行する。このため、以下、ＣＰＵ１１は、画像認識処理部１１１、文字認識処理部１１２、映像信号入力部１１３、投影制御部１１４、プロジェクター制御部１１５として機能するものとして説明する。

図５に示すように、画像認識処理部１１１は、ＲＴＣ１８により計時された現在の日時情報を用いて、入力画像データから画像をキャプチャするためのタイマーのカウント値の計測（カウント）を開始する（ステップＳ１１）。そして、画像認識処理部１１１は、計測中のタイマーのカウント値が（ステップＳ１１又は前回タイマーのカウント値クリアのタイミングから）、あらかじめ設定された所定間隔（所定時間間隔）を経過したか否かを判別する（ステップＳ１２）。ステップＳ１２の所定間隔は、例えば１０００［ｍｓ］とするが、この例に限定されるものではない。

所定間隔を経過していない場合（ステップＳ１２；ＮＯ）、ステップＳ１２に移行される。所定間隔を経過した場合（ステップＳ１２；ＹＥＳ）、画像認識処理部１１１は、計測中のタイマーのカウント値をクリアする（ステップＳ１３）。そして、画像認識処理部１１１は、映像信号入力部１１３から入力画像データの現在投影中の入力画像の１フレームをキャプチャし、１フレームのキャプチャ画像データとして取得する（ステップＳ１４）。

そして、画像認識処理部１１１は、ステップＳ１４で取得したキャプチャ画像データと、当該キャプチャ画像データの文字認識開始指示を文字認識処理部１１２に通知し（ステップＳ１５）、ステップＳ１２に移行する。

図６に示すように、文字認識処理部１１２は、画像認識処理のステップＳ１５に対応して、キャプチャ画像データ及び文字認識開始指示を画像認識処理部１１１から通知されたか否かにより、文字認識を開始するか否かを判別する（ステップＳ２１）。文字認識を開始しない場合（ステップＳ２１；ＮＯ）、ステップＳ２１に移行される。

文字認識を開始する場合（ステップＳ２１；ＹＥＳ）、文字認識処理部１１２は、ＯＣＲ（Optical Character Recognition）技術などを用いて、ステップＳ２１で入力されたキャプチャ画像データの画像（キャプチャ画像）を画像認識し、キャプチャ画像に含められた文字列を認識する（ステップＳ２２）。そして、文字認識処理部１１２は、コマンドテーブル４０を記憶部１５から読み出し、ステップＳ２２で認識された文字列に一致するコマンド文字列４１をコマンドテーブル４０から検索する（ステップＳ２３）。

そして、文字認識処理部１１２は、ステップＳ２３で、認識された文字列に一致するコマンド文字列４１があるか否かを判別する（ステップＳ２４）。一致するコマンド文字列４１がない場合（ステップＳ２４；ＮＯ）、ステップＳ２１に移行される。

一致するコマンド文字列４１がある場合（ステップＳ２４；ＹＥＳ）、文字認識処理部１１２は、一致したコマンド文字列４１に対応するプロジェクター制御内容４２のコマンドを生成しプロジェクター制御部１１５に出力してコマンドを実行させ（ステップＳ２５）、ステップＳ２１に移行する。プロジェクター制御部１１５は、入力されたコマンドを実行して、プロジェクター１のコマンド制御の対象部分の制御を行う。

例えば、図７に示すように、本体部１０により、入力画像２００ＡがスクリーンＳＣに投影されるケースを考える。入力画像２００Ａは、動画の入力画像データの１フレームであり、「ＢＲＩＧＨＴ：５０」の文字列２１０を含む。

画像認識処理のステップＳ１４で入力画像２００Ａのフレームがキャプチャされる。そして、文字認識処理のステップＳ２２で文字列２１０の「ＢＲＩＧＨＴ：５０」が認識され、ステップＳ２３で「ＢＲＩＧＨＴ：５０」のコマンド文字列４１が検索され、ステップＳ２５で「ＢＲＩＧＨＴ：５０」のコマンド文字列４１に対応する「明るさを「５０」にする」のプロジェクター制御内容４２のコマンドが実行される。

以上、本実施の形態によれば、プロジェクター１は、外部機器３０から送信される入力画像データ（のキャプチャ画像データ）に含まれるコマンド画像データ（コマンドの画像情報）を取得し、取得されたコマンド画像データに基づいて、コマンドを認識し、認識されたコマンドに応じた処理を実行する、少なくとも１つのプロセッサとしてのＣＰＵ１１（画像認識処理部１１１、文字認識処理部１１２、プロジェクター制御部１１５）を備える。システム１αは、プロジェクター１と、外部機器３０と、を備える。

このため、プロジェクター１に撮像部を設けなくてもよく、プロジェクター１の装置の構成を簡単にできるとともに、ユーザがスクリーンに手書きをすることなく、入力画像データに基づいて、プロジェクター１への操作のコマンドを容易かつ確実に実行できる。特に、例えば産業用（組込モデル）環境など、ボタン操作が困難でかつ通信手段にも制限がある環境、状況でも、プロジェクター１に対するコマンド実行が可能になる。

また、コマンドの画像情報は、コマンドに対応する文字列を有する。ＣＰＵ１１は、キャプチャ画像データから文字列を認識して当該文字列に対応するコマンドを認識する。このため、コマンドを容易かつ確実に認識できる。

また、ＣＰＵ１１は、入力画像データのフレームから、あらかじめ設定された所定間隔（所定時間間隔）でキャプチャ画像データ（のコマンドの画像情報）を取得する。このため、ユーザがキャプチャのタイミングを意識することなく、コマンドの画像情報を容易に取得できる。

（第１の変形例）
図８を参照して、上記実施の形態の第１の変形例を説明する。図８は、入力画像２００Ｂを投影する本体部１０を示す図である。

本変形例の装置構成は、上記実施の形態のプロジェクター１を用いるものとする。上記実施の形態では、入力画像データのフレームにコマンドの文字列のみが含められていたが、本変形例では、コマンドの文字列に加えて既定のマーカーも含められる。

例えば、図８に示すように、本体部１０により、入力画像２００ＢがスクリーンＳＣに投影されるケースを考える。入力画像２００Ｂは、動画の入力画像データの１フレームで、「ＢＲＩＧＨＴ：５０」の文字列２１０と、マーカー２２０と、を含む。マーカー２２０は、フレーム内にコマンドの文字列を含むことを示す既定のマーカーであり、例えば、ＡＲ（Augmented Reality）マーカーとするが、これに限定されるものではない。

本変形例では、プロジェクター１の本体部１０において、上記実施の形態と同様の画像認識処理、文字認識処理が実行される。例えば、画像認識処理のステップＳ１４で、画像認識処理部１１１により、入力画像２００Ｂのフレームがキャプチャされる。ただし、文字認識処理のステップＳ２２では、文字認識処理部１１２により、まず、キャプチャ画像データのキャプチャ画像が画像解析され、既定のマーカー２２０を含むか否かが判別され、既定のマーカー２２０を含む場合に、文字列（例えば、文字列２１０の「ＢＲＩＧＨＴ：５０」）が画像解析されて取得（認識）される。

以上、本変形例によれば、コマンドの画像情報は、コマンドに対応する文字列と、文字列があることを示すマーカー２２０と、を有する。ＣＰＵ１１は、コマンドの画像情報からマーカー２２０を認識し、マーカー２２０が認識された場合に、当該コマンドの画像情報から文字列２１０を認識する。このため、コマンドを正確に実行でき、不要な文字列の認識を防ぐことができる。

（第２の変形例）
図９を参照して、上記実施の形態の第２の変形例を説明する。図９は、入力画像２００Ｃを投影する本体部１０を示す図である。

本変形例の装置構成は、上記実施の形態のプロジェクター１を用いるものとする。上記実施の形態では、入力画像データのフレームにコマンドの文字列のみが含められていたが、本変形例では、コマンドの文字列に代えて、シンボルとしてのＱＲ（Quick Response）コード（登録商標）などの二次元コードが含められる。

例えば、図９に示すように、本体部１０により、入力画像２００ＣがスクリーンＳＣに投影されるケースを考える。入力画像２００Ｃは、動画の入力画像データの１フレームで、「ＢＲＩＧＨＴ：５０」の文字列がエンコードされた二次元コード２３０を含む。

本変形例では、プロジェクター１の本体部１０において、上記実施の形態と同様の画像認識処理、文字認識処理が実行される。例えば、画像認識処理のステップＳ１４で、画像認識処理部１１１により、入力画像２００Ｃのフレームがキャプチャされる。ただし、文字認識処理のステップＳ２２では、文字認識処理部１１２により、まず、キャプチャ画像データのキャプチャ画像が画像解析され、当該キャプチャ画像に二次元コードが含まれる場合に、当該二次元コードがデコードされて含まれる文字列が取得（認識）される。なお、シンボルとしては、二次元コードに代えて、一次元のバーコードとする構成でもよい。

以上、本変形例によれば、コマンドの画像情報は、コマンドに対応する文字列がエンコードされたシンボル（二次元コードなど）を有する。ＣＰＵ１１は、コマンドの画像情報からシンボルを認識してデコードし、デコードした文字列に対応するコマンドを認識する。このため、コマンドを容易かつ確実に認識できるとともに、入力画像の視聴の邪魔となるおそれがあるコマンドの文字列を視聴者に見せることを防ぐことができる。

（第３の変形例）
図１０を参照して、上記実施の形態の第３の変形例を説明する。図１０は、コマンドシリアル番号及びコマンド文字列の一例を示す図である。

本変形例の装置構成は、上記実施の形態のプロジェクター１を用いるものとする。上記実施の形態では、入力画像データのフレームのコマンドの文字列のみが認識され、認識された文字列に対応するコマンドが実行されていた。しかし、所定間隔のキャプチャ及び認識のため、複数フレームに連続して同じコマンドの文字列が含められる場合に、同じコマンドが連続して認識され、ユーザが意図せずに同じコマンドが連続して実行されるおそれがある。特に、コマンドが相対的な操作の制御内容（例えば、「明るさを＋１する」）に対応する場合に、コマンドの実行結果が不具合になるおそれがある。

本変形例では、入力画像データの入力画像に、実行するコマンド識別を識別するためのコマンドシリアル番号と、コマンドの文字列と、が対応付けられて含められる。

例えば、図１０に示すように、コマンドシリアル番号の「＜ＣＭＤ：０００１＞」と、コマンドの文字列の「ＢＲＩＧＨＴ：３０」と、が対応付けられ、コマンドシリアル番号の「＜ＣＭＤ：０００２＞」と、コマンドの文字列の「ＶＯＬＵＭＥ：８」と、が対応付けられ、コマンドシリアル番号の「＜ＣＭＤ：０００３＞」と、コマンドの文字列の「ＢＬＡＮＫ：ＯＮ」と、が対応付けられている。

動画の入力画像データの入力画像のある時刻の複数の各フレーム内には、コマンドシリアル番号「＜ＣＭＤ：０００１＞」及び文字列「ＢＲＩＧＨＴ：３０」が同時に含められ、それ以降の時刻の別の複数の各フレーム内には、コマンドシリアル番号「＜ＣＭＤ：０００２＞」及び文字列「ＶＯＬＵＭＥ：８」が同時に含められる。さらに、それ以降の時刻の別の複数の各フレーム内には、コマンドシリアル番号「＜ＣＭＤ：０００３＞」及び文字列「ＶＯＬＵＭＥ：８」が同時に含められる。

本変形例では、プロジェクター１の本体部１０において、上記実施の形態と同様の画像認識処理、文字認識処理が実行される。例えば、画像認識処理のステップＳ１４で、画像認識処理部１１１により、入力画像データのフレームがキャプチャされる。ただし、文字認識処理のステップＳ２２では、文字認識処理部１１２により、まず、キャプチャ画像データのキャプチャ画像が画像解析され、コマンドシリアル番号及びコマンドの文字列が認識され、認識されたコマンドシリアル番号が既に実行されたコマンドのコマンドシリアル番号より後の番号（次番）であるか否かが判別される。そして、文字認識処理部１１２により、認識されたコマンドシリアル番号が、実行されたコマンドのコマンドシリアル番号より後の番号である場合に、ステップＳ２３に移行される。認識されたコマンドシリアル番号が、実行されたコマンドのコマンドシリアル番号より後の番号でない場合に、一度実行された同じコマンドの再実行を防ぐため、ステップＳ２１に移行される。

以上、本変形例によれば、コマンドの画像情報は、コマンドに対応する文字列と、コマンドの実行順を示す識別情報としてのコマンドシリアル番号と、を有する。ＣＰＵ１１は、コマンドの画像情報から文字列及びコマンドシリアル番号を認識し、認識したコマンドシリアル番号が過去に認識した識別情報でない場合に、当該文字列に対応するコマンドを次の実行対象として認識する。このため、同じ文字列のコマンドが再実行されるのを防ぐことができ、コマンドをコマンドシリアル番号順（実行予定順）に正確に実行できる。

（第４の変形例）
上記実施の形態の第４の変形例を説明する。上記実施の形態では、一定の所定間隔で入力画像データのフレームをキャプチャする構成としたが、本変形例では、ユーザの操作入力に応じて、フレームをキャプチャする構成とする。

本変形例の装置構成は、上記実施の形態のプロジェクター１を用いるものとする。本変形例では、プロジェクター１の本体部１０において、上記実施の形態と同様の画像認識処理、文字認識処理が実行される。ただし、画像認識処理において、ステップＳ１１、Ｓ１３が実行されず、またステップＳ１２において、画像認識処理部１１１により、操作部１２を介して、ユーザからフレームのキャプチャの指示が操作入力されたか否かが判別される。キャプチャの指示が操作入力された場合（ステップＳ１２；ＹＥＳ）、ステップＳ１４に移行される。キャプチャの指示が操作入力されていない場合（ステップＳ１２；ＮＯ）、ステップＳ１２に移行される。

なお、操作部１２を介するユーザからのフレームのキャプチャの指示入力に代えて、通信部１６を介する外部機器３０又は他の外部機器からのフレームのキャプチャの実行指示の受信としてもよい。この場合、例えば、外部機器３０又は他の外部機器において、操作部１２を介するユーザからのフレームのキャプチャの実行指示の操作入力に応じて、フレームのキャプチャの指示情報が本体部１０に送信される。

本変形例によれば、ＣＰＵ１１は、操作部１２を介するキャプチャ（コマンドの画像情報の取得）の実行の操作入力、又は外部機器３０若しくは他の外部機器からのキャプチャの実行指示の受信に応じて、受信された入力画像データのフレームをキャプチャしてコマンドの画像情報を取得する。このため、ユーザの所望のタイミングでコマンドを実行できる。

以上の説明では、本発明に係るプログラムのコンピュータ読み取り可能な媒体としてフラッシュメモリなどの不揮発性の記憶部を使用した例を開示したが、この例に限定されない。その他のコンピュータ読み取り可能な媒体として、ＣＤ－ＲＯＭなどの可搬型記録媒体を適用することが可能である。また、本発明に係るプログラムのデータを通信回線を介して提供する媒体として、キャリアウエーブ（搬送波）も本発明に適用される。

なお、上記実施の形態及び各変形例における記述は、本発明に係る電子機器、システム、方法及びプログラムの一例であり、これに限定されるものではない。例えば、上記実施の形態及び上記又は下記の変形例の少なくとも２つを適宜組み合わせる構成としてもよい

また、上記実施の形態、第１、第２の変形例では、ユーザが視認できるコマンドの文字列又は二次元コード（シンボル）を入力画像データの入力画像に含める構成としたが、第５の変形例として、ユーザが目視により（人間の目では）判別困難な形態でコマンドの画像情報（文字列、シンボルなど）を入力画像データのフレーム（入力画像）に含める構成としてもよい。

第５の変形例において、ユーザが目視により判別困難な形態のコマンドの画像情報は、例えば、外部機器３０により、電子透かし（ウォーターマーク）技術を用いて、入力画像データの入力画像（フレーム）に埋め込まれている。このため、視聴の邪魔になるおそれがあるコマンドの画像情報を視聴者に見せることを防ぐことができる。

また、上記実施の形態では、画像キャプチャを用いて文字列を認識し実行するコマンドがプロジェクター１への操作のコマンドであったが、第６の変形例として、画像キャプチャを用いて文字列を認識し実行するコマンドがプロジェクター１への各種設定のコマンドなど、他の種類のコマンドとする構成としてもよい。

また、上記実施の形態及び各変形例では、本発明の電子機器として、プロジェクター１を説明したが、これに限定されるものではない。第７の変形例として、本発明の電子機器としては、少なくとも、入力画像データの入力画像を投影又は表示可能でコマンドが実行可能な電子機器であればよく、ディスプレイモニター、デスクトップＰＣ、パームトップＰＣ、携帯端末（スマートフォン、タブレットＰＣなど）などとしてもよい。

また、上記実施の形態及び変形例におけるプロジェクター１の各構成要素の細部構成及び細部動作に関しては、本発明の趣旨を逸脱することのない範囲で適宜変更可能であることは勿論である。

本発明の実施の形態及び変形例を説明したが、本発明の範囲は、上述の実施の形態及び変形例に限定するものではなく、特許請求の範囲に記載された発明の範囲とその均等の範囲を含む。
以下に、この出願の願書に最初に添付した特許請求の範囲に記載した発明を付記する。付記に記載した請求項の項番は、この出願の願書に最初に添付した特許請求の範囲の通りである。
〔付記〕
＜請求項１＞
外部機器から送信される入力画像データに含まれるコマンド画像データを取得し、
取得された前記コマンド画像データに基づいて、コマンドを認識し、
認識された前記コマンドに応じた処理を実行する、
少なくとも１つのプロセッサを備える電子機器。
＜請求項２＞
前記コマンド画像データは、前記コマンドに対応する文字列を有し、
前記プロセッサは、前記コマンド画像データから文字列を認識して当該文字列に対応するコマンドを認識する請求項１に記載の電子機器。
＜請求項３＞
前記コマンド画像データは、前記コマンドに対応する文字列と、当該文字列があることを示すマーカーと、を有し、
前記プロセッサは、前記コマンド画像データから前記マーカーを認識し、当該マーカーが認識された場合に、当該コマンド画像データから文字列を認識する請求項２に記載の電子機器。
＜請求項４＞
前記コマンド画像データは、前記コマンドに対応する文字列と、当該コマンドの実行順を示す識別情報と、を有し、
前記プロセッサは、前記コマンド画像データから文字列及び識別情報を認識し、当該認識した識別情報が過去に認識した識別情報でない場合に、当該文字列に対応するコマンドを次の実行対象として認識する請求項２又は３に記載の電子機器。
＜請求項５＞
前記コマンド画像データは、前記コマンドに対応する文字列がエンコードされたシンボルを有し、
前記プロセッサは、前記コマンド画像データからシンボルを認識してデコードし、当該デコードした文字列に対応するコマンドを認識する請求項１から４のいずれか一項に記載の電子機器。
＜請求項６＞
前記プロセッサは、前記入力画像データのフレームから、あらかじめ設定された所定間隔で前記コマンド画像データを取得する請求項１から５のいずれか一項に記載の電子機器。
＜請求項７＞
前記プロセッサは、コマンド画像データの取得の実行の操作入力又は外部機器からのコマンド画像データの取得の実行指示の受信に応じて、前記受信された入力画像データのフレームから前記コマンド画像データを取得する請求項１から６のいずれか一項に記載の電子機器。
＜請求項８＞
前記コマンド画像データは、電子透かしにより、前記入力画像データのフレームに埋め込まれている請求項１から７のいずれか一項に記載の電子機器。
＜請求項９＞
コマンド画像データを含む入力画像データを出力する外部機器と、
投影装置と、
を含み、
前記投影装置が、
前記外部機器により出力された前記入力画像データを取得し、
取得された前記入力画像データに含まれるコマンド画像データに基づいて、コマンドを認識し、
認識された前記コマンドに応じた処理を実行する、
システム。
＜請求項１０＞
電子機器の少なくとも１つのプロセッサが、
外部機器から送信される入力画像データに含まれるコマンド画像データを取得し、
取得された前記コマンド画像データに基づいて、コマンドを認識し、
認識された前記コマンドに応じた処理を実行する、
方法。
＜請求項１１＞
電子機器の少なくとも１つのプロセッサが、
外部機器から送信される入力画像データに含まれるコマンド画像データを取得し、
取得された前記コマンド画像データに基づいて、コマンドを認識し、
認識された前記コマンドに応じた処理を実行する、
プログラム。

１α システム
１ プロジェクター
１０ 本体部
１０１ 脚部
１０２ 吸気口
１０３ 排気口
１１ ＣＰＵ
１１１ 画像認識処理部
１１２ 文字認識処理部
１１３ 映像信号入力部
１１４ 投影制御部
１１５ プロジェクター制御部
１２ 操作部
１３ ＲＡＭ
１４ 投影部
１４１ 投影レンズ
１５ 記憶部
１６ 通信部
１７ 音声出力部
１８ ＲＴＣ
１９ 電源部
Ｂ１ バス
２０ 電力供給部
２１ 本体部
２２ 電力供給ケーブル
２３ ケーブル
Ｃ１ 外部電源

Claims (11)

1. 外部機器から送信される入力画像データに含まれるコマンド画像データを取得し、
   取得された前記コマンド画像データに基づいて、コマンドを認識し、
   認識された前記コマンドに応じた処理を実行する、
   少なくとも１つのプロセッサを備える電子機器。
2. 前記コマンド画像データは、前記コマンドに対応する文字列を有し、
   前記プロセッサは、前記コマンド画像データから文字列を認識して当該文字列に対応するコマンドを認識する請求項１に記載の電子機器。
3. 前記コマンド画像データは、前記コマンドに対応する文字列と、当該文字列があることを示すマーカーと、を有し、
   前記プロセッサは、前記コマンド画像データから前記マーカーを認識し、当該マーカーが認識された場合に、当該コマンド画像データから文字列を認識する請求項２に記載の電子機器。
4. 前記コマンド画像データは、前記コマンドに対応する文字列と、当該コマンドの実行順を示す識別情報と、を有し、
   前記プロセッサは、前記コマンド画像データから文字列及び識別情報を認識し、当該認識した識別情報が過去に認識した識別情報でない場合に、当該文字列に対応するコマンドを次の実行対象として認識する請求項２又は３に記載の電子機器。
5. 前記コマンド画像データは、前記コマンドに対応する文字列がエンコードされたシンボルを有し、
   前記プロセッサは、前記コマンド画像データからシンボルを認識してデコードし、当該デコードした文字列に対応するコマンドを認識する請求項１から４のいずれか一項に記載の電子機器。
6. 前記プロセッサは、前記入力画像データのフレームから、あらかじめ設定された所定間隔で前記コマンド画像データを取得する請求項１から５のいずれか一項に記載の電子機器。
7. 前記プロセッサは、コマンド画像データの取得の実行の操作入力又は外部機器からのコマンド画像データの取得の実行指示の受信に応じて、前記受信された入力画像データのフレームから前記コマンド画像データを取得する請求項１から６のいずれか一項に記載の電子機器。
8. 前記コマンド画像データは、電子透かしにより、前記入力画像データのフレームに埋め込まれている請求項１から７のいずれか一項に記載の電子機器。
9. コマンド画像データを含む入力画像データを出力する外部機器と、
   投影装置と、
   を含み、
   前記投影装置が、
   前記外部機器により出力された前記入力画像データを取得し、
   取得された前記入力画像データに含まれるコマンド画像データに基づいて、コマンドを認識し、
   認識された前記コマンドに応じた処理を実行する、
   システム。
10. 電子機器の少なくとも１つのプロセッサが、
    外部機器から送信される入力画像データに含まれるコマンド画像データを取得し、
    取得された前記コマンド画像データに基づいて、コマンドを認識し、
    認識された前記コマンドに応じた処理を実行する、
    方法。
11. 電子機器の少なくとも１つのプロセッサが、
    外部機器から送信される入力画像データに含まれるコマンド画像データを取得し、
    取得された前記コマンド画像データに基づいて、コマンドを認識し、
    認識された前記コマンドに応じた処理を実行する、
    プログラム。

Images