JP2017535977A - 電子機器制御方法、電子機器制御装置、コンピュータプログラム、及びコンピュータ読み取り可能な記憶媒体 - Google Patents

Abstract

電子機器制御方法、電子機器制御装置、及び端末が提供される。電子機器制御方法は、対象画像を取得するステップと、前記対象画像を認識することによって、制御対象機器を決定するステップと、前記制御対象機器の制御インターフェースを表示するステップと、前記制御インターフェースへの制御操作の検出に応答して、前記制御対象機器の動作を制御するステップと、を含む。本開示の技術的解決手段は、ユーザの手動操作を削減し、インテリジェント機器の制御インターフェースを表示するスピードを加速させ、ユーザの利便性を提供するだろう。

Description

［関連出願への相互参照］
本出願は、２０１５年９月２８日に提出された出願番号２０１５１０６２７８９６．０の中国特許出願に基づき優先権を主張し、これらの中国特許出願の全ての内容を援用する。

本開示は、通信技術の分野に関し、特に、電子機器制御方法、電子機器制御装置、及び端末に関する。

通信技術及びスマート住宅の発達と共に、より多くの機能を備えたインテリジェント機器がますます多く出現し続け、人々の日常生活により高い利便性を提供し続けている。それに応じて、多数のインテリジェント機器を速く便利に制御する手法は、ますますユーザの注目を引き続けている。従来の技術では、インテリジェント機器を制御するためのアプリケーション（アプリ）は、スマート端末内にインストールされるであろう。そのようなアプリは、異なるインテリジェント機器に対応する異なるユーザインターフェースを提供し、対応するインテリジェント機器が、ユーザインターフェースを通じて制御されるであろう。しかしながら、そのようなアプリは、多くのインテリジェント機器が存在する場合、アプリから対応するインテリジェント機器を検索することを未だに要求し、利便性を欠く。

従来の技術の問題を克服するために、本開示は、実施形態において、電子機器制御方法、電子機器制御装置、及び端末を提供する。

本開示の実施形態の第１の観点によれば、対象画像を取得するステップと、前記対象画像を認識することによって、制御対象機器を決定するステップと、前記制御対象機器の制御インターフェースを表示するステップと、前記制御インターフェースへの制御操作の検出に応答して、前記制御対象機器の動作を制御するステップと、を含む電子機器制御方法が提供される。

あるいは、前記対象画像を取得する前記ステップは、画像取得機器を起動するステップと、前記画像取得機器によって、前記対象画像を取得するステップと、を含む。

あるいは、前記対象画像を認識することによって、前記制御対象機器を決定する前記ステップは、画像認識演算を用いて、前記対象画像から、前記対象画像内に含まれる物体の外形情報を抽出するステップと、前記外形情報に従って、前記制御対象機器を決定するステップと、を含む。

あるいは、前記対象画像を認識することによって、前記制御対象機器を決定する前記ステップは、画像認識演算を用いて、前記対象画像から、前記対象画像内に含まれる物体のバーコード情報を抽出するステップと、前記バーコード情報に従って、前記制御対象機器を決定するステップと、を含む。

あるいは、前記制御対象機器の前記制御インターフェースを表示する前記ステップは、前記制御対象機器が、前記制御対象機器と前記制御インターフェース間の予め設定された機器対応関係に記録されていることの決定に応答して、前記予め設定された機器対応関係に従って、前記制御対象機器に対応する前記制御インターフェースを獲得するステップと、前記制御対象機器に対応する前記制御インターフェースを表示するステップと、を含む。

あるいは、前記対象画像を認識することによって、前記制御対象機器を決定する前記ステップは、前記対象画像を認識することによって、前記制御対象機器の制御対象構成要素を決定するステップを含み、前記制御対象機器の前記制御インターフェースを表示する前記ステップは、前記制御対象構成要素の制御インターフェースを表示するステップを含む。

あるいは、前記制御対象構成要素の前記制御インターフェースを表示する前記ステップは、前記制御対象構成要素が、前記制御対象構成要素と前記制御インターフェース間の予め設定された構成要素対応関係に記録されていることの決定に応答して、前記予め設定された構成要素対応関係に従って、前記制御対象構成要素に対応する前記制御インターフェースを獲得するステップと、前記制御対象構成要素に対応する前記制御インターフェースを表示するステップと、を含む。

あるいは、前記制御インターフェースへの前記制御操作の検出に応答して、前記制御対象機器の動作を制御する前記ステップは、前記制御インターフェースへの前記制御操作を検出することに応答して、前記制御操作に対応する制御命令を生成するステップと、前記制御命令に従って前記制御対象機器の動作を始動させるために、前記制御対象機器へ前記制御命令を送信するステップと、を含む。

本開示の実施形態の第２の観点によれば、対象画像を取得するように構成された画像取得ユニットと、前記画像取得ユニットによって取得された前記対象画像を認識することによって、制御対象機器を決定するように構成された機器決定ユニットと、前記機器決定ユニットによって決定された前記制御対象機器の制御インターフェースを表示するように構成されたインターフェース表示ユニットと、前記インターフェース表示ユニットによって表示された前記制御インターフェースへの制御操作の検出に応答して、前記制御対象機器の動作を制御するように構成された動作制御ユニットと、を含む電子機器制御装置が提供される。

あるいは、前記画像取得ユニットは、画像取得機器を起動するように構成された起動サブユニットと、前記起動サブユニットによって起動された前記画像取得機器によって、前記対象画像を取得するように構成された取得サブユニットと、を含む。

あるいは、前記機器決定ユニットは、画像認識演算を用いて、前記対象画像から、前記対象画像内に含まれる物体の外形情報を抽出するように構成された外形抽出サブユニットと、前記外形抽出サブユニットによって抽出された前記外形情報に従って、前記制御対象機器を決定するように構成された第１の機器決定サブユニットと、を含む。

あるいは、前記機器決定ユニットは、画像認識演算を用いて、前記対象画像から、前記対象画像内に含まれる物体のバーコード情報を抽出するように構成されたバーコード抽出サブユニットと、前記バーコード抽出サブユニットによって抽出された前記バーコード情報に従って、前記制御対象機器を決定するように構成された第２の機器決定サブユニットと、を含む。

あるいは、前記インターフェース表示ユニットは、前記制御対象機器が、前記制御対象機器と前記制御インターフェース間の予め設定された機器対応関係に記録されていることの決定に応答して、前記予め設定された機器対応関係に従って、前記制御対象機器に対応する前記制御インターフェースを獲得するように構成された第１の獲得サブユニットと、前記第１の獲得サブユニットによって獲得された前記制御対象機器に対応する前記制御インターフェースを表示するように構成された第１の表示サブユニットと、を含む。

あるいは、前記機器決定ユニットは、前記対象画像を認識することによって、前記制御対象機器の制御対象構成要素を決定するように構成された構成要素決定サブユニットを含み、前記インターフェース表示ユニットは、前記構成要素決定サブユニットによって決定された前記制御対象構成要素に対応する制御インターフェースを表示するように構成された第２の表示サブユニットを含む。

あるいは、前記第２の表示サブユニットは、前記制御対象構成要素が、前記制御対象構成要素と前記制御インターフェース間の予め設定された構成要素対応関係に記録されていることの決定に応答して、前記予め設定された構成要素対応関係に従って、前記制御対象構成要素に対応する前記制御インターフェースを獲得するように構成された獲得モジュールと、前記制御対象構成要素に対応する前記制御インターフェースを表示するように構成された表示モジュールと、を含む。

あるいは、前記動作制御ユニットは、前記制御インターフェースへの前記制御操作の検出に応答して、前記制御操作に対応する制御命令を生成するように構成された命令生成サブユニットと、前記制御命令に従って前記制御対象機器の動作を始動させるために、前記制御対象機器へ、前記命令生成サブユニットによって生成された前記制御命令を送信するように構成された命令送信サブユニットと、を含む。

本開示の実施形態の第３の観点によれば、プロセッサと、前記プロセッサによって実行される命令を記憶するように構成されるメモリと、を備え、前記プロセッサは、対象画像を取得し、前記対象画像を認識することによって、制御対象機器を決定し、前記制御対象機器の制御インターフェースを表示し、前記制御インターフェースへの制御操作の検出に応答して、前記制御対象機器の動作を制御するように構成される端末が提供される。

本開示の実施形態によって提供される技術的解決手段は、以下の有益な効果を有するだろう。本開示の技術的解決手段は、対象画像を取得しても良く、制御対象機器が対象画像を認識することによって決定された後、制御対象機器の制御インターフェースを表示しても良い。そのような制御インターフェースは、制御対象機器の動作を制御するために、ユーザがインテリジェント機器上で制御操作を作動できるようにしても良く、ユーザの手動の操作を削減し、インテリジェント機器の制御インターフェースを表示するスピードを加速し、ユーザの利便性を提供するであろう。

本開示の技術的解決手段は、画像取得機器を起動し、画像取得機器によって対象画像を取得するだろう。それは容易に実行される。対象画像は、ユーザからの簡単な操作によって取得され、それにより、ユーザの手動の操作を大幅に削減し、ユーザのより高い利便性を提供するであろう。

本開示の技術的解決手段では、画像内に含まれる物体の外形情報は、制御対象機器を正確に認識するために、画像認識演算を用いて対象画像から抽出されても良く、高い精度で容易に達成される。

本開示の技術的解決手段では、画像内に含まれる物体のバーコード情報は、制御対象機器を正確に認識するために、画像認識演算を用いて対象画像から抽出され、高い精度で容易に達成される。

本開示の技術的解決手段は、制御対象機器と制御インターフェースの間の異なる対応関係を前もって設定しても良く、１つの制御対象機器は、１つ又はそれ以上の制御インターフェースに対応しても良く、異なる制御インターフェースは、制御対象機器の為の異なる機能を含んでも良く、より柔軟に機器を制御する。

本開示の技術的解決手段は、制御対象構成要素の制御インターフェースを表示するために、対象画像に従って、制御対象機器の制御対象構成要素を更に決定しても良く、それによって、ユーザにより細かな機器制御機能を提供し、ユーザの操作を簡素化する。

本開示の技術的解決手段は、制御対象構成要素と制御インターフェースの間の異なる対応関係を前もって設定しても良い。そのような制御インターフェースは、制御インターフェースによって提供される制御機能をより明確にできるように、制御対象構成要素に対応する制御機能のみを含んでも良く、それによって、制御インターフェースを更に簡潔化でき、ユーザにより便利な操作を提供する。

本開示の技術的解決手段で、制御インターフェースによってユーザから制御操作を受信した時、制御命令が生成され、制御対象機器に送信されても良く、それに応じて、制御命令に従って動作するように制御対象機器に命令し、それによって、機器制御の利便性を向上させ、ユーザに利便性を提供する。

前述の一般的な説明及び後述する詳細な説明の両方とも例示的かつ説明的なものに過ぎず、本開示を限定するものではないと理解されるべきである。

この開示に取り入れられ、この開示の一部を構成する添付の図面は、本開示に合致する実施形態を例示し、詳細な説明とともに本開示の原理を説明するためのものである。

本開示の例示的な実施形態に係る電子機器制御方法を示すフローチャートである。

本開示の例示的な実施形態に係る他の電子機器制御方法を示すフローチャートである。

本開示の例示的な実施形態に係るスマート扇風機と制御インターフェース間の対応関係を示す概念図である。

本開示の例示的な実施形態に係る電子機器制御方法のアプリケーションシナリオを示す概念図である。

本開示の例示的な実施形態に係る他の電子機器制御方法を示すフローチャートである。

本開示の例示的な実施形態に係る他の電子機器制御方法のアプリケーションシナリオを示す概念図である。

本開示の例示的な実施形態に係る電子機器制御装置を説明するブロック図である。

本開示の例示的な実施形態に係る他の電子機器制御装置を説明するブロック図である。 本開示の例示的な実施形態に係る他の電子機器制御装置を説明するブロック図である。 本開示の例示的な実施形態に係る他の電子機器制御装置を説明するブロック図である。 本開示の例示的な実施形態に係る他の電子機器制御装置を説明するブロック図である。 本開示の例示的な実施形態に係る他の電子機器制御装置を説明するブロック図である。 本開示の例示的な実施形態に係る他の電子機器制御装置を説明するブロック図である。 本開示の例示的な実施形態に係る他の電子機器制御装置を説明するブロック図である。

本開示の例示的な実施形態に係る電子機器制御装置を示すブロック図である。

符号は、添付の図面に図示される例示的な実施形態や実施例に対して詳細に付与される。以下の詳細な説明で参照する添付の図面では、特に示さない限り、異なる図面において同じ番号は同じ要素又は類似の要素を意味する。以下の例示的な実施形態の詳細な説明において明らかにされる実装は、本開示と合致する全ての実装を表すものではない。むしろ、それらは、添付の特許請求の範囲において列挙されるように、本開示に関連する観点と一致する装置及び方法の単なる一例に過ぎない。

本開示の詳細な説明において使用される用語は、具体的な実施形態を説明する目的だけであり、本開示を限定するものと解釈されるべきではない。本開示の詳細な説明や添付される請求項において用いられるように、明らかに別途前後関係で示されない限り、「ａ」（＝ある）や「ｔｈｅ」（＝前記、その）といった単数形は複数形を含むことを意味する。また、ここで使われるように、「ａｎｄ／ｏｒ」（＝及び／又は）という用語は、一つ以上に関係付けられ、リスト化された項目のうちのいずれか一つ、及び可能性がある全ての組み合わせを表し、それらを含むものと解釈されるべきである。

「ｆｉｒｓｔ」（＝第１の）、「ｓｅｃｏｎｄ」（＝第２の）及び「ｔｈｉｒｄ」（＝第３の）といった用語は、ここでは様々な情報を説明するために用いられるものであるが、それらの情報がこれらの用語によって限定されないと解釈されるべきである。これらの用語は、単に、同じ種類の情報を区別するために用いられる。例えば、本開示の範囲を逸脱しない範囲で、第１の情報は、第２の情報と呼ばれるかもしれないし、同様に、第２の情報は第１の情報と呼ばれるかもしれない。ここで使われるように、「ｉｆ」（＝もし〜）という用語は、文脈に従うと、「ｗｈｅｎ」（＝〜する時）、「ｕｐｏｎ」（＝〜の際）、又は「ｉｎ ｒｅｓｐｏｎｓｅ ｔｏ ｄｅｔｅｒｍｉｎｉｎｇ」（＝決定することに応答して）といった意味に解釈されるかもしれない。

図１は、本開示の例示的な実施形態に係る電子機器制御方法を示すフローチャートである。図１に示されるように、スマート端末に適用可能なその電子機器制御方法は、以下のステップ１０１〜１０３を含む。

ステップ１０１では、対象画像が取得される。

本実施形態では、その電子機器方法は、典型的なスマート住宅環境のような、幾つかのインテリジェント機器を備えるインテリジェント環境に適用されても良い。インテリジェント機器は、スマート扇風機、スマートエアコン、空気清浄機、及びスマート電源ソケット等であっても良い。本開示の実施形態に係る電子機器制御方法は、インテリジェント環境内のスマート端末によって実施されても良い。スマート端末は、スマートグラス、スマートフォン、タブレットコンピュータ、ＰＤＡ等であっても良い。

本開示の実施形態に係るスマート端末は、画像処理機能を有していても良い。例えば、スマート端末は、複数の画像を格納できる画像格納機能を有しても良く、スマート端末は、リアルタイムで画像を取得し写真を撮ることが可能なカメラのような、画像取得機器を備えても良い。そのような対象画像は、フォトギャラリーから取得されても良く、又はカメラを起動することによって撮られても良い。ユーザが電子機器の制御を要する瞬間に、ユーザは、スマート端末が制御対象機器を含む対象画像をリアルタイムで取得するように、カメラを起動し制御対象機器をカメラで狙っても良い。

ステップ１０２では、制御対象機器が対象画像を認識することによって決定される。

本開示の１つの実施形態では、制御対象機器は、対象画像から認識されても良い。例えば、対象画像内に含まれる物体は、制御対象機器を決定するために、画像認識演算を用いて認識されても良い。

ステップ１０３では、制御対象機器の制御インターフェースが表示される。

本開示の１つの実施形態では、制御対象機器が対象画像から認識された後、制御対象機器の制御インターフェースが、自動的に表示される。ユーザが制御対象機器の制御を作動させることができるように、そのような制御インターフェースは制御対象機器に対応しており、また、ユーザが作動させることができる１つ又はそれ以上の機能を含んでも良い。

ステップ１０４では、制御インターフェースへの制御操作の検出に応答して、制御対象機器の動作が制御される。

制御インターフェースは、ユーザが作動させることができる１つ又はそれ以上の機能を提供しても良く、制御対象機器を制御するように構成される。例えば、制御インターフェースは、制御対象機器に配置されたそれぞれの物理ボタンに対応するスイッチオプションを含んでも良い。ユーザからの制御インターフェースへの制御操作が検出されるならば、スマート端末は、それに応じて制御対象機器を制御しても良い。

上記の実施形態から分かるように、本開示の技術的解決手段は、対象画像を取得しても良く、対象画像を認識することによって制御対象機器を決定した後、制御対象機器の制御インターフェースを表示しても良い。そのような制御インターフェースは、制御対象機器の動作を制御するために、ユーザがインテリジェント機器上で制御操作を作動できるようにしても良い。

ステップ１０１については、スマート端末は、様々なやり方によって対象画像を取得しても良い。他の実施形態では、対象画像を取得するステップは、画像取得機器を起動するステップと、画像取得機器によって、対象画像を取得するステップと、を含んでも良い。

本実施形態では、カメラのような画像取得機器は、スマート端末に組み込まれても良い。ユーザは、カメラアプリのアイコン、又はスマート端末のユーザインターフェース内で予め設定された起動命令（例えば、カメラを起動するための予め設定されたボタンがユーザによって押されること、又は予め設定されたスワイプの軌道を受信することを検出する時等）を選択する等をして、カメラを起動させるようにスマート端末を作動させても良い。スマート端末がカメラを起動した後、スマート端末のユーザインターフェースは、現在カメラによって撮られている写真を表示しても良く、ユーザは、スマート端末が、カメラによって対象画像を取得するように、カメラで制御する機器を狙い、制御対象機器をカメラのフレーム内にあるようにしても良い。

上記の実施形態から分かるように、本開示の技術的解決手段は、例えば、対象画像が、ユーザの手動の操作が大きく削減されるように、ユーザの簡単な操作だけで取得されても良い等、容易に達成され、それにより、より高い利便性をもたらす。

ステップ１０２については、スマート端末は、様々なやり方によって対象画像から制御対象機器を決定しても良い。例えば、バーコード情報を認識することによって、制御対象機器が決定されるように、バーコード情報が制御対象機器に配置されても良い。又は、様々なインテリジェント機器の外形情報を認識することによって、制御対象機器が決定されても良い。

第１のやり方として、対象画像内に含まれる物体の外形情報が、画像認識演算を用いて対象画像から抽出され、制御対象機器が、外形情報に従って決定される。

一般に、スマート住宅環境は、例えば、エアコン、扇風機、ソケット、照明機器等のような様々な電子機器を含んでも良い。異なる電子機器は、異なる姿をしており、大きな差異のある異なる外形となっている。それに応じて、本開示の１つの実施形態では、該当する制御対象機器が、外形情報を用いて対象画像から正確に決定されるように、外形情報が、電子機器のための識別情報として使用されても良い。

電子デバイスは、一般に、複数の機能を有する構成要素を備える。例えば、スマート電源ソケットは、電源ボタン、複数の３つ穴のソケット、複数の２つ穴のソケット、及び複数のＵＳＢインターフェース等を備えても良く、スマート扇風機は、電源ボタン、風量の異なるレベルに対応する複数のボタン、及び首振りボタン等を備えても良い。それに応じて、外形情報は、電子機器の全体又は一部の外形に対応する。本実施形態では、画像認識演算は、物体の外形を認識するためのいずれのアルゴリズムであっても良い。実用的な適用においては、様々な外形情報は、対象画像に含まれる物体の外形情報を認識するために、インテリジェント機器の姿に従って、例えば、インテリジェント機器の正面、左側、右側を含む異なる視点における外形情報を設定する、又はインテリジェント機器の異なる構成要素に対応する外形情報を設定する等のようにして、予め設定されても良い。

上記の実施形態から分かるように、制御対象機器は、画像認識演算を用いて、対象画像から画像に含まれる物体の外形情報を抽出することによって、正確に認識されても良く、簡単に高い精度を得ることができる。

第２のやり方として、対象画像内に含まれる物体のバーコード情報が、画像認識演算を用いて対象画像から抽出され、制御対象機器が、バーコード情報に従って決定される。

本実施形態では、画像認識演算は、バーコードを認識するためのいずれのアルゴリズムであっても良い。電子機器の製造者が、機器の製造中に、電子機器のいずれの位置（例えば、外側の表面）にバーコード情報を提供しても良い。そのようなバーコード情報は、１次元又は２次元のコードで、インテリジェント機器を個別に認識できても良い。例えば、バーコード情報は、機器コード、又はマックアドレス（ＭＡＣアドレス）等のような、インテリジェント機器の個別の識別情報を記録しても良い。それに応じて、インテリジェント機器は、インテリジェント機器の画像データを取得すること、及びバーコード情報を検出することによって、認識されても良い。

上記の実施形態から分かるように、制御対象機器は、画像認識演算を用いて、対象画像から画像に含まれる物体のバーコード情報を抽出することによって、正確に認識されても良く、簡単に高い精度を得ることができる。

ステップ１０３については、制御対象機器が認識された後、制御対象機器の制御インターフェースが表示されても良い。別の実施形態では、制御対象機器の制御インターフェースを表示するステップは、制御対象機器が、制御対象機器と制御インターフェース間の予め設定された機器対応関係に記録されていることの決定に応答して、予め設定された機器対応関係に従って、制御対象機器に対応する制御インターフェースを獲得するステップと、制御対象機器に対応する制御インターフェースを表示するステップと、を含んでも良い。

本開示の実施形態では、制御対象機器と制御インターフェース間の異なる対応関係は、前もって設定されても良い。１つの制御対象機器は、１つ又はそれ以上の制御インターフェースに対応しても良く、異なる制御インターフェースは、制御対象機器の異なる機能を含んでも良い。例えば、異なる構成要素を備えるように、即ち、様々な物理ボタンを備えるように、制御対象機器は、異なる制御インターフェースに対応しても良く、各々の制御インターフェースは、異なる制御機能を含んでも良い。実用的な適用においては、制御インターフェースは、上記に応じて、異なる電子機器及びその機能用に設計されても良い。

ステップ１０４については、他の実施形態では、制御インターフェースへの制御操作の検出に応答して、制御対象機器の動作を制御するステップは、制御インターフェースへの制御操作の検出に応答して、制御操作に対応する制御命令を生成するステップと、制御命令に従って制御対象機器の動作を始動させるために、制御対象機器へ制御命令を送信するステップと、を含んでも良い。

スマート端末は、端末の表示画面上に、制御対象機器の制御インターフェースを表示する。ユーザは、制御インターフェース内で制御操作を行っても良い。ユーザから制御インターフェースによって制御操作を受信する時に、それに応じて、制御命令に従って、動作するように制御対象機器に命令するように、制御命令が生成されて、制御対象機器に送信されても良い。

図２Ａは、本開示の例示的な実施形態に係る他の電子機器制御方法を示すフローチャートである。図２Ａを参照すると、スマート端末に適用可能なその電子機器制御方法は、次のステップ２０１〜２０６を含む。

ステップ２０１では、画像取得機器が起動される。

ステップ２０２では、対象画像が画像取得機器によって取得される。

ステップ２０３では、制御対象機器が対象画像を認識することによって決定される。

ステップ２０４では、制御対象機器が、制御対象機器と制御インターフェース間の予め設定された機器対応関係に記録されていることの決定に応答して、予め設定された機器対応関係に従って、制御対象機器に対応する制御インターフェースが獲得される。

ステップ２０５では、制御対象機器に対応する制御インターフェースが表示される。

ステップ２０６では、制御インターフェースへの制御操作の検出に応答して、制御対象機器の動作が制御される。

本開示の１つの実施形態では、ユーザが、画像取得機器を起動させるためにスマート端末を作動させ、制御対象機器の対象画像を取得しても良い。例えば、スマートフォン向けでは、対応する操作は、ユーザによってユーザインターフェース内でシングルクリックすること、予め決定された回数だけクリックすること、又は対象の位置を長押しすること、予め決定された押し方でユーザによって端末の物理ボタンを押すこと、又はユーザによってユーザインターフェース内の対象の位置に予め決定されたタッチトラックを入力することで行われても良く、一方でスマートグラス向けでは、対応する操作は、各方向のスライドコア領域をクリックすること、まばたきすること、頭を振ること、又は声の制御によって行われても良い。ユーザは、制御対象機器の対象画像を取得するために、スマート端末を迅速に作動できるので、これによって、ユーザの利便性が提供される。

スマート端末は、画像取得機器を起動する。画像取得装置は、スマート端末に組み込まれたカメラであっても良い。ユーザは、手にスマート端末を持ち、画像取得機器によって取得される対象画像を取得するために、スマート端末に配置されたカメラで制御される電子機器を狙い、これによって、対象画像を通じて、制御対象機器を決定するであろう。対象画像は、ユーザの手動操作を減らし、制御対象機器を迅速に決定し、電子機器制御方法の利便性を高めるために、上記のような画像取得機器の起動の手法によって取得される。

本実施形態では、制御対象機器の対象画像が取得される時、含まれる物体の外形情報が、画像認識演算を用いて画像データから抽出されても良く、該当する制御対象機器が、外形情報に従って更に決定される。又は制御対象機器が、画像認識演算を用いてバーコード情報を抽出することによって、更に決定されても良い。

本実施形態では、制御対象機器と制御インターフェース間の機器対応関係が、前もって設定されても良く、制御対象機器が、前もって設定された制御対象機器と制御インターフェース間の機器対応関係に記録されていることが決定される時に、制御対象機器に対応する制御インターフェースが、機器対応関係に従って獲得されても良い。

例えば、図２Ｂは、本開示の例示的な実施形態に係るスマート扇風機と制御インターフェース間の対応関係を示す概念図である。一つの実施形態では、図２Ｂに示されるように、スマート扇風機を含む対象画像が、明示されている。図２Ｂの対象画像として、スマート扇風機の右側から見た図が例示されており、スマート扇風機の全体の外形情報が、対象画像から認識されても良く、制御対象機器が、外形情報に従ってスマート扇風機として決定されても良い。スマート扇風機は、全てのボタンを制御する機能を含む制御インターフェースに対応しても良い。制御インターフェースは、スマート扇風機に配置される各々の物理ボタンに対応する制御機能を含んでも良い。各々の物理ボタンに対応する制御機能は、
ボタンに対応しオン又はオフを実行するための制御機能であっても良い。

図２Ｂに示されるような実施形態では、スマート扇風機を含む他の対象画像も、明示される。図２Ｂの対象画像として、スマート扇風機の正面から見た図が例示されており、スマート扇風機の全体の外形情報が、対象画像から認識され、制御対象機器が、外形情報に従ってスマート扇風機として決定されても良い。スマート扇風機は、全てのボタンを制御するための機能を含む制御インターフェースに対応しても良い。制御インターフェースは、スマート扇風機に配置された各々の物理ボタンに対応する制御機能を含んでも良い。各々の物理ボタンに対応する制御機能は、ボタンに対応しオン又はオフを実行するための制御機能であっても良い。

図２Ｃは、本開示の例示的な実施形態に係る電子機器制御方法のアプリケーションシナリオを示す概念図である。図２Ｃに示されるようなアプリケーションシナリオは、電子機器として１つのスマート扇風機と、スマート端末として１つのスマートフォンを含む。スマート扇風機とスマートフォンは、無線で接続され、情報転送と相互対話は、その間で無線接続に基づいて行われる。スマート扇風機は、本実施形態内でインテリジェント機器を説明するために単に例示されたもので、スマートフォンは、スマート端末を説明するために単に例示されたものであると了解される。実用的な適用においては、インテリジェント機器は、スマートエアコン、スマートソケット、及びスマート調理器のような他の様々な機器であっても良く、一方、スマート端末は、タブレットコンピュータ、又はスマートグラスのような他の様々なスマート端末であっても良い。

図２Ｃに示されるようなアプリケーションシナリオでは、ユーザは、スマートフォンの表示画面に表示されたカメラアプリのアイコンをクリックしても良く、それに応じて、スマート端末が、ユーザが、カメラでスマート扇風機を狙えるように、スマートフォンに組み込まれたカメラを起動し、スマートフォンが、カメラによって取得される対象画像を得られる状態であることは、図２Ｃのスマートフォンのユーザインターフェース１から知ることができる。スマートフォンは、画像認識演算を用いて、対象画像からインテリジェント機器の全体の外形情報を抽出する、又は画像認識演算を用いて、画像データからインテリジェント機器の２次元コード情報を抽出しても良く、それに応じて、外形情報又は２次元コード情報に従って、スマート扇風機がそのスマートフォンに対応することを決定する。

スマート扇風機と制御インターフェース間の対応関係が、スマートフォン内に予め設定されるので、対応する制御インターフェースが、獲得されるであろう。その事は、図２Ｃに示されるような、スマートフォン内のユーザインターフェース２から知ることができ、スマート扇風機の制御インターフェースが、スマートフォンの表示画面上に表示される。そのような制御インターフェースは、スマート扇風機に配置される全てのボタンに対応する全ての制御機能を含む。

図３Ａは、本開示の例示的な実施形態に係る他の電子機器制御方法を示すフローチャートである。図３Ａを参照すると、スマート端末に適用可能なその電子機器制御方法は、以下のステップ３０１〜３０６を含む。

ステップ３０１では、画像取得機器が起動される。

ステップ３０２では、対象画像が画像取得機器によって取得される。

ステップ３０３では、制御対象機器の制御される制御対象構成要素が、対象画像を認識することによって決定される。

ステップ３０４では、制御対象構成要素が、制御対象構成要素と制御インターフェース間の予め設定された構成要素対応関係に記録されていることの決定に応答して、予め設定された構成要素対応関係に従って、制御対象構成要素に対応する制御インターフェースが獲得される。

ステップ３０５では、制御対象構成要素に対応する制御インターフェースが表示される。

ステップ３０６では、制御インターフェースへの制御操作の検出に応答して、制御対象機器の動作が制御される。

本開示の実施形態では、対象画像に従って制御対象機器が決定された後に、制御対象機器の制御対象構成要素が、さらに決定されても良い。例えば、端末のカメラが、電子機器の一部分の領域を狙う時（そのような一部分の領域は、幾つかの機器の物理ボタンを含む）、端末は、取得された対象画像から電子機器の一部分の外形情報を認識し、一部分の外形情報に従って、制御対象機器、及び制御対象構成要素を決定し、更に、制御対象構成要素に従って、対応する制御インターフェースを表示する。そのような制御インターフェースは、単に制御対象構成要素に対応する制御機能を含んでも良く、制御インターフェースによって提供される制御機能をより明確にでき、制御インターフェースを更に簡潔化でき、ユーザにより便利な操作を提供する。

本実施形態と図２Ａに示されるような実施形態の違いは、後者が、制御対象機器を決定するのみで、制御対象機器に従って対応する制御インターフェースを決定しており、一方で、本実施形態は、制御対象機器を決定した後、更に制御対象構成要素を決定し、更に制御対象構成要素に対応する制御インターフェースを決定することである。実用的な適用においては、図２Ａに示されるような実施形態向けには、制御対象機器を決定するのみであるから、表示される制御インターフェースは、制御対象機器内の全ての構成要素の制御機能を含んでも良い。本実施形態向けには、制御対象構成要素が、制御対象機器が決定された後に、制御対象構成要素に対応する制御インターフェースを表示するために更に決定されても良い。例えば、対象画像が、機器の全ての構成要素を含む場合には、全ての構成要素の制御機能を含む制御インターフェースに対応しても良く、一方で、対象画像が、単に機器の幾つかの構成要素を含む場合には、幾つかの構成要素の制御機能を含む制御インターフェースに対応しても良い。

例えば、図３Ｂは、本開示の例示的な実施形態に係る他の電子機器制御方法のアプリケーションシナリオを示す概念図である。図３Ｂに示されるようなアプリケーションシナリオでは、ユーザが、スマートフォンのカメラでスマート扇風機の頭部の首振りボタンに対応する領域を狙うようにでき、スマートフォンが、カメラによって取得された対象画像を取得するのが、図３Ｂ内のスマートフォンのユーザインターフェース１から見られる。スマートフォンは、画像認識演算を用いて、画像データから制御対象機器の一部分の領域に対応する外形情報を抽出し、更に、外形情報に従って、制御対象機器はスマート扇風機であり、制御対象構成要素は首振りボタンであると決定する。

外形情報と制御インターフェース間の対応関係は、スマートフォン内で予め設定されているので、制御対象構成要素は、首振りボタンの場合、単に首振りボタンの１つの制御機能を含む制御インターフェースに対応しても良い。そのような首振りボタンの制御機能は、首振りボタンに対応しオン又はオフを実行するための制御機能であっても良い。

図３Ｂ内のスマートフォンのユーザインターフェース２から分かるように、スマートフォンの表示画面は、スマート扇風機の制御インターフェースを表示する。そのような制御インターフェースは、スマート扇風機に配置される首振りボタンの制御機能のみを含む。

電子機器の制御方法を説明する上記の実施形態に対応して、本開示は、更に電子機器制御装置を実施形態において提供する。

図４は、本開示の例示的な実施形態に係る電子機器制御装置を説明するブロック図である。図４を参照すると、その電子機器制御装置は、画像取得ユニット４１、機器決定ユニット４２、インターフェース表示ユニット４３、及び動作制御ユニット４４を含む。

画像取得ユニット４１は、対象画像を取得するように構成される。

機器決定ユニット４２は、画像取得ユニット４１によって取得された対象画像を認識することによって、制御対象機器を決定するように構成される。

インターフェース表示ユニット４３は、機器決定ユニット４２によって決定された制御対象機器の制御インターフェースを表示するように構成される。

動作制御ユニット４４は、インターフェース表示ユニット４３によって表示された制御インターフェースへの制御操作の検出に応答して、制御対象機器の動作を制御するように構成される。

上記の実施形態から分かるように、本開示の技術的解決手段は、対象画像を取得しても良く、制御対象機器が対象画像を認識することによって決定された後、制御対象機器の制御インターフェースを表示しても良い。制御インターフェースは、ユーザがインテリジェント機器上で制御操作を作動できるようにしても良く、それによって、制御対象機器の動作を制御する。本開示の技術的解決手段は、ユーザの手動の操作を削減し、インテリジェント機器の制御インターフェースを表示するスピードを加速し、ユーザの利便性を提供するであろう。

図５は、本開示の例示的な実施形態に係る他の電子機器制御装置を説明するブロック図である。図５を参照すると、本実施形態では、図４に示されるような上記の実施形態に基づいて、画像取得ユニット４１は、起動サブユニット４１１及び取得サブユニット４１２を含む。

起動サブユニット４１１は、画像取得機器を起動するように構成される。

取得サブユニット４１２は、起動サブユニット４１１によって起動された画像取得機器によって、対象画像を取得するように構成される。

上記の実施形態から分かるように、本開示の技術的解決手段は、画像取得機器によって対象画像を取得するために画像取得機器を起動するだろう。それは容易に達成され、対象画像は、ユーザの簡単な操作だけで取得され、それにより、
ユーザの手動の操作を大幅に削減し、ユーザのより高い利便性を提供するであろう。

図６は、本開示の例示的な実施形態に係る他の電子機器制御装置を説明するブロック図である。図６を参照すると、本実施形態では、図４に示されるような上記の実施形態に基づいて、機器決定ユニット４２は、外形抽出サブユニット４２１及び第１の機器決定サブユニット４２２を含む。

外形抽出サブユニット４２１は、画像認識演算を用いて、対象画像から対象画像内に含まれる物体の外形情報を抽出するように構成される。

第１の機器決定サブユニット４２２は、外形抽出サブユニット４２１によって抽出された外形情報に従って、制御対象機器を決定するように構成される。

上記の実施形態から分かるように、画像内に含まれる物体の外形情報は、制御対象機器を正確に認識するために、画像認識演算を用いて対象画像から抽出され、高い精度で容易に達成される。

図７は、本開示の例示的な実施形態に係る他の電子機器制御装置を説明するブロック図である。図７を参照すると、本実施形態では、図４に示されるような上記の実施形態に基づいて、機器決定ユニット４２は、バーコード抽出サブユニット４２３及び第２の機器決定サブユニット４２４を含む。

バーコード抽出サブユニット４２３は、画像認識演算を用いて、対象画像から対象画像内に含まれる物体のバーコード情報を抽出するように構成される。

第２の機器決定サブユニット４２４は、バーコード抽出サブユニット４２３によって抽出されたバーコード情報に従って、制御対象機器を決定するように構成される。

上記の実施形態から分かるように、画像内に含まれる物体のバーコード情報は、制御対象機器を正確に認識するために、画像認識演算を用いて対象画像から抽出され、高い精度で容易に達成される。

図８は、本開示の例示的な実施形態に係る他の電子機器制御装置を説明するブロック図である。図８を参照すると、本実施形態では、図４に示されるような上記の実施形態に基づいて、インターフェース表示ユニット４３は、第１の獲得ユニット４３１及び第１の表示ユニット４３２を含む。

第１の獲得ユニット４３１は、制御対象機器が、制御対象機器と制御インターフェース間の予め設定された機器対応関係に記録されていることの決定に応答して、予め設定された機器対応関係に従って、制御対象機器に対応する制御インターフェースを獲得するように構成される。

第１の表示ユニット４３２は、第１の獲得ユニット４３１によって獲得された制御対象機器に対応する制御インターフェースを表示するように構成される。

上記の実施形態から分かるように、本開示の技術的解決手段は、より柔軟に機器を制御するために、制御対象機器と制御インターフェースの間の異なる対応関係を予め設定しても良く、１つの制御対象機器は、１つ又はそれ以上の制御インターフェースに対応しても良く、異なる制御インターフェースは、制御対象機器の為の異なる機能を含んでも良い。

図９は、本開示の例示的な実施形態に係る他の電子機器制御装置を説明するブロック図である。図９を参照すると、本実施形態では、図４に示されるような上記の実施形態に基づいて、機器決定ユニット４２は、対象画像を認識することによって制御対象機器の制御対象構成要素を決定するように構成された構成要素決定サブユニット４２５を含む。

インターフェース表示ユニット４３は、構成要素決定サブユニット４２５によって決定された制御対象構成要素に対応する制御インターフェースを表示するように構成された第２の表示サブユニット４３３を含む。

上記の実施形態から分かるように、本開示の技術的解決手段は、制御対象構成要素に対応する制御インターフェースを表示するために、対象画像に従って、制御対象機器の制御対象構成要素を更に決定しても良く、それによって、ユーザにより細かな機器制御機能を提供し、ユーザの操作を簡素化する。

図１０は、本開示の例示的な実施形態に係る他の電子機器制御装置を説明するブロック図である。図１０を参照すると、本実施形態では、図９に示されるような上記の実施形態に基づいて、第２の表示サブユニット４３３は、獲得モジュール４３３１及び表示モジュール４３３２を含む。

獲得モジュール４３３１は、制御対象構成要素が、制御対象構成要素と制御インターフェース間の予め設定された構成要素対応関係に記録されていることの決定に応答して、予め設定された構成要素対応関係に従って、制御対象構成要素に対応する制御インターフェースを獲得するように構成される。

表示モジュール４３３２は、獲得モジュール４３３１によって獲得された制御対象構成要素に対応する制御インターフェースを表示するように構成される。

上記の実施形態から分かるように、本開示の技術的解決手段は、制御対象構成要素と制御インターフェースの間の異なる対応関係を前もって設定しても良い。そのような制御インターフェースは、制御インターフェースによって提供される制御機能をより明確にできるように、制御対象構成要素に対応する制御機能のみを含んでも良く、それによって、制御インターフェースを更に簡潔化でき、ユーザにより便利な操作を提供する。

図１１は、本開示の例示的な実施形態に係る他の電子機器制御装置を説明するブロック図である。図１１を参照すると、本実施形態では、図４に示されるような上記の実施形態に基づいて、動作制御ユニット４４は、命令生成サブユニット４４１及び命令送信サブユニット４４２を含む。

命令生成サブユニット４４１は、制御インターフェースへの制御操作の検出に応じて、制御操作に対応する制御命令を生成するように構成される。

命令送信サブユニット４４２は、命令生成サブユニット４４１によって生成された制御命令を、制御命令に従って制御対象機器の動作を始動させるために、制御対象機器へ送信するように構成される。

上記の実施形態から分かるように、本開示の技術的解決手段で、ユーザからの制御インターフェースによる制御操作を受信した時、制御命令が生成され、制御対象機器に送信されても良く、それに応じて、制御命令に従って動作するように制御対象機器に命令し、それによって、機器制御の利便性を向上させ、ユーザに利便性を提供する。

上記に応じて、本開示は、実施形態において、プロセッサと、前記プロセッサによって実行される命令を記憶するように構成されるメモリと、を備え、前記プロセッサは、対象画像を取得し、前記対象画像を認識することによって、制御対象機器を決定し、前記制御対象機器の制御インターフェースを表示し、前記制御インターフェースへの制御操作の検出に応答して、前記制御対象機器の動作を制御するように構成される端末を更に提供する。

上記の機器の様々なモジュールの機能及び効果を達成するための特定の手順は、上記の電子機器制御方法の対応するステップの達成手順を参照すれば良いので、ここでは詳細に説明しない。

上記の実施形態における機器に関して、個々のモジュールに対する操作を実行するための特定の手法は、電気機器制御方法に関する実施形態において詳細に記述したので、ここで再び詳細に説明しない。前述の機器の実施形態は、単に例示的なものであり、分離された構成要素として説明されたユニット又はモジュールは、物理的に分離されていても良いし、そうでなくても良い。ユニット又はモジュールとして表示された構成要素は、物理的なユニットでも良いし、そうでなくても良い、すなわち、１つの位置に設けられても良いし、複数のネットワークの構成部分に分配されても良い。本開示の目的は、実際に要求されるようにモジュールの全体または一部分を選択することによって達成されるであろう。それは、創造的な作業がなくても当業者によって実行可能であろう。

図１２は、本開示の例示的な実施形態に係る電子機器制御装置１２００を説明するブロック図である。例えば、電子機器制御装置１２００は、携帯電話、コンピュータ、デジタル放送端末、メッセージングデバイス、ゲームコンソール、タブレット、医療機器、トレーニング装置、個人向け電子端末等で、ルーティング機能を有する。

図１２を参照すると、電子機器制御装置１２００は、以下の１つ又はそれ以上の構成要素を含んでも良い。それらの構成要素は、処理部１２０２、メモリ１２０４、電源部１２０６、マルチメディア部１２０８、オーディオ部１２１０、入出力（Ｉ／Ｏ）インタフェース部１２１２、センサ部１２１４、及び通信部１２１６である。

処理部１２０２は、一般的に、表示、電話呼出し、データ通信、カメラ操作及び記録動作と関連する動作のような電子機器制御装置１２００全体の動作を制御する。処理部１２０２は、前述した実現方法における全て又は一部のステップを行うための命令を実行するために、１つ又はより多くのプロセッサ１２２０を含んでも良い。更に、処理部１２０２は、処理部１２０２と他の構成要素との間のインタフェースを容易にするための１つ又はより多くのモジュールを含んでも良い。例えば、処理部１２０２は、マルチメディア部１２０８と処理部１２０２との間のインタフェースを容易にするためのマルチメディアモジュールを含んでも良い。

メモリ１２０４は、電子機器制御装置１２００の動作を支援するための様々な種類のデータを記憶するように構成される。そのようなデータの例は、電子機器制御装置１２００において動作される任意のアプリケーション又は方法のための命令、連絡先データ、電話帳データ、メッセージ、写真、ビデオ等を含む。メモリ１２０４は、スタティックランダムアクセスメモリ（ＳＲＡＭ）、電気的に消去可能なプログラマブル読出専用メモリ（ＥＥＰＲＯＭ）、プログラマブル読出専用メモリ（ＰＲＯＭ）、読出専用メモリ（ＲＯＭ）、磁気メモリ、フラッシュメモリ、磁気又は光学ディスクのように、揮発性記憶装置或いは不揮発性記憶装置、又はそれらの組合せの任意の種類を用いて実装されても良い。

電源部１２０６は、電子機器制御装置１２００の様々な構成要素に電力を供給する。電源部１２０６は、電源管理システム、１つ又はより多くの電源、並びに電子機器制御装置１２００において電力の生成、管理及び配電と関連する他の構成要素を含んでも良い。

マルチメディア部１２０８は、電子機器制御装置１２００とユーザとの間の外部インタフェースを提供する画面を含む。いくつかの実施形態では、画面は、液晶ディスプレイ（ＬＣＤ）及びタッチパネル（ＴＰ）を含んでも良い。画面がタッチパネルを含む場合、その画面はユーザから入力信号を受信するタッチ画面として実装されても良い。タッチパネルは、タッチパネル上のタッチ、スワイプ及びジェスチャーを検出するための１つ又はより多くのタッチセンサを含む。タッチセンサは、タッチ又はスワイプ操作の境界を検出するだけでなく、タッチ又はスワイプ操作と関連する期間及び圧力も検出する。いくつかの実施形態では、マルチメディア部１２０８は、正面のカメラ及び／又は背面のカメラを含む。正面のカメラ及び背面のカメラは、電子機器制御装置１２００が写真撮影モード又はビデオモードのような動作モードの時、外部のマルチメディアデータを受信するようにしても良い。正面のカメラ及び背面のカメラのそれぞれが、固定焦点レンズシステムでも良いし、又はフォーカス及び光学ズーム性能を有しても良い。

オーディオ部１２１０は、オーディオ（音声・音響）信号を出力する、及び／又は入力するように構成される。例えば、オーディオ部１２１０は、電子機器制御装置１２００が電話モード、記録モード及び音声認識モードのような動作モードの時、外部オーディオ信号を受信するように構成されるマイクロフォン（「ＭＩＣ」）を含む。受信されるオーディオ信号は、更にメモリ１２０４に記憶されても良いし、又は通信部１２１６を介して送信されるようにしても良い。いくつかの実施形態では、オーディオ部１２１０は、更にオーディオ信号を出力するためのスピーカを含む。

Ｉ／Ｏインタフェース部１２１２は、キーボード、クリックホイール、ボタン等のような処理部１２０２及び周辺装置インタフェースモジュールとの間のインタフェースを提供する。ボタンは、これらに限定されるわけではないが、ホームボタン、ボリュームボタン、スタートボタン及びロックボタンを含んでも良い。

センサ部１２１４は、電子機器制御装置１２００の様々な面の状態評価を提供するための１つ又はより多くのセンサを含む。例えば、センサ部１２１４は、電子機器制御装置１２００のオープン／クローズド状態、電子機器制御装置１２００のディスプレイ画面及びキーパッド等の構成要素の相対位置、電子機器制御装置１２００又は電子機器制御装置１２００の構成要素の位置の変化、電子機器制御装置１２００に対するユーザコンタクトの有無、電子機器制御装置１２００の方向又は加速／減速、及び電子機器制御装置１２００の温度の変化を検出しても良い。センサ部１２１４は、物理的な接触なしに近傍の物体の存在を検出するように構成される主要なセンサも含んでも良い。また、センサ部１２１４は、画像アプリケーションの用途のために、ＣＭＯＳ又はＣＣＤ画像センサのような光センサを含んでも良い。また、いくつかの実施形態では、センサ部１２１４は、加速度センサ、ジャイロセンサ、磁気センサ、圧力センサ、又は温度センサを含んでも良い。

通信部１２１６は、電子機器制御装置１２００と他の端末との間の有線又は無線の通信を容易にするように構成される。電子機器制御装置１２００は、ＷｉＦｉ、２Ｇ或いは３Ｇ、又はそれらの組合せのような通信規格に基づく無線ネットワークにアクセスすることができる。ある例示的な実施形態では、通信部１２１６は、放送チャネルを介する外部放送制御システムからの放送信号又は放送関連情報を受信する。ある例示的な実施形態では、通信部１２１６は、更に短距離の通信を容易にするための近距離無線通信（ＮＦＣ）モジュールを含む。例えば、ＮＦＣモジュールは、無線ＩＤ（ＲＦＩＤ）技術、赤外線通信規格（ＩｒＤＡ）技術、超広域無線(ＵＷＢ)技術、Bluetooth(登録商標)（ＢＴ）技術、又はその他の技術に基づいて実装されても良い。

例示的な実施形態では、電子機器制御装置１２００は、前述の実現方法を行うために、特定用途向け集積回路（ＡＳＩＣｓ）、デジタルシグナルプロセッサ（ＤＳＰｓ）、デジタルシグナルプロセッシングデバイス（ＤＳＰＤｓ）、プログラマブルロジックデバイス（ＰＬＤｓ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡｓ）、コントローラ、マイクロコントローラ、マイクロプロセッサ、又はそのほかの電子部品のような１つ又はより多くの電子的要素によって実装されても良い。

例示的な実施形態では、前述の実現方法を行うために、電子機器制御装置１２００の中のメモリ１２０４に含まれ、プロセッサ１２２０によって実行される命令を含む非一時的なコンピュータ読み取り可能な記憶媒体も提供される。例えば、非一時的なコンピュータ読み取り可能な記憶媒体は、ＲＯＭ、ＲＡＭ、ＣＤ−ＲＯＭ、磁気テープ、フロッピー（登録商標）ディスク、光学データ記憶装置等であっても良い。

その中に記憶された命令を持つ非一時的なコンピュータ読み取り可能な記憶媒体は、端末のプロセッサによって実行される時、対象画像を取得するステップと、前記対象画像を認識することによって、制御対象機器を決定するステップと、前記制御対象機器の制御インターフェースを表示するステップと、前記制御インターフェースへの制御操作の検出に応答して、前記制御対象機器の動作を制御するステップと、を含む電子機器制御方法を端末に実行させる。

本開示の他の実施形態は、明細書の留意事項及びここで開示される開示のプラクティスから当業者によって明らかにされるであろう。この出願は、本開示から出発し、この分野における公知又は周知のプラクティスの範囲内で想到する一般的な原理及び構成に従う本開示の任意の変更、利用、又は改良が含まれる。明細書及び実施例は、後述する請求項によって示される本開示の真の範囲及び意味において、単なる代表例としてのみ考慮される。

本開示の正確な解釈は、前述の説明及び添付図面の例、並びにその範囲から出発せずになされる様々な修正及び変更に制限されないと解釈して頂ければ幸いである。本開示の範囲は、添付の請求項によってのみ限定されることを意図している。

上記の記述は、単に本開示を例示するための実施形態であり、いかなる修正、代替、及び改善は、本開示の精神と原理から外れることなくなされ、本開示の範囲内に含まれるべきである。

本開示の実施形態の第３の観点によれば、コンピュータ上で動作する請求項１〜８のいずれか１項に記載の電子機器制御方法を前記コンピュータに実行させるためのコンピュータプログラムが提供される。本開示の実施形態の第４の観点によれば、請求項１７に記載のコンピュータプログラムが記憶されるように構成されるコンピュータ読み取り可能な記憶媒体が提供される。

Claims (17)

1. 対象画像を取得するステップと、
   前記対象画像を認識することによって、制御対象機器を決定するステップと、
   前記制御対象機器の制御インターフェースを表示するステップと、
   前記制御インターフェースへの制御操作の検出に応答して、前記制御対象機器の動作を制御するステップと、
   を含む電子機器制御方法。
2. 前記対象画像を取得する前記ステップは、
   画像取得機器を起動するステップと、
   前記画像取得機器によって、前記対象画像を取得するステップと、
   を含む請求項１に記載の電子機器制御方法。
3. 前記対象画像を認識することによって、前記制御対象機器を決定する前記ステップは、
   画像認識演算を用いて、前記対象画像から、前記対象画像内に含まれる物体の外形情報を抽出するステップと、
   前記外形情報に従って、前記制御対象機器を決定するステップと、
   を含む請求項１に記載の電子機器制御方法。
4. 前記対象画像を認識することによって、前記制御対象機器を決定する前記ステップは、
   画像認識演算を用いて、前記対象画像から、前記対象画像内に含まれる物体のバーコード情報を抽出するステップと、
   前記バーコード情報に従って、前記制御対象機器を決定するステップと、
   を含む請求項１に記載の電子機器制御方法。
5. 前記制御対象機器の前記制御インターフェースを表示する前記ステップは、
   前記制御対象機器が、前記制御対象機器と前記制御インターフェース間の予め設定された機器対応関係に記録されていることの決定に応答して、前記予め設定された機器対応関係に従って、前記制御対象機器に対応する前記制御インターフェースを獲得するステップと、
   前記制御対象機器に対応する前記制御インターフェースを表示するステップと、
   を含む請求項１に記載の電子機器制御方法。
6. 前記対象画像を認識することによって、前記制御対象機器を決定する前記ステップは、前記対象画像を認識することによって、前記制御対象機器の制御対象構成要素を決定するステップを含み、
   前記制御対象機器の前記制御インターフェースを表示する前記ステップは、前記制御対象構成要素の制御インターフェースを表示するステップを含む請求項１に記載の電子機器制御方法。
7. 前記制御対象構成要素の前記制御インターフェースを表示する前記ステップは、
   前記制御対象構成要素が、前記制御対象構成要素と前記制御インターフェース間の予め設定された構成要素対応関係に記録されていることの決定に応答して、前記予め設定された構成要素対応関係に従って、前記制御対象構成要素に対応する前記制御インターフェースを獲得するステップと、
   前記制御対象構成要素に対応する前記制御インターフェースを表示するステップと、
   を含む請求項６に記載の電子機器制御方法。
8. 前記制御インターフェースへの前記制御操作の検出に応答して、前記制御対象機器の動作を制御する前記ステップは、
   前記制御インターフェースへの前記制御操作の検出に応答して、前記制御操作に対応する制御命令を生成するステップと、
   前記制御命令に従って前記制御対象機器の動作を始動させるために、前記制御対象機器へ前記制御命令を送信するステップと、
   を含む請求項１〜７のいずれか１項に記載の電子機器制御方法。
9. 対象画像を取得するように構成された画像取得ユニットと、
   前記画像取得ユニットによって取得された前記対象画像を認識することによって、制御対象機器を決定するように構成された機器決定ユニットと、
   前記機器決定ユニットによって決定された前記制御対象機器の制御インターフェースを表示するように構成されたインターフェース表示ユニットと、
   前記インターフェース表示ユニットによって表示された前記制御インターフェースへの制御操作の検出に応答して、前記制御対象機器の動作を制御するように構成された動作制御ユニットと、
   を含む電子機器制御装置。
10. 前記画像取得ユニットは、
    画像取得機器を起動するように構成された起動サブユニットと、
    前記起動サブユニットによって起動された前記画像取得機器によって、前記対象画像を取得するように構成された取得サブユニットと、
    を含む請求項９に記載の電子機器制御装置。
11. 前記機器決定ユニットは、
    画像認識演算を用いて、前記対象画像から、前記対象画像内に含まれる物体の外形情報を抽出するように構成された外形抽出サブユニットと、
    前記外形抽出サブユニットによって抽出された前記外形情報に従って、前記制御対象機器を決定するように構成された第１の機器決定サブユニットと、
    を含む請求項９に記載の電子機器制御装置。
12. 前記機器決定ユニットは、
    画像認識演算を用いて、前記対象画像から、前記対象画像内に含まれる物体のバーコード情報を抽出するように構成されたバーコード抽出サブユニットと、
    前記バーコード抽出サブユニットによって抽出された前記バーコード情報に従って、前記制御対象機器を決定するように構成された第２の機器決定サブユニットと、
    を含む請求項９に記載の電子機器制御装置。
13. 前記インターフェース表示ユニットは、
    前記制御対象機器が、前記制御対象機器と前記制御インターフェース間の予め設定された機器対応関係に記録されていることの決定に応答して、前記予め設定された機器対応関係に従って、前記制御対象機器に対応する前記制御インターフェースを獲得するように構成された第１の獲得サブユニットと、
    前記第１の獲得サブユニットによって獲得された前記制御対象機器に対応する前記制御インターフェースを表示するように構成された第１の表示サブユニットと、
    を含む請求項９に記載の電子機器制御装置。
14. 前記機器決定ユニットは、前記対象画像を認識することによって、前記制御対象機器の制御対象構成要素を決定するように構成された構成要素決定サブユニットを含み、
    前記インターフェース表示ユニットは、前記構成要素決定サブユニットによって決定された前記制御対象構成要素に対応する制御インターフェースを表示するように構成された第２の表示サブユニットを含む請求項９に記載の電子機器制御装置。
15. 前記第２の表示サブユニットは、
    前記制御対象構成要素が、前記制御対象構成要素と前記制御インターフェース間の予め設定された構成要素対応関係に記録されていることの決定に応答して、前記予め設定された構成要素対応関係に従って、前記制御対象構成要素に対応する前記制御インターフェースを獲得するように構成された獲得モジュールと、
    前記制御対象構成要素に対応する前記制御インターフェースを表示するように構成された表示モジュールと、
    を含む請求項１４に記載の電子機器制御装置。
16. 前記動作制御ユニットは、
    前記制御インターフェースへの前記制御操作の検出に応答して、前記制御操作に対応する制御命令を生成するように構成された命令生成サブユニットと、
    前記制御命令に従って前記制御対象機器の動作を始動させるために、前記制御対象機器へ、前記命令生成サブユニットによって生成された前記制御命令を送信するように構成された命令送信サブユニットと、
    を含む請求項９〜１５のいずれか１項に記載の電子機器制御装置。
17. プロセッサと、
    前記プロセッサによって実行される命令を記憶するように構成されるメモリと、
    を備え、
    前記プロセッサは、
    対象画像を取得し、
    前記対象画像を認識することによって、制御対象機器を決定し、
    前記制御対象機器の制御インターフェースを表示し、
    前記制御インターフェースへの制御操作の検出に応答して、前記制御対象機器の動作を制御する
    ように構成される端末。

Images