JP5661905B2 - Operation control device - Google Patents
Operation control device Download PDFInfo
- Publication number
- JP5661905B2 JP5661905B2 JP2013255582A JP2013255582A JP5661905B2 JP 5661905 B2 JP5661905 B2 JP 5661905B2 JP 2013255582 A JP2013255582 A JP 2013255582A JP 2013255582 A JP2013255582 A JP 2013255582A JP 5661905 B2 JP5661905 B2 JP 5661905B2
- Authority
- JP
- Japan
- Prior art keywords
- control
- distance
- unit
- image
- operator
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000033001 locomotion Effects 0.000 claims description 42
- 238000001514 detection method Methods 0.000 claims description 36
- 238000000034 method Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 9
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
Images
Landscapes
- Selective Calling Equipment (AREA)
Description
本発明は、家庭内の各種機器を操作制御するための操作制御装置に関する。 The present invention relates to an operation control apparatus for operating and controlling various devices in a home.
近年のテレビジョン受像機(以下、テレビと略す)やエアーコンディショナー(以下、エアコンと略す)等の家庭内機器では、離れたところから制御する為のリモートコントロール装置(以下、リモコンと略す)で操作するのが一般的である。 In recent home appliances such as television receivers (hereinafter abbreviated as TV) and air conditioners (hereinafter abbreviated as air conditioners), operation is performed with a remote control device (hereinafter abbreviated as remote control) for remote control. It is common to do.
ここで、特許文献1には、リモコンを手元に置いていない場合やリモコンを紛失した場合でも機器をリモート操作することを考慮し、撮影手段によって撮影された人の動きをトリガとして、操作途中でも操作が機器に受け入れられているかどうかを認識することができるリモート操作装置が開示されている。(特許文献1[0007][0008]参照)
Here, in
しかしながら、上記特許文献1で開示された発明では、撮影手段に撮影されるように、操作者がリモート操作のための動きを行わなければならず、操作性が悪い。そこで、本発明は、リモート操作において、撮影手段を用いずに、操作性を高めることを目的とし、さらに、家庭内の複数の機器に対するリモート操作を考慮する。
However, in the invention disclosed in
上記目的を達成するために、例えば、特許請求の範囲に記載の構成を採用する。 In order to achieve the above object, for example, the configuration described in the claims is adopted.
本発明によれば、家庭内の複数の機器に対して、操作性が高いリモート操作を行うことができる。 According to the present invention, remote operation with high operability can be performed on a plurality of devices in the home.
以下、本発明の実施形態を、図面を用いて説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
図1は本実施例における操作制御装置の構成の一例を示すブロック図である。101は、テレビ等の機器を制御する操作制御装置であり、102は、操作制御装置101が制御する制御対象機器との機器接続部である。図2に、制御対象機器との接続の一例を示す。121は、例えば、操作制御装置101が接続している家庭内ネットワークであり、家庭内ネットワーク121には、家庭内にある制御対象である制御対象機器、例えば、エアコン122やテレビ123、レコーダー124、インターフォン125等が接続している。操作制御装置101は、機器接続部102および家庭内ネットワーク121を介して、これら制御対象機器を制御する。なお、前記制御対象機器は一例であり、前記制御対象機器以外の機器を制御することも可能である。また、機器接続部102は、無線のネットワーク接続手段でも良いし、家庭内ネットワーク121の代わりに、1個あるいは複数個の機器の制御信号を赤外線あるいは電波で送信可能なリモコンあるいはリモコン接続手段等としてもよい。
FIG. 1 is a block diagram showing an example of the configuration of the operation control apparatus in this embodiment.
103は、機器接続部101に接続されている制御対象機器および制御対象機器の制御情報を管理する機器管理部である。機器管理部103が管理している制御情報の一例を図8に示す。801は制御対象機器の名称であり、802は制御対象機器を一意に管理する為のID、803は制御対象機器と接続する為に必要な情報であり、例えば、IPアドレス、パスワード等である。804は、制御対象機器の操作の選択順であり、例えば、操作者が操作を開始した時には最も小さい番号の制御対象機器が制御可能であり、操作者が次の制御対象機器の操作を指示した場合には、選択順の番号が次に小さい制御対象機器を操作可能にする等の順番を指定している。805は制御対象機器毎の制御項目名であり、806は制御項目を管理する為のID、807は制御項目を実行する為の制御コマンドである。808は、制御項目が操作可能な制御対象機器の状態を示しており、例えば、テレビでは電源オンの状態を001とし、「CHアップ」、「CHダウン」等が操作可能であるが、電源オフ時では「電源オン」のみが操作可能な制御項目となる。なお、機器管理部103は、図8で説明した制御情報以外にも管理してよく、また、説明に使用した番号などは一例であり、管理できれば他の番号や記号等でもかまわない。
110は、投影する画面イメージを生成あるいは設定する表示画面設定部であり、例えば、機器管理部103で管理されている制御対象機器の制御項目に対応した画面イメージを生成し、その中から1個の画面イメージを投影画面として設定する。図5に、テレビを例に、画面イメージの一例を示す。制御項目毎に対応した画面イメージが生成され、例えば、「チャンネルアップ」は画面イメージ501、「チャンネルダウン」は画面イメージ502、「音量アップ」は画面イメージ503、「音量ダウン」は画面イメージ504、「電源オフ」は画面イメージ505が生成される。また、制御項目の操作領域外であることを知らせる為のメッセージ506を表示しても良いし、操作方法や、ロゴマーク等のイメージを表示しても構わない。なお、画面イメージは、表示画面設定部110で生成してもよいし、予め制御項目毎に作成された画面イメージを用いても良い。
A display
104は、表示画面設定部110で設定された画像イメージを映像信号にして投影画面を生成する映像処理部であり、105は映像処理部104の映像を投影する投影部である。
A
106は、投影部105に投影された映像が表示される投影面と操作制御装置101との距離を検出する距離検出部である。距離検出の方法としては、例えば、赤外線や超音波を使って距離を計測する、あるいは、カメラで撮影した画像を利用して距離を測定する、あるいは、両者を併用する等、距離測定が可能なものであればいずれの方式を使用しても良い。
107は、距離検出部106で検出した距離の変化を解析し、投影面の動きの検出結果に基づいて制御項目の実行等を決定する制御決定部である。
Reference numeral 107 denotes a control determination unit that analyzes changes in the distance detected by the
108は、操作制御装置101を制御および管理するシステム制御部であり、距離検出部106で検出した距離と機器管理部103で管理されている制御情報とから制御対象となる機器の制御項目を決定する、さらに、制御決定部107の解析結果と機器管理部103で管理されている制御情報とから制御項目を判断し、機器接続部102を介して制御対象である機器に制御コマンドを通知する等の処理を行う。また、109は投影部105が投影する映像のフォーカス制御を行うフォーカス制御部であり、システム制御部108は、距離検出部106で検出した距離でフォーカスが合うようにフォーカス制御109を設定する。
本実施例の操作制御装置の操作概念図を図3に示す。図1と同じものには同じ番号を付している。201は操作制御装置101を介して制御対象機器を操作する操作者であり、(1)は操作者201が操作制御装置101の投影領域内に手を出していない状態の一例、(2)は操作者201が投影領域内に手を前に出した状態の一例を示す。202は、床や台等の操作制御装置101の投影面であり、203は投影面202に投影された映像、204は操作制御装置101と投影面202までの距離を示している。また、205は操作者201の手のひらであり、206は操作制御装置101が手のひら201に投影した映像、207は操作制御装置101から投影面である操作者201の手のひら205までの距離を示している。操作制御装置101は距離検出部106により操作者201の手のひら205までの距離207を計測し、距離に応じて対応する制御項目を選択し、選択した制御項目に対応した映像を投影する。操作者201は手のひら205に投影された映像を見ながら、手のひら205を上下することにより制御対象機器の制御項目および映像を切り替える。
An operation conceptual diagram of the operation control apparatus of this embodiment is shown in FIG. The same elements as those in FIG.
操作制御装置101から投影面までの距離205と制御項目の対応について説明する。
The correspondence between the
操作制御装置101が制御項目を選択するために割り当てる表示領域分割の一例を図4に示す。図1および図3と同じものには同じ番号を付している。401は、操作者が手を出したと判断する最大距離を示しており、距離検出部106で検出した距離が、距離401以上である場合、操作制御装置101は床や台等の投影面202に投影する映像と同じ映像を投影する。402は、操作制御装置101に近すぎて投射映像のフォーカスが合わない、あるいは、位置が高すぎて操作者が操作し難い距離であり、制御項目の割り当てからはずす。距離401および402の設定値は、操作制御装置101の投影部の仕様や、操作制御装置101の設置場所により予め決められる。さらに、操作者の身長を考慮して設定しても良い。
FIG. 4 shows an example of display area division assigned by the
距離402から距離401までの間を、操作する機器の制御項目に割当てる。404から408は、5個の項目を制御する場合の、各制御項目に割当てる領域を示しており、409は、操作者が手を出していないと判断する制御項目設定領域以外の領域を示している。操作制御装置101では、投影面が領域404から領域409のどの領域にあるかを検出し、各領域に対応した画面を表示する。操作者201は手のひら205を出す領域を移動することにより、制御項目の選択を行うことができる。
The distance between the
図5のテレビを例に、5個の制御項目が各領域に割り当てられている場合について説明する。操作者201が音量をアップしたい場合は、領域406の高さに手を置く。操作制御装置101は距離検出部106で投影面である手のひら205までの距離を検出し、領域406の位置に投影面があると判断し、制御項目3である「音量アップ」の制御項目に対応した画面イメージ503を投影する。図6に操作者の手のひら205に投影された映像の一例を示す。投影された画面イメージ503は、操作者201のてのひらに205に表示される。操作者が手を上下させて領域を変えることにより、操作制御装置101は各々の領域に対応した画面を投影する。以上説明したように、投影された映像を見ることにより操作者は制御する項目を知ることができる。なお、図3では投影面を操作者の手のひら205としたが、操作者が見て、投影することが可能な体の一部やものであればなんでもよい。
The case where five control items are assigned to each area will be described using the television in FIG. 5 as an example. When the
操作制御装置101の制御項目設定における処理フローの一例を図7に示す。
An example of the processing flow in the control item setting of the
操作制御装置101の処理開始は、例えば、赤外線センサを使った非接触スイッチ等に、手を近づける、あるいは、動かすことにより開始する。
The processing start of the
ステップS101は初期設定であり、接続されている機器から制御対象とする機器の選択、選択された機器の制御項目数から領域の分割を行い、初期の領域としては、例えば、制御項目を選択する前なので制御項目設定以外の領域G409を設定する。ステップS102で、初期画面イメージを投影する。ここで投影する初期画面イメージは操作者201が操作制御装置101が操作可能な状態になったことがわかる画像イメージであればよいが、例えば、図5の506に示したようなメッセージを表示することで操作者201の操作方法を知らせることができる。
Step S101 is an initial setting, in which a device to be controlled is selected from connected devices, a region is divided based on the number of control items of the selected device, and, for example, a control item is selected as the initial region. Since it is before, the area G409 other than the control item setting is set. In step S102, an initial screen image is projected. The initial screen image to be projected here may be an image image that shows that the
ステップS103で、図1の距離検出部106を用いて、投影面までの距離の検出を行う。ステップS103で、検出された投影面までの距離と設定されている領域を比較し、異なっていたら制御項目の変更を行い、制御項目に対応した画面イメージの設定、フォーカス制御部109でフォーカスの設定を行う。以降ステップS103からステップS105を繰り返すことにより、操作者が手を上下することに対応して、投影画面および制御項目の切り替えを行う。
In step S103, the
次に、選択した制御項目を実行する方法の一例について説明する。 Next, an example of a method for executing the selected control item will be described.
図9に選択した制御項目を実行するための操作者の操作の一例を示す。図6と同じものには同じ番号を付し、説明は省略する。901は操作者201が選択した制御項目を実行するために手のひら205を動かす制御実行方向を示している。操作者201はある領域に手のひら205を置き、制御項目決定後、手のひら205を連続的に制御実行方向901に手を振る。図9の例は制御実行方向901が左右方向である場合を示している。この場合の距離検出部106の出力波形の一例を図10に示す。横軸は時間、縦軸は距離検出部106で検出した距離、111は連続して手を動かした場合の波形を示している。112は制御操作装置101から床や台等までの距離を、113は制御操作装置101から手のひら205までの距離を示している。114は投影面が床や台等である期間で、操作者201が操作していない様子を示す。115は投影面が手のひら205である期間で、操作者201が制御対象機器を操作するために手のひら205を投影領域内に出した様子を示す。116は操作者201が選択項目を実行するために手のひら205を制御実行方向901に動かした期間である。手のひら205が動くことにより距離検出部106で検出した距離が床や台等までの距離と手のひら205までの距離で交互に現れる様子を示している。図10の距離検出部106を用いた動作フローについて以下説明する。
FIG. 9 shows an example of the operation of the operator for executing the selected control item. The same components as those in FIG. 6 are denoted by the same reference numerals, and description thereof is omitted.
図11は表示された制御項目の実行処理の動作フローの一例を示す。 FIG. 11 shows an example of an operation flow of execution processing of the displayed control items.
ステップS200では、図10の111で制御項目が選択されたと判断し、制御項目を設定する。ステップS201では、操作制御装置101の制御決定部107で距離検出部106の出力から、図10の116に示したような距離の連続した変化を検出する。ステップS202では、連続した変化が予め登録している距離変化のパターンと一致すると判断した場合は、操作者が制御項目を実行する動きをしたと認識し、ステップS203で制御項目の実行を行う。予め登録する距離変化パターンに一致する動きとしては、例えば、図9及び図10で説明したような、手を左右や上下に振る動き、あるいは、手のひらの代わりとなるものを動かしても良い。制御項目の実行は、操作制御装置101が、操作対象機器に制御項目に対応した実行コマンド等を送信することにより行う。
In step S200, it is determined that the control item is selected in 111 of FIG. 10, and the control item is set. In step S201, the control determination unit 107 of the
以上説明したように、本実施例の操作制御装置により、操作者はリモコン等に触れることなく、手を上下させる、あるいは、手を振る等の簡単な動作で、制御項目の選択や実行が可能になり、容易に機器制御を行うことが可能になる。 As described above, the operation control device according to the present embodiment allows the operator to select and execute control items with a simple operation such as raising or lowering his / her hand or shaking his / her hand without touching the remote control or the like. Thus, it becomes possible to easily control the device.
図12は本実施例における操作制御装置の構成の一例を示すブロック図である。実施例1との違いは、1つの制御項目から複数の操作が実行可能であることである。図1と同じものには同じ番号を付し、説明は省略する。1201は物体の動きを検出する動き検出部でありる。動き検出部1201は、例えば、焦電型赤外線センサを複数組み合わせた移動方向検出センサとすることで安価な構成とすることが可能である。あるいは、イメージセンサ、カメラ等とすることで、移動方向だけではなく、動き方や動いた位置を使いより多くの操作を行うことが可能である。1202は動き検出部1201の出力から手のひらの動きの方向等を解析し、操作の実行を判断する制御決定部であり、動き検出部1201から出力される波形、あるいは、画像を基に物体の動きを検出する。
FIG. 12 is a block diagram showing an example of the configuration of the operation control device in this embodiment. The difference from the first embodiment is that a plurality of operations can be executed from one control item. The same parts as those in FIG.
図13に、操作者の動作例の一例を示す。図13はテレビのチャンネルダウンの制御項目が投影されている例を示しており、図9と同じものには同じ番号を付し、説明は省略する。231は、テレビのチャンネルダウンの制御項目の投影画像例である。232は制御実行方向を示す画像例であり、例えば、手のひら205を右に動かすと制御項目を実行することを示す。233は機器選択方向を示す画像例であり、例えば、手のひら205を左に動かすと操作対象機器を変更することを示す。234は手のひら205を右方向に移動させた場合の手のひらを、235は手のひら205を左方向に移動させた場合の手のひらを示しており、どちらの場合も投影位置から外れている為、手のひら234および手のひら235には何も投影されていない状態を示している。
FIG. 13 shows an example of the operation example of the operator. FIG. 13 shows an example in which TV channel down control items are projected. The same components as those in FIG.
図15に操作制御装置の動き検出時の動作フローの一例を示す。図10と同じものには同じ番号を付し、説明は省略する。ステップS301で 動き検出部1201が動きを検出している状態にある時、操作者201が手のひら205を右に移動させると、ステップS301で動きがあることを検出する。ステップS302はステップS301で検出した動きが登録されている動きパターンに一致するものがあるかを判定する。ステップS302で一致するものがあると判断した場合は、ステップ303で制御決定部122が操作者の手のひらが右に動いたことを検出しシステム制御部108に伝える。ステップS203では、システム制御部108で表示している制御項目が、例えば、テレビのチャンネルダウンであれば、テレビにチャンネルダウンの制御コマンドを送信する等、制御項目を実行する。
FIG. 15 shows an example of an operation flow at the time of motion detection of the operation control device. The same components as those in FIG. 10 are denoted by the same reference numerals, and description thereof is omitted. If the
また、操作者201が手のひら205を左に移動させると、ステップS303では、制御決定部122は操作者の手のひらが左に動いたことをシステム制御部108に伝える。ステップS304で、システム制御部108は制御操作装置101に接続されている制御対象機器から次に表示する機器およびその制御項目を選択し、表示画面設定部110で新たな投影画像を設定する。図14に、投影された画像の一例を示す。図13と同じものには同じ番号を付し、説明は省略する。図14は、操作者201の手のひら205を左に動かした後、操作制御装置101の投影画像の投影位置に手のひらを戻した場合を示している。241は、エアコン122の温度を下げる制御項目の投影画像例であり、制御機器がテレビジョン受像装置からエアコン122に変更され、制御項目もエアコン122の制御項目となる。操作者201はこの状態で図13と同様に手のひらを左右に動かすことにより、エアコン122の制御や制御機器の変更を行うことができる。
When the
以上説明した本実施例の操作制御装置により、操作者は機器に触れることなく機器の操作を行うことができる。なお、本実施例では、手のひらを左右に動かす例について説明したが、同様に上下の動きを検出して機器を制御しても構わない。また、すでに操作者が手のひらを動かす方向が分かっている場合は、動かす方向およびその操作に関する画像を省き、投影した画像をシンプルなものにしても良い。 With the operation control apparatus of the present embodiment described above, the operator can operate the device without touching the device. In this embodiment, the example in which the palm is moved to the left and right has been described. However, the device may be controlled by detecting the vertical movement in the same manner. If the operator already knows the direction in which the palm is moved, the projected image may be simplified by omitting the moving direction and the image related to the operation.
図16は本実施例における操作制御装置の表示領域分割の一例を示す。本実施例は、実施例1または2の操作制御装置における表示領域分割方法の他の一例である。図4と同じものには同じ番号を付し、説明は省略する。461は、距離401以降の背景とみなす領域Gと距離402より近い領域Aを除いた使用可能領域(領域B)であり、462は操作者201が最初に手のひら205を操作制御装置101の投影面に手を出し、操作制御装置101が最初に距離を検出した基準面であり、463は操作制御装置101から基準面462までの距離を示している。465は、説明の為に461を拡大したものであり、466は基準面462である。467から471は、基準面466を中心制御項目に対応して割り当てられた領域の例であり、5個の制御項目を制御する例を示している。467〜471の領域の高さ及び幅は、制御項目数と基準面466の高さにより設定される。
FIG. 16 shows an example of display area division of the operation control apparatus in this embodiment. The present embodiment is another example of the display area dividing method in the operation control apparatus of the first or second embodiment. The same components as those in FIG. 4 are denoted by the same reference numerals, and description thereof is omitted.
図17に操作制御装置の処理フローの一例を示す。図7と同じ処理には同じ番号を付し、説明は省略する。ステップS102で画面表示した後、ステップS401で投影面までの距離を検出する。ステップS402では、ステップS401で検出した距離が使用可能領域(領域B)461内にある場合は、ステップS403で検出した距離を基準面462とし、基準面462を中心として設定する制御項目に応じた領域を設定していく。以下、操作者が手のひらを上下させることにより、図7で説明したようにステップS103からステップS105を繰り返し、操作者は所望の制御項目を選択していく。
FIG. 17 shows an example of the processing flow of the operation control apparatus. The same processes as those in FIG. After the screen is displayed in step S102, the distance to the projection plane is detected in step S401. In step S402, when the distance detected in step S401 is within the usable area (area B) 461, the distance detected in step S403 is set as the
本実施例により、操作者が決めた基準面を中心に制御領域が設定される為、操作者の身長の高低にかかわらず使いやすい操作制御装置とすることができる。 According to the present embodiment, since the control area is set around the reference plane determined by the operator, it is possible to provide an easy-to-use operation control device regardless of the height of the operator.
なお、基準面をすくむ領域に設定される制御項目は、操作者が最も操作しやすいように、最も使用頻度の高い制御項目としても良いし、前回使用した制御項目としても良い。 It should be noted that the control item set in the area where the reference plane is drawn may be the control item with the highest use frequency or the control item used last time so that the operator can operate most easily.
図18に操作制御装置の投影方法の一例を示す。本実施例は、実施例1または実施例2の操作制御装置における投影方法の他の一例である。183および187は投影画像の高さを示しており、184は操作制御装置101から投影画像の高さ183までの距離、188は101から投影画像の高さ187までの距離を示している。181は高さ183に手のひら205がある場合の投影画像全体を、185は高さ187に手のひら205がある場合の投影画像全体を示している。189および190は投影する前の制御項目に対応した画像イメージ、182および186は投影後の画像イメージを示す。操作制御装置101は投影して画像を表示する為、投影画像はレンズにより操作制御装置101から離れるほど投影される画像は大きくなる為、操作制御装置101から距離が遠い高さ187に投射する画像イメージ190を画像イメージ189より小さくすることで、どの高さにおいても、手のひら内に画像イメージを納めることができる。
FIG. 18 shows an example of the projection method of the operation control apparatus. The present embodiment is another example of the projection method in the operation control apparatus of the first embodiment or the second embodiment.
図19に操作制御装置の処理フローの一例を示す。図17と同じ処理には同じ番号を付し、説明は省略する。ステップS403で基準面および領域を設定するとともに、各領域に投影する画像イメージをステップS501で設定する。画像サイズは、投影する画像の大きさと、操作制御装置101から投影する領域までの距離と、投影角から決められる。
以下、図17と同様に操作する。
FIG. 19 shows an example of the processing flow of the operation control apparatus. The same processes as those in FIG. In step S403, a reference plane and a region are set, and an image image to be projected on each region is set in step S501. The image size is determined from the size of the image to be projected, the distance from the
Thereafter, the same operation as in FIG. 17 is performed.
本実施例により、操作者は、手のひらの高さに関わらず、制御項目に対応した画像イメージを手のひら上に投影することができ、操作者は投影された画像を見ることにより制御内容の確認が可能である。 According to the present embodiment, the operator can project an image image corresponding to the control item on the palm regardless of the palm height, and the operator can confirm the control contents by looking at the projected image. Is possible.
図20は本実施例における操作制御装置の構成の一例を示すブロック図である。実施例1または実施例2との違いは、制御項目実行決定を経過時間で判断することにある。 FIG. 20 is a block diagram showing an example of the configuration of the operation control apparatus in the present embodiment. The difference from the first embodiment or the second embodiment is that the control item execution decision is determined by the elapsed time.
図1と同じものには同じ番号を付し、説明は省略する。2001は、距離検出部106の出力が背景より前である場合の時間を計測し、同じ距離あるいは図4や図16で説明した領域で同じ領域内に予め決められた時間以上ある場合に、システム制御部108に通知する。
The same parts as those in FIG. 2001 measures the time when the output of the
図21は、本実施例における距離検出部の出力波形の一例を示す。2101は距離検出部の出力波形の例、2102は、操作制御装置1010から背景までの距離、2103は、手のひら等が挿入された場合の操作制御装置1010から投影面までの距離、2104および2106は投影面が背景である時間、2105は投影面が背景以外の手のひら等である時間、2107は制御項目が実行されるまでの時間を示している。操作者は制御項目を選択した後、その高さあるいは選択した制御項目の領域内にある一定時間である時間2107以上、とどめることにより制御項目を実行する。
FIG. 21 shows an example of the output waveform of the distance detector in the present embodiment. 2101 is an example of an output waveform of the distance detection unit, 2102 is a distance from the operation control apparatus 1010 to the background, 2103 is a distance from the operation control apparatus 1010 to the projection plane when a palm or the like is inserted, 2104 and 2106 are The time when the projection surface is the background, 2105 indicates the time when the projection surface is a palm other than the background, and 2107 indicates the time until the control item is executed. After selecting the control item, the operator executes the control item by keeping the height or
本実施例により、操作者は手のひらをある一定以上の時間、一定の高さにおいておくことで機器の制御が可能になる。 According to the present embodiment, the operator can control the device by keeping the palm at a certain height for a certain time or more.
図22は本実施例における操作制御装置の構成の一例を示すブロック図である。実施例1または実施例2との違いは、操作制御対象機器からの通知により操作開始する操作開始方法にある。図1および図13と同じものには同じ番号を付し、説明は省略する。2201は、制御対象機器からの通知を受信する受信処理部であり、受信した制御対象機器と制御項目の情報をシステム制御部108に通知する。システム制御部108は通知された制御対象機器と制御項目に対応した画像イメージを投影するよう表示画面設定部に110に通知する。以下、図13と同様な為説明は省略する。
FIG. 22 is a block diagram showing an example of the configuration of the operation control apparatus in the present embodiment. The difference from the first embodiment or the second embodiment is an operation start method for starting an operation by a notification from the operation control target device. The same components as those in FIGS. 1 and 13 are denoted by the same reference numerals, and description thereof is omitted. A
図23に投影画像の一例を示す。例えば、訪問者がインターフォン125を押した場合に、投影される画像イメージである。2301は投影された画像イメージを、2302および2303は動作認識の方向を示している。操作者は、映像が投影されることにより、制御対象機器から通知があることを知り、手のひらを2302あるいは2303の方向に動かすことにより、通知に対する処理方法を決定する。例えば、手のひらを右方向に動かすと「決定」の制御コマンドがインターフォン125に送られる。インターフォン125は、インターフォン125に接続しているスピーカやマイク等をオン状態にすることで、操作者は訪問者と会話ができるようになる。
FIG. 23 shows an example of the projected image. For example, the image is projected when the visitor presses the
図24に本実施例における操作制御装置の処理フローの一例を示す。ステップS601で制御対象機器から通知を受信すると、操作制御装置101はステップS602で通知された制御対象機器と制御項目から投影する画像イメージを投影し、ステップS603で投影面まで距離検出を開始する。ステップS604では、投影面が動きを検出する範囲内でない、例えば背面までの距離であれば、ステップS603に戻り、距離検出を繰り返す。ここで、距離検出を画像が投影されたのを見た操作者201が手を投影面に出すと、ステップS604で動作認識範囲内にあると判断し、ステップS605で動き検出を開始する。ステップS606で検出した動きがあらかじめ設定した動きと一致しない場合は、ステップS605の動き検出に戻り、動きが一致した場合はステップS607でどの動きであるかを判断する。例えば、「決定」と「取消」に動きが割り当てられている場合は、「取消」の動きを認識した場合は処理を終了する。また、「決定」動きを認識した場合は、ステップS608に進み、操作対象機器に制御項目に対応した制御コマンドを送信し、制御項目を実行する。
FIG. 24 shows an example of the processing flow of the operation control apparatus in the present embodiment. When a notification is received from the control target device in step S601, the
以上説明した制御操作装置により、制御対応機器から通知があった場合にも、同様に操作することが可能である。なお、制御対象機器からの通知としては、テレビからのお勧め番組の開始通知や、エアコンからの節電運転の為の提案等、何でもよい。また、投影する画像イメージとして、制御対象機器からのメッセージを表示するようにしてもよい。 The control operation device described above can be operated in the same manner even when notified from a control-compatible device. The notification from the control target device may be anything such as a recommended program start notification from the television or a proposal for power saving operation from the air conditioner. In addition, a message from the control target device may be displayed as an image to be projected.
101・・・操作制御装置、102・・・機器接続部、103・・・機器管理部、104・・・映像処理部、105・・・投影部、106・・・距離検出部、107・・・制御決定部、108・・・システム制御部、109・・・フォーカス制御部、110・・・表示画面設定部、121・・・ネットワーク
DESCRIPTION OF
Claims (4)
複数の制御項目に対応した制御コマンドを管理する機器管理部と、
前記複数の制御項目に対応した映像を生成する映像生成部と、
前記映像生成部が生成する映像を操作面に重ねて表示する映像表示部と、
前記映像生成部から操作面までの距離を検出する距離検出部と、
前記距離検出部で検出された距離に応じて前記映像表示部が表示する映像の大きさが前記操作面の大きさに納まるように映像表示部を制御し、制御項目の実行が決定された場合に、前記機器管理部で管理される制御コマンドを制御対象の機器に実行させる制御部とを備え、
前記制御部は、前記距離検出部で検出された距離に応じて、制御項目を変えるように映像生成部を制御することを特徴とする操作制御装置。 An operation control device for controlling operation of equipment,
A device management unit that manages control commands corresponding to a plurality of control items;
A video generation unit that generates video corresponding to the plurality of control items;
A video display unit for displaying the video generated by the video generation unit on the operation surface;
A distance detection unit that detects a distance from the video generation unit to the operation surface;
When the video display unit is controlled so that the size of the video displayed by the video display unit falls within the size of the operation surface according to the distance detected by the distance detection unit, and execution of the control item is determined A control unit that causes a control target device to execute a control command managed by the device management unit ,
Wherein, in response to the distance detected by the distance detecting unit, the operation control apparatus characterized that you control the image generator so as to change the control items.
前記制御部は、前記動き検出部が所定の動きを検出した場合に、制御対象となる機器を変更することを特徴とする請求項1に記載の操作制御装置。 A motion detection unit for detecting a motion of an operation surface for detecting a distance in the video generation unit;
The operation control device according to claim 1, wherein the control unit changes a device to be controlled when the motion detection unit detects a predetermined motion.
制御項目の実行は、前記動き検出部が前記所定の動きとは異なる所定の動きを検出した場合に決定されることを特徴とする請求項3に記載の操作制御装置。 The motion detection unit detects a plurality of predetermined motions,
4. The operation control device according to claim 3, wherein execution of the control item is determined when the motion detection unit detects a predetermined motion different from the predetermined motion.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013255582A JP5661905B2 (en) | 2013-12-11 | 2013-12-11 | Operation control device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013255582A JP5661905B2 (en) | 2013-12-11 | 2013-12-11 | Operation control device |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010271027A Division JP5439347B2 (en) | 2010-12-06 | 2010-12-06 | Operation control device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014075835A JP2014075835A (en) | 2014-04-24 |
JP5661905B2 true JP5661905B2 (en) | 2015-01-28 |
Family
ID=50749637
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013255582A Active JP5661905B2 (en) | 2013-12-11 | 2013-12-11 | Operation control device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5661905B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106114519A (en) * | 2016-08-05 | 2016-11-16 | 威马中德汽车科技成都有限公司 | A kind of device and method vehicle being controlled by operation virtual push button |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4010708B2 (en) * | 1999-06-21 | 2007-11-21 | 日本ビクター株式会社 | Equipment control device |
JP2005018385A (en) * | 2003-06-26 | 2005-01-20 | Mitsubishi Electric Corp | Operation information providing device |
JP4972013B2 (en) * | 2008-02-28 | 2012-07-11 | 日本電信電話株式会社 | Information presenting apparatus, information presenting method, information presenting program, and recording medium recording the program |
-
2013
- 2013-12-11 JP JP2013255582A patent/JP5661905B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2014075835A (en) | 2014-04-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5439347B2 (en) | Operation control device | |
KR101297255B1 (en) | Mobile robot, and system and method for remotely controlling the same | |
EP3125152B1 (en) | Method and device for collecting sounds corresponding to surveillance images | |
KR20110119118A (en) | Robot cleaner, and remote monitoring system using the same | |
KR101684203B1 (en) | Method and device for broadcasting stream media data | |
JP2009223490A (en) | Virtual switch, and household electric appliance control system and method using same | |
JP2013055650A (en) | Image display apparatus, remote controller, and method for operating the same | |
US11438648B2 (en) | Information processing terminal and system | |
KR20160024848A (en) | Remote control programming using images | |
WO2014155885A1 (en) | Input device | |
JP5661905B2 (en) | Operation control device | |
JP4960270B2 (en) | Intercom device | |
JP2018190247A (en) | Display device | |
JP2005354543A (en) | Remote control device | |
CN102779014B (en) | Interactive protection system and protector adjusting control method | |
KR20140067765A (en) | Home network system and the service providing method of the same | |
CN103902028B (en) | Input equipment, interactive system and input method | |
KR100651292B1 (en) | Tv having a camera and method and ststem for providing image information thereof | |
JP2006222613A (en) | Remote controller and controlled device, and control system | |
TW201437903A (en) | Controlling method for remote device and remote controlling system | |
JP2015099956A (en) | Imaging apparatus, information processing apparatus, imaging system, and program | |
US20210258504A1 (en) | Control apparatus and control method | |
KR200481796Y1 (en) | Pan-Tilt-Zoom Camera Controller | |
JP2014072614A (en) | Television system | |
JP2010045604A (en) | Receiving device, receiving method, program, and transmitting and receiving system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20140310 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20140317 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20140318 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20140319 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140813 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140826 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140917 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141022 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20141125 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141203 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5661905 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |