JP5830653B2 - Air conditioner - Google Patents
Air conditioner Download PDFInfo
- Publication number
- JP5830653B2 JP5830653B2 JP2012102220A JP2012102220A JP5830653B2 JP 5830653 B2 JP5830653 B2 JP 5830653B2 JP 2012102220 A JP2012102220 A JP 2012102220A JP 2012102220 A JP2012102220 A JP 2012102220A JP 5830653 B2 JP5830653 B2 JP 5830653B2
- Authority
- JP
- Japan
- Prior art keywords
- gesture
- detection
- detection means
- image
- location distribution
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Air Conditioning Control Device (AREA)
- Image Processing (AREA)
Description
本発明は、ジェスチャで送風内容を制御する空気調和機に関するものである。 The present invention relates to an air conditioner that controls the contents of blown air with gestures.
従来の空気調和機は、人がリモコン操作で空気調和対象とするエリアに全般の送風内容(送風オン/オフ、温冷風選択、風向、風量などが含まれる)を設定するので、その全般の送風内容を設定するため人が空気調和機のコントローラの位置(リモコンの置いてある位置も含む)まで移動する必要がある。そうした操作を非接触で行えるようにしたものとして、空気調和機にカメラを備え、遠距離で人の姿勢や動作を検出し、検出したジェスチャで空気調和機を制御することが可能になっている。このカメラは常にオンの状態で人の姿勢や動作を検出するので、人が意図せずに行った姿勢や動作をジェスチャと誤認識してしまう場合がある。 Conventional air conditioners set general ventilation contents (including air on / off, hot / cold air selection, wind direction, air volume, etc.) in an area that is subject to air conditioning by remote control operation. In order to set the contents, it is necessary for a person to move to the position of the controller of the air conditioner (including the position where the remote control is placed). It is possible to perform such operations in a non-contact manner, and it is possible to control the air conditioner with the detected gesture by installing a camera in the air conditioner, detecting the posture and movement of a person at a long distance. . Since this camera always detects the posture and motion of a person while it is on, there are cases where a posture or motion that a person has unintentionally performed is erroneously recognized as a gesture.
その誤認識をさせないようにしたものとして、空調設定に対する嗜好との関連を学習する生活パターン別嗜好学習部を備え、人が意図せずに行った姿勢や動作の嗜好情報を収集し、空調設定に対するジェスチャと人の嗜好を判別して全般の送風状態を設定することにより誤認識を抑制しているものがあった(例えば、特許文献1参照)。 In order to prevent such misrecognition, it is equipped with a life pattern preference learning unit that learns the relationship with preferences for air conditioning settings, and collects preference information on postures and movements performed by people unintentionally, and sets air conditioning In some cases, misrecognition is suppressed by determining the gesture and the preference of the person and setting the general blowing state (see, for example, Patent Document 1).
また、複雑なジェスチャ組合せやジェスチャと音声の組合せをさせているものもある(例えば、特許文献2)。 In addition, there is a complicated combination of gestures or a combination of gesture and voice (for example, Patent Document 2).
図7は、前記特許文献2に記載された従来の空気調和機の制御装置を示すものである。図7に示すように、検知カメラ701と検知マイク702を備える検知装置703と、制御部704と、ジェスチャ発声パターンデータD1と組合せパターンデータD2を記憶するメモリ705と、空調装置706とから構成されている。これにより、人が複雑なジェスチャ操作または音声操作を行い、メモリに記憶したデータを検索比較しながら設定データと一致した時に全般の送風状態を設定することで誤認識を抑制することが可能になっている。 FIG. 7 shows a conventional air conditioner control device described in Patent Document 2. As shown in FIG. 7, it comprises a detection device 703 including a detection camera 701 and a detection microphone 702, a control unit 704, a memory 705 for storing gesture utterance pattern data D1 and combination pattern data D2, and an air conditioner 706. ing. This makes it possible to suppress misrecognition by setting a general blowing state when a person performs a complicated gesture operation or voice operation and matches the setting data while searching and comparing data stored in the memory. ing.
しかしながら、前記従来の方法では、カメラが人の姿勢や動作を検出し、人の姿勢や動作と学習した嗜好もしくは前記ジェスチャ発声パターンデータD1または組合せパターンデータD2と一致した時のみ正しいジェスチャと判定するので、人は複雑なジェスチャの組合せまたはジェスチャと音声の組合せを覚えなければならないという課題を有していた。 However, in the conventional method, the camera detects the posture and movement of the person, and determines that the gesture is correct only when the posture and movement of the person matches the learned preference or the gesture utterance pattern data D1 or the combination pattern data D2. As such, people have the problem of having to remember complex gesture combinations or gesture and voice combinations.
本発明は、人が行う簡単な動作を有効ジェスチャとし、且つ意図せずに行った姿勢や動作とは区別して検出する空気調和機を提供することを目的とする。 SUMMARY OF THE INVENTION An object of the present invention is to provide an air conditioner that detects a simple operation performed by a human as an effective gesture and detects the posture and operation performed unintentionally.
前記従来の課題を解決するために、本発明の空気調和機は、人の所在分布を検出する所
在分布検出手段と、人のジェスチャを検出するジェスチャ検出手段と、前記所在分布検出手段および前記ジェスチャ検出手段の検出内容により送風内容を決定する送風内容決定手段と、前記送風内容決定手段における決定に従って送風内容を制御する送風制御手段と、前記所在分布検出手段が人の所在分布の変化を検出した時に前記ジェスチャ検出手段を起動させるトリガ発生手段を備える構成としたものである。
In order to solve the above-described conventional problems, an air conditioner according to the present invention includes a location distribution detection unit that detects a human location distribution, a gesture detection unit that detects a human gesture, the location distribution detection unit, and the gesture. The blow content determination means for determining the blow content based on the detection content of the detection means, the blow control means for controlling the blow content according to the determination in the blow content determination means, and the location distribution detection means detected a change in the location distribution of a person In some cases, the apparatus includes a trigger generation unit that activates the gesture detection unit.
この構成により、人が特別な姿勢や動作を覚えなくても、人の所在分布が変わった時にジェスチャ検出手段を自動的に起動して、この時点からジェスチャを検出するので、誤操作を抑制し、複雑なジェスチャをすることなしに操作の利便性を高めることができる。 With this configuration, even if the person does not remember a special posture or movement, the gesture detection means is automatically activated when the person's location distribution changes, and the gesture is detected from this point, so that erroneous operations are suppressed, Convenience of operation can be enhanced without making complicated gestures.
本発明の空気調和機は、簡単なジェスチャ操作で、且つ意図せずに行った動作を空気調和機の操作のためのジェスチャと誤認識させずに送風の要/不要および送風内容を制御することができる。 The air conditioner of the present invention controls the necessity / unnecessity of air blowing and the contents of air blowing by simple gesture operation and without misrecognizing an unintentional operation as a gesture for operating the air conditioner. Can do.
第1の発明は、人の所在分布を検出する所在分布検出手段と、人のジェスチャを検出するジェスチャ検出手段と、前記所在分布検出手段および前記ジェスチャ検出手段の検出内容により送風内容を決定する送風内容決定手段と、前記送風内容決定手段における決定に従って送風内容を制御する送風制御手段と、前記所在分布検出手段が人の所在分布の変化を検出した時に前記ジェスチャ検出手段を起動させるトリガ発生手段とを備えている。 According to a first aspect of the present invention, a location distribution detecting means for detecting a person's location distribution, a gesture detecting means for detecting a person's gesture, and an air flow for determining the blown air content based on the detected contents of the location distribution detecting means and the gesture detecting means. Content determining means, air blowing control means for controlling the air blowing content according to the determination in the air blowing content determining means, trigger generating means for activating the gesture detecting means when the location distribution detecting means detects a change in the person's location distribution, It has.
この構成により、所在分布検出手段が人の所在分布を検出して、人の所在分布が変わった時にトリガ発生手段が、ジェスチャ検出手段を自動的に起動し、人のジェスチャを検出し始め、人のジェスチャにより送風の要/不要や送風強弱などの送風内容を送風決定手段が決定し、送風制御手段がその送風内容に基づく送風をするので、人の所在分布が変わらない時に意図せずに行った姿勢や動作を誤認識することなく、誤操作を抑制することが可能となり、人の所在分布が変わった時のみにジェスチャを行い、簡単なジェスチャ動作で制御できるので、複雑なジェスチャ設定がなくなり、操作の利便性を高めることが可能となる。 With this configuration, when the location distribution detecting means detects the person's location distribution, and the person's location distribution changes, the trigger generating means automatically activates the gesture detecting means, and starts detecting the person's gesture. The air flow determining means determines the air blowing content such as necessity / unnecessity of air blowing and the strength of the air blowing by the gesture, and the air blowing control means performs air blowing based on the air blowing content. It is possible to suppress erroneous operations without misrecognizing the posture and movement, and perform gestures only when the location distribution of people changes, and control with simple gesture movements, eliminating complicated gesture settings, It is possible to improve the convenience of operation.
第2の発明は、第1の発明において、前記ジェスチャ検出手段によるジェスチャ検出を終了させるジェスチャ終了手段を備える構成であり、この構成によりジェスチャ検出中に前のジェスチャ操作をキャンセルしたり、ジェスチャ検出を中止したりすることが可能となる。 According to a second aspect of the present invention, there is provided a configuration including gesture ending means for ending gesture detection by the gesture detection means in the first invention. With this configuration, a previous gesture operation can be canceled during gesture detection, or gesture detection can be performed. It is possible to cancel.
第3の発明は、第2の発明において、計時手段を備え、前記ジェスチャ検出手段の起動後所定時間を計時すると、前記ジェスチャ終了手段がジェスチャ検出を終了させる構成であり、この構成により、ジェスチャ検出が時間限定され、その時間以外の誤操作を抑制することが可能となる。 According to a third aspect of the present invention, in the second aspect of the invention, there is provided a timepiece means, and the gesture end means ends the gesture detection when a predetermined time is counted after the gesture detection means is activated. Is limited in time, and it becomes possible to suppress erroneous operations other than that time.
第4の発明は、第1〜第3のいずれか1つの発明において、表示手段をさらに備え、前記ジェスチャ検出手段がジェスチャ検出中は前記表示手段でジェスチャ検出中であること表示する構成であり、この構成により、人がジェスチャ検出手段のオン/オフ状態や検出残時間や検出結果などの情報を把握し、無駄なジェスチャ操作を無くする上、操作表示ユーザーインタフェースの性能が高まる。 According to a fourth aspect of the present invention, in any one of the first to third aspects, the display unit further includes a display unit, and the gesture detection unit displays that the gesture is being detected by the display unit during gesture detection. With this configuration, a person grasps information such as the on / off state of the gesture detection means, the remaining detection time, and the detection result, thereby eliminating unnecessary gesture operations and improving the performance of the operation display user interface.
第5の発明は、第1〜第4のいずれか1つの発明において、画像を検出する画像検出手段を備え、前記所在検出手段は前記画像検出手段の検出に基づき人の所在を検出し、前記ジェスチャ検出手段は前記画像検出手段の検出に基づきジェスチャを検出する構成であり、この構成により、画像検出手段の配置数を1つにでき、簡易な構成で実現できる。 According to a fifth aspect of the invention, in any one of the first to fourth aspects of the invention, the image detection means for detecting an image is provided. The location detection means detects the location of a person based on the detection of the image detection means. The gesture detection unit is configured to detect a gesture based on the detection of the image detection unit. With this configuration, the number of image detection units can be one, and can be realized with a simple configuration.
第6の発明は、第5の発明において、前記画像検出手段は、温度分布を検出する温度分布検出手段である構成であり、この構成により、人の肌と周辺環境の温度差を利用し、人の所在分布およびジェスチャ動作を検出することが容易に実現できる。 According to a sixth invention, in the fifth invention, the image detection means is a temperature distribution detection means for detecting a temperature distribution. With this configuration, a temperature difference between the human skin and the surrounding environment is utilized. It is possible to easily detect a human location distribution and gesture motion.
第7の発明は、第5の発明または第6の発明において、前記ジェスチャ検出手段は、前記画像検出手段で検出した画像の変化した点を抽出する画像変化点抽出部と、前記画像変化点抽出部で抽出した変化点のX軸方向での伸縮を検出するX軸伸縮検出部と、Y軸方向での伸縮を検出するY軸伸縮検出部を備える構成であり、この構成により、人が2方向に動作しさえすればジェスチャを検出することができ、本発明の全てもしくは一部を容易に実現することができる。 According to a seventh invention, in the fifth or sixth invention, the gesture detection means includes an image change point extraction section for extracting a changed point of the image detected by the image detection means, and the image change point extraction. The configuration includes an X-axis expansion / contraction detection unit that detects expansion / contraction in the X-axis direction of the change point extracted by the unit, and a Y-axis expansion / contraction detection unit that detects expansion / contraction in the Y-axis direction. A gesture can be detected only by moving in the direction, and all or part of the present invention can be easily realized.
以下、本発明の実施の形態について、図面を参照しながら説明する。なお、本実施の形態によって本発明が限定されるものではない。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. Note that the present invention is not limited to the present embodiment.
(実施の形態1)
図1は、本発明の実施の形態における空気調和機の構成を示す制御ブロック図である。
(Embodiment 1)
FIG. 1 is a control block diagram illustrating a configuration of an air conditioner according to an embodiment of the present invention.
図1において、空気調和機100は、画像検出手段109と、画像検出手段109の検出に基づき人の所在分布を検出する所在分布検出手段101と、画像検出手段109の検出に基づきジェスチャを検出するジェスチャ検出手段102と、所在分布検出手段101およびジェスチャ検出手段102の検出内容により送風内容を決定する送風内容決定手段103と、送風内容決定手段103における決定に従って送風内容を制御する送風制御手段104と、ジェスチャ検出手段102がジェスチャ検出中であることを表示する表示手段108から構成される。 In FIG. 1, the air conditioner 100 detects an image detection unit 109, a location distribution detection unit 101 that detects the location distribution of a person based on the detection of the image detection unit 109, and a gesture based on the detection of the image detection unit 109. A gesture detection unit 102; a blown content determination unit 103 that determines the blown content based on detection contents of the location distribution detection unit 101 and the gesture detection unit 102; and a blower control unit 104 that controls the blown content according to the determination in the blown content determination unit 103; The gesture detection unit 102 includes a display unit 108 for displaying that the gesture is being detected.
所在分布検出手段101が人の所在分布の変化を検出した時に、ジェスチャ検出手段102を起動させるトリガ発生手段105を所在分布検出手段101が備える。 The location distribution detection means 101 includes trigger generation means 105 that activates the gesture detection means 102 when the location distribution detection means 101 detects a change in the location distribution of a person.
ジェスチャ検出手段102は、ジェスチャ終了手段106と、画像検出手段109で検出した画像の変化した点を抽出する画像変化点抽出部111と、画像変化点抽出部111で抽出した変化点のX軸方向での伸縮を検出するX軸伸縮検出部112と、Y軸方向での伸縮を検出するY軸伸縮検出部113から構成される。ジェスチャ終了手段106が計時手段107を備える。 The gesture detection unit 102 includes a gesture end unit 106, an image change point extraction unit 111 that extracts a changed point of the image detected by the image detection unit 109, and an X-axis direction of the change point extracted by the image change point extraction unit 111. An X-axis expansion / contraction detection unit 112 that detects expansion / contraction in the Y-axis direction, and a Y-axis expansion / contraction detection unit 113 that detects expansion / contraction in the Y-axis direction. The gesture ending unit 106 includes a time measuring unit 107.
送風制御手段104は、ルーバーおよびルーバーを回転させる制御装置を備える。 The air blowing control unit 104 includes a louver and a control device that rotates the louver.
表示手段108の具体例はいくつか挙げられる。例えば、LEDの点灯/点滅/滅灯を用いて、ジェスチャ検出手段102がジェスチャ検出中/ジェスチャ検出終了直前提示/ジェスチャ検出終了であることを表示できる。また、LCDを用いて、ジェスチャ検出手段102のオン/オフ状態を表示する上に、検出残時間や検出結果などの情報を表示することができる。これによって、操作表示ユーザーインタフェースの性能が高まる。 There are several specific examples of the display means 108. For example, using the lighting / flashing / extinction of the LED, it can be displayed that the gesture detection unit 102 is in the process of detecting the gesture / presenting immediately before the end of the gesture detection / ending the gesture detection. In addition to displaying the on / off state of the gesture detection means 102 using the LCD, it is possible to display information such as the remaining detection time and the detection result. This enhances the performance of the operation display user interface.
本実施の形態では、温度分布検出手段110を画像検出手段109の具体例の一例として説明するが、画像検出手段109は温度分布検出手段110に限られるものではない。例えば、輻射量分布検出手段や光反射量分布検出手段などが挙げられる。 In the present embodiment, the temperature distribution detection unit 110 will be described as an example of a specific example of the image detection unit 109, but the image detection unit 109 is not limited to the temperature distribution detection unit 110. For example, a radiation amount distribution detection unit, a light reflection amount distribution detection unit, and the like can be given.
なお、画像検出手段109から所在分布検出手段101に送る画像と画像検出手段109からジェスチャ検出手段102に送る画像は、ブロック分割数やサンプリング周期や温度データのランク数などが異なった画像であっても良い。例えば、所在分布検出手段101が身体の大きさ程度の人の所在分布を検出するので、ブロックを10cm×10cm程度にして良いが、ジェスチャ検出手段102が手の大きさ程度のモノの位置変化を検出するので、ブロックを2cm×2cm程度にすれば良い。また、所在分布検出手段101が人の所在分布の変更を検出してからトリガ発生手段105を起動するので、サンプリング周期を1s程度に設定して良いが、ジェスチャ検出手段102が両手の動きでジェスチャ指令を検出するのでサンプリング周期を10ms程度に設定すれば良い。また、所在分布検出手段101が身体の大きさ程度の人の所在分布を検出するので、体温範囲を29℃〜38℃と設定すれば良いが、ジェスチャ検出手段102が手の動きを検出するので、手を含む上腕部の温度が気候・天気・時間・身体状況などによって大きな差があるため、温度範囲を0℃〜40℃と設定すれば良い。これによって、画像検出手段109は所在分布検出手段101とジェスチャ検出手段102に画像を出力しているので、画像検出手段109が1つで構成できて、部品数を削減することができる。 Note that the image sent from the image detection means 109 to the location distribution detection means 101 and the image sent from the image detection means 109 to the gesture detection means 102 differ in the number of block divisions, sampling cycle, temperature data rank, etc. Also good. For example, since the location distribution detecting means 101 detects the location distribution of a person of the size of the body, the block may be about 10 cm × 10 cm, but the gesture detecting means 102 detects the change in the position of the object about the size of the hand. Since the detection is performed, the block may be about 2 cm × 2 cm. In addition, since the trigger generation unit 105 is activated after the location distribution detection unit 101 detects a change in the location distribution of a person, the sampling period may be set to about 1 s. However, the gesture detection unit 102 performs the gesture with the movement of both hands. Since the command is detected, the sampling period may be set to about 10 ms. In addition, since the location distribution detection unit 101 detects the location distribution of a person having a body size, the body temperature range may be set to 29 ° C. to 38 ° C., but the gesture detection unit 102 detects the movement of the hand. Since the temperature of the upper arm including the hand varies greatly depending on the climate, weather, time, physical condition, etc., the temperature range may be set to 0 ° C. to 40 ° C. As a result, the image detection means 109 outputs an image to the location distribution detection means 101 and the gesture detection means 102, so that the image detection means 109 can be constituted by one and the number of parts can be reduced.
また、本実施の形態における空気調和機100では、画像検出手段109と送風制御手段104を空気調和機本体に付けた場合を主として例に挙げて説明する。しかし、本発明はこれに限られるものではなく、画像検出手段109と送風制御手段104を空気調和機本体から分離し、空気調和機本体と違う場所に設置しても良い。これによって、空気調和機の設置場所の自由度を高めることができる。 In the air conditioner 100 according to the present embodiment, the case where the image detection unit 109 and the air blowing control unit 104 are attached to the air conditioner body will be mainly described as an example. However, the present invention is not limited to this, and the image detection means 109 and the air blowing control means 104 may be separated from the air conditioner body and installed in a different place from the air conditioner body. Thereby, the freedom degree of the installation place of an air conditioner can be raised.
また、独立した画像検出手段109または送風制御手段104を複数個設置しても良い。これによって、空気調和システムとしてより大きなエリアを検出しながら調和することができる。 A plurality of independent image detection means 109 or air blowing control means 104 may be installed. As a result, the air conditioning system can be harmonized while detecting a larger area.
以上のように構成された空気調和機について、以下その動作、作用を説明する。 About the air conditioner comprised as mentioned above, the operation | movement and an effect | action are demonstrated below.
まず、温度分布検出手段110である画像検出手段109は常にオン状態で、検出した温度分布の画像を所在分布検出手段101に定期的に送信する。所在分布検出手段101が受信した温度分布の画像より所在分布検出処理を行う。検出した温度分布画像は人、モノ、環境の分布情報を含んでいる。その中、人の所在分布が変化したと判定する場合、トリガ発生手段105がジェスチャ検出手段102を起動する。 First, the image detection means 109 which is the temperature distribution detection means 110 is always in an ON state, and periodically transmits the detected temperature distribution image to the location distribution detection means 101. A location distribution detection process is performed from the temperature distribution image received by the location distribution detecting means 101. The detected temperature distribution image includes distribution information of people, things, and the environment. Among them, when it is determined that the location distribution of the person has changed, the trigger generation means 105 activates the gesture detection means 102.
ジェスチャ検出手段102も同じく、温度分布検出手段110である画像検出手段109から温度分布画像を受信する。画像の変化により、人の姿勢や動作を解析し、ジェスチャを検出する。例えば、人が各方向で手を上げたり下げたりしたか、各平面で手を揺らし
たり回したりしたかを判定する。
Similarly, the gesture detection unit 102 receives the temperature distribution image from the image detection unit 109 which is the temperature distribution detection unit 110. Analyzes human postures and movements based on image changes and detects gestures. For example, it is determined whether a person has raised or lowered a hand in each direction, or has shaken or turned the hand in each plane.
表示手段108は、ジェスチャ検出中にジェスチャ検出していることを表示する。ジェスチャ検出中に終了ジェスチャ指令があれば、また、計時手段107がジェスチャ検出手段102を起動してから所定時間を越えたことを判定すれば、ジェスチャ終了手段106を起動し、ジェスチャ検出手段102を終了して、所在分布検出手段101を再度有効にする。ジェスチャ検出終了時点までに、所在分布検出手段101およびジェスチャ検出手段102の検出内容により送風内容を送風内容決定手段103が決定し、送風内容を送風制御手段104に送信する。送風制御手段104が受信内容に従って送風内容を制御する。 The display means 108 displays that a gesture is detected during gesture detection. If there is an end gesture command during gesture detection, or if it is determined that the predetermined time has elapsed since the timing means 107 activated the gesture detection means 102, the gesture end means 106 is activated and the gesture detection means 102 is activated. When finished, the location distribution detecting means 101 is enabled again. By the content detected by the location distribution detection means 101 and the gesture detection means 102, the blow content determination means 103 determines the blow content based on the detection contents of the location distribution detection means 101 and the gesture detection means 102, and transmits the blow content to the blow control means 104. The air blowing control unit 104 controls the air blowing content according to the received content.
所在分布検出手段101が所在分布検出処理を実施している時に、また、ジェスチャ検出手段102がジェスチャ検出処理を実施している時に、リモコン指令があれば、リモコン指令を優先し、リモコン指令で決定した送風内容を送風制御手段104に送信する。その決定に従って送風制御手段が送風内容を制御する。 When there is a remote control command when the location distribution detection unit 101 is performing the location distribution detection process or when the gesture detection unit 102 is performing the gesture detection process, the remote control command is given priority and determined by the remote control command. The blown air content is sent to the blower control means 104. According to the determination, the blower control means controls the blown content.
図2〜4のフローチャートを用いて、画像検出手段109、所在分布検出手段101、ジェスチャ検出手段102、送風内容決定手段103および送風制御手段104の制御の流れを説明する。 The flow of control of the image detection means 109, the location distribution detection means 101, the gesture detection means 102, the blowing content determination means 103, and the blowing control means 104 will be described using the flowcharts of FIGS.
図2において、所在分布検出手段101は、リモコン120からの指令を受信する(ステップS201)。ステップS201において所在分布検出手段101がリモコン指令を検出すれば、所在分布検出手段101はリモコン指令を解読する(ステップS220)。ステップS220において解読したリモコン指令が空気調和機オフの指令であれば空気調和機の運転制御手段(図示せず)に運転を終了させるよう指令し、解読したリモコン指令が空気調和機オフ以外の指令であれば、送風内容決定手段103がリモコン指令を記憶する(ステップS221)。 In FIG. 2, the location distribution detecting means 101 receives a command from the remote controller 120 (step S201). If location distribution detecting means 101 detects a remote control command in step S201, location distribution detecting means 101 decodes the remote control command (step S220). If the remote control command decoded in step S220 is a command to turn off the air conditioner, it instructs the operation control means (not shown) of the air conditioner to end the operation, and the decoded remote control command is a command other than turning off the air conditioner. If so, the blower content determination means 103 stores the remote control command (step S221).
ステップS201でリモコン指令がない場合、オン状態になっている所在分布検出手段101は温度分布検出手段110である画像検出手段109から温度分布画像を定期的に取得し(ステップS202)、取得した温度分布画像に基づき所在分布検出処理を行う(ステップS203)。ステップS202において温度分布画像をまだ取得してない場合はステップS201に戻る。 If there is no remote control command in step S201, the location distribution detection means 101 in the on state periodically acquires a temperature distribution image from the image detection means 109 that is the temperature distribution detection means 110 (step S202), and the acquired temperature A location distribution detection process is performed based on the distribution image (step S203). If the temperature distribution image has not yet been acquired in step S202, the process returns to step S201.
ステップS203で行われる所在分布検出処理について、図3を参照しながら説明する。まず、所在分布検出手段101は、取得した温度分布画像に基づいて、画像検出手段109の検出対象とした検出エリアを複数のゾーンに分割し、各ゾーンをより細かいブロックに分割し、各ブロックの最高温度を算出する(ステップS301)。 The location distribution detection process performed in step S203 will be described with reference to FIG. First, the location distribution detection unit 101 divides a detection area as a detection target of the image detection unit 109 into a plurality of zones based on the acquired temperature distribution image, divides each zone into finer blocks, The maximum temperature is calculated (step S301).
次に、所在分布検出手段101は、各ブロックの最高温度が周辺のブロックの最高温度と比べて、ブロックの最高温度が連続的に変化しているかどうかを判定する(ステップS302)。ステップS302において、所在分布検出手段101がブロックの最高温度が連続的に変化していると判定した場合(ステップS302のYes)は、所在分布検出手段101は最高温度の連続的に変化している範囲を環境と判定し(ステップS312)、所在分布検出処理を終了する。またステップS302において、所在分布検出手段101がブロックの最高温度が連続的に変化していないと判定した場合は、所在分布検出手段101は温度変化の非連続点(本実施の形態では、差が3℃以上のものを非連続点とした)の集合を長方形として認識する(ステップS303)。 Next, the location distribution detecting unit 101 determines whether or not the maximum temperature of each block is continuously changing as compared to the maximum temperature of the surrounding blocks (step S302). In step S302, if the location distribution detection unit 101 determines that the maximum temperature of the block is continuously changing (Yes in step S302), the location distribution detection unit 101 is continuously changing the maximum temperature. The range is determined as the environment (step S312), and the location distribution detection process is terminated. In step S302, if the location distribution detection unit 101 determines that the maximum temperature of the block has not changed continuously, the location distribution detection unit 101 determines that the location distribution detection unit 101 has a discontinuous point of temperature change (in this embodiment, the difference is A set of 3 ° C. or higher as discontinuous points) is recognized as a rectangle (step S303).
本実施の形態は図5(a)〜図5(d)で後述するような画像変化点から認識する図形
に基づきX軸での伸縮とY軸での伸縮を検出しやすい視点から、温度変化の非連続点を長方形として認識するが、他の簡単な図形(例えば、楕円)、または複数の簡単な図形の組合せで構成する複雑な図形として認識しても良い。
In the present embodiment, the temperature changes from the viewpoint of easily detecting expansion / contraction on the X-axis and expansion / contraction on the Y-axis based on figures recognized from the image change points as will be described later with reference to FIGS. The discontinuous points are recognized as rectangles, but may be recognized as other simple figures (for example, ellipses) or complex figures formed by a combination of a plurality of simple figures.
次に、所在分布検出手段101がステップS303で認識した長方形の面積が人間断面判定面積基準以上かどうかを判定する(ステップS304)。ステップS304において、認識した長方形の面積が人間断面判定面積基準以下であると所在分布検出手段101が判定すれば、犬や猫などのペットである可能性が高いので、ステップS312に進んで、所在分布検出手段101がその長方形を環境と判定し、所在分布検出処理を終了する。 Next, it is determined whether or not the area of the rectangle recognized by the location distribution detecting unit 101 in step S303 is equal to or greater than the human cross-section determination area standard (step S304). In step S304, if the location distribution detecting means 101 determines that the recognized rectangular area is equal to or smaller than the human cross-section determination area standard, it is highly possible that the area is a pet such as a dog or a cat. The distribution detection means 101 determines that the rectangle is the environment, and ends the location distribution detection process.
ステップS304において、認識した長方形の面積が人間断面判定面積基準以上であると所在分布検出手段101が判定すれば、所在分布検出手段101はステップS303で認識した長方形の平均温度が人間体温判定範囲内にあるかどうかを判定する(ステップS305)。 If the location distribution detection means 101 determines in step S304 that the area of the recognized rectangle is equal to or greater than the human cross-section determination area standard, the location distribution detection means 101 determines that the average temperature of the rectangle recognized in step S303 is within the human body temperature determination range. (Step S305).
ステップS305において、平均温度が人間体温判定範囲内でないと所在分布検出手段101が判定した場合、例えば認識した長方形の平均温度が高すぎると、ヒーターのような物体である可能性があり、逆に認識した長方形の平均温度が低すぎると、金魚鉢など低温の物体である可能性がある。そこで、ステップS305において平均温度が人間体温判定範囲内でないと所在分布検出手段101が判定した場合は所在分布検出手段101はその長方形をモノと判定し、位置を記憶し(ステップS311)、所在分布検出処理を終了する。そのモノの位置の情報は無駄な送風を抑制するために使われる。また、ステップS305において平均温度が人間体温判定範囲内にあると所在分布検出手段101が判定した場合は、所在分布検出手段101はその長方形を人と判定し、長方形の位置と面積を記憶し(ステップS310)、所在分布検出処理を終了する。 In step S305, if the location distribution detection unit 101 determines that the average temperature is not within the human body temperature determination range, for example, if the recognized average temperature of the rectangle is too high, there is a possibility that the object is a heater-like object. If the average temperature of the recognized rectangle is too low, it may be a cold object such as a fishbowl. Therefore, if the location distribution detection means 101 determines that the average temperature is not within the human body temperature determination range in step S305, the location distribution detection means 101 determines that the rectangle is a thing, stores the position (step S311), and the location distribution. The detection process ends. The information on the position of the object is used to suppress unnecessary air blowing. If the location distribution detection unit 101 determines that the average temperature is within the human body temperature determination range in step S305, the location distribution detection unit 101 determines that the rectangle is a person, and stores the position and area of the rectangle ( Step S310), the location distribution detection process is terminated.
ステップS203において所在分布検出処理が終了すると、所在分布検出手段101は人の位置の情報をまとめた結果である所在分布を過去の履歴と情報比較する(ステップS204)。ステップS204において、過去の履歴とは、例えば数秒前までに所在分布検出手段101が取得した複数枚の温度分布画像に基づき算出した人の位置、人の移動傾向、人の位置移動距離などであり、比較対象は、最新の温度分布画像に基づき算出した人の位置、人の移動傾向、人の位置移動距離と、数秒前までに所在分布検出手段101が取得した複数枚の温度分布画像に基づき算出した人の位置、人の移動傾向、人の位置移動距離とである。こうした比較は、画像検出手段109が所在分布検出手段101に送る画像のサンプリング周期が短い場合、人が遅く移動するので短時間に位置が大きく変更しない可能性があり、所在分布の変化を未検出する可能性があるため、人の移動傾向および数秒前との位置移動距離の結果に基づき所在分布が変化したと補正判定することが望ましい。また、人は無意識に姿勢を調整することがあり、急に人の位置が変更して元の位置へ戻る可能性があるので、所在分布の変化を誤検出することが考えられる。そこで、人の移動傾向および数秒前との位置移動距離の結果に基づき所在分布が変化しなかったと補正判定することが望ましい。これによって、所在分布検出手段101がより正確的に所在分布の変化を検出することができる。 When the location distribution detection process is completed in step S203, the location distribution detection means 101 compares the location distribution, which is the result of collecting the information of the person's position, with the past history (step S204). In step S204, the past history is, for example, a person's position, a person's movement tendency, a person's position movement distance, and the like calculated based on a plurality of temperature distribution images acquired by the location distribution detecting unit 101 several seconds ago. The comparison object is based on the position of the person calculated based on the latest temperature distribution image, the movement tendency of the person, the movement distance of the person, and a plurality of temperature distribution images acquired by the location distribution detecting means 101 several seconds ago. The calculated position of the person, the movement tendency of the person, and the movement distance of the person. In such a comparison, if the sampling period of the image sent from the image detection means 109 to the location distribution detection means 101 is short, the person moves slowly, so the position may not change significantly in a short time, and the change in the location distribution is not detected. Therefore, it is desirable to correct and determine that the location distribution has changed based on the result of the movement tendency of the person and the position movement distance from a few seconds ago. Further, since a person may unconsciously adjust his / her posture and there is a possibility that the person's position may change suddenly and return to the original position, it is conceivable that a change in the location distribution is erroneously detected. Therefore, it is desirable to correct and determine that the location distribution has not changed based on the result of the movement tendency of the person and the result of the position movement distance several seconds ago. As a result, the location distribution detecting means 101 can detect the change in the location distribution more accurately.
ステップS204において情報比較した結果所在分布が変化していないと所在分布検出手段101が判定した場合(ステップS205のNo)、ステップS201に戻って次の温度分布画像を受信する。逆に、所在分布が変化していると所在分布検出手段101が判定した場合(ステップS205のYes)は、トリガ発生手段105がジェスチャ検出手段102を起動させる(ステップS206)。 If the location distribution detecting means 101 determines that the location distribution has not changed as a result of the information comparison in step S204 (No in step S205), the process returns to step S201 to receive the next temperature distribution image. Conversely, if the location distribution detection unit 101 determines that the location distribution has changed (Yes in step S205), the trigger generation unit 105 activates the gesture detection unit 102 (step S206).
トリガ発生手段105がジェスチャ検出手段102を起動させると、ステップS210
でジェスチャ検出手段102がリモコンの指令を受信する。リモコン指令があれば、ステップS220でジェスチャ検出手段102がリモコン指令を解読し、空気調和機オフの指令なら空気調和機を終了するが、他のリモコン指令ならステップS221で送風内容決定手段103がリモコン指令を記憶する。
When the trigger generation means 105 activates the gesture detection means 102, step S210 is performed.
Then, the gesture detection means 102 receives a command from the remote controller. If there is a remote control command, the gesture detection means 102 decodes the remote control command in step S220, and if it is an air conditioner off command, the air conditioner is terminated. Memorize the command.
ステップS210においてジェスチャ検出手段102がリモコン指令を受信できない場合(ステップS210のNo)、所在分布検出手段101を無効状態にして、温度分布検出手段110である画像検出手段109から温度分布画像を定期的に取得するが、温度分布画像をまだ取得してない場合(ステップS211のNo)はステップS210に戻る。 If the gesture detection unit 102 cannot receive the remote control command in step S210 (No in step S210), the location distribution detection unit 101 is disabled and the temperature distribution image is periodically transmitted from the image detection unit 109 which is the temperature distribution detection unit 110. If the temperature distribution image has not yet been acquired (No in step S211), the process returns to step S210.
本実施の形態に所在分布検出手段101とジェスチャ検出手段102の有効/無効状態については、実現方法はいくつか挙げられる。例えば、省エネの視点から、オン状態を有効状態、オフ状態を無効状態とすれば、ジェスチャ検出手段102がオン状態になっている時に所在分布検出手段101をオフ状態にして、ジェスチャ検出手段102が検出終了時に所在分布検出手段101をオン状態にしても良い。また、ジェスチャ検出手段102がジェスチャ検出時に、所在分布検出手段101をオン状態にしても、トリガ発生手段105をオフにしたり、ジェスチャ検出手段102の受信を禁止したり、所在分布検出手段101の発信を禁止したりすることで、所在分布検出手段101が無効状態になる。所在分布検出手段をオン状態にする時に、トリガ発生手段105をオンにしたり、ジェスチャ検出手段102の受信禁止または所在分布検出手段101の発信禁止を解除したりすることで、所在分布検出手段101が有効状態になる。また、ジェスチャ検出手段102がジェスチャ検出時に、所在分布検出手段101の発信した指令をジェスチャ検出手段102が受信しても、何の動作でもしないことで、所在分布検出手段101が無効状態になる。ジェスチャ検出手段102がジェスチャ検出終了時に、所在分布検出手段101からもらう指令に基づく対応動作を実施することで、所在分布検出手段101が有効状態になる。 There are several implementation methods for the valid / invalid states of the location distribution detection means 101 and the gesture detection means 102 in this embodiment. For example, from the viewpoint of energy saving, if the on state is enabled and the off state is disabled, the location detection unit 101 is turned off when the gesture detection unit 102 is on, and the gesture detection unit 102 Location detection means 101 may be turned on at the end of detection. Further, when the gesture detection unit 102 detects the gesture, even if the location distribution detection unit 101 is turned on, the trigger generation unit 105 is turned off, reception of the gesture detection unit 102 is prohibited, or the location distribution detection unit 101 transmits the signal. For example, the location distribution detecting unit 101 becomes invalid. When the location distribution detection means is turned on, the trigger generation means 105 is turned on, the reception detection of the gesture detection means 102 or the transmission prohibition of the location distribution detection means 101 is canceled, whereby the location distribution detection means 101 Becomes valid. Further, when the gesture detection unit 102 detects a gesture, even if the gesture detection unit 102 receives a command transmitted by the location distribution detection unit 101, no operation is performed, so that the location distribution detection unit 101 becomes invalid. When the gesture detection unit 102 completes the gesture detection, the corresponding operation based on the command received from the location distribution detection unit 101 is performed, so that the location distribution detection unit 101 becomes valid.
ステップS211においてジェスチャ検出手段102が温度分布画像を取得していればステップS212に進み、ステップS212ではステップS211でジェスチャ検出手段102が取得した温度分布画像に基づき、ジェスチャ検出処理を行う。 If the gesture detection means 102 has acquired the temperature distribution image in step S211, the process proceeds to step S212. In step S212, the gesture detection processing is performed based on the temperature distribution image acquired by the gesture detection means 102 in step S211.
ステップS212で行われるジェスチャ検出処理について、図4を参照しながら説明する。まず、ジェスチャ検出手段102は、ステップS310で所在分布検出手段101が人と判定して記憶した長方形の位置や面積などの情報を取得する(ステップS401)。 The gesture detection process performed in step S212 will be described with reference to FIG. First, the gesture detection unit 102 acquires information such as the position and area of the rectangle stored by the location distribution detection unit 101 determined to be a person in step S310 (step S401).
そして、ジェスチャ検出手段102が各人の長方形がX軸で伸び縮みしたかどうかを判定する(ステップS410)。ステップS410においてジェスチャ検出手段102がX軸で伸び縮みがないと判定すると(ステップS410のNo)、ジェスチャ検出手段102が各人の長方形がY軸で伸び縮みしたかどうかを判定する(ステップS411)。ステップS410でジェスチャ検出手段102は各人の長方形がX軸での伸び縮みがあると判定した場合(ステップS410のYes)、その長方形と対応する人がジェスチャパターンXを実施したとジェスチャ検出手段102が判定する(ステップS420)。 Then, the gesture detection means 102 determines whether or not each person's rectangle has expanded or contracted along the X axis (step S410). If the gesture detection means 102 determines in step S410 that there is no expansion / contraction on the X axis (No in step S410), the gesture detection means 102 determines whether each person's rectangle has expanded or contracted on the Y axis (step S411). . In step S410, if the gesture detection unit 102 determines that each person's rectangle has an expansion or contraction along the X axis (Yes in step S410), the gesture detection unit 102 indicates that the person corresponding to the rectangle has performed the gesture pattern X. Is determined (step S420).
ステップS411において、ジェスチャ検出手段102がその長方形がY軸での伸び縮みがあると判定すれば(ステップS411のYes)、その長方形と対応する人がジェスチャパターンYを実施したとジェスチャ検出手段102が判定する(ステップS421)。ステップS410およびステップS411でジェスチャ検出手段102は各人の長方形がX軸またY軸での伸び縮みがないと判定した場合(ステップS411のNo)、その長方形と対応する人がジェスチャパターンXもジェスチャパターンYも実施しなかったとジェスチャ検出手段102が判定する(ステップS422)。 In step S411, if the gesture detection unit 102 determines that the rectangle has expansion / contraction on the Y axis (Yes in step S411), the gesture detection unit 102 indicates that the person corresponding to the rectangle has performed the gesture pattern Y. Determination is made (step S421). In step S410 and step S411, if the gesture detection unit 102 determines that each person's rectangle does not expand or contract on the X axis or the Y axis (No in step S411), the person corresponding to the rectangle also uses the gesture pattern X as a gesture. The gesture detection means 102 determines that the pattern Y has not been implemented (step S422).
ジェスチャ検出手段102は、ステップS420、ステップS421、ステップS422での判定結果を踏まえ、複数回のジェスチャパターンXおよびジェスチャパターンYの組合せがジェスチャ指令条件を満足するかどうかを判定する(ステップS430)。そして、ステップS430においてジェスチャ検出手段102が図5(a)〜図5(d)で後述するようなジェスチャ指令条件を満足したと判定した場合(ステップS430のYes)、その人の方向への送風内容を決定し(ステップS440)、送風内容決定手段103に決定した送風内容を送って、ジェスチャ検出手段102がジェスチャ検出処理を終了する。一方、ステップS430においてジェスチャ検出手段102がジェスチャ指令条件をまだ満足していないと判定した場合(ステップS430のNo)、ジェスチャ検出手段102が無効操作と判定し、次のデータを待つ(ステップS441)。 Based on the determination results in step S420, step S421, and step S422, the gesture detection unit 102 determines whether the combination of the plurality of gesture patterns X and gesture patterns Y satisfies the gesture command condition (step S430). If it is determined in step S430 that the gesture detection unit 102 satisfies the gesture command conditions described later with reference to FIGS. 5A to 5D (Yes in step S430), the air blows in the direction of the person. The content is determined (step S440), the determined blow content is sent to the blow content determination means 103, and the gesture detection means 102 ends the gesture detection process. On the other hand, if it is determined in step S430 that the gesture detection means 102 has not yet satisfied the gesture command condition (No in step S430), the gesture detection means 102 determines that the operation is invalid and waits for the next data (step S441). .
ジェスチャ検出手段102は、ステップS440でジェスチャ検出手段102が決定したジェスチャ指令が図5(d)で後述するような終了ジェスチャ指令であるかどうかを判定する(ステップS213)。ステップS213においてジェスチャ検出手段102が終了ジェスチャ指令を判定すれば(ステップS213でYes)、ジェスチャ終了手段106が起動し、ジェスチャ検出手段102をオフさせ、所在分布検出手段101を再び有効化し、ステップS201に戻る。ステップS213においてジェスチャ検出手段102が終了ジェスチャ指令を判定しなければ(ステップS213でNo)、ジェスチャ検出手段102の起動後から期間を計時している計時手段107が所定時間に達したか否かを判定する(ステップS214)。 The gesture detection unit 102 determines whether or not the gesture command determined by the gesture detection unit 102 in step S440 is an end gesture command as will be described later with reference to FIG. 5D (step S213). If the gesture detection unit 102 determines an end gesture command in step S213 (Yes in step S213), the gesture end unit 106 is activated, the gesture detection unit 102 is turned off, and the location distribution detection unit 101 is re-enabled, and step S201 is performed. Return to. If the gesture detection means 102 does not determine the end gesture command in step S213 (No in step S213), it is determined whether or not the time measurement means 107 that has timed since the activation of the gesture detection means 102 has reached a predetermined time. Determination is made (step S214).
ステップS214において、計時手段107で計時する期間が所定時間に達した場合は、ジェスチャ終了手段106はジェスチャ検出手段102をオフさせ、所在分布検出手段101を再び有効化し、ステップS201に戻る。また、ステップS214において計時手段107で計時する期間が所定時間に達していない場合は、計時手段107は続けて時間を計時する。計時手段107で設定した所定時間はジェスチャ検出に要する短い時間で、例えば30秒程度である。 In step S214, if the time period counted by the time measuring means 107 reaches a predetermined time, the gesture end means 106 turns off the gesture detection means 102, re-enables the location distribution detection means 101, and returns to step S201. In step S214, if the time measured by the time measuring means 107 has not reached the predetermined time, the time measuring means 107 continues to time. The predetermined time set by the time measuring means 107 is a short time required for gesture detection, for example, about 30 seconds.
送風内容決定手段103はステップS440でジェスチャ検出手段102が決定した送風内容を記憶する(ステップS215)。 The blowing content determination unit 103 stores the blowing content determined by the gesture detection unit 102 in step S440 (step S215).
ステップS221とステップS215のいずれかのステップで送風内容決定手段103が記憶した送風内容を送風制御手段104に送信しながら、送風制御手段104が受信内容に従って送風制御する(ステップS230)。 While sending the blown content stored by the blown content determination unit 103 in either step S221 or step S215 to the blown control unit 104, the blower control unit 104 controls the blowing according to the received content (step S230).
これによって、ジェスチャ検出手段102を所在分布が変化した時点から一定の時間内に起動させ、人がジェスチャで送風内容を変更したくない時に意図せずに行った動作による誤検出を抑制することができる。 As a result, it is possible to activate the gesture detection means 102 within a certain period of time from the time when the location distribution changes, and to suppress erroneous detection caused by an unintentional operation when a person does not want to change the contents of air blowing with a gesture. it can.
なお、温度変化非連続点の判定基準とした3℃が限定されるものではない。 In addition, 3 degreeC used as the criterion of a temperature change discontinuous point is not limited.
なお、本実施の形態は省電力の視点から、リモコン指令がない場合、所在分布検出手段101とジェスチャ検出手段102のいずれか1つだけをオン状態と設定するが、ジェスチャ検出手段102がジェスチャ検出中に所在分布検出手段101をオン状態と設定しても良い。ジェスチャ検出手段102がジェスチャ検出中に所在分布検出手段101が所在分布変化を検出した場合、トリガ発生手段105をもう一度起動させるが、ジェスチャ検出手段102をリセットしなくても、計時手段107の時間だけをリセットすることで、ジェスチャ検出手段102のジェスチャ検出時間を延長する。これによって、ジェスチャ検出手段102はジェスチャ検出中に人が移動しても、その人に対してのジェスチャ検出が元のジェスチャ検出時間中に検出できないことが抑制でき、操作利便性および正確性の
向上ができる。
In the present embodiment, from the viewpoint of power saving, when there is no remote control command, only one of the location distribution detection unit 101 and the gesture detection unit 102 is set to the on state, but the gesture detection unit 102 detects the gesture. The location distribution detecting means 101 may be set in the ON state. If the location detection means 101 detects a change in location distribution while the gesture detection means 102 is detecting a gesture, the trigger generation means 105 is activated again. However, even if the gesture detection means 102 is not reset, only the time of the time measurement means 107 is activated. Is reset, the gesture detection time of the gesture detection means 102 is extended. Thereby, even if a person moves during gesture detection, the gesture detection means 102 can suppress that the gesture detection with respect to the person cannot be detected during the original gesture detection time, thereby improving the operational convenience and accuracy. Can do.
次に図5を用いて、ジェスチャ検出手段102の画像変化によるジェスチャ指令の一例について説明する。図5(a)〜図5(d)に示すように、ジェスチャ検出手段102が温度分布検出手段110である画像検出手段109から受信された温度分布画像データをステップS212のように解析する。図5において各点はジェスチャ検出手段102で温度分布検出を行う各ブロックであり、人の体温付近の温度の画像を抽出した例で、501は人の頭、502は人の手の部分の例であり、503はステップS303で認識した長方形の例である。 Next, an example of a gesture command based on an image change of the gesture detection unit 102 will be described with reference to FIG. As shown in FIGS. 5A to 5D, the gesture detection unit 102 analyzes the temperature distribution image data received from the image detection unit 109, which is the temperature distribution detection unit 110, as in step S212. In FIG. 5, each point is a block for detecting the temperature distribution by the gesture detection means 102. In this example, an image of the temperature around the human body temperature is extracted, 501 is the human head, and 502 is the human hand portion. 503 is an example of a rectangle recognized in step S303.
図5(a)のように、人が左右方向で両手を上げたり下げたりする場合、ジェスチャ検出手段102の起動初期のステップS401で取得したT0時点の長方形が、順にT1、T2、T3、T4時点に取得した長方形になる。T0からT1経由でT2になった時に、画像変化点抽出部111に抽出された長方形がX軸で伸び縮みしたので、ステップS420でジェスチャパターンXがプラス1と演算し、T2からT3経由でT4になった時に、画像変化点抽出部111に抽出された長方形がもう一度X軸で伸び縮みしたので、ステップS420でジェスチャパターンXがもう一度プラス1と演算し、それが空気調和機100で記憶したジェスチャ指令「前の風量より大きくしたい」となるので、ステップS440でその長方形の方向へより大きく風量で送風しようと決定し、送風制御手段104が決定内容とおり制御する。 As shown in FIG. 5A, when a person raises or lowers both hands in the left-right direction, the rectangles at the time T0 acquired in step S401 at the initial activation of the gesture detection unit 102 are T1, T2, T3, T4 in order. It becomes the rectangle acquired at the time. Since the rectangle extracted by the image change point extraction unit 111 has expanded and contracted along the X axis when T2 has passed through T1 from T0, the gesture pattern X is calculated as plus 1 in step S420, and T4 from T2 through T3. Since the rectangle extracted by the image change point extraction unit 111 is once again expanded and contracted along the X axis, the gesture pattern X is again calculated as plus 1 in step S420, and the gesture stored in the air conditioner 100 is obtained. Since it becomes the command “I want to make it larger than the previous air volume”, in step S440, it is decided to blow with a larger air volume in the direction of the rectangle, and the air blowing control means 104 controls as determined.
また、図5(b)のように、人が前後方向で両手を上げたり下げたりする場合、ジェスチャ検出手段102の起動初期のステップS401で取得したT0時点の長方形が、順にT1、T2、T3、T4時点に取得した長方形になる。T0からT1経由でT2になった時に、画像変化点抽出部111に抽出された長方形がY軸で伸び縮みしたので、ステップS420でジェスチャパターンYがプラス1と演算し、T2からT3経由でT4になった時に、画像変化点抽出部111に抽出された長方形がもう一度Y軸で伸び縮みしたので、ステップS420でジェスチャパターンYがもう一度プラス1と演算し、それが空気調和機100で記憶したジェスチャ指令「前の風量より小さくしたい」となるので、ステップS440でその長方形の方向へより小さい風量で送風しようと決定し、送風制御手段104が決定内容とおり制御する。 Further, as shown in FIG. 5B, when a person raises or lowers both hands in the front-rear direction, the rectangles at the time T0 acquired in step S401 at the initial stage of activation of the gesture detection unit 102 are T1, T2, T3 in order. , The rectangle acquired at time T4. Since the rectangle extracted by the image change point extraction unit 111 has expanded and contracted along the Y axis when T2 has passed through T1 from T0, the gesture pattern Y is calculated as plus 1 in step S420, and T4 from T2 through T3. Since the rectangle extracted by the image change point extraction unit 111 is once again expanded and contracted along the Y axis, the gesture pattern Y is once again calculated as plus 1 in step S420, and the gesture stored in the air conditioner 100 is obtained. Since the command is “I want to make it smaller than the previous air volume”, in step S440 it is decided to blow with a smaller air volume in the direction of the rectangle, and the air blowing control means 104 controls as determined.
また、図5(c)のように、人が左右方向で両手を上げたり下げたりして前後方向で両手を上げたり下げたりして左右方向でもう一度両手を上げたり下げたりする場合、ジェスチャ検出手段102の起動初期のステップS401で取得したT0時点の長方形が、順にT1、T2、T3、T4、T5、T6時点に取得した長方形になる。T0からT1経由でT2になった時に、画像変化点抽出部111に抽出された長方形がX軸で伸び縮みしたので、ステップS420でジェスチャパターンXがプラス1と演算し、T2からT3経由でT4になった時に、画像変化点抽出部111に抽出された長方形がY軸で伸び縮みしたので、ステップS420でジェスチャパターンYがプラス1と演算し、T4からT5経由でT6になった時に、画像変化点抽出部111に抽出された長方形がもう一度X軸で伸び縮みしたので、ステップS420でジェスチャパターンXがもう一度プラス1と演算し、それが空気調和機100で記憶したジェスチャ指令「この方向へ吹き出さないで」となるので、ステップS440でその長方形の方向へ吹出さないことを決定し、送風制御手段104が決定内容とおり制御する。もし、ステップS203で所在分布検出処理に基づき、他に人がいないと判定した場合、空気調和機100を停止しても良い。 In addition, as shown in FIG. 5C, when a person raises or lowers both hands in the left-right direction, raises or lowers both hands in the front-rear direction, and raises or lowers both hands again in the left-right direction, gesture detection is performed. The rectangle at the time T0 acquired in step S401 at the initial start of the means 102 becomes the rectangle acquired at the times T1, T2, T3, T4, T5, and T6 in order. Since the rectangle extracted by the image change point extraction unit 111 has expanded and contracted along the X axis when T2 has passed through T1 from T0, the gesture pattern X is calculated as plus 1 in step S420, and T4 from T2 through T3. Since the rectangle extracted by the image change point extraction unit 111 is expanded and contracted on the Y-axis, the gesture pattern Y is calculated to be plus 1 in step S420, and the image changes to T6 from T4 to T5. Since the rectangle extracted by the change point extraction unit 111 is expanded and contracted once again on the X axis, the gesture pattern X is once again calculated as plus 1 in step S420, and the gesture command stored in the air conditioner 100 is “blow out in this direction”. Do not blow "in step S440, it is decided not to blow in the direction of the rectangle, and the air blowing control means 104 decides. To control as contents. If it is determined in step S203 that there is no other person based on the location distribution detection process, the air conditioner 100 may be stopped.
また、図5(d)のように、人が前後方向で両手を上げたり下げたりして左右方向で両手を上げたり下げたりして前後方向でもう一度両手を上げたり下げたりする場合、ジェスチャ検出手段102の起動処理のステップS401で取得したT0時点の長方形が順にT
1、T2、T3、T4、T5、T6時点に取得した長方形になる。T0からT1経由でT2になった時に、画像変化点抽出部111に抽出された長方形がY軸で伸び縮みしたので、ステップS420でジェスチャパターンYがプラス1と演算し、T2からT3経由でT4になった時に、画像変化点抽出部111に抽出された長方形がX軸で伸び縮みしたので、ステップS420でジェスチャパターンXがプラス1と演算し、T4からT5経由でT6になった時に、画像変化点抽出部111に抽出された長方形がもう一度Y軸で伸び縮みしたので、ステップS420でジェスチャパターンYがもう一度プラス1と演算し、それが空気調和機100で記憶したジェスチャ指令「ジェスチャ検出終了」となるので、ステップS440で終了ジェスチャというジェスチャ指令を決定し、ステップS213でジェスチャ終了手段106を起動させ、ジェスチャ検出手段102を終了し、所在分布検出手段101を再有効化する。その時、送風内容とジェスチャ検出手段102起動前と同じ仮決定して、送風制御手段104が決定とおり制御する。
In addition, as shown in FIG. 5D, when a person raises or lowers both hands in the front-rear direction, raises or lowers both hands in the left-right direction, and raises or lowers both hands again in the front-rear direction, gesture detection The rectangles at the time T0 acquired in step S401 of the activation process of the means 102 are in order T
It becomes the rectangle acquired at the time of 1, T2, T3, T4, T5, and T6. Since the rectangle extracted by the image change point extraction unit 111 has expanded and contracted along the Y axis when T2 has passed through T1 from T0, the gesture pattern Y is calculated as plus 1 in step S420, and T4 from T2 through T3. Since the rectangle extracted by the image change point extraction unit 111 is expanded and contracted along the X axis, the gesture pattern X is calculated to be plus 1 in step S420, and when T6 becomes T6 via T5, Since the rectangle extracted by the change point extraction unit 111 is once again expanded and contracted on the Y axis, the gesture pattern Y is once again calculated as plus 1 in step S420, and the gesture command “gesture detection end” stored in the air conditioner 100 is calculated. Therefore, a gesture command called an end gesture is determined in step S440, and the gesture command is determined in step S213. The completion means 106 is activated, exit the gesture detection means 102, to re-enable location distribution detecting unit 101. At that time, the same provisional determination as before the activation of the air blowing content and the gesture detection means 102 is performed, and the air blowing control means 104 controls as determined.
なお、図5によって本発明のジェスチャ指令が限定されるものではない。例えば、両手ではなく、片手でジェスチャを行っても良い。 Note that FIG. 5 does not limit the gesture command of the present invention. For example, the gesture may be performed with one hand instead of both hands.
また、ジェスチャによる操作を風量の増減、風の要/不要、ジェスチャの終了として説明したが、本発明はこれに限るものでなく、例えば直前のジェスチャをキャンセルするようなジェスチャ操作があってもよい。 Further, although the gesture operation has been described as increase / decrease in the air volume, necessity / unnecessity of the wind, and termination of the gesture, the present invention is not limited to this, and there may be a gesture operation that cancels the previous gesture, for example. .
これによって、ジェスチャ検出手段102がジェスチャ検出時、人が簡単なジェスチャ操作で送風内容を制御することができる。人が複雑なジェスチャ動作を覚えなくても良いので、空気調和機の操作の利便性を高めることができる。なお、ジェスチャ検出手段102がジェスチャ検出中に、前のジェスチャ操作をキャンセルしたり、ジェスチャ検出を中止したりすることが可能なので、空気調和機の操作の利便性をさらなる高めることができる。また、ジェスチャ検出手段102で簡単な画像処理でジェスチャ操作が検出できるので、空気調和機のメモリに対して、サイズを小さくすることができる。 As a result, when the gesture detection unit 102 detects a gesture, a person can control the contents of the blown air by a simple gesture operation. Since it is not necessary for a person to learn a complicated gesture operation, the convenience of operation of the air conditioner can be improved. Since the gesture detection unit 102 can cancel the previous gesture operation or cancel the gesture detection while the gesture is being detected, the convenience of the operation of the air conditioner can be further enhanced. In addition, since the gesture operation can be detected by simple image processing by the gesture detection means 102, the size can be reduced with respect to the memory of the air conditioner.
次に図6を用いて、同実施の形態の送風制御手段の一例について説明する。図6(a)のように、部屋には二人(Aさん601とBさん602)が並んでいる。ジェスチャ検出手段102がジェスチャ検出時に、Aさん601が前より大きな風がほしいとジェスチャし、Bさん602が前より小さな風がほしいとジェスチャした場合、空気調和機の送風内容を制御する実現手段の送風制御手段104の一つであるルーバーが左右方向で回転する(図6の場合、ルーバーの上下方向での制御が必要なし)。送風内容決定手段103で決定した送風内容に基づき、送風制御手段104が空気の調和を対象とする検出エリアを大きい風がほしい人のいる第1エリア611、人のいない第2エリア612、小さい風がほしい人のいる第3エリア613に分割する。 Next, an example of the ventilation control means of the embodiment will be described with reference to FIG. As shown in FIG. 6A, two people (A 601 and B 602) are lined up in the room. When the gesture detection means 102 detects a gesture, when Mr. A 601 wants a larger wind than before and Mr. B 602 wants a smaller wind than before, the realization means for controlling the air content of the air conditioner A louver, which is one of the air blowing control means 104, rotates in the left-right direction (in the case of FIG. 6, there is no need to control the louver in the up-down direction). Based on the air content determined by the air content determining means 103, the air flow control means 104 has a detection area targeted for air harmony in the first area 611 where there is a person who wants a large wind, the second area 612 where there is no person, a small wind It is divided into the third area 613 where there is a person who wants.
図6(b)のように、空気調和機100が第1エリア611に送風する時にルーバー130を第1エリア611の方向に向けて低速で回転させ、空気調和機100が第2エリア612に送風する時にルーバー130を第2エリア612の方向に向けて一番高速度で回転させ、空気調和機100が第3エリア613に送風する時にルーバー130を第3エリア613の方向に向けて高速で回転させる。このようにして、各送風方向に送風時間で送風量をコントロールする。 As shown in FIG. 6B, when the air conditioner 100 blows air to the first area 611, the louver 130 is rotated at a low speed toward the first area 611, and the air conditioner 100 blows air to the second area 612. The louver 130 is rotated at the highest speed toward the second area 612 when the air conditioner 100 is blown, and the louver 130 is rotated at the high speed toward the third area 613 when the air conditioner 100 blows air to the third area 613. Let In this way, the air volume is controlled by the air blowing time in each air blowing direction.
また、図6(c)のように、空気調和機100が第1エリア611に送風する時にルーバー130を第1エリア611の方向に向けて高回数往復に回転させ、空気調和機100が第2エリア612に送風する時にルーバー130を第2エリア612の方向に向けて1回だけ回転させ、空気調和機100が第3エリア613に送風する時にルーバー130を第3エリア613の方向に向けて低回数往復に回転させる。それは、各送風方向に送風頻
度で送風量をコントロールするわけである。
Further, as shown in FIG. 6C, when the air conditioner 100 blows air to the first area 611, the louver 130 is rotated reciprocally many times toward the first area 611, and the air conditioner 100 is moved to the second area 611. The louver 130 is rotated only once in the direction of the second area 612 when blowing air to the area 612, and the louver 130 is lowered in the direction of the third area 613 when the air conditioner 100 blows air to the third area 613. Rotate it a number of times. That is, the air flow rate is controlled by the air blowing frequency in each air blowing direction.
また、各送風方向に送風時間と送風頻度の組合せで送風量をコントロールしても良い。図6(d)のように、空気調和機100が第1エリア611に送風する時にルーバー130を第1エリア611の方向に向けて高回数往復に高速で回転させ、空気調和機100が第2エリア612に送風する時にルーバー130を第2エリア612の方向に向けて1回だけ一番高速で回転させ、空気調和機100が第3エリア613に送風する時にルーバー130を第3エリア613の方向に向けて低回数往復に低速度に回転させる。 Moreover, you may control ventilation volume by the combination of ventilation time and ventilation frequency in each ventilation direction. As shown in FIG. 6D, when the air conditioner 100 blows air to the first area 611, the louver 130 is rotated in a high-speed reciprocation at a high speed in the direction of the first area 611. When blowing air to the area 612, the louver 130 is rotated at the highest speed only once in the direction of the second area 612. When the air conditioner 100 blows air to the third area 613, the louver 130 is moved to the direction of the third area 613. Rotate to low speed in a few round trips toward
また、ルーバーは一定周期で往復動作し、ファンモータの回転数の制御で、第1エリア611では高速回転、第2エリア612では回転を停止、第3エリア613では高速回転としても良い。 Further, the louver may reciprocate at a constant cycle, and by controlling the rotation speed of the fan motor, the first area 611 may be rotated at a high speed, the second area 612 may be stopped, and the third area 613 may be rotated at a high speed.
また、ルーバー全体の方向でなく、ルーバーの各フィンの方向および回転速度などを制御することにより、風を吹き分けて送風内容を制御しても良い。 Further, by controlling not only the direction of the entire louver but also the direction and rotational speed of each fin of the louver, the air content may be controlled by blowing air.
これによって、人ごとに対して異なる送風内容を制御することができる。 Thereby, it is possible to control different blowing contents for each person.
以上のように、本発明に係る空気調和機は、簡単なジェスチャ操作で人の空気調和機設定操作ができ、且つ意図せずに行った動作を動作のためのジェスチャと誤認識させずに送風の要/不要および送風内容を制御することができるうえ、人ごとに対して異なる送風内容を制御することができるので、空気調和システム等の用途にも適用できる。 As described above, the air conditioner according to the present invention can perform a human air conditioner setting operation with a simple gesture operation, and does not misrecognize an operation performed unintentionally as a gesture for operation. Since it is possible to control the necessity / unnecessity of the air and the content of the air flow, and also to control the content of the air flow that is different for each person, the present invention can be applied to applications such as an air conditioning system.
100 空気調和機
101 所在分布検出手段
102 ジェスチャ検出手段
103 送風内容決定手段
104 送風制御手段
105 トリガ発生手段
106 ジェスチャ終了手段
107 計時手段
108 表示手段
109 画像検出手段
110 温度分布検出手段
111 画像変化点抽出部
112 X軸伸縮検出部
113 Y軸伸縮検出部
120 リモコン
130 ルーバー
DESCRIPTION OF SYMBOLS 100 Air conditioner 101 Location distribution detection means 102 Gesture detection means 103 Air blow content determination means 104 Air blow control means 105 Trigger generation means 106 Gesture end means 107 Timing means 108 Display means 109 Image detection means 110 Temperature distribution detection means 111 Image change point extraction Unit 112 X-axis expansion / contraction detection unit 113 Y-axis expansion / contraction detection unit 120 remote control 130 louver
Claims (6)
人のジェスチャを検出するジェスチャ検出手段と、
前記所在分布検出手段および前記ジェスチャ検出手段の検出内容により送風内容を決定する送風内容決定手段と、
前記送風内容決定手段における決定に従って送風内容を制御する送風制御手段と、
前記所在分布検出手段が人の所在分布の変化を検出した時に前記ジェスチャ検出手段を起動させるトリガ発生手段と、
前記ジェスチャ検出手段がジェスチャ検出中は前記表示手段でジェスチャ検出中であることを表示する表示手段と、
を備える空気調和機。 A location distribution detecting means for detecting a location distribution of a person;
Gesture detection means for detecting human gestures;
Blower content determining means for determining the blown content according to the detected content of the location distribution detecting means and the gesture detecting means;
Blower control means for controlling the blast content according to the determination in the blast content determining means,
Trigger generation means for activating the gesture detection means when the location distribution detection means detects a change in a person's location distribution ;
Display means for displaying that the gesture detection means is detecting a gesture on the display means while the gesture detection means is detecting a gesture;
Air conditioner equipped with.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012102220A JP5830653B2 (en) | 2012-04-27 | 2012-04-27 | Air conditioner |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012102220A JP5830653B2 (en) | 2012-04-27 | 2012-04-27 | Air conditioner |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013231520A JP2013231520A (en) | 2013-11-14 |
JP5830653B2 true JP5830653B2 (en) | 2015-12-09 |
Family
ID=49678127
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012102220A Expired - Fee Related JP5830653B2 (en) | 2012-04-27 | 2012-04-27 | Air conditioner |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5830653B2 (en) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6550643B2 (en) * | 2014-03-14 | 2019-07-31 | 本田技研工業株式会社 | Motion estimation device, robot, and motion estimation method |
CN104102154B (en) * | 2014-07-04 | 2017-02-01 | 珠海格力电器股份有限公司 | Household appliance and control method and device thereof |
JP6087963B2 (en) * | 2015-02-17 | 2017-03-01 | レノボ・シンガポール・プライベート・リミテッド | Method for determining presence of object by stereo camera, device control system, and computer program |
JP6455310B2 (en) * | 2015-05-18 | 2019-01-23 | 本田技研工業株式会社 | Motion estimation device, robot, and motion estimation method |
WO2016190057A1 (en) * | 2015-05-22 | 2016-12-01 | コニカミノルタ株式会社 | Wearable electronic device and gesture detection method for wearable electronic device |
JP7109162B2 (en) * | 2017-06-14 | 2022-07-29 | 三菱電機株式会社 | air conditioner |
CN114216228B (en) * | 2021-11-11 | 2023-07-18 | 青岛海尔空调器有限总公司 | Control method and control system of air conditioner, electronic equipment and storage medium |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005135439A (en) * | 2004-12-28 | 2005-05-26 | Toshiba Corp | Operation input device |
JP2007230325A (en) * | 2006-02-28 | 2007-09-13 | Toyoda Gosei Co Ltd | Vehicular air-conditioner |
US20110292181A1 (en) * | 2008-04-16 | 2011-12-01 | Canesta, Inc. | Methods and systems using three-dimensional sensing for user interaction with applications |
JP2010163111A (en) * | 2009-01-16 | 2010-07-29 | Toyota Boshoku Corp | Air flow adjusting device |
JP5569062B2 (en) * | 2010-03-15 | 2014-08-13 | オムロン株式会社 | Gesture recognition device, method for controlling gesture recognition device, and control program |
JP5511477B2 (en) * | 2010-04-09 | 2014-06-04 | 三菱電機株式会社 | Air conditioner |
JP2011232894A (en) * | 2010-04-26 | 2011-11-17 | Renesas Electronics Corp | Interface device, gesture recognition method and gesture recognition program |
-
2012
- 2012-04-27 JP JP2012102220A patent/JP5830653B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2013231520A (en) | 2013-11-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5830653B2 (en) | Air conditioner | |
US10796694B2 (en) | Optimum control method based on multi-mode command of operation-voice, and electronic device to which same is applied | |
CN108332375B (en) | Air conditioner control method, electronic device, and computer-readable storage medium | |
KR102121785B1 (en) | Air-conditioner controlling direction of the wind using artificial intelligence by instructed position and method of controlling thereof | |
JP5819271B2 (en) | Air conditioner | |
JP2005172288A (en) | Controlling system for air conditioner | |
JP6815515B2 (en) | Air conditioning system and zone air conditioning control method | |
JP6252409B2 (en) | Information processing apparatus, information processing method, and program | |
JP2022023104A (en) | Air conditioning system | |
US20160231812A1 (en) | Mobile gaze input system for pervasive interaction | |
JP2005178473A (en) | Interface for in-vehicle equipment | |
JP6575637B2 (en) | Robot, robot control method and program | |
KR19990045631A (en) | Control method | |
CN110481419B (en) | Human-vehicle interaction method, system, vehicle and storage medium | |
JP2015210002A5 (en) | ||
JP2015025564A (en) | Air conditioner | |
CN110686376A (en) | Air conditioner and fan combined control method based on human body sleeping posture recognition, computer readable storage medium and air conditioner | |
JP2010091228A (en) | Air conditioner | |
WO2014054313A1 (en) | Controller | |
JP6815178B2 (en) | Air conditioner and air conditioning control method | |
JP2017226044A (en) | Robot, control method, and program of the robot | |
JP2013024534A (en) | Situation recognition device | |
CN110715422A (en) | Air conditioner and control method and control device thereof | |
JP2010091144A (en) | Air conditioner | |
JP2012141104A (en) | Air conditioner and method for controlling operaton of the same |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140310 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20140414 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140905 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20141007 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20141111 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141128 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150512 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150525 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5830653 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |