JP2001051067A - Human body-detecting device - Google Patents
Human body-detecting deviceInfo
- Publication number
- JP2001051067A JP2001051067A JP11229645A JP22964599A JP2001051067A JP 2001051067 A JP2001051067 A JP 2001051067A JP 11229645 A JP11229645 A JP 11229645A JP 22964599 A JP22964599 A JP 22964599A JP 2001051067 A JP2001051067 A JP 2001051067A
- Authority
- JP
- Japan
- Prior art keywords
- value
- threshold value
- human body
- sensor
- threshold
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Length Measuring Devices By Optical Means (AREA)
- Photometry And Measurement Of Optical Pulse Characteristics (AREA)
- Geophysics And Detection Of Objects (AREA)
- Air Conditioning Control Device (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】この発明は、検知領域内にお
ける人体の存在及び位置を検知するための人体検知装置
に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a human body detecting device for detecting the presence and position of a human body in a detection area.
【０００２】[0002]
【従来の技術】従来から例えば空気調和装置の課題は、
消費電力の削減及び快適性向上であり、この課題を達成
するための有効な手段の一つとして、人の存在及び位置
を検知する手段が挙げられる。即ち、被空調領域内にお
ける人の在・不在を人体検知装置で検知できれば不在時
には空気調和装置を停止させ、消費電力を大幅に削減で
きる。また在時においても、被空調領域内の人の位置を
検知できれば、その方向に空気調和装置の吹出風向を制
御し、人のいるエリアのみの空調を制御することによっ
て消費電力を削減できる。また同様に、人の位置を検知
して、検知した人の温冷感を例えばＰＭＶ等の指標を用
いて検出し、暑いと感じている人には集中的に冷風を送
ったり、逆に寝ている子供を避けたりすることにより、
それぞれの人の快適性の向上を図ることができる。2. Description of the Related Art Conventionally, for example, a problem of an air conditioner is as follows.
This is a reduction in power consumption and an improvement in comfort. As one of effective means for achieving this object, there is a means for detecting the presence and position of a person. That is, if the presence or absence of a person in the air-conditioned area can be detected by the human body detection device, the air conditioner is stopped when the person is not present, and power consumption can be significantly reduced. In addition, even when present, if the position of a person in the area to be air-conditioned can be detected, the direction of the blown air of the air conditioner is controlled in that direction, and the air conditioning in only the area where the person is present can be reduced, thereby reducing power consumption. Similarly, the position of a person is detected, and the sense of thermal sensation of the detected person is detected using, for example, an index such as a PMV. By avoiding children who are
The comfort of each person can be improved.
【０００３】従って、空気調和機に搭載させることを目
的として人の存在及び位置を検知する人体検知装置の開
発が様々行われてきた。この従来の人体検知装置は焦電
型センサなどの赤外線センサを用いて熱の移動即ち温度
情報から人の存在等を検知するもの、あるいはＣＣＤカ
メラなどのイメージセンサを用いて画像情報から検知す
るものが主であった。[0003] Therefore, various developments have been made on human body detecting devices for detecting the presence and position of a person for the purpose of mounting on an air conditioner. This conventional human body detection device detects the movement of heat using an infrared sensor such as a pyroelectric sensor or the like, and detects the presence of a person from temperature information, or detects image information using an image sensor such as a CCD camera. Was the main.
【０００４】ここで、この赤外線センサとは、その検知
エリア内への熱物体の入出時に変化する電流を検出する
ことにより、人を検出するセンサである。これには温度
情報からのみの検出となるため，照度に関係なく検知で
きるという利点がある反面、空気調和装置の温風や太陽
光などによる温度変化にも反応する。従って、赤外線セ
ンサ単独で人体検知を行った場合、人以外の物体にも反
応して空気調和装置を誤動作させてしまうという課題を
有していた。また、赤外線センサは、一つのセンサで一
つのエリアしか検出できず、エリア内に人が存在するか
どうかは検知できるが、位置を検知することはできない
という課題がある。そのため検知領域を広げるにはセン
サの数を増やさなければならず、そのセンサの数の分だ
けコストがかかるという問題もある。Here, the infrared sensor is a sensor that detects a person by detecting a current that changes when a hot object enters and exits the detection area. This has the advantage that detection can be performed irrespective of the illuminance because detection is performed only from temperature information, but also responds to changes in temperature due to warm air or sunlight from the air conditioner. Therefore, when a human body is detected by the infrared sensor alone, there is a problem that the air conditioner malfunctions in response to an object other than a person. In addition, the infrared sensor has a problem that one sensor can detect only one area and can detect whether a person exists in the area, but cannot detect the position. Therefore, in order to expand the detection area, the number of sensors must be increased, and there is a problem that the cost is increased by the number of sensors.
【０００５】一方のイメージセンサには、代表的なもの
にＣＣＤカメラのように可視光域の光の画像を検知する
撮像素子などがある。これらは，撮像面を大きくして、
レンズを調整すればより広範囲の領域の人を検出するこ
とができるという利点を持っている。同時に各画素ごと
にエリアを分割することが可能なので、細かいエリア別
の検知も可能である。しかし、一般的なイメージセンサ
では、取り込む画像が暗い場合、つまり照明がついてい
ないような場合では、適正な画像を取り込むことができ
ないため、その画像から人の存在及び位置を検知できな
いという課題を有していた。更に、対象とする人体が遠
い場合、その小さな動きとノイズを画像処理上で区別す
ることが困難になるという問題がある。[0005] On the other hand, typical image sensors include an image pickup device for detecting an image of light in the visible light range, such as a CCD camera. These make the imaging surface large,
Adjusting the lens has the advantage that people in a wider area can be detected. At the same time, since the area can be divided for each pixel, it is also possible to perform detailed detection for each area. However, a general image sensor has a problem that when an image to be captured is dark, that is, when there is no lighting, an appropriate image cannot be captured, so that the presence and position of a person cannot be detected from the image. Was. Furthermore, when the target human body is distant, there is a problem that it is difficult to distinguish small motion and noise in image processing.
【０００６】上記の様に、赤外線センサ、イメージセン
サを単独で用いた場合には、それぞれ課題を有してお
り、この課題を解決するため、例えば特開平４−１３０
２６号公報に示されるように赤外線センサから得られる
温度画像情報とイメージセンサから得られる人体画像情
報の両方を用いることにより、人の存在及び位置を正確
に検知できる人体検知装置も提案されている。[0006] As described above, when the infrared sensor and the image sensor are used alone, there are problems, respectively.
As disclosed in Japanese Patent Publication No. 26, a human body detection device capable of accurately detecting the presence and position of a person by using both temperature image information obtained from an infrared sensor and human body image information obtained from an image sensor has been proposed. .
【０００７】[0007]
【発明が解決しようとする課題】しかしながら、上記の
ように赤外線センサとイメージセンサを単に組み合わせ
ただけの人体検知装置の構成では、それぞれのセンサを
単独で用いるよりも人の存在及び位置を正確に検知する
ことはできるが、センサ自体は独立して閾値を設定して
いた。即ち、赤外線センサは、空気調和装置の温風や太
陽光などによる温度変化にも反応しその出力値が閾値を
超えた場合でも、閾値の設定が変更されることはなく、
取り込む画像が暗くて適正な画像を取り込むことができ
ないのか、対象とする人体が遠く画像処理上判別できな
いのか、本当に人体が存在しないかが不明である。従っ
て人体を検出する精度は個々のセンサを用いるよりも向
上するが、赤外線センサとイメージセンサとの間の関連
性はなく、それぞれのセンサの有する欠点を補うことは
できなかった。However, in the configuration of the human body detecting device in which the infrared sensor and the image sensor are simply combined as described above, the presence and position of the person can be more accurately determined than when each sensor is used alone. Although the sensor can be detected, the sensor itself independently sets a threshold. In other words, the infrared sensor also responds to temperature changes due to the warm air or sunlight of the air conditioner, and when the output value exceeds the threshold, the setting of the threshold is not changed,
It is unclear whether the image to be captured is dark and an appropriate image cannot be captured, whether the target human body is too far to be distinguished by image processing, or whether there is really no human body. Therefore, although the accuracy of detecting a human body is improved as compared with the case of using individual sensors, there is no relation between the infrared sensor and the image sensor, and the disadvantages of each sensor cannot be compensated.
【０００８】本発明は、かかる課題を解決するためにな
されたもので、赤外線センサとイメージセンサの２つの
センサを用いて、より検知領域内の人の存在及び位置を
精度良く検知できるようにした人体検出装置を提供す
る。SUMMARY OF THE INVENTION The present invention has been made to solve such a problem, and is capable of detecting the presence and position of a person in a detection area more accurately by using two sensors, an infrared sensor and an image sensor. Provided is a human body detection device.
【０００９】[0009]
【課題を解決するための手段】本発明は、赤外線の反射
により電流値を出力する赤外線センサと可視光域の光の
画像から輝度値を出力するイメージセンサとを備え、前
記赤外線センサの出力値と閾値とを比較するとともに前
記イメージセンサの出力値と閾値とを比較し、これらの
比較結果に基づいて人体の存在の有無を判定する人体検
知装置において、少なくとも赤外線センサまたはイメー
ジセンサのうちのどちらか一方のセンサの閾値は他方の
センサの出力値と閾値の関係に基づいて変更するもので
ある。According to the present invention, there is provided an infrared sensor for outputting a current value by reflection of infrared rays, and an image sensor for outputting a luminance value from an image of light in a visible light range. And a threshold value, and compares the output value of the image sensor with the threshold value, and determines whether or not a human body is present based on the comparison result. At least one of the infrared sensor and the image sensor The threshold value of one of the sensors is changed based on the relationship between the output value of the other sensor and the threshold value.
【００１０】また、本発明は、赤外線の反射により電流
値を出力する赤外線センサと可視光域の光の画像から輝
度値を出力するイメージセンサとを備え、前記赤外線セ
ンサの出力値と閾値とを比較するとともに前記イメージ
センサの出力値と閾値とを比較し、これらの比較結果に
基づいて人体の存在の有無を判定する人体検知装置にお
いて、少なくとも赤外線センサまたはイメージセンサの
うちのどちらか一方のセンサの出力値が閾値を越えたと
きは、他方のセンサの閾値を一定値だけ減じた値に変更
するとともに、前記一方のセンサの出力値が閾値以上か
ら閾値未満となった時は、前記他方のセンサの閾値を一
定値だけ増した値に変更するものである。Further, the present invention comprises an infrared sensor for outputting a current value by reflection of infrared light and an image sensor for outputting a luminance value from an image of light in a visible light range, wherein an output value of the infrared sensor and a threshold value are determined. In a human body detection device that compares and compares the output value of the image sensor with a threshold value and determines the presence or absence of a human body based on the comparison result, at least one of an infrared sensor and an image sensor When the output value exceeds the threshold value, the threshold value of the other sensor is changed to a value reduced by a certain value, and when the output value of the one sensor falls from the threshold value to the threshold value, the other sensor is This is to change the threshold value of the sensor to a value increased by a certain value.
【００１１】また、本発明は、前記赤外線センサまたは
イメージセンサのうちのどちらか一方のセンサの出力値
が閾値以上から閾値未満となった時は、他方のセンサの
閾値を徐々に上昇するものである。Further, the present invention gradually increases the threshold of the other sensor when the output value of one of the infrared sensor and the image sensor falls from the threshold to the threshold. is there.
【００１２】本発明は、赤外線の反射により電流値を出
力する赤外線センサと可視光域の光の画像から輝度値を
出力するイメージセンサとを備え、前記赤外線センサの
出力値と閾値とを比較するとともに前記イメージセンサ
の出力値と閾値とを比較し、これらの比較結果に基づい
て人体の存在の有無を判定する人体検知装置において、
赤外線センサの閾値はイメージセンサの出力値と閾値の
関係に基づいて変更するとともにイメージセンサの閾値
は赤外線センサの出力値と閾値の関係に基づいて変更す
るものである。The present invention includes an infrared sensor that outputs a current value by reflection of infrared light and an image sensor that outputs a luminance value from an image of light in a visible light range, and compares an output value of the infrared sensor with a threshold value. A human body detection device that compares the output value of the image sensor with a threshold value and determines the presence or absence of a human body based on these comparison results.
The threshold value of the infrared sensor is changed based on the relationship between the output value of the image sensor and the threshold value, and the threshold value of the image sensor is changed based on the relationship between the output value of the infrared sensor and the threshold value.
【００１３】本発明は、赤外線の反射により電流値を出
力する赤外線センサと可視光域の光の画像から輝度値を
出力するイメージセンサとを備え、前記赤外線センサの
出力値と閾値とを比較するとともに前記イメージセンサ
の出力値と閾値とを比較し、これらの比較結果に基づい
て人体の存在の有無を判定する人体検知装置において、
赤外線センサの出力値が閾値を越えたときは、イメージ
センサの閾値を一定値だけ減じた値に変更するととも
に、赤外線センサの出力値が閾値以上から閾値未満とな
った時は、イメージセンサの閾値を一定値だけ増した値
に変更し、かつ、イメージセンサの出力値が閾値を越え
たときは、赤外線センサの閾値を一定値だけ減じた値に
変更するとともに、イメージセンサの出力値が閾値以上
から閾値未満に減少した時は、赤外線センサの閾値を一
定値だけ増した値に変更するものである。The present invention includes an infrared sensor that outputs a current value by reflection of infrared light and an image sensor that outputs a luminance value from an image of light in a visible light range, and compares the output value of the infrared sensor with a threshold value. A human body detection device that compares the output value of the image sensor with a threshold value and determines the presence or absence of a human body based on these comparison results.
When the output value of the infrared sensor exceeds the threshold value, the threshold value of the image sensor is changed to a value reduced by a certain value, and when the output value of the infrared sensor falls from the threshold value to the threshold value, the threshold value of the image sensor is changed. When the output value of the image sensor exceeds the threshold value, the threshold value of the infrared sensor is changed to a value reduced by a certain value, and the output value of the image sensor is equal to or greater than the threshold value. When the threshold value of the infrared sensor is reduced to a value less than the threshold value, the threshold value of the infrared sensor is changed to a value increased by a certain value.
【００１４】[0014]
【発明の実施の形態】実施の形態１．図１は本発明の実
施の形態１に係わる人体検知装置の構成図である。図２
はこの人体検知装置の制御動作を示すフローチャートで
ある。本発明の人体検知装置は空気調和装置に搭載され
るものの他、照明装置等にも搭載することができるが、
本実施の形態では空気調和装置に搭載される人体検知装
置について説明する。図１において、１は検知領域内の
人体を検出する人体検知装置、２は検知領域内の人体の
存在を検出する人体存在検知手段、３は検知領域内の人
体の位置を検出する人体位置検知手段、４は人体存在検
知手段２及び人体位置検知手段３の閾値を設定する閾値
設定手段、５は人体存在検知手段２及び人体位置検知手
段３の検知結果から人体の存在及び位置を決定する人体
存在・位置決定手段、６は空気調和装置の吹出風向等を
制御する空気調和装置制御手段である。ここで、この人
体検知装置１は、人体存在検知手段２と人体位置検知手
段３と閾値設定手段４と人体存在・位置決定手段５から
構成されている。DESCRIPTION OF THE PREFERRED EMBODIMENTS Embodiment 1 FIG. 1 is a configuration diagram of a human body detection device according to Embodiment 1 of the present invention. FIG.
Is a flowchart showing a control operation of the human body detection device. The human body detection device of the present invention can be mounted not only on an air conditioner but also on a lighting device or the like,
In the present embodiment, a human body detection device mounted on an air conditioner will be described. In FIG. 1, 1 is a human body detecting device for detecting a human body in a detection area, 2 is a human body presence detecting means for detecting the presence of a human body in the detection area, and 3 is a human body position detection for detecting the position of a human body in the detection area. Means 4, a threshold setting means for setting thresholds of the human body presence detecting means 2 and the human body position detecting means 3; and 5, a human body for determining the presence and position of the human body from the detection results of the human body presence detecting means 2 and the human body position detecting means 3. The presence / position determining means 6 is an air conditioner control means for controlling the blowout wind direction of the air conditioner. Here, the human body detecting device 1 includes a human body presence detecting means 2, a human body position detecting means 3, a threshold setting means 4, and a human body presence / position determining means 5.
【００１５】人体存在検知手段２は、室内の温度情報特
に人体の赤外線放射を検出する赤外線センサ７と、この
赤外線センサ７の出力値と人体が存在すると判定するた
めの閾値とを比較する比較判定手段８と、この比較判定
手段８等の判定結果から検知領域内の人体の存在の確認
を行う人体存在確認手段９とから構成されている。ま
た、人体位置検知手段３は、室内の画像を取り込む撮像
素子を備えたイメージセンサ１０と、このイメージセン
サ１０の出力値と人体が存在すると判定するための閾値
とを比較する比較判定手段１１と、この比較判定手段１
１の判定結果から検知領域内の人体の位置確認を行う人
体位置確認手段１２とから構成されている。このイメー
ジセンサ１０は、ＣＣＤカメラのように可視光域の光の
画像を検知する撮像素子からなり、各画像素子ごとにエ
リアを分割することが可能なので、細かいエリア別の検
知も可能であり、人体の存在とともにその位置を検知す
ることができる。The human body presence detecting means 2 compares the output value of the infrared sensor 7 with a threshold value for determining that a human body is present, and an infrared sensor 7 for detecting indoor temperature information, particularly infrared radiation of the human body. It comprises a means 8 and a human body presence confirming means 9 for confirming the presence of a human body in the detection area based on the determination result of the comparison determining means 8 and the like. The human body position detecting means 3 includes an image sensor 10 having an image sensor for capturing an image in a room, and a comparison determining means 11 for comparing an output value of the image sensor 10 with a threshold for determining that a human body is present. This comparison determination means 1
And a human body position confirming means 12 for confirming the position of the human body in the detection area from the result of the determination in (1). The image sensor 10 is composed of an image sensor that detects an image of light in a visible light range like a CCD camera, and can divide an area for each image device. The position can be detected together with the presence of the human body.
【００１６】また、閾値設定手段４は、イメージセンサ
１０の閾値を変更する閾値変更手段１３と、この閾値Ｔ
ｈ１変更手段１３及び人体存在確認手段９に経過時間を
出力するタイマ等の時間測定手段１４から構成されてい
る。The threshold value setting means 4 includes a threshold value changing means 13 for changing a threshold value of the image sensor 10 and a threshold value T.
It comprises time measuring means 14 such as a timer for outputting the elapsed time to the h1 changing means 13 and the human body presence confirming means 9.
【００１７】次に、前記のように構成された人体検知装
置の動作を図２のフローチャートに基づき説明する。空
気調和装置の操作パネル等（図示せず）の入力で、空気
調和装置がＯＮ（ステップＳ１）されると、人体検知装
置１の電源も同時にＯＮされる（ステップＳ２）。人体
検知装置１の電源ＯＮと同時に、赤外線センサ７及びイ
メージセンサ１０は、検知領域内、例えば空気調和装置
の被空調領域内での人体の検知を開始する（ステップＳ
３・Ｓ４）。赤外線センサ７はこの検知領域内での熱の
移動即ち温度情報を電流値として出力し、この出力値
（以下「出力値Ａ２」という）と予め設定されている赤
外線センサ７の閾値（以下「閾値Ｔｈ２」という）とが
比較判定手段８で比較される（ステップＳ５）。この出
力値が閾値Ｔｈ２以上（ステップＳ５のＹＥＳ）であれ
ば検知領域内に人が存在すると判断し、閾値Ｔｈ２未満
（ステップＳ５のＮＯ）であれば検知領域内に人が存在
しないと判断する。Next, the operation of the thus configured human body detection device will be described with reference to the flowchart of FIG. When the air conditioner is turned on by an input from an operation panel or the like (not shown) of the air conditioner (step S1), the power of the human body detecting device 1 is turned on at the same time (step S2). At the same time when the power of the human body detection device 1 is turned on, the infrared sensor 7 and the image sensor 10 start detecting a human body in the detection area, for example, in the air-conditioned area of the air conditioner (step S).
3. S4). The infrared sensor 7 outputs the movement of heat in the detection area, that is, temperature information, as a current value, and outputs this output value (hereinafter referred to as “output value A2”) and a preset threshold value of the infrared sensor 7 (hereinafter “threshold value”). Th2) is compared by the comparison determination means 8 (step S5). If this output value is equal to or greater than threshold value Th2 (YES in step S5), it is determined that a person exists in the detection area, and if it is less than threshold value Th2 (NO in step S5), it is determined that no person exists in the detection area. .
【００１８】一方、イメージセンサ１０は、検知領域内
の画像情報を輝度値として出力し、この出力値（以下
「出力値Ａ１」という）と予め設定されているイメージ
センサ１０の閾値（以下「閾値Ｔｈ１」という）とが比
較判定手段１１で比較されて（ステップＳ７）、出力値
が閾値Ｔｈ１以上（ステップＳ７のＹＥＳ）であれば、
検知領域内に人が存在すると判断するとともにその位置
を検知し、出力値が閾値Ｔｈ１未満（ステップＳ７のＹ
ＥＳ）であれば、検知領域内に人が存在しないと判断す
る。ここで、このイメージセンサ１０の閾値Ｔｈ１は一
定値ではなく、赤外線センサ７の検知結果によって変更
するように設定されており、以下に閾値Ｔｈ１の変更の
内容について述べる。On the other hand, the image sensor 10 outputs image information in the detection area as a luminance value, and this output value (hereinafter referred to as "output value A1") is set to a predetermined threshold value of the image sensor 10 (hereinafter referred to as "threshold value"). Th1) is compared with the comparison determination means 11 (step S7), and if the output value is equal to or greater than the threshold Th1 (YES in step S7),
It is determined that a person is present in the detection area and the position is detected, and the output value is smaller than the threshold value Th1 (Y in step S7).
If ES), it is determined that no person exists in the detection area. Here, the threshold value Th1 of the image sensor 10 is not a fixed value, but is set so as to be changed according to the detection result of the infrared sensor 7. The details of the change of the threshold value Th1 will be described below.
【００１９】赤外線センサ７の出力値Ａ２が閾値Ｔｈ２
以上（ステップＳ５のＹＥＳ）であれば、赤外線センサ
７は検知領域内に人が存在すると判断するとともに、そ
の判定結果を閾値Ｔｈ１変更手段１３に出力して、閾値
Ｔｈ１の設定を変更する（ステップＳ６）。時系列な閾
値Ｔｈ１の変更については以下に述べる。The output value A2 of the infrared sensor 7 is a threshold value Th2
If this is the case (YES in step S5), the infrared sensor 7 determines that a person is present in the detection area, outputs the determination result to the threshold Th1 changing means 13, and changes the setting of the threshold Th1 (step S5). S6). The change of the threshold value Th1 in a time series will be described below.
【００２０】図３は、赤外線センサ７とイメージセンサ
１０の出力値と閾値の関係図である。横軸は経過時間、
縦軸は赤外線センサ７及びイメージセンサ１０の出力値
Ａ１・Ａ２を示している。また、この経過時間は時間測
定手段１４によってカウントされて閾値変更手段１３に
出力されるものである。赤外線センサ７の閾値Ｔｈ２
は、単独でこの赤外線センサ７を用いた場合と同様の値
に設定される。赤外線センサ７の出力値Ａ２がこの閾値
Ｔｈ２以上の時、即ち時刻Ｔ１〜Ｔ２の間は人体が存在
すると判断し、時刻Ｔ２を過ぎるとＴ３までは人体が存
在しないと判断する。また、以上の出力値Ａ２と閾値Ｔ
ｈ２との比較・判定結果は閾値Ｔｈ１変更手段１３に継
続して出力される。FIG. 3 is a diagram showing the relationship between the output values of the infrared sensor 7 and the image sensor 10 and the threshold value. The horizontal axis is the elapsed time,
The vertical axis indicates the output values A1 and A2 of the infrared sensor 7 and the image sensor 10. The elapsed time is counted by the time measuring means 14 and output to the threshold value changing means 13. Threshold value Th2 of infrared sensor 7
Is set to the same value as when the infrared sensor 7 is used alone. When the output value A2 of the infrared sensor 7 is equal to or greater than the threshold value Th2, that is, during the time T1 to T2, it is determined that a human body exists, and after the time T2, it is determined that no human body exists until T3. Further, the output value A2 and the threshold value T
The comparison / judgment result with h2 is continuously output to the threshold Th1 changing means 13.
【００２１】一方、イメージセンサ１０の閾値Ｔｈ１
は、赤外線センサ７の出力値Ａ１が閾値Ｔｈ２を超えて
いない時間帯（Ｔ０〜Ｔ１）は、単独でこのイメージセ
ンサ１０を使用した場合の閾値と同様の値であるＨ１に
設定される。時刻Ｔ１になると赤外線センサ７の出力値
Ａ２が閾値Ｔｈ２を超え、その情報が閾値Ｔｈ１変更手
段１３に入力され、イメージセンサ１０の閾値Ｔｈ１
は、イメージセンサ１０を制御するための最低制御限界
値であるＬ１までステップ状に下がる。これは、赤外線
センサ７が人の存在を検知している場合は、人が存在す
る可能性が高いと考えられるため、イメージセンサ１０
の閾値Ｔｈ１を下げて、その人を見つけ易くするためで
ある。On the other hand, the threshold value Th1 of the image sensor 10
Is set to H1 which is the same value as the threshold value when the image sensor 10 is used alone during a time period (T0 to T1) in which the output value A1 of the infrared sensor 7 does not exceed the threshold value Th2. At time T1, the output value A2 of the infrared sensor 7 exceeds the threshold Th2, and the information is input to the threshold Th1 changing means 13, and the threshold Th1 of the image sensor 10
Decreases stepwise to L1, which is the minimum control limit value for controlling the image sensor 10. This is because when the infrared sensor 7 detects the presence of a person, it is considered that there is a high possibility that a person is present.
This is for lowering the threshold Th1 to make it easier to find the person.
【００２２】また、時刻Ｔ２を過ぎると赤外線センサ７
の出力値Ａ２が閾値Ｔｈ２を下回り、人が存在しないと
判断する。この情報が閾値変更手段１３へ入力され、イ
メージセンサ１０の閾値Ｔｈ１はＨ１に至るために上昇
する。この時、先程まで赤外線センサ７は人が存在する
と検知していたため、まだ検知領域内に人がいる可能性
が高く、できるだけイメージセンサ１０で人を検知しよ
うとする制御を行う必要があり、徐々にその経過時間と
ともに閾値Ｔｈ１を上昇させ、一定時間をかけてＨ１ま
で至るようにする。この一定時間（例えば１２０秒）を
かけて閾値Ｔｈ１をＨ１まで上昇させることで、赤外線
センサ７およびイメージセンサ１０は本当に検知領域内
に人がいないのかどうかを検知する時間的な猶予が与え
られ、人体検知装置１は全体として人を見つけようとす
る方向に制御が行われる。After the time T2, the infrared sensor 7
Is smaller than the threshold value Th2, and it is determined that no person exists. This information is input to the threshold value changing means 13, and the threshold value Th1 of the image sensor 10 rises to reach H1. At this time, since the infrared sensor 7 has detected that a person is present, the possibility that the person is still in the detection area is high, and it is necessary to perform control to detect the person with the image sensor 10 as much as possible. Then, the threshold value Th1 is raised along with the elapsed time, and reaches H1 over a certain period of time. By raising the threshold value Th1 to H1 over this fixed time (for example, 120 seconds), the infrared sensor 7 and the image sensor 10 are given time to detect whether or not a person is really in the detection area. The human body detection device 1 is controlled in a direction in which a person is to be found as a whole.
【００２３】また、時刻Ｔ３になると、赤外線センサ７
の出力値が再び閾値Ｔｈ２以上になり、閾値変更手段１
３からの入力で、再び閾値Ｔｈ１は最低制御限界値であ
るＬ１を維持する。更に、時刻Ｔ４を過ぎると赤外線セ
ンサ７の出力値Ａ２が再び閾値Ｔｈ２を下回り、人が存
在しないと判断し、イメージセンサ１０の閾値Ｔｈ１は
再びＨ１に至るために徐々に上昇する。尚、図６では検
知開始よりイメージセンサ１０のみが時刻Ｔ５でその出
力値Ａ１が閾値Ｔｈ１を越えているが、赤外線センサ７
とイメージセンサ１０両方ともその出力値が閾値を越え
ている場合は、先に赤外線センサ７の検知結果を検出し
て、イメージセンサ１０の閾値Ｔｈ１をＬ１まで下げた
後、イメージセンサ１０の検知結果より赤外線センサ７
の閾値Ｔｈ２をＬ２まで下げるものである。At time T3, the infrared sensor 7
Is again greater than or equal to the threshold Th2, and the threshold changing means 1
With the input from 3, again the threshold value Th1 maintains the minimum control limit value L1. Further, after the time T4, the output value A2 of the infrared sensor 7 falls below the threshold Th2 again, it is determined that no person exists, and the threshold Th1 of the image sensor 10 gradually increases to reach H1 again. In FIG. 6, the output value A1 of the image sensor 10 only exceeds the threshold value Th1 at time T5 from the start of detection.
If the output values of both the image sensor 10 and the image sensor 10 exceed the threshold value, the detection result of the infrared sensor 7 is detected first, the threshold value Th1 of the image sensor 10 is reduced to L1, and the detection result of the image sensor 10 is determined. More infrared sensor 7
Is reduced to L2.
【００２４】上記のようにイメージセンサ１０の閾値Ｔ
ｈ１は、赤外線センサ７の出力値Ａ２によって変更する
が、この変更後の閾値Ｔｈ１とイメージセンサ１０の出
力値Ａ１が比較判定手段１１で比較される（ステップＳ
７）。これらの比較判定手段８・１１の判定結果から、
人体存在判定手段８は、まず赤外線センサ７が人体の存
在を確認しているかどうか、即ち出力値Ａ２≧閾値Ｔｈ
２であるかを確認し、人体の存在を確認していれば（ス
テップＳ８のＹＥＳ）、次にイメージセンサ１０が人体
の存在を確認しているかを判定し（ステップＳ１０）、
存在を確認していれば同時に人体の位置を特定する（ス
テップＳ１０のＹＥＳ）。人体の存在及び位置を確認し
た後に、人体存在・位置決定手段５で人体の存在等を決
定して、これを空気調和装置制御手段６へ出力する。空
気調和装置制御手段６は人体の存在及び位置に基づい
て、その人を検知した居住域に風向を向けて冷風等を当
てる等のスポット的な空調を行う（ステップＳ１１）。
これにより、省エネルギで快適性の高い空気調和制御を
行うことができる。As described above, the threshold value T of the image sensor 10
h1 is changed by the output value A2 of the infrared sensor 7, and the changed threshold Th1 and the output value A1 of the image sensor 10 are compared by the comparison determination means 11 (step S).
7). From the judgment results of these comparison judgment means 8 and 11,
The human body presence determining means 8 first determines whether the infrared sensor 7 has confirmed the presence of a human body, that is, the output value A2 ≧ the threshold Th
2 and if the presence of a human body has been confirmed (YES in step S8), then it is determined whether the image sensor 10 has confirmed the presence of a human body (step S10).
If the presence is confirmed, the position of the human body is specified at the same time (YES in step S10). After confirming the presence and position of the human body, the presence / position determining means 5 determines the presence of the human body and outputs it to the air conditioner control means 6. The air-conditioning apparatus control means 6 performs spot-like air conditioning, such as directing the wind direction to the living area where the person has been detected and applying cool air or the like based on the presence and position of the human body (step S11).
Thereby, energy-saving and highly comfortable air conditioning control can be performed.
【００２５】また、赤外線センサ７の出力値Ａ２が閾値
Ｔｈ２を越えているが（ステップＳ８のＹＥＳ）、イメ
ージセンサ１０の出力値Ａ１が閾値Ｔｈ１を越えていな
い場合でも（ステップＳ１０のＮＯ）、人体存在確認手
段９は人体の存在を確認し、人体存在・位置決定手段５
は人体の存在のみを決定して、これを空気調和装置制御
手段６へ出力する。空気調和装置制御手段６は人体の存
在という情報に基づいて、部屋全体へ向けて冷風等を吹
き出す等のワイド空調を行う（ステップＳ１２）。Although the output value A2 of the infrared sensor 7 exceeds the threshold value Th2 (YES in step S8), even if the output value A1 of the image sensor 10 does not exceed the threshold value Th1 (NO in step S10), The human body presence confirming means 9 confirms the presence of the human body, and the human body presence / position determining means 5
Determines only the presence of the human body and outputs this to the air conditioner control means 6. The air conditioner control means 6 performs wide air conditioning, such as blowing cold air, etc., toward the entire room based on the information indicating the presence of a human body (step S12).
【００２６】また、赤外線センサ７の出力値Ａ２が閾値
Ｔｈ２を越えていないが（ステップＳ８のＮＯ）、イメ
ージセンサ１０の出力値Ａ１が閾値Ｔｈ１を越えている
場合は（ステップＳ９のＹＥＳ）、人体存在確認手段９
は、比較判定手段８が人体の存在を否定しているため、
人体の存在を確認することができない。このとき人体位
置存在決定手段５は、比較判定手段１１の信号を受けて
人体の存在のみを決定して、これを空気調和装置制御手
段６へ出力する。空気調和装置制御手段６は人体の存在
という情報に基づいて、部屋全に風向を向けて冷風等を
当てる等のワイド的な空調を行う（ステップＳ１２）。If the output value A2 of the infrared sensor 7 does not exceed the threshold value Th2 (NO in step S8), but if the output value A1 of the image sensor 10 exceeds the threshold value Th1 (YES in step S9), Human body existence confirmation means 9
Means that the comparison determination means 8 has denied the existence of a human body,
Cannot confirm the existence of the human body. At this time, the human body position existence determining means 5 receives the signal of the comparison determining means 11 and determines only the presence of the human body, and outputs this to the air conditioner control means 6. The air-conditioning apparatus control means 6 performs wide-range air conditioning such as directing the wind to the entire room and blowing cold air or the like on the basis of the information indicating the presence of the human body (step S12).
【００２７】さらに、赤外線センサ７、イメージセンサ
１０ともに人体の存在を確認していない場合（ステップ
Ｓ９のＮＯ）、人体存在確認手段９は人体の存在を確認
しないため、人体存在・位置決定手段５は人体の存在・
位置を決定しない。この場合はこの人体の存在が確認さ
れない経過時間は時間測定手段１４で測定され続け、所
定時間以上経過した場合には空気調和装置制御手段６の
運転を停止する。これにより、省エネルギな空気調和制
御を行うことができる。Further, if neither the infrared sensor 7 nor the image sensor 10 has confirmed the presence of a human body (NO in step S9), the human body presence confirmation means 9 does not confirm the presence of the human body, so the human body presence / position determination means 5 Is the existence of the human body
Does not determine position. In this case, the elapsed time during which the presence of the human body is not confirmed is continuously measured by the time measuring means 14, and when the predetermined time has elapsed, the operation of the air conditioner control means 6 is stopped. Thus, energy-saving air conditioning control can be performed.
【００２８】以上の制御動作を空気調和装置の運転中常
時行うことで、常に人体の存在及び位置を検出すること
ができる。また、この検出は一定時間経過毎に繰り返し
行っても良い。By constantly performing the above control operation during the operation of the air conditioner, the presence and position of the human body can be always detected. Further, this detection may be repeatedly performed every predetermined time.
【００２９】実施の形態２．図４は本発明の実施の形態
２に係わる人体検知装置の構成図である。なお、実施の
形態１と同一又は相当部分には同じ符号を付し説明を省
略する。実施の形態１では、赤外線センサ７の検知結果
からイメージセンサ１０の閾値Ｔｈ１を変更させている
が、イメージセンサ１０の検知結果から赤外線センサ７
の閾値Ｔｈ２をも変更させることができればより人を検
知し易い人体検知装置１を提供することができる。そこ
で、本実施の形態では、赤外線センサ７の検知結果から
イメージセンサ１０の閾値Ｔｈ１を変更させるとともに
イメージセンサ１０の検知結果から赤外線センサ７の閾
値Ｔｈ２をも変更させた。Embodiment 2 FIG. 4 is a configuration diagram of a human body detection device according to Embodiment 2 of the present invention. The same or corresponding parts as in the first embodiment are denoted by the same reference numerals, and description thereof will be omitted. In the first embodiment, the threshold value Th1 of the image sensor 10 is changed based on the detection result of the infrared sensor 7, but the threshold value Th1 of the image sensor 10 is changed based on the detection result of the image sensor 10.
If the threshold value Th2 can be changed, it is possible to provide the human body detection device 1 that can detect a person more easily. Therefore, in the present embodiment, the threshold Th1 of the image sensor 10 is changed based on the detection result of the infrared sensor 7, and the threshold Th2 of the infrared sensor 7 is also changed based on the detection result of the image sensor 10.
【００３０】図４において、１５は赤外線センサ７の閾
値を変更する閾値Ｔｈ１変更手段である。従って、実施
の形態２では、閾値設定手段４は、イメージセンサ１０
の閾値を変更する閾値Ｔｈ２変更手段１３と、赤外線セ
ンサ７の閾値を変更する閾値Ｔｈ２変更手段１５と、こ
の閾値変更手段１３，１５に経過時間を出力するタイマ
等の時間測定手段１４から構成されている。In FIG. 4, reference numeral 15 denotes a threshold Th1 changing means for changing the threshold of the infrared sensor 7. Therefore, in the second embodiment, the threshold setting unit 4
A threshold Th2 changing unit 13 for changing the threshold of the infrared sensor 7, a threshold Th2 changing unit 15 for changing the threshold of the infrared sensor 7, and a time measuring unit 14 such as a timer for outputting an elapsed time to the threshold changing units 13 and 15. ing.
【００３１】次に、前記のように構成された人体検知装
置の動作を図５のフローチャートに基づき説明する。基
本的な動作は、実施の形態１で説明した通りなので説明
を省略する。赤外線センサ７及びイメージセンサ１０が
ＯＮすると（ステップＳ３・４）、まず、赤外線センサ
７の出力値と予め設定されている赤外線センサ７の閾値
Ｔｈ１とが比較判定手段８で比較される（ステップＳ
５）。この出力値が閾値Ｔｈ１以上（ステップＳ５のＹ
ＥＳ）であれば検知領域内に人が存在すると判断し、閾
値Ｔｈ１未満（ステップＳ５のＮＯ）であれば検知領域
内に人が存在しないと判断する。Next, the operation of the thus configured human body detecting apparatus will be described with reference to the flowchart of FIG. The basic operation is the same as that described in the first embodiment, and the description is omitted. When the infrared sensor 7 and the image sensor 10 are turned on (steps S3 and S4), first, the output value of the infrared sensor 7 is compared with a preset threshold value Th1 of the infrared sensor 7 by the comparison determination means 8 (step S3).
5). This output value is equal to or larger than the threshold Th1 (Y in step S5).
If ES), it is determined that a person is present in the detection area, and if less than threshold Th1 (NO in step S5), it is determined that no person is present in the detection area.
【００３２】一方、比較判定手段１１でも同様に、イメ
ージセンサ１０の出力値と予め設定されているイメージ
センサ１０の閾値Ｔｈ２とが比較されて（ステップＳ
７）、出力値が閾値Ｔｈ２以上（ステップＳ７のＹＥ
Ｓ）であれば、検知領域内に人が存在すると判断すると
ともにその位置を検知し、出力値が閾値Ｔｈ２未満（ス
テップＳ７のＹＥＳ）であれば、検知領域内に人が存在
しないと判断する。On the other hand, the comparison determination means 11 similarly compares the output value of the image sensor 10 with a preset threshold value Th2 of the image sensor 10 (step S2).
7), the output value is equal to or greater than the threshold value Th2 (YE in step S7)
If S), it is determined that a person is present in the detection area and its position is detected. If the output value is less than threshold value Th2 (YES in step S7), it is determined that no person is present in the detection area. .
【００３３】この赤外線センサ７の出力値が閾値Ｔｈ２
以上（ステップＳ５のＹＥＳ）であれば、赤外線センサ
７は検知領域内に人が存在すると判断するとともに、そ
の判定結果を閾値Ｔｈ１変更手段１３に出力して、閾値
Ｔｈ１の設定を変更する（ステップＳ６）。また、イメ
ージセンサ１０の出力値が閾値Ｔｈ１以上（ステップＳ
７のＹＥＳ）であれば、イメージセンサ１０は検知領域
内に人の存在・位置を確認するとともに、その判定結果
を閾値Ｔｈ２変更手段１５に出力して、閾値Ｔｈ２の設
定を変更する（ステップＳ１５）。The output value of the infrared sensor 7 is a threshold value Th2
If this is the case (YES in step S5), the infrared sensor 7 determines that a person is present in the detection area, outputs the determination result to the threshold Th1 changing means 13, and changes the setting of the threshold Th1 (step S5). S6). Further, the output value of the image sensor 10 is equal to or more than the threshold value Th1 (step S1).
If YES in step S7, the image sensor 10 checks the presence and position of a person in the detection area, outputs the result of the determination to the threshold Th2 changing unit 15, and changes the setting of the threshold Th2 (step S15). ).
【００３４】この赤外線センサ７及びイメージセンサ１
０の閾値の変更について以下に具体的に述べる。図６
は、赤外線センサ７とイメージセンサ１０の出力値と閾
値の関係図である。横軸は経過時間、縦軸は赤外線セン
サ７及びイメージセンサ１０の出力値を示している。ま
た、この経過時間は時間測定手段１４によってカウント
されて閾値変更手段１３・１５に出力されるものであ
る。赤外線センサ７は出力値Ａ２が閾値Ｔｈ２以上の
時、即ち時刻Ｔ５〜Ｔ７の間は人体が存在すると判断
し、時刻Ｔ５まで、及びＴ７〜Ｔ８の間は人体が存在し
ないと判断する。この判定結果は閾値Ｔｈ１変更手段１
３に継続して出力される。一方、イメージセンサ１０の
閾値Ｔｈ１は、出力値Ａ１が閾値Ｔｈ１以上の時、即ち
時刻Ｔ５〜Ｔ６の間及びＴ８以降は人体が存在すると判
断し、時刻Ｔ５まで及びＴ６〜Ｔ８の間は人体が存在し
ないと判断する。この判定結果は閾値Ｔｈ２変更手段１
５に継続して出力される。The infrared sensor 7 and the image sensor 1
The change of the threshold value of 0 will be specifically described below. FIG.
FIG. 4 is a diagram showing a relationship between output values of the infrared sensor 7 and the image sensor 10 and a threshold. The horizontal axis indicates elapsed time, and the vertical axis indicates output values of the infrared sensor 7 and the image sensor 10. The elapsed time is counted by the time measuring means 14 and output to the threshold changing means 13 and 15. The infrared sensor 7 determines that the human body exists when the output value A2 is equal to or larger than the threshold value Th2, that is, between times T5 and T7, and determines that the human body does not exist until time T5 and between T7 and T8. The result of this determination is the threshold Th1 changing means 1
3 is output continuously. On the other hand, the threshold value Th1 of the image sensor 10 determines that the human body exists when the output value A1 is equal to or larger than the threshold value Th1, that is, between the times T5 and T6 and after the time T8. Judge that it does not exist. The result of this determination is the threshold Th2 changing means 1
5 is output continuously.
【００３５】時刻Ｔ５までは赤外線センサ７・イメージ
センサ１０ともに出力値が閾値を超えていないので、そ
れぞれのセンサに予め設定された閾値（Ｈ１，Ｈ２）を
維持する。時刻Ｔ５になるとイメージセンサ１０の出力
値Ａ１が閾値Ｔｈ１を超え、その情報が閾値Ｔｈ２変更
手段１５に入力され、赤外線センサ７の閾値Ｔｈ２はこ
のセンサを制御するための最低制御限界値であるＬ２ま
でステップ状に下がる。つまり、イメージセンサ１０の
出力値Ａ１が閾値Ｔｈ１を越えている場合は、人がいる
可能性が高いため、赤外線センサ７の閾値Ｔｈ２を下げ
て、その人を見つけ易く制御される。Since the output values of both the infrared sensor 7 and the image sensor 10 do not exceed the threshold values until time T5, the threshold values (H1, H2) preset for the respective sensors are maintained. At time T5, the output value A1 of the image sensor 10 exceeds the threshold Th1, the information is input to the threshold Th2 changing means 15, and the threshold Th2 of the infrared sensor 7 is the minimum control limit L2 for controlling this sensor. Go down step by step. That is, when the output value A1 of the image sensor 10 exceeds the threshold Th1, there is a high possibility that a person is present. Therefore, the threshold Th2 of the infrared sensor 7 is lowered, and control is performed so that the person can be easily found.
【００３６】また、時刻Ｔ６を過ぎるとイメージセンサ
１０の出力値Ａ１が閾値Ｔｈ１を下回り、人が存在しな
いと判断する。この情報が閾値Ｔｈ２変更手段１５へ入
力され、赤外線センサ７の閾値Ｔｈ２はＨ２に至るため
に上昇する。この時、さっきまでイメージセンサ７は人
が存在すると検知していたため、まだ検知領域内に人が
いる可能性が高く、できるだけ赤外線センサ７で人を検
知しようとする制御を行い、徐々にその経過時間ととも
に閾値Ｔｈ２を上昇させ、一定時間をかけてＨ２まで至
るようにする。この一定時間をかけて閾値Ｔｈ２をＨ２
まで徐々に上昇させることで、赤外線センサ７およびイ
メージセンサ１０は本当に検知領域内に人がいないのか
どうかを検知する時間的猶予が与えられる。After the time T6, the output value A1 of the image sensor 10 falls below the threshold Th1, and it is determined that no person exists. This information is input to the threshold value Th2 changing means 15, and the threshold value Th2 of the infrared sensor 7 rises to reach H2. At this time, since the image sensor 7 has detected that a person is present, there is a high possibility that a person is still in the detection area, and control is performed to detect the person with the infrared sensor 7 as much as possible. The threshold value Th2 is increased with time, and reaches H2 over a certain period of time. Over this fixed time, the threshold value Th2 is set to H2
By gradually ascending, the infrared sensor 7 and the image sensor 10 are given time to detect whether or not a person is really in the detection area.
【００３７】また、時刻Ｔ７になると、赤外線センサ７
の出力値も閾値Ｔｈ２以下になり、閾値Ｔｈ１変更手段
１３にその情報を入力されて、閾値Ｔｈ１は徐々にその
経過時間とともに閾値Ｔｈ１を上昇させる。更に、時刻
Ｔ８を過ぎるとイメージセンサ１０の出力値が再び閾値
Ｔｈ１以上になり、赤外線センサ７の閾値Ｔｈ２はＬ２
までステップ状にその値を下げる。At time T7, the infrared sensor 7
Is less than or equal to the threshold value Th2, the information is input to the threshold value Th1 changing means 13, and the threshold value Th1 gradually increases the threshold value Th1 with the elapsed time. Further, after the time T8, the output value of the image sensor 10 becomes the threshold value Th1 or more again, and the threshold value Th2 of the infrared sensor 7 becomes L2.
Step down to that value.
【００３８】上記のように赤外線センサ７及びイメージ
センサ１０の閾値は、お互いのセンサの出力値によって
変更され、この変更後の閾値とこれらのセンサの出力値
が比較判定手段８・１１で比較される（ステップＳ５，
ステップＳ７）。これ以降の動作は実施の形態１と同様
であり、その人を検知した居住域に風向を向けて冷風等
を当てる等のスポット的な空調、またはワイド的な空調
を使い分けることで省エネルギで快適性の高い空気調和
制御を行うことができる。As described above, the threshold values of the infrared sensor 7 and the image sensor 10 are changed according to the output values of the respective sensors, and the changed threshold value and the output values of these sensors are compared by the comparing and judging means 8.11. (Step S5
Step S7). Subsequent operations are the same as those of the first embodiment, and energy saving and comfort can be achieved by selectively using spot-type air conditioning such as directing a cold wind or the like to the living area where the person is detected, or wide air conditioning. Highly efficient air conditioning control can be performed.
【００３９】以上の制御動作を空気調和装置の運転中常
時又は一定時間経過毎に繰り返し行うことで、常に人体
の存在及び位置を検出することができる。By repeatedly performing the above control operation during the operation of the air conditioner or every time a predetermined time elapses, the presence and position of the human body can be always detected.
【００４０】[0040]
【発明の効果】以上の発明から明らかなように本発明に
係わる人体検知装置は、赤外線の反射により電流値を出
力する赤外線センサと可視光域の光の画像から輝度値を
出力するイメージセンサとを備え、前記赤外線センサの
出力値と閾値とを比較するとともに前記イメージセンサ
の出力値と閾値とを比較し、これらの比較結果に基づい
て人体の存在の有無を判定する人体検知装置において、
少なくとも赤外線センサまたはイメージセンサのうちの
どちらか一方のセンサの閾値は他方のセンサの出力値と
閾値の関係に基づいて変更するものである。この結果、
赤外線センサとイメージセンサの２つのセンサを用い
て、より検知領域内の人の存在及び位置を精度良く検知
できるようにした人体検出装置を提供することができ
る。As is apparent from the above invention, the human body detecting apparatus according to the present invention comprises an infrared sensor for outputting a current value by reflection of infrared rays and an image sensor for outputting a luminance value from an image of light in a visible light range. A human body detecting device that compares the output value of the infrared sensor with a threshold value and compares the output value of the image sensor with a threshold value, and determines the presence or absence of a human body based on the comparison result.
At least the threshold value of one of the infrared sensor and the image sensor is changed based on the relationship between the output value of the other sensor and the threshold value. As a result,
Using the two sensors, the infrared sensor and the image sensor, it is possible to provide a human body detection device that can more accurately detect the presence and position of a person in the detection area.
【００４１】本発明に係わる人体検知装置は、赤外線の
反射により電流値を出力する赤外線センサと可視光域の
光の画像から輝度値を出力するイメージセンサとを備
え、前記赤外線センサの出力値と閾値とを比較するとと
もに前記イメージセンサの出力値と閾値とを比較し、こ
れらの比較結果に基づいて人体の存在の有無を判定する
人体検知装置において、少なくとも赤外線センサまたは
イメージセンサのうちのどちらか一方のセンサの出力値
が閾値を越えたときは、他方のセンサの閾値を一定値だ
け減じた値に変更するとともに、前記一方のセンサの出
力値が閾値以上から閾値未満となった時は、前記他方の
センサの閾値を一定値だけ増した値に変更するものであ
る。この結果、赤外線センサとイメージセンサの２つの
センサを用いて、より検知領域内の人の存在及び位置を
精度良く検知できるようにした人体検出装置を提供する
ことができる。The human body detection device according to the present invention includes an infrared sensor that outputs a current value by reflecting infrared light and an image sensor that outputs a luminance value from an image of light in a visible light range. In a human body detection device that compares a threshold with an output value of the image sensor and a threshold and determines the presence or absence of a human body based on the comparison result, at least one of an infrared sensor and an image sensor When the output value of one sensor exceeds the threshold value, the threshold value of the other sensor is changed to a value reduced by a certain value, and when the output value of the one sensor falls from the threshold value or more to less than the threshold value, The threshold value of the other sensor is changed to a value increased by a certain value. As a result, it is possible to provide a human body detection device that can more accurately detect the presence and position of a person in the detection area using the two sensors, the infrared sensor and the image sensor.
【００４２】また、本発明に係わる人体検知装置は、前
記赤外線センサまたはイメージセンサのうちのどちらか
一方のセンサの出力値が閾値以上から閾値未満となった
時は、他方のセンサの閾値を徐々に上昇するものであ
る。この結果、赤外線センサとイメージセンサの２つの
センサを用いて、より検知領域内の人の存在及び位置を
精度良く検知できるようにした人体検出装置を提供する
ことができる。Further, the human body detecting device according to the present invention gradually reduces the threshold value of the other sensor when the output value of one of the infrared sensor and the image sensor falls from the threshold value to the threshold value. Is to rise. As a result, it is possible to provide a human body detection device that can more accurately detect the presence and position of a person in the detection area using the two sensors, the infrared sensor and the image sensor.
【００４３】本発明に係わる人体検知装置は、赤外線の
反射により電流値を出力する赤外線センサと可視光域の
光の画像から輝度値を出力するイメージセンサとを備
え、前記赤外線センサの出力値と閾値とを比較するとと
もに前記イメージセンサの出力値と閾値とを比較し、こ
れらの比較結果に基づいて人体の存在の有無を判定する
人体検知装置において、赤外線センサの閾値はイメージ
センサの出力値と閾値の関係に基づいて変更するととも
にイメージセンサの閾値は赤外線センサの出力値と閾値
の関係に基づいて変更するものである。この結果、赤外
線センサとイメージセンサの２つのセンサを用いて、よ
り検知領域内の人の存在及び位置を精度良く検知できる
ようにした人体検出装置を提供することができる。The human body detection device according to the present invention includes an infrared sensor that outputs a current value by reflection of infrared light and an image sensor that outputs a luminance value from an image of light in a visible light range. In the human body detection device that compares the output value of the image sensor with the threshold value and compares the threshold value, and determines the presence or absence of a human body based on the comparison result, the threshold value of the infrared sensor is equal to the output value of the image sensor. The threshold value of the image sensor is changed based on the relationship between the threshold value and the output value of the infrared sensor and the threshold value. As a result, it is possible to provide a human body detection device that can more accurately detect the presence and position of a person in the detection area using the two sensors, the infrared sensor and the image sensor.
【００４４】本発明に係わる人体検知装置は、赤外線の
反射により電流値を出力する赤外線センサと可視光域の
光の画像から輝度値を出力するイメージセンサとを備
え、前記赤外線センサの出力値と閾値とを比較するとと
もに前記イメージセンサの出力値と閾値とを比較し、こ
れらの比較結果に基づいて人体の存在の有無を判定する
人体検知装置において、赤外線センサの出力値が閾値を
越えたときは、イメージセンサの閾値を一定値だけ減じ
た値に変更するとともに、赤外線センサの出力値が閾値
以上から閾値未満となった時は、イメージセンサの閾値
を一定値だけ増した値に変更し、かつ、イメージセンサ
の出力値が閾値を越えたときは、赤外線センサの閾値を
一定値だけ減じた値に変更するとともに、イメージセン
サの出力値が閾値以上から閾値未満に減少した時は、赤
外線センサの閾値を一定値だけ増した値に変更するもの
である。この結果、赤外線センサとイメージセンサの２
つのセンサを用いて、より検知領域内の人の存在及び位
置を精度良く検知できるようにした人体検出装置を提供
することができる。The human body detection device according to the present invention includes an infrared sensor that outputs a current value by reflection of infrared light and an image sensor that outputs a luminance value from an image of light in the visible light range. When comparing the output value of the image sensor with the threshold value and comparing the threshold value with the threshold value, and in the human body detection device that determines the presence or absence of a human body based on the comparison result, when the output value of the infrared sensor exceeds the threshold value Changes the threshold value of the image sensor to a value reduced by a certain value, and when the output value of the infrared sensor falls from the threshold value to the value less than the threshold value, changes the threshold value of the image sensor to a value increased by a certain value, If the output value of the image sensor exceeds the threshold value, the threshold value of the infrared sensor is changed to a value obtained by reducing the threshold value by a certain value, and the output value of the image sensor is reduced to the threshold value or less. When it decreased below a threshold from, and changes the threshold value of the infrared sensor to a value increased by a predetermined value. As a result, the infrared sensor and the image sensor
It is possible to provide a human body detection device that can more accurately detect the presence and position of a person in the detection area using the two sensors.
【図１】 この発明の実施形態１の構成を示す人体検知
装置の基本構成図である。FIG. 1 is a basic configuration diagram of a human body detection device showing a configuration of a first embodiment of the present invention.
【図２】 この発明の実施形態１の構成を示す人体検知
装置の制御動作を示すフローチャートである。FIG. 2 is a flowchart illustrating a control operation of the human body detecting device according to the first embodiment of the present invention.
【図３】 この発明の実施形態１の構成を示す出力値と
閾値の関係図である。FIG. 3 is a diagram illustrating a relationship between an output value and a threshold, showing the configuration of the first embodiment of the present invention;
【図４】 この発明の実施形態２の構成を示す人体検知
装置の基本構成図である。FIG. 4 is a basic configuration diagram of a human body detection device showing a configuration of a second embodiment of the present invention.
【図５】 この発明の実施形態２の構成を示す人体検知
装置の制御動作を示すフローチャートである。FIG. 5 is a flowchart illustrating a control operation of the human body detecting device according to the second embodiment of the present invention.
【図６】 この発明の実施形態２の構成を示す出力値と
閾値の関係図である。FIG. 6 is a diagram showing a relationship between an output value and a threshold, showing a configuration of the second embodiment of the present invention.
１ 人体検知装置、 ２ 人体存在検知手段、 ３ 人
体位置検知手段、 ４閾値設定手段、 ５ 人体存在・
位置決定手段、 ６ 空気調和装置制御手段、 ７ 赤
外線センサ、 ８ 比較判定手段、 ９ 人体存在確認
手段手段、１０ イメージセンサ、 １１ 比較判定手
段、 １２ 人体位置確認手段、１３ 閾値Ｔｈ１変更
手段、 １４ 時間測定手段、 １５ 閾値Ｔｈ２変更
手段。1 human body detection device, 2 human body presence detecting means, 3 human body position detecting means, 4 threshold setting means, 5 human body presence /
Position determination means, 6 Air conditioner control means, 7 Infrared sensor, 8 Comparison judgment means, 9 Human body existence confirmation means, 10 image sensor, 11 Comparison judgment means, 12 Human body position confirmation means, 13 Threshold Th1 change means, 14 hours Measuring means, 15 threshold value Th2 changing means.
───────────────────────────────────────────────────── フロントページの続き (72)発明者 辻 弘之 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 (72)発明者 樋熊 利康 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 (72)発明者 石岡 秀哲 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 (72)発明者 松本 崇 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 Ｆターム(参考） 2F065 AA00 AA01 BB05 CC16 FF31 FF42 GG09 GG21 JJ01 JJ03 JJ05 JJ26 NN17 NN20 QQ03 QQ06 QQ08 QQ25 QQ28 2G065 AA02 AB02 AB04 AB22 BA04 BA15 BC14 BC22 CA01 DA20 3L060 AA03 CC11 DD01 EE01 ──────────────────────────────────────────────────続 き Continuing on the front page (72) Inventor Hiroyuki Tsuji 2-3-2 Marunouchi, Chiyoda-ku, Tokyo Mitsui Electric Corporation (72) Inventor Toshiyasu Hikuma 2-3-2 Marunouchi, Chiyoda-ku, Tokyo Inside Rishi Electric Co., Ltd. (72) Inventor Hidenori Ishioka 2-3-2 Marunouchi, Chiyoda-ku, Tokyo Sanishi Electric Co., Ltd. (72) Inventor Takashi Matsumoto 2-3-2 Marunouchi, Chiyoda-ku, Tokyo Mitsubishi Electric In-house F term (reference) 2F065 AA00 AA01 BB05 CC16 FF31 FF42 GG09 GG21 JJ01 JJ03 JJ05 JJ26 NN17 NN20 QQ03 QQ06 QQ08 QQ25 QQ28 2G065 AA02 AB02 AB04 AB22 BA04 BA15 BC14 BC22 CA01 DA01 CC03 A01
Claims (5)
外線センサと可視光域の光の画像から輝度値を出力する
イメージセンサとを備え、前記赤外線センサの出力値と
閾値とを比較するとともに前記イメージセンサの出力値
と閾値とを比較し、これらの比較結果に基づいて人体の
存在の有無を判定する人体検知装置において、少なくと
も赤外線センサまたはイメージセンサのうちのどちらか
一方のセンサの閾値は他方のセンサの出力値と閾値の関
係に基づいて変更することを特徴とする人体検知装置。An infrared sensor for outputting a current value by reflection of infrared light; and an image sensor for outputting a luminance value from an image of light in a visible light region, wherein the output value of the infrared sensor is compared with a threshold value, In a human body detection device that compares the output value of the image sensor with a threshold and determines the presence or absence of a human body based on these comparison results, the threshold of at least one of the infrared sensor and the image sensor is the other A human body detection device that changes based on the relationship between the output value of the sensor and the threshold value.
外線センサと可視光域の光の画像から輝度値を出力する
イメージセンサとを備え、前記赤外線センサの出力値と
閾値とを比較するとともに前記イメージセンサの出力値
と閾値とを比較し、これらの比較結果に基づいて人体の
存在の有無を判定する人体検知装置において、少なくと
も赤外線センサまたはイメージセンサのうちのどちらか
一方のセンサの出力値が閾値を越えたときは、他方のセ
ンサの閾値を一定値だけ減じた値に変更するとともに、
前記一方のセンサの出力値が閾値以上から閾値未満とな
った時は、前記他方のセンサの閾値を一定値だけ増した
値に変更することを特徴とする人体検知装置。2. An infrared sensor for outputting a current value by reflection of infrared light, and an image sensor for outputting a luminance value from an image of light in a visible light region, wherein the output value of the infrared sensor is compared with a threshold value, In a human body detection device that compares the output value of the image sensor with a threshold and determines the presence or absence of a human body based on the comparison result, the output value of at least one of the infrared sensor or the image sensor is When the threshold value is exceeded, the threshold value of the other sensor is changed to a value reduced by a certain value,
When the output value of the one sensor falls from the threshold value to the value less than the threshold value, the threshold value of the other sensor is changed to a value increased by a certain value.
のうちのどちらか一方のセンサの出力値が閾値以上から
閾値未満となった時は、他方のセンサの閾値は徐々に上
昇することを特徴とする請求項３記載の人体検知装置。3. When the output value of one of the infrared sensor and the image sensor falls from the threshold value to the threshold value, the threshold value of the other sensor gradually increases. Item 3. The human body detection device according to Item 3.
外線センサと可視光域の光の画像から輝度値を出力する
イメージセンサとを備え、前記赤外線センサの出力値と
閾値とを比較するとともに前記イメージセンサの出力値
と閾値とを比較し、これらの比較結果に基づいて人体の
存在の有無を判定する人体検知装置において、赤外線セ
ンサの閾値はイメージセンサの出力値と閾値の関係に基
づいて変更するとともにイメージセンサの閾値は赤外線
センサの出力値と閾値の関係に基づいて変更することを
特徴とする人体検知装置。4. An infrared sensor for outputting a current value by reflection of infrared light, and an image sensor for outputting a luminance value from an image of light in a visible light region, wherein the output value of the infrared sensor is compared with a threshold value, and In the human body detection device that compares the output value of the image sensor with the threshold value and determines the presence or absence of a human body based on the comparison result, the threshold value of the infrared sensor is changed based on the relationship between the output value of the image sensor and the threshold value. And a threshold value of the image sensor is changed based on a relationship between an output value of the infrared sensor and the threshold value.
外線センサと可視光域の光の画像から輝度値を出力する
イメージセンサとを備え、前記赤外線センサの出力値と
閾値とを比較するとともに前記イメージセンサの出力値
と閾値とを比較し、これらの比較結果に基づいて人体の
存在の有無を判定する人体検知装置において、赤外線セ
ンサの出力値が閾値を越えたときは、イメージセンサの
閾値を一定値だけ減じた値に変更するとともに、赤外線
センサの出力値が閾値以上から閾値未満となった時は、
イメージセンサの閾値を一定値だけ増した値に変更し、
かつ、イメージセンサの出力値が閾値を越えたときは、
赤外線センサの閾値を一定値だけ減じた値に変更すると
ともに、イメージセンサの出力値が閾値以上から閾値未
満に減少した時は、赤外線センサの閾値を一定値だけ増
した値に変更することを特徴とする人体検知装置。5. An infrared sensor for outputting a current value by reflection of infrared light, and an image sensor for outputting a luminance value from an image of light in a visible light region, wherein an output value of the infrared sensor is compared with a threshold value, and In the human body detection device that compares the output value of the image sensor with the threshold value and determines the presence or absence of a human body based on the comparison result, when the output value of the infrared sensor exceeds the threshold value, the threshold value of the image sensor is set to When the output value of the infrared sensor is changed from a value equal to or greater than the threshold value to a value less than the threshold value while changing the value to a value reduced by a certain value,
Change the threshold value of the image sensor to a value increased by a certain value,
And, when the output value of the image sensor exceeds the threshold,
The threshold value of the infrared sensor is changed to a value reduced by a certain value, and when the output value of the image sensor decreases from the threshold value to the value less than the threshold value, the threshold value of the infrared sensor is changed to a value increased by a certain value. Human body detection device.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP22964599A JP3656472B2 (en) | 1999-08-16 | 1999-08-16 | Human body detection device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP22964599A JP3656472B2 (en) | 1999-08-16 | 1999-08-16 | Human body detection device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001051067A true JP2001051067A (en) | 2001-02-23 |
| JP3656472B2 JP3656472B2 (en) | 2005-06-08 |
Family
ID=16895453
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP22964599A Expired - Lifetime JP3656472B2 (en) | 1999-08-16 | 1999-08-16 | Human body detection device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3656472B2 (en) |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010091143A (en) * | 2008-10-06 | 2010-04-22 | Hitachi Appliances Inc | Air conditioner |
| CN101713584A (en) * | 2008-10-06 | 2010-05-26 | 日立空调·家用电器株式会社 | An air conditioner |
| JP2011106724A (en) * | 2009-11-17 | 2011-06-02 | Mitsubishi Electric Corp | Air-conditioning control system, air conditioning device, air-conditioning control method, temperature measuring system and temperature measuring method |
| CN101246219B (en) * | 2007-02-16 | 2013-01-09 | 福特全球技术公司 | Method and system for detecting objects using far infrared images |
| CN103234259A (en) * | 2013-04-27 | 2013-08-07 | 宁波奥克斯空调有限公司 | Control method for variable frequency air conditioner |
| CN103673089A (en) * | 2012-09-03 | 2014-03-26 | 日立空调·家用电器株式会社 | Air-conditioning machine |
| CN103712313A (en) * | 2012-10-05 | 2014-04-09 | 三菱电机株式会社 | Air conditioning control system and air conditioning control method |
| JP2014094568A (en) * | 2013-11-27 | 2014-05-22 | Canon Inc | Information processing apparatus |
| JP2015148436A (en) * | 2011-10-21 | 2015-08-20 | ネスト・ラブズ・インコーポレイテッド | Smart home device and method for optimizing operation of user interface for smart home device |
| JP2015232421A (en) * | 2014-06-10 | 2015-12-24 | 日立アプライアンス株式会社 | Air conditioner |
| CN106772656A (en) * | 2015-11-19 | 2017-05-31 | 上海理工大学 | A kind of indoor human body detection method based on infrared sensor array |
| KR101744210B1 (en) * | 2015-03-13 | 2017-06-07 | 파나소닉 아이피 매니지먼트 가부시키가이샤 | Sensor control device, sensor system, and load control system |
| CN108302705A (en) * | 2018-01-03 | 2018-07-20 | 珠海格力电器股份有限公司 | A kind of air conditioning control method, device, storage medium and air-conditioning |
-
1999
- 1999-08-16 JP JP22964599A patent/JP3656472B2/en not_active Expired - Lifetime
Cited By (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101246219B (en) * | 2007-02-16 | 2013-01-09 | 福特全球技术公司 | Method and system for detecting objects using far infrared images |
| CN101713584A (en) * | 2008-10-06 | 2010-05-26 | 日立空调·家用电器株式会社 | An air conditioner |
| CN101713584B (en) * | 2008-10-06 | 2012-10-31 | 日立空调·家用电器株式会社 | An air conditioner |
| JP2010091143A (en) * | 2008-10-06 | 2010-04-22 | Hitachi Appliances Inc | Air conditioner |
| JP2011106724A (en) * | 2009-11-17 | 2011-06-02 | Mitsubishi Electric Corp | Air-conditioning control system, air conditioning device, air-conditioning control method, temperature measuring system and temperature measuring method |
| US10481780B2 (en) | 2010-11-19 | 2019-11-19 | Google Llc | Adjusting proximity thresholds for activating a device user interface |
| JP2015148436A (en) * | 2011-10-21 | 2015-08-20 | ネスト・ラブズ・インコーポレイテッド | Smart home device and method for optimizing operation of user interface for smart home device |
| CN103673089A (en) * | 2012-09-03 | 2014-03-26 | 日立空调·家用电器株式会社 | Air-conditioning machine |
| CN103673089B (en) * | 2012-09-03 | 2016-11-23 | 江森自控日立空调技术（香港）有限公司 | Air conditioner |
| CN103712313A (en) * | 2012-10-05 | 2014-04-09 | 三菱电机株式会社 | Air conditioning control system and air conditioning control method |
| CN103712313B (en) * | 2012-10-05 | 2016-05-04 | 三菱电机株式会社 | Air-conditioner control system and air conditioning control method |
| CN103234259A (en) * | 2013-04-27 | 2013-08-07 | 宁波奥克斯空调有限公司 | Control method for variable frequency air conditioner |
| CN103234259B (en) * | 2013-04-27 | 2016-03-23 | 宁波奥克斯空调有限公司 | The control method of convertible frequency air-conditioner |
| JP2014094568A (en) * | 2013-11-27 | 2014-05-22 | Canon Inc | Information processing apparatus |
| JP2015232421A (en) * | 2014-06-10 | 2015-12-24 | 日立アプライアンス株式会社 | Air conditioner |
| KR101744210B1 (en) * | 2015-03-13 | 2017-06-07 | 파나소닉 아이피 매니지먼트 가부시키가이샤 | Sensor control device, sensor system, and load control system |
| US9792493B2 (en) | 2015-03-13 | 2017-10-17 | Panasonic Intellectual Property Management Co., Ltd. | Sensor control device, sensor system, and load control system |
| CN106772656B (en) * | 2015-11-19 | 2019-04-05 | 上海理工大学 | A kind of indoor human body detection method based on infrared sensor array |
| CN106772656A (en) * | 2015-11-19 | 2017-05-31 | 上海理工大学 | A kind of indoor human body detection method based on infrared sensor array |
| CN108302705A (en) * | 2018-01-03 | 2018-07-20 | 珠海格力电器股份有限公司 | A kind of air conditioning control method, device, storage medium and air-conditioning |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3656472B2 (en) | 2005-06-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2001051067A (en) | Human body-detecting device | |
| JPH10259942A (en) | Control device of air conditioner | |
| JP6074143B2 (en) | Air conditioner | |
| JP6408197B2 (en) | Air conditioner | |
| JP2015222173A (en) | Air conditioning system and air conditioner | |
| JP2016061446A (en) | Air conditioner | |
| JP6349046B1 (en) | Air conditioner | |
| JP2015232421A (en) | Air conditioner | |
| US11830229B2 (en) | Visible light sensor configured for detection of glare conditions | |
| JP6194187B2 (en) | Indoor environment control system | |
| JPH10259943A (en) | Control device of air conditioner | |
| JP2010206714A (en) | Equipment control system | |
| JP2013079774A (en) | Air conditioner | |
| JP2001141281A (en) | Air-conditioning system for shop | |
| JP5317839B2 (en) | Air conditioner | |
| JP7033940B2 (en) | Air conditioner | |
| WO2017221342A1 (en) | Air conditioner | |
| JP4274293B2 (en) | Air conditioner | |
| JP2012197985A (en) | Air conditioner | |
| JP3225993B2 (en) | Human body detecting device and air conditioner using the same | |
| JPH0379943A (en) | Air conditioner | |
| JP6727426B2 (en) | Air conditioner and air conditioning system | |
| JP2002310492A (en) | Air conditioner | |
| JPH07104023B2 (en) | Air conditioner | |
| JP2012154522A (en) | Method for controlling indoor unit |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20040625 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20040827 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20041109 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050111 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20050215 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20050228 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 3656472 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080318 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090318 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100318 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100318 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110318 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110318 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120318 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130318 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130318 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140318 Year of fee payment: 9 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| EXPY | Cancellation because of completion of term |