JP4155159B2 - Combined human touch switch - Google Patents

Combined human touch switch Download PDF

Info

Publication number
JP4155159B2
JP4155159B2 JP2003366885A JP2003366885A JP4155159B2 JP 4155159 B2 JP4155159 B2 JP 4155159B2 JP 2003366885 A JP2003366885 A JP 2003366885A JP 2003366885 A JP2003366885 A JP 2003366885A JP 4155159 B2 JP4155159 B2 JP 4155159B2
Authority
JP
Japan
Prior art keywords
image
time
person
room
human sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003366885A
Other languages
Japanese (ja)
Other versions
JP2005134120A (en
Inventor
亮 森本
秀夫 森
英喜 河原
利春 竹ノ内
淳平 遠藤
究 柴田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Electric Works Co Ltd
Original Assignee
Matsushita Electric Works Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Works Ltd filed Critical Matsushita Electric Works Ltd
Priority to JP2003366885A priority Critical patent/JP4155159B2/en
Publication of JP2005134120A publication Critical patent/JP2005134120A/en
Application granted granted Critical
Publication of JP4155159B2 publication Critical patent/JP4155159B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Geophysics And Detection Of Objects (AREA)
  • Image Processing (AREA)
  • Switches Operated By Changes In Physical Conditions (AREA)

Description

本発明は、室内における人の存在・不在に応じて照明負荷のような負荷のオンオフを自動的に制御する複合型人感スイッチに関するものである。   The present invention relates to a composite human touch switch that automatically controls on / off of a load such as a lighting load in accordance with the presence / absence of a person in a room.

従来から、トイレや会議室などの室内における人の存在・不在に応じて照明負荷のような負荷を自動的にオンオフさせる人感スイッチが提供されている。この種の人感スイッチとしては、人体から放射される熱線を焦電型赤外線センサ(以下、「焦電素子」と呼ぶ)によって監視し、視野内における熱線量の変化の有無により人の存在・不在を検出するパッシブ型のものが広く用いられている。すなわち、焦電素子を用いたパッシブ型の人感センサは、赤外線を投光する必要がないから、回路構成が簡単であって小型かつ低価格で提供できる上に、単体での視野が比較的広く、複数個の焦電素子を並設して視野を拡げる場合も互いに干渉することがないという利点を有している。   Conventionally, a human touch switch that automatically turns on and off a load such as a lighting load according to the presence / absence of a person in a room such as a toilet or a conference room has been provided. As this type of human sensor switch, the heat rays radiated from the human body are monitored by a pyroelectric infrared sensor (hereinafter referred to as “pyroelectric element”). A passive type that detects absence is widely used. In other words, passive human sensors using pyroelectric elements do not need to project infrared rays, so that the circuit configuration is simple, can be provided at a small size and at a low price, and the field of view of a single unit is relatively Widely, even when a plurality of pyroelectric elements are arranged in parallel to expand the field of view, there is an advantage that they do not interfere with each other.

もっとも、焦電素子は受光する熱線量の変化率(時間変化)に応じた電圧出力が得られる微分型のセンサであるから、焦電素子を単独で用いた場合には視野内への人の侵入または退出の時点でのみ電圧出力が得られ、しかも視野内への侵入か退出かは判別することができないものである。そこで、人体から放射された熱線が受光レンズや受光用ミラーのような光学要素を介して焦電素子に入射するように構成し、光学要素を用いることで焦電素子の視野内において感度むらが生じるように構成している。つまり、図10(a)のように、天井に設けた焦電素子10の視野内において床面上に他の領域よりも高感度になる長方形状の高感度領域DHを複数設け、高感度領域DHを幅方向の一直線上に配列したり、図10(b)のように、天井に設けた焦電素子10の視野内において床面上に他の領域よりも高感度になる正方形状の高感度領域DHを複数設け、高感度領域DHを4個ずつ組にして配置するとともに、各組を一直線上に配列したりすることによって、焦電素子10の視野内に感度むらを付与するのである。このような構成では、焦電素子10と床面上の高感度領域DHとを結ぶビーム状の領域が高感度になるから、高感度になるビーム状の領域を検知ビームBDと呼んでいる。   However, since the pyroelectric element is a differential sensor that can obtain a voltage output corresponding to the rate of change (time change) of the received heat dose, when the pyroelectric element is used alone, the A voltage output is obtained only at the time of entry or exit, and it cannot be determined whether the entry or exit is within the field of view. Therefore, it is configured such that heat rays emitted from the human body enter the pyroelectric element via an optical element such as a light receiving lens or a light receiving mirror, and using the optical element causes uneven sensitivity within the field of view of the pyroelectric element. It is configured to occur. That is, as shown in FIG. 10A, a plurality of rectangular high-sensitivity regions DH that have higher sensitivity than the other regions are provided on the floor surface within the field of view of the pyroelectric element 10 provided on the ceiling. DH is arranged on a straight line in the width direction, or, as shown in FIG. 10B, a square-shaped high height that is more sensitive than the other areas on the floor surface within the field of view of the pyroelectric element 10 provided on the ceiling. A plurality of sensitivity areas DH are provided, and four high sensitivity areas DH are arranged in groups, and each group is arranged on a straight line, thereby giving uneven sensitivity in the field of view of the pyroelectric element 10. . In such a configuration, since a beam-like region connecting the pyroelectric element 10 and the high-sensitivity region DH on the floor surface has high sensitivity, the high-sensitivity beam-like region is called a detection beam BD.

上述のように、焦電素子10の視野内に複数本の検知ビームBDを形成すれば視野内に感度むらが形成され、焦電素子10の視野内に存在する人が手を動かす程度に微動しただけで焦電素子10に入射する熱線量に時間変化が生じるから、焦電素子10の視野内に人が存在している期間には焦電素子10から断続的に電圧出力が得られることになる。そこで、焦電素子10を用いて人の存否を検出し、人の存否に応じて負荷16を自動的にオンオフさせる自動スイッチとして図11に示す構成が広く採用されている。図11に示す構成では、焦電素子10の出力を増幅器11により増幅した後に、比較器12により増幅器11の出力のうち基準電圧以下のノイズを除去するとともに波形整形することにより、焦電素子10から電圧出力が発生するタイミングで矩形波状の信号を発生させており、この信号をタイマ回路14のトリガとして用いている。タイマ回路14は、トリガが与えられると一定時間であるディレイ時間を時限し、ディレイ時間の時限中には負荷制御回路15を通して負荷16をオンに保つ。また、タイマ回路14はリトリガラブルであって、ディレイ時間の時限中に比較器12からトリガが与えられると、その時点からさらにディレイ時間を時限するように構成されている。したがって、焦電素子10により人が検知されることにより負荷16がオンになってディレイ時間の時限が開始されると、ディレイ時間の時限中に焦電素子10で人が検知されるたびに負荷16のオンを継続させる時間が延長されるのである。その結果、焦電素子10の視野を室内に設定しているとすれば、室内に人が存在し、ディレイ時間の満了前に人の微動が検出される状態が続く限りは、負荷16がオンに保たれるのである。また、人の退室などによってディレイ時間の満了までに人の検知がなければ、タイマ回路14の時限動作が満了して負荷16はオフになる。   As described above, if a plurality of detection beams BD are formed in the field of view of the pyroelectric element 10, uneven sensitivity is formed in the field of view, so that a person existing in the field of view of the pyroelectric element 10 moves finely enough to move his / her hand. As a result, the heat dose incident on the pyroelectric element 10 changes with time, so that voltage output can be intermittently obtained from the pyroelectric element 10 during a period in which a person is present in the field of view of the pyroelectric element 10. become. Therefore, the configuration shown in FIG. 11 is widely adopted as an automatic switch that detects the presence or absence of a person using the pyroelectric element 10 and automatically turns on and off the load 16 according to the presence or absence of the person. In the configuration shown in FIG. 11, after the output of the pyroelectric element 10 is amplified by the amplifier 11, the comparator 12 removes noise below the reference voltage from the output of the amplifier 11 and shapes the waveform, thereby shaping the pyroelectric element 10. A rectangular wave signal is generated at the timing at which a voltage output is generated from, and this signal is used as a trigger for the timer circuit 14. The timer circuit 14 limits a delay time which is a fixed time when a trigger is given, and keeps the load 16 on through the load control circuit 15 during the delay time. The timer circuit 14 is retriggerable, and is configured to further limit the delay time from that point when a trigger is given from the comparator 12 during the delay time. Accordingly, when the person is detected by the pyroelectric element 10 and the load 16 is turned on and the time limit of the delay time is started, the load is detected every time the person is detected by the pyroelectric element 10 during the time limit of the delay time. The time for which 16 is continuously turned on is extended. As a result, assuming that the field of view of the pyroelectric element 10 is set indoors, the load 16 is on as long as there is a person in the room and human tremor is detected before the delay time expires. It is kept in. If no person is detected before the delay time expires due to the person leaving the room or the like, the timer circuit 14 expires and the load 16 is turned off.

いま、室内に人が存在するか否かを焦電素子10によって検知し、人が存在する間に照明器具のような負荷16をオンにする場合を想定する。図12(a)は室内における人の存否を表しており、室内に人が存在し焦電素子10の視野内において人が移動ないし微動すると焦電素子10から電圧出力が発生し、図12(b)のように、増幅器11の出力に変動が生じる。比較器12は、図12(c)のように、増幅器11の出力からノイズを除去し波形整形を行うことで矩形波状の信号を出力する。タイマ回路14は、比較器12から出力される信号をトリガとしてディレイ時間Tdの時限を行う。ここで、焦電素子10の視野内に人が存在していても微動もせずに静止していると、タイマ回路14によるディレイ時間Tdの時限が満了し、図12(d)のように、負荷16がオフになる。つまり、人の静止状態がディレイ時間Tdを越えて継続していると、焦電素子10の視野内に人が存在しているにもかかわらず負荷16がオフになる。   Assume that the pyroelectric element 10 detects whether a person is present in the room and turns on the load 16 such as a lighting fixture while the person is present. FIG. 12A shows the presence or absence of a person in the room. When a person is present in the room and moves or slightly moves within the field of view of the pyroelectric element 10, a voltage output is generated from the pyroelectric element 10, and FIG. As shown in b), the output of the amplifier 11 varies. As shown in FIG. 12C, the comparator 12 outputs a rectangular wave signal by removing noise from the output of the amplifier 11 and performing waveform shaping. The timer circuit 14 sets the delay time Td using the signal output from the comparator 12 as a trigger. Here, if a person is present in the field of view of the pyroelectric element 10 and is stationary without fine movement, the time limit of the delay time Td by the timer circuit 14 expires, as shown in FIG. The load 16 is turned off. That is, if the person's still state continues beyond the delay time Td, the load 16 is turned off despite the presence of the person in the field of view of the pyroelectric element 10.

たとえば、トイレにおいて負荷16として照明器具を用いる場合に、トイレに人が入室したときには照明器具が点灯するが、トイレ内で人が静止している状態がディレイ時間Tdに達するとトイレ内に人が存在するにもかからわず照明器具が消灯するという不都合を生じることになる。このような不都合を回避するために、負荷16として照明器具を用いる場合に、図13(d)のように、ディレイ時間Tdの満了前に減光する段調光を行ったり、図13(e)のように、ディレイ時間Tdの満了前にブザーなどによる報知音を発生させたりすることにより、ディレイ時間Tdの満了が近付いたことを報知する技術が知られている。上述のようにしてディレイ時間Tdの満了前に報知すれば、室内の人は動くことによってタイマ回路14を再トリガすることができ、負荷16のオンを継続することが可能になる。   For example, when a luminaire is used as the load 16 in the toilet, the luminaire is turned on when a person enters the toilet, but when the person is stationary in the toilet reaches the delay time Td, Even if it exists, it causes a disadvantage that the luminaire is turned off. In order to avoid such inconvenience, when a lighting fixture is used as the load 16, as shown in FIG. 13 (d), step dimming is performed before the delay time Td expires, or FIG. For example, a technique for notifying that the expiration of the delay time Td is approaching by generating a notification sound by a buzzer or the like before the expiration of the delay time Td is known. If notification is made before the expiration of the delay time Td as described above, the person in the room can re-trigger the timer circuit 14 by moving, and the load 16 can be kept on.

しかしながら、ディレイ時間Tdの満了前に報知する技術を採用したとしても、この種の人感センサの機能を認識していない人には、負荷16のオンを継続させるように行動させることができず、減光や報知音により不安感を生じさせることになるから、公共での用途では上述の技術を採用するのは困難である。そこで、報知機能を設ける代わりにディレイ時間Tdを比較的長く設定する(10〜15分)ことによって対応しているのが現状である。   However, even if a technique for informing before the expiration of the delay time Td is adopted, a person who does not recognize the function of this type of human sensor cannot be caused to act so as to continue the load 16 being turned on. Therefore, it is difficult to adopt the above-described technology for public use because it causes anxiety due to dimming or notification sound. Therefore, the current situation is that the delay time Td is set relatively long (10 to 15 minutes) instead of providing the notification function.

ところで、公共施設としての身障者用のトイレでは、室内の照明器具の点灯・消灯の操作を不要として使い勝手を向上させるとともに省エネルギを実現するために、熱線式人感センサを用いて、使用時にのみ照明器具を点灯させ、不使用時には照明器具を消灯させていることが多い。ところが、上述のようにディレイ時間Tdが長くなると、トイレから人が退室した後にも比較的長時間に亘って照明器具が点灯し続けることになり、無駄な電力消費が生じて省エネルギを実現できず、また人が退室しているにもかかわらず照明器具が点灯していることによって、次にトイレを使用しようとする人はトイレが使用中であると誤認し照明器具が消灯するまで比較的長時間に亘って待機するという不都合を生じることがある。   By the way, in the toilet for the disabled as a public facility, it is not necessary to turn on / off the lighting fixtures in the room, improving usability and realizing energy saving. In many cases, the lighting fixture is turned on, and the lighting fixture is turned off when not in use. However, if the delay time Td becomes longer as described above, the lighting fixture will continue to be lit for a relatively long time after the person leaves the toilet, resulting in unnecessary power consumption and energy saving. In addition, the lighting fixtures are lit even though the person has left the room, so that the next person who tries to use the toilet mistakes that the toilet is in use and keeps the lighting fixture off until it turns off. The inconvenience of waiting for a long time may occur.

一方、焦電素子を2個用いるとともに、一方の焦電素子の視野の外側に他方の焦電素子の視野を環状に設定し、両焦電素子による人の検知の時間的な先後関係によって、侵入、在留、退出を判別する技術が提案されている(たとえば、特許文献1参照)。この構成では、たとえば図14(a)のように外側の視野を設定した焦電素子で人を検知した後に、図14(b)のように内側の視野を設定した焦電素子で人が検知されると、図14(c)のように入室と判断し、その後、内側の視野を設定した焦電素子で人が検知された後に、外側の視野を設定した焦電素子で人が検知されると、図14(d)のように退室と判断することができる。   On the other hand, while using two pyroelectric elements, the field of the other pyroelectric element is set in an annular shape outside the field of one of the pyroelectric elements, and according to the temporal relationship of human detection by both pyroelectric elements, A technique for discriminating intrusion, residence, and exit has been proposed (see, for example, Patent Document 1). In this configuration, for example, after a person is detected by a pyroelectric element having an outer visual field as shown in FIG. 14 (a), the person is detected by a pyroelectric element having an inner visual field as shown in FIG. 14 (b). Then, as shown in FIG. 14 (c), it is determined that the room is entered, and then a person is detected by the pyroelectric element having the inner visual field, and then the person is detected by the pyroelectric element having the outer visual field. Then, it can be determined that the user leaves the room as shown in FIG.

また、焦電素子の視野内に検知領域を持つ超音波センサを組み合わせる構成も考えられている(たとえば、特許文献2参照)。超音波センサには、超音波を間欠的に送波するとともに反射波を受波し、送波から受波までの時間を距離に置き換えることによって、距離の変化から物体の有無を判断するものを用いる。この構成を採用すると、図15(a)のように焦電素子による人の検知後に、図15(b)のように超音波センサで人が検知されると、図15(c)のように入室と判断し、その後、超音波センサで人が検知されなくなった後に焦電素子による人の検知があれば、図15(d)のように退室と判断することができる。
特開2001−291176号公報 特開平10−153656号公報
A configuration in which an ultrasonic sensor having a detection region within the field of view of the pyroelectric element is also conceivable (see, for example, Patent Document 2). Ultrasonic sensors are devices that determine the presence or absence of an object from a change in distance by transmitting ultrasonic waves intermittently and receiving reflected waves and replacing the time from transmission to reception with distance. Use. When this configuration is adopted, after a person is detected by a pyroelectric element as shown in FIG. 15A, a person is detected by an ultrasonic sensor as shown in FIG. 15B, as shown in FIG. 15C. If it is determined that the person has entered the room and then a person is detected by the pyroelectric element after the person is no longer detected by the ultrasonic sensor, it can be determined that the person has left the room as shown in FIG.
JP 2001-291176 A JP-A-10-153656

上述したように、焦電素子を単独で用いた場合には、視野への侵入か退出かを識別することはできないから、トイレの照明器具を負荷として用いる場合に入室中の消灯を確実に防止しようとすればディレイ時間を長くしなければならず、ディレイ時間を長くすると、トイレからの退室後も比較的長時間に亘って照明器具が点灯状態を継続するという不都合が生じる。   As described above, when a pyroelectric element is used alone, it is not possible to identify whether it is entering or leaving the field of view, so it is possible to reliably prevent lights from entering the room when using toilet lighting equipment as a load. If it tries to do so, the delay time must be lengthened, and if the delay time is lengthened, the inconvenience that the lighting apparatus continues to be lit for a relatively long time after leaving the toilet occurs.

一方、複数のセンサを組み合わせる構成では入室と退室とを判別することができるから、入室から退室までの期間に照明器具を継続して点灯させることが可能になり、また退室から照明器具の消灯までの時間を比較的短く設定することが可能になり、焦電素子を単独で用いる場合の問題は解決可能と考えられる。   On the other hand, in a configuration in which a plurality of sensors are combined, it is possible to distinguish between entry and exit, so it is possible to keep the lighting fixtures on during the period from entry to exit, and from leaving the room to turning off the illumination fixtures. This time can be set relatively short, and it is considered that the problem in the case of using a pyroelectric element alone can be solved.

しかしながら、入退室の判定には両センサによる人の検知の順序(先後関係)を利用しており、2個の焦電素子を組み合わせる構成では、検知の順序を判定するために、両視野の間に人を検知しない空白の領域を設定しておくことが必要である。したがって、空白の領域に沿って人が移動するときには、退室の判断ができない可能性がある。また、2個の焦電素子を大小二重に設定しなければならないから、比較的広い空間にしか適用することができず、トイレ内の空間が狭いときには適正な視野を設定することができない可能性もある。   However, in order to determine the order of detection, the order of detection of humans by both sensors (relationship) is used, and in a configuration in which two pyroelectric elements are combined, It is necessary to set a blank area in which no person is detected. Therefore, when a person moves along a blank area, it may not be possible to determine whether to leave the room. In addition, since the two pyroelectric elements must be set to large and small, it can be applied only to a relatively large space, and an appropriate field of view cannot be set when the space in the toilet is small There is also sex.

また、焦電素子と超音波センサとを組み合わせる構成では、超音波センサの検知領域を焦電素子の視野内に設定するから、空白の領域は形成されないものの、トイレ内の空間が狭いときには超音波の多重反射が生じて人を正確に検知できない可能性がある。   Also, in the configuration in which the pyroelectric element and the ultrasonic sensor are combined, since the detection area of the ultrasonic sensor is set within the field of view of the pyroelectric element, a blank area is not formed, but ultrasonic waves are used when the space in the toilet is narrow. Multiple reflections may occur and people may not be detected accurately.

結局、2個の焦電素子を用いる構成と焦電素子に超音波センサを組み合わせる構成とのいずれであっても入退室を正確に判断するのは難しいという問題を有している。   After all, there is a problem that it is difficult to accurately determine the entrance / exit from either the configuration using two pyroelectric elements or the configuration combining the pyroelectric elements with an ultrasonic sensor.

本発明は上記事由に鑑みて為されたものであり、その目的は、入退室を正確に判断することにより、在室時には負荷のオンを継続し、退室後には負荷を短時間でオフにして省エネルギを実現する複合型人感センサを提供することにある。   The present invention has been made in view of the above-mentioned reasons, and its purpose is to accurately turn on / off the room, so that the load is kept on while in the room and the load is turned off in a short time after leaving the room. The object is to provide a composite human sensor that realizes energy saving.

請求項1の発明は、室内に設置され人体から放射される熱線を監視するとともに熱線量の変化によって人の存否を検知する熱線式人感センサと、熱線式人感センサによる人の検知後に起動され室内の画像を撮像するとともに画像内の人が室内から退室した時点を検知する画像式人感センサと、負荷をオンオフさせるスイッチ回路と、熱線式人感センサによる人の検知時点と画像式人感センサによる退室の検知時点とをディレイ時間の時限を開始する起点とするとともにディレイ時間の時限中にはスイッチ回路をオンに保ちディレイ時間内に熱線式人感センサと画像式人感センサとがどちらも人を検知しなければディレイ時間の満了時点でスイッチ回路をオフにする検知処理部とを備え、熱線式人感センサが熱線を監視する視野と画像式人感センサが撮像する視野とは等しく設定されており、検知処理部は、熱線式人感センサによる人の検知時点から時限するディレイ時間を一定である初期ディレイ時間とするとともに、初期ディレイ時間から一定の余裕時間を減算した起動時間を設定し、熱線式人感センサによる人の検知時点から当該起動時間が経過すると画像式人感センサを起動し、さらに、画像式人感センサによる退室の検知時点から時限するディレイ時間を、初期ディレイ時間よりも短縮した退室ディレイ時間とし、退室ディレイ時間の時限中は、熱線式人感センサと画像式人感センサとの少なくとも一方の感度を他の期間よりも高めることを特徴とする。 According to the first aspect of the present invention, a hot-wire human sensor that monitors a heat ray installed in a room and radiates from a human body and detects the presence / absence of a human by a change in heat dose, and starts after detection of a human by the hot-wire human sensor An image-type human sensor that picks up an indoor image and detects when a person in the image leaves the room, a switch circuit that turns on and off the load, and a human detection point and an image human The time point at which the sensor detects the exit of the room is used as a starting point for starting the delay time, and the switch circuit is kept on during the delay time, and the hot-wire sensor and the image sensor are detected within the delay time. if neither detects a human and a detection processing unit for turning off the switch circuit in the expiration time of the delay time, the field of view hot-wire motion sensor monitors the heat rays and the image type human cell The field of view captured by the camera is set to be equal, and the detection processing unit sets the delay time that is timed from the time of human detection by the hot-wire human sensor to a constant initial delay time and is constant from the initial delay time. Set the start time after subtracting the allowance time, start the image type human sensor when the start time has elapsed from the time of human detection by the hot wire type human sensor, and further from the time of detection of leaving the room by the image type human sensor The delay time that is limited is the exit delay time that is shorter than the initial delay time. During the exit delay time, the sensitivity of at least one of the hot-wire sensor and the image sensor is higher than the other periods. It is characterized by that.

この構成によれば、熱線式人感センサと画像式人感センサとが入退室を両者の検知の先後関係(検知順序)によって検知するのではなく、熱線式人感センサによって出入口からの入室時点を遅滞なく検出し、画像式人感センサによって出入口からの退室時点を遅滞なく検出するから、各センサの役割が分担されることによって、入退室を正確に判断することが可能になる。また、熱線式人感センサの視野と画像式人感センサの視野とを一致させているから、室内空間が狭い場合でも使用することが可能であり、その上、超音波センサのようなアクティブ型のセンサを用いないから、多重反射などによる誤認も生じることがない。なお、退室を検出することができない場合でも、ディレイ時間の満了時点では負荷がオフになるから、退室の検出に失敗しても負荷を自動的にオフにして省エネルギを実現できる。
さらに言えば、熱線式人感センサによる入室の検知から少なくとも初期ディレイ時間は負荷のオン状態を保証することができるから、初期ディレイ時間を比較的長く設定することによって入室中に負荷がオフになるのを防止することが可能である。また、初期ディレイ時間の時限中において余裕時間を減算した時間を起動時間として、熱線式人感センサによる人の検知時点から起動時間後に画像式人感センサを起動するから、熱線式人感センサによる人の検知直後に画像式人感センサを起動する場合に比較すると画像式人感センサによる電力消費を低減することができ、結果的に省エネルギにつながる。さらに、画像式人感センサの起動から初期ディレイ時間の満了までに余裕時間を設けているから、余裕時間の間に画像式人感センサの動作を安定させることができ、負荷のオン状態が継続している間に退室の検知が可能な状態になる。
According to this configuration, the hot-wire-type human sensor and the image-type human sensor do not detect the entrance / exit from the prior detection relationship (detection order) of the two, but the hot-wire human sensor detects the time when the room enters from the entrance / exit. Is detected without delay, and the time of exit from the entrance / exit is detected without delay by the image-type human sensor, so that the role of each sensor is shared, so that entrance / exit can be accurately determined . Moreover, since the field of view of the heat ray type human sensor and the field of view of the image type human sensor are matched, it can be used even in a small indoor space, and in addition, an active type such as an ultrasonic sensor. Therefore, there is no possibility of misidentification due to multiple reflections. Even when the exit from the room cannot be detected, the load is turned off at the end of the delay time. Therefore, even if the detection of the exit from the room fails, the load is automatically turned off to realize energy saving.
Furthermore, since the on-state of the load can be ensured at least for the initial delay time from the detection of the entrance by the hot wire type human sensor , the load is turned off during the entrance by setting the initial delay time relatively long. It is possible to prevent this . In addition, since the image-type human sensor is started after the start-up time from the time of human detection by the hot-wire human sensor, the time obtained by subtracting the margin time during the initial delay time is used as the start-up time. Compared with the case where the image type human sensor is activated immediately after human detection, power consumption by the image human sensor can be reduced, resulting in energy saving. Furthermore, since there is a margin time from the start of the image sensor to the expiration of the initial delay time, the operation of the image sensor can be stabilized during the margin time, and the load is kept on. While leaving, it becomes possible to detect exit.

また、退室までのディレイ時間よりも退室後の退室ディレイ時間を短縮しているから、入室から退室まではディレイ時間を長く設定することによって入室中の負荷のオン状態を継続しやすくし、退室時点からは退室ディレイ時間を短く設定することによって電力が無駄に消費されるのを防止することが可能になる。その結果、省エネルギになるのはもちろんのこと、身障者用のトイレの照明器具を負荷とするような場合に、退室後に照明器具が長時間に亘って消灯しないことによって使用中と誤認されるのを防止することができる。 Also, since the exit delay time after leaving the room is shorter than the delay time until leaving the room, it is easier to keep the load on while entering the room by setting a longer delay time from entering the room to leaving the room. Therefore, it is possible to prevent wasteful consumption of electric power by setting the exit delay time short. As a result, not only will it save energy, but it will be mistaken for being in use by leaving the lighting fixtures off for a long time after leaving the room when the toilet lighting fixtures for the disabled are used as loads. Can be prevented.

しかも、画像式人感センサによって退室と判断された後のディレイ時間である退室ディレイ時間において人を検知する感度を高めているから、退室ディレイ時間において室内に人が残っていないことを保証することができ、たとえ退室を誤認したとしても、室内に人が存在していれば負荷のオン状態を継続させることが可能になる。 In addition, since the sensitivity of detecting a person in the exit delay time, which is the delay time after being judged to leave by the image type human sensor, is increased, it is ensured that no person remains in the room during the exit delay time. Even if it is mistaken to leave the room, the load can be kept on as long as there is a person in the room.

請求項2の発明では、請求項1の発明において、前記画像式人感センサは、少なくとも出入口を含む下向きの視野を持つように設置され、画像内において人が存在するとみなせる領域に外接矩形を設定し、画像内での外接矩形の代表点の座標が画像式人感センサの視野の中央部から周辺部に向かって移動し、かつ視野から外接矩形が消滅した時点を、人の退室時点と判断することを特徴とする。 According to a second aspect of the invention, in the first aspect of the invention, the image-type human sensor is installed so as to have a downward visual field including at least an entrance, and a circumscribed rectangle is set in an area in which an image can be considered to exist. When the coordinates of the representative points of the circumscribed rectangle in the image move from the center to the periphery of the visual field of the image type human sensor, and the circumscribed rectangle disappears from the field of view, it is determined that the person leaves the room. It is characterized by doing.

この構成によれば、画像式人感センサが天井に配置されるとともに出入口を視野に含むように視野を下向きに設定しているときに退室を容易に検知することができる。つまり、比較的狭い室内において利用するのに適した画像による退室の検知技術を提供することができる。   According to this configuration, when the image type human sensor is arranged on the ceiling and the visual field is set downward so as to include the entrance / exit in the visual field, the exit from the room can be easily detected. That is, it is possible to provide an exit detection technique based on an image suitable for use in a relatively small room.

請求項3の発明では、請求項1または請求項2の発明において、前記画像式人感センサは、出入口に向かって斜め下向きを視野として設置され、画像内において人が存在するとみなせる領域に外接矩形を設定し、画像内での外接矩形の上下寸法と左右寸法との少なくとも一方が時間経過に伴って縮小し、視野から外接矩形が消滅する時点と外接矩形の面積が規定の閾値以下になった時点とを、人の退室時点と判断することを特徴とする。 According to a third aspect of the present invention, in the first or second aspect of the present invention, the image-type human sensor is installed with a visual field facing obliquely downward toward the doorway, and has a circumscribed rectangle in a region where a person can be considered to exist in the image. And at least one of the vertical and horizontal dimensions of the circumscribed rectangle in the image is reduced over time, and when the circumscribed rectangle disappears from the field of view and the area of the circumscribed rectangle is less than the specified threshold The point in time is determined as the time when the person leaves the room.

この構成によれば、視野を斜め下向きに設定しているときに退室を容易に検知することができる。つまり、比較的広い室内において利用するのに適した画像による退室の検知技術を提供することができる。   According to this configuration, it is possible to easily detect exit when the visual field is set obliquely downward. That is, it is possible to provide an exit detection technique using an image suitable for use in a relatively large room.

請求項4の発明では、請求項1ないし請求項3の発明において、前記画像式人感センサは画像内において人が存在するとみなせる領域に外接矩形を設定し、前記検知処理部は入室から退室までの期間において画像内で発生した外接矩形の最大個数を入室人数とみなし退室人数が入室人数に一致した時点を画像式人感センサによる退室の検知時点とすることを特徴とする。 According to a fourth aspect of the present invention, in the first to third aspects of the present invention, the image-type human sensor sets a circumscribed rectangle in an area in which an image can be regarded as a person, and the detection processing unit moves from entering the room to leaving the room. The maximum number of circumscribed rectangles generated in the image during this period is regarded as the number of people entering the room, and the time when the number of people leaving the room coincides with the number of people entering the room is set as the time of detection of leaving by the image type human sensor.

この構成によれば、複数人が入退室する場合に全員が退室するまで負荷のオン状態を維持することが可能になり、入室時に動作させた負荷が室内に人が残っているにもかかわらずオフになるのを防止することができる。   According to this configuration, when a plurality of people enter and leave the room, it becomes possible to maintain the load on until all of them leave the room, even though the load operated when entering the room remains in the room. It can be prevented from being turned off.

本発明の構成によれば、熱線式人感センサによって出入口からの入室時点を遅滞なく検出し、画像式人感センサによって出入口からの退室時点を遅滞なく検出するから、各センサの役割が分担されることによって、入退室を正確に判断することが可能になる。また、熱線式人感センサの視野と画像式人感センサの視野とを一致させているから、室内空間が狭い場合でも使用することが可能であり、その上、超音波センサのようなアクティブ型のセンサを用いないから、多重反射などによる誤認も生じることがないという利点がある。
さらに言えば、熱線式人感センサによる入室の検知から少なくとも初期ディレイ時間は負荷のオン状態を保証することができるから、初期ディレイ時間を比較的長く設定することによって入室中に負荷がオフになるのを防止することが可能である。また、初期ディレイ時間の時限中において余裕時間を減算した時間を起動時間として、熱線式人感センサによる人の検知時点から起動時間後に画像式人感センサを起動するから、熱線式人感センサによる人の検知直後に画像式人感センサを起動する場合に比較すると画像式人感センサによる電力消費を低減することができ、結果的に省エネルギにつながる。さらに、画像式人感センサの起動から初期ディレイ時間の満了までに余裕時間を設けているから、余裕時間の間に画像式人感センサの動作を安定させることができ、負荷のオン状態が継続している間に退室の検知が可能な状態になる。
また、退室までのディレイ時間よりも退室後の退室ディレイ時間を短縮しているから、入室から退室まではディレイ時間を長く設定することによって入室中の負荷のオン状態を継続しやすくし、退室時点からは退室ディレイ時間を短く設定することによって電力が無駄に消費されるのを防止することが可能になる。その結果、省エネルギになるのはもちろんのこと、身障者用のトイレの照明器具を負荷とするような場合に、退室後に照明器具が長時間に亘って消灯しないことによって使用中と誤認されるのを防止することができる。
しかも、退室ディレイ時間において人を検知する感度を高めているから、退室ディレイ時間において室内に人が残っていないことを保証することができ、たとえ退室を誤認したとしても、室内に人が存在していれば負荷のオン状態を継続させることが可能になる。
According to the configuration of the present invention, to detect without delay entry point from the entrance by a hot-wire motion sensor, since detecting without delay exit point from the doorway by the image type human sensor, the role of each sensor are shared This makes it possible to accurately determine entry / exit . Moreover, since the field of view of the heat ray type human sensor and the field of view of the image type human sensor are matched, it can be used even in a small indoor space, and in addition, an active type such as an ultrasonic sensor. do not use the sensor, an advantage that does not occur even mistaken due to multiple reflection there Ru.
Furthermore, since the on-state of the load can be ensured at least for the initial delay time from the detection of the entrance by the hot wire type human sensor , the load is turned off during the entrance by setting the initial delay time relatively long. It is possible to prevent this . In addition, since the image-type human sensor is started after the start-up time from the time of human detection by the hot-wire human sensor, the time obtained by subtracting the margin time during the initial delay time is used as the start-up time. Compared with the case where the image type human sensor is activated immediately after human detection, power consumption by the image human sensor can be reduced, resulting in energy saving. Furthermore, since there is a margin time from the start of the image sensor to the expiration of the initial delay time, the operation of the image sensor can be stabilized during the spare time, and the load remains on. While leaving, it becomes possible to detect exit.
Also, since the exit delay time after leaving the room is shorter than the delay time until leaving the room, it is easier to keep the load on while entering the room by setting a longer delay time from entering the room to leaving the room. Therefore, it is possible to prevent wasteful consumption of electric power by setting the exit delay time short. As a result, not only will it save energy, but it will be mistaken for being in use by leaving the lighting fixtures off for a long time after leaving the room when the toilet lighting fixtures for the disabled are used as loads. Can be prevented.
In addition, since the sensitivity to detect people during the exit delay time is increased, it can be guaranteed that no people remain in the room during the exit delay time, and even if the exit is mistaken, there is a person in the room. If so, the load can be kept on.

本発明は、図1に示すように、人体から放射される熱線を検出する焦電型赤外線センサ(以下、「焦電素子」と略称する)10を用いた熱線式人感センサ1とTVカメラのような撮像手段20を用いた画像式人感センサ2とを併用することによって室内のような特定領域における人の存在・不在を判断し、特定領域における人の存在・不在に応じて負荷のオンオフを制御するものである。本実施形態では、特定領域としてトイレ内を想定し、負荷としてはトイレ内を照明する照明負荷を想定する。この種の用途では、トイレへの入室時に照明負荷を点灯させた場合はトイレ内に人が存在する限りは照明負荷を点灯させ続け、またトイレからの退室直後には照明負荷の点灯を継続するが、退室後の比較的短時間で照明負荷を消灯させることが要求される。従来構成において説明したように、焦電素子10では視野内に設定した検知エリアへの人の侵入は高い確率で検出するものの、検知エリア内での人の静止状態と検知エリアから人の退出とを区別することは困難である。そこで、本発明では、この種の焦電素子10の欠点を補うために撮像手段20を人の検知に併用し、トイレへの入室の検知には主として焦電素子10を用い、トイレからの退室の検知には主として撮像手段20を用いる構成を採用している。   As shown in FIG. 1, the present invention includes a hot-wire human sensor 1 and a TV camera using a pyroelectric infrared sensor (hereinafter abbreviated as “pyroelectric element”) 10 for detecting a heat ray radiated from a human body. The presence / absence of a person in a specific area such as a room is determined by using together with the image-type human sensor 2 using the imaging means 20 as described above, and the load is determined according to the presence / absence of the person in the specific area. It controls on / off. In this embodiment, the inside of a toilet is assumed as a specific area, and the illumination load which illuminates the inside of a toilet is assumed as a load. In this type of application, if the lighting load is turned on when entering the toilet, the lighting load will continue to be turned on as long as there are people in the toilet, and the lighting load will be turned on immediately after leaving the toilet. However, it is required to turn off the lighting load in a relatively short time after leaving the room. As described in the conventional configuration, the pyroelectric element 10 detects a human intrusion into the detection area set in the field of view with a high probability, but the stationary state of the person in the detection area and the exit of the person from the detection area Is difficult to distinguish. Therefore, in the present invention, in order to compensate for the disadvantages of this type of pyroelectric element 10, the imaging means 20 is used in combination with human detection, the pyroelectric element 10 is mainly used to detect entry into the toilet, and the user leaves the toilet. For the detection, a configuration using the imaging means 20 is mainly employed.

トイレには負荷としての照明器具4が配置され、照明器具4は照明負荷(ランプあるいはランプと点灯装置との組合せ)を含む。本実施形態の複合型人感スイッチは、商用電源(図示せず)と照明器具4との間の給電経路に挿入されるスイッチ回路32を備え、スイッチ回路32に設けたスイッチ要素(リレーまたは3端子双方向サイリスタを用いる)を開閉することにより照明器具4への電源を入切する。つまり、スイッチ回路32にスイッチ要素を備えているから、壁スイッチのような通常の機械式スイッチに代えて用いることができる。また、スイッチ回路32を商用電源に接続するから、内部回路の電源がスイッチ回路32を通して供給される構成を採用している。したがって、1組の電源端子に商用電源を接続するだけで、商用電源から照明器具4への電源の入切と商用電源から内部回路への給電とが可能になる。   A lighting fixture 4 as a load is disposed in the toilet, and the lighting fixture 4 includes a lighting load (a lamp or a combination of a lamp and a lighting device). The composite human sensitive switch of the present embodiment includes a switch circuit 32 that is inserted into a power supply path between a commercial power source (not shown) and the lighting fixture 4, and a switch element (relay or 3) provided in the switch circuit 32. The lighting fixture 4 is turned on and off by opening and closing the terminal bidirectional thyristor. That is, since the switch circuit 32 includes a switch element, it can be used in place of a normal mechanical switch such as a wall switch. In addition, since the switch circuit 32 is connected to a commercial power supply, a configuration in which the power of the internal circuit is supplied through the switch circuit 32 is adopted. Therefore, it is possible to turn on / off the power supply from the commercial power supply to the lighting fixture 4 and to supply power from the commercial power supply to the internal circuit only by connecting the commercial power supply to one set of power supply terminals.

スイッチ回路32に設けたスイッチ要素は制御部31により開閉される。上述したように、本実施形態は、焦電素子10と撮像手段20とを併用して照明負荷のオンオフを制御するものであり、焦電素子10を用いた熱線式人感センサ1による人検知と撮像手段20を用いた画像式人感センサ2による人検知とを組み合わせてトイレへの人の入室と退室とを判断するために検知処理部30を備える。すなわち、検知処理部30は、トイレへの人の入退室を判断し判断結果を制御部31に与える。また、制御部31では照明器具4の点灯と消灯とのタイミングを規定する制御信号を生成し、この制御信号によりスイッチ回路32を制御する。また、負荷が照明負荷であってトイレ内が明るければトイレに人が存在していても照明負荷を点灯させる必要がないから、熱線式人感センサ1にはトイレ内の明るさ(照度)を検出するCdSあるいはフォトダイオードからなる明るさセンサ13を設けてあり、検知処理部30は明るさセンサ13により検出されているトイレ内の明るさに応じて、照明器具4を点灯させるか否かを判断する機能も備える。   The switch element provided in the switch circuit 32 is opened and closed by the control unit 31. As described above, in the present embodiment, the pyroelectric element 10 and the imaging unit 20 are used together to control the on / off of the illumination load, and human detection by the hot-wire human sensor 1 using the pyroelectric element 10 is performed. In addition, a detection processing unit 30 is provided to determine whether a person enters or leaves the toilet by combining the human detection by the image type human sensor 2 using the image pickup unit 20. That is, the detection processing unit 30 determines whether a person enters or leaves the toilet and gives the determination result to the control unit 31. Further, the control unit 31 generates a control signal that defines the timing of lighting and extinguishing of the luminaire 4 and controls the switch circuit 32 by this control signal. Also, if the load is an illumination load and the inside of the toilet is bright, there is no need to turn on the illumination load even if there are people in the toilet. A brightness sensor 13 composed of CdS or a photodiode to be detected is provided, and the detection processing unit 30 determines whether or not to turn on the luminaire 4 according to the brightness in the toilet detected by the brightness sensor 13. It also has a function to judge.

焦電素子10を用いた熱線式人感センサ1による人検知は周知の技術であって、焦電素子10の出力を増幅器11により増幅し、比較器12において人の動きに相当するレベルの信号を抽出する。焦電素子10は受光する熱線量(赤外線量)の変化率に応じた電圧出力が得られる微分型のセンサであり、トイレの室温変化などによって生じる熱線量の緩やかな変化に対しては焦電素子10からの出力は小さいから、比較器12を用いることにより、この種の雑音成分を除去しているのである。また、比較器12は波形整形機能も兼ねており、焦電素子10で検出される人の動きに対応した比較器12の出力は矩形波状になる。図示していないが、焦電素子10の受光面の前方には、焦電素子10の視野内で感度むらを付与した受光レンズを配置するのが望ましく、このような受光レンズを用いることにより焦電素子10の視野内で人が手を動かす程度の動きでも焦電素子10に入射する熱線量が変化し、比較器12から人の動きに対応する出力が得られることになる。このような受光レンズは、収束レンズである小レンズの集合体として形成され、各小レンズの光軸近傍の領域は感度が高く、各小レンズの境界付近は感度が低くなるから、各小レンズの光軸近傍にそれぞれ焦電素子10の視野よりも幅狭であるビーム状の検知エリアを設定したことになる。このような各小レンズの光軸近傍の検知エリアを検知ビームと呼んでいる。焦電素子10はトイレ内では便器の上方の天井に配置され、少なくとも便器を含む領域を視野としている。   Human detection by the hot-wire human sensor 1 using the pyroelectric element 10 is a well-known technique. The amplifier 11 amplifies the output of the pyroelectric element 10 and the comparator 12 outputs a signal corresponding to the level of human movement. To extract. The pyroelectric element 10 is a differential type sensor that can obtain a voltage output corresponding to the rate of change of the received heat dose (infrared ray amount). Since the output from the element 10 is small, this type of noise component is removed by using the comparator 12. The comparator 12 also has a waveform shaping function, and the output of the comparator 12 corresponding to the movement of the person detected by the pyroelectric element 10 has a rectangular wave shape. Although not shown, it is desirable to arrange a light receiving lens with uneven sensitivity in the field of view of the pyroelectric element 10 in front of the light receiving surface of the pyroelectric element 10. Even when the person moves his / her hand within the visual field of the electric element 10, the heat dose incident on the pyroelectric element 10 changes, and an output corresponding to the movement of the person is obtained from the comparator 12. Such a light receiving lens is formed as an assembly of small lenses that are converging lenses, and each small lens has high sensitivity in the area near the optical axis of each small lens and low sensitivity near the boundary of each small lens. That is, a beam-shaped detection area that is narrower than the visual field of the pyroelectric element 10 is set in the vicinity of the optical axis. Such a detection area in the vicinity of the optical axis of each small lens is called a detection beam. The pyroelectric element 10 is disposed on the ceiling above the toilet in the toilet, and has a field of view including at least the toilet.

上述した熱線式人感センサ1の出力である比較器12の出力および明るさセンサ13の出力はともに検知処理部30に入力される。検知処理部30では、比較器12から入力される矩形波状の信号を用いて焦電素子10の視野内での人の存否を判断する。検知処理部30では、たとえば、矩形波状の信号が規定した時間内に規定した個数(たとえば、3個)が入力されると、焦電素子10の視野内に人が存在すると判断する(人検知と判断する)。ただし、従来構成としても説明したように、焦電素子10は微分型のセンサであって人に動きのあるときにしか人検知と判断されないから、焦電素子10の出力に基づいて人検知と判断されたときには、検知処理部30に内蔵したタイマ回路(オフディレイタイマ)を起動し、タイマ回路がディレイ時間を時限している間には制御部31を通してスイッチ回路32をオンに保つ。タイマ回路はリトリガラブルであり、タイマ回路の時限動作中に人検知と判断されると、その時点からさらにディレイ時間を時限する。タイマ回路のディレイ時間は後述するように可変であって、通常は比較的長く設定されており、トイレに人がいる間に人の動きがなくともスイッチ回路32がオンに保たれるようにしてある。   Both the output of the comparator 12 and the output of the brightness sensor 13, which are the outputs of the heat ray human sensor 1 described above, are input to the detection processing unit 30. In the detection processing unit 30, the presence or absence of a person in the field of view of the pyroelectric element 10 is determined using a rectangular wave signal input from the comparator 12. The detection processing unit 30 determines that a person is present in the field of view of the pyroelectric element 10 when, for example, a specified number (for example, three) of rectangular wave signals is input within a specified time (person detection). Judged). However, as described in the conventional configuration, the pyroelectric element 10 is a differential sensor and can only be detected as a person when the person is moving. When the determination is made, a timer circuit (off-delay timer) built in the detection processing unit 30 is activated, and the switch circuit 32 is kept on through the control unit 31 while the timer circuit limits the delay time. The timer circuit is retriggerable, and if it is determined that a person is detected during the timed operation of the timer circuit, the delay time is further limited from that point. The delay time of the timer circuit is variable as will be described later, and is normally set to be relatively long so that the switch circuit 32 is kept on even when there is no movement of the person while the person is in the toilet. is there.

検知処理部30には、明るさセンサ13の出力に対する閾値が設定されており、明るさセンサ13により検出される明るさ(照度)が閾値を越える期間には制御部31に対してスイッチ回路32をオフに保つように指示する。また、検知処理部30では、明るさセンサ13に対して2段階の閾値を用いてヒステリシスを付与しており、明るさセンサ13により検出される明るさが、低いほうの閾値以下になると次に高いほうの閾値を越えるまでは人検知に対応したスイッチ回路32のオンオフを行い、その後、明るさが高いほうの閾値を越えると次に低いほうの閾値以下になるまではスイッチ回路32をオフに保つようになっている。したがって、明るさ変化がいずれかの閾値付近で振動しても動作が安定することになる。ここに、スイッチ回路32のオンオフを行う期間において、人検知に対応して照明器具4を点灯させると明るさセンサ13により検出される明るさが、高いほうの閾値を越える場合があるが、人検知に対応してスイッチ回路32をオンにしたときには明るさセンサ13の出力を無効にすることによって、短時間のうちに照明器具4の点灯と消灯とが繰り返されるような誤動作が防止される。   A threshold for the output of the brightness sensor 13 is set in the detection processing unit 30, and a switch circuit 32 is provided to the control unit 31 during a period in which the brightness (illuminance) detected by the brightness sensor 13 exceeds the threshold. Instruct to keep off. Further, the detection processing unit 30 provides hysteresis to the brightness sensor 13 using a two-stage threshold value, and when the brightness detected by the brightness sensor 13 is equal to or lower than the lower threshold value, The switch circuit 32 corresponding to human detection is turned on / off until the higher threshold value is exceeded, and then the switch circuit 32 is turned off until the brightness falls below the next lower threshold value when the brightness exceeds the higher threshold value. To keep. Therefore, even if the brightness change vibrates near any threshold value, the operation is stabilized. Here, during the period when the switch circuit 32 is turned on / off, when the lighting fixture 4 is turned on in response to human detection, the brightness detected by the brightness sensor 13 may exceed the higher threshold. When the switch circuit 32 is turned on in response to the detection, the output of the brightness sensor 13 is disabled, thereby preventing a malfunction in which the lighting fixture 4 is repeatedly turned on and off in a short time.

ところで、撮像手段20はCCDイメージセンサやCMOSイメージセンサのような固体撮像素子であり、所定時間間隔で撮像した画像を出力する。また、撮像手段20から出力される画像のアナログ信号は、画像入力手段21においてA/D変換されることによってデジタル信号に変換される。ただし、デジタル信号を出力する機能を備えたCMOSイメージセンサを撮像手段20に用いる場合には、画像入力手段21におけるA/D変換は不要になる。撮像手段20で撮像する画像としては、カラー画像を用いることも可能であるが、ここではモノクロの濃淡画像を採用するものとする。撮像手段20が撮像する時間間隔は、当該時間間隔で得られる時系列の画像から移動物体の存否を判断できる程度の範囲で適宜に設定すればよく、滑らかな動画像を得ることが目的ではないから、1秒間に30フレームの画像を出力する必要はない。   By the way, the image pickup means 20 is a solid-state image pickup device such as a CCD image sensor or a CMOS image sensor, and outputs images picked up at predetermined time intervals. The analog signal of the image output from the imaging unit 20 is converted into a digital signal by A / D conversion in the image input unit 21. However, when a CMOS image sensor having a function of outputting a digital signal is used for the imaging unit 20, A / D conversion in the image input unit 21 is not necessary. A color image can be used as an image picked up by the image pickup means 20, but a monochrome grayscale image is adopted here. The time interval captured by the imaging unit 20 may be set as appropriate within a range in which the presence or absence of a moving object can be determined from the time-series images obtained at the time interval, and is not intended to obtain a smooth moving image. Therefore, it is not necessary to output an image of 30 frames per second.

画像入力手段21の出力は輪郭抽出手段22に入力され、画像入力手段21の出力である濃淡画像は輪郭抽出手段22に入力され、濃淡画像から各画素の微分値と方向コードとが求められる。つまり、輪郭線抽出手段22では、各画素の画素値が微分値となる微分画像と、各画素の画素値が方向コードとなる方向コード画像とが求められ、微分画像と方向コード画像とは濃淡画像とともに半導体メモリからなる記憶部23に格納される。   The output of the image input means 21 is input to the contour extraction means 22, and the grayscale image which is the output of the image input means 21 is input to the contour extraction means 22, and the differential value and direction code of each pixel are obtained from the grayscale image. That is, the contour line extraction unit 22 obtains a differential image in which the pixel value of each pixel is a differential value and a direction code image in which the pixel value of each pixel is a direction code, and the differential image and the direction code image are shaded. Along with the image, it is stored in a storage unit 23 comprising a semiconductor memory.

微分値を求める手法は種々提案されているが、基本的には、着目する画素の近傍画素(8近傍が広く採用されている)について、画像の垂直方向に関する輝度差を水平方向に関する輝度差で除算した値を微分値として用いる。ただし、濃淡画像から微分画像を生成するのは、画像内の物体と背景との輝度値の相違によって物体と背景との境界付近で微分値が大きくなることを利用し、物体の輪郭線の候補を抽出するためであるから、本実施形態では、輪郭線の強調のためにソーベル(Sobel)フィルタを用いた重み付きの微分処理を行う。   Various methods for obtaining the differential value have been proposed. Basically, for the neighboring pixels of the pixel of interest (8 neighborhoods are widely adopted), the luminance difference in the vertical direction of the image is the luminance difference in the horizontal direction. The divided value is used as a differential value. However, the differential image is generated from the grayscale image by using the fact that the differential value becomes large near the boundary between the object and the background due to the difference in the brightness value between the object and the background in the image, and the object outline candidate In this embodiment, weighted differentiation using a Sobel filter is performed to enhance the contour line.

また、方向コードは、微分値を輝度値の変化方向に対応付けた値であって45度を単位として8方向に整数値のコードを対応付けたものである(ここでは、8近傍の画素から求めた通常の微分値に方向コードを対応付けている)。各画素の方向コードは、画像内において輝度値の変化が最大になる方向に直交する方向を表すように設定される。したがって、各画素において方向コードが示す方向は輪郭線の延長方向にほぼ一致する(各画素の方向コードが示す方向に対して±45度の範囲内で隣接する3画素が物体の輪郭線上の画素になる可能性が高い)。   The direction code is a value in which the differential value is associated with the change direction of the luminance value, and an integer value code is associated in 8 directions in units of 45 degrees (in this case, from the neighboring pixels of 8). The direction code is associated with the obtained normal differential value). The direction code of each pixel is set so as to represent a direction orthogonal to the direction in which the change of the luminance value is maximized in the image. Therefore, the direction indicated by the direction code in each pixel substantially coincides with the extending direction of the contour line (the three pixels adjacent to each other within the range of ± 45 degrees with respect to the direction indicated by the direction code of each pixel are pixels on the contour line of the object. Is likely to be).

上述のように輪郭抽出手段22において求めた微分画像では、コントラストの大きい部位が強調されるから、適宜の閾値で微分画像を二値化することによって、微分画像に含まれる物体の輪郭線の候補を抽出することができる。輪郭抽出手段22では、抽出した輪郭線の候補となる領域を1画素幅に細線化して輪郭線の候補となるエッジの候補を抽出する。エッジの候補は途切れている可能性があるから、エッジの候補について方向コードを用いて画素を追跡し、物体の輪郭線とみなせるエッジの候補を連結したエッジからなる輪郭線画像を生成して記憶部23に設けた輪郭線画像記憶手段23aに一定期間格納する。記憶部23は輪郭線画像を求める際の作業領域としても用いられる。   In the differential image obtained by the contour extracting means 22 as described above, a portion having a large contrast is emphasized. Therefore, by binarizing the differential image with an appropriate threshold, candidates for the contour line of the object included in the differential image are obtained. Can be extracted. The contour extracting unit 22 thins the extracted region that is a candidate for a contour line to a width of one pixel, and extracts a candidate for an edge that is a candidate for a contour line. Since the edge candidates may be interrupted, the pixels are tracked using the direction code for the edge candidates, and a contour image composed of the edges obtained by connecting the edge candidates that can be regarded as the contour lines of the object is generated and stored. Stored in the contour image storage means 23 a provided in the unit 23 for a certain period. The storage unit 23 is also used as a work area when obtaining a contour image.

輪郭線画像記憶手段23aに格納された輪郭線画像は移動輪郭抽出手段24に入力され、移動輪郭抽出手段24では3枚または5枚の輪郭線画像から移動物体に対応するエッジを抽出する。ここでは、図2を用いて3枚の輪郭線画像から移動物体に対応するエッジを抽出する技術について説明する。いま、図2(a)〜(c)のように、時刻T−ΔT、T、T+ΔTに撮像された3枚の輪郭線画像E(T−ΔT)、E(T)、E(T+ΔT)が移動輪郭抽出手段24に与えられるものとする。図示例では、それぞれ移動物体Obを含んだ輪郭線画像E(T−ΔT)、E(T)、E(T+ΔT)を示している。   The contour image stored in the contour image storage unit 23a is input to the moving contour extracting unit 24, and the moving contour extracting unit 24 extracts edges corresponding to the moving object from three or five contour images. Here, a technique for extracting an edge corresponding to a moving object from three contour images will be described with reference to FIG. Now, as shown in FIGS. 2A to 2C, three contour images E (T−ΔT), E (T), E (T + ΔT) captured at times T−ΔT, T, and T + ΔT are obtained. It is given to the moving contour extraction means 24. In the illustrated example, contour images E (T−ΔT), E (T), and E (T + ΔT) each including the moving object Ob are shown.

移動輪郭抽出手段24では、まず、時系列において隣接する各一対の輪郭線画像(つまり、E(T−ΔT)とE(T)、E(T)とE(T+ΔT))の差分を求める(この画像は、輪郭線画像の差分であるから、以下では「差分輪郭線画像」と呼ぶ)。ただし、輪郭線画像は、エッジの部分とエッジ以外の部分とで異なる画素値を持つ2値画像であるから、移動輪郭抽出手段24では各一対の輪郭線画像について同じ位置の一対の画素ごとに排他的論理和を求める論理演算を行えば、着目する一対の輪郭線画像の差分を求めたことになる。図示例の輪郭線画像から求めた2枚の差分輪郭線画像では、各差分輪郭線画像にそれぞれ移動物体Obが2回ずつ現れることになる。   The moving contour extracting means 24 first obtains a difference between each pair of contour images adjacent in time series (that is, E (T−ΔT) and E (T), E (T) and E (T + ΔT)) ( Since this image is a difference between the contour images, it is hereinafter referred to as a “difference contour image”). However, since the contour image is a binary image having different pixel values in the edge portion and the portion other than the edge, the moving contour extraction unit 24 performs the pair of contour images for each pair of pixels at the same position. If the logical operation for obtaining the exclusive OR is performed, the difference between the pair of contour images of interest is obtained. In the two differential contour images obtained from the contour image in the illustrated example, the moving object Ob appears twice in each differential contour image.

移動輪郭抽出手段24では、時刻Tの輪郭線画像E(T)に含まれる移動物体Obを抽出するために、2枚の差分輪郭線画像について同じ位置の一対の画素ごとに論理積を求める論理演算を行い、結果の画像を図2(d)のような候補画像として出力する。すなわち、2枚の差分輪郭線画像では背景はほぼ除去されているから、2枚の差分輪郭線画像について論理積の演算を行うと共通部分である時刻Tの輪郭線画像E(T)について背景を除去した候補画像が得られ、この候補画像には移動物体Obのほかにはノイズを含むだけになると考えられる。   In the moving contour extracting means 24, in order to extract the moving object Ob included in the contour image E (T) at time T, a logic for obtaining a logical product for each pair of pixels at the same position for the two differential contour images. The calculation is performed, and the resulting image is output as a candidate image as shown in FIG. That is, since the background is almost removed from the two differential contour images, the background of the contour image E (T) at time T, which is a common part, is obtained by performing a logical product operation on the two differential contour images. It is considered that a candidate image obtained by removing is obtained, and this candidate image only includes noise in addition to the moving object Ob.

ここに、本実施形態では3枚の輪郭線画像E(T−ΔT)、E(T)、E(T+ΔT)を用いる例を示しているが、4枚以上の輪郭線画像を用いて候補画像を生成することも可能である。たとえば、5枚の輪郭線画像E(T−2ΔT)、E(T−ΔT)、E(T)、E(T+ΔT)、E(T+2ΔT)を用いる場合には、まず2枚ずつの輪郭線画像(E(T−2ΔT)とE(T+2ΔT)、E(T−ΔT)とE(T+ΔT))について、それぞれ論理積を求める論理演算によって移動物体Obを除去した背景の輪郭線画像を生成する。このようにして得られる2枚の輪郭線画像をそれぞれ反転して輪郭線画像E(T)との論理積を求める論理演算を行うと、輪郭線画像E(T−2ΔT)、E(T+2ΔT)において移動物体Obにより隠れていた背景と輪郭線画像E(T)における移動物体Obを含む輪郭線画像と、輪郭線画像E(T−ΔT)、E(T+ΔT)において移動物体Obにより隠れていた背景と輪郭線画像E(T)における移動物体Obを含む輪郭線画像とが得られる。両輪郭線画像について論理積を求める論理演算によって共通部分を抽出すれば、輪郭線画像E(T)における移動物体Obのエッジを含む輪郭線画像(候補画像)が得られる。このほかに、4枚以上の輪郭線画像を種々に組み合わせることによって、候補画像を生成することができる。   Here, in this embodiment, an example using three contour images E (T−ΔT), E (T), and E (T + ΔT) is shown, but candidate images using four or more contour images. Can also be generated. For example, when five contour images E (T-2ΔT), E (T−ΔT), E (T), E (T + ΔT), and E (T + 2ΔT) are used, first, two contour images are used. For (E (T−2ΔT) and E (T + 2ΔT), E (T−ΔT) and E (T + ΔT)), a contour image of the background from which the moving object Ob is removed by a logical operation for obtaining a logical product is generated. When the logical operation for obtaining the logical product of the two contour images obtained in this manner and inverting the contour image E (T) is performed, the contour images E (T−2ΔT) and E (T + 2ΔT) are obtained. The contour image including the moving object Ob in the background and the contour image E (T), and the contour image E (T−ΔT) and E (T + ΔT) are hidden by the moving object Ob. A background and a contour image including the moving object Ob in the contour image E (T) are obtained. If a common part is extracted by a logical operation for obtaining a logical product for both contour images, a contour image (candidate image) including the edge of the moving object Ob in the contour image E (T) is obtained. In addition, candidate images can be generated by variously combining four or more contour line images.

候補画像では濃淡画像から差分を求めるのではなく2値の輪郭線画像について論理演算を行っており、しかも2枚の画像から移動物体Obを抽出するのではなく、3枚以上の輪郭線画像を用いて特定時刻の輪郭線画像に含まれる移動物体Obを抽出するようにしているから、候補画像の中では同じ移動物体Obが2箇所に現れることがなく、移動物体Obを含む変化の生じた領域のみを抽出することができる。移動輪郭抽出手段24から出力される候補画像には移動物体Obのほかにノイズも含まれるから、移動輪郭抽出手段24において求めた候補画像を移動領域検出手段25に入力し、移動領域検出手段25では画素が連結されている領域(連結領域)ごとにラベリングを施す。ここに、各連結領域に対して図2(e)のように外接矩形D1を設定し、外接矩形D1に対してラベリングを施すようにすれば、画素ごとにラベルを付与する場合に比較してデータ量を低減することができる。また、上述のように3枚以上の輪郭線画像を用いて候補画像を求めているから、濃淡画像についてフレーム間の差分を求める場合のような残像の発生がなく、移動物体のエッジのみを抽出することが可能になる。   In the candidate image, a logical operation is performed on a binary contour image instead of obtaining a difference from the grayscale image, and three or more contour images are extracted instead of extracting the moving object Ob from the two images. Since the moving object Ob included in the contour image at a specific time is extracted using the same moving object Ob does not appear in two places in the candidate image, a change including the moving object Ob occurred. Only the region can be extracted. Since the candidate image output from the moving contour extracting unit 24 includes noise in addition to the moving object Ob, the candidate image obtained by the moving contour extracting unit 24 is input to the moving region detecting unit 25, and the moving region detecting unit 25. Then, labeling is performed for each area where pixels are connected (connected area). Here, if a circumscribed rectangle D1 is set for each connected region as shown in FIG. 2 (e) and labeling is performed on the circumscribed rectangle D1, compared with the case where a label is assigned to each pixel. The amount of data can be reduced. In addition, since the candidate image is obtained using three or more outline images as described above, there is no afterimage as in the case of obtaining the difference between frames in the grayscale image, and only the edge of the moving object is extracted. It becomes possible to do.

移動輪郭抽出手段24から出力された図2(d)のような候補画像と、記憶部23に格納された方向コード画像とは領域特徴量検出手段26に入力され、領域特徴量検出手段26では、移動領域検出手段25によりラベルを付与された領域が、人に対応する領域か人以外の外乱かを評価する。領域特徴量検出手段26では、まず、移動輪郭抽出手段24の出力として得られた候補画像の中でラベルが付された領域ごとに、記憶部23に格納された方向コード画像を参照してエッジ上の画素の方向コードを求め、ラベルが付された領域ごとに方向コードに関する度数分布を求める。度数分布は対象とする各エッジ上の画素の総数で正規化しておく。また、方向コードは、8種類の方向コードを用いるのではなく、同方向で互いに逆向きになる方向コードについては同じ方向コードとみなし、4種類の方向コードについて度数分布を求める。つまり、0度と180度とに対応する方向コード、45度と225度とに対応する方向コード、90度と270度とに対応する方向コード、135度と315度とに対応する方向コードとの4種類の方向コードを用いる。図3に1領域について、0度と180度とを「方向1」、45度と225度とを「方向2」、90度と270度とを「方向3」、135度と315度とを「方向4」と区分して求めた度数分布の例をヒストグラムとして示す。   The candidate image as shown in FIG. 2D output from the moving contour extraction unit 24 and the direction code image stored in the storage unit 23 are input to the region feature amount detection unit 26. Then, it is evaluated whether the area given the label by the moving area detecting means 25 is an area corresponding to a person or a disturbance other than a person. In the area feature quantity detection means 26, first, for each area labeled in the candidate image obtained as the output of the moving contour extraction means 24, the edge is referenced with reference to the direction code image stored in the storage unit 23. The direction code of the upper pixel is obtained, and the frequency distribution related to the direction code is obtained for each labeled region. The frequency distribution is normalized by the total number of pixels on each target edge. In addition, the direction code does not use eight types of direction codes, but direction codes that are opposite to each other in the same direction are regarded as the same direction code, and a frequency distribution is obtained for the four types of direction codes. That is, a direction code corresponding to 0 degrees and 180 degrees, a direction code corresponding to 45 degrees and 225 degrees, a direction code corresponding to 90 degrees and 270 degrees, a direction code corresponding to 135 degrees and 315 degrees, and The four types of direction codes are used. 3, for one region, 0 degree and 180 degrees are “direction 1”, 45 degrees and 225 degrees are “direction 2”, 90 degrees and 270 degrees are “direction 3”, 135 degrees and 315 degrees. An example of the frequency distribution obtained by classifying as “direction 4” is shown as a histogram.

領域特徴量検出手段26ではラベル付けされた領域ごとに度数分布を求めた後、度数分布の形状により人か外乱かを判断する。この判断には、人に対応するエッジには直線部分より曲線部分が多く、しかも人に対応するエッジは形状が複雑であるから、エッジの上の画素にはすべての方向コードについて出現頻度が比較的高いのに対して、構造物などによるエッジは直線部分が多く特定の方向に偏った分布を示すことが多いという経験則を利用する。つまり、領域が人に対応するときの各方向コードの度数に関して各方向コードごとに上限値および下限値による正常範囲を設定し、各領域ごとに求めた度数分布について、各方向コードの度数のうちの1つでも正常範囲を逸脱するものがあるときには、当該領域を人以外の外乱とみなす。   The area feature quantity detection means 26 obtains a frequency distribution for each labeled area, and then determines whether it is a person or a disturbance based on the shape of the frequency distribution. In this judgment, the edge corresponding to the person has more curved parts than the straight line part, and the edge corresponding to the person has a complicated shape, so the appearance frequency is compared for all direction codes in the pixels above the edge. On the other hand, an empirical rule is used that an edge due to a structure or the like has a lot of straight line portions and often shows a distribution biased in a specific direction. In other words, regarding the frequency of each direction code when the region corresponds to a person, a normal range is set for each direction code with an upper limit value and a lower limit value, and the frequency distribution obtained for each region is out of the frequency of each direction code. If any one of them deviates from the normal range, the region is regarded as a disturbance other than a person.

さらに、領域特徴量検出手段26では、度数分布において極端な分布の偏りがないと判断された領域(外乱とみなされなかった領域)について、当該領域が人を含むか否かを評価する。つまり、人に関するエッジの方向コードの度数分布をあらかじめ記憶部23にテーブルとして登録してある基準データを用い、外乱とはみなされなかった各領域ごとの度数分布を基準データの度数分布と比較し、両者の類似度を評価する。2つの度数分布間の類似度は種々の方法で評価可能であるが、各方向ごとの度数の差の2乗和を評価値に用いると簡単な方法ながら類似度の評価が可能になる。この評価値を適宜に設定した閾値と比較し、評価値が閾値以下である場合には当該領域を人に対応する領域と判断する。この方法では、テンプレートマッチングによる場合に比較して、基準データのデータ量が少ない上に比較演算の演算量も少なくなる。   Further, the area feature quantity detection means 26 evaluates whether or not the area includes a person for an area determined not to have an extreme distribution bias in the frequency distribution (an area that has not been regarded as a disturbance). In other words, using the reference data in which the frequency distribution of the edge direction code related to the person is registered in advance as a table in the storage unit 23, the frequency distribution for each region that is not regarded as a disturbance is compared with the frequency distribution of the reference data. , Evaluate the similarity between the two. Although the similarity between two frequency distributions can be evaluated by various methods, the similarity can be evaluated with a simple method by using the square sum of the frequency differences in each direction as an evaluation value. This evaluation value is compared with an appropriately set threshold value, and if the evaluation value is equal to or less than the threshold value, the area is determined as an area corresponding to a person. In this method, the amount of reference data is small and the amount of comparison is small compared to the case of template matching.

上述したように、撮像手段20により撮像した画像から移動物体に相当する領域を抽出することができ、しかも領域特徴量検出手段26では移動物体に相当する領域が人に対応する領域か否かを判断することができるから、撮像手段20により撮像した画像に基づいて人の存否を検出することが可能になる。すなわち、撮像手段20から領域特徴量検出手段26までの一連の処理によって、撮像手段20で撮像した画像に基づいて人を検出する画像式人感センサ2が構成される。画像式人感センサ2による判断結果、つまり領域特徴量検出手段26による判断結果は検知処理部30に入力される。なお、移動輪郭抽出手段24、移動領域検出手段25、領域特徴量検出手段26、検知処理部30、制御部31は、マイクロコンピュータを用いて実現され、周辺回路とともに信号処理部3を構成している。   As described above, a region corresponding to a moving object can be extracted from the image captured by the image capturing unit 20, and the region feature amount detection unit 26 determines whether the region corresponding to the moving object is a region corresponding to a person. Since the determination can be made, it is possible to detect the presence or absence of a person based on the image captured by the imaging unit 20. That is, the image-type human sensor 2 that detects a person based on the image captured by the imaging unit 20 is configured by a series of processes from the imaging unit 20 to the region feature amount detection unit 26. The determination result by the image type human sensor 2, that is, the determination result by the region feature amount detection means 26 is input to the detection processing unit 30. The moving contour extracting unit 24, the moving region detecting unit 25, the region feature amount detecting unit 26, the detection processing unit 30, and the control unit 31 are realized by using a microcomputer and constitute the signal processing unit 3 together with peripheral circuits. Yes.

次に、検知処理部30において、熱線式人感センサ1による人検知と画像式人感センサ2(つまり、撮像手段20)による人検知とを用いてスイッチ回路32を制御する手順について説明する。以下では、図4(a)のように、明るさセンサ13により検出されている明るさ(照度)が低いほうの閾値以下になってから高いほうの閾値を越えていない期間を想定して説明する。上述したように、この期間は検知処理部30がスイッチ回路32のオンオフを制御することができる期間であるから、焦電素子10が人体から放射される熱線を受光し、受光する熱線量に変化が生じることによって、比較器12から図4(b)のような矩形波状の出力が得られることによって、図4(c)のように、検知処理部30では人検知と判断する。   Next, in the detection processing unit 30, a procedure for controlling the switch circuit 32 using human detection by the hot-wire human sensor 1 and human detection by the image human sensor 2 (that is, the imaging unit 20) will be described. Hereinafter, as illustrated in FIG. 4A, a description is given assuming a period in which the brightness (illuminance) detected by the brightness sensor 13 does not exceed the higher threshold after being lower than the lower threshold. To do. As described above, since this period is a period during which the detection processing unit 30 can control the on / off of the switch circuit 32, the pyroelectric element 10 receives the heat rays emitted from the human body and changes to the received heat dose. As a result of this, a rectangular wave output as shown in FIG. 4B is obtained from the comparator 12, and as shown in FIG. 4C, the detection processing unit 30 determines human detection.

図4に示す例は、図4(c)(d)に示しているように、熱線式人感センサ1の出力によって人検知と判断された時点で検知処理部30から起動信号Saを出力し、画像式人感センサ2を起動している。画像式人感センサ2が起動されると、図4(e)のように、画像式人感センサ2は人検知と判断する。ただし、画像式人感センサ2は上述のように移動物体を検出するものであり、トイレ内では人の動きが止まることによって、画像式人感センサ2で人検知と判断されなくなる可能性があり(図示例では画像式人感センサ2によって人検知の判断が継続している状態を表している)、また熱線式人感センサ10についても人検知と判断できなくなる可能性がある。そこで、上述のようにタイマ回路のディレイ時間を比較的長く設定することによって、トイレ内に人が存在する間に照明器具4が消灯するのを防止している。   In the example shown in FIG. 4, as shown in FIGS. 4C and 4D, the activation signal Sa is output from the detection processing unit 30 when it is determined that the person is detected based on the output of the heat ray human sensor 1. The image type human sensor 2 is activated. When the image type human sensor 2 is activated, as shown in FIG. 4E, the image type human sensor 2 determines that the person is detected. However, the image type human sensor 2 detects a moving object as described above, and if the human motion stops in the toilet, there is a possibility that the image type human sensor 2 may not determine human detection. (In the illustrated example, the image-type human sensor 2 represents a state in which human detection is continuously determined), and the hot-wire human sensor 10 may not be determined as human detection. Therefore, by setting the delay time of the timer circuit to be relatively long as described above, the lighting fixture 4 is prevented from being turned off while a person is present in the toilet.

一方、トイレから退室する際には人に動きが生じるから、熱線式人感センサ1と画像式人感センサ2とはともに人検知と判断する。ただし、熱線式人感センサ1による人検知の判断では、トイレからの退室時点を正確に検知するのは困難であるから、図4(e)のように、トイレからの退室時点は画像式人感センサ2によって判断する。画像式人感センサ2による退室の判断方法については後述する。画像式人感センサ2によりトイレからの人の退室が検知されると、タイマ回路のディレイ時間をトイレ内に人が滞在している期間における初期ディレイ時間Td1よりも短縮した退室ディレイ時間Td2を設定し、図4(f)のように、退室から退室ディレイ時間Td2が経過するとスイッチ回路32をオフにする(照明器具4を消灯する)。退室後の退室ディレイ時間Td2は、検知処理部30において設定可能なディレイ時間の最短値(10秒程度)とする。なお、タイマ回路はリトリガラブルであるから、初期ディレイ時間Td1の時限中であっても画像式人感センサ2により退室が検知されると、ディレイ時間を退室ディレイ時間Td2に変更して時限動作を行い、画像式人感センサ2は退室ディレイ時間Td2の満了時点まで継続して動作する。   On the other hand, when a person leaves the toilet, movement occurs in the person. Therefore, both the hot-wire human sensor 1 and the image human sensor 2 are determined to be human detection. However, since it is difficult to accurately detect the time when the person leaves the toilet in the determination of human detection by the hot-wire human sensor 1, as shown in FIG. Judgment is made by the sensor 2. A method of determining leaving by the image type human sensor 2 will be described later. When a person leaving the toilet is detected by the image-type human sensor 2, a delay time Td2 is set in which the delay time of the timer circuit is shorter than the initial delay time Td1 during the period in which the person stays in the toilet. Then, as shown in FIG. 4F, when the exit delay time Td2 elapses from the exit, the switch circuit 32 is turned off (the lighting fixture 4 is turned off). The leaving delay time Td2 after leaving the room is set to the shortest delay time (about 10 seconds) that can be set in the detection processing unit 30. Since the timer circuit is retriggerable, even when the initial delay time Td1 is in the time limit, if the image-type human sensor 2 detects the exit, the delay time is changed to the exit delay time Td2 and the timed operation is performed. The image type human sensor 2 continues to operate until the expiration time of the exit delay time Td2.

ところで、熱線式人感センサ1による人検知の判断はトイレへの入室時点を検出する目的であり、一方、画像式人感センサ2による人検知の判断はトイレからの退室時点を検出する目的であるから、画像式人感センサ2は人がトイレから退室するまでに起動すればよいと言える。そこで、図5(c)のように熱線式人感センサ1による人検知の判断時点から、図5(d)のように、一定の起動時間Taが経過した後に検知処理部30から起動信号Sa(図1参照)を出力し、画像式人感センサ2を起動するのが望ましい。起動時間Taは、熱線式人感センサ1による人検知の判断時点から人がトイレから退室すると想定した時間よりも短く設定される。   By the way, the determination of the person detection by the heat ray type human sensor 1 is for the purpose of detecting the time of entering the toilet, while the determination of the human detection by the image type human sensor 2 is for the purpose of detecting the time of leaving the toilet. Therefore, it can be said that the image-type human sensor 2 may be activated before the person leaves the toilet. Therefore, from the point of determination of human detection by the hot-wire human sensor 1 as shown in FIG. 5C, the activation signal Sa is sent from the detection processing unit 30 after a certain activation time Ta has elapsed as shown in FIG. 5D. It is desirable to output (see FIG. 1) and activate the image type human sensor 2. The activation time Ta is set to be shorter than the time when it is assumed that a person leaves the toilet from the time of determination of human detection by the hot-wire human sensor 1.

このように熱線式人感センサ1による人検知の判断時点に対して画像式人感センサ2の起動を起動時間Taだけ遅らせると、熱線式人感センサ1による人検知の判断時点で画像式人感センサ2を起動する場合に比較して画像式人感センサ2に供給する電力を低減することができる。起動時間Taは、熱線式人感センサ1による人検知の判断直後に設定されるディレイ時間に基づいて設定するのが望ましい。つまり、熱線式人感センサ1による人検知の判断で照明器具4を点灯させた時点では、現場条件に応じた比較的長い初期ディレイ時間Td1が検知処理部30に設定されており、この初期ディレイ時間Td1から一定の余裕時間Tbを減算した値を起動時間Taとして用いるのが望ましい。   In this way, if the activation of the image type human sensor 2 is delayed by the activation time Ta with respect to the time point when the human detection by the heat ray type human sensor 1 is determined, the person of the image type is detected at the time point when the human detection by the heat ray type human sensor 1 is determined. The power supplied to the image type human sensor 2 can be reduced as compared with the case where the sensor 2 is activated. The activation time Ta is desirably set based on a delay time set immediately after the determination of human detection by the hot-wire human sensor 1. In other words, at the time when the lighting fixture 4 is turned on by the human detection determination by the hot-wire human sensor 1, a relatively long initial delay time Td1 corresponding to the field condition is set in the detection processing unit 30, and this initial delay is set. It is desirable to use a value obtained by subtracting a certain margin time Tb from the time Td1 as the activation time Ta.

起動時間Taをこのように設定すると、現場条件に応じた初期ディレイ時間Td1に基づいて起動時間Taが設定されることになり、しかも初期ディレイ時間Td1に対して一定の余裕時間Tbだけ前から画像式人感センサ2が起動されるから、画像式人感センサ2の動作が安定した状態でトイレからの退室を検知することが可能になる。さらに、熱線式人感センサ1による人検知の判断から初期ディレイ時間Td1の間に画像式人感センサ2による人検知の判断がなされない限りは照明器具4が消灯することがなく、照明器具4の消灯までに画像式人感センサ2を起動することが可能になる。要するに、熱線式人感センサ1による人検知の判断後であって画像式人感センサ2が起動する前に(起動時間Taの間に)人がトイレから退室し、画像式人感センサ2では人の退室が検知できない場合でも初期ディレイ時間Td1の満了後には照明器具4を消灯するとともに、画像式人感センサ2を停止させることができる。しかも、余裕時間Tbを適宜に設定することによって、画像式人感センサ2の起動から人検知の判断が確実に行えるようになるまでの時間を確保することが可能になる。   When the activation time Ta is set in this manner, the activation time Ta is set based on the initial delay time Td1 according to the field conditions, and the image is previously displayed by a certain margin time Tb with respect to the initial delay time Td1. Since the expression type human sensor 2 is activated, it is possible to detect the exit from the toilet while the operation of the image type human sensor 2 is stable. Furthermore, the lighting apparatus 4 is not turned off unless the human detection is detected by the image type human sensor 2 during the initial delay time Td1 from the determination of human detection by the heat ray human sensor 1, and the lighting apparatus 4 is not turned off. The image-type human sensor 2 can be activated before the light is turned off. In short, after the determination of human detection by the hot-wire-type human sensor 1 and before the image-type human sensor 2 is activated (during the activation time Ta), the person leaves the toilet. Even when a person leaving the room cannot be detected, the lighting apparatus 4 can be turned off and the image-type human sensor 2 can be stopped after the initial delay time Td1 expires. In addition, by appropriately setting the margin time Tb, it is possible to secure the time from the activation of the image type human sensor 2 until the determination of the human detection can be surely performed.

ここに、余裕時間Tbが存在しない場合を想定すると、画像式人感センサ2による人検知の判断が行えるようになった時点では人が存在しないから画像式人感センサ2による退室の検知がなされず、しかも初期ディレイ時間Td1も満了しているから、熱線式人感センサ1による人検知の判断によって照明器具4を点灯させた後に、照明器具4を消灯させることができず、照明器具4の点灯状態が継続されるとともに画像式人感センサ2の動作も継続され、電力が無駄に消費されることになる。したがって、上述したように、(起動時間Ta)=(初期ディレイ時間Td1)−(余裕時間Tb)の関係に設定するのが望ましいと言える。   Here, assuming that there is no margin time Tb, since there is no person at the time when the human detection by the image type human sensor 2 can be determined, the image type human sensor 2 detects the exit of the room. In addition, since the initial delay time Td1 has also expired, the lighting fixture 4 cannot be turned off after the lighting fixture 4 is turned on by the determination of human detection by the hot-wire human sensor 1, and the lighting fixture 4 While the lighting state is continued, the operation of the image type human sensor 2 is also continued, and power is wasted. Therefore, as described above, it can be said that it is desirable to set the relationship of (start-up time Ta) = (initial delay time Td1) − (room time Tb).

焦電素子10の視野と撮像手段20の視野とは、トイレの全体を含むのが望ましい。撮像手段20の視野が室内の全体を含むようにすれば、外接矩形D1の消滅時点を退室時点と判断することができ、しかも室内で出入口以外の場所に人が移動しても退室と誤判断することがないからである。また、焦電素子10の視野の境界はトイレの出入口に一致させておくのが望ましく、このことによって焦電素子10の視野内に人が侵入した時点、つまりトイレに人が入室した時点で照明器具4を遅滞なく点灯させることが可能になる。一方、撮像手段20の視野の境界はトイレの出入口に一致させるか、トイレの出入口のやや外方まで延長しておくのが望ましい。この設定によって、画像式人感センサ2で退室を検知した後に熱線式人感センサ1が人検知の判断を行うことがなくなり、画像式人感センサ2での退室時点の検知によってディレイ時間を確実に短縮することが可能になる。   It is desirable that the field of view of the pyroelectric element 10 and the field of view of the imaging means 20 include the entire toilet. If the field of view of the imaging means 20 includes the entire interior of the room, the extinction time of the circumscribed rectangle D1 can be determined as the exit time, and even if a person moves to a place other than the entrance / exit, it is erroneously determined as the exit Because there is nothing to do. Further, it is desirable that the boundary of the visual field of the pyroelectric element 10 is made coincident with the entrance / exit of the toilet, so that when a person enters the visual field of the pyroelectric element 10, that is, when a person enters the toilet, the illumination is performed. It becomes possible to light the appliance 4 without delay. On the other hand, it is desirable that the boundary of the field of view of the image pickup means 20 coincides with the entrance / exit of the toilet or be extended slightly outside the entrance / exit of the toilet. With this setting, the heat-type human sensor 1 does not make a human detection determination after the image-type human sensor 2 detects the exit of the room, and the delay time can be ensured by the detection of the time when the image-type human sensor 2 leaves the room. Can be shortened.

ところで、上述のように画像式人感センサ2によって退室時点を検知したとしても誤検知の可能性も残るから、画像式人感センサ2による退室時点の検知後である退室ディレイ時間Td2において、トイレ内の人の存否を監視し続ける必要がある。つまり、上述のように画像式人感センサ2は退室ディレイ時間Td2の満了まで動作を継続する。また、明るさセンサ13で検出する明るさが条件(低いほうの閾値以下になってから高いほうの閾値を越えるまで)を満たしている限り、熱線式人感センサ1による監視は継続しているから、退室ディレイ時間Td2においてもトイレ内の人の検知は行われる。したがって、退室ディレイ時間Td2においても人の存否は監視されるのであるが、退室ディレイ時間Td2において人が検知されなければ退室ディレイ時間Td2の満了後には照明器具4が消灯するから、退室ディレイ時間Td2においてトイレ内に人が存在しないことを保証する必要がある。そこで、図5(g)のように、退室ディレイ時間Td2には、熱線式人感センサ1と画像式人感センサ2との少なくとも一方の感度を常時よりも高めることによって、退室ディレイ時間Td2においてトイレ内に人が存在しないことを確定するのが望ましい。   By the way, even if the exit time is detected by the image-type human sensor 2 as described above, there is still a possibility of false detection. Therefore, in the exit delay time Td2 after the detection of the exit time by the image-type human sensor 2, the toilet is It is necessary to continue to monitor the existence of people inside. That is, as described above, the image type human sensor 2 continues to operate until the exit delay time Td2 expires. Further, as long as the brightness detected by the brightness sensor 13 satisfies the condition (from the lower threshold value or less until the higher threshold value is exceeded), the monitoring by the hot-wire human sensor 1 is continued. Therefore, the person in the toilet is detected even in the leaving delay time Td2. Therefore, the presence / absence of a person is monitored even in the exit delay time Td2, but if no person is detected in the exit delay time Td2, the lighting apparatus 4 is turned off after the exit delay time Td2 expires, so the exit delay time Td2 It is necessary to ensure that no one is present in the toilet. Therefore, as shown in FIG. 5G, in the exit delay time Td2, the sensitivity of at least one of the heat ray type human sensor 1 and the image type human sensor 2 is increased more than usual so that the exit delay time Td2 It is desirable to determine that no one is in the toilet.

熱線式人感センサ1の感度は、増幅器11のゲインと比較器12の閾値とによって調節可能である。つまり、退室ディレイ時間Td2においては、増幅器11の増幅率を常時よりも高めることと、比較器12の閾値を常時よりも引き下げることとの少なくとも一方を行うことによって感度を高める。また、画像式人感センサ2の感度は、領域特徴量検出手段26において類似度の評価に用いる評価値と比較する閾値によって調節可能であり、また移動領域検出手段25でラベルを付した領域内で類似度の評価に用いる画素数を増減することでも調節可能である。つまり、評価値と比較する閾値を小さくすれば、類似度が低いものも類似とみなされることになり、また、類似度の評価に用いる画素数を低減すれば、類似度の高い場合と低い場合との評価値の差が小さくなる。その結果、人検知の判断の誤り率は高くなるものの漏れ率は低減することになる。このことは、画像式人感センサ2の感度を実質的に高めたことに相当する。   The sensitivity of the hot-wire human sensor 1 can be adjusted by the gain of the amplifier 11 and the threshold value of the comparator 12. That is, in the exit delay time Td2, the sensitivity is increased by performing at least one of increasing the amplification factor of the amplifier 11 more than usual and lowering the threshold value of the comparator 12 more than usual. In addition, the sensitivity of the image type human sensor 2 can be adjusted by a threshold value to be compared with an evaluation value used for similarity evaluation in the region feature amount detection unit 26, and in the region labeled by the moving region detection unit 25. It can also be adjusted by increasing / decreasing the number of pixels used for evaluation of similarity. In other words, if the threshold value to be compared with the evaluation value is reduced, those with low similarity are regarded as similar, and if the number of pixels used for evaluation of similarity is reduced, the similarity is high and low And the difference in evaluation value becomes smaller. As a result, the error rate of human detection judgment is increased, but the leakage rate is reduced. This corresponds to substantially increasing the sensitivity of the image type human sensor 2.

上述のように、退室ディレイ時間Td2において、熱線式人感センサ1と画像式人感センサ2との少なくとも一方の感度を常時よりも高くすることによって、退室ディレイ時間Td2における人の存否を確実に検出することができ、トイレ内に人が存在するにもかかわらず画像式人感センサ2が退室と誤認した場合でも、照明器具4の消灯を回避することが可能になる。なお、退室ディレイ時間Td2において人検知と判断した場合には、熱線式人感センサ1により最初に人検知と判断されたときの動作に戻る。   As described above, in the exit delay time Td2, the sensitivity of at least one of the hot-wire human sensor 1 and the image human sensor 2 is made higher than usual to ensure the presence or absence of a person in the exit delay time Td2. Even if there is a person in the toilet and the image-type human sensor 2 mistakenly detects that the person has left the room, it is possible to avoid turning off the lighting device 4. When it is determined that the person is detected in the exit delay time Td2, the operation returns to the operation when the human detection sensor 1 first determines that the person is detected.

上述した画像式人感センサ2による退室の判断には以下の2種類の方法のいずれかを採用する。ここでは、撮像手段20をトイレの天井の中央付近に設置し、鉛直下向きを中心として、図6のように視野VFが設定されているものとする。また、視野VF内には便器6と出入口(図示していないが、図6の右下方にトイレの出入口が存在する)とが含まれるものとする。トイレからの退室時には人が移動するから、図6(a)のように、移動領域検出手段25で設定される外接矩形D1の移動を監視することによって退室の判断を行う。つまり、退室の判断には外接矩形D1の代表点(中心点や頂点)の移動を監視し、図6(b)のように、代表点(外接矩形D1)の位置が視野VFの中央部から周辺部に向かって移動し、かつ視野VFから外接矩形D1が消滅した時点を、人がトイレから退室した時点と判断する。図6(b)における矢印R1は代表点が移動した向きを示している。なお、トイレへの入室と退室とを検出すればよく、トイレ内での滞在を監視することは必須ではないから、トイレが広い場合には、焦電素子10および撮像手段20を、トイレの天井においてトイレの出入口側に偏った位置に配置してもよい。   One of the following two types of methods is adopted for the determination of leaving the room by the image type human sensor 2 described above. Here, it is assumed that the imaging means 20 is installed near the center of the ceiling of the toilet, and the visual field VF is set as shown in FIG. The visual field VF includes a toilet 6 and a doorway (not shown, but a toilet doorway is present in the lower right of FIG. 6). Since the person moves when leaving the toilet, it is judged whether or not the person is leaving the room by monitoring the movement of the circumscribed rectangle D1 set by the moving area detecting means 25 as shown in FIG. That is, for the determination of leaving the room, the movement of the representative point (center point or vertex) of the circumscribed rectangle D1 is monitored, and the position of the representative point (circumscribed rectangle D1) is moved from the center of the field of view VF as shown in FIG. It is determined that the time when the person moves out of the toilet and the circumscribed rectangle D1 disappears from the field of view VF is when the person leaves the toilet. An arrow R1 in FIG. 6B indicates the direction in which the representative point has moved. Note that it is only necessary to detect entry into and exit from the toilet, and monitoring staying in the toilet is not essential. Therefore, when the toilet is large, the pyroelectric element 10 and the imaging means 20 are connected to the ceiling of the toilet. However, it may be arranged at a position biased toward the entrance / exit side of the toilet.

上述した構成例は、画像式人感センサ2の光軸が鉛直下向きの場合を想定しているが、画像式人感センサ2の光軸を鉛直下向きに対して斜めに傾ける場合もある。たとえば、トイレよりも広い室内である会議室などからの人の退室を監視する場合には、出入口から離れた場所に撮像手段20を設置し、光軸を出入口に向けて配置する。つまり、光軸が出入口に向かって斜め下向きになるから、図7(a)(b)に示すように、人Mが出入口ENに近付くにつれて、外接矩形D1の上下寸法と左右寸法とのうち少なくとも一方が時間経過に伴って縮小することになる。さらに具体的には、人Mが出入口ENに向かって移動すると図7(a)のように、外接矩形D1の下辺が視野VFの中で上向きに移動するとともに外接矩形D1の面積が小さくなる。また、出入口ENを設けた壁面に沿って人Mが移動する場合には、図7(b)のように退室の際に左右寸法が小さくなる。そこで、視野VFから外接矩形D1が消滅した時点と外接矩形D1の面積が規定した閾値以下になった時点とを退室時点と判断する。つまり、画像内で外接矩形D1が2つの条件のいずれかを満たすと退室と判断する。このように、検知処理部30では、外接矩形D1を監視することにより退室を判断することができる。   The above-described configuration example assumes the case where the optical axis of the image type human sensor 2 is vertically downward, but the optical axis of the image type human sensor 2 may be inclined obliquely with respect to the vertically downward direction. For example, when monitoring the exit of a person from a conference room or the like that is larger than a toilet, the imaging means 20 is installed at a location away from the entrance and the optical axis is arranged toward the entrance. That is, since the optical axis is obliquely downward toward the entrance / exit, as shown in FIGS. 7A and 7B, as the person M approaches the entrance / exit EN, at least one of the vertical dimension and the left / right dimension of the circumscribed rectangle D1. One will shrink with time. More specifically, when the person M moves toward the entrance / exit EN, as shown in FIG. 7A, the lower side of the circumscribed rectangle D1 moves upward in the field of view VF and the area of the circumscribed rectangle D1 decreases. Further, when the person M moves along the wall surface provided with the entrance / exit EN, the left and right dimensions are reduced when leaving the room as shown in FIG. Therefore, the point in time when the circumscribed rectangle D1 disappears from the field of view VF and the point in time when the area of the circumscribed rectangle D1 becomes equal to or less than the specified threshold are determined as the time of leaving the room. That is, when the circumscribed rectangle D1 satisfies either of the two conditions in the image, it is determined that the user leaves the room. In this manner, the detection processing unit 30 can determine whether to leave the room by monitoring the circumscribed rectangle D1.

退室の判断について上述した2種類の方法は1人が入退室する場合に適用できるが、室内に複数人が入った場合には、1人が退室した後にも室内には人が残るから、全員が退室するまでは照明器具4を点灯した状態に維持しなければならない。このような状況は会議室のような広い室内に限らず、たとえば図8に示すように、介護者M1が被介護者M2に同伴してトイレに入室した後に介護者M1のみが退室する場合などにも生じる。このような状況では、画像式人感センサ2で退室者を検知した時点で室内に残った人が静止しているとすれば、熱線式人感センサ1と画像式人感センサ2とのいずれもが室内に残った人を検出しないから、画像式人感センサ2による退室の検知から退室ディレイ時間Td2が経過すると、照明器具4が消灯する。つまり、室内に人が残っているにもかかわらず照明器具4が消灯するという不都合を生じる可能性がある。   Regarding the determination of leaving the room, the two methods described above can be applied when one person enters or leaves the room, but if there are multiple people in the room, the person remains in the room even after one person leaves the room. The lighting fixture 4 must be kept lit until the person leaves the room. Such a situation is not limited to a large room such as a conference room. For example, as shown in FIG. 8, only the caregiver M1 leaves the caregiver M1 after entering the toilet accompanying the care receiver M2. Also occurs. In such a situation, if a person who has left the room is still when the image-type human sensor 2 detects a person leaving the room, either the hot-wire human sensor 1 or the image human sensor 2 will be used. Since no person remaining in the room is detected, the lighting fixture 4 is turned off when the exit delay time Td2 elapses from the detection of the exit by the image type human sensor 2. That is, there is a possibility that inconvenience that the luminaire 4 is turned off in spite of a person remaining in the room.

そこで、トイレへの人の入室を熱線式人感センサ1により検出した後に画像式人感センサ2が退室を検出するまでの期間において、画像式人感センサ2における移動領域検出手段25で求めた1画面内の外接矩形D1の最大個数を求めておき、退室者が生じるたびに外接矩形D1の最大個数から退室者に相当する外接矩形D1の個数を減算し、この値が最終的に0になった時点を全員の退室とみなすようにしてある。図8に示す例では、図8(a)の状態において介護者M1が被介護者M2から離れることによって、2個の外接矩形D1が形成され、図8(b)では1人(介護者M1の外接矩形D1)の退室が検出されるから、被介護者M2が静止して外接矩形D1が形成されない場合(外接矩形D1が形成されないことを破線で示している)であっても、1人がトイレ内に残っていることを認識することができる。   Therefore, in the period from when the person entering the toilet is detected by the heat ray type human sensor 1 until the image type human sensor 2 detects the exit, the movement area detecting means 25 in the image type human sensor 2 obtains it. The maximum number of circumscribed rectangles D1 in one screen is obtained, and each time a person leaves the room, the number of circumscribed rectangles D1 corresponding to the person leaving the room is subtracted from the maximum number of circumscribed rectangles D1, and this value finally becomes zero. At that time, it is considered that everyone leaves the room. In the example shown in FIG. 8, two circumscribed rectangles D1 are formed when the caregiver M1 moves away from the cared person M2 in the state of FIG. 8A, and one person (the caregiver M1 in FIG. 8B). Even if the cared person M2 is stationary and the circumscribed rectangle D1 is not formed (the circumscribed rectangle D1 is not formed is indicated by a broken line), one person is detected. Can be recognized in the toilet.

このように外接矩形D1の最大個数を求めることによって入室人数に相当する値を求め、退室者の人数を減算することによって全員の退室を確認しているので、室内に人が残っている状態で照明器具4を消灯する可能性を低減することができる。ここで、人の入室が検知されてから退室が検知されるまでの期間において、外接矩形D1の最大個数を求めているから、入室時などに複数人が重なった外接矩形D1が得られたとしても期間中には人数分の個数の外接矩形D1が得られると考えられ、外接矩形D1の最大個数は確実に入室者の人数以上になる。一方、複数人の退室者に対応する外接矩形D1が重なって1つの外接矩形D1しか得られない場合には、外接矩形D1の最大個数から退室者に相当する外接矩形D1の個数を減算しても0にならない場合が生じる。ただし、このような場合でもディレイ時間の経過後には照明器具4がオフになるから、全員の退室までは照明器具4の点灯状態を継続するという目的を達成できる。   Thus, by finding the maximum number of circumscribed rectangles D1, a value corresponding to the number of people entering the room is obtained, and the number of people leaving the room is subtracted. The possibility of turning off the lighting fixture 4 can be reduced. Here, since the maximum number of circumscribed rectangles D1 is obtained in a period from when a person enters the room to when the exit is detected, it is assumed that a circumscribed rectangle D1 in which a plurality of people overlap at the time of entering the room is obtained. In addition, it is considered that the number of circumscribed rectangles D1 corresponding to the number of people is obtained during the period, and the maximum number of circumscribed rectangles D1 is surely greater than or equal to the number of people entering the room. On the other hand, when only one circumscribed rectangle D1 is obtained by overlapping circumscribed rectangles D1 corresponding to a plurality of persons leaving the room, the number of circumscribed rectangles D1 corresponding to the left persons is subtracted from the maximum number of circumscribed rectangles D1. May not be zero. However, even in such a case, since the luminaire 4 is turned off after the delay time elapses, the purpose of continuing the lighting state of the luminaire 4 until everyone leaves the room can be achieved.

上述のように、入室者の人数を推定する技術としては、入室から退室までの期間における外接矩形D1の個数の最大数を入室者の人数とみなすほか、外接矩形D1の面積の変化によって入室者の人数を推定することも可能である。たとえば、身障者用のトイレにおいて、図9(a)のように、介護者M1と被介護者M2とが同時に入室したとすれば、入室者が2人であるにもかかわらず外接矩形D1が1個しか形成されない場合がある。このような状況では、図9(b)のように、介護者M1はトイレ内に被介護者M2を残して一旦退室すると考えられ、介護者M1が被介護者M2から離れるときに被介護者M2の動きが少なければ、介護者M1にのみ外接矩形D1が形成される可能性がある。つまり、2人が入室したにもかかわらず、外接矩形D1の個数は1個しか得られない場合が考えられる。ただし、撮像手段20はトイレ内を天井側から撮像しているから、介護者M1の動きによって形成される外接矩形D1の面積は、入室時の外接矩形D1の面積よりも小さくなる。そこで、外接矩形D1の面積が規定した閾値以上の変化しかつ面積が縮小されたときに、1人が退室し1人が残されていると判断するのである。なお、外接矩形D1の面積変化について1人分の範囲を規定しておけば、1人が占める面積の範囲を逸脱しているときに複数人が重なっていると推定することができ、外接矩形D1の面積を人数を推定するための情報として用いることが可能になる。   As described above, as a technique for estimating the number of people entering the room, the maximum number of circumscribed rectangles D1 in the period from entering the room to leaving the room is regarded as the number of people entering the room, and the number of people entering the room is changed by changing the area of the circumscribed rectangle D1. It is also possible to estimate the number of people. For example, in the toilet for the handicapped, as shown in FIG. 9A, if the caregiver M1 and the care recipient M2 enter the room at the same time, the circumscribed rectangle D1 is 1 even though there are two people entering the room. Only one may be formed. In such a situation, as shown in FIG. 9 (b), the caregiver M1 is considered to leave the room with the cared person M2 left in the toilet, and the cared person M1 moves away from the cared person M2. If the movement of M2 is small, the circumscribed rectangle D1 may be formed only by the caregiver M1. That is, it is conceivable that only one circumscribed rectangle D1 can be obtained even though two people enter the room. However, since the imaging means 20 images the inside of the toilet from the ceiling side, the area of the circumscribed rectangle D1 formed by the movement of the caregiver M1 is smaller than the area of the circumscribed rectangle D1 when entering the room. Therefore, when the area of the circumscribed rectangle D1 changes by more than a prescribed threshold and the area is reduced, it is determined that one person leaves the room and one person remains. In addition, if a range for one person is defined for the area change of the circumscribed rectangle D1, it can be estimated that a plurality of persons overlap when the area deviates from the area occupied by one person. The area of D1 can be used as information for estimating the number of people.

上述の技術を採用すれば退室の判断が可能になるが、室内の入室者がほぼ静止している状況や入室者が柱のような遮蔽物に隠れる状況などでは、入室者が背景と同様に扱われることになり、移動輪郭抽出手段24から有効な候補画像が得られず、移動領域検出手段25において外接矩形D1が生成されないことになる。そこで、熱線式人感センサ1による入室が検出された後に、輪郭抽出手段22により得られる輪郭線画像に関して、移動領域検出手段25と同様に外接矩形を設定し、異なる時刻の輪郭線画像について外接矩形の移動量が規定した閾値以下であって、しかも外接矩形に含まれる画素のうち輝度値が変化した画素数が規定値よりも少ないか、あるいは外接矩形に含まれる画素の方向コードについて求めた度数分布の距離(領域特徴量検出手段26と同様の手法で求めた度数分布の評価値)が規定値よりも小さいときには、検知処理部30では退室の可能性を考慮して、静止、遮蔽(遮蔽物に隠れた状態)、退室のいずれかとみなし、さらに上述した条件で退室が判断されていなければ、静止または遮蔽と判断する。要するに、移動輪郭抽出手段24から有効な候補画像が得られない場合でも、ただちに退室と判断するのではなく、上述した条件で退室が判断されなければ静止または遮蔽であって室内に滞在している(従来例の「在留」に相当)と判断するのである。静止または遮蔽と判断したときには、画像式人感センサ2では移動物体の監視状態を継続し、熱線式人感センサ1での人検知の判断によって設定した初期ディレイ時間が満了するまで照明器具4の点灯を維持する。要するに、明確な退室の判断がなされなければ退室ではないと判断して、照明器具4が消灯される可能性を低減しているのである。   If the above-mentioned technology is adopted, it is possible to determine whether to leave the room, but if the room occupant is almost stationary or if the room occupant is hidden by a shield such as a pillar, As a result, no valid candidate image is obtained from the moving contour extracting unit 24, and the circumscribed rectangle D1 is not generated in the moving region detecting unit 25. Therefore, a circumscribing rectangle is set for the contour image obtained by the contour extraction means 22 after the entry by the heat ray human sensor 1 is detected, similarly to the moving area detection means 25, and the contour images at different times are circumscribed. The amount of movement of the rectangle is equal to or less than the specified threshold, and the number of pixels whose luminance value has changed among the pixels included in the circumscribed rectangle is less than the specified value, or the direction code of the pixel included in the circumscribed rectangle is obtained. When the distance of the frequency distribution (the evaluation value of the frequency distribution obtained by the same method as that of the region feature amount detection unit 26) is smaller than the specified value, the detection processing unit 30 considers the possibility of leaving the room, If it is determined that the user has left the room under the above-described conditions, it is determined to be stationary or shielded. In short, even if a valid candidate image cannot be obtained from the moving contour extraction means 24, it is not immediately determined to leave, but if it is not determined to leave under the above-mentioned conditions, it is stationary or shielded and stays in the room. (Corresponding to “residence” in the conventional example). When it is determined that the object is stationary or shielded, the image-type human sensor 2 continues to monitor the moving object, and the lighting device 4 of the lighting apparatus 4 is kept until the initial delay time set by the human-wire detection sensor 1 is determined. Keep on. In short, unless a clear exit determination is made, it is determined that it is not the exit, and the possibility that the lighting device 4 is turned off is reduced.

ところで、外乱光が変化するような室内では、撮像手段20の視野内において輝度が比較的大きく変化する領域が生じることがある。トイレのように室内空間が比較的小さい場合には、撮像手段20の視野内において人の占める面積が大きいから、外接矩形D1の面積に下限を設けておけば、外乱光によるノイズの領域を大部分は除去できると考えられる。しかしながら、会議室のように室内空間が比較的広い場合には、外接矩形D1の範囲を撮像手段20の遠方に存在する人よりも狭めることができないから、外接矩形D1の面積によるノイズの除去が困難である。   By the way, in a room where disturbance light changes, there may be a region where the luminance changes relatively large in the field of view of the imaging means 20. When the indoor space is relatively small like a toilet, the area occupied by a person in the field of view of the imaging means 20 is large. Therefore, if a lower limit is provided for the area of the circumscribed rectangle D1, the area of noise due to ambient light is increased. The part is considered removable. However, when the indoor space is relatively wide like a conference room, the range of the circumscribed rectangle D1 cannot be narrower than the person existing far away from the imaging means 20, and therefore noise removal by the area of the circumscribed rectangle D1 is eliminated. Have difficulty.

この種の問題を解決する技術としては、輪郭線画像を用いてテンプレートとのパターンマッチングを行うことが考えられるが、パターンマッチングを行うには作業用に大容量のメモリが要求される上に、処理能力の高い高コストの装置が必要になるという問題が生じる。   As a technique for solving this type of problem, it is conceivable to perform pattern matching with a template using an outline image, but in order to perform pattern matching, a large amount of memory is required for work. There arises a problem that a high-cost apparatus with high processing capability is required.

ところで、上述したように、画像を用いて退室を検知するには、時間経過に伴う外接矩形D1の移動方向や寸法変化を用いるから、複数毎の画像を記憶しておくことが必要であって、人が静止しているときでもノイズが含まれていると人の移動と判断される領域が発生するから、複数毎の画像が累積して記憶されることになる。ただし、ノイズによる画像を蓄積しても無駄であるから、画像の累積を開始してから一定の廃棄時間毎に記憶部23から画像を廃棄することが必要である。このように記憶部23から画像を廃棄すると、人を含む画像も廃棄され、廃棄直後には人が移動しているか静止しているかの判断ができないが、検知処理部30では画像を廃棄した時点においては人は静止しているとみなし、上述したように退室が明確に検知されるまでは静止と判断するのである。このように判断することによって、退室していないにもかかわらず退室と判断する可能性を低減することができ、在室中に不用意に照明器具4が消灯される可能性を低減することができる。   By the way, as described above, in order to detect a leaving room using an image, since the moving direction and dimensional change of the circumscribed rectangle D1 with the passage of time are used, it is necessary to store a plurality of images. Even when the person is stationary, if noise is included, an area where it is determined that the person moves is generated, so that a plurality of images are accumulated and stored. However, since it is useless to accumulate images due to noise, it is necessary to discard the images from the storage unit 23 every certain discard time after the accumulation of images is started. When the image is discarded from the storage unit 23 in this manner, the image including the person is also discarded, and it is impossible to determine whether the person is moving or stationary immediately after the discarding. In this case, it is assumed that the person is stationary, and as described above, it is determined that the person is stationary until the exit is clearly detected. By determining in this way, it is possible to reduce the possibility of determining that the user has left the room even if the user has not left the room, and to reduce the possibility that the luminaire 4 is inadvertently turned off while in the room. it can.

ところで、焦電素子10と撮像手段20とは同じケースに収納することになるから、会議室のような比較的広い室内において撮像手段20の光軸を斜め下向きに設定するような場合には、焦電素子10が出入口から遠ざかり、撮像手段20と同じケースに収納した焦電素子10では出入口付近からの熱線量の変化に対して十分な感度を得ることが難しくなることがある。そこで、本実施形態では、図1に示すように、焦電素子10を収納したケースとは独立した子機ケースを備える子機5を付加可能としている。子機5は、焦電素子10と増幅器11と比較器12とに相当する構成を備え、子機5の出力は比較器12の出力と同様に、人の動きに対応した矩形波状になる。子機5の出力は検知処理部30に入力されるのであって、検知処理部30では比較器12の出力と子機5の出力との論理和を用いて人検知の判断を行う。したがって、画像式人感センサ2と焦電素子10とを収納したケースを出入口から遠い部位に配置したとしても、子機5を出入口付近に配置することが可能になり、出入口付近の人の検知を子機5によって行うことが可能になる。つまり、焦電素子10の視野を拡大したことになる。子機5は1台だけではなく複数台を並設して用いることが可能であって、室内形状に応じて適宜台数の子機5を付設することができる。   By the way, since the pyroelectric element 10 and the imaging means 20 are housed in the same case, when the optical axis of the imaging means 20 is set obliquely downward in a relatively large room such as a conference room, The pyroelectric element 10 moves away from the entrance and exit, and it may be difficult for the pyroelectric element 10 housed in the same case as the imaging unit 20 to obtain sufficient sensitivity to changes in heat dose from the vicinity of the entrance and exit. Therefore, in the present embodiment, as shown in FIG. 1, it is possible to add a handset 5 including a handset case that is independent from the case housing the pyroelectric element 10. The subunit | mobile_unit 5 is equipped with the structure corresponded to the pyroelectric element 10, the amplifier 11, and the comparator 12, and the output of the subunit | mobile_unit 5 becomes a rectangular wave shape corresponding to a human motion similarly to the output of the comparator 12. FIG. The output of the slave unit 5 is input to the detection processing unit 30, and the detection processing unit 30 determines whether to detect the person using the logical sum of the output of the comparator 12 and the output of the slave unit 5. Therefore, even if the case containing the image-type human sensor 2 and the pyroelectric element 10 is disposed at a location far from the entrance / exit, the handset 5 can be disposed near the entrance / exit, and detection of a person near the entrance / exit Can be performed by the handset 5. That is, the field of view of the pyroelectric element 10 is enlarged. The subunit | mobile_unit 5 can use not only one unit but multiple units | sets in parallel, and can attach the number of subunit | mobile_units 5 suitably according to a room shape.

本発明の実施形態を示すブロック図である。It is a block diagram which shows embodiment of this invention. 同上における画像式人感センサの動作説明図である。It is operation | movement explanatory drawing of the image type human sensitive sensor in the same as the above. 同上における画像式人感センサの動作説明図である。It is operation | movement explanatory drawing of the image type human sensitive sensor in the same as the above. 同上の動作説明図である。It is operation | movement explanatory drawing same as the above. 同上の動作説明図である。It is operation | movement explanatory drawing same as the above. 同上の動作説明図である。It is operation | movement explanatory drawing same as the above. 同上の動作説明図である。It is operation | movement explanatory drawing same as the above. 同上の動作説明図である。It is operation | movement explanatory drawing same as the above. 同上の動作説明図である。It is operation | movement explanatory drawing same as the above. 従来例における検知ビームの設定例を示す図である。It is a figure which shows the example of a setting of the detection beam in a prior art example. 同上のブロック図である。It is a block diagram same as the above. 同上の動作説明図である。It is operation | movement explanatory drawing same as the above. 同上の動作説明図である。It is operation | movement explanatory drawing same as the above. 他の従来例の動作説明図である。It is operation | movement explanatory drawing of another prior art example. さらに他の従来例の動作説明図である。It is operation | movement explanatory drawing of another prior art example.

符号の説明Explanation of symbols

1 熱線式人感センサ
2 画像式人感センサ
4 照明器具
30 検知処理部
32 スイッチ回路
D1 外接矩形
EN 出入口
Ta 起動時間
Tb 余裕時間
Td1 初期ディレイ時間
Td2 退室ディレイ時間
VF 視野
DESCRIPTION OF SYMBOLS 1 Heat ray type human sensor 2 Image type human sensor 4 Lighting fixture 30 Detection processing part 32 Switch circuit D1 circumscribed rectangle EN entrance / exit Ta start time Tb margin time Td1 initial delay time Td2 exit delay time VF visual field

Claims (4)

室内に設置され人体から放射される熱線を監視するとともに熱線量の変化によって人の存否を検知する熱線式人感センサと、熱線式人感センサによる人の検知後に起動され室内の画像を撮像するとともに画像内の人が室内から退室した時点を検知する画像式人感センサと、負荷をオンオフさせるスイッチ回路と、熱線式人感センサによる人の検知時点と画像式人感センサによる退室の検知時点とをディレイ時間の時限を開始する起点とするとともにディレイ時間の時限中にはスイッチ回路をオンに保ちディレイ時間内に熱線式人感センサと画像式人感センサとがどちらも人を検知しなければディレイ時間の満了時点でスイッチ回路をオフにする検知処理部とを備え、熱線式人感センサが熱線を監視する視野と画像式人感センサが撮像する視野とは等しく設定されており、検知処理部は、熱線式人感センサによる人の検知時点から時限するディレイ時間を一定である初期ディレイ時間とするとともに、初期ディレイ時間から一定の余裕時間を減算した起動時間を設定し、熱線式人感センサによる人の検知時点から当該起動時間が経過すると画像式人感センサを起動し、さらに、画像式人感センサによる退室の検知時点から時限するディレイ時間を、初期ディレイ時間よりも短縮した退室ディレイ時間とし、退室ディレイ時間の時限中は、熱線式人感センサと画像式人感センサとの少なくとも一方の感度を他の期間よりも高めることを特徴とする複合型人感スイッチ。 A hot-wire sensor that detects the presence of a person by monitoring the heat rays that are installed indoors and radiated from the human body, and that is activated after a person is detected by the heat-ray sensor and takes an indoor image In addition, an image-type human sensor that detects the time when a person in the image leaves the room, a switch circuit that turns on and off the load, a human detection time by a hot-wire human sensor, and a detection time of a room exit by an image human sensor Is the starting point for starting the time limit of the delay time, and during the time of the delay time, the switch circuit must be kept on and both the hot wire type human sensor and the image type human sensor must detect the person within the delay time. if a detection processing unit for turning off the switch circuit in the expiration time of the delay time, hot-wire motion sensor is imaged field and the image type motion sensor for monitoring the heat ray field Are set to be equal, and the detection processing unit starts the delay time that is timed from the time of human detection by the hot-wire human sensor as a constant initial delay time and subtracts a certain margin time from the initial delay time. The time is set, and when the activation time elapses from the time of detection of the person by the heat ray type human sensor, the image type human sensor is activated, and further, a delay time that is timed from the time of detection of leaving the room by the image type human sensor, The exit delay time is shorter than the initial delay time, and during the exit delay time, at least one of the sensitivity of the hot-wire human sensor and the image human sensor is higher than the other periods. Type human touch switch. 前記画像式人感センサは、少なくとも出入口を含む下向きの視野を持つように設置され、画像内において人が存在するとみなせる領域に外接矩形を設定し、画像内での外接矩形の代表点の座標が画像式人感センサの視野の中央部から周辺部に向かって移動し、かつ視野から外接矩形が消滅した時点を、人の退室時点と判断することを特徴とする請求項1記載の複合型人感スイッチ。 The image-type human sensor is installed so as to have a downward visual field including at least an entrance and exit, sets a circumscribed rectangle in an area where a person can be considered to exist in the image, and coordinates of a representative point of the circumscribed rectangle in the image are 2. The composite human according to claim 1 , wherein a time when the circumscribed rectangle disappears from the visual field and moves from the central part to the peripheral part of the visual field of the image type human sensor is determined as the time when the person leaves the room. Feeling switch. 前記画像式人感センサは、出入口に向かって斜め下向きを視野として設置され、画像内において人が存在するとみなせる領域に外接矩形を設定し、画像内での外接矩形の上下寸法と左右寸法との少なくとも一方が時間経過に伴って縮小し、視野から外接矩形が消滅する時点と外接矩形の面積が規定の閾値以下になった時点とを、人の退室時点と判断することを特徴とする請求項1または請求項2記載の複合型人感スイッチ。 The image-type human sensor is installed with a visual field obliquely downward toward the entrance and exit, sets a circumscribed rectangle in an area where a person can be considered to exist in the image, and has a vertical dimension and a horizontal dimension of the circumscribed rectangle in the image. claim, at least one of reduced with time, and a time when the area of the point and enclosing rectangle circumscribing rectangle from view disappears becomes below a specified threshold, and determines that exit point of the human 3. A composite human-type switch according to claim 1 or claim 2 . 前記画像式人感センサは画像内において人が存在するとみなせる領域に外接矩形を設定し、前記検知処理部は入室から退室までの期間において画像内で発生した外接矩形の最大個数を入室人数とみなし退室人数が入室人数に一致した時点を画像式人感センサによる退室の検知時点とすることを特徴とする請求項1ないし請求項3のいずれか1項に記載の複合型人感スイッチ。 The image-type human sensor sets a circumscribed rectangle in a region where a person can be considered to exist in the image, and the detection processing unit regards the maximum number of circumscribed rectangles generated in the image during the period from entering the room as the number of people entering the room. composite motion switch according to any one of claims 1 to 3, characterized in that the exit number is to detect the time of leaving by the image type motion sensor the matching point to the entry number.
JP2003366885A 2003-10-28 2003-10-28 Combined human touch switch Expired - Fee Related JP4155159B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003366885A JP4155159B2 (en) 2003-10-28 2003-10-28 Combined human touch switch

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003366885A JP4155159B2 (en) 2003-10-28 2003-10-28 Combined human touch switch

Publications (2)

Publication Number Publication Date
JP2005134120A JP2005134120A (en) 2005-05-26
JP4155159B2 true JP4155159B2 (en) 2008-09-24

Family

ID=34645048

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003366885A Expired - Fee Related JP4155159B2 (en) 2003-10-28 2003-10-28 Combined human touch switch

Country Status (1)

Country Link
JP (1) JP4155159B2 (en)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5176402B2 (en) * 2007-06-18 2013-04-03 大日本印刷株式会社 Passage retention information management system and program
JP5688700B2 (en) * 2009-05-26 2015-03-25 国立大学法人 千葉大学 MOBILE BODY CONTROL DEVICE AND MOBILE BODY HAVING MOBILE BODY CONTROL DEVICE
JP5817267B2 (en) * 2011-07-07 2015-11-18 富士ゼロックス株式会社 Control device, image processing device
JP6182323B2 (en) * 2013-02-12 2017-08-16 株式会社メガチップス Sensor device and sensor application equipment
JP5817798B2 (en) * 2013-09-30 2015-11-18 富士ゼロックス株式会社 Control device, image processing device, control program
JP6681590B2 (en) 2015-03-13 2020-04-15 パナソニックIpマネジメント株式会社 Sensor control device, sensor system, and load control system
CN105093347A (en) * 2015-08-13 2015-11-25 浙江威奇电气有限公司 Passive pyroelectric infrared detector sensitivity dynamic adjustment algorithm
JP6958160B2 (en) * 2017-09-19 2021-11-02 東芝ライテック株式会社 Sensor unit and control system
CN108021047A (en) * 2017-12-25 2018-05-11 深圳钶钽智能技术有限公司 There are formula control device for one kind
JP7311299B2 (en) * 2019-04-10 2023-07-19 株式会社国際電気通信基礎技術研究所 Human recognition system and human recognition program

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1062546A (en) * 1996-08-26 1998-03-06 Matsushita Electric Works Ltd Composite infrared human body detector
JP2002006057A (en) * 2000-06-22 2002-01-09 Noritz Corp Human body detector
JP2002341051A (en) * 2001-05-16 2002-11-27 Matsushita Electric Ind Co Ltd Human body detection method
JP2003123162A (en) * 2001-10-18 2003-04-25 Noritz Corp Human body detector

Also Published As

Publication number Publication date
JP2005134120A (en) 2005-05-26

Similar Documents

Publication Publication Date Title
US6246321B1 (en) Movement detector
KR101862733B1 (en) Sensor control device, sensor system, and load control system
JP4155159B2 (en) Combined human touch switch
US10902268B2 (en) Detection of the presence of static objects
JP2000155177A (en) Human body detecting device and detecting method therefor
KR20160110103A (en) Detection device, load control device, and load control system
KR101744210B1 (en) Sensor control device, sensor system, and load control system
JP6555617B2 (en) Human detection system
US20190174045A1 (en) Control method for surveillance system
JP4055790B2 (en) Door phone system
JP2002208493A (en) Illumination control system
JP2010123533A (en) Illumination system
JP2010009847A (en) Automatic lighting control type illumination system
JP4656977B2 (en) Sensing device
JP4337727B2 (en) Human body detection device
CN104902200A (en) Projector with human eye recognition protection system
JP6189284B2 (en) Image sensing device
JP5099904B2 (en) Lighting system
JP4325544B2 (en) Human body detection device
JP5179132B2 (en) Human body detection device
JP6183748B2 (en) Motion detection device
JP2004120009A (en) Monitoring system and monitoring method
JP2009277628A (en) Illumination system
CN204633915U (en) A kind of projector with eye recognition guard system
JP2006262101A (en) Image sensing apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060222

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070516

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080325

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080526

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080617

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080630

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110718

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110718

Year of fee payment: 3

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110718

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120718

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120718

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130718

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees