JP2016124693A - In-car passenger detection device of elevator - Google Patents

In-car passenger detection device of elevator Download PDF

Info

Publication number
JP2016124693A
JP2016124693A JP2015001642A JP2015001642A JP2016124693A JP 2016124693 A JP2016124693 A JP 2016124693A JP 2015001642 A JP2015001642 A JP 2015001642A JP 2015001642 A JP2015001642 A JP 2015001642A JP 2016124693 A JP2016124693 A JP 2016124693A
Authority
JP
Japan
Prior art keywords
car
image
images
elevator
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2015001642A
Other languages
Japanese (ja)
Inventor
泰佳 三嶋
Yasuyoshi Mishima
泰佳 三嶋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Building Systems Co Ltd
Original Assignee
Hitachi Building Systems Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Building Systems Co Ltd filed Critical Hitachi Building Systems Co Ltd
Priority to JP2015001642A priority Critical patent/JP2016124693A/en
Publication of JP2016124693A publication Critical patent/JP2016124693A/en
Pending legal-status Critical Current

Links

Landscapes

  • Indicating And Signalling Devices For Elevators (AREA)
  • Cage And Drive Apparatuses For Elevators (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an in-car passenger detection device of an elevator which can easily detect a passenger in a car, and can improve the detection accuracy.SOLUTION: This in-car passenger detection device of an elevator comprises an image processor 12 which performs image processing for detecting a passenger in a car 2. The image processor 12 includes: a change determination part 121b which determines whether or not there is a portion which is changed to a vertical direction accompanied by a lift motion of the car 2 out of subjects of images on the basis of a plurality of the images which are photographed by an upper camera 111 and a lower camera 112; and an exclusion part 121c which excludes the portion in which the subject is changed to the vertical direction accompanied by the lift motion of the car 2 out of a time change to the vertical direction and a horizontal direction of the subjects of a plurality of the images from the subjects of the image processing when the change determination part 121b determines that there is the portion which is changed to the vertical direction.SELECTED DRAWING: Figure 3

Description

本発明は、窓付きの乗りかご内の乗客を検出するエレベータのかご内乗客検出装置に関する。   The present invention relates to an elevator passenger detection device for an elevator that detects passengers in a car with a window.

この種のエレベータのかご内乗客検出装置の従来技術の1つとして、エレベータかごの内側から撮影領域を撮影する撮影手段と、撮影手段により撮影された画像の一部を判定基礎画像として抽出する画像抽出手段と、判定基礎画像に基づいて乗客の存否判定を行う乗客存否判定手段とを含むエレベータかご監視装置が知られている(例えば、特許文献1参照)。   As one of the prior arts of this type of passenger detection device for an elevator car, an imaging unit that captures an imaging region from the inside of the elevator car, and an image that extracts a part of the image captured by the imaging unit as a determination basic image There is known an elevator car monitoring device that includes an extraction unit and a passenger presence / absence determination unit that performs passenger presence / absence determination based on a determination basic image (see, for example, Patent Document 1).

また、この特許文献1には、画像抽出手段は撮影手段により撮影された画像から、さらに、判定制限画像を抽出し、乗客存否判定手段は存否判定の結果に対する判定制限画像の影響を存否判定の結果に対する判定基礎画像の影響より制限しつつ、判定基礎画像及び判定制限画像の両方に基づいて乗客の存否判定を行う構成が開示されている。そして、特許文献1には、画像抽出手段は窓付きエレベータかごの窓を含まないよう判定基礎画像を抽出する構成も開示されている。   Further, in this Patent Document 1, the image extracting means further extracts a determination restricted image from the image taken by the photographing means, and the passenger presence / absence determining means determines whether or not the influence of the determination restricted image on the presence / absence determination result exists. A configuration is disclosed in which the presence / absence determination of a passenger is performed based on both the determination basic image and the determination limited image while limiting the influence of the determination basic image on the result. Patent Document 1 also discloses a configuration in which the image extraction unit extracts a determination basic image so as not to include a window of an elevator car with a window.

特開2002−53275号公報JP 2002-53275 A

上述した特許文献1に開示された従来技術のエレベータかご監視装置は、例えば、判定基礎画像の画素の輝度に対する重み付けよりも判定制限画像の画素の輝度に対する重み付けを低く設定することにより、乗りかご内の乗客の検出結果に対する判定制限画像の影響を制限している。しかしながら、このようなエレベータかご監視装置による判定制限画像の制限率は任意に設定される構成であるため、その制限率を適切に調整して乗りかご内の乗客を検出するのが困難になっている。   In the elevator car monitoring device of the prior art disclosed in Patent Document 1 described above, for example, by setting the weighting for the luminance of the pixels of the determination-restricted image lower than the weighting for the luminance of the pixels of the determination basic image, The influence of the judgment restriction image on the detection result of passengers is limited. However, since the limit rate of the determination limit image by such an elevator car monitoring device is arbitrarily set, it is difficult to detect passengers in the car by appropriately adjusting the limit rate. Yes.

また、従来技術のエレベータかご監視装置では、画像抽出手段により乗りかごの窓から見える外部の画像が判定基礎画像に含まれないので、乗りかご内の乗客の検出結果に対する乗りかごの窓から見える外部の画像の影響を小さくすることができる。しかしながら、画像抽出手段が乗りかごの窓を含まないように判定基礎画像を抽出することにより、撮影手段によって撮影された画像における判定基礎画像の範囲が狭められるので、却って乗りかご内の乗客の検出が妨げられ、乗客の検出精度が低下することが懸念されている。   Further, in the elevator car monitoring device of the prior art, the external image that can be seen from the car window by the image extracting means is not included in the judgment basic image, so the external image that can be seen from the car window for the detection result of the passenger in the car. The influence of the image can be reduced. However, since the range of the judgment basic image in the image photographed by the photographing means is narrowed by extracting the judgment basic image so that the image extraction means does not include the car window, detection of passengers in the car on the contrary Is disturbed, and there is a concern that the detection accuracy of passengers will be reduced.

本発明は、このような従来技術の実情からなされたもので、その目的は、乗りかご内の乗客を容易に検出することができ、その検出精度を向上させることができるエレベータのかご内乗客検出装置を提供することにある。   The present invention has been made based on the actual situation of the prior art as described above. The purpose of the present invention is to detect passengers in a car easily and to detect passengers in an elevator car that can improve the detection accuracy. To provide an apparatus.

上記の目的を達成するために、本発明のエレベータのかご内乗客検出装置は、昇降路内を昇降する乗りかご、及び前記乗りかごに設けられ、外部を視認可能とする窓を備えたエレベータに設けられ、前記乗りかご内の画像を収集する画像収集装置と、前記画像収集装置によって収集された画像の時間変化に基づいて、前記乗りかご内の乗客を検出するための画像処理を行う画像処理装置とを備えたエレベータのかご内乗客検出装置において、前記画像収集装置は、前記乗りかご内に上下方向にずらして配置され、前記乗りかごの昇降動作中に前記窓を含む被写体の画像を複数撮影する第1と第2のカメラを含み、前記画像処理装置は、前記第1と第2のカメラによって撮影された複数の画像に基づいて、これらの画像の前記被写体のうち前記乗りかごの昇降動作に伴って縦方向へ変化する部分があるかどうかを判定する変化判定部と、前記変化判定部によって縦方向へ変化する部分があると判定されたとき、前記複数の画像における前記被写体の縦方向及び横方向への時間変化のうち、前記乗りかごの昇降動作に伴って前記被写体が縦方向へ変化した部分を前記画像処理の対象から除外する除外部とを含むことを特徴としている。   To achieve the above object, an elevator passenger detection device according to the present invention includes a car that moves up and down in a hoistway, and an elevator that is provided in the car and includes a window that allows the outside to be visually recognized. An image collecting device that collects images in the car and that performs image processing for detecting passengers in the car based on temporal changes in the images collected by the image collecting device. In the elevator passenger detection device comprising the device, the image collection device is arranged to be shifted in the vertical direction in the car, and a plurality of images of the subject including the window during the raising and lowering operation of the car Including first and second cameras for photographing, wherein the image processing device is configured to select the image among the subjects of the images based on a plurality of images photographed by the first and second cameras. When it is determined by the change determination unit that there is a portion that changes in the vertical direction when there is a portion that changes in the vertical direction as the cage moves up and down, the plurality of images An exclusion unit that excludes, from the time change in the vertical direction and the horizontal direction of the subject, a portion in which the subject has changed in the vertical direction as the car moves up and down, from the image processing target. It is said.

本発明のエレベータのかご内乗客検出装置によれば、乗りかご内の乗客を容易に検出することができ、その検出精度を向上させることができる。なお、上述した以外の課題、構成及び効果は、以下の実施形態の説明により明らかにされる。   According to the passenger detection device for an elevator car of the present invention, passengers in the passenger car can be easily detected, and the detection accuracy can be improved. Problems, configurations, and effects other than those described above will be clarified by the following description of embodiments.

本発明に係るかご内乗客検出装置の一実施形態が設けられるエレベータの構成を示す全体図である。1 is an overall view showing a configuration of an elevator provided with an embodiment of an in-car passenger detection device according to the present invention. 図1に示す画像収集装置によって収集された乗りかご内の画像を示す図であり、(a)図は乗りかごが昇降動作を開始した直後の上部カメラの撮影画像に映し出されたドアを示す図、(b)図は(a)図に示す画像の撮影時刻から所定の時間経過した時点における上部カメラの撮影画像に映し出されたドアを示す図、(c)図は乗りかごが昇降動作を開始した直後の下部カメラの撮影画像に映し出されたドアを示す図、(d)図は(c)図に示す画像の撮影時刻から所定の時間経過した時点における下部カメラの撮影画像に映し出されたドアを示す図である。It is a figure which shows the image in the cage | basket | car collected by the image collection apparatus shown in FIG. 1, (a) is a figure which shows the door reflected on the picked-up image of the upper camera immediately after a cage | basket | car started the raising / lowering operation | movement. FIGS. 4A and 4B show the doors shown in the upper camera image when a predetermined time has elapsed from the image shooting time shown in FIG. 5A, and FIG. 5C shows the elevator car starting up and down. The figure which shows the door reflected on the picked-up image of the lower camera immediately after having performed, (d) The figure is the door reflected on the picked-up image of the lower camera when predetermined time passed from the photographing time of the image shown in (c) figure FIG. 図1に示す画像処理装置の構成を示す機能ブロック図である。It is a functional block diagram which shows the structure of the image processing apparatus shown in FIG. 図2(a)に示す画像と図2(b)に示す画像とを比較した図である。It is the figure which compared the image shown to Fig.2 (a), and the image shown to FIG.2 (b). 図2(b)に示す画像と図2(c)に示す画像とを比較した図である。It is the figure which compared the image shown in FIG.2 (b), and the image shown in FIG.2 (c). 図1に示す画像処理装置の制御処理の流れを示すフローチャートである。3 is a flowchart showing a flow of control processing of the image processing apparatus shown in FIG. 1.

以下、本発明に係るエレベータのかご内乗客検出装置を実施するための形態を図に基づいて説明する。   EMBODIMENT OF THE INVENTION Hereinafter, the form for implementing the passenger detection apparatus in the elevator car which concerns on this invention is demonstrated based on figures.

図1は本発明に係るかご内乗客検出装置の一実施形態が設けられるエレベータの構成を示す全体図である。   FIG. 1 is an overall view showing a configuration of an elevator provided with an embodiment of an in-car passenger detection device according to the present invention.

本発明に係るかご内乗客検出装置の一実施形態は、例えば、図1に示すエレベータ1に適用される。このエレベータ1は、建物の昇降路(図示せず)内を昇降する乗りかご2と、一端が乗りかご2に取付けられた主ロープ3と、この主ロープ3の他端が取付けられ、昇降路内に吊り下げられた釣合い錘4とを備えている。   One embodiment of an in-car passenger detection device according to the present invention is applied to, for example, an elevator 1 shown in FIG. The elevator 1 includes a car 2 that moves up and down in a hoistway (not shown) of a building, a main rope 3 that is attached to the car 2 at one end, and the other end of the main rope 3 that is attached to the hoistway. And a counterweight 4 suspended therein.

また、エレベータ1は、昇降路の上方に位置する機械室(図示せず)に設けられ、乗りかご2及び釣合い錘4を駆動する巻上機5と、この巻上機5の近傍に配置されたそらせ車6と、乗りかご2に開閉可能に設けられ、乗りかご2と建物の各階の乗り場(図示せず)とを連絡する出入口を開閉するドア7と、このドア7に設けられ、外部を視認可能とする窓8とを備えている。なお、建物の各階の乗り場には、乗りかご2のドア7と連動して出入口を開閉するドア(図示せず)が設けられている。   The elevator 1 is provided in a machine room (not shown) located above the hoistway, and is disposed in the vicinity of the hoisting machine 5 that drives the car 2 and the counterweight 4. A door 7 is provided on the door 7 for opening and closing the doorway for connecting the car 2 and a platform (not shown) on each floor of the building. And a window 8 that makes it possible to visually recognize. In addition, a door (not shown) that opens and closes the doorway in conjunction with the door 7 of the car 2 is provided at the landing on each floor of the building.

さらに、エレベータ1は、乗りかご2の内壁に設けられ、乗りかご2の行先階へのかご呼びの登録及びドア7の開閉動作の指令を出力する操作盤9と、乗り場側の出入口近傍の壁に設けられ、乗りかご2の乗り場呼びの登録を行う乗り場釦(図示せず)と、機械室に設けられ、乗りかご2の運転及びドア7の駆動を制御するエレベータ制御装置10と、乗りかご2内の画像を収集する画像収集装置11と、画像収集装置11によって収集された画像の時間変化に基づいて、乗りかご2内の乗客を検出するための画像処理を行う画像処理装置12とを備えている。   Further, the elevator 1 is provided on the inner wall of the car 2, and includes an operation panel 9 for outputting a car call registration to the destination floor of the car 2 and a command for opening and closing the door 7, and a wall near the entrance on the landing side. A landing button (not shown) for registering a landing call for the car 2, an elevator control device 10 provided in the machine room for controlling the operation of the car 2 and the drive of the door 7, and the car An image collection device 11 that collects the images in the vehicle 2, and an image processing device 12 that performs image processing for detecting passengers in the car 2 based on temporal changes in the images collected by the image collection device 11. I have.

巻上機5は、主ロープ3が巻き掛けられた駆動シーブ5Aと、この駆動シーブ5Aを回転させるモータ5Bと、駆動シーブ5Aの回転を制動するブレーキ装置(図示せず)とを有し、これらのモータ5B及びブレーキ装置はエレベータ制御装置10に電気的に接続されている。このような構成の巻上機5は、エレベータ制御装置10からの制御指令を受けてモータ5B及びブレーキ装置を作動させることにより、乗りかご2を釣合い錘4に対して相対的に昇降させるようにしている。   The hoisting machine 5 includes a driving sheave 5A around which the main rope 3 is wound, a motor 5B that rotates the driving sheave 5A, and a brake device (not shown) that brakes the rotation of the driving sheave 5A. The motor 5B and the brake device are electrically connected to the elevator control device 10. The hoisting machine 5 having such a configuration raises and lowers the car 2 relative to the counterweight 4 by operating the motor 5B and the brake device in response to a control command from the elevator control device 10. ing.

ドア7は、例えば、各階の乗り場側(正面側)から見て乗りかご2の出入口の中央から左右の両側へ開閉する両開き構造になっている。窓8は、例えば、乗りかご2内の乗客の顔の位置に合わせてドア7の上部側に配置されており、透明なガラス等を用いて直方体状に形成されている。なお、ドア7は、上述した両開き構造の場合に限らず、例えば、各階の乗り場側から見て左右の一方向へ開閉する片開き構造であってもよい。また、各階の乗り場のドアには、乗りかご2の窓8と同様の窓が窓8と同じ高さ位置に取付けられている。   The door 7 has, for example, a double-open structure that opens and closes from the center of the entrance / exit of the car 2 to the left and right sides when viewed from the landing side (front side) of each floor. The window 8 is disposed on the upper side of the door 7 according to the position of the passenger's face in the car 2, for example, and is formed in a rectangular parallelepiped shape using transparent glass or the like. The door 7 is not limited to the double door structure described above, and may be, for example, a single door structure that opens and closes in one direction left and right when viewed from the landing side of each floor. Further, a window similar to the window 8 of the car 2 is attached to the door of the landing on each floor at the same height as the window 8.

エレベータ制御装置10は、例えば図示されないが、乗りかご2の運転及びドア7の駆動を含むエレベータ1全体の動作を制御するための各種の演算を行うCPU(Central Processing Unit)と、CPUによる演算を実行するためのプログラムを格納するROM(Read Only Memory)やHDD(Hard Disk Drive)等の記憶装置と、CPUがプログラムを実行する際の作業領域となるRAM(Random Access Memory)とを含むハードウェアから構成されている。また、エレベータ制御装置10は、画像処理装置12と通信ケーブル(図示せず)等を介して通信接続され、エレベータ1の制御に関する各種の情報を画像処理装置12へ送信する。   The elevator control device 10 is not illustrated, for example, a CPU (Central Processing Unit) that performs various calculations for controlling the operation of the entire elevator 1 including the operation of the car 2 and the drive of the door 7, and the calculation by the CPU. Hardware including a storage device such as a ROM (Read Only Memory) or HDD (Hard Disk Drive) for storing a program to be executed, and a RAM (Random Access Memory) serving as a work area when the CPU executes the program It is composed of Further, the elevator control device 10 is connected to the image processing device 12 via a communication cable (not shown) or the like, and transmits various information related to the control of the elevator 1 to the image processing device 12.

画像収集装置11は、例えば、乗りかご2内に上下方向にずらして配置され、乗りかご2の昇降動作中にドア7の窓8を含む被写体の画像を複数撮影する上部カメラ111と下部カメラ112(第1と第2のカメラ)と、これらの上部カメラ111及び下部カメラ112とテールコード等(図示せず)を介して通信接続され、上部カメラ111と下部カメラ112によって撮影された複数の画像を記録する画像記録装置113とを含んでいる。   For example, the image collection device 11 is arranged in the car 2 so as to be shifted in the vertical direction, and an upper camera 111 and a lower camera 112 that take a plurality of images of a subject including the window 8 of the door 7 during the raising / lowering operation of the car 2. (First and second cameras) and the upper camera 111 and the lower camera 112 are connected to each other via a tail cord (not shown), and a plurality of images taken by the upper camera 111 and the lower camera 112 are connected. And an image recording device 113 for recording the image.

上部カメラ111と下部カメラ112は、撮影した画像の被写体が互いに平行になるように配置される。具体的には、上部カメラ111と下部カメラ112の本体を上下に配置して調整しても良いし、所定のソフトウェアプログラムを用い、各上部カメラ111と下部カメラ112の撮影部分の上限及び下限を設定して各画像を調整しても良い。本実施形態では、上部カメラ111と下部カメラ112は、乗りかご2内の奥側、すなわちドア7と反対側の上部の角部に鉛直方向に沿って一列に取付けられ、被写体としてドア7全体が映るように、互いに平行にドア7側へ向けられて配置されている。   The upper camera 111 and the lower camera 112 are arranged so that the subjects of the captured image are parallel to each other. Specifically, the upper camera 111 and the lower camera 112 may be adjusted by arranging the upper and lower bodies, and the upper and lower limits of the shooting portions of the upper camera 111 and the lower camera 112 are determined using a predetermined software program. Each image may be adjusted by setting. In the present embodiment, the upper camera 111 and the lower camera 112 are attached in a line along the vertical direction on the back side in the car 2, that is, on the upper corner opposite to the door 7, and the entire door 7 is used as a subject. As shown, they are arranged parallel to each other and directed toward the door 7.

上部カメラ111と下部カメラ112の撮影間隔は、例えば、上下方向における上部カメラ111と下部カメラ112との距離及び乗りかご2の昇降速度(運転速度)に応じて予め設定されている。その具体例の1つとして、上部カメラ111と下部カメラ112の距離が100mm(10cm)、乗りかご2の昇降動作の開始時の昇降速度が50mm/sec(300cm/min)とすると、上部カメラ111と下部カメラ112の撮影間隔は、上部カメラ111と下部カメラ112との距離100mmを当該昇降速度50mm/secで除して得られた2秒に設定される。   The shooting interval between the upper camera 111 and the lower camera 112 is set in advance according to, for example, the distance between the upper camera 111 and the lower camera 112 in the vertical direction and the raising / lowering speed (driving speed) of the car 2. As one specific example, when the distance between the upper camera 111 and the lower camera 112 is 100 mm (10 cm) and the lifting speed at the start of the lifting operation of the car 2 is 50 mm / sec (300 cm / min), the upper camera 111 The shooting interval between the lower camera 112 and the lower camera 112 is set to 2 seconds obtained by dividing the distance of 100 mm between the upper camera 111 and the lower camera 112 by the lifting speed of 50 mm / sec.

そこで、本実施形態では、上部カメラ111と下部カメラ112は、時間を計測するタイマー部(図示せず)を内部に有しており、このタイマー部で時間を計測しながら乗りかご2内の被写体の画像を2秒毎に撮影し、撮影した各画像を画像記録装置113へ送信する。   Therefore, in the present embodiment, the upper camera 111 and the lower camera 112 have a timer unit (not shown) for measuring time, and the subject in the car 2 while measuring time with this timer unit. Are taken every 2 seconds, and each photographed image is transmitted to the image recording device 113.

画像記録装置113は、上部カメラ111と下部カメラ112によって撮影された複数の画像を格納するのに十分な容量を有するROM(Read Only Memory)やHDD(Hard Disk Drive)等から構成されており、上部カメラ111と下部カメラ112によって撮影された画像を上部カメラ111と下部カメラ112の撮影時刻と関連付けて記録する。このような構成の画像記録装置113は、記録した画像を画像処理装置12へ送信し、これらの画像は画像処理装置12による画像処理に用いられる。   The image recording device 113 includes a ROM (Read Only Memory), a HDD (Hard Disk Drive), and the like having sufficient capacity to store a plurality of images taken by the upper camera 111 and the lower camera 112. Images taken by the upper camera 111 and the lower camera 112 are recorded in association with the photographing times of the upper camera 111 and the lower camera 112. The image recording apparatus 113 having such a configuration transmits the recorded images to the image processing apparatus 12, and these images are used for image processing by the image processing apparatus 12.

画像処理装置12は、例えば図示されないが、エレベータ制御装置10と同様に、乗りかご2内の乗客を検出するための画像処理の各種の演算を行うCPU(Central Processing Unit)と、CPUによる演算を実行するためのプログラムを格納するROM(Read Only Memory)やHDD(Hard Disk Drive)等の記憶装置と、CPUがプログラムを実行する際の作業領域となるRAM(Random Access Memory)とを含むハードウェアから構成されている。なお、画像処理装置12の具体的な機能を示す構成については、後で詳細に述べる。   Although not shown, for example, the image processing device 12 is a CPU (Central Processing Unit) that performs various computations of image processing for detecting passengers in the car 2, as well as the elevator control device 10, and computations by the CPU. Hardware including a storage device such as a ROM (Read Only Memory) or HDD (Hard Disk Drive) for storing a program to be executed, and a RAM (Random Access Memory) serving as a work area when the CPU executes the program It is composed of The configuration showing the specific functions of the image processing apparatus 12 will be described later in detail.

次に、乗りかご2の昇降動作中における画像収集装置11による乗りかご2内の画像の収集について、図2を参照しながら詳細に説明する。   Next, collection of images in the car 2 by the image collecting device 11 during the raising / lowering operation of the car 2 will be described in detail with reference to FIG.

図2は図1に示す画像収集装置によって収集された乗りかご内の画像を示す図であり、(a)図は乗りかごが昇降動作を開始した直後の上部カメラの撮影画像に映し出されたドアを示す図、(b)図は(a)図に示す画像の撮影時刻から所定の時間経過した時点における上部カメラの撮影画像に映し出されたドアを示す図、(c)図は乗りかごが昇降動作を開始した直後の下部カメラの撮影画像に映し出されたドアを示す図、(d)図は(c)図に示す画像の撮影時刻から所定の時間経過した時点における下部カメラの撮影画像に映し出されたドアを示す図である。   FIG. 2 is a view showing an image in the car collected by the image collecting apparatus shown in FIG. 1, and FIG. 2 (a) shows a door shown in a photographed image of the upper camera immediately after the car starts to move up and down. The figure which shows the door projected on the picked-up image of the upper camera when the predetermined time has passed from the photographing time of the image shown in the figure (a), (c) The figure shows the elevator moving up and down The figure which shows the door reflected on the picked-up image of the lower camera immediately after an operation | movement started, (d) The figure is reflected on the picked-up image of the lower camera when predetermined time passes from the photographing time of the image shown in (c) figure. FIG.

本実施形態では、図2(a)に示す上部カメラ111の撮影時刻と図2(c)に示す下部カメラ112の撮影時刻は同一であり、図2(b)に示す上部カメラ111の撮影時刻と図2(d)に示す下部カメラ112の撮影時刻は同一である。以下、便宜的に図2(a)に示す上部カメラ111の撮影時刻と図2(c)に示す下部カメラ112の撮影時刻をt1、図2(b)に示す上部カメラ111の撮影時刻と図2(d)に示す下部カメラ112の撮影時刻をt2とし、図2(a)〜(d)の各画像にA〜Dの符号を付して区別する。なお、上述したように、上部カメラ111と下部カメラ112の各撮影間隔は2秒に設定されているので、撮影時刻t1から撮影時刻t2までの経過時間は2秒になっている。   In this embodiment, the shooting time of the upper camera 111 shown in FIG. 2A is the same as the shooting time of the lower camera 112 shown in FIG. 2C, and the shooting time of the upper camera 111 shown in FIG. The photographing time of the lower camera 112 shown in FIG. 2D is the same. Hereinafter, for convenience, the shooting time of the upper camera 111 shown in FIG. 2A and the shooting time of the lower camera 112 shown in FIG. 2C are t1, and the shooting time of the upper camera 111 shown in FIG. The imaging time of the lower camera 112 shown in 2 (d) is t2, and the images in FIGS. 2 (a) to 2 (d) are distinguished by attaching symbols A to D. As described above, since the shooting interval between the upper camera 111 and the lower camera 112 is set to 2 seconds, the elapsed time from the shooting time t1 to the shooting time t2 is 2 seconds.

ここで、乗りかご2が各階の乗り場に停止しているとき、一般に、ドア7の窓8を介して外部から乗りかご2の内部を視認できる状態であるため、外光が窓8から乗りかご2内へ差し込む状況になっている。一方、各階の乗り場で待機する乗客が乗りかご2内に乗車し、操作盤9を操作してかご呼びの登録を行ったとき、あるいは乗りかご2が現在停止している階以外の階の乗り場で待機する乗客が、乗り場釦を操作して乗り場呼びの登録を行ったとき、エレベータ制御装置10は乗りかご2の他階への移動を開始する。なお、図2(a)〜(d)に示す画像A〜Dのドア7の窓8において、外光が入り込んだ部分は白色で表され、外光が入り込んでいない部分は黒色で表されている。   Here, when the car 2 is stopped at the landing on each floor, the inside of the car 2 is generally visible from the outside through the window 8 of the door 7, so that external light can be seen from the window 8. It is in a situation to plug into 2. On the other hand, when a passenger standing by at the landing on each floor gets into the car 2 and operates the operation panel 9 to register the car call, or at a floor other than the floor where the car 2 is currently stopped. When the passenger waiting at (1) operates the landing button to register the landing call, the elevator control device 10 starts moving to the other floor of the car 2. In addition, in the window 8 of the door 7 of the images A to D shown in FIGS. 2A to 2D, a portion where the external light enters is expressed in white, and a portion where the external light does not enter is expressed in black. Yes.

乗りかご2が昇降し始めると、乗りかご2が上下方向へ加速すると共に、乗りかご2のドア7の窓8と乗り場のドアの窓(図示せず)との高さ位置がずれる。このとき、上部カメラ111がドア7を撮影すると、図2(a)に示すように、画像Aにおいて乗りかご2の窓8に対して外光が映らない部分が生じる。また、図2(a)における上部カメラ111の撮影時刻t1と同一時刻に下部カメラ112がドア7を撮影すると、図2(c)に示すように、上部カメラ111の撮影部分の上限及び下限と異なるが、画像記録装置113は外光が窓8から入射する範囲が図2(a)に示す画像Aと同一となる画像Cを取得することができる。   When the car 2 starts to move up and down, the car 2 accelerates in the vertical direction, and the height positions of the window 8 of the door 7 of the car 2 and the window (not shown) of the landing door shift. At this time, when the upper camera 111 photographs the door 7, as shown in FIG. 2A, a portion in which external light is not reflected on the window 8 of the car 2 occurs in the image A. When the lower camera 112 captures the door 7 at the same time as the capturing time t1 of the upper camera 111 in FIG. 2A, as shown in FIG. Although different, the image recording apparatus 113 can acquire an image C in which the range in which external light enters from the window 8 is the same as the image A shown in FIG.

そして、図2(a)における上部カメラ111の撮影時刻t1から2秒が経過すると、上部カメラ111がドア7を再び撮影する。このとき、乗りかご2は、撮影時刻t1における位置よりもさらに上下方向へ移動しているので、図2(b)に示すように、上部カメラ111によって撮影された画像Bにおいて、窓8に対して外光が映らなくなる部分は拡大する。また、図2(c)における下部カメラ112の撮影時刻t1から2秒が経過し、図2(b)における上部カメラ111の撮影時刻t2と同一時刻に下部カメラ112がドア7を撮影すると、図2(d)に示すように、上部カメラ111の撮影部分の上限及び下限と異なるが、画像記録装置113は外光が窓8から入射する範囲が図2(b)に示す画像Bと同一となる画像Dを取得することができる。   Then, when 2 seconds elapse from the shooting time t1 of the upper camera 111 in FIG. 2A, the upper camera 111 captures the door 7 again. At this time, since the car 2 has moved further in the vertical direction than the position at the photographing time t1, as shown in FIG. 2 (b), in the image B photographed by the upper camera 111, with respect to the window 8. The part where the outside light is not reflected is enlarged. Further, when two seconds have elapsed from the photographing time t1 of the lower camera 112 in FIG. 2C and the lower camera 112 photographs the door 7 at the same time as the photographing time t2 of the upper camera 111 in FIG. As shown in FIG. 2 (d), the image recording device 113 is different from the upper and lower limits of the photographing part of the upper camera 111, but the range in which external light enters from the window 8 is the same as the image B shown in FIG. An image D can be acquired.

次に、本実施形態に係る画像処理装置12の機能を示す具体的な構成について、図3を参照しながら詳細に説明する。   Next, a specific configuration showing the function of the image processing apparatus 12 according to the present embodiment will be described in detail with reference to FIG.

図3は図1に示す画像処理装置の構成を示す機能ブロック図である。   FIG. 3 is a functional block diagram showing the configuration of the image processing apparatus shown in FIG.

図3に示すように、画像処理装置12は、画像記録装置113に記録された画像、すなわち上部カメラ111と下部カメラ112によって撮影された複数の画像を解析する画像解析部121と、この画像解析部121の解析結果から乗りかご2内の乗客の行動が異常であるかどうかを判定すると共に、画像解析部121によって解析された画像のデータが異常(故障)であるかどうかを判定する異常判定部122と、この異常判定部122によって判定された異常の対応をエレベータ制御装置10へ指令する異常指令部123とを含んでいる。   As shown in FIG. 3, the image processing device 12 includes an image analysis unit 121 that analyzes an image recorded in the image recording device 113, that is, a plurality of images taken by the upper camera 111 and the lower camera 112, and this image analysis. An abnormality determination that determines whether or not the behavior of the passenger in the car 2 is abnormal from the analysis result of the unit 121 and determines whether or not the image data analyzed by the image analysis unit 121 is abnormal (failure) Unit 122 and an abnormality command unit 123 that instructs the elevator control device 10 to deal with the abnormality determined by the abnormality determination unit 122.

画像解析部121は、画像記録装置113に記録された画像の時間変化から乗りかご2内の乗客を検出し、さらに乗客の挙動の異常度を算出する異常度算出部121aを有している。この異常度算出部121aは、例えば、上部カメラ111と下部カメラ112によって撮影された画像に映し出された乗客に相当する画素の時間変化率から乗客の動きの大きさや速さ等を演算して乗客の挙動の異常度を算出するようにしている。そして、異常度算出部121aは、算出した異常度を示す異常情報を異常判定部122へ送信する。   The image analysis unit 121 includes an abnormality degree calculation unit 121a that detects passengers in the car 2 from time changes of images recorded in the image recording device 113, and calculates an abnormality degree of passenger behavior. For example, the abnormality degree calculation unit 121a calculates the size and speed of the passenger's movement from the time change rate of the pixel corresponding to the passenger displayed in the images captured by the upper camera 111 and the lower camera 112. The degree of abnormal behavior is calculated. Then, the abnormality degree calculation unit 121a transmits abnormality information indicating the calculated abnormality degree to the abnormality determination unit 122.

また、画像解析部121は、上部カメラ111と下部カメラ112によって撮影された複数の画像に基づいて、これらの画像の被写体のうち乗りかご2の昇降動作に伴って縦方向へ変化する部分があるかどうかを判定する変化判定部121bと、変化判定部121bによって縦方向へ変化する部分があると判定されたとき、上部カメラ111と下部カメラ112によって撮影された複数の画像における被写体の縦方向及び横方向への時間変化のうち、乗りかご2の昇降動作に伴って被写体が縦方向へ変化した部分を、乗りかご2内の乗客を検出するための画像処理の対象から除外する除外部121cとを有している。   In addition, the image analysis unit 121 has a portion that changes in the vertical direction as the car 2 moves up and down among the subjects of these images based on a plurality of images taken by the upper camera 111 and the lower camera 112. When the change determination unit 121b and the change determination unit 121b determine that there is a portion that changes in the vertical direction, the vertical direction of the subject in the plurality of images taken by the upper camera 111 and the lower camera 112 and Of the time change in the horizontal direction, an excluding unit 121c that excludes a portion where the subject has changed in the vertical direction as the car 2 moves up and down from the target of image processing for detecting passengers in the car 2. have.

本実施形態では、変化判定部121bは、判定を行う範囲を、上部カメラ111と下部カメラ112によって撮影された複数の画像のうち予め指定された部分、例えば、外光が映り込む窓8に限定するようにしている。なお、変化判定部121b及び除外部121cの制御処理を含む画像処理装置12全体の制御処理の具体的な内容については、後で詳細に述べる。   In the present embodiment, the change determination unit 121b limits the determination range to a predetermined portion of a plurality of images taken by the upper camera 111 and the lower camera 112, for example, the window 8 in which external light is reflected. Like to do. The specific contents of the control processing of the entire image processing apparatus 12 including the control processing of the change determination unit 121b and the exclusion unit 121c will be described later in detail.

異常判定部122は、画像解析部121から受信した異常情報に含まれる異常度を参照し、画像解析部121によって解析された異常度が所定値以上である場合に、乗客の行動が異常であると判定し、画像解析部121によって解析された異常度が所定値未満である場合に、乗客の行動が異常でないと判定するようにしている。   The abnormality determination unit 122 refers to the degree of abnormality included in the abnormality information received from the image analysis unit 121, and the behavior of the passenger is abnormal when the degree of abnormality analyzed by the image analysis unit 121 is a predetermined value or more. When the degree of abnormality analyzed by the image analysis unit 121 is less than a predetermined value, it is determined that the behavior of the passenger is not abnormal.

また、異常判定部122は、変化判定部121bによって縦方向へ変化する部分があると判定されたとき、画像解析部121によって解析された画像のデータが異常でないと判定し、変化判定部121bによって縦方向へ変化する部分がないと判定されたとき、画像解析部121によって解析された画像のデータが異常であると判定するようにしている。そして、異常判定部122は、その判定結果を異常指令部123へ送信する。   Further, when the change determination unit 121b determines that there is a portion that changes in the vertical direction, the abnormality determination unit 122 determines that the image data analyzed by the image analysis unit 121 is not abnormal, and the change determination unit 121b When it is determined that there is no portion that changes in the vertical direction, it is determined that the image data analyzed by the image analysis unit 121 is abnormal. Then, abnormality determination unit 122 transmits the determination result to abnormality command unit 123.

次に、本実施形態に係る画像処理装置12の制御処理について、図4、図5を適宜参照しながら図6のフローチャートに基づいて詳細に説明する。以下、本実施形態の内容を分かり易く説明するために、乗りかご2が上昇する場合の制御処理を示す。   Next, control processing of the image processing apparatus 12 according to the present embodiment will be described in detail based on the flowchart of FIG. 6 with reference to FIGS. 4 and 5 as appropriate. Hereinafter, in order to explain the contents of the present embodiment in an easy-to-understand manner, a control process when the car 2 is raised will be shown.

図4は図2(a)に示す画像と図2(b)に示す画像とを比較した図、図5は図2(b)に示す画像と図2(c)に示す画像とを比較した図、図6は図1に示す画像処理装置の制御処理の流れを示すフローチャートである。   4 shows a comparison between the image shown in FIG. 2A and the image shown in FIG. 2B. FIG. 5 shows a comparison between the image shown in FIG. 2B and the image shown in FIG. 6 and 6 are flowcharts showing the flow of control processing of the image processing apparatus shown in FIG.

図6に示すように、乗りかご2が上昇し始めると、画像処理装置12の画像解析部121は、上部カメラ111と下部カメラ112によって撮影された図2(a)〜(d)に示す複数の画像A〜Dを画像記録装置113から取得する(ステップ(以下、Sと記す)901)。   As shown in FIG. 6, when the car 2 starts to rise, the image analysis unit 121 of the image processing device 12 has a plurality of images shown in FIGS. 2A to 2D taken by the upper camera 111 and the lower camera 112. Are acquired from the image recording device 113 (step (hereinafter referred to as S) 901).

そして、画像解析部121の変化判定部121bは、画像A〜Dに映し出されたドア7のうち乗りかご2の昇降動作に伴って縦方向へ変化する部分があるかどうか、すなわち、乗りかご2の昇降動作に伴って窓8に対する外光が変化したかどうかを判定する(S902〜S904、S906)。   Then, the change determination unit 121b of the image analysis unit 121 determines whether or not there is a portion that changes in the vertical direction with the raising / lowering operation of the car 2 in the door 7 displayed in the images A to D, that is, the car 2. It is determined whether or not the external light with respect to the window 8 has changed in accordance with the lifting / lowering operation (S902 to S904, S906).

具体的には、まず変化判定部121bは、上部カメラ111によって撮影時刻t1に撮影された図2(a)に示す画像A、及び下部カメラ112によって撮影時刻t1に撮影された図2(c)に示す画像Cを参照し、例えば、これらの画像A,Cの画素の輝度から画像A,Cにおいて乗りかご2の窓8の上部側に対して外光が映らなくなった部分があるかどうかを確認する(S902)。   Specifically, the change determination unit 121b first displays the image A shown in FIG. 2A taken by the upper camera 111 at the taking time t1, and the image A taken by the lower camera 112 at the taking time t1 in FIG. Referring to the image C shown in FIG. 4, for example, whether there is a portion where the external light is not reflected on the upper side of the window 8 of the car 2 in the images A and C from the luminance of the pixels of the images A and C. Confirmation is made (S902).

このとき、変化判定部121bは、画像A,Cにおいて乗りかご2の窓8の上部側に対して外光が映らなくなった部分がないことを確認すると(S902/No)、S901からの制御処理が繰り返される。   At this time, when the change determination unit 121b confirms that there is no portion where the external light is not reflected on the upper side of the window 8 of the car 2 in the images A and C (S902 / No), the control processing from S901 is performed. Is repeated.

一方、S902において、変化判定部121bは、画像A,Cにおいて乗りかご2の窓8の上部側に対して外光が映らなくなった部分があることを確認すると(S902/Yes)、上部カメラ111によって撮影時刻t2に撮影された図2(b)に示す画像B、及び下部カメラ112によって撮影時刻t2に撮影された図2(d)に示す画像Dを参照し、例えば、これらの画像B,Dの画素の輝度から画像B,Dにおいてドア7の窓8に対して外光が映っている部分が残っているかどうかを確認する(S903)。   On the other hand, in S902, when the change determination unit 121b confirms that there is a portion in which the external light is not reflected on the upper side of the window 8 of the car 2 in the images A and C (S902 / Yes), the upper camera 111. 2B and the image D shown in FIG. 2D taken at the shooting time t2 by the lower camera 112, for example, these images B, It is confirmed from the luminance of the pixel of D whether or not the portion where the external light is reflected on the window 8 of the door 7 remains in the images B and D (S903).

このとき、変化判定部121bは、画像B,Dにおいてドア7の窓8に対して外光が映っている部分が残っていないことを確認すると(S903/No)、S901からの制御処理が繰り返される。   At this time, when the change determination unit 121b confirms that there is no portion in which the external light is reflected on the window 8 of the door 7 in the images B and D (S903 / No), the control processing from S901 is repeated. It is.

一方、変化判定部121bは、画像B,Dにおいてドア7の窓8に対して外光が映っている部分が残っていることを確認すると(S903/Yes)、図4に示すように、上部カメラ111によって撮影時刻t1に撮影された図2(a)に示す画像Aと上部カメラ111によって撮影時刻t2に撮影された図2(b)に示す画像Bとを比較し、画像Aにおける外光が入射した範囲の変化点の上端の位置と画像Bにおける外光が入射した範囲の変化点の上端の位置が一致しているかどうか、すなわち画像Aにおける外光が遮光された部分の上端の位置と画像Bにおける外光が遮光された部分の上端の位置が一致しているかどうかを確認する(S904)。   On the other hand, when the change determination unit 121b confirms that the portion where the external light is reflected on the window 8 of the door 7 remains in the images B and D (S903 / Yes), as illustrated in FIG. The image A shown in FIG. 2A photographed at the photographing time t1 by the camera 111 and the image B depicted in FIG. 2B photographed at the photographing time t2 by the upper camera 111 are compared, and the external light in the image A is compared. The position of the upper end of the change point in the range where the incident light and the position of the upper end of the change point in the range where the external light is incident in the image B coincide, that is, the position of the upper end of the portion where the external light in the image A is blocked And the position of the upper end of the portion where the external light in the image B is shielded are confirmed (S904).

このとき、変化判定部121bは、画像Aにおける外光が入射した範囲の変化点の上端の位置と画像Bにおける外光が入射した範囲の変化点の上端の位置が一致していないことを確認すると(S904/No)、乗りかご2の昇降動作に伴って窓8に対する外光が変化していないと判定し、その判定結果を異常判定部122へ送信する。   At this time, the change determination unit 121b confirms that the position of the upper end of the changing point in the range where the external light is incident in the image A and the position of the upper end of the changing point in the range where the external light is incident in the image B are not coincident. Then (S904 / No), it is determined that the external light with respect to the window 8 has not changed with the raising / lowering operation of the car 2, and the determination result is transmitted to the abnormality determination unit 122.

異常判定部122は、変化判定部121bから判定結果を受信すると、画像A〜Dのデータが異常であると判定し(S905)、その判定結果を異常指令部123へ送信する。そして、異常指令部123は、異常判定部122から判定結果を受信すると、作業者が画像収集装置11や画像処理装置12の点検等の保守作業を行うために、操作盤9によるかご呼びの登録又は乗り場釦による乗り場呼びの登録に応答して乗りかご2を停止させた状態に維持する指令をエレベータ制御装置10へ出力し、本実施形態に係る画像処理装置12の制御処理を終了する。   Upon receiving the determination result from the change determination unit 121b, the abnormality determination unit 122 determines that the data of the images A to D is abnormal (S905), and transmits the determination result to the abnormality command unit 123. When the abnormality command unit 123 receives the determination result from the abnormality determination unit 122, the operator calls the operation panel 9 to register the car call so that the operator performs maintenance work such as inspection of the image collection device 11 and the image processing device 12. Alternatively, in response to registration of the hall call by the hall button, a command for maintaining the car 2 in a stopped state is output to the elevator control device 10, and the control processing of the image processing device 12 according to the present embodiment is terminated.

一方、S904において、変化判定部121bは、画像Aにおける外光が入射した範囲の変化点の上端の位置と画像Bにおける外光が入射した範囲の変化点の上端の位置が一致していることを確認すると(S904/Yes)、本実施形態では乗りかご2が上昇していることから画像Aにおける外光が入射した範囲の変化点の下端の位置と画像Bにおける外光が入射した範囲の変化点の下端の位置が一致しないので、図5に示すように、上部カメラ111によって撮影時刻t2に撮影された図2(b)に示す画像Bと下部カメラ112によって撮影時刻t1に撮影された図2(c)に示す画像Cとを比較する。   On the other hand, in S904, the change determination unit 121b confirms that the position of the upper end of the change point in the range where the external light is incident in the image A matches the position of the upper end of the change point in the range where the external light is incident in the image B. (S904 / Yes), since the car 2 is rising in this embodiment, the position of the lower end of the changing point of the range in which the external light is incident in the image A and the range in which the external light in the image B is incident Since the position of the lower end of the change point does not match, as shown in FIG. 5, the image B shown in FIG. 2B taken by the upper camera 111 at the photographing time t2 and the lower camera 112 were taken at the photographing time t1. The image C shown in FIG.

ここで、上部カメラ111と下部カメラ112の撮影間隔は、上下方向における上部カメラ111と下部カメラ112との距離100mm及び乗りかご2の昇降速度50mm/secに応じて、予め2秒に設定されており、乗りかご2が上部カメラ111と下部カメラ112との距離100mmだけ移動する時間が考慮されている。そのため、乗りかご2の昇降動作に伴って昇降路の壁面等の乗りかご2外の構造物が窓8に対する外光を遮光すれば、画像Bにおける外光が入射した範囲の変化点の下端の位置と画像Cにおける外光が入射した範囲の変化点の下端の位置が一致する。   Here, the shooting interval between the upper camera 111 and the lower camera 112 is set to 2 seconds in advance according to the distance of 100 mm between the upper camera 111 and the lower camera 112 in the vertical direction and the lifting speed of the car 2 of 50 mm / sec. Therefore, the time for the car 2 to move by a distance of 100 mm between the upper camera 111 and the lower camera 112 is considered. Therefore, if the structure outside the car 2 such as the wall of the hoistway blocks the outside light to the window 8 with the raising / lowering operation of the car 2, the lower end of the changing point of the range in which the outside light is incident in the image B is displayed. The position coincides with the position of the lower end of the changing point in the range where the external light in the image C is incident.

そこで、変化判定部121bは、画像Bにおける外光が入射した範囲の変化点の下端の位置と画像Cにおける外光が入射した範囲の変化点の下端の位置が一致しているかどうか、すなわち画像Bにおける外光が遮光された部分の下端の位置と画像Cにおける外光が遮光された部分の下端の位置が一致しているかどうかを確認する(S906)。   Therefore, the change determination unit 121b determines whether the position of the lower end of the change point in the range where the external light is incident in the image B matches the position of the lower end of the change point in the range where the external light is incident in the image C, that is, the image. It is confirmed whether or not the position of the lower end of the portion where the external light in B is shielded matches the position of the lower end of the portion of the image C where the external light is blocked (S906).

このとき、変化判定部121bは、画像Bにおける外光が入射した範囲の変化点の下端の位置と画像Cにおける外光が入射した範囲の変化点の下端の位置が一致していないことを確認すると(S906/No)、乗りかご2の昇降動作に伴って窓8に対する外光が変化していないと判定し、その判定結果を異常判定部122へ送信する。そして、S905の制御処理が行われる。   At this time, the change determination unit 121b confirms that the position of the lower end of the change point in the range where the external light is incident in the image B does not match the position of the lower end of the change point of the range where the external light is incident in the image C. Then (S906 / No), it is determined that the external light with respect to the window 8 has not changed with the raising / lowering operation of the car 2, and the determination result is transmitted to the abnormality determination unit 122. Then, the control process of S905 is performed.

一方、S906において、変化判定部121bは、画像Bにおける外光が入射した範囲の変化点の下端の位置と画像Cにおける外光が入射した範囲の変化点の下端の位置が一致していることを確認すると(S906/Yes)、乗りかご2の昇降動作に伴って窓8に対する外光が変化していると判定し、その判定結果を異常判定部122へ送信する。   On the other hand, in S906, the change determination unit 121b confirms that the position of the lower end of the change point in the range where the external light is incident in the image B matches the position of the lower end of the change point in the range where the external light is incident in the image C. Is confirmed (S906 / Yes), it is determined that the external light with respect to the window 8 has changed as the car 2 moves up and down, and the determination result is transmitted to the abnormality determination unit 122.

異常判定部122は、変化判定部121bから判定結果を受信すると、画像A〜Dのデータが正常であると判定した後(S907)、その判定結果を異常指令部123へ送信する。次に、画像解析部121の除外部121cは、画像Aから画像Bへ至るまでの被写体の縦方向及び横方向への時間変化、及び画像Cから画像Dへ至るまでの被写体の縦方向及び横方向への時間変化のうち、乗りかご2の昇降動作に伴って窓8に対する外光が変化した部分を、乗りかご2内の乗客を検出するための画像処理の対象から除外する(S908)。   Upon receiving the determination result from the change determination unit 121b, the abnormality determination unit 122 determines that the data of the images A to D is normal (S907), and then transmits the determination result to the abnormality command unit 123. Next, the exclusion unit 121c of the image analysis unit 121 changes the time in the vertical and horizontal directions of the subject from the image A to the image B, and the vertical and horizontal directions of the subject from the image C to the image D. Of the time change in the direction, the part in which the external light with respect to the window 8 changes as the car 2 moves up and down is excluded from the target of image processing for detecting passengers in the car 2 (S908).

次に、画像解析部121の異常度算出部121aは、除外部121cによって画像処理の対象から除外された画像Aから画像Bへ至るまでの被写体の縦方向及び横方向への時間変化、及び画像Cから画像Dへ至るまでの被写体の縦方向及び横方向への時間変化から乗りかご2内の乗客を検出し、乗客の挙動の異常度を算出した後(S909)、異常情報を異常判定部122へ送信する。なお、乗りかご2内の乗客の検出では、窓8に対する外光のように、画像A〜Dにおいて乗客に相当する部分が乗りかご2の昇降動作に伴って明暗として変化することがないので、窓8に対する外光の変化と判別することが可能である。   Next, the degree-of-abnormality calculation unit 121a of the image analysis unit 121 changes the time in the vertical and horizontal directions of the subject from the image A to the image B excluded from the image processing target by the exclusion unit 121c, and the image After detecting the passenger in the car 2 from the time change in the vertical direction and the horizontal direction of the subject from C to the image D and calculating the degree of abnormality of the passenger's behavior (S909), the abnormality information is determined to be abnormal. 122. In addition, in the detection of the passenger in the car 2, since the portion corresponding to the passenger in the images A to D does not change as light and dark with the lifting and lowering operation of the car 2, like the outside light for the window 8, It can be discriminated as a change in external light with respect to the window 8.

次に、異常判定部122は、異常度算出部121aから異常情報を受信すると、異常情報に含まれる異常度が所定値以上であるかどうかを確認する(S910)。このとき、異常判定部122は、異常情報に含まれる異常度が所定値以上でない、すなわち異常度が所定値未満であることを確認すると(S910/No)、乗客の行動が異常でない、すなわち乗客の行動が正常であると判定し(S911)、その判定結果を異常指令部123へ送信する。そして、異常指令部123は、異常判定部122から判定結果を受信すると、本実施形態に係る画像処理装置12の制御処理を終了する。   Next, when the abnormality determination unit 122 receives the abnormality information from the abnormality degree calculation unit 121a, the abnormality determination unit 122 checks whether or not the abnormality degree included in the abnormality information is greater than or equal to a predetermined value (S910). At this time, when the abnormality determination unit 122 confirms that the abnormality level included in the abnormality information is not equal to or greater than the predetermined value, that is, the abnormality level is less than the predetermined value (S910 / No), the passenger behavior is not abnormal, that is, the passenger Is determined to be normal (S911), and the determination result is transmitted to the abnormality command unit 123. Then, when receiving the determination result from the abnormality determination unit 122, the abnormality command unit 123 ends the control process of the image processing apparatus 12 according to the present embodiment.

一方、S910において、異常判定部122は、異常度が所定値以上であることを確認すると(S910/Yes)、乗客の行動が異常であると判定し(S912)、その判定結果を異常指令部123へ送信する。そして、異常指令部123は、異常判定部122から判定結果を受信すると、乗りかご2を最寄階へ停止させてドア7を開く指令をエレベータ制御装置10へ出力し、本実施形態に係る画像処理装置12の制御処理を終了する。以上、乗りかご2が上昇する場合の制御処理を示したが、本実施形態は乗りかご2が下降する場合についても同様に適用可能である。   On the other hand, in S910, when the abnormality determination unit 122 confirms that the abnormality degree is equal to or greater than the predetermined value (S910 / Yes), the abnormality determination unit 122 determines that the behavior of the passenger is abnormal (S912), and determines the determination result as the abnormality command unit. 123. And the abnormality command part 123 will output the instruction | command which stops the car 2 to the nearest floor and opens the door 7 to the elevator control apparatus 10, if the determination result is received from the abnormality determination part 122, The image which concerns on this embodiment The control process of the processing device 12 is terminated. The control processing when the car 2 is raised has been described above, but the present embodiment is also applicable to the case where the car 2 is lowered.

このように構成した本実施形態によれば、乗りかご2の昇降動作中に上部カメラ111と下部カメラ112によって撮影された複数の画像において、ドア7の窓8から映り込む外光を変化判定部121bで判別して、これらの画像における被写体の縦方向及び横方向への時間変化のうち、乗りかご2の昇降動作に伴って外光が変化した部分を、除外部121cにより画像処理装置12の画像処理の対象から除外、すなわち無効化することができる。従って、画像処理装置12が、画像処理において窓8からの外光の影響を受けることなく、乗りかご2内の乗客を容易に検出することができる。これにより、窓8からの外光による乗客の誤検出を防止できるので、乗客の検出精度を十分に向上させることができる。   According to the present embodiment configured as described above, in a plurality of images taken by the upper camera 111 and the lower camera 112 during the raising / lowering operation of the car 2, the external light reflected from the window 8 of the door 7 is changed. Of the temporal changes in the vertical and horizontal directions of the subject in these images determined by 121b, the part where the external light has changed due to the raising / lowering operation of the car 2 is removed by the exclusion unit 121c. It can be excluded from the object of image processing, that is, invalidated. Therefore, the image processing device 12 can easily detect the passengers in the car 2 without being affected by the external light from the window 8 in the image processing. Thereby, since the erroneous detection of the passenger by the external light from the window 8 can be prevented, the detection accuracy of the passenger can be sufficiently improved.

また、本実施形態では、変化判定部121bは、判定を行う範囲を、上部カメラ111と下部カメラ112によって撮影された複数の画像のうち、乗りかご2の昇降動作に伴って変化し易い部分に予め限定することにより、画像処理装置12による画像処理の対象として、各画像における被写体の横方向のみの時間変化を必要最小限に抑えた上で、被写体の当該部分以外の縦方向及び横方向への時間変化を考慮しているので、画像処理装置12が乗りかご2内の乗客を効率良く検出することができる。これにより、乗りかご2内の乗客の検出性能を高めることができるので、優れた検出精度を得ることができる。   Further, in the present embodiment, the change determination unit 121b sets the determination range to a portion that easily changes with the raising / lowering operation of the car 2 in the plurality of images captured by the upper camera 111 and the lower camera 112. By limiting in advance, as a target of image processing by the image processing apparatus 12, a temporal change only in the horizontal direction of the subject in each image is suppressed to a necessary minimum, and then the vertical direction and the horizontal direction of the subject other than the portion concerned. Therefore, the image processing apparatus 12 can detect passengers in the car 2 efficiently. Thereby, since the detection performance of the passenger in the passenger car 2 can be enhanced, excellent detection accuracy can be obtained.

なお、上述した本実施形態は、本発明を分かり易く説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施形態の構成の一部を他の実施形態の構成に置き換えることが可能であり、また、ある実施形態の構成に他の実施形態の構成を加えることも可能である。   In addition, this embodiment mentioned above was described in detail in order to demonstrate this invention easily, and is not necessarily limited to what is provided with all the demonstrated structures. Further, a part of the configuration of an embodiment can be replaced with the configuration of another embodiment, and the configuration of another embodiment can be added to the configuration of an embodiment.

また、本実施形態では、上部カメラ111と下部カメラ112が内部のタイマー部で時間を計測しながら乗りかご2内の被写体の画像を所定の時間(本実施例では、2秒)毎に撮影した場合について説明したが、この場合に限定されるものではない。例えば、画像処理装置12が、上下方向における上部カメラ111と下部カメラ112との距離及び乗りかご2の昇降速度の情報をエレベータ制御装置10から取得し、乗りかご2の昇降動作中に上部カメラ111と下部カメラ112が最初に撮影した時点から乗りかご2が上部カメラ111と下部カメラ112との距離だけ移動したことを確認した時点で、上部カメラ111と下部カメラ112に撮影させるように構成してもよい。   In the present embodiment, the upper camera 111 and the lower camera 112 take images of the subject in the car 2 at predetermined time intervals (2 seconds in this embodiment) while measuring the time with an internal timer unit. Although the case has been described, the present invention is not limited to this case. For example, the image processing device 12 acquires information on the distance between the upper camera 111 and the lower camera 112 in the up-down direction and the lifting speed of the car 2 from the elevator control device 10, and the upper camera 111 during the lifting operation of the car 2. When the car 2 is confirmed to have moved by the distance between the upper camera 111 and the lower camera 112 from the time when the lower camera 112 first photographed, the upper camera 111 and the lower camera 112 are configured to photograph. Also good.

1 エレベータ
2 乗りかご
7 ドア
8 窓
9 操作盤
10 エレベータ制御装置
11 画像収集装置
12 画像処理装置
111 上部カメラ(第1のカメラ)
112 下部カメラ(第2のカメラ)
113 画像記録装置
121 画像解析部
121a 異常度算出部
121b 変化判定部
121c 除外部
122 異常判定部
123 異常指令部
DESCRIPTION OF SYMBOLS 1 Elevator 2 Car 7 Door 8 Window 9 Operation panel 10 Elevator control device 11 Image collection device 12 Image processing device 111 Upper camera (first camera)
112 Lower camera (second camera)
113 Image Recording Device 121 Image Analysis Unit 121a Abnormality Calculation Unit 121b Change Determination Unit 121c Exclusion Unit 122 Abnormality Determination Unit 123 Abnormality Command Unit

Claims (2)

昇降路内を昇降する乗りかご、及び前記乗りかごに設けられ、外部を視認可能とする窓を備えたエレベータに設けられ、
前記乗りかご内の画像を収集する画像収集装置と、前記画像収集装置によって収集された画像の時間変化に基づいて、前記乗りかご内の乗客を検出するための画像処理を行う画像処理装置とを備えたエレベータのかご内乗客検出装置において、
前記画像収集装置は、
前記乗りかご内に上下方向にずらして配置され、前記乗りかごの昇降動作中に前記窓を含む被写体の画像を複数撮影する第1と第2のカメラを含み、
前記画像処理装置は、
前記第1と第2のカメラによって撮影された複数の画像に基づいて、これらの画像の前記被写体のうち前記乗りかごの昇降動作に伴って縦方向へ変化する部分があるかどうかを判定する変化判定部と、
前記変化判定部によって縦方向へ変化する部分があると判定されたとき、前記複数の画像における前記被写体の縦方向及び横方向への時間変化のうち、前記乗りかごの昇降動作に伴って前記被写体が縦方向へ変化した部分を前記画像処理の対象から除外する除外部とを含むことを特徴とするエレベータのかご内乗客検出装置。
A car that goes up and down in the hoistway, and an elevator that is provided in the car and has a window that allows the outside to be visually recognized,
An image collecting device that collects images in the car, and an image processing device that performs image processing for detecting passengers in the car based on temporal changes in the images collected by the image collecting device. In the elevator car passenger detection device provided,
The image collecting device includes:
A first camera and a second camera which are arranged in the car so as to be shifted in the vertical direction, and which take a plurality of images of a subject including the window during the raising and lowering operation of the car;
The image processing apparatus includes:
A change based on a plurality of images taken by the first and second cameras to determine whether or not there is a portion of the subject that changes in the vertical direction as the car moves up and down in the subject. A determination unit;
When the change determination unit determines that there is a portion that changes in the vertical direction, the subject in accordance with the raising / lowering operation of the car among the temporal changes in the vertical direction and the horizontal direction of the subject in the plurality of images. An elevator passenger detection device comprising: an excluding unit that excludes a portion in which the vertical direction is changed from the target of the image processing.
請求項1に記載のエレベータのかご内乗客検出装置において、
前記変化判定部は、判定を行う範囲を前記複数の画像のうち予め指定された部分に限定することを特徴とするエレベータのかご内乗客検出装置。
In the elevator car passenger detection device according to claim 1,
The change determination unit limits a range to be determined to a predetermined part of the plurality of images, and detects the passenger in the elevator car.
JP2015001642A 2015-01-07 2015-01-07 In-car passenger detection device of elevator Pending JP2016124693A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015001642A JP2016124693A (en) 2015-01-07 2015-01-07 In-car passenger detection device of elevator

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015001642A JP2016124693A (en) 2015-01-07 2015-01-07 In-car passenger detection device of elevator

Publications (1)

Publication Number Publication Date
JP2016124693A true JP2016124693A (en) 2016-07-11

Family

ID=56358861

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015001642A Pending JP2016124693A (en) 2015-01-07 2015-01-07 In-car passenger detection device of elevator

Country Status (1)

Country Link
JP (1) JP2016124693A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021079475A1 (en) * 2019-10-24 2021-04-29 ジャパンエレベーターサービスホールディングス株式会社 Security camera device

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021079475A1 (en) * 2019-10-24 2021-04-29 ジャパンエレベーターサービスホールディングス株式会社 Security camera device
JPWO2021079475A1 (en) * 2019-10-24 2021-04-29
JP7230232B2 (en) 2019-10-24 2023-02-28 ジャパンエレベーターサービスホールディングス株式会社 security camera equipment

Similar Documents

Publication Publication Date Title
JP6657167B2 (en) User detection system
JP5784051B2 (en) Elevator system
JP5317426B2 (en) Elevator equipment
JP5542661B2 (en) Sliding door device and elevator
JP5274386B2 (en) Elevator equipment
JP5687181B2 (en) Elevator car monitoring device
CN107055238A (en) Image processing apparatus
JP6199216B2 (en) Elevator monitoring device
JP2008120548A (en) Control device of elevator
JP6132690B2 (en) Elevator long object inspection device and elevator long object inspection method
JP6046283B1 (en) Elevator door system
JP6524294B1 (en) User detection system
JP2009220902A (en) Elevator control device
WO2018198224A1 (en) Height difference inspection device for elevators
JP6806414B2 (en) Image processing device and image processing method
JP2016124693A (en) In-car passenger detection device of elevator
JP2019198041A (en) Camera image inspection system and camera image inspection method
JP2010195537A (en) Monitoring device in car of elevator
JP6346881B2 (en) Image monitoring apparatus, image monitoring system, and image monitoring method
JP6687690B2 (en) Elevator control system
KR101917808B1 (en) An Elevator Video Monitoring System And An Elevator Video Monitoring System
JP2013203484A (en) Passenger conveyor
KR101802388B1 (en) An Elevator Black Box And A Method For Vedio Recoding
JP2008222314A (en) Crime prevention device for building using elevator
JP2011098787A (en) Elevator system