JP2015075879A - Safety control device and safety control system - Google Patents
Safety control device and safety control system Download PDFInfo
- Publication number
- JP2015075879A JP2015075879A JP2013211143A JP2013211143A JP2015075879A JP 2015075879 A JP2015075879 A JP 2015075879A JP 2013211143 A JP2013211143 A JP 2013211143A JP 2013211143 A JP2013211143 A JP 2013211143A JP 2015075879 A JP2015075879 A JP 2015075879A
- Authority
- JP
- Japan
- Prior art keywords
- safety
- image
- safety control
- area
- person
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Emergency Alarm Devices (AREA)
- Alarm Systems (AREA)
- Safety Devices In Control Systems (AREA)
- Image Analysis (AREA)
- Numerical Control (AREA)
Abstract
Description
この発明は、制御室・機械室等においてサーボやインバータ等のドライブ機器を安全な状態に維持する安全制御装置および安全制御システムに関する。 The present invention relates to a safety control device and a safety control system that maintain drive devices such as servos and inverters in a safe state in a control room, a machine room, and the like.
工場等のファンやポンプ、エレベータ、ビルの機械室、製造装置の駆動部分等には、サーボやインバータなどのパワーエレクトロニクスを用いたドライブ機器が使用されている。近年、この種のドライブ機器について安全のニーズが高まっている。このため、この種のドライブ機器には安全機能が標準装備されるようになっている。最近は、例えば単純な電源遮断機能だけでなく、減速停止機能、速度制限機能、位置固定機能等の様々な安全機能を搭載したドライブ機器が提供されている。 Drive devices using power electronics such as servos and inverters are used in fans and pumps in factories, elevators, machine rooms in buildings, and drive parts of manufacturing equipment. In recent years, safety needs have increased for this type of drive device. For this reason, this type of drive device is equipped with a safety function as a standard feature. Recently, for example, drive devices equipped with various safety functions such as a deceleration stop function, a speed limiting function, and a position fixing function as well as a simple power-off function have been provided.
ところで、工場等において安全を確保するための装置として、レーザ光や赤外線による安全カーテンや、踏まれたことを検知する安全マット、可視画像による人間の立ち入り有無のみを検出する安全センサが各種提供されている。しかしながら、これらの装置は、侵入等の有無のみを検知するだけある。従って、例えば危険な機器からの位置や距離に応じて適切な安全機能を働かせたい場合、これらの装置を複数台設ける必要がある。しかし、侵入等の有無を検知する装置を複数台設ける場合、さらに安全コントローラ等を用いて、それらの装置の監視を行う安全ロジックを設計することが必要になり、安全制御システムを構築する機器のコスト、設計のコストが増大する問題がある。 By the way, as a device for ensuring safety in factories and the like, various safety curtains using laser light and infrared rays, a safety mat for detecting that the vehicle has been stepped on, and safety sensors for detecting only human presence / absence based on visible images are provided. ing. However, these devices only detect the presence or absence of intrusion or the like. Therefore, for example, when it is desired to activate an appropriate safety function according to the position and distance from a dangerous device, it is necessary to provide a plurality of these devices. However, when installing multiple devices that detect the presence or absence of intrusion, it is necessary to design safety logic that monitors these devices using a safety controller, etc. There is a problem that costs and design costs increase.
この発明は以上のような事情に鑑みてなされたものであり、機器のコストや設計のコストの増大を招くことなく、人や物体が侵入した領域に応じて適切な安全機能を働かせることができる安全制御装置を提供することを目的としている。 The present invention has been made in view of the circumstances as described above, and an appropriate safety function can be activated according to an area where a person or an object has entered without incurring an increase in equipment cost or design cost. The object is to provide a safety control device.
この発明は、撮像機器により撮像された監視対象エリアの画像を複数の領域の画像に分割する画像領域分割手段と、前記画像領域分割手段により分割された各領域の画像に基づいて、各領域への人または物体の侵入を検知する立入検出手段と、前記立入検出手段により人または物体の侵入が検知された領域に基づいて、動作させる安全機能を選択する安全機能割当手段と、前記安全機能割当手段により選択された安全機能を示す安全信号を外部機器に送信する外部通信手段とを具備することを特徴とする安全制御装置を提供する。 The present invention relates to an image area dividing unit that divides an image of a monitoring target area imaged by an imaging device into an image of a plurality of areas, and to each area based on the image of each area divided by the image area dividing unit. On-site detection means for detecting an intrusion of a person or an object, a safety function assignment means for selecting a safety function to be operated based on a region where an intrusion of a person or an object is detected by the on-site detection means, and the safety function assignment There is provided a safety control device comprising an external communication means for transmitting a safety signal indicating a safety function selected by the means to an external device.
かかる発明によれば、人または物体の侵入した領域に基づいて、適切な安全機能を働かせることができる。 According to this invention, an appropriate safety function can be activated based on a region where a person or an object has entered.
なお、撮像機器を用いて安全制御を行う技術に関する文献として特許文献1および2がある。しかし、これらの文献に開示の技術は、本発明のように、監視対象エリアの画像を分割した画像に基づいて、各領域への人や物体の侵入を検知するものではない。
以下、図面を参照し、この発明の実施形態について説明する。 Embodiments of the present invention will be described below with reference to the drawings.
図1はこの発明の一実施形態による安全制御システム100の適用例を示す図である。図示の例では、電動機101およびこれを駆動するドライブ機器102の設置された機械室103の天井104に、本実施形態による安全制御システム100が設置されている。ここで、ドライブ機器102は、各種の安全機能を備えた安全関連機器である。図1に示す例において、安全制御システム100は、機械室103内の監視対象エリア105の撮像を行い、監視対象エリア105に人または物体が侵入したことを検知した場合に、その侵入領域に応じて、適切な安全機能を指示する安全信号を発生し、安全関連機器であるドライブ機器に供給するものである。
FIG. 1 is a diagram showing an application example of a
図1には機械室103の柵106を通過して監視対象エリア105内に侵入した作業者107が示されている。この作業者107はヘルメット108を着用している。本実施形態において安全制御システム100は、監視対象エリア105を区分した複数の領域のいずれに作業者107が侵入したかに応じて適切な種類の安全信号を発生する。この点に本実施形態の1つの特徴がある。
FIG. 1 shows an
図1に示す例では、機械室103の床110において監視対象エリア105が占める領域に模様マット111が敷かれている。ある好ましい態様において、模様マット111は、複数の領域に区分され、領域間で異なる着色が施される等、各領域を視覚により区別可能な境界を有している。図1に示す例において、安全制御システム100は、監視対象エリア105の画像をこの模様マット111の画像に現れる境界により複数の領域に区分する。なお、この領域分割の詳細については後述する。
In the example shown in FIG. 1, a
図2は本実施形態による安全制御システム100の構成を示すブロック図である。この安全制御システム100は、図1における監視対象エリア105の撮像を行う撮像機器1と、マイクロプロセッサにより各々構成された1または複数の安全制御装置2と、外部通信手段3とを有する。
FIG. 2 is a block diagram showing the configuration of the
撮像機器1と安全制御装置2は、例えば高速シリアル通信(SPI、I2C)等やパラレルバス通信を行うための画像信号伝送手段4を介して接続されている。ここで、安全制御装置2は、機能安全の冗長性を担保するため、単一で機能安全の要求を満たすマイクロプロセッサ、もしくは複数の一般的なマイクロプロセッサを用いる必要がある。
The
外部通信手段3は、例えばRS485に準拠した差動通信用部品、もしくはEthernet(登録商標)の通信ASIC(Application Specificated Integrated Circuit;特定用途向集積回路)等が使用される。この外部通信手段3は、安全制御装置2から受信した安全信号を伝送手段6により図1のドライブ機器102等の安全関連機器7に送信する。
As the external communication means 3, for example, a differential communication component compliant with RS485 or a communication ASIC (Application Specific Integrated Circuit) of Ethernet (registered trademark) or the like is used. The
複数の安全制御装置2を用いる安全制御システム100において、各安全制御装置2は処理結果伝送手段5を介して相互に接続されている。各安全制御装置2は、この処理結果伝送手段5を介して互いの安全判定処理の結果を交換し、相違がないことをクロスチェックする。また、各安全制御装置2は、外部通信手段3へ安全信号を送る際の経路の一部として、この処理結果伝送手段5を用いる。
In the
図3は安全制御装置2の機能構成を示すブロック図である。なお、図3では、安全制御装置2の機能の理解を容易にするため、撮像機器1、外部通信手段3および安全関連機器7が安全制御装置2とともに図示されている。
FIG. 3 is a block diagram showing a functional configuration of the
安全制御装置2において、画像取得部21は、撮像機器1の撮像部1Aが撮像した監視対象エリア105(図1参照)の画像を取得する手段である。画像異常検出部22は、画像取得部21によって取得される画像自体に問題がないかの確認処理を行う。この確認処理では、撮像機器1と安全制御装置2とを結ぶケーブルの断線や、故障による走査線の色飛び・変色、照明の状況によるホワイトアウト・ブラックアウトを検出する。画像領域分割部23は、画像取得部21によって取得された監視対象エリア105(図1参照)の画像を予め定めた複数の領域に分割する処理を行う。例を図4、図5に示す。立入検出部24は、画像領域分割部23により分割された複数の領域の画像のそれぞれに画像認識処理を施し、各領域への人や移動物体の侵入・立入りの有無を検出する。好ましい態様において立入検出部24は、アルゴリズムの異なる複数種類の画像認識処理を実行し、各画像認識処理において各領域への人や移動物体の侵入・立入りの有無の判定結果が同じであることを確認して、最終的な判定結果を求める。他の好ましい態様において立入検出部24は、アルゴリズムの異なる複数種類の画像認識処理を実行し、各画像認識処理において各領域への人や移動物体の侵入・立入りの有無の判定結果の論理和(OR)を最終的な判定結果とする。このようにして機能安全の冗長性を確保している。
In the
安全機能割当部25は、分割された複数の領域画像についての立入検出部24の処理結果に基づき、動作させるべき安全機能を選択する。この安全機能の選択を行うため、安全機能割当部25は、図6に例示するような対応表を記憶している。この対応表は、人等が侵入した領域と、その領域への侵入があった場合に働かせるべき安全機能とを対応付けたものである。図6に示す例では、領域1への侵入を検知した場合にはSTOという安全機能を、領域2への侵入を検知した場合にはSLSという安全機能を、…中略…、領域5への侵入を検知した場合にはSS1という安全機能を働かせる。処理結果出力部26は、安全機能割当部25が選択した安全機能を示す安全コマンドを他の安全制御装置2へ送信する。
The safety
安全制御システム100が複数の安全制御装置2を有する場合、それらの安全制御装置2の中の1つは外部通信手段3を介して安全関連機器7に接続されている。この外部通信手段3を介して安全関連機器7に接続された安全制御装置2の安全判定部27は、安全関連機器7に供給する安全コマンドを決定するための処理を行う。そのために、安全判定部27は、他の安全制御装置2の処理結果出力部26が送信した安全コマンドを受信する。
When the
ある好ましい態様において、安全判定部27は、安全制御装置2の安全機能割当部25が選択した安全機能を示す安全コマンドと、他の安全制御装置2の安全機能割当部25が選択した安全機能を示す安全コマンドとに基づいて安全信号生成部28に送る安全コマンドを生成する。そのための方法として各種のものが考えられるが、例えば複数の安全コマンドの中から多数決により安全信号生成部28に送る安全コマンドを選択してもよい。あるいは、複数の安全制御装置2から得られる安全コマンドの各種の組み合わせに対応付けて安全信号生成部28に送る安全コマンドを定義したテーブルを記憶し、このテーブルに従って安全信号生成部28に送る安全コマンドを決定してもよい。このように安全判定部27が複数の安全制御装置2により生成された安全コマンドに基づいて1つの安全コマンドを生成した場合、安全信号生成部28はその安全コマンドを示す安全信号を生成して外部通信手段3に送信する。
In a preferred aspect, the
他の好ましい態様において、安全判定部27は、安全制御装置2の安全機能割当部25が選択した安全機能を示す安全コマンドと、他の安全制御装置2の安全機能割当部25が選択した安全機能を示す安全コマンドとを安全信号生成部28に送る。安全信号生成部28は、安全判定部27から受け取った各安全コマンドを併合した安全信号を生成する。そして、この態様では、複数の安全制御装置2が生成した安全コマンドに基づいて1つの安全コマンドを生成する処理を安全関連機器7が実行する。
In another preferred embodiment, the
図7はこの場合の安全信号の構成を示す図である。図7に示すように、安全信号は安全制御システム100を構成する各安全制御装置2の安全機能割当部25が選択した安全機能を各々示す複数の安全コマンドを時間多重した信号である。図7に示す例では、1個の安全コマンドは8bitからなり、各bitは各々安全機能に対応している。そして、安全コマンドでは、安全機能割当部25が選択した安全機能に対応したbitが“1”とされ、他の安全機能に対応したbitが“0”とされる。図8は安全コマンドの各bitに対応した安全機能の例を示す図である。
FIG. 7 is a diagram showing the configuration of the safety signal in this case. As shown in FIG. 7, the safety signal is a signal obtained by time-multiplexing a plurality of safety commands each indicating the safety function selected by the safety
図3において、外部通信手段3は安全信号伝送部3Aを有する。この安全信号伝送部3Aは、安全信号生成部28が生成した安全信号を外部の安全関連機器7に送信する。その際、安全信号伝送部3Aは、安全信号生成部28から受け取った安全信号の形式をブラックチャネルと呼ばれる機能安全規格で規定された方法に従う形式に変更する。これは、信号の伝送路上で、断線やビット化け、データの入れ違い等によって安全信号が不正なものにならないようにするためである。このため、安全信号伝送部3Aは、例えばIEC61784−3で定義される機能安全通信フィールドバスシステムに定義されているような技術を適用することもできる。
In FIG. 3, the external communication means 3 has a safety signal transmission unit 3A. The safety
図9は安全信号伝送部3Aによる安全信号の送信に適用される伝送エラー防護策の例を示すものである。この例において安全信号伝送部3Aは、安全信号等のメッセージをフレーム化して送信する際、シーケンス番号とタイムスタンプを付加して送信する。また、安全信号伝送部3Aは、フレームを送った場合に、それに対する確認応答を送信先から受け取ることによりメッセージの整合性を確認する。また、安全信号伝送部3Aは、フレームを送った場合に規定時間の計時を行い、送信先からの確認応答を受信することなくタイムアウトとなった場合には、当該フレームの再送等の適切な処理を行う。また、安全信号伝送部3Aは、独自のコードを用いて送受信元の確認を行う。また、安全信号伝送部3Aは、データの送受信に当たって、改ざんを防ぐための冗長検査やCRCの付加を行う。さらに安全信号伝送部3Aは、複数チャネルを介して同一メッセージを受信して相互に比較する。また、安全信号伝送部3Aは、安全関連系の機器との通信では、非安全関連系の機器との通信と異なり、より厳密な方式によりデータの完全性を保証する。 FIG. 9 shows an example of a transmission error protection measure applied to transmission of a safety signal by the safety signal transmission unit 3A. In this example, the safety signal transmission unit 3A adds a sequence number and a time stamp when transmitting a message such as a safety signal in a frame and transmits the message. Further, when the safety signal transmission unit 3A sends a frame, the safety signal transmission unit 3A confirms the integrity of the message by receiving a confirmation response to the frame from the transmission destination. In addition, the safety signal transmission unit 3A measures a specified time when a frame is transmitted, and when a time-out occurs without receiving a confirmation response from the transmission destination, an appropriate process such as retransmission of the frame is performed. I do. Further, the safety signal transmission unit 3A confirms the transmission / reception source using a unique code. In addition, the safety signal transmission unit 3A performs redundancy inspection and CRC addition to prevent falsification when transmitting and receiving data. Further, the safety signal transmission unit 3A receives the same message via a plurality of channels and compares them with each other. Further, the safety signal transmission unit 3A guarantees data integrity by a stricter method in communication with safety-related devices, unlike communication with non-safety-related devices.
図10は本実施形態の動作を示すフローチャートである。以下、この図を参照し、本実施形態の動作を説明する。画像取得部21が撮像機器1から監視対象エリア105の画像を取得すると(ステップS1)、画像異常検出部22は、画像取得部21によって取得される画像自体に問題がないかの確認処理を行う(ステップS2)。この確認処理において異常が認められない場合、画像領域分割部23は、画像取得部21によって取得された監視対象エリア105の画像を予め定めた複数の領域に分割する処理を行う(ステップS3)。これらの領域は、図5に示すように重複領域を有していてもよいし、図4に示すように重複しなくてもよい。監視対象エリア105の画像をどのような領域に分割するかは、監視対象エリア105の状況に応じて適切に設定する。図1に示すように、監視対象エリア105に模様マット111を敷く場合、画像領域分割部23は、この模様マット111の画像に基づいて、監視対象エリア105の画像を分割する。
FIG. 10 is a flowchart showing the operation of this embodiment. The operation of this embodiment will be described below with reference to this figure. When the
立入検出部24は、選択された領域の画像は、機能安全の要求を満たすため、複数のアルゴリズムを用いて、選択された領域の画像から人・移動物体を検出する。具体的には次の通りである。
The
まず、立入検出部24は、画像領域分割部23によって分割された複数の領域画像の中の最初の画像を選択する(ステップS4)。次に立入検出部24は、選択した領域画像をワークエリアに読み込む(ステップS5)。次に立入検出部24は、複数種類のアルゴリズムによりワークエリア内の領域画像についての画像認識処理を実行して人・移動物体を検出する(ステップS6a〜S6c)。図示の例では、画像認識処理として、色判別(ステップS6a)、画像探索(ステップS6b)、動き検出(ステップS6c)を実行する。
First, the
そして、色判別(ステップS6a)、画像探索(ステップS6b)、動き検出(ステップS6c)の論理和をとり、これらの処理(ステップS6a〜S6c)のいずれかにより人・移動物体の侵入が検知されたか否かの結果を求める(ステップS7)。そして、人・移動物体の侵入が検知されたか否かの検出結果を一時格納する(ステップS8)。そして、画像領域分割部23によって分割された複数の領域画像の全てについてステップS5〜S8の処理を実行したか否かを判断し(ステップS9)、この判断結果が「NO」である場合は、次の領域を選択し(ステップS10)、ステップS5に戻る。 Then, a logical OR of color discrimination (step S6a), image search (step S6b), and motion detection (step S6c) is performed, and intrusion of a person / moving object is detected by any of these processes (steps S6a to S6c). The result of whether or not has been obtained is obtained (step S7). And the detection result of whether the invasion of the person / moving object is detected is temporarily stored (step S8). Then, it is determined whether or not the processing of steps S5 to S8 has been executed for all of the plurality of region images divided by the image region dividing unit 23 (step S9). If this determination result is “NO”, The next area is selected (step S10), and the process returns to step S5.
このように処理が進められることにより、画像領域分割部23によって分割された複数の領域画像の各々について色判別(ステップS6a)、画像探索(ステップS6b)、動き検出(ステップS6c)が実行され、分割された領域毎に、当該領域への人・移動物体の侵入が検知されたか否かの結果が一時格納される(ステップS7)。
By proceeding in this way, color discrimination (step S6a), image search (step S6b), and motion detection (step S6c) are executed for each of the plurality of region images divided by the image
ステップS9の判断結果が「YES」になると、安全機能割当部25は、分割された複数の領域画像についての立入検出部24の処理結果(ステップS7)に基づき、動作させるべき安全機能を選択する(ステップS10)。次に処理結果出力部26は、安全機能割当部25が選択した安全機能を示す安全コマンドを他の安全制御装置2へ送信する(ステップS12)。次に安全判定部27は、安全制御装置2の安全機能割当部25が選択した安全機能を示す安全コマンドと他の安全制御装置2の処理結果出力部26から受信した安全コマンドとに基づいて安全信号生成部28に送る安全コマンドを決定する(ステップS12)。次に安全信号生成部28は、安全判定部27から受け取った安全コマンドに基づいて安全信号を生成し、外部通信手段3は、安全信号生成部28が生成した安全信号をブラックチャネルを介して外部の安全関連機器7に送信する(ステップS13)。
When the determination result in step S9 is “YES”, the safety
次に色判別(ステップS6b)、画像探索(ステップS6b)、動き検出(ステップS6c)の各処理の詳細について説明する。図11は、この色判別(ステップS6b)、画像探索(ステップS6b)、動き検出(ステップS6c)の処理内容を示すものである。 Next, details of each process of color discrimination (step S6b), image search (step S6b), and motion detection (step S6c) will be described. FIG. 11 shows the processing contents of this color discrimination (step S6b), image search (step S6b), and motion detection (step S6c).
色判別(ステップS6a)では、事前に生成した色判別テーブルを用いる。この色判別テーブルは、例えば図12(a)に示すように、RGBカラー画像信号がとり得る信号値をR軸、G軸およびB軸からなるRGB三次元座標系の座標位置とみなし、検出対象物(例えば人や移動物体)のカラー画像が有する色に対応した座標位置を“1”、そうでない座標位置を“0”として表現したテーブルである。本実施形態では、安全制御システム100の稼働に先立って、外部のコンピュータ等により色判定テーブルColorTableが予め作成され、安全パラメータとして立入検出部24に記憶される(ステップS21)。R、G、Bの各信号が8bitからなる場合、色判別テーブルColorTableのサイズは256×256×256となる。そして、色判別(ステップS6a)では、図12(b)に示すように、領域画像の各画素のR、G、Bの信号値を用いた下記式(1)の演算を行い、RGB三次元座標系内の位置を示すインデクスiを求める(ステップS22)。
i=R*256*256+G*256+B ……(1)
In color discrimination (step S6a), a color discrimination table generated in advance is used. For example, as shown in FIG. 12A, this color discrimination table regards the signal values that can be taken by the RGB color image signal as the coordinate position of the RGB three-dimensional coordinate system composed of the R axis, the G axis, and the B axis. This is a table in which a coordinate position corresponding to a color included in a color image of an object (for example, a person or a moving object) is expressed as “1”, and a coordinate position other than that is expressed as “0”. In the present embodiment, prior to the operation of the
i = R * 256 * 256 + G * 256 + B (1)
そして、このインデックスiが示す座標位置に対応した色判定テーブルColorTableの要素ColorTable(i)が“1”であるか否かを判断する(ステップS23)。そして、この判断結果が「YES」である場合に領域画像に検出対象物の画像が含まれていると判定する(ステップS24)。また、この判断結果が「NO」である場合に領域画像に検出対象物の画像が含まれていないと判定する(ステップS25)。 Then, it is determined whether or not the element ColorTable (i) of the color determination table ColorTable corresponding to the coordinate position indicated by the index i is “1” (step S23). Then, when the determination result is “YES”, it is determined that the image of the detection target is included in the region image (step S24). If the determination result is “NO”, it is determined that the image of the detection target is not included in the region image (step S25).
以上説明した色判別によれば、床等に描かれた色と、人や移動物体の色の差異を色判別テーブルを用いて検出することができる。なお、この例では色判定テーブルのサイズを256×256×256としたが、色の分解能(精度)を粗くすることを許容すれば色判定テーブルのサイズを小さくすることできる。 According to the color discrimination described above, the difference between the color drawn on the floor or the like and the color of a person or a moving object can be detected using the color discrimination table. In this example, the size of the color determination table is set to 256 × 256 × 256. However, if the resolution (accuracy) of the color is allowed to be reduced, the size of the color determination table can be reduced.
色判別(ステップS6a)の処理には図11に示す2つの態様がある。第1の態様では、ヘルメット・作業着等の色、台車の色を検出対象とし、それらの色を示す色判定テーブルを利用する。そして、この態様では、画像領域分割部23により分割された各領域の画像において検出対象物の色が占める程度により人・移動物体の侵入があったか否かを判定する。第2の態様では、壁、床、静止物の色を検出対象とし、それらの色を示す色判定テーブルを利用する。そして、この態様では、画像領域分割部23により分割された各領域の画像において元の床等の色が占める程度により人・移動物体の侵入があったか否かを判定する。
There are two modes of color discrimination (step S6a) shown in FIG. In the first aspect, the color of the helmet / work clothes, etc. and the color of the bogie are detected, and a color determination table indicating these colors is used. In this aspect, it is determined whether or not a person / moving object has entered the image of each area divided by the image
図13(a)および(b)は、各々第2の態様および第1の態様の具体例を示している。図13(a)に示す例では、監視対象エリア105内の模様マット111が各々色の異なる領域301〜305に区分されている。そして、安全制御装置2は、領域301〜305の各々の色を示す色判定テーブルを記憶している。図示の例では、人の画像310が領域301と領域304に跨っている。この場合、立入検出部24は、領域301の領域画像についての色判別(ステップS6a)において、模様マット111の領域301の色に対応した色判定テーブルを利用し、領域301内の画素のうち模様マット111の領域301の色を持った画素の個数を求める。そして、この画素の個数が閾値以下である場合に領域301への人または移動物体の侵入があったと判定する。領域304の領域画像についての色判別(ステップS6a)に関しても同様である。
FIGS. 13A and 13B show specific examples of the second mode and the first mode, respectively. In the example shown in FIG. 13A, the
図13(b)に示す例では、模様マット111が監視対象エリア105に敷かれていない。このため、画像領域分割部23は、各領域の境界を示す情報を予め記憶し、この情報に基づいて監視対象エリア105の画像を各領域に分割する。そして、立入検出部24は、例えば作業者のヘルメットの色を示す色判定テーブルを利用することにより、選択した領域画像から人のカラー画像の色に当たる色と持った画素を検出する。そして、この検出した画素の個数が所定の閾値以上である場合に、当該領域に人が侵入したと判定する。
In the example shown in FIG. 13B, the
画像探索(ステップS6b)は、例えば予め定義した模様やマークのテンプレート画像を用いて、領域画像内からテンプレート画像に近い画像を探索する方法である。アルゴリズムとしてはk−NN法等がある。テンプレート画像は、色判別テーブルと同様、安全パラメータとして予め立入検出部24に書き込んでおく。
The image search (step S6b) is a method of searching for an image close to the template image from within the region image using, for example, a template image having a predefined pattern or mark. As an algorithm, there is a k-NN method or the like. Similar to the color discrimination table, the template image is previously written in the on-
画像探索(ステップS6b)の処理には図11に示す2つの態様がある。第1の態様では、ヘルメット・作業着等に施された模様やマーク、台車の模様やマークを検出対象とし、それらの模様やマークを示すターゲット画像を利用する。そして、この態様では、画像領域分割部23により分割された各領域の画像からターゲット画像が探索されるか否かにより人・移動物体の侵入があったか否かを判定する。第2の態様では、壁、床、静止物に施された模様やマークを検出対象とし、それらの模様やマークを示すターゲット画像を利用する。そして、この態様では、画像領域分割部23により分割された各領域の画像においてターゲット画像が探索されなかった場合に人・移動物体の侵入があったと判定する。
There are two modes of image search (step S6b) shown in FIG. In the first aspect, a pattern or mark applied to a helmet, work clothes, or the like, or a pattern or mark on a carriage is set as a detection target, and a target image indicating the pattern or mark is used. In this aspect, it is determined whether or not a person / moving object has intruded based on whether or not the target image is searched from the image of each area divided by the image
画像探索(ステップS6b)による人・移動物体の判定例を図14(a)および(b)に示す。図14(a)は第2の態様の具体例を示している。この例では、機械室の床面が領域311〜315に区切られており、各領域311〜315にはマークや模様が施されている。そして、立入検出部24は、領域311〜315のマークや模様を示すターゲット画像を各々記憶している。そして、立入検出部24は、例えば領域311の領域画像についての画像探索(ステップS6b)では、領域311の領域画像から領域311のターゲット画像を検索する。他の領域312〜315についての画像探索(ステップS6b)に関しても同様である。図14(a)に示す例では、領域311の画像中のマークの一部が人の画像310により遮られている。このため、領域311の画像についての画像探索では、領域311のターゲット画像が見つからない。このため、立入検出部24は、領域311に人または移動物体が侵入したと判定する。
FIGS. 14A and 14B show examples of human / moving object determination by image search (step S6b). FIG. 14A shows a specific example of the second mode. In this example, the floor surface of the machine room is divided into
図14(b)に示す例は第1の態様の具体例を示している。この例では、機械室の床面にはマークや模様が施されていない。その代りに作業員が着用するヘルメットに模様が施されている。そして、立入検出部24は、このヘルメットの模様を示すターゲット画像を記憶している。立入検出部24は、画像領域分割部23によって分割された各領域の画像についての画像探索(ステップS6b)において、領域画像からターゲット画像を探索する。そして、ある領域の領域画像からターゲット画像が見つかった場合、立入検出部24は、その領域に作業員が侵入したと判定する。
The example shown in FIG. 14B shows a specific example of the first aspect. In this example, the floor of the machine room is not marked or marked. Instead, a pattern is given to the helmet worn by the workers. And the
動き検出(ステップS6c)では、図11に示すように人や移動物体を検出対象とし、順次取り込まれた画像間の差分に基づいて、人・移動物体の侵入を検知する。図15はこの動き検出(ステップS6c)の具体例を示している。図15に示すように、動き検出(ステップS6c)では、現在の画像データの直前の画像データからの差分を求め、その差分値の発生した領域を検出する。画像領域分割部23によって分割された各領域の画像について、この動き検出(ステップS6c)を実行すると、各領域に人や移動物体等の動くものが存在しているか否かを判定することができる。また、これを複数回実施すると、物体が動いた軌跡を得ることができる。
以上が本実施形態の動作である。
In the motion detection (step S6c), as shown in FIG. 11, a person or a moving object is set as a detection target, and the intrusion of the person / moving object is detected based on a difference between sequentially captured images. FIG. 15 shows a specific example of this motion detection (step S6c). As shown in FIG. 15, in the motion detection (step S6c), a difference from the previous image data of the current image data is obtained, and a region where the difference value occurs is detected. When this motion detection (step S6c) is executed for the image of each area divided by the image
The above is the operation of this embodiment.
以上説明したように、本実施形態によれば、人または物体の侵入した領域に基づいて、適切な安全機能を働かせることができる。また、本実施形態では、複数台の撮像機器を用いないので、安全制御システムを構築する機器のコスト、設計のコストの増大を回避することができる。また、本実施形態によれば、アルゴリズムの異なる複数種類の画像認識処理により各領域への人や物体の侵入検知を行うので、領域への侵入の検知結果の信頼性を高めることができる。また、本実施形態によれば、複数の安全制御装置において選択された安全機能に基づいて、最終的に働かせる安全機能が決定されるので、安全機能の選択に関する信頼性を高めることができる。また、本実施形態によれば、安全コントローラを用いなくとも安全制御システムをドライブ機器に直接接続することができ、容易に複数の安全機能による安全制御システムを実現することができる。また、安全コントローラを用いる場合でも、必要なセンサ機器を減らすことができ、コストを低減することができる。 As described above, according to the present embodiment, an appropriate safety function can be activated based on a region where a person or an object has entered. Further, in the present embodiment, since a plurality of imaging devices are not used, it is possible to avoid an increase in the cost of the device for constructing the safety control system and the design cost. Further, according to the present embodiment, since the intrusion detection of a person or an object into each region is performed by a plurality of types of image recognition processing with different algorithms, the reliability of the detection result of the intrusion into the region can be improved. Further, according to the present embodiment, since the safety function to be finally actuated is determined based on the safety function selected by the plurality of safety control devices, it is possible to improve the reliability regarding the selection of the safety function. Further, according to the present embodiment, the safety control system can be directly connected to the drive device without using a safety controller, and a safety control system with a plurality of safety functions can be easily realized. Further, even when a safety controller is used, the necessary sensor devices can be reduced, and the cost can be reduced.
以上、この発明の一実施形態について説明したが、この発明には他にも実施形態が考えられる。例えば次の通りである。 Although one embodiment of the present invention has been described above, other embodiments are conceivable for the present invention. For example:
(1)監視対象エリアの中に例えば移動台車が頻繁に通過する通路が含まれている場合もあり得る。そのような場合において、画像領域分割部23は、図16に例示するように監視対象エリア105において通路以外の領域を複数の領域に分割してもよい。
(1) There may be a case where a passage through which a moving carriage frequently passes is included in the monitoring target area. In such a case, the image
(2)複数の安全制御装置2を備えた安全制御システム100において、安全関連機器7への安全信号の送信を行う安全制御装置2には各安全制御装置2が生成した安全コマンドが集まる。そこで、この安全制御装置2において、各安全制御装置2から受信した安全コマンドとその受信時刻のログをメモリに記録するようにしてもよい。この態様によれば、複数の安全制御装置2の中に、他の安全制御装置2が安全コマンドを送信しているのに安全コマンドを送信しない安全制御装置2や、安全コマンドの送信が遅れる安全制御装置2等、挙動が異常な安全制御装置2が含まれている場合に、その安全制御装置2をログから特定し、その安全制御装置2を修理することができる。
(2) In the
100……安全制御システム、102……ドライブ機器、101……電動機、103……機械室、104……天井、105……監視対象エリア、106……柵、107……作業者、108……ヘルメット、110……床、111……模様マット、1……撮像機器、2……安全制御装置、3……外部通信手段、6……伝送手段、7……安全関連機器、1A……撮像部、21……画像取得部、22……画像異常検出部、23……画像領域分割部、24……立入検出部、25……安全機能割当部、26……処理結果出力部、27……安全判定部、28……安全信号生成部、3A……安全信号伝送部。
DESCRIPTION OF
Claims (12)
前記画像領域分割手段により分割された各領域の画像に基づいて、各領域への人または物体の侵入を検知する立入検出手段と、
前記立入検出手段により人または物体の侵入が検知された領域に基づいて、動作させる安全機能を選択する安全機能割当手段と、
前記安全機能割当手段により選択された安全機能を示す安全信号を外部機器に送信する外部通信手段と
を具備することを特徴とする安全制御装置。 Image region dividing means for dividing an image of the monitoring target area imaged by the imaging device into images of a plurality of regions;
On-site detection means for detecting intrusion of a person or an object into each area based on the image of each area divided by the image area dividing means;
Safety function allocating means for selecting a safety function to be operated based on a region where an intrusion of a person or an object is detected by the on-line detection means;
An external communication unit that transmits a safety signal indicating the safety function selected by the safety function allocating unit to an external device.
The safety control device receives a processing result output means for transmitting the processing result of the safety function assignment means to another safety control device, a processing result of the safety function assignment means, and a processing result output means of another safety control device. The safety control system according to claim 10 or 11, further comprising: a safety determination unit that determines a safety function to be operated based on the processed result.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013211143A JP6221605B2 (en) | 2013-10-08 | 2013-10-08 | Safety control device and safety control system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013211143A JP6221605B2 (en) | 2013-10-08 | 2013-10-08 | Safety control device and safety control system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015075879A true JP2015075879A (en) | 2015-04-20 |
JP6221605B2 JP6221605B2 (en) | 2017-11-01 |
Family
ID=53000704
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013211143A Active JP6221605B2 (en) | 2013-10-08 | 2013-10-08 | Safety control device and safety control system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6221605B2 (en) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017034511A (en) * | 2015-08-03 | 2017-02-09 | 株式会社ブイ・アール・テクノセンター | Moving body detection system |
CN109508060A (en) * | 2019-01-28 | 2019-03-22 | 湖南晟凯信息科技有限公司 | A kind of Itellectualized uptown monitoring system |
CN110324579A (en) * | 2019-07-03 | 2019-10-11 | 西安通海瑞能电子科技有限公司 | The rotating ring video monitoring system and method for real time data and warning information superposition |
US10482322B2 (en) | 2017-05-17 | 2019-11-19 | Fanuc Corporation | Monitor apparatus for monitoring spatial region set by dividing monitor region |
CN111079731A (en) * | 2019-12-03 | 2020-04-28 | 中冶赛迪重庆信息技术有限公司 | Configuration system, method, equipment and medium based on safety helmet identification monitoring system |
CN112015134A (en) * | 2020-08-31 | 2020-12-01 | 安徽中烟工业有限责任公司 | Storage cabinet personal safety protection safety system and safety control method thereof |
CN117351684A (en) * | 2023-12-04 | 2024-01-05 | 成都蜀诚通信技术有限公司 | Early warning method of intelligent safety helmet and intelligent safety helmet |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5431163A (en) * | 1977-08-15 | 1979-03-07 | Hitachi Ltd | Robot controlling method for preventing collision of the robot with man |
JPS6490840A (en) * | 1987-09-30 | 1989-04-07 | Tokyo Keiki Kk | Obstacle detector for working vehicle |
JPH10320003A (en) * | 1997-05-01 | 1998-12-04 | Kuka Roboter Gmbh | Method and device for monitoring plant accompanying plural function units |
JPH11272965A (en) * | 1998-03-24 | 1999-10-08 | Secom Co Ltd | Image monitoring system |
JP2003105807A (en) * | 2001-09-27 | 2003-04-09 | Komatsu Ltd | Stop control method in intrusion-prohibitive region for service car and its controller |
JP2005153051A (en) * | 2003-11-25 | 2005-06-16 | Matsushita Electric Works Ltd | Safety device of working machine |
JP2006501487A (en) * | 2002-09-24 | 2006-01-12 | ピルツ ゲーエムベーハー アンド コー.カーゲー | Method and apparatus for protecting hazardous areas |
JP2006323831A (en) * | 2005-04-19 | 2006-11-30 | Omron Corp | Input device of safety unit |
JP2009014712A (en) * | 2007-06-07 | 2009-01-22 | Univ Of Electro-Communications | Object detecting device and gate device using the same |
JP2010231713A (en) * | 2009-03-30 | 2010-10-14 | National Institute Of Advanced Industrial Science & Technology | Safe position detecting apparatus with entry detecting function |
US7924164B1 (en) * | 2008-11-05 | 2011-04-12 | Brunswick Corporation | Method for sensing the presence of a human body part within a region of a machine tool |
JP2011076301A (en) * | 2009-09-30 | 2011-04-14 | Chugoku Electric Power Co Inc:The | Device for preventing operators from approaching charger and system for avoiding danger |
WO2012039277A1 (en) * | 2010-09-22 | 2012-03-29 | 新日本製鐵株式会社 | System for trespasser detection in area of restricted access, device for trespasser detection, method for trespasser detection in area of restricted access, and program thereof |
JP2013196058A (en) * | 2012-03-15 | 2013-09-30 | Fuji Electric Co Ltd | Gateway, system, and method |
-
2013
- 2013-10-08 JP JP2013211143A patent/JP6221605B2/en active Active
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5431163A (en) * | 1977-08-15 | 1979-03-07 | Hitachi Ltd | Robot controlling method for preventing collision of the robot with man |
JPS6490840A (en) * | 1987-09-30 | 1989-04-07 | Tokyo Keiki Kk | Obstacle detector for working vehicle |
JPH10320003A (en) * | 1997-05-01 | 1998-12-04 | Kuka Roboter Gmbh | Method and device for monitoring plant accompanying plural function units |
JPH11272965A (en) * | 1998-03-24 | 1999-10-08 | Secom Co Ltd | Image monitoring system |
JP2003105807A (en) * | 2001-09-27 | 2003-04-09 | Komatsu Ltd | Stop control method in intrusion-prohibitive region for service car and its controller |
JP2006501487A (en) * | 2002-09-24 | 2006-01-12 | ピルツ ゲーエムベーハー アンド コー.カーゲー | Method and apparatus for protecting hazardous areas |
JP2005153051A (en) * | 2003-11-25 | 2005-06-16 | Matsushita Electric Works Ltd | Safety device of working machine |
JP2006323831A (en) * | 2005-04-19 | 2006-11-30 | Omron Corp | Input device of safety unit |
JP2009014712A (en) * | 2007-06-07 | 2009-01-22 | Univ Of Electro-Communications | Object detecting device and gate device using the same |
US7924164B1 (en) * | 2008-11-05 | 2011-04-12 | Brunswick Corporation | Method for sensing the presence of a human body part within a region of a machine tool |
JP2010231713A (en) * | 2009-03-30 | 2010-10-14 | National Institute Of Advanced Industrial Science & Technology | Safe position detecting apparatus with entry detecting function |
JP2011076301A (en) * | 2009-09-30 | 2011-04-14 | Chugoku Electric Power Co Inc:The | Device for preventing operators from approaching charger and system for avoiding danger |
WO2012039277A1 (en) * | 2010-09-22 | 2012-03-29 | 新日本製鐵株式会社 | System for trespasser detection in area of restricted access, device for trespasser detection, method for trespasser detection in area of restricted access, and program thereof |
JP2013196058A (en) * | 2012-03-15 | 2013-09-30 | Fuji Electric Co Ltd | Gateway, system, and method |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017034511A (en) * | 2015-08-03 | 2017-02-09 | 株式会社ブイ・アール・テクノセンター | Moving body detection system |
US10482322B2 (en) | 2017-05-17 | 2019-11-19 | Fanuc Corporation | Monitor apparatus for monitoring spatial region set by dividing monitor region |
CN109508060A (en) * | 2019-01-28 | 2019-03-22 | 湖南晟凯信息科技有限公司 | A kind of Itellectualized uptown monitoring system |
CN110324579A (en) * | 2019-07-03 | 2019-10-11 | 西安通海瑞能电子科技有限公司 | The rotating ring video monitoring system and method for real time data and warning information superposition |
CN110324579B (en) * | 2019-07-03 | 2020-11-03 | 西安通海瑞能电子科技有限公司 | Dynamic loop video monitoring method for superposing real-time data and alarm information |
CN111079731A (en) * | 2019-12-03 | 2020-04-28 | 中冶赛迪重庆信息技术有限公司 | Configuration system, method, equipment and medium based on safety helmet identification monitoring system |
CN112015134A (en) * | 2020-08-31 | 2020-12-01 | 安徽中烟工业有限责任公司 | Storage cabinet personal safety protection safety system and safety control method thereof |
CN112015134B (en) * | 2020-08-31 | 2023-11-03 | 安徽中烟工业有限责任公司 | Personal safety protection safety system of storage cabinet and safety control method thereof |
CN117351684A (en) * | 2023-12-04 | 2024-01-05 | 成都蜀诚通信技术有限公司 | Early warning method of intelligent safety helmet and intelligent safety helmet |
CN117351684B (en) * | 2023-12-04 | 2024-02-13 | 成都蜀诚通信技术有限公司 | Early warning method of intelligent safety helmet and intelligent safety helmet |
Also Published As
Publication number | Publication date |
---|---|
JP6221605B2 (en) | 2017-11-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6221605B2 (en) | Safety control device and safety control system | |
JP6402469B2 (en) | Safety control device and safety control system | |
US10302251B2 (en) | Apparatus and method for safeguarding an automatically operating machine | |
EP3409629B1 (en) | Image analytics for elevator maintenance | |
US9122266B2 (en) | Camera-based monitoring of machines with mobile machine elements for collision prevention | |
CN111226178B (en) | Monitoring device, industrial system, method for monitoring and computer program | |
US9489730B2 (en) | Method and device for safeguarding a hazardous working area of an automated machine | |
JP6822069B2 (en) | Monitoring system, monitoring device, and monitoring method | |
KR101723283B1 (en) | Worker Behavior Based Safety Management System and Method | |
EP2300949B1 (en) | Video-based system and method of elevator door detection | |
JP6162736B2 (en) | Robot control system with a function to change the communication quality standard according to the distance between the machine and the portable wireless operation panel | |
JP6736307B2 (en) | Safety scanner, optical safety system and configuration support device for safety scanner | |
JP6633584B2 (en) | Robot system | |
KR20210019872A (en) | Wearable safety terminal and control method for accident prevention using the same | |
US20180029230A1 (en) | Safety management method and safety management system | |
KR20210013287A (en) | Inspection device with the function of presenting the internal condition of the elevator hoistway | |
KR20070065480A (en) | A monitoring system for subway platform using stereoscopic video camera | |
KR20200079001A (en) | Control system and method using integrated environmental monitoring | |
KR20160081736A (en) | Input Output Integration Control Apparatus for Safety Management System | |
KR20100010734A (en) | Monitoring system in railway station stereo camera and thermal camera and method thereof | |
JP6375728B2 (en) | Safety control device and safety control system | |
CN106097626A (en) | The monitoring system and method exported for combination detector and video camera | |
KR101837474B1 (en) | 3D virtual reality images system applied tunnel automatic controling system | |
KR100897914B1 (en) | Stereo vision based monitoring system in railway station and method thereof | |
KR20160086623A (en) | Surveillance Robot System for abnormal behavior detection |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160315 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170222 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170314 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170414 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170905 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170918 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6221605 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |