JP5064976B2 - Work safety monitoring system for construction and civil engineering vehicles - Google Patents
Work safety monitoring system for construction and civil engineering vehicles Download PDFInfo
- Publication number
- JP5064976B2 JP5064976B2 JP2007293427A JP2007293427A JP5064976B2 JP 5064976 B2 JP5064976 B2 JP 5064976B2 JP 2007293427 A JP2007293427 A JP 2007293427A JP 2007293427 A JP2007293427 A JP 2007293427A JP 5064976 B2 JP5064976 B2 JP 5064976B2
- Authority
- JP
- Japan
- Prior art keywords
- safety monitoring
- construction
- civil engineering
- work
- dangerous area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Component Parts Of Construction Machinery (AREA)
- Emergency Alarm Devices (AREA)
Description
本発明は、油圧ショベル等のように、旋回動作やアームの伸長度合いにより可動域が変化する建設・土木作業車両の作業安全監視システムに関する。 The present invention relates to a work safety monitoring system for a construction / civil engineering work vehicle, such as a hydraulic excavator, in which a movable range changes depending on a turning operation and an extension degree of an arm.
建設・土木作業車両の一例である油圧ショベルは、バケットを下向きにつけるバックホーの形式で運用されることが多いが、ブレーカー（圧搾空気、油圧等で操作される削岩機状のコンクリート破砕機）、リフティングマグネット（鋼材等の廃棄物分類用）、グラップル（クチバシ状の木造家屋解体、廃棄物分類用）等のアタッチメントに付け替え、その用途に合わせて運用されている。これは形状も大きさも違っており、作業車両の旋回等を行う際の可動半径が微妙に異なる。 Hydraulic excavators, which are examples of construction and civil engineering vehicles, are often operated in the form of backhoes with buckets facing downward, but breakers (rock drill-like concrete crushers operated by compressed air, hydraulic pressure, etc.) They are replaced with attachments such as lifting magnets (for waste classification such as steel) and grapples (for beak-like wooden house dismantling and waste classification), and are used in accordance with their use. This is different in shape and size, and the movable radius when turning the work vehicle is slightly different.
また、操作方法自体もクローラと呼ばれる無限軌道（キャタピラー）の操作方法は共通であるが、実際の現場で作業を行う場合の作業装置自体の操作方法は、例えば、JIS方式やコマツ方式や三菱方式等、機種により違いがあり不慣れな形式の場合、操作ミスにつながりかねない。 In addition, although the operation method itself is the same as the crawler crawler (caterpillar) operation method, the operation method of the work equipment itself when working on the actual site is, for example, JIS method, Komatsu method or Mitsubishi method If the format is different and unfamiliar depending on the model, it may lead to an operation error.
上記操作ミスが生じても、誰も居ない原野であれば問題は生じないが、色々な作業者が混在する作業現場では、わずかのミスが人命に関わる事故につながることもあり何らかの対策が必要とされていた。 Even if the above operation mistakes occur, there will be no problem if there is nobody in the wilderness. However, at work sites where various workers are mixed, a slight mistake may lead to an accident involving human lives, and some measures are necessary. It was said.
通常、それらバケット等のアタッチメントを付けた場合の旋回動作やその他の操作による危険範囲の認識は、操作者の経験と勘に頼るところが大きく、外部監督者による危険回避のための視認による確認作業や周囲で作業を行う作業者自身の注意等により、その危険性を回避していたのが現状であった。 Normally, the recognition of the danger range by turning operations and other operations with attachments such as buckets depends largely on the experience and intuition of the operator, and confirmation work by visual inspection for avoidance of danger by an external supervisor or The current situation is that the danger is avoided by the attention of the workers who work in the surrounding area.
このような状況に対し、各作業者全員に特殊な端末を所持させることで、各人の位置を把握し、これらの危険を回避しようとする土木工事現場における作業安全監視システムが提案されている。例えば、GPS等の位置情報を検出可能な手段及びそのデータや音声データの送受信機能を持ち、更に油圧ショベル側にある装置本体とのデータリンクが可能である様な機器を所持させ、これを用いての危険回避を図るようにしている（例えば、特許文献１参照）。
従来の土木工事現場における作業安全監視システムの場合、確かに、危険領域に作業者が存在することを人が介在すること無く機械的に情報を提供することが可能で有り、非常に有効な手段である。しかし、これは現行の技術では非常に高価な物となり、又、各作業者全員に配布することが必須であるため、普及に難があった。更に、未配布の作業者、見学者、突然の来訪者等が存在する場合、これらの人員にはその恩恵は無く、逆に機械制御を行っている作業者にとっては警告が無いことで安心して作業機械の操作を行ってしまい、却って安全性を損なうことになりかねない、という問題があった。 In the case of a conventional work safety monitoring system at a civil engineering work site, it is possible to provide information mechanically without human intervention, and it is an extremely effective means. It is. However, this is very expensive with the current technology, and it is essential to distribute it to all workers, which makes it difficult to spread. In addition, if there are undistributed workers, visitors, sudden visitors, etc., these personnel have no benefit, and conversely, there is no warning for workers who perform machine control. There was a problem that the work machine was operated and the safety could be lost.
本発明は、上記問題に着目してなされたもので、大規模なシステムを組むこと無く、作業車両にのみ取り付けることで完結する安価な構成でありながら、操作者による作業の安全確認に寄与することができる建設・土木作業車両の作業安全監視システムを提供することを目的とする。 The present invention has been made paying attention to the above problem, and contributes to the safety confirmation of the work by the operator while being an inexpensive configuration that is completed only by being attached to the work vehicle without forming a large-scale system. An object of the present invention is to provide a work safety monitoring system for construction and civil engineering vehicles.
上記目的を達成するため、本発明では、旋回動作やアームの伸長度合いにより可動域が変化する建設・土木作業車両の作業安全監視システムにおいて、
前記建設・土木作業車両に搭載され、作業車両周囲のカメラ映像データを取得するカメラと、
前記建設・土木作業車両に搭載され、操作者による操作ミスを想定した最大可動域を危険領域と判定する危険領域判定処理部と、前記カメラからのカメラ映像データに、判定された危険領域を重ね合わせるスーパーインポーズ処理部を有する安全監視コントローラと、
前記建設・土木作業車両の操作室に設定され、カメラ映像に危険領域を重畳した画像を内部警告表示として映し出す画像モニターと、
を備えたことを特徴とする。
In order to achieve the above object, in the present invention, in a work safety monitoring system for construction and civil engineering work vehicles in which the range of motion changes depending on the turning motion and the degree of arm extension,
A camera that is mounted on the construction / civil engineering work vehicle and acquires camera image data around the work vehicle;
A dangerous area determination processing unit which is mounted on the construction / civil engineering work vehicle and determines a maximum movable range assuming an operation error by an operator as a dangerous area, and the determined dangerous area is superimposed on the camera video data from the camera. A safety monitoring controller having a superimpose processing unit for matching;
An image monitor that is set in the operation room of the construction / civil engineering vehicle and displays an image in which a dangerous area is superimposed on the camera image as an internal warning display;
It is provided with.
よって、本発明の建設・土木作業車両の作業安全監視システムにあっては、安全監視コントローラの危険領域判定処理部において、操作者による操作ミスを想定した最大可動域が危険領域と判定される。そして、安全監視コントローラのスーパーインポーズ処理部において、建設・土木作業車両に搭載されたカメラからのカメラ映像データに、判定された危険領域が重ね合わせられる。そして、建設・土木作業車両の操作室に設定された画像モニターにおいて、カメラ映像に危険領域を重畳した画像が内部警告表示として映し出される。
すなわち、システム構成要素であるカメラと安全監視コントローラと画像モニターは、いずれも建設・土木作業車両に搭載されているため、作業車両にのみ取り付けることでシステムが完結する。そして、建設・土木作業車両の操作室内の操作者は、カメラ映像に危険領域を重畳した画像を映し出す画像モニターを見ることで、作業環境の中で危険領域が占める位置関係を視覚情報として常に得ることができる。この位置関係情報は、作業を安全に進めるため、あるいは、事故を未然に防ぐための操作者に対する内部警告となる。
この結果、大規模なシステムを組むこと無く、作業車両にのみ取り付けることで完結する安価な構成でありながら、操作者による作業の安全確認に寄与することができる。
Therefore, in the work safety monitoring system for a construction / civil engineering vehicle of the present invention, the maximum range of motion assuming an operation error by the operator is determined as the dangerous region in the dangerous region determination processing unit of the safety monitoring controller. Then, in the superimpose processing unit of the safety monitoring controller, the determined dangerous area is superimposed on the camera video data from the camera mounted on the construction / civil engineering work vehicle. Then, on the image monitor set in the operation room of the construction / civil engineering work vehicle, an image in which the dangerous area is superimposed on the camera image is displayed as an internal warning display.
That is, since the camera, the safety monitoring controller, and the image monitor, which are system components, are all mounted on the construction / civil engineering work vehicle, the system is completed by attaching only to the work vehicle. Then, an operator in the operation room of the construction / civil engineering work vehicle always obtains, as visual information, the positional relationship occupied by the dangerous area in the work environment by viewing an image monitor that displays an image in which the dangerous area is superimposed on the camera image. be able to. This positional relationship information serves as an internal warning for the operator in order to proceed safely or to prevent an accident.
As a result, it is possible to contribute to the safety confirmation of the work by the operator while being an inexpensive configuration that is completed only by being attached to the work vehicle without forming a large-scale system.
以下、本発明の建設・土木作業車両の作業安全監視システムを実現する最良の形態を、図面に示す実施例１および実施例２に基づいて説明する。 Hereinafter, the best mode for realizing a work safety monitoring system for construction and civil engineering vehicles according to the present invention will be described based on Example 1 and Example 2 shown in the drawings.
まず、構成を説明する。
図１は、実施例１の油圧ショベル（建設・土木作業車両の一例）の作業安全監視システムを示す制御系全体システム図である。図２は、実施例１の作業安全監視システムが適用された油圧ショベルの各部名称を説明するための概略側面図である。図３は、実施例１の作業安全監視システムが適用された油圧ショベルへのカメラの設定位置を説明するための平面図である。図４は、実施例１の作業安全監視システムが適用された油圧ショベルへのレーザー投光器の設定位置を説明するための斜視図である。
First, the configuration will be described.
FIG. 1 is an overall system diagram of a control system showing a work safety monitoring system for a hydraulic excavator (an example of a construction / civil engineering work vehicle) according to a first embodiment. FIG. 2 is a schematic side view for explaining the names of each part of the hydraulic excavator to which the work safety monitoring system of the first embodiment is applied. FIG. 3 is a plan view for explaining the setting position of the camera on the hydraulic excavator to which the work safety monitoring system according to the first embodiment is applied. FIG. 4 is a perspective view for explaining a setting position of a laser projector on a hydraulic excavator to which the work safety monitoring system of the first embodiment is applied.
実施例１の油圧ショベルＡの作業安全監視システムは、図１に示すように、カメラ１と、駆動系センサー２と、安全監視コントローラ３と、メッセージ発生用外部手動スイッチ４と、外部スピーカー５と、画像モニター６と、レーザー発光・駆動装置７と、強制発光用外部警告スイッチ８と、近赤外線レーザー投光器９（投光器）と、可視光レーザー投光器１０（投光器）と、を備えている。
As shown in FIG. 1, the work safety monitoring system for the hydraulic excavator A according to the first embodiment includes a
前記油圧ショベルＡは、図２に示すように、下部走行体２０と、上部旋回体２１と、操作室２２と、ブーム２３と、アーム２４と、アタッチメント（バケット）２５と、を備えている。
As shown in FIG. 2, the hydraulic excavator A includes a
前記カメラ１は、油圧ショベルＡの周囲映像（作業環境）を映し出すCCDカメラやCMOSカメラ等による撮像手段であり、第１カメラ１ａと、第２カメラ１ｂと、第３カメラ１ｃと、第４カメラ１ｄと、の４台のカメラを搭載している。これらのカメラ１ａ，１ｂ，１ｃ，１ｄの代表的な取り付け位置は、図３に示すように、下部走行体２０の前方側に第１カメラ１ａを取り付け、下部走行体２０の右側方側に第２カメラ１ｂを取り付け、下部走行体２０の左側方側に第３カメラ１ｃを取り付け、下部走行体２０の後方側に第４カメラ１ｄを取り付けている。これによって、作業によるブーム２３やアーム２４の旋回動作に対して、モニター画面の視界が変化しないで、油圧ショベルＡの全周囲を監視できるカメラシステムを構築している。
The
前記駆動系センサー２は、油圧ショベルＡの上部旋回体２１が下部走行体２０に対して旋回動作をした際、ブーム２３，アーム２４，アタッチメント２５の旋回移動による危険領域を判定するための入力情報を提供するセンサーである。この駆動系センサー２としては、油圧ショベルＡのブーム２３とアーム２４の各関節部の角度を検出する第１関節部角度センサー２ａ，第２関節部角度センサー２ｂ，第３関節部角度センサー２ｃと、上部旋回体２１に取り付けられた旋回部角度センサー２ｄと、油圧ショベルＡの作業姿勢を検出するジャイロセンサー２ｅ等を備えている。前記関節部角度センサー２ａ，２ｂ，２ｃは、パワーショベルの腕であるブーム２３のうち付け根に近い部分と、アーム２４のうち腕の先端に近い部分と、アタッチメント２５の取り付け関節部分に取り付けている。また、旋回部角度センサー２ｄは、上部旋回体２１が下部走行体２０に対してどの様な状態にあるかを検知する。
The
前記安全監視コントローラ３は、基本的に、入力されたカメラ映像へ画像処理を施し、その状況にあった映像を画像モニター６へ出力する。そして、カメラ映像中に判定された危険領域をスーパーインポーズし、これを操作者に警告する構成となっている。
この安全監視コントローラ３は、図１に示すように、画像メモリ３ａと、画像処理部３ｂと、画像認識処理部３ｃと、危険領域判定処理部３ｄと、画像処理用基本情報ROM３ｅと、スーパーインポーズ処理部３ｆと、表示制御系３ｇと、警告メッセージ発生器３ｈと、警告音発生器３ｉと、危険領域外部表示制御部３ｊと、を備えている。
The safety monitoring controller 3 basically performs image processing on the input camera image and outputs the image suitable for the situation to the image monitor 6. Then, the dangerous area determined in the camera video is superimposed and the operator is warned of this.
As shown in FIG. 1, the safety monitoring controller 3 includes an
前記画像処理部３ｂは、各カメラ１ａ，１ｂ，１ｃ，１ｄから入力されたカメラ映像データを一時的に出力画像メモリ３ａへ保存し、保存したカメラ映像データのうち、危険領域判定処理部３ｄにて判定された危険領域を含むカメラ映像データを、あたかも上空から見下ろした様に見える俯瞰映像データに視点変換する画像処理を施す。
The
前記画像認識処理部３ｃは、画像処理部３ｂにより生成された俯瞰映像データの危険領域内に作業者の存在を認識するための画像認識処理を行う。
The image
前記危険領域判定処理部３ｄは、油圧ショベルＡの各関節部に取り付けられた関節部角度センサー２ａ，２ｂ，２ｃや上部旋回体２１に取り付けられた旋回部角度センサー２ｄ等の情報と、画像処理用基本情報ROM３ｅにより、初期値として与えられている各パラメータ（アーム・ブームの長さカメラ取り付け角度等）の情報に基づき、現時点でのブーム２３やアーム２４やアタッチメント２５等の可動域を計算する。そして、計算された可動域から、万が一予期しない操作ミスにより旋回・バケットの掬い動作などが起こった場合の危険領域を判定する。
The dangerous area
前記スーパーインポーズ処理部３ｆは、前記画像処理部３ｂにより取得された油圧ショベルＡとその周囲をあらわす俯瞰映像データに、前記危険領域判定処理部３ｄにより判定された危険領域を重ね合わせるスーパーインポーズ処理を行う。そして、画像認識処理部３ｃにおいて、危険領域内に作業者等の存在が認識された場合には、危険領域に入り込んでいる作業者等を囲む特定枠（赤枠等）の表示をさらに重ね合わせる。
The
前記表示制御系３ｇは、前記スーパーインポーズ処理部３ｆからの映像データを画像モニター６に表示するためのモニター表示出力信号に変換する。
The
前記警告メッセージ発生器３ｈは、前記メッセージ発生用外部手動スイッチ４に対するスイッチON操作時であって、前記画像認識処理部３ｃにおいて危険領域内に作業者の存在が認識された場合、外部スピーカー５により音声や楽曲等を発するスピーカー駆動信号を出力する。
The
前記警告音発生器３ｉは、前記画像認識処理部３ｃにおいて危険領域内に作業者の存在が認識された場合、スイッチ操作等の条件を加えることなく、外部スピーカー５により警告音を発するスピーカー駆動信号を出力する。また、前記強制発光用外部警告スイッチ８に対するスイッチON操作時、外部スピーカー５により警告音を発するスピーカー駆動信号を出力する。
The
前記危険領域外部表示制御部３ｊは、前記強制発光用外部警告スイッチ８に対するスイッチOFF操作時、前記表示制御系３ｇからのモニター表示出力信号に基づき、常時監視するために危険領域を近赤外線レーザー投光器９からのレーザー照射により描画するレーザー発光走査駆動指令をレーザー発光・駆動装置７に出力する。また、前記強制発光用外部警告スイッチ８に対するスイッチON操作時、前記表示制御系３ｇからのモニター表示出力信号に基づき、注意喚起のために危険領域を可視光レーザー投光器１０からのレーザー発振により描画するレーザー発光走査駆動指令をレーザー発光・駆動装置７に出力する。
The dangerous area external
前記メッセージ発生用外部手動スイッチ４は、操作室２２内の操作者から手が届く位置に設定され、危険領域内に作業者の存在が認識された場合、点滅誘導に基づきON操作を促すことで、定められた音声・音楽・警告音を外部スピーカー５より出力する。
The external manual switch 4 for generating a message is set at a position that can be reached by an operator in the
前記外部スピーカー５は、油圧ショベルＡの操作室２２の外側上部位置等に設けられ、警告メッセージ発生器３ｈまたは警告音発生器３ｉからのスピーカー駆動信号により所定の音を外部の作業者に向けて発する。
The
前記画像モニター６は、油圧ショベルＡの操作室２２内部のうち、操作者から視認し易い位置に設けられる。
The image monitor 6 is provided inside the
前記レーザー発光・駆動装置７は、強制発光用外部警告スイッチ８がOFFである常時監視時、近赤外線レーザー投光器９に対しレーザー発光走査駆動指令を出力し、強制発光用外部警告スイッチ８がONである注意喚起時、可視光レーザー投光器１０に対しレーザー発光走査駆動指令を出力する。
The laser emission / driving device 7 outputs a laser emission scanning drive command to the near-
前記強制発光用外部警告スイッチ８は、危険領域内に作業者の存在が認識された場合、強制的にONへ切り替えることで、危険領域を可視光レーザー投光器１０からのレーザー発振により描画する。なお、手動操作により強制発光用外部警告スイッチ８のON/OFFも行うことができる。
The
前記可視光レーザー投光器９および前記近赤外線レーザー投光器１０は、油圧ショベルＡの高所数点から危険領域を描画できるように設けられる。具体的には、図４に示すように、操作室２２の外側上部の４箇所位置に、第１可視光レーザー投光器９ａおよび第１近赤外線レーザー投光器１０ａと、第２可視光レーザー投光器９ｂおよび第２近赤外線レーザー投光器１０ｂと、第３可視光レーザー投光器９ｃおよび第３近赤外線レーザー投光器１０ｃと、第４可視光レーザー投光器９ｄおよび第４近赤外線レーザー投光器１０ｄと、が取り付けられている。
The visible
図５は、実施例１の画像認識機能を有する安全監視コントローラ３にて実行される油圧ショベル作業の安全監視制御処理の流れを示すフローチャートであり、以下、各ステップについて説明する。 FIG. 5 is a flowchart showing the flow of the safety monitoring control process of the hydraulic excavator work executed by the safety monitoring controller 3 having the image recognition function according to the first embodiment. Each step will be described below.
ステップＳ51では、駆動系センサー２の初期値を取得し、ステップＳ52へ移行する。
ここで、駆動系センサー２からのセンサー値は、２つの記録エリア（「記録エリア１」と「記録エリア２」）へ代入される。記録エリア１には、初期値を除き、１サイクル前の駆動系センサー２の値が入る。記録エリア２には、初期値を除き、現在の駆動系センサー２の値が入る。
In step S51, the initial value of the
Here, the sensor value from the
ステップＳ52では、ステップＳ51での駆動系センサー２の初期値取得に続き、初期条件での危険領域を画像モニター６へ表示し、ステップＳ53へ移行する。
In step S52, following the acquisition of the initial value of the
ステップＳ53では、ステップＳ52での初期条件での危険領域のモニター表示に続き、強制発光用外部警告スイッチ８はOFFであるか否かを判断し、Yesの場合（強制発光用外部警告スイッチ８がOFF）はステップＳ56へ移行し、Noの場合（強制発光用外部警告スイッチ８がON）はステップＳ54へ移行する。
In step S53, following the monitor display of the dangerous area under the initial conditions in step S52, it is determined whether the
ステップＳ54では、ステップＳ53での強制発光用外部警告スイッチ８がONであるとの判断に続き、外部作業者への警告動作として、可視光レーザー投光器９を用い、レーザー発振による外部作業エリアに対し危険領域の描画動作を行い、ステップＳ55へ移行する。
In step S54, following the determination that the
ステップＳ55では、ステップＳ54での可視光レーザーによる危険領域の描画に続き、外部スピーカー５により外部の作業者へ警告音を鳴らし、ステップＳ56へ移行する。
In step S55, following the drawing of the dangerous area by the visible light laser in step S54, a warning sound is emitted to an external worker by the
ステップＳ56では、ステップＳ53での強制発光用外部警告スイッチ８がOFFであるとの判断、あるいは、ステップＳ55での警告音の吹鳴に続き、駆動系センサー２の現在値を取得し、ステップＳ57へ移行する。
In step S56, following the determination that the
ステップＳ57では、ステップＳ56での駆動系センサー２の現在値取得に続き、駆動系センサー２の現在値を記録エリア２へ代入し、ステップＳ58へ移行する。
In step S57, following the acquisition of the current value of the
ステップＳ58では、ステップＳ57での現在値の記録エリア２への代入に続き、記録エリア１の１サイクル前の駆動系センサー２の値と、記録エリア２へ代入された駆動系センサー２の現在値を比較し、駆動系センサー２の値に変化があるか否かを判断し、Yesの場合（アーム２４の伸長に変化有り）はステップＳ59へ移行し、Noの場合（アーム２４の伸長に変化無し）はステップＳ53へ戻る。
In step S58, following the substitution of the current value in the
ステップＳ59では、ステップＳ58での駆動系センサー２の値に変化があるとの判断に続き、記録エリア２のデータ値（現在値）に基づき、危険領域を演算し、ステップＳ60へ移行する。
In step S59, following the determination that the value of the
ステップＳ60では、ステップＳ59での危険領域の演算に続き、操作者への危険領域の表示として、カメラ映像データに基づく俯瞰映像に、演算された危険領域を重ね合わせてスーパーインポーズ化し、これを画像モニター６に表示し、ステップＳ61へ移行する。 In step S60, following the calculation of the dangerous area in step S59, as the display of the dangerous area to the operator, the calculated dangerous area is superimposed on the overhead view image based on the camera video data to be superimposed. The image is displayed on the image monitor 6, and the process proceeds to step S61.
ステップＳ61では、ステップＳ60での画像モニター６への表示に続き、駆動系センサー２の現在値を記憶（記録エリア１へ記録）し、ステップＳ62へ移行する。
In step S61, following the display on the image monitor 6 in step S60, the current value of the
ステップＳ62では、ステップＳ61での駆動系センサー２の現在値の記憶に続き、近赤外線レーザー投光器９から外部の危険作業エリアへ近赤外線レーザービームを照射し、ステップＳ63へ移行する。
In step S62, following the storage of the current value of the
ステップＳ63では、ステップＳ62での近赤外線レーザービームの照射に続き、作業者が危険エリアに存在するか否かを判断し、Yesの場合はステップＳ64へ移行し、Noの場合はステップＳ53へ移行する。
ここで、操作者の画像モニター６上では、危険エリアに居る外部作業者が、近赤外線レーザービームの照射により、鮮明に浮かび上がる。これを利用した画像認識処理（例えば、白い部分の形を認識する二値化処理等）により、作業者が危険エリアに存在するか否かを判断する。
In step S63, following the near-infrared laser beam irradiation in step S62, it is determined whether or not the worker is present in the danger area. If yes, the process proceeds to step S64, and if no, the process proceeds to step S53. To do.
Here, on the image monitor 6 of the operator, an external worker in the danger area emerges clearly by irradiation with the near infrared laser beam. Image recognition processing using this (for example, binarization processing for recognizing the shape of the white portion) determines whether or not the worker is present in the danger area.
ステップＳ64では、ステップＳ63での画像認識処理により作業者が危険エリアに存在するとの判断に続き、強制発光用外部警告スイッチ８を強制的にONにし、ステップＳ65へ移行する。
In step S64, following the determination that the worker is present in the danger area by the image recognition process in step S63, the forced light emission
ステップＳ65では、ステップＳ64での強制発光用外部警告スイッチ８のONに続き、メッセージ発生用外部手動スイッチ４はOFFであるか否かを判断し、Yesの場合（メッセージ発生用外部手動スイッチ４はOFF）はステップＳ67へ移行し、Noの場合（メッセージ発生用外部手動スイッチ４はON）はステップＳ66へ移行する。
In step S65, following the ON of the forced light emission
ステップＳ66では、ステップＳ65でのメッセージ発生用外部手動スイッチ４はONであるとの判断に続き、定められた音声・音楽・警告音を外部スピーカー５により出力し、ステップＳ67へ移行する。
In step S66, following the determination that the message generating external manual switch 4 is ON in step S65, the determined voice / music / warning sound is output by the
ステップＳ67では、ステップＳ65でのメッセージ発生用外部手動スイッチ４はOFFであるとの判断、あるいは、ステップＳ66での警告メッセージの発生に続き、ΔＴ時間が経過したか否かを判断し、Yesの場合（ΔＴ時間の経過後）はステップＳ53へ戻り、Noの場合（ΔＴ時間の経過前）はステップＳ67の判断を繰り返す。
ここで、ΔＴ時間は、設定可能な待ち時間（ウェイト時間）であり、初期設定はΔＴ＝０を想定する。
In step S67, it is determined that the external manual switch 4 for generating a message in step S65 is OFF, or it is determined whether ΔT time has elapsed following the generation of the warning message in step S66. In the case (after the lapse of ΔT time), the process returns to step S53, and in the case of No (before the lapse of ΔT time), the determination in step S67 is repeated.
Here, the ΔT time is a settable waiting time (wait time), and the initial setting assumes ΔT = 0.
次に、作用を説明する。
実施例１の油圧ショベルの作業安全監視システムにおける作用を、「危険領域に作業者等の存在が認識されない場合の作業安全監視作用」、「危険領域内に入り込んだ作業者等の存在認識作用」、「危険領域に作業者等の存在が認識された場合の作業安全監視作用」に分けて説明する。
Next, the operation will be described.
The actions in the work safety monitoring system of the hydraulic excavator of the first embodiment are “work safety monitoring action when the presence of an operator etc. is not recognized in the danger area”, “existence recognition action of the worker etc. entering the danger area” , “Work safety monitoring action when the presence of an operator or the like is recognized in the dangerous area” will be described separately.
［危険領域に作業者等の存在が認識されない場合の作業安全監視作用］
まず、安全監視制御処理の流れを説明する。
危険領域に作業者等の存在が認識されない場合、図５のフローチャートにおいて、ステップＳ51→ステップＳ52→ステップＳ53→ステップＳ56→ステップＳ57→ステップＳ58→ステップＳ59→ステップＳ60→ステップＳ61→ステップＳ62→ステップＳ63へと進む。そして、ステップＳ63にてNoとの判断に基づき、ステップＳ53へ戻り、駆動系センサー２の値に変化がない限り、ステップＳ53→ステップＳ56→ステップＳ57→ステップＳ58へと進む流れが繰り返される。そして、駆動系センサー２の値に変化があると、ステップＳ58からステップＳ59→ステップＳ60→ステップＳ61→ステップＳ62→ステップＳ63へと進み、再びステップＳ53へ戻る流れとなる。
[Operation safety monitoring when the presence of an operator is not recognized in the hazardous area]
First, the flow of the safety monitoring control process will be described.
If the presence of an operator or the like is not recognized in the dangerous area, in the flowchart of FIG. 5, step S51 → step S52 → step S53 → step S56 → step S57 → step S58 → step S59 → step S60 → step S61 → step S62 → step Proceed to S63. Then, based on the determination of No in step S63, the process returns to step S53, and the flow of steps S53 → step S56 → step S57 → step S58 is repeated unless the value of the
この場合、ステップＳ59では、記録エリア２のデータ値（現在値）に基づき、危険領域が演算される。この危険領域は、アーム２４・ブーム２３・上部旋回体２１・アタッチメント（バケット）２５等の関節部に取り付けられた各関節部角度センサー２ａ，２ｂ，２ｃの情報に基づき演算される。つまり、現時点で作業用のアーム２４の伸張度合いや下部走行体２０に対しての角度に基づき、仮に現時点で操作ミスや何らかの不具合が生じた時にバケット２５やアーム２４がぶつかり得る範囲を計算することとなる。腕の長さは、初期値として与えられているため、各関節部の角度が解れば簡単な三角関数でも旋回半径は求められる。これらの計算は、リアルタイムに計算され、危険領域は常時更新され表示される。
In this case, in step S59, the dangerous area is calculated based on the data value (current value) in the
次に、操作者への内部警告表示について説明する。
ステップＳ60では、操作者への危険領域の内部警告表示として、カメラ映像データに基づく俯瞰映像に、演算された危険領域を重ね合わせてスーパーインポーズ化され、これが画像モニター６に表示される。
Next, an internal warning display to the operator will be described.
In step S60, as an internal warning display of the dangerous area to the operator, the calculated dangerous area is superimposed on the overhead view image based on the camera video data to be superimposed, and this is displayed on the image monitor 6.
したがって、油圧ショベルＡの操作室２２内の操作者は、カメラ映像に危険領域を重畳した画像を映し出す画像モニター６を見ることで、作業環境の中で危険領域が占める位置関係を視覚情報として常に得ることができる。この位置関係情報は、作業を安全に進めるため、あるいは、事故を未然に防ぐための操作者に対する内部警告となり、操作者による作業の安全確認に寄与することができる。以下、画像モニター６への表示例を説明する。
Therefore, the operator in the
図６は、俯瞰映像にスーパーインポーズ機能を用いて危険領域を表示したモニター画面の一例を示す図である。
この図６では各カメラ映像を画像処理し、油圧ショベルＡとその周囲状況が、あたかも上空から見下ろした様に見える俯瞰図に変換して表示される。そして、この映像の油圧ショベルＡの周りに、スーパーインポーズ機能を用いて内側から、下部走行体２０の旋回運動による危険領域ａと、上部旋回体２１の旋回運動による危険領域ｂと、アーム伸長時の危険領域ｃと、が重畳表示されている。危険領域ａは、クローラ（キャタピラー）の駆動による巻き込み事故を想定した場合の線である。危険領域ｂは、上部旋回体２１自体が回転したときに突起物による危険領域を想定した場合の線である。危険領域ｃは、アーム２４が伸長し、かつ、上部旋回体２１が回転したことを想定したときの危険領域を示す線である。
FIG. 6 is a diagram illustrating an example of a monitor screen in which a dangerous area is displayed on a bird's-eye view video using a superimpose function.
In FIG. 6, each camera image is image-processed, and the excavator A and its surroundings are converted into a bird's eye view that looks as if looking down from above. Then, around the hydraulic excavator A of this image, the danger area a due to the turning motion of the lower traveling
図７は、実際の油圧ショベルＡの挙動と危険領域を示すイメージ図である。
この図７では、アーム２４とブーム２３が動くことにより、危険領域が、内側のアーム収納時の旋回軌道から現在の最先端部までの旋回軌道までの範囲にて変化することを表している。
FIG. 7 is an image diagram showing the actual behavior of the hydraulic excavator A and the dangerous area.
FIG. 7 shows that the dangerous area changes in the range from the turning trajectory when the inner arm is housed to the turning trajectory to the current state of the art by moving the
図８は、旋回による危険領域に加えバケット２５の掘削作業によるより危険度の高い領域を別枠で表示する一例を示す図である。
この図８では、危険度の高い領域を別枠で表示することで、危険領域のうち、危険度の高い領域を知ることができる。
FIG. 8 is a diagram illustrating an example in which a higher risk area due to excavation work of the
In FIG. 8, by displaying the high risk area in a separate frame, it is possible to know the high risk area of the risk areas.
次に、作業者等への外部警告表示について説明する。
ステップＳ62では、近赤外線レーザー投光器９から外部の危険作業エリアへ近赤外線レーザービームを照射する。
Next, external warning display for workers and the like will be described.
In step S62, a near infrared laser beam is irradiated from the near
上記画像モニター６への表示により、危険領域を油圧ショベルＡの操作者に伝達できることになるが、外部で作業を行っている者へはこの情報が伝わらない。特に、日中の様な明るい時は距離感も掴み易く、危険度は比較的低めであるが、夕闇が迫る薄暮の時間帯や夜間作業の際には、作業者の勘も鈍り危険度が増すことになる。 Although the danger area can be transmitted to the operator of the hydraulic excavator A by the display on the image monitor 6, this information is not transmitted to the person working outside. Especially when it is bright like the daytime, it is easy to grasp the sense of distance and the risk is relatively low, but in the twilight time when the dusk approaches and at night work, the operator's intuition becomes dull and the risk is low. Will increase.
そこで、実施例１では、薄暮の状況でも比較的視認性の良い可視光レーザー光線を用いて、外部作業現場にも危険領域を表示するようにしている。つまり、俯瞰映像上にスーパーインポーズされる危険領域データを、可視光レーザー投光器１０からのレーザー発光を用いて実際の工事現場の地表面に表示するものである。
Therefore, in the first embodiment, a dangerous area is displayed also on an external work site by using a visible light laser beam having relatively good visibility even in a twilight situation. That is, the dangerous area data superimposed on the overhead image is displayed on the ground surface of the actual construction site using the laser emission from the visible
したがって、油圧ショベルＡの近くで作業している作業者等は、可視光レーザー投光器１０からのレーザー発光を用いた危険領域の地表面表示を見ることで、工事現場の中で危険領域を視覚情報として常に得ることができる。この危険領域情報は、作業を安全に進めるため、あるいは、事故を未然に防ぐための作業者等に対する外部警告となり、作業者等による作業の安全確認に寄与することができる。以下、レーザー発光を用いた危険領域の地表面表示例を説明する。
Therefore, an operator working near the excavator A visually recognizes the dangerous area in the construction site by viewing the ground surface display of the dangerous area using laser emission from the visible
図９は、外部への危険領域の理想的な表示イメージを示す図である。図１０はレーザー光による危険領域の理想的な外部表示イメージを示す図である。図１１は、レーザー光による危険領域の現実的な外部表示イメージを示す図である。 FIG. 9 is a diagram showing an ideal display image of the dangerous area to the outside. FIG. 10 is a diagram showing an ideal external display image of the dangerous area by the laser beam. FIG. 11 is a diagram showing a realistic external display image of a dangerous area by a laser beam.
理想的には、図９および図１０に示す様に、作業車両の上空から車両の旋回軸を中心とした円が表示されることをイメージしている。しかし、実際には車体自身が影となり描画の際に死角を生じてしまうため、図１１に示す様に、作業車両の高所数点から危険領域を分割して描画・表示することになる。図１１では、近赤外線レーザー投光器９を設定した各々の点（実施例１では４点）から分割し、走査することで、危険領域を描画しようとしている。
Ideally, as shown in FIGS. 9 and 10, it is assumed that a circle centered on the turning axis of the vehicle is displayed from above the work vehicle. However, in actuality, the vehicle body itself becomes a shadow, and a blind spot is generated at the time of drawing. Therefore, as shown in FIG. 11, the dangerous area is divided and drawn and displayed from several high points of the work vehicle. In FIG. 11, the near-
この場合の描画は、危険領域の境界のみをレーザー光にて描画しても良いが、実施例１では、危険領域内を上下左右に空間的に走査し、危険領域全体を浮かび上がらせる形としている。また、強力なレーザー光であると、光が視覚負担を及ぼす可能性もあるため、実施例１では、通常は、非常に弱い光である近赤外線レーザー光線により走査を行い、危険領域内に外部作業者等が侵入してきたとき、つまり、危険喚起を要する場合にのみ、強い光による可視光レーザーを用いる形を取っている。 In this case, only the boundary of the dangerous area may be drawn with a laser beam, but in the first embodiment, the inside of the dangerous area is spatially scanned vertically and horizontally, and the entire dangerous area is lifted up. . In addition, in the case of a powerful laser beam, the light may cause a visual burden. Therefore, in the first embodiment, scanning is performed with a near-infrared laser beam, which is usually very weak light, and external work is performed in a dangerous area. It takes the form of using a visible light laser with strong light only when a person or the like invades, that is, when danger is required.
［危険領域内に入り込んだ作業者等の存在認識作用］
ステップＳ63では、作業者が危険エリアに存在するか否かを判断する。つまり、操作者の画像モニター６上では、危険領域に居る外部作業者が、近赤外線レーザービームの照射により、鮮明に浮かび上がる。これを利用した画像認識処理により、作業者等が危険領域に存在するか否かを判断する。
[Action of recognizing the presence of workers entering the dangerous area]
In step S63, it is determined whether the worker is present in the danger area. That is, on the operator's image monitor 6, an external worker who is in a dangerous area emerges clearly by irradiation with a near-infrared laser beam. By image recognition processing using this, it is determined whether or not an operator or the like is present in the dangerous area.
上記のように、危険領域内に作業者等の存在が認識できないとき、弱い光による近赤外線レーザー光を用いることで、光による視覚負担を軽減できて有用であるが、近赤外線レーザー光を用いる場合は次の利点も生じる。 As mentioned above, when the presence of an operator or the like in the hazardous area cannot be recognized, it is useful to reduce the visual burden due to light by using near-infrared laser light by weak light, but near-infrared laser light is used. In this case, the following advantages also arise.
前述の様に、斜め高所から照射される近赤外線レーザーは、平面である地面に対しては乱反射を除き、反射光は生じないため、CCDカメラで見ても知覚できない。しかし、危険領域内に入り込んだ人体の様な立体物に対しては、高さを持っている分、反射光を生じ、何らかの物体が危険領域内に入り込んだことが、より判り易くなってくる。 As described above, the near-infrared laser emitted from an oblique high place cannot be perceived even when viewed with a CCD camera because it does not generate reflected light except for irregular reflection on the flat ground. However, for a three-dimensional object such as a human body that has entered the danger area, the reflected light is generated as much as it is high, making it easier to understand that some object has entered the danger area. .
言い換えれば、薄暮・夜間では危険領域内の立体物のみが、浮かび上がることになり、人間の認識が非常に容易になると共に、操作者の安全操作に寄与できる。例えば、図１２に示すように、近赤外線で照らし出された作業者等は、近赤外線が照射された足のみが白くハッキリと浮かび上がることになる。 In other words, only the three-dimensional object in the danger area emerges at twilight / nighttime, which makes human recognition very easy and contributes to the safe operation of the operator. For example, as shown in FIG. 12, a worker or the like illuminated with near infrared light will clearly have white feet that are irradiated with near infrared light.
［危険領域に作業者等の存在が認識された場合の作業安全監視作用］
まず、安全監視制御処理の流れを説明する。
危険領域に作業者等の存在が認識された場合、図５のフローチャートにおいて、ステップＳ63からステップＳ64→ステップＳ65→ステップＳ67へと進む。そして、ウェイト時間を経過すると、ステップＳ67からステップＳ53→ステップＳ54→ステップＳ55→ステップＳ56→ステップＳ57→ステップＳ58→ステップＳ59→ステップＳ60→ステップＳ61→ステップＳ62→ステップＳ63へと進む。そして、メッセージ発生用外部手動スイッチ４のON操作を行うと、ステップＳ63からステップＳ64→ステップＳ65→ステップＳ66→ステップＳ67へと進む流れとなる。
[Work safety monitoring when a worker is recognized in the hazardous area]
First, the flow of the safety monitoring control process will be described.
When the presence of an operator or the like is recognized in the dangerous area, the process proceeds from step S63 to step S64 → step S65 → step S67 in the flowchart of FIG. When the wait time elapses, the process proceeds from step S67 to step S53 → step S54 → step S55 → step S56 → step S57 → step S58 → step S59 → step S60 → step S61 → step S62 → step S63. When the message generating external manual switch 4 is turned on, the flow proceeds from step S63 to step S64 → step S65 → step S66 → step S67.
次に、操作者への内部警告表示について説明する。
ステップＳ60では、危険領域に作業者等の存在が認識されると、操作者への危険領域の内部警告表示として、カメラ映像データに基づく俯瞰映像に、演算された危険領域と認識された作業者等を赤枠で囲んだ表示を重ね合わせてスーパーインポーズ化され、これが画像モニター６に表示される。
Next, an internal warning display to the operator will be described.
In step S60, when the presence of an operator or the like is recognized in the dangerous area, the worker recognized as the calculated dangerous area in the overhead view image based on the camera video data as an internal warning display of the dangerous area to the operator. Are superimposed on a display surrounded by a red frame, and the result is displayed on the image monitor 6.
したがって、油圧ショベルＡの操作室２２内の操作者は、カメラ映像に危険領域と侵入者表示を重畳した画像を映し出す画像モニター６を見ることで、作業環境の中で危険領域のどの位置に侵入者が存在しているかを視覚情報として得ることができる。この侵入者の位置情報は、作業を安全に進めるため、あるいは、事故を未然に防ぐための操作者に対する内部警告となり、操作者による作業の安全確認に寄与することができる。
Therefore, the operator in the
次に、作業者等への外部警告表示について説明する。
ステップＳ54では、危険領域に作業者等の存在が認識されると、近赤外線レーザー発光に代え、可視光レーザー投光器１０から外部の危険作業エリアへ可視光レーザー発振による描画動作が行われる。
Next, external warning display for workers and the like will be described.
In step S54, when the presence of an operator or the like is recognized in the dangerous area, a drawing operation by visible light laser oscillation is performed from the visible
したがって、危険領域内に入り込んだ作業者等は、可視光レーザー投光器１０からの視認性が高い強い光による可視光レーザーを用いた危険領域の描画表示を見ることで、直ちに危険領域から脱出すべきことを視覚情報として得ることができる。この危険領域の描画表示情報は、作業を安全に進めるため、あるいは、事故を未然に防ぐための作業者等に対する外部警告となり、作業者等による作業の安全確認に寄与することができる。
Therefore, an operator or the like who has entered the danger area should immediately escape from the danger area by seeing a drawing display of the danger area using the visible light laser with strong light having high visibility from the visible
次に、作業者等への警告音発生について説明する。
ステップＳ55では、危険領域に作業者等の存在が認識されると、外部スピーカー５から警告音が鳴らされる。
Next, generation of a warning sound for an operator or the like will be described.
In step S55, when the presence of an operator or the like is recognized in the dangerous area, a warning sound is emitted from the
したがって、危険領域内に入り込んでいることを知らずに熱心に作業を継続している作業者等に対し、外部スピーカー５から警告音により、直ちに危険領域から脱出すべきことを聴覚情報として得ることができる。この聴覚情報は、作業を安全に進めるため、あるいは、事故を未然に防ぐための作業者等に対する視覚情報を補助する外部警告となり、作業者等による作業の安全確認に寄与することができる。
Therefore, it is possible to obtain as auditory information that a worker who is continually working without knowing that he / she has entered the dangerous area should immediately escape from the dangerous area by a warning sound from the
さらに、外部スピーカー５から警告音を発しても、工事現場の騒音等により、作業者等に対し危険領域に入っていることを知らせることができない場合には、操作者が手動によりメッセージ発生用外部手動スイッチ４をON操作すると、ステップＳ66において、定められた音声・音楽・警告音が外部スピーカー５から発せられる。
In addition, even if a warning sound is emitted from the
したがって、作業者等への外部警告として、レーザー光による描画表示、警告音、メッセージ音というように、３通りの外部警告を行うことで、確実に作業者等に危険領域から脱出すべきことを伝えることができる。 Therefore, as external warnings to workers etc., it is necessary to make sure that workers should escape from the danger area by performing three types of external warnings, such as drawing display with laser light, warning sound, and message sound. I can tell you.
そして、実施例１の油圧ショベルＡの作業安全監視システムでは、下記に述べるようなメリットを期待することができる。
・カメラシステムからの映像に危険領域を表示するため、各作業者の存在を認知した時に、危険な範囲に存在するか否かが、直感的に判り易く、危険回避が容易である。
・外部作業者、監督者に何処までが危険領域か、現在のアタッチメントやブーム・アームの伸長状態で旋回した場合の危険領域が一目で判るため、危険領域に作業者が入るミスを防げる、又、重機操作者への注意喚起を促せる。
・近赤外線を用いて、常時監視を行い、注意喚起の場合のみ外部作業者へレーザー光による危険領域の描画を用いることで、薄暮・夜間の作業の安全効率UPが図れる。
・各作業者一人一人へ、端末を配布すること無く、油圧ショベルの様な重機一台ずつで完結するシステムを組めるため、コストが下がり普及が容易である。
・人体の画像認識との組み合わせにて、より安全なシステムへの発展が望める。
In the work safety monitoring system for the hydraulic excavator A according to the first embodiment, the following advantages can be expected.
Since the danger area is displayed on the video from the camera system, it is easy to intuitively know whether or not the worker is in the dangerous area when the existence of each worker is recognized, and the danger avoidance is easy.
・ It is possible to tell at a glance how far the outside worker and supervisor are at the danger area, and the danger area when turning with the extension of the current attachment or boom arm, which prevents the operator from entering the danger area. , Can call attention to heavy equipment operators.
-By using near-infrared monitoring, and by drawing a dangerous area with laser light to external workers only when alerting, the safety efficiency of twilight / nighttime work can be improved.
-Since a system that can be completed with one heavy machine such as a hydraulic excavator can be assembled without distributing terminals to each worker, costs are reduced and it is easy to spread.
・ It can be expected to develop a safer system by combining with human image recognition.
次に、効果を説明する。
実施例１の油圧ショベルＡの作業安全監視システムにあっては、下記に列挙する効果を得ることができる。
Next, the effect will be described.
In the work safety monitoring system for the hydraulic excavator A according to the first embodiment, the following effects can be obtained.
(1) 旋回動作やアームの伸長度合いにより可動域が変化する油圧ショベルＡの作業安全監視システムにおいて、前記油圧ショベルＡに搭載され、作業車両周囲のカメラ映像データを取得するカメラ１と、前記油圧ショベルＡに搭載され、操作者による操作ミスを想定した最大可動域を危険領域と判定する危険領域判定処理部３ｄと、前記カメラ１からのカメラ映像データに、判定された危険領域を重ね合わせるスーパーインポーズ処理部３ｆを有する安全監視コントローラ３と、前記油圧ショベルＡの操作室２２に設定され、カメラ映像に危険領域を重畳した画像を内部警告表示として映し出す画像モニター６と、を備えたため、大規模なシステムを組むこと無く、作業車両にのみ取り付けることで完結する安価な構成でありながら、操作者による作業の安全確認に寄与することができる。
(1) In a work safety monitoring system for a hydraulic excavator A in which a movable range changes depending on a turning operation or an extension degree of an arm, the
(2) 前記カメラ１は、前記油圧ショベルＡの可動域が変化しても視界が変化しない下部走行体２０に複数取り付けられ、前記安全監視コントローラ３は、前記複数のカメラ１ａ，１ｂ，１ｃ，１ｄからのカメラ映像データを、前記油圧ショベルＡとその周囲を真上から見下ろした俯瞰映像データに視点変換する画像処理部３ｂを有するため、油圧ショベルＡの可動域が変化してもモニター画面の視界変化が無く、カメラシステムからの俯瞰映像に危険領域を重畳した操作者が視認し易い内部警告表示を行うことができる。
(2) A plurality of the
(3) 前記油圧ショベルＡによる旋回動作やアームの伸長度合いによる可動域の変化を検出する駆動系センサー２を設け、前記安全監視コントローラ３は、前記危険領域判定処理部３ｄにおいて、前記駆動系センサー２からの検出値が変化する毎に危険領域を判定し、前記スーパーインポーズ処理部３ｆにおいて、カメラ映像に重畳する危険領域をリアルタイムに更新して表示するため、作業中に危険領域が変化しても応答良く追従して変化する危険領域をモニター画面に重畳表示することができる。
(3) A
(4) 前記油圧ショベルＡに、車両外部の作業者等が視認できる光線を用いて領域表示する投光器９，１０を設け、前記安全監視コントローラ３は、前記危険領域判定処理部３ｄにより危険領域が判定されると、前記画像モニター６による内部警告表示と共に、前記投光器９，１０により危険領域を外部警告表示するため、車両内部の操作者への内部警告表示と車両外部の作業者等への外部警告表示により、操作者と車両外部の作業者等の両方への警告表示により、操作者のみへの警告表示に比べ、より高い作業安全性の確保に寄与することができる。
(4) The hydraulic excavator A is provided with
(5) 前記投光器９，１０は、投光ビームにより危険領域内を上下左右に素早く走査することにより、危険領域の空間を描画表示するため、車両外部の作業者等に対し視認性の高い外部警告表示を行うことができる。
(5) Since the
(6) 前記近赤外線レーザー投光器９は、近赤外線レーザー光を照射するものであり、前記安全監視コントローラ３は、危険領域に作業者等が入ってきた場合、近赤外線レーザー光が照射された部分が白く浮かび上がることを利用し、これを映し出すカメラ画像データから外部作業者等の存在を認識する画像認識処理部３ｃを有するため、危険領域に作業者等が入ってきた場合、応答良く、かつ、確実に危険領域に作業者等が存在することを検知することができる。
(6) The near-
(7) 前記安全監視コントローラ３のスーパーインポーズ処理部３ｆは、前記画像認識処理部３ｃにより外部作業者等の存在が認識された場合、外部作業者等をあらわす侵入者表示を重畳し、前記画像モニター６は、カメラ映像に危険領域と侵入者表示を重畳した画像を内部警告表示として映し出すため、危険領域に作業者等が入ってきた場合、操作者に応答良く危険領域に作業者等が存在することを知らせることができると共に、作業者等の行動をモニター画面上で確認することができる。
(7) The
(8) 前記安全監視コントローラ３は、前記画像認識処理部３ｃにより外部作業者等の存在が認識されると、近赤外線レーザー光に代え、近赤外線レーザー光より視認性の高い可視光レーザーにより危険領域を外部警告表示するため、危険領域に入ってきた外部作業者等に対し、素早く危険領域から脱出することを促すことができる。
(8) When the presence of an external worker or the like is recognized by the image
(9) 前記安全監視コントローラ３は、前記画像認識処理部３ｃにより外部作業者等の存在が認識されると、前記画像モニター６による内部警告表示と前記可視光レーザー投光器１０による外部警告表示に加え、外部スピーカー５により警告音を発生するため、誤って危険領域に入ってきた外部作業者等に対し、視覚情報と聴覚情報とも併用により素早く危険領域から脱出することを促すことができる。
(9) When the presence of an external worker or the like is recognized by the image
実施例２は、実施例１が危険領域内への侵入者を認識する画像認識機能を有するのに対し、画像認識機能を有さない例である。 The second embodiment is an example in which the first embodiment has an image recognition function for recognizing an intruder in a dangerous area, but does not have an image recognition function.
まず、構成を説明する。
図１４は、実施例２の油圧ショベル（建設・土木作業車両の一例）の作業安全監視システムを示す制御系全体システム図である。
First, the configuration will be described.
FIG. 14 is a control system overall system diagram illustrating a work safety monitoring system of a hydraulic excavator (an example of a construction / civil engineering work vehicle) according to a second embodiment.
実施例２の油圧ショベルＡの作業安全監視システムは、図１４に示すように、カメラ１と、駆動系センサー２と、安全監視コントローラ３と、画像モニター６と、レーザー発光・駆動装置７と、強制発光用外部警告スイッチ８と、近赤外線レーザー投光器９（投光器）と、可視光レーザー投光器１０（投光器）と、を備えている。
As shown in FIG. 14, the work safety monitoring system for the hydraulic excavator A according to the second embodiment includes a
前記安全監視コントローラ３は、図１４に示すように、画像メモリ３ａと、画像処理部３ｂと、危険領域判定処理部３ｄと、画像処理用基本情報ROM３ｅと、スーパーインポーズ処理部３ｆと、表示制御系３ｇと、危険領域外部表示制御部３ｊと、を備えている。
As shown in FIG. 14, the safety monitoring controller 3 includes an
すなわち、作業安全監視システムから、メッセージ発生用外部手動スイッチ４と外部スピーカー５を省略した点で実施例１とは相違する。また、安全監視コントローラ３から、画像認識処理部３ｃと警告メッセージ発生器３ｈと警告音発生器３ｉを省略した点で実施例１とは相違する。なお、他の構成は、実施例１と同様であるので、各構成の説明を省略する。
That is, this embodiment differs from the first embodiment in that the message generating external manual switch 4 and the
図１５は、実施例２の画像認識機能の無い安全監視コントローラ３にて実行される油圧ショベル作業の安全監視制御処理の流れを示すフローチャートである。 FIG. 15 is a flowchart illustrating the flow of the safety monitoring control process of the hydraulic excavator work executed by the safety monitoring controller 3 without the image recognition function of the second embodiment.
ステップＳ151〜ステップＳ154の各ステップは、図５に示すフローチャートのステップＳ51〜ステップＳ54の各ステップと対応する。ステップＳ156〜ステップＳ162の各ステップは、図５に示すフローチャートのステップＳ56〜ステップＳ62の各ステップと対応する。ステップＳ167は、図５に示すフローチャートのステップＳ67と対応する。したがって、図１５の各ステップについての説明を省略する。 Steps S151 to S154 correspond to steps S51 to S54 in the flowchart shown in FIG. Steps S156 to S162 correspond to steps S56 to S62 in the flowchart shown in FIG. Step S167 corresponds to step S67 in the flowchart shown in FIG. Therefore, the description of each step in FIG. 15 is omitted.
実施例２の油圧ショベルＡの作業安全監視システムの作用としては、実施例１の「危険領域に作業者等の存在が認識されない場合の作業安全監視作用」と同様の作用を示す。 As an operation of the work safety monitoring system of the hydraulic excavator A of the second embodiment, an operation similar to the “work safety monitoring operation when the presence of an operator or the like is not recognized in the dangerous area” of the first embodiment is shown.
また、実施例２の油圧ショベルＡの作業安全監視システムの効果としては、実施例１の(1)〜(5)に列挙した効果を奏する。 Further, as the effects of the work safety monitoring system of the hydraulic excavator A of the second embodiment, the effects listed in (1) to (5) of the first embodiment are exhibited.
以上、本発明の建設・土木作業車両の作業安全監視システムを実施例１，２に基づき説明してきたが、具体的な構成については、これらの実施例に限られるものではなく、特許請求の範囲の各請求項に係る発明の要旨を逸脱しない限り、設計の変更や追加等は許容される。 As described above, the work safety monitoring system for the construction / civil engineering vehicle according to the present invention has been described based on the first and second embodiments. However, the specific configuration is not limited to these embodiments, and the claims are not limited thereto. Modifications and additions of the design are permitted without departing from the spirit of the invention according to the claims.
実施例１，２では、各カメラ映像を画像処理し、あたかも上空から見下ろした様に見える俯瞰図に変換していた例を示したが、例えば、図１３に示すように、通常のカメラ映像をそのまま流用し、通常のカメラ映像に、そのレンズ歪や取り付け位置等に考慮したスーパーインポーズを計算し、危険領域を重畳表示するようにしても良い。 In the first and second embodiments, each camera image is image-processed and converted into an overhead view that looks as if it is looked down from above. For example, as shown in FIG. It may be used as it is, and a superimpose in consideration of the lens distortion, the mounting position, etc. may be calculated on a normal camera image, and the dangerous area may be superimposed and displayed.
実施例１，２では、便宜的に４個のカメラを用いたシステムの例を示した。しかし、カメラの個数や設置場所に関しては、これを問わないものとする。また、カメラは下部走行体に取り付けられ、モニター画面の視界が変化しないものとしての説明を行っているが、上部旋回体にカメラを装着する形でも何ら問題はない。 In the first and second embodiments, an example of a system using four cameras is shown for convenience. However, this does not matter regarding the number of cameras and the installation location. In addition, the description is given on the assumption that the camera is attached to the lower traveling body and the field of view of the monitor screen does not change, but there is no problem even if the camera is mounted on the upper swing body.
実施例１，２では、危険領域の表示を、スーパーインポーズによる線表示する例を示した。しかし、危険領域の全体を半透明色によって重畳表示しても良い。また、危険領域の危険度に合わせ段階的に表示色を変える等の工夫を行っても良い。 In the first and second embodiments, an example is shown in which the danger area is displayed as a line by superimposition. However, the entire dangerous area may be superimposed and displayed in a translucent color. Further, it may be devised to change the display color step by step according to the danger level of the dangerous area.
実施例１，２では、外部への警告表示として、近赤外線レーザーと可視光レーザーを用いる例を示した。しかし、この例に限られるものではなく、必要に応じてレーザーポインタの様な低出力レーザーやハロゲン投光器の様な昼間でも判り易い光源を用いて、危険エリアを照らす投光機能を持つ表示装置を用いても良い。 In Examples 1 and 2, an example using a near-infrared laser and a visible light laser as a warning display to the outside is shown. However, the present invention is not limited to this example. If necessary, a display device having a light projection function for illuminating a hazardous area using a low-power laser such as a laser pointer or a light source that can be easily understood even in the daytime such as a halogen projector. It may be used.
実施例１，２では、関節部角度センサーと旋回部角度センサーとジャイロセンサーを用いて危険領域を判定する例を示した。しかし、各センサー情報と危険領域の関係として、実際には、各アームの角度のみならず、車体自体の動揺具合、車両水平角の異常による横転の危険性、アタッチメントの変更等による重量バランスのミスマッチの動揺等、様々な外部要因があるため、これらを考慮してセンサーを増やし、危険領域の判定精度を高めても良い。 In the first and second embodiments, an example in which a dangerous area is determined using a joint part angle sensor, a turning part angle sensor, and a gyro sensor has been described. However, as the relationship between each sensor information and the dangerous area, in reality, not only the angle of each arm, but also the swinging condition of the car body itself, the risk of rollover due to abnormal vehicle horizontal angle, the weight balance mismatch due to the attachment change etc. Since there are various external factors such as fluctuations, the number of sensors may be increased in consideration of these factors, and the determination accuracy of the dangerous area may be increased.
実施例１では、人間を画像処理データから分離認識し、危険領域に存在する場合に、その映像を赤枠などで囲み操作者に注意喚起を行う例を示したが、操作室内に設定したスピーカーからの音声を用いて警告を発すること等を併用しても良い。 In the first embodiment, an example is shown in which a human is separated and recognized from image processing data and the image is surrounded by a red frame to alert the operator when it is present in a dangerous area. It may be used in combination with issuing a warning using voice from
実施例１では、画像認識により、危険領域に作業者等が存在する場合、その位置を判別し、侵入者表示を重畳する例を示した。しかし、危険領域に存在する作業者等の位置認識に基づき、作業車両が旋回稼動できないように、可動エリアを制限する機構を作業車両に備える構成としても良い。 In the first embodiment, when an operator or the like is present in a dangerous area by image recognition, the position is determined and an intruder display is superimposed. However, the work vehicle may be provided with a mechanism for restricting the movable area so that the work vehicle cannot be turned based on the position recognition of the worker or the like existing in the danger area.
実施例１，２では、建設・土木作業車両として油圧ショベルへの適用例を示したが、油圧ショベル以外の作業車両、例えば、バックホーやクレーン車等へも適用することができる。要するに、旋回動作やアームの伸長度合いにより可動域が変化する建設・土木作業車両であれば適用できる。 In the first and second embodiments, the application example to the hydraulic excavator is shown as the construction / civil engineering work vehicle, but the invention can also be applied to a work vehicle other than the hydraulic excavator, for example, a backhoe or a crane vehicle. In short, the present invention can be applied to any construction / civil engineering work vehicle in which the range of motion changes depending on the turning motion or the degree of extension of the arm.
Ａ 油圧ショベルＡ（建設・土木作業車両の一例）
１ カメラ
２ 駆動系センサー
３ 安全監視コントローラ
３ａ 画像メモリ
３ｂ 画像処理部
３ｃ 画像認識処理部
３ｄ 危険領域判定処理部
３ｅ 画像処理用基本情報ROM
３ｆ スーパーインポーズ処理部
３ｇ 表示制御系
３ｈ 警告メッセージ発生器
３ｉ 警告音発生器
３ｊ 危険領域外部表示制御部
４ メッセージ発生用外部手動スイッチ
５ 外部スピーカー
６ 画像モニター
７ レーザー発光・駆動装置
８ 強制発光用外部警告スイッチ
９ 近赤外線レーザー投光器（投光器）
１０ 可視光レーザー投光器（投光器）
A Hydraulic Excavator A (Example of construction and civil engineering work vehicle)
DESCRIPTION OF
3f
10 Visible light laser projector (projector)
Claims (9)
前記建設・土木作業車両に搭載され、作業車両周囲のカメラ映像データを取得するカメラと、
前記建設・土木作業車両に搭載され、操作者による操作ミスを想定した最大可動域を危険領域と判定する危険領域判定処理部と、前記カメラからのカメラ映像データに、判定された危険領域を重ね合わせるスーパーインポーズ処理部を有する安全監視コントローラと、
前記建設・土木作業車両の操作室に設定され、カメラ映像に危険領域を重畳した画像を内部警告表示として映し出す画像モニターと、
を備えたことを特徴とする建設・土木作業車両の作業安全監視システム。 In a work safety monitoring system for construction and civil engineering vehicles where the range of motion changes depending on the turning motion and the degree of arm extension,
A camera that is mounted on the construction / civil engineering work vehicle and acquires camera image data around the work vehicle;
A dangerous area determination processing unit which is mounted on the construction / civil engineering work vehicle and determines a maximum movable range assuming an operation error by an operator as a dangerous area, and the determined dangerous area is superimposed on the camera video data from the camera. A safety monitoring controller having a superimpose processing unit for matching;
An image monitor that is set in the operation room of the construction / civil engineering vehicle and displays an image in which a dangerous area is superimposed on the camera image as an internal warning display;
A work safety monitoring system for construction and civil engineering vehicles characterized by comprising:
前記カメラは、前記建設・土木作業車両の可動域が変化しても視界が変化しない下部走行体に複数取り付けられ、
前記安全監視コントローラは、前記複数のカメラからのカメラ映像データを、前記建設・土木作業車両とその周囲を真上から見下ろした俯瞰映像データに視点変換する画像処理部を有することを特徴とする建設・土木作業車両の作業安全監視システム。 In the work safety monitoring system for a construction / civil engineering vehicle according to claim 1,
A plurality of the cameras are attached to the lower traveling body where the field of view does not change even if the range of motion of the construction / civil engineering work vehicle changes,
The safety monitoring controller includes an image processing unit that converts a viewpoint of camera video data from the plurality of cameras into overhead video data in which the construction / civil engineering work vehicle and its surroundings are looked down from directly above.・ Work safety monitoring system for civil engineering vehicles.
前記建設・土木作業車両による旋回動作やアームの伸長度合いによる可動域の変化を検出する駆動系センサーを設け、
前記安全監視コントローラは、前記危険領域判定処理部において、前記駆動系センサーからの検出値が変化する毎に危険領域を判定し、前記スーパーインポーズ処理部において、カメラ映像に重畳する危険領域をリアルタイムに更新して表示することを特徴とする建設・土木作業車両の作業安全監視システム。 In the work safety monitoring system for a construction / civil engineering vehicle according to claim 1 or 2,
Provided with a drive system sensor for detecting a change in the range of motion due to the turning operation of the construction / civil engineering vehicle and the degree of extension of the arm,
The safety monitoring controller determines a dangerous area every time a detection value from the drive system sensor changes in the dangerous area determination processing unit, and the superimpose processing unit determines a dangerous area to be superimposed on a camera image in real time. Work safety monitoring system for construction and civil engineering work vehicles, characterized by being updated and displayed.
前記建設・土木作業車両に、車両外部の作業者等が視認できる光線を用いて領域表示する投光器を設け、
前記安全監視コントローラは、前記危険領域判定処理部により危険領域が判定されると、前記画像モニターによる内部警告表示と共に、前記投光器により危険領域を外部警告表示することを特徴とする建設・土木作業車両の作業安全監視システム。 In the work safety monitoring system for a construction / civil engineering work vehicle according to any one of claims 1 to 3,
The construction / civil engineering work vehicle is provided with a projector that displays an area using light rays that can be visually recognized by workers outside the vehicle,
A construction / civil engineering vehicle characterized in that the safety monitoring controller displays an external warning display by the projector together with an internal warning display by the image monitor when the dangerous area is determined by the dangerous area determination processing unit. Work safety monitoring system.
前記投光器は、投光ビームにより危険領域内を上下左右に素早く走査することにより、危険領域の空間を描画表示することを特徴とする建設・土木作業車両の作業安全監視システム。 In the work safety monitoring system for a construction / civil engineering vehicle according to claim 4,
The work safety monitoring system for a construction / civil engineering work vehicle, characterized in that the light projector draws and displays the space in the dangerous area by quickly scanning the inside of the dangerous area vertically and horizontally with a projection beam.
前記投光器は、近赤外線レーザー光を照射するものであり、
前記安全監視コントローラは、危険領域に作業者等が入ってきた場合、近赤外線レーザー光が照射された部分が白く浮かび上がることを利用し、これを映し出すカメラ画像データから外部作業者等の存在を認識する画像認識処理部を有することを特徴とする建設・土木作業車両の作業安全監視システム。 In the work safety monitoring system for a construction / civil engineering vehicle according to claim 5,
The light projector irradiates near infrared laser light,
The safety monitoring controller uses the fact that the part irradiated with near infrared laser light appears white when an operator enters the hazardous area, and detects the presence of an external worker from the camera image data that reflects this. A work safety monitoring system for a construction / civil engineering work vehicle comprising an image recognition processing unit for recognizing.
前記安全監視コントローラのスーパーインポーズ処理部は、前記画像認識処理部により外部作業者等の存在が認識された場合、外部作業者等をあらわす侵入者表示を重畳し、
前記画像モニターは、カメラ映像に危険領域と侵入者表示を重畳した画像を内部警告表示として映し出すことを特徴とする建設・土木作業車両の作業安全監視システム。 The work safety monitoring system for a construction / civil engineering vehicle according to claim 6,
The superimpose processing unit of the safety monitoring controller superimposes an intruder display representing an external worker or the like when the presence of an external worker or the like is recognized by the image recognition processing unit,
The work monitor system for construction and civil engineering work vehicles, wherein the image monitor displays an image in which a dangerous area and an intruder display are superimposed on a camera image as an internal warning display.
前記安全監視コントローラは、前記画像認識処理部により外部作業者等の存在が認識されると、近赤外線レーザー光に代え、近赤外線レーザー光より視認性の高い可視光レーザーにより危険領域を外部警告表示することを特徴とする建設・土木作業車両の作業安全監視システム。 In the work safety monitoring system for a construction / civil engineering vehicle according to claim 6 or claim 7,
When the presence of an external worker or the like is recognized by the image recognition processing unit, the safety monitoring controller displays a warning area with a visible light laser having a higher visibility than the near infrared laser light instead of the near infrared laser light. A work safety monitoring system for construction / civil engineering vehicles.
前記安全監視コントローラは、前記画像認識処理部により外部作業者等の存在が認識されると、前記画像モニターによる内部警告表示と前記投光器による外部警告表示に加え、外部スピーカーにより警告音を発生することを特徴とする建設・土木作業車両の作業安全監視システム。 In the work safety monitoring system for a construction / civil engineering work vehicle according to any one of claims 6 to 8,
When the presence of an external worker or the like is recognized by the image recognition processing unit, the safety monitoring controller generates a warning sound by an external speaker in addition to the internal warning display by the image monitor and the external warning display by the projector. A work safety monitoring system for construction and civil engineering vehicles.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2007293427A JP5064976B2 (en) | 2007-11-12 | 2007-11-12 | Work safety monitoring system for construction and civil engineering vehicles |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2007293427A JP5064976B2 (en) | 2007-11-12 | 2007-11-12 | Work safety monitoring system for construction and civil engineering vehicles |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2009121053A JP2009121053A (en) | 2009-06-04 |
| JP5064976B2 true JP5064976B2 (en) | 2012-10-31 |
Family
ID=40813501
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2007293427A Expired - Fee Related JP5064976B2 (en) | 2007-11-12 | 2007-11-12 | Work safety monitoring system for construction and civil engineering vehicles |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5064976B2 (en) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR200478491Y1 (en) * | 2014-11-24 | 2015-10-22 | 박효경 | Danger alarm system and danger alarm apparatus for construction heavy equipment |
| CN110867047A (en) * | 2019-11-29 | 2020-03-06 | 万翼科技有限公司 | Intelligent early warning method and system for construction site |
| EP3153348B1 (en) | 2015-10-05 | 2020-07-01 | Franz Xaver Meiller Fahrzeug- und Maschinenfabrik - GmbH & Co KG | Load transport vehicle with monitoring means for secure handling of a swappable container |
| US20220234604A1 (en) * | 2021-01-26 | 2022-07-28 | Ford Global Technologies, Llc | Hazard condition warning for package delivery operation |
Families Citing this family (46)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5393301B2 (en) * | 2009-07-06 | 2014-01-22 | 住友建機株式会社 | Construction machine monitoring equipment |
| JP5128566B2 (en) * | 2009-09-28 | 2013-01-23 | 住友重機械工業株式会社 | Ambient image presentation device and operation support system |
| EP2570556B1 (en) * | 2010-06-18 | 2021-04-28 | Hitachi Construction Machinery Co., Ltd. | Device for monitoring area around work machine |
| WO2012053105A1 (en) * | 2010-10-22 | 2012-04-26 | 日立建機株式会社 | Work machine peripheral monitoring device |
| JP2012225111A (en) * | 2011-04-22 | 2012-11-15 | Kajima Corp | Device for detecting operator around construction vehicle |
| EP2708663A4 (en) * | 2011-05-13 | 2014-12-24 | Hitachi Construction Machinery | Device for displaying rearward field of view of hydraulic shovel |
| JP2012252675A (en) * | 2011-06-07 | 2012-12-20 | Komatsu Ltd | Dump truck |
| JP5597596B2 (en) | 2011-06-07 | 2014-10-01 | 株式会社小松製作所 | Work vehicle perimeter monitoring device |
| WO2012169352A1 (en) * | 2011-06-07 | 2012-12-13 | 株式会社小松製作所 | Work vehicle vicinity monitoring device |
| JP6123307B2 (en) | 2013-01-23 | 2017-05-10 | 株式会社デンソーウェーブ | Surveillance system and method for monitoring the intrusion of an object around a robot |
| JP6052881B2 (en) * | 2013-03-19 | 2016-12-27 | 住友重機械工業株式会社 | Perimeter monitoring equipment for work machines |
| JP6456584B2 (en) * | 2013-03-19 | 2019-01-23 | 住友重機械工業株式会社 | Perimeter monitoring equipment for work machines |
| KR102123127B1 (en) * | 2013-12-06 | 2020-06-15 | 두산인프라코어 주식회사 | Apparatus for selecting screen mode and method |
| JP6321977B2 (en) * | 2014-01-23 | 2018-05-09 | クラリオン株式会社 | Perimeter monitoring equipment for heavy machinery |
| JP6662604B2 (en) * | 2015-10-28 | 2020-03-11 | 住友建機株式会社 | Excavator |
| JP6453804B2 (en) * | 2016-04-22 | 2019-01-16 | 大林道路株式会社 | Construction method with heavy equipment for construction |
| JP7012643B2 (en) | 2016-07-04 | 2022-02-14 | 住友建機株式会社 | Excavator |
| JP6546138B2 (en) * | 2016-09-15 | 2019-07-17 | 日立建機株式会社 | Work vehicle |
| JP6545140B2 (en) * | 2016-11-24 | 2019-07-17 | 大成建設株式会社 | Heavy equipment safety equipment |
| JP6391656B2 (en) * | 2016-11-29 | 2018-09-19 | 住友重機械工業株式会社 | Peripheral monitoring device for work machine and work machine |
| JP2018206308A (en) * | 2017-06-09 | 2018-12-27 | 株式会社デンソーテン | Revolving notification device and revolving notification method |
| JP6290497B2 (en) * | 2017-06-16 | 2018-03-07 | 住友重機械工業株式会社 | Excavator |
| JP6301536B2 (en) * | 2017-06-28 | 2018-03-28 | 住友重機械工業株式会社 | Excavator |
| JP2019010704A (en) * | 2017-06-30 | 2019-01-24 | Idec株式会社 | Illumination light display device |
| JP6356323B2 (en) * | 2017-07-10 | 2018-07-11 | 住友重機械工業株式会社 | Excavator |
| JP6420432B2 (en) * | 2017-09-12 | 2018-11-07 | 住友重機械工業株式会社 | Excavator |
| JP7039983B2 (en) * | 2017-12-13 | 2022-03-23 | コベルコ建機株式会社 | Alert device for construction machinery |
| US10544567B2 (en) * | 2017-12-22 | 2020-01-28 | Caterpillar Inc. | Method and system for monitoring a rotatable implement of a machine |
| JP6852026B2 (en) * | 2018-08-23 | 2021-03-31 | 住友重機械工業株式会社 | Excavator |
| US11156981B2 (en) * | 2018-08-30 | 2021-10-26 | Veo Robotics, Inc. | Systems and methods for automatic sensor registration and configuration |
| JP2020051092A (en) | 2018-09-26 | 2020-04-02 | コベルコ建機株式会社 | Work machine information display system |
| JP6602936B2 (en) * | 2018-11-01 | 2019-11-06 | 住友重機械工業株式会社 | Excavator |
| JP2019060228A (en) * | 2018-11-01 | 2019-04-18 | 住友重機械工業株式会社 | Periphery monitoring device for work machine |
| JP7478055B2 (en) * | 2018-11-01 | 2024-05-02 | 住友重機械工業株式会社 | Periphery monitoring device for work machine and work machine |
| JP7186079B2 (en) * | 2018-12-14 | 2022-12-08 | 株式会社竹中工務店 | aerial work platform |
| JP7189074B2 (en) * | 2019-04-26 | 2022-12-13 | 日立建機株式会社 | working machine |
| JP7145137B2 (en) * | 2019-09-30 | 2022-09-30 | 日立建機株式会社 | Working machine controller |
| JP7153627B2 (en) * | 2019-10-31 | 2022-10-14 | 日立建機株式会社 | Work machine and perimeter monitoring system |
| KR102392512B1 (en) * | 2020-01-07 | 2022-04-28 | 김기성 | Local Monitoring Apparatus and Driving Method Thereof |
| CN111399437B (en) * | 2020-03-26 | 2020-12-22 | 广东鸿业工程项目管理有限公司 | Wisdom construction supervision system |
| JP7164575B2 (en) * | 2020-08-31 | 2022-11-01 | 東日本電信電話株式会社 | Safety management system |
| JP7137609B2 (en) * | 2020-12-11 | 2022-09-14 | Idec株式会社 | Illuminated display device |
| CN112896047A (en) * | 2021-03-03 | 2021-06-04 | 上海三一重机股份有限公司 | Auxiliary image generation method and device for working machine and working machine |
| US12065788B2 (en) | 2021-06-23 | 2024-08-20 | Caterpillar Paving Products Inc. | System and method for marking a boundary while defining an autonomous worksite |
| GB2610428A (en) * | 2021-09-06 | 2023-03-08 | Bamford Excavators Ltd | A working machine |
| KR102686900B1 (en) * | 2021-12-09 | 2024-07-19 | (주)케이아이오티 | Processing apparatus for dangerous situation information using smart pole |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004343297A (en) * | 2003-05-14 | 2004-12-02 | Hitachi Constr Mach Co Ltd | Periphery monitoring device of construction machine |
| JP2008179940A (en) * | 2005-03-31 | 2008-08-07 | Hitachi Constr Mach Co Ltd | Surrounding monitoring equipment of working machine |
| JP2007085091A (en) * | 2005-09-22 | 2007-04-05 | Hitachi Constr Mach Co Ltd | Safety control device of work site and working machine applied to this device |
-
2007
- 2007-11-12 JP JP2007293427A patent/JP5064976B2/en not_active Expired - Fee Related
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR200478491Y1 (en) * | 2014-11-24 | 2015-10-22 | 박효경 | Danger alarm system and danger alarm apparatus for construction heavy equipment |
| EP3153348B1 (en) | 2015-10-05 | 2020-07-01 | Franz Xaver Meiller Fahrzeug- und Maschinenfabrik - GmbH & Co KG | Load transport vehicle with monitoring means for secure handling of a swappable container |
| EP3153348B2 (en) † | 2015-10-05 | 2023-12-27 | Franz Xaver Meiller Fahrzeug- und Maschinenfabrik - GmbH & Co KG | Load transport vehicle with monitoring means for secure handling of a swappable container |
| CN110867047A (en) * | 2019-11-29 | 2020-03-06 | 万翼科技有限公司 | Intelligent early warning method and system for construction site |
| US20220234604A1 (en) * | 2021-01-26 | 2022-07-28 | Ford Global Technologies, Llc | Hazard condition warning for package delivery operation |
| US11724641B2 (en) * | 2021-01-26 | 2023-08-15 | Ford Global Technologies, Llc | Hazard condition warning for package delivery operation |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2009121053A (en) | 2009-06-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5064976B2 (en) | Work safety monitoring system for construction and civil engineering vehicles | |
| WO2019111859A1 (en) | Surrounding-area monitoring device, information processing terminal, information processing device, and information processing program | |
| KR20190120162A (en) | Peripheral Monitoring System for Work Machines | |
| JP6734260B2 (en) | Work machine | |
| JP7407178B2 (en) | excavator | |
| KR20170040349A (en) | Work-machine periphery monitoring device | |
| JP7511547B2 (en) | Display device, excavator, information processing device | |
| JP2010112100A (en) | Monitoring device for working machine | |
| WO2020189578A1 (en) | Work machine | |
| JP7463354B2 (en) | Excavator | |
| JP2019157497A (en) | Monitoring system, monitoring method, and monitoring program | |
| KR102707140B1 (en) | Shovel and Shovel Output Device | |
| JP2014181510A (en) | Periphery monitoring apparatus for working machine | |
| JP7358070B2 (en) | excavator | |
| JP6917167B2 (en) | Bird's-eye view image display device for construction machinery | |
| JP2017049792A (en) | Designated range monitoring system | |
| JP2020183623A (en) | Shovel | |
| JP2018135759A (en) | Periphery monitoring device for work machine | |
| JP2022157923A (en) | Excavator | |
| KR200478491Y1 (en) | Danger alarm system and danger alarm apparatus for construction heavy equipment | |
| JP3161937U (en) | Heavy equipment rear check device | |
| JP2019218198A (en) | Operation support system | |
| KR20220002938A (en) | shovel | |
| KR102723550B1 (en) | Shovel | |
| KR20220003747A (en) | Tower crane collision warning system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20101111 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111221 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120724 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120809 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5064976 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150817 Year of fee payment: 3 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |