WO2020080294A1 - Hydraulic excavator - Google Patents

Hydraulic excavator Download PDF

Info

Publication number
WO2020080294A1
WO2020080294A1 PCT/JP2019/040240 JP2019040240W WO2020080294A1 WO 2020080294 A1 WO2020080294 A1 WO 2020080294A1 JP 2019040240 W JP2019040240 W JP 2019040240W WO 2020080294 A1 WO2020080294 A1 WO 2020080294A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
hydraulic excavator
view
upper revolving
revolving structure
Prior art date
Application number
PCT/JP2019/040240
Other languages
French (fr)
Japanese (ja)
Inventor
直樹 萩原
溝口 和彦
尚 多胡
真一 笹▲崎▼
古渡 陽一
Original Assignee
日立建機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日立建機株式会社 filed Critical 日立建機株式会社
Publication of WO2020080294A1 publication Critical patent/WO2020080294A1/en

Links

Images

Classifications

    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices

Definitions

  • an object detection unit that detects a predetermined object existing within a predetermined range around a work machine, and an alarm unit that issues a sound alarm when the object detection unit detects the object.
  • the alarm unit stops the alarm by the sound and outputs the sound by the sound when a predetermined condition is satisfied.
  • a perimeter monitoring system for a work machine is disclosed, which issues a warning by light after the warning is stopped.
  • the operator can monitor the surroundings without feeling any discomfort.
  • the first outer ring line 31d and the second outer ring line 31e are arranged in the composite image 31 at a position showing a certain distance from the vehicle body in accordance with the shape of the vehicle body. Therefore, for example, refer to the information around the vehicle body displayed in the composite image 31 and the straight line portions 132d, 134d, 136d of the first outer ring 31d and the straight line portions 132e, 134e, 136e of the second outer ring 31e.
  • the width of the vehicle body can be easily adjusted with respect to the obstacle.
  • a plurality of outer race lines first outer race line 31d and second outer race line 31e
  • the vehicle body can be moved and arranged with higher accuracy.
  • the controller 20 is located outside the range corresponding to the swing range of the upper swing body 2 in the composite image 31.
  • the second outer ring line 31e is displayed.

Abstract

This hydraulic excavator uses images captured by multiple monitoring cameras to generate a planar, bird's-eye-view image, generates a schematized icon image showing the vehicle body in planar view, performs synthesis processing for displaying a planar view image around the icon image, and, in the area where the frontal view of the left side camera is blocked by the operator cabin, combines an icon different from the images captured by the multiple monitoring cameras, generating a composite image. By this means, it is possible for the operator to monitor the periphery without worrying.

Description

油圧ショベルHydraulic excavator
 本発明は、油圧ショベルに関する。 The present invention relates to a hydraulic excavator.
 油圧ショベルなどの作業機械においては、車体に設けたカメラで得られる画像を運転室のモニタに表示することで、オペレータによる作業機械の周囲監視を補助する技術が知られている。 For work machines such as hydraulic excavators, a technology is known that assists the operator in monitoring the surroundings of the work machine by displaying the image obtained by the camera provided on the vehicle body on the monitor in the cab.
 このような作業機械の周囲監視に関する技術として例えば、特許文献1には、作業機械に複数のカメラを設置して、これら各カメラで取得したカメラ画像に基づく信号処理を行って、上方視点となるように視点変換し、俯瞰画像としてモニタに表示する作業機械の周囲監視装置であって、前記各カメラにより撮影した各個別俯瞰画像を合成した合成俯瞰画像を前記モニタに表示する画像合成手段と、前記合成俯瞰画像に対して、この合成俯瞰画像を構成する前記各個別俯瞰画像の少なくとも1つの画像を視点変換する前のカメラ画像に変換して表示するための切換手段とから構成した作業機械の周囲監視装置が開示されている。 As a technique related to such work machine surroundings monitoring, for example, in Patent Document 1, a plurality of cameras are installed in the work machine, signal processing is performed based on camera images acquired by these cameras, and an upper viewpoint is obtained. As described above, a viewpoint monitoring device for a work machine that converts the viewpoint and displays it on a monitor as a bird's-eye image, and an image synthesizing unit that displays a synthesized bird's-eye image obtained by synthesizing the individual bird's-eye images captured by the cameras on the monitor, A work machine configured to convert the composite bird's-eye view image into at least one image of the individual bird's-eye view images forming the composite bird's-eye view image by converting it to a camera image before viewpoint conversion. A perimeter monitor is disclosed.
 また、特許文献2には、作業機械の周辺の所定範囲内に存在する所定の物体を検知する物体検知部と、前記物体検知部により前記物体が検知された場合、音による警報を行う警報部と、を備え、前記警報部は、前記物体検知部により前記物体が検知された状態が継続している場合、所定の条件が成立したときに、前記音による警報を停止すると共に、前記音による警報の停止後、光による警報を行う、作業機械用周辺監視システムが開示されている。 Further, in Patent Document 2, an object detection unit that detects a predetermined object existing within a predetermined range around a work machine, and an alarm unit that issues a sound alarm when the object detection unit detects the object. When the state in which the object is detected by the object detection unit continues, the alarm unit stops the alarm by the sound and outputs the sound by the sound when a predetermined condition is satisfied. A perimeter monitoring system for a work machine is disclosed, which issues a warning by light after the warning is stopped.
特開2012-74929号公報JP 2012-74929A
特開2018-111981号公報JP, 2008-111981, A
 ところで、車体の構造やカメラの設置位置によっては、モニタに表示される画像に車体の構造物が映り込む場合が想定される。このような場合には、周囲監視に不要な情報がモニタに表示されることになり、周囲監視を行う場合にオペレータが違和感を覚えることが考えられる。 By the way, depending on the structure of the car body and the installation position of the camera, it is assumed that the structure of the car body is reflected in the image displayed on the monitor. In such a case, information unnecessary for surroundings monitoring is displayed on the monitor, and the operator may feel uncomfortable when performing surroundings monitoring.
 本発明は上記に鑑みてなされたものであり、オペレータが違和感なく周囲監視を行うことができる油圧ショベルを提供することを目的とする。 The present invention has been made in view of the above, and an object thereof is to provide a hydraulic excavator that allows an operator to monitor the surroundings without feeling discomfort.
 本願は上記課題を解決する手段を複数含んでいるが、その一例を挙げるならば、上部旋回体及び下部走行体により構成される車体と、前記上部旋回体の前方に設けられた運転室と、前記上部旋回体の周囲を撮影する複数の監視用カメラと、前記複数の監視用カメラで撮影された画像から合成画像を生成するコントローラと、前記コントローラで生成された前記合成画像を表示するモニタと、を備えた油圧ショベルにおいて、前記複数の監視用カメラは、前記上部旋回体の左側の前記運転室の後方に設けられ、前記上部旋回体の前方及び左側方を視野にもつ左側方カメラと、前記上部旋回体の右側方に設けられ、前記上部旋回体の前方及び右側方を視野にもつ右側方カメラと、前記上部旋回体の後方に設けられ、前記上部旋回体の左右の側方及び後方を視野にもつ後方カメラと、を有し、前記コントローラは、前記複数の監視用カメラで撮影された画像を用いて上方から見下ろした平面視画像を生成するとともに、前記車体を平面で表示する図形化されたアイコン画像を生成し、前記平面視画像を前記アイコン画像の周囲に表示する合成処理を行い、前記左側方カメラの前方視野が前記運転室で遮られる部分に前記複数の監視用カメラで撮影された画像とは異なる画像を合成して、前記合成画像を生成するものとする。 The present application includes a plurality of means for solving the above problems, but to give an example thereof, a vehicle body constituted by an upper revolving structure and a lower traveling structure, and a cab provided in front of the upper revolving structure, A plurality of surveillance cameras that photograph the periphery of the upper swing body, a controller that generates a composite image from the images captured by the plurality of surveillance cameras, and a monitor that displays the composite image generated by the controller In the hydraulic excavator provided with, the plurality of monitoring cameras is provided on the left side of the upper revolving structure and behind the operator's cab, and a left side camera having a field of view of the front and left sides of the upper revolving structure, A right-side camera provided on the right side of the upper revolving structure and having a field of view in front of and on the right side of the upper revolving structure, and on the left and right sides of the upper revolving structure provided behind the upper revolving structure. And a rear camera having a rear view, and the controller generates a plan view image viewed from above using the images captured by the plurality of monitoring cameras and displays the vehicle body in a plane. Generating a graphic icon image, performing a combining process of displaying the planar view image around the icon image, and monitoring the plurality of monitoring images at a portion where the front view of the left side camera is blocked in the cab. It is assumed that an image different from the image captured by the camera is combined to generate the combined image.
 本発明によれば、オペレータが違和感なく周囲監視を行うことができる。 According to the present invention, the operator can monitor the surroundings without feeling any discomfort.
本発明の一実施の形態に係る油圧ショベルの外観を概略的に示す左側面図である。It is a left side view showing roughly the appearance of the hydraulic excavator concerning one embodiment of the present invention. 本発明の一実施の形態に係る油圧ショベルの外観を概略的に示す右側面図である。It is a right side view showing roughly the appearance of the hydraulic excavator concerning one embodiment of the present invention. 本発明の一実施の形態に係る油圧ショベルの外観を概略的に示す上面図である。It is a top view which shows roughly the external appearance of the hydraulic excavator which concerns on one embodiment of this invention. 本発明の一実施の形態に係る油圧ショベルの外観を概略的に示す背面図である。It is a rear view which shows roughly the external appearance of the hydraulic excavator which concerns on one embodiment of this invention. 本発明の一実施の形態に係る周囲監視装置を抜き出して模式的に示す図である。It is a figure which extracts the surroundings monitoring apparatus which concerns on one embodiment of this invention, and shows it typically. モニタに表示される合成画像を抜き出して示す図である。It is a figure which extracts and shows the synthetic image displayed on a monitor. コントローラの周囲監視装置に係る機能を示す機能ブロック図である。It is a functional block diagram which shows the function which concerns on the surroundings monitoring apparatus of a controller. コントローラの処理内容を示すフローチャートである。It is a flowchart which shows the processing content of a controller.
 以下、本発明の一実施の形態を図面を参照しつつ説明する。 An embodiment of the present invention will be described below with reference to the drawings.
 図1~図4は、本実施の形態に係る油圧ショベルの外観を概略的に示す図であり、図1は左側面図、図2は右側面図、図3は上面図、図4は背面図である。 1 to 4 are diagrams schematically showing the appearance of a hydraulic excavator according to the present embodiment. FIG. 1 is a left side view, FIG. 2 is a right side view, FIG. 3 is a top view, and FIG. It is a figure.
 図1~図4において、油圧ショベル100は、クローラ式の下部走行体1及び下部走行体1に対して旋回可能に設けられた上部旋回体2により構成された車体と、上部旋回体2の前側に俯仰動可能に設けられたフロント作業機3とから概略構成されている。 1 to 4, a hydraulic excavator 100 includes a vehicle body including a crawler-type lower traveling body 1 and an upper revolving body 2 that is provided so as to be rotatable with respect to the lower traveling body 1, and a front side of the upper revolving body 2. The front working machine 3 is arranged so as to be able to move upward and downward.
 フロント作業機3は、垂直方向にそれぞれ回動する複数の被駆動部材(ブーム3a、アーム3b、及びバケット3c)を連結して構成されている。ブーム3aの基端は上部旋回体2の前部に回動可能に支持されている。また、ブーム3aの先端にはアーム3bの一端が回動可能に連結されており、アーム3bの他端(先端)にはバケット3cが回動可能に連結されている。ブーム3a、アーム3b、及びバケット3cは、油圧アクチュエータであるブームシリンダ3d、アームシリンダ3e、及び、バケットシリンダ3fによってそれぞれ駆動される。 The front working machine 3 is configured by connecting a plurality of driven members (boom 3a, arm 3b, and bucket 3c) that rotate in the vertical direction, respectively. The base end of the boom 3a is rotatably supported by the front part of the upper swing body 2. Further, one end of an arm 3b is rotatably connected to the tip of the boom 3a, and a bucket 3c is rotatably connected to the other end (tip) of the arm 3b. The boom 3a, the arm 3b, and the bucket 3c are driven by a boom cylinder 3d, an arm cylinder 3e, and a bucket cylinder 3f, which are hydraulic actuators, respectively.
 下部走行体1は、左右一対のクローラフレーム1c,1dにそれぞれ掛け回された一対のクローラ1e,1fと、クローラ1e,1fを図示しない減速機構等を介してそれぞれ駆動する油圧アクチュエータとしての走行油圧モータ1a,1bとから構成されている。なお、図3及び図4においては、図示の簡単のため、フロント作業機3の全部又は一部を省略して示している。 The lower traveling body 1 includes a pair of crawlers 1e and 1f, which are respectively wound around a pair of left and right crawler frames 1c, and a traveling hydraulic pressure as a hydraulic actuator that drives the crawlers 1e and 1f via a reduction mechanism (not shown) or the like. It is composed of motors 1a and 1b. It should be noted that in FIGS. 3 and 4, for simplification of illustration, all or part of the front working machine 3 is omitted.
 上部旋回体2は、基部となる旋回フレーム2a上に各部材を配置して構成されており、旋回フレーム2aが油圧アクチュエータである旋回油圧モータ(図示せず)により下部走行体1に対して旋回駆動されることにより、上部旋回体2が下部走行体1に対して旋回可能となっている。 The upper swing body 2 is configured by arranging each member on a swing frame 2a serving as a base, and the swing frame 2a swings with respect to the lower traveling body 1 by a swing hydraulic motor (not shown) that is a hydraulic actuator. By being driven, the upper swing body 2 can swing with respect to the lower traveling body 1.
 上部旋回体2の旋回フレーム2a上には、オペレータが搭乗して油圧ショベル100の操作を行うための運転室4が配置されているほか、図示を省略するが、原動機であるエンジン、エンジンにより駆動される油圧ポンプ及びパイロットポンプ、各油圧アクチュエータ(走行油圧モータ1a,1b、旋回油圧モータ、ブームシリンダ3d、アームシリンダ3e、バケットシリンダ3f)を駆動するための油圧回路システムが搭載されている。また、上部旋回体2には、油圧ショベル100の全体の動作を制御するコントローラ20が配置されている。 An operator's cab 4 for the operator to operate the hydraulic excavator 100 is disposed on the revolving frame 2a of the upper revolving structure 2, and although not shown, an engine that is a prime mover and is driven by the engine. The hydraulic circuit system for driving the hydraulic pump and the pilot pump, and the hydraulic actuators (travel hydraulic motors 1a and 1b, swing hydraulic motor, boom cylinder 3d, arm cylinder 3e, bucket cylinder 3f) are mounted. Further, a controller 20 that controls the overall operation of the hydraulic excavator 100 is arranged on the upper swing body 2.
 運転室4内には、オペレータが着座する座席や、フロント作業機3の駆動操作、上部旋回体2の旋回操作、下部走行体1の走行操作などを行う操作装置(図示せず)のほか、座席に着座したオペレータが見やすい位置であって外部視野の妨げにならない位置にモニタ30(後述)が配置されている。 In the cab 4, in addition to a seat on which an operator is seated, an operating device (not shown) for performing a driving operation of the front working unit 3, a turning operation of the upper revolving structure 2, a traveling operation of the lower traveling structure 1, and the like, A monitor 30 (described later) is arranged at a position where an operator seated on the seat can easily see and does not obstruct the external visual field.
 上部旋回体2の上部の左右および後方には、上部旋回体2の周囲を撮影する複数の監視用カメラ14~16が搭載されている。複数の監視用カメラ14~16は、その配置に応じて、それぞれ、右側方カメラ14、後方カメラ15、及び、左側方カメラ16と称する。すなわち、複数の監視用カメラ14~16は、上部旋回体2の左側の運転室4の後方に設けられ、上部旋回体2の前方及び左側方を視野にもつ左側方カメラ16と、上部旋回体2の右側方に設けられ、上部旋回体2の前方及び右側方を視野にもつ右側方カメラ14と、上部旋回体2の後方に設けられ、上部旋回体2の左右の側方及び後方を視野にもつ後方カメラ15とを有して構成されている。 A plurality of surveillance cameras 14 to 16 that take images of the surroundings of the upper swing body 2 are mounted on the left, right, and rear of the upper portion of the upper swing body 2. The plurality of surveillance cameras 14 to 16 are referred to as a right side camera 14, a rear camera 15, and a left side camera 16, respectively, depending on their arrangement. That is, the plurality of monitoring cameras 14 to 16 are provided behind the driver's cab 4 on the left side of the upper swing body 2, and have a left-side camera 16 that has a view of the front and left sides of the upper swing body 2 and the upper swing body. 2 is provided on the right side of the upper revolving superstructure 2 and has a right-side camera 14 in the field of view of the front and right sides of the upper revolving superstructure 2, and is provided behind the upper revolving superstructure 2 to view the left and right sides and the rear of the upper revolving superstructure 2. And the rear camera 15 of the above.
 図3に示すように、複数の監視用カメラ14~16は、それぞれ、車体(下部走行体1及び上部旋回体2)を上方から見下ろした場合の外郭よりも内側になるように配置されている。具体的には、左側方カメラ16は、上部旋回体2の上部の運転室4の後方において、上部旋回体2の左側面(運転室4の左側面を含む)よりも内側になるように配置されている。同様に、右側方カメラ14は、上部旋回体2の右側面において、下部走行体1の右側面、及び、上部旋回体2を構成する右側方及び後方確認用のミラー2bよりも内側になるように配置されている。また、後方カメラ15は、上部旋回体2の後方において、上部旋回体2の背面(後側面)よりも内側になるように配置されている。 As shown in FIG. 3, each of the plurality of monitoring cameras 14 to 16 is arranged so as to be inside the outer contour of the vehicle body (the lower traveling structure 1 and the upper revolving structure 2) as viewed from above. . Specifically, the left side camera 16 is arranged behind the driver's cab 4 above the upper swing body 2 so as to be inside the left side surface of the upper swing body 2 (including the left side surface of the driver's cab 4). Has been done. Similarly, the right side camera 14 is located on the right side surface of the upper swing body 2 inside the right side surface of the lower traveling body 1 and the right and rear confirmation mirrors 2b forming the upper swing body 2. It is located in. Further, the rear camera 15 is arranged behind the upper swing body 2 so as to be inside the rear surface (rear side surface) of the upper swing body 2.
 以上のように構成した本実施の形態の油圧ショベル100は、監視用カメラ14~16で撮影した画像を運転室4に設けられたモニタ30に表示することで、オペレータによる車体周囲の監視作業を補助する周囲監視装置を備えている。 The hydraulic excavator 100 of the present embodiment configured as described above displays the images taken by the monitoring cameras 14 to 16 on the monitor 30 provided in the operator's cab 4, so that the operator can monitor the surroundings of the vehicle body. It is equipped with an auxiliary environment monitoring device.
 図5は、本実施の形態に係る周囲監視装置を抜き出して模式的に示す図である。また、図6は、モニタに表示される合成画像を抜き出して示す図である。 FIG. 5 is a diagram schematically showing the surroundings monitoring device according to the present embodiment as extracted. In addition, FIG. 6 is a diagram in which a composite image displayed on the monitor is extracted and shown.
 図5において、周囲表示装置は、複数の監視用カメラ14~16と、複数の監視用カメラ14~16によって撮影された画像から合成画像を生成するコントローラ20と、コントローラ20で生成された合成画像を表示するモニタ30とを備えている。 In FIG. 5, the surrounding display device includes a plurality of surveillance cameras 14 to 16, a controller 20 that generates a composite image from images captured by the plurality of surveillance cameras 14 to 16, and a composite image generated by the controller 20. And a monitor 30 for displaying.
 コントローラ20は、複数の監視用カメラ14~16で撮影された画像や、これらの画像を鉛直上方から撮影したように(すなわち、上方視点の平面視画像となるように)視点変換した画像、或いは、車体を平面で表示する図形化されたアイコン画像31aを生成し、各監視用カメラ14~16で撮影して平面視画像に視点変換した画像314~316をアイコン画像31aの周囲に表示する合成処理を行うことで、車体の上空から車体と周囲の状況を俯瞰的に撮影した画像(以降、合成画像31と称する)を生成し、モニタ30に表示させる。すなわち、図5及び図6において、モニタ30に表示される合成画像31は、合成画像31における自車の形状および大きさを概略的に示すアイコン画像31aを中央に配置し、アイコン画像31aの右側、下側、及び、左側に監視用カメラ14~16で撮影した画像を油圧ショベル100の車体が中心となるような上方視点の画像314~316に変換してそれぞれ配置することで形成されている。なお、図5及び図6においては、合成画像31のアイコン画像31aの上側が油圧ショベル100の前方と対応するように合成した場合を例示している。 The controller 20 images captured by the plurality of monitoring cameras 14 to 16 or images that have undergone viewpoint conversion as if these images were captured from vertically above (that is, a planar view image of an upper viewpoint), or A composite that generates a pictorial icon image 31a for displaying the vehicle body in a plane, displays the images 314 to 316 captured by each of the monitoring cameras 14 to 16 and converted into a two-dimensional view image around the icon image 31a. By performing the processing, an image (hereinafter referred to as a composite image 31) obtained by taking a bird's-eye view of the situation of the vehicle body and the surroundings from above the vehicle body is generated and displayed on the monitor 30. That is, in FIG. 5 and FIG. 6, the composite image 31 displayed on the monitor 30 has the icon image 31a schematically showing the shape and size of the vehicle in the composite image 31 arranged in the center, and the right side of the icon image 31a. , The lower side, and the left side are formed by converting the images photographed by the monitoring cameras 14 to 16 into the upper viewpoint images 314 to 316 centered on the vehicle body of the hydraulic excavator 100 and arranging them. . 5 and 6 exemplify a case in which the upper side of the icon image 31a of the combined image 31 is combined so as to correspond to the front of the hydraulic excavator 100.
 また、コントローラ20は、合成画像31の合成処理において、複数の監視用カメラ14~16の視野が車体の構成物で遮られる部分に、複数の監視用カメラ14~16で撮影された画像とは異なる画像等を合成する。具体的には、左側方カメラ16の前方視野が運転室4で遮られる部分31cの全体に、複数の監視用カメラ14~16で撮影された画像とは異なる画像(例えば、黒などの単色のアイコン131c:図6では説明のためにハッチングで示す)を合成する。なお、合成画像31の合成処理において、複数の監視用カメラ14~16の視野に入らない車体前方に相当する部分31bの全体には、例えば、黒などの単色のアイコン131bを合成する。また、合成画像31に合成するアイコン131b,131cの色を統一することで一体的に表示することができる。 Further, in the synthesis processing of the synthetic image 31, the controller 20 defines the images taken by the plural monitoring cameras 14 to 16 at the portions where the visual fields of the plural monitoring cameras 14 to 16 are obstructed by the components of the vehicle body. Combine different images. Specifically, an image different from the images captured by the plurality of surveillance cameras 14 to 16 is displayed on the entire portion 31c where the front view of the left-side camera 16 is blocked by the driver's cab 4 (for example, a monochrome image such as black). Icon 131c: hatched for explanation in FIG. 6). In the process of synthesizing the synthetic image 31, a single-color icon 131b, such as black, is synthesized on the entire portion 31b corresponding to the front of the vehicle body that is out of the visual field of the plurality of monitoring cameras 14 to 16. Further, by unifying the colors of the icons 131b and 131c to be combined with the combined image 31, they can be integrally displayed.
 さらに、コントローラ20は、合成画像31の合成処理において、アイコン画像31aの周囲に沿うようにアイコン画像31aから予め定めた距離に配置された、直線部132d,134d、136dと曲線部133d,135dとからなる第一の外輪線31dと、アイコン画像31aから見て第一の外輪線31dの外側に沿うように配置された、直線部132e,134e,136eと曲線部133e,135eとからなる第二の外輪線31eとを合成画像31に合成する。 Further, in the combining process of the combined image 31, the controller 20 includes linear parts 132d, 134d, 136d and curved parts 133d, 135d arranged along the periphery of the icon image 31a at a predetermined distance from the icon image 31a. A second outer ring 31d composed of a straight line portion 132e, 134e, 136e and a curved portion 133e, 135e arranged along the outside of the first outer ring 31d as viewed from the icon image 31a. And the outer ring line 31e of the above are combined with the combined image 31.
 第一の外輪線31dの直線部132d,134d,136dは、アイコン画像31aの左右側及び下側(油圧ショベル100の左右側面及び背面に対応)に沿って、アイコン画像31aから予め定めた距離に配置されている。また、第一の外輪線31dの曲線部133d,135dは、アイコン画像31aの角部からの距離を略一定に保ちつつ直線部132d,134d,136dの端部を繋ぐように配置されている。すなわち、第一の外輪線31dの2つの曲線部133d,135dは非同心に形成されている。 The straight line portions 132d, 134d, 136d of the first outer wheel line 31d are located at predetermined distances from the icon image 31a along the left and right sides (corresponding to the left and right side surfaces and the back surface of the hydraulic excavator 100) of the icon image 31a. It is arranged. Further, the curved portions 133d and 135d of the first outer ring 31d are arranged so as to connect the ends of the straight portions 132d, 134d and 136d while keeping the distance from the corner of the icon image 31a substantially constant. That is, the two curved portions 133d and 135d of the first outer ring 31d are formed non-concentrically.
 第二の外輪線31eの直線部132e,134e,136eは、第一の外輪線31dの外側に、第一の外輪線31dの直線部132d,134d、136dに沿って、第一の外輪線31dから予め定めた距離に配置されている。また、第二の外輪線31eの曲線部133e,135eは、第一の外輪線31dの曲線部133d,135dと同心に、直線部132e,134e,136eの端部を繋ぐように配置されている。すなわち、第二の外輪線31eの2つの曲線部133e,135eは非同心に形成されている。また、第二の外輪線31eは、合成画像31における上部旋回体2の旋回範囲に相当する範囲よりも外側に配置されている。 The straight line portions 132e, 134e, 136e of the second outer race line 31e are arranged outside the first outer race line 31d along the straight line portions 132d, 134d, 136d of the first outer race line 31d. Is arranged at a predetermined distance from. The curved portions 133e and 135e of the second outer ring 31e are arranged concentrically with the curved portions 133d and 135d of the first outer ring 31d so as to connect the ends of the straight portions 132e, 134e and 136e. . That is, the two curved portions 133e and 135e of the second outer ring 31e are formed non-concentrically. The second outer ring 31e is arranged outside the range corresponding to the turning range of the upper swing body 2 in the composite image 31.
 第一の外輪線31d及び第二の外輪線31eは、合成画像31において車体から一定の距離を示す位置に、車体の形状に合わせて配置されている。したがって、例えば、合成画像31に表示される車体周囲の情報と第一の外輪線31dの直線部132d,134d,136d及び第二の外輪線31eの直線部132e,134e,136eとを参照することにより、障害物に対する車体の幅寄せなどを容易に行うことができる。また、複数の外輪線(第一の外輪線31d及び第二の外輪線31e)を表示しているので、より精度良く車体の移動や配置を行うことができる。 The first outer ring line 31d and the second outer ring line 31e are arranged in the composite image 31 at a position showing a certain distance from the vehicle body in accordance with the shape of the vehicle body. Therefore, for example, refer to the information around the vehicle body displayed in the composite image 31 and the straight line portions 132d, 134d, 136d of the first outer ring 31d and the straight line portions 132e, 134e, 136e of the second outer ring 31e. Thus, the width of the vehicle body can be easily adjusted with respect to the obstacle. Further, since a plurality of outer race lines (first outer race line 31d and second outer race line 31e) are displayed, the vehicle body can be moved and arranged with higher accuracy.
 また、コントローラ20は、合成画像31の合成処理において、複数の監視用カメラ14~16からの画像に基づいて、画像中における移動体の有無を検知し、移動体が検知された場合にはモニタ30に移動体を検知したことを示す情報を合成して表示する。具体的には、例えば、移動体を検知した場合には、合成画像31における移動体の検知位置に相当する位置にマーカ31fを合成して表示することで、移動体があること、及び、その位置をオペレータに報知する。 Further, the controller 20 detects the presence or absence of a moving object in the image based on the images from the plurality of monitoring cameras 14 to 16 in the combining process of the combined image 31, and if the moving object is detected, the monitor is detected. Information indicating that a moving body is detected is synthesized and displayed on 30. Specifically, for example, when a moving body is detected, the marker 31f is combined and displayed at a position corresponding to the detection position of the moving body in the composite image 31, so that the moving body is present, and Inform the operator of the position.
 図7は、コントローラの周囲監視装置に係る機能を示す機能ブロック図である。 FIG. 7 is a functional block diagram showing functions related to the surroundings monitoring device of the controller.
 コントローラ20は、処理装置(例えばCPU)と、処理装置が実行するプログラム、及びそのプログラムの実行に必要なデータ等が格納される記憶装置(例えばROM、RAM等の半導体メモリ)を有するコンピュータ相当のハードウェアである。図7においては、コントローラ20によって実行される各種演算処理を機能ブロックで示している。 The controller 20 is equivalent to a computer having a processing device (for example, a CPU) and a storage device (for example, a semiconductor memory such as a ROM or a RAM) in which a program executed by the processing device and data necessary for executing the program are stored. Hardware. In FIG. 7, various calculation processes executed by the controller 20 are shown by functional blocks.
 図7において、コントローラ20は、監視用カメラ14~16によって撮影された画像を記憶する画像記憶部21と、監視用カメラ14~16の車体に対する取付位置および取付角度を記憶するカメラ取付位置記憶部24と、モニタ30に表示する合成画像31を生成するための各種情報を記憶する記憶部23と、監視用カメラ14~16で撮影された画像から移動体の有無と車体に対する位置とを判定する移動体判定部22と、記憶部23及びカメラ取付位置記憶部24に記憶された情報に基づいて、画像記憶部21に記憶された監視用カメラ14~16の画像から合成画像31を生成し、モニタ30に出力する画像合成処理部25とを有している。 In FIG. 7, the controller 20 includes an image storage unit 21 that stores images captured by the monitoring cameras 14 to 16 and a camera mounting position storage unit that stores the mounting positions and mounting angles of the monitoring cameras 14 to 16 with respect to the vehicle body. 24, a storage unit 23 that stores various kinds of information for generating a composite image 31 displayed on the monitor 30, and the presence or absence of a moving body and the position with respect to the vehicle body are determined from the images captured by the monitoring cameras 14 to 16. A composite image 31 is generated from the images of the monitoring cameras 14 to 16 stored in the image storage unit 21, based on the information stored in the moving body determination unit 22, the storage unit 23, and the camera mounting position storage unit 24, It has an image composition processing unit 25 for outputting to the monitor 30.
 移動体判定部22は、監視用カメラ14~16で撮影された画像を取得し、例えば、背景差分法などによって画像中の移動体の有無を判定し、移動体があると判定した場合(すなわち、移動体を検知した場合)には、その移動体の位置を算出する。なお、パターンマッチング等によって作業員(人)などの障害物を検知し、障害物を検出したことを示す情報、及び、障害物の位置を出力するようにしても良い。 When the moving body determination unit 22 acquires the images captured by the monitoring cameras 14 to 16 and determines the presence or absence of the moving body in the image by, for example, the background subtraction method, and determines that there is a moving body (that is, , When the moving body is detected), the position of the moving body is calculated. Note that an obstacle such as a worker (person) may be detected by pattern matching or the like, and information indicating that the obstacle has been detected and the position of the obstacle may be output.
 記憶部23には、複数の監視用カメラ14~16で撮影された各画像の合成画像31における配置や形状などに関する画面上の座標情報のほか、アイコン画像31aに関する画面上の座標情報、合成画像31における第一の外輪線31d及び第二の外輪線31eの画面上の座標情報、複数の監視カメラ14~16の視野に入らない車体前方に相当する部分に対応するアイコン131bの画面上の座標情報、及び複数の監視カメラ14~16の視野が車体の構造物で遮られる部分に対応するアイコン131cの画面上の座標情報などが記憶されている。 In the storage unit 23, in addition to the coordinate information on the screen regarding the arrangement and shape of the images captured by the plurality of surveillance cameras 14 to 16 in the combined image 31, the coordinate information on the screen regarding the icon image 31a and the combined image. The coordinate information on the screen of the first outer ring line 31d and the second outer ring line 31e in 31, the coordinate on the screen of the icon 131b corresponding to the portion corresponding to the front of the vehicle body that does not fall within the field of view of the plurality of monitoring cameras 14 to 16. The information and the coordinate information on the screen of the icon 131c corresponding to the portion where the visual fields of the plurality of surveillance cameras 14 to 16 are blocked by the structure of the vehicle body are stored.
 画像合成処理部25は、複数の監視用カメラ14~16で撮影された画像を用いて上方から見下ろした平面視画像を生成するとともに、記憶部23からのアイコン画像31aに関する画面上の座標情報に基づいてアイコン画像31aを生成し、平面視画像をアイコン画像aの周囲に表示する合成処理を行って合成画像31を生成する。 The image composition processing unit 25 generates a planar view image looking down from above by using the images captured by the plurality of monitoring cameras 14 to 16 and also generates coordinate information on the screen regarding the icon image 31a from the storage unit 23. An icon image 31a is generated based on the icon image 31a, and a combination process of displaying a two-dimensional image around the icon image a is performed to generate the combined image 31.
 また、画像合成処理部25は、合成画像31の合成処理において、左側方カメラ16の前方視野が運転室4で遮られる部分31cに記憶部23からのアイコン131cに関する画面上の座標情報に基づいてアイコン131cを合成し、複数の監視用カメラ14~16の視野に入らない車体前方に相当する部分31bに記憶部23からのアイコン131bに関する画面上の座標情報に基づいてアイコン131bを合成する。 Further, the image composition processing unit 25, in the composition process of the composite image 31, based on the coordinate information on the screen regarding the icon 131c from the storage unit 23 in the portion 31c where the front view of the left side camera 16 is blocked by the cab 4. The icon 131c is combined, and the icon 131b is combined with the portion 31b corresponding to the front of the vehicle body which is out of the visual fields of the plurality of monitoring cameras 14 to 16 based on the coordinate information on the screen regarding the icon 131b from the storage unit 23.
 さらに、画像合成処理部25は、合成画像31の合成処理において、記憶部23からの画面上の座標情報に基づいて第一の外輪線31d及び第二の外輪線31eを合成し、移動体判定部22からの判定結果(移動体の有無やその位置)に基づいてマーカ31fを合成する。画像合成処理部25で生成された合成画像31はモニタ30に出力される。 Further, the image combining processing unit 25 combines the first outer ring line 31d and the second outer ring line 31e based on the coordinate information on the screen from the storage unit 23 in the combining process of the combined image 31, and determines the moving body. The marker 31f is combined based on the determination result (presence or absence of a moving body and its position) from the unit 22. The composite image 31 generated by the image composition processing unit 25 is output to the monitor 30.
 以上のように構成した本実施の形態の動作をフローチャートを用いて説明する。 The operation of this embodiment configured as described above will be described using a flowchart.
 図8は、コントローラの処理内容を示すフローチャートである。 FIG. 8 is a flowchart showing the processing contents of the controller.
 図8において、コントローラ20は、以下に示すSTARTからENDまでの処理を所定の間隔(例えば、コントローラ20の処理サイクルである10ms)で繰り返し行う。 In FIG. 8, the controller 20 repeats the following processing from START to END at predetermined intervals (for example, 10 ms which is the processing cycle of the controller 20).
 まず、コントローラ20の画像記憶部21は、監視用カメラ14~16で撮影された画像を読み込んで記憶する(ステップS100)。 First, the image storage unit 21 of the controller 20 reads and stores the images captured by the monitoring cameras 14 to 16 (step S100).
 次に、画像合成処理部25は、合成画像31の作成に用いる情報として、アイコン画像31aに関する画面上の座標情報、アイコン131b及びアイコン131cに関する画面上の座標情報、第一の外輪線31d及び第二の外輪線31eに関する画面上の座標情報などを記憶部23から読み込む(ステップS110)、合成画像31を作成する(ステップS120)。このとき、合成画像31では、車体の構造物である運転室4が映り込む部分31cの全体にアイコン131cが合成され、周囲監視に不要な情報がモニタに表示されてオペレータに提示されることがない。したがって、オペレータは違和感を覚えることなく周囲監視を行うことができる。 Next, the image composition processing unit 25 uses, as information used to create the composite image 31, coordinate information on the screen regarding the icon image 31a, coordinate information on the screen regarding the icons 131b and 131c, the first outer ring 31d and the first outer ring 31d. The coordinate information on the screen regarding the second outer ring 31e is read from the storage unit 23 (step S110), and the composite image 31 is created (step S120). At this time, in the combined image 31, the icon 131c is combined with the entire portion 31c of the driver's cab 4, which is a structure of the vehicle body, and information unnecessary for surrounding monitoring is displayed on the monitor and presented to the operator. Absent. Therefore, the operator can monitor the surroundings without feeling discomfort.
 また、コントローラ20の移動体判定部22は、ステップS110の処理に続き、監視用カメラ14~16で撮影された画像に基づいて、移動体が検知されたかどうかを判定し(ステップS130)、判定結果がYESの場合には、移動体が検出された位置に関する画面上の座標情報を読み込み(ステップS140)、ステップS120で作成した合成画像31における移動体の検出位置に合成するマーカ31fを生成して画像合成処理部25に出力する(ステップS150)。続いて、画像合成処理部25は、ステップS120と同様に合成画像を作成し、作成した合成画像31に移動体判定部22からの移動体の検出位置を示すマーカ31fを合成し(ステップS160)、合成画像31をモニタ30に出力して表示させ(ステップS170)、処理を終了する。また、ステップS130での判定結果がNOの場合には、ステップS120で作成した合成画像31をそのままモニタ30に出力して表示させ(ステップS170)、処理を終了する。 In addition, following the processing of step S110, the moving body determination unit 22 of the controller 20 determines whether or not a moving body has been detected based on the images captured by the monitoring cameras 14 to 16 (step S130), and makes a determination. If the result is YES, the coordinate information on the screen regarding the position where the moving body is detected is read (step S140), and the marker 31f to be combined with the detected position of the moving body in the combined image 31 created in step S120 is generated. And outputs it to the image composition processing unit 25 (step S150). Subsequently, the image composition processing unit 25 creates a composite image similarly to step S120, and combines the created composite image 31 with the marker 31f indicating the detection position of the moving body from the moving body determination unit 22 (step S160). The composite image 31 is output and displayed on the monitor 30 (step S170), and the process is terminated. If the determination result in step S130 is NO, the composite image 31 created in step S120 is output to the monitor 30 as it is and displayed (step S170), and the process ends.
 以上のように構成した本実施の形態における効果を説明する。 The effects of this embodiment configured as above will be described.
 油圧ショベルなどの作業機械において、車体に設けたカメラで得られる画像を運転室のモニタに表示することで周囲監視を行う場合、車体の構造やカメラの設置位置によっては、モニタに表示される画像に車体の構造物が映り込む場合が想定される。このような場合には、周囲監視に不要な情報がモニタに表示されることになり、周囲監視を行う場合にオペレータが違和感を覚えることが考えられる。 In work machines such as hydraulic excavators, when monitoring the surroundings by displaying the image obtained by the camera provided on the vehicle body on the monitor in the cab, the image displayed on the monitor may be displayed depending on the vehicle body structure and the camera installation position. It is assumed that the structure of the car body is reflected in the. In such a case, information unnecessary for surroundings monitoring is displayed on the monitor, and the operator may feel uncomfortable when performing surroundings monitoring.
 このような課題に対して本実施の形態においては、複数の監視用カメラ14~16で撮影された画像を用いて上方から見下ろした平面視画像を生成するとともに、車体を平面で表示する図形化されたアイコン画像31aを生成し、平面視画像をアイコン画像31aの周囲に表示する合成処理を行い、左側方カメラ16の前方視野が運転室4で遮られる部分31cに複数の監視用カメラ14~16で撮影された画像とは異なる画像(すなわち、アイコン131c)を合成して、合成画像31を生成するように構成したので、オペレータが違和感なく周囲監視を行うことができる。 In order to solve such a problem, in the present embodiment, the images captured by the plurality of surveillance cameras 14 to 16 are used to generate a plan view image looking down from above, and the vehicle body is displayed on a plane. The combined icon image 31a is generated, and the two-dimensional image is displayed around the icon image 31a. The combining process is performed, and the front view of the left-side camera 16 is blocked by the driver's cab 4 in the portion 31c. Since the image different from the image captured in 16 (that is, the icon 131c) is combined to generate the combined image 31, the operator can monitor the surroundings without feeling discomfort.
 また、本実施の形態においては、第一の外輪線31d及び第二の外輪線31eを合成画像31において車体から一定の距離を示す位置に車体の形状に合わせて配置するように構成したので、例えば、合成画像31に表示される車体周囲の情報と第一の外輪線31d及び第二の外輪線31eの直線部132e,134e,136eとを参照することにより、障害物に対する車体の幅寄せなどを容易に行うことができる。
また、本実施の形態においては、複数の外輪線(第一の外輪線31d及び第二の外輪線31e)を合成して表示するように構成したので、車体周囲の障害物等との距離や位置関係をより精度良く知ることができる。
In addition, in the present embodiment, since the first outer ring line 31d and the second outer ring line 31e are arranged in the composite image 31 at a position indicating a certain distance from the vehicle body in accordance with the shape of the vehicle body, For example, by referring to the information around the vehicle body displayed in the composite image 31 and the straight line portions 132e, 134e, 136e of the first outer ring line 31d and the second outer ring line 31e, the width of the vehicle body with respect to an obstacle, etc. Can be done easily.
Further, in the present embodiment, since the plurality of outer ring lines (the first outer ring line 31d and the second outer ring line 31e) are combined and displayed, the distance from the obstacles and the like around the vehicle body, The positional relationship can be known more accurately.
 以上のように構成した本実施の形態の特徴を説明する。 The features of this embodiment configured as described above will be explained.
 (1)上記の実施の形態では、上部旋回体2及び下部走行体1により構成される車体と、前記上部旋回体の前方に設けられた運転室4と、前記上部旋回体の周囲を撮影する複数の監視用カメラ14~16と、前記複数の監視用カメラで撮影された画像から合成画像31を生成するコントローラ20と、前記コントローラで生成された前記合成画像を表示するモニタ30と、を備えた油圧ショベル100において、前記複数の監視用カメラは、前記上部旋回体の左側の前記運転室の後方に設けられ、前記上部旋回体の前方及び左側方を視野にもつ左側方カメラ16と、前記上部旋回体の右側方に設けられ、前記上部旋回体の前方及び右側方を視野にもつ右側方カメラ14と、前記上部旋回体の後方に設けられ、前記上部旋回体の左右の側方及び後方を視野にもつ後方カメラ15と、を有し、前記コントローラは、前記複数の監視用カメラで撮影された画像を用いて上方から見下ろした平面視画像を生成するとともに、前記車体を平面で表示する図形化されたアイコン画像31aを生成し、前記平面視画像を前記アイコン画像の周囲に表示する合成処理を行い、前記左側方カメラの前方視野が前記運転室で遮られる部分31cに前記複数の監視用カメラで撮影された画像とは異なる画像(例えば、アイコン131c)を合成して、前記合成画像を生成するものとした。 (1) In the above embodiment, the vehicle body constituted by the upper swing body 2 and the lower traveling body 1, the driver's cab 4 provided in front of the upper swing body, and the surroundings of the upper swing body are photographed. A plurality of monitoring cameras 14 to 16, a controller 20 that generates a composite image 31 from images captured by the plurality of monitoring cameras, and a monitor 30 that displays the composite image generated by the controller. In the hydraulic excavator 100, the plurality of monitoring cameras are provided on the left side of the upper swing body and behind the operator's cab, and the left side camera 16 has a field of view in front of and on the left side of the upper swing body; A right side camera 14 provided on the right side of the upper swing body and having a field of view in front of and on the right side of the upper swing body, and on the left and right sides of the upper swing body provided behind the upper swing body. A rear camera 15 having a rear view, and the controller generates a plan view image looking down from above using images captured by the plurality of monitoring cameras and displays the vehicle body in a plane. The graphic image of the icon 31a is generated, and the planar view image is displayed around the icon image. The combining process is performed, and the front view of the left-side camera is covered by the plurality of parts 31c in the driver's cab. An image (for example, the icon 131c) different from the image captured by the surveillance camera is combined to generate the combined image.
 これにより、オペレータが違和感なく周囲監視を行うことができる。 With this, the operator can monitor the surroundings without discomfort.
 (2)また、上記の実施の形態では、上記(1)の油圧ショベル100において、前記左側方カメラ16及び右側方カメラ14が前記車体(例えば、上部旋回体2及び下部走行体1)を上方から見た場合の外郭よりも内側に設けられているものとした。 (2) In the above-described embodiment, in the hydraulic excavator 100 of (1), the left side camera 16 and the right side camera 14 move above the vehicle body (for example, the upper swing body 2 and the lower traveling body 1). It is supposed to be provided inside the outer shell when viewed from above.
 (3)また、上記の実施の形態では、上記(1)の油圧ショベル100において、前記コントローラ20は、前記複数の監視用カメラ14~16からの画像に基づいて移動体の有無を検知し、前記移動体が検知された場合には前記モニタ30に前記移動体を検知したことを示す情報を表示するものとした。 (3) Further, in the above embodiment, in the hydraulic excavator 100 of (1), the controller 20 detects the presence or absence of a moving body based on the images from the plurality of monitoring cameras 14 to 16, When the moving body is detected, information indicating that the moving body is detected is displayed on the monitor 30.
 (4)また、上記の実施の形態では、上記(1)の油圧ショベル100において、前記コントローラ20は、前記合成画像31の前記アイコン画像31aの周囲に沿うように前記アイコン画像から予め定めた距離に配置された、直線部132d,134d,136dと曲線部133d,135dとからなる第一の外輪線31dと、前記アイコン画像から見て前記第一の外輪線の外側に沿うように配置された、直線部132e,134e,136eと曲線部133e,135eとからなる第二の外輪線31eと、を前記合成画像に表示するものとした。 (4) Further, in the above embodiment, in the hydraulic excavator 100 according to (1), the controller 20 has a predetermined distance from the icon image so as to be along the periphery of the icon image 31a of the composite image 31. The first outer ring line 31d, which is composed of the straight line portions 132d, 134d, 136d and the curved line portions 133d, 135d, and the outer side of the first outer ring line as seen from the icon image. The second outer ring line 31e including the straight line portions 132e, 134e, 136e and the curved line portions 133e, 135e is displayed on the composite image.
 (5)また、上記の実施の形態では、上記(4)の油圧ショベル100において、前記コントローラ20は、前記合成画像31における前記上部旋回体2の旋回範囲に相当する範囲よりも外側に前記第二の外輪線31eを表示するものとした。 (5) Further, in the above embodiment, in the hydraulic excavator 100 according to (4), the controller 20 is located outside the range corresponding to the swing range of the upper swing body 2 in the composite image 31. The second outer ring line 31e is displayed.
 <付記>
 なお、本発明は上記の実施の形態に限定されるものではなく、その要旨を逸脱しない範囲内の様々な変形例や組み合わせが含まれる。また、本発明は、上記の実施の形態で説明した全ての構成を備えるものに限定されず、その構成の一部を削除したものも含まれる。また、上記の各構成、機能等は、それらの一部又は全部を、例えば集積回路で設計する等により実現してもよい。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。
<Appendix>
It should be noted that the present invention is not limited to the above-described embodiments, and various modifications and combinations are included within the scope of the invention. Further, the present invention is not limited to the one provided with all the configurations described in the above-described embodiments, and includes one obtained by deleting a part of the configuration. Further, the above-described respective configurations, functions and the like may be realized by partially or entirely designing, for example, an integrated circuit. Further, each of the above-described configurations, functions and the like may be realized by software by a processor interpreting and executing a program for realizing each function.
 1…下部走行体、1a,1b…走行油圧モータ、1c,1d…クローラフレーム、1e,1f…クローラ、2…上部旋回体、2a…旋回フレーム、2b…ミラー、3…フロント作業機、3a…ブーム、3b…アーム、3c…バケット、3d…ブームシリンダ、3e…アームシリンダ、3f…バケットシリンダ、4…運転室、14…右側方カメラ(監視用カメラ)、15…後方カメラ(監視用カメラ)、16…左側方カメラ(監視用カメラ)、20…コントローラ、21…画像記憶部、22…移動体判定部、23…記憶部、24…カメラ取付位置記憶部、25…画像合成処理部、30…モニタ、31…合成画像、31a…アイコン画像、31d…第一の外輪線、31e…第二の外輪線、31f…マーカ、100…油圧ショベル、131b…アイコン、131c…アイコン DESCRIPTION OF SYMBOLS 1 ... Lower traveling body, 1a, 1b ... Traveling hydraulic motor, 1c, 1d ... Crawler frame, 1e, 1f ... Crawler, 2 ... Upper revolving body, 2a ... Revolving frame, 2b ... Mirror, 3 ... Front working machine, 3a ... Boom, 3b ... Arm, 3c ... Bucket, 3d ... Boom cylinder, 3e ... Arm cylinder, 3f ... Bucket cylinder, 4 ... Driver's cab, 14 ... Right side camera (surveillance camera), 15 ... Rear camera (surveillance camera) , 16 ... Left side camera (surveillance camera), 20 ... Controller, 21 ... Image storage unit, 22 ... Moving body determination unit, 23 ... Storage unit, 24 ... Camera mounting position storage unit, 25 ... Image combination processing unit, 30 ... monitor, 31 ... composite image, 31a ... icon image, 31d ... first outer ring line, 31e ... second outer ring line, 31f ... marker, 100 ... hydraulic excavator, 131b ... Con, 131c ... icon

Claims (5)

  1.  上部旋回体及び下部走行体により構成される車体と、前記上部旋回体の前方に設けられた運転室と、前記上部旋回体の周囲を撮影する複数の監視用カメラと、前記複数の監視用カメラで撮影された画像から合成画像を生成するコントローラと、前記コントローラで生成された前記合成画像を表示するモニタと、を備えた油圧ショベルにおいて、
     前記複数の監視用カメラは、前記上部旋回体の左側の前記運転室の後方に設けられ、前記上部旋回体の前方及び左側方を視野にもつ左側方カメラと、前記上部旋回体の右側方に設けられ、前記上部旋回体の前方及び右側方を視野にもつ右側方カメラと、前記上部旋回体の後方に設けられ、前記上部旋回体の左右の側方及び後方を視野にもつ後方カメラと、を有し、
     前記コントローラは、前記複数の監視用カメラで撮影された画像を用いて上方から見下ろした平面視画像を生成するとともに、前記車体を平面で表示する図形化されたアイコン画像を生成し、前記平面視画像を前記アイコン画像の周囲に表示する合成処理を行い、前記左側方カメラの前方視野が前記運転室で遮られる部分に前記複数の監視用カメラで撮影された画像とは異なる画像を合成して、前記合成画像を生成することを特徴とする油圧ショベル。
    A vehicle body composed of an upper revolving structure and a lower traveling structure, a driver's cab provided in front of the upper revolving structure, a plurality of monitoring cameras for photographing the periphery of the upper revolving structure, and the plurality of monitoring cameras. In a hydraulic excavator including a controller that generates a composite image from the image captured in, and a monitor that displays the composite image generated by the controller,
    The plurality of monitoring cameras are provided on the left side of the upper revolving structure and behind the operator's cab, and have a left-side camera having a front view and a left side view of the upper revolving structure and a right side of the upper revolving structure. A right side camera provided in front and right side of the upper revolving structure in the field of view; a rear camera provided in the rear of the upper revolving structure in the left and right sides and the rear of the upper revolving structure in the field of view; Have
    The controller generates a planar view image looking down from above using images captured by the plurality of surveillance cameras, and also generates a graphic icon image for displaying the vehicle body in a plane, An image is displayed around the icon image, and a composite image different from the images captured by the plurality of monitoring cameras is composited in a portion where the front view of the left side camera is blocked by the driver's cab. A hydraulic excavator characterized by generating the composite image.
  2.  請求項1記載の油圧ショベルにおいて、
     前記左側方カメラ及び右側方カメラが前記車体を上方から見た場合の外郭よりも内側に設けられていることを特徴とする油圧ショベル。
    The hydraulic excavator according to claim 1,
    A hydraulic excavator, wherein the left side camera and the right side camera are provided inside an outer contour of the vehicle body when viewed from above.
  3.  請求項1記載の油圧ショベルにおいて、
     前記コントローラは、前記複数の監視用カメラからの画像に基づいて移動体の有無を検知し、前記移動体が検知された場合には前記モニタに前記移動体を検知したことを示す情報を表示することを特徴とする油圧ショベル。
    The hydraulic excavator according to claim 1,
    The controller detects the presence or absence of a moving body based on the images from the plurality of monitoring cameras, and when the moving body is detected, displays information indicating that the moving body is detected on the monitor. A hydraulic excavator characterized by that.
  4.  請求項1記載の油圧ショベルにおいて、
     前記コントローラは、前記合成画像の前記アイコン画像の周囲に沿うように前記アイコン画像から予め定めた距離に配置された、直線部と曲線部とからなる第一の外輪線と、前記アイコン画像から見て前記第一の外輪線の外側に沿うように配置された、直線部と曲線部とからなる第二の外輪線と、を前記合成画像に表示することを特徴とする油圧ショベル。
    The hydraulic excavator according to claim 1,
    The controller includes a first outer ring line composed of a straight line portion and a curved line portion, which is arranged at a predetermined distance from the icon image along the periphery of the icon image of the composite image, and is viewed from the icon image. And a second outer ring line composed of a straight line portion and a curved line portion, which is arranged along the outer side of the first outer ring line, in the composite image.
  5.  請求項4記載の油圧ショベルにおいて、
     前記コントローラは、前記合成画像における前記上部旋回体の旋回範囲に相当する範囲よりも外側に前記第二の外輪線を表示することを特徴とする油圧ショベル。
    The hydraulic excavator according to claim 4,
    The hydraulic excavator, wherein the controller displays the second outer wheel line outside a range corresponding to a swing range of the upper swing body in the composite image.
PCT/JP2019/040240 2018-10-15 2019-10-11 Hydraulic excavator WO2020080294A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-194684 2018-10-15
JP2018194684A JP2020063569A (en) 2018-10-15 2018-10-15 Hydraulic excavator

Publications (1)

Publication Number Publication Date
WO2020080294A1 true WO2020080294A1 (en) 2020-04-23

Family

ID=70283458

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/040240 WO2020080294A1 (en) 2018-10-15 2019-10-11 Hydraulic excavator

Country Status (2)

Country Link
JP (1) JP2020063569A (en)
WO (1) WO2020080294A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7291290B2 (en) 2020-03-31 2023-06-14 マレリ株式会社 Cooling system

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012074929A (en) * 2010-09-29 2012-04-12 Hitachi Constr Mach Co Ltd Circumference monitor of work machine
WO2017022042A1 (en) * 2015-07-31 2017-02-09 株式会社小松製作所 Display system of work machine, and display method of work machine
JP2017152840A (en) * 2016-02-23 2017-08-31 株式会社フジタ Fitting structure of overhead image generation device for construction machine
WO2018008504A1 (en) * 2016-07-04 2018-01-11 住友建機株式会社 Shovel
WO2018008542A1 (en) * 2016-07-05 2018-01-11 住友建機株式会社 Shovel
JP2018121221A (en) * 2017-01-25 2018-08-02 住友重機械工業株式会社 Periphery monitoring system for work machine

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016157462A1 (en) * 2015-03-31 2016-10-06 株式会社小松製作所 Work-machine periphery monitoring device

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012074929A (en) * 2010-09-29 2012-04-12 Hitachi Constr Mach Co Ltd Circumference monitor of work machine
WO2017022042A1 (en) * 2015-07-31 2017-02-09 株式会社小松製作所 Display system of work machine, and display method of work machine
JP2017152840A (en) * 2016-02-23 2017-08-31 株式会社フジタ Fitting structure of overhead image generation device for construction machine
WO2018008504A1 (en) * 2016-07-04 2018-01-11 住友建機株式会社 Shovel
WO2018008542A1 (en) * 2016-07-05 2018-01-11 住友建機株式会社 Shovel
JP2018121221A (en) * 2017-01-25 2018-08-02 住友重機械工業株式会社 Periphery monitoring system for work machine

Also Published As

Publication number Publication date
JP2020063569A (en) 2020-04-23

Similar Documents

Publication Publication Date Title
JP7108750B2 (en) System and method
JP5779244B2 (en) Work machine ambient monitoring device
JP6071786B2 (en) Work machine ambient monitoring device
JP6204884B2 (en) Peripheral display device for swivel work machine
JP5473870B2 (en) Construction machine monitoring equipment
JP4776491B2 (en) Work machine ambient monitoring device
JP3351984B2 (en) Apparatus and method for improving visibility of working vehicle
JP6095592B2 (en) Monitoring image display device for hydraulic excavator
JP5269026B2 (en) Work machine ambient monitoring device
KR101123738B1 (en) System and method for monitoring safe operation of heavy machinery
JP2013253402A (en) Surrounding monitoring device for work machine
JP5814187B2 (en) Display device for self-propelled industrial machine
WO2013038874A1 (en) Surroundings monitoring device for work machine
JPWO2012164712A1 (en) Work machine ambient monitoring device
CN113152552A (en) Control system and method for construction machine
JP6917167B2 (en) Bird&#39;s-eye view image display device for construction machinery
CN108432241B (en) Excavator
WO2020080294A1 (en) Hydraulic excavator
US10186017B2 (en) Construction machinery
JP7349880B2 (en) Work machine surroundings monitoring system, work machine, and work machine surroundings monitoring method
JP6188858B2 (en) Work machine ambient monitoring device
JP6224770B2 (en) Dump truck display device
JP2008008122A (en) Monitor for construction machinery
JP7428588B2 (en) Video display system for construction vehicles
JP2023122360A (en) image generation system

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19872825

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19872825

Country of ref document: EP

Kind code of ref document: A1