JP6644832B2 - Excavator, excavator display method, and excavator display device - Google Patents
Excavator, excavator display method, and excavator display device Download PDFInfo
- Publication number
- JP6644832B2 JP6644832B2 JP2018117460A JP2018117460A JP6644832B2 JP 6644832 B2 JP6644832 B2 JP 6644832B2 JP 2018117460 A JP2018117460 A JP 2018117460A JP 2018117460 A JP2018117460 A JP 2018117460A JP 6644832 B2 JP6644832 B2 JP 6644832B2
- Authority
- JP
- Japan
- Prior art keywords
- bucket
- attachment
- shovel
- image
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Component Parts Of Construction Machinery (AREA)
Description
本発明は、ショベル、ショベルの表示方法及びショベルの表示装置に関する。 The present invention relates to a shovel, a shovel display method, and a shovel display device.
従来、油圧ショベルに搭載される掘削状況表示パネルが知られている(例えば、特許文献1参照。)。 Conventionally, an excavation status display panel mounted on a hydraulic excavator is known (for example, see Patent Document 1).
この掘削状況表示パネルは、油圧ショベルのキャビン上部に取り付けられたカメラであり、掘削作業対象点近傍の状態を撮像するカメラの撮像画像を表示する表示モニタを備える。そのカメラの撮像画像には、X−Y座標を重畳表示するための画像処理が施され、さらに、油圧ショベルの要部平面形状(図形画像)が重畳表示される。また、掘削状況表示パネルは、油圧ショベル本体と掘削作業対象点との間の距離、及び、掘削作業領域を規定する掘削境界線と掘削作業対象点との間の距離を数値表示する掘削距離表示部を備える。なお、表示モニタと掘削距離表示部とは互いに隣接して配置されている。 The excavation status display panel is a camera attached to the upper part of the cabin of the excavator, and includes a display monitor that displays an image captured by a camera that captures a state near an excavation work target point. The captured image of the camera is subjected to image processing for superimposing and displaying XY coordinates, and furthermore, the main part planar shape (graphic image) of the excavator is superimposed and displayed. Also, the excavation status display panel numerically displays the distance between the excavator body and the excavation work point and the distance between the excavation boundary defining the excavation work area and the excavation work point. It has a unit. The display monitor and the excavation distance display are arranged adjacent to each other.
上述の構成により、掘削状況表示パネルは、現在のバケット位置と所要の掘削可能範囲とをオペレータが読み取れるようにして掘削作業を効率的に実行させるようにする。 With the above-described configuration, the excavation status display panel allows the operator to read the current bucket position and the required excavable range so that the excavation work is efficiently executed.
しかしながら、特許文献1に記載の掘削状況表示パネルは、カメラ画像に油圧ショベルの要部平面形状(上面視のCG画像)を重畳表示させる。そのため、掘削状況表示パネルの表示は、キャビンのフロントウィンドウを通じてオペレータが実際に視認するショベル外部の状況とはかけ離れた表示となり、オペレータが表示内容を直感的に理解できないおそれがある。 However, the excavation status display panel described in Patent Literature 1 superimposes and displays the main part planar shape (CG image in top view) of the hydraulic shovel on the camera image. Therefore, the display of the excavation status display panel is far from the status of the outside of the shovel which is actually visually recognized by the operator through the front window of the cabin, and the operator may not be able to intuitively understand the display contents.
上述の点に鑑み、本発明は、ショベルのアタッチメントの状態をオペレータがより直感的に理解できるようにするショベルを提供することを目的とする。 In view of the above, an object of the present invention is to provide a shovel that allows an operator to more intuitively understand the state of the attachment of the shovel.
上述の目的を達成するために、本発明の実施例に係るショベルは、下部走行体と、該下部走行体に旋回可能に配置された上部旋回体と、バケットを含み、該バケット内に取り込んだ土砂を露出させた状態で持ち上げるアタッチメントと、表示装置と、を備えたショベルであって、ショベルの周囲にある物体によって前記バケットが不可視となった場合、前記バケットが認識可能となる態様で前記バケットに関する画像が前記表示装置に表示される。
In order to achieve the above object, a shovel according to an embodiment of the present invention includes a lower traveling body, an upper revolving body pivotally disposed on the lower traveling body, and a bucket. A shovel including an attachment for lifting the earth and sand in an exposed state, and a display device, wherein the bucket is recognizable when the bucket becomes invisible due to an object around the shovel. Is displayed on the display device.
上述の手段により、本発明は、ショベルのアタッチメントの状態をオペレータがより直感的に理解できるようにするショベルを提供することができる。 By the above means, the present invention can provide a shovel that allows an operator to more intuitively understand the state of the attachment of the shovel.
以下、図面を参照しつつ、本発明の実施例について説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
図1は、本発明が適用される建設機械としてのショベル50の構成例を示す概略側面図である。ショベル50の下部走行体1には、旋回機構2を介して上部旋回体3が搭載される。上部旋回体3には、ブーム4が取り付けられ、ブーム4の先端には、アーム5が取り付けられ、アーム5の先端には、バケット6が取り付けられる。ブーム4、アーム5、及びバケット6は、掘削アタッチメントを構成し、ブームシリンダ7、アームシリンダ8、及びバケットシリンダ9によりそれぞれ油圧駆動される。また、上部旋回体3には、キャビン10が設けられ、且つエンジン等の動力源が搭載される。さらに、上部旋回体3には、ショベル50の水平面に対する傾きを検出する傾き検出装置32が搭載される。掘削アタッチメントには、掘削アタッチメントの状態を検出するアタッチメント状態検出装置33が搭載される。
FIG. 1 is a schematic side view showing a configuration example of a shovel 50 as a construction machine to which the present invention is applied. The upper traveling body 3 is mounted on the lower traveling body 1 of the shovel 50 via the
図2は、ショベル50におけるキャビン10の内部を示す概略図である。キャビン10の内部には、制御装置30、入力装置34、及び表示装置35が設置される。また、キャビン10の天井部には、ショベル50の前方を撮像する撮像装置31が搭載される。表示装置35は、例えば、キャビン10の右前方のピラーに取り付けられ、オペレータがキャビン10のフロントウィンドウ11を通して視認する外部の光景とほぼ同じ光景を映し出す。この取り付け位置により、オペレータは、視線を大きく動かすことなく、フロントウィンドウ11を通じて視認する外部の光景と、表示装置35に表示される光景とを見比べることができ、表示装置35に表示される光景を直感的に理解することができる。
FIG. 2 is a schematic diagram showing the inside of the
図3は、ショベル50に搭載されるモニタシステム100の構成例を示す概略図である。モニタシステム100は、主に、制御装置30、撮像装置31、傾き検出装置32、アタッチメント状態検出装置33、入力装置34、及び表示装置35で構成される。
FIG. 3 is a schematic diagram illustrating a configuration example of the
制御装置30は、モニタシステム100の動作を制御する装置であり、例えば、CPU、RAM、ROM等を備えるコンピュータである。具体的には、制御装置30は、アタッチメント関連情報生成部300、作業量推定部301、及び表示制御部302の各機能要素に対応するプログラムをROMから読み出してRAMにロードし、各機能要素に対応する処理をCPUに実行させる。
The
撮像装置31は、建設機械の前方を撮像する装置である。本実施例では、撮像装置31は、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)等の撮像素子を備えたカメラである。具体的には、撮像装置31は、ショベル50の前方を撮像して掘削アタッチメントの画像(以下、「アタッチメント画像」とする。)を含む前方画像を取得し、取得した前方画像を制御装置30に対して出力する。
The
傾き検出装置32は、建設機械の傾きを検出する装置である。本実施例では、傾き検出装置32は、ショベル50の水平面に対する2軸方向(前後方向及び左右方向)の傾斜角を検出する傾斜センサであり、検出した傾斜角を制御装置30に対して出力する。
The
アタッチメント状態検出装置33は、建設機械のアタッチメントの状態を検出する装置である。アタッチメント状態検出装置33は、例えば、ショベル50の掘削アタッチメントの状態に関する情報を取得するためのセンサである。本実施例では、アタッチメント状態検出装置33は、上部旋回体3に対するブーム4の傾きを検出するブーム角度センサ33a、ブーム4に対するアーム5の傾きを検出するアーム角度センサ33b、及び、アーム5に対するバケット6の傾きを検出するバケット角度センサ33cを含む。また、アタッチメント状態検出装置33は、取得した情報を制御装置30に対して出力する。これらのアタッチメント状態検出装置33の出力により、制御装置30は、バケット6の先端位置、ショベル50が位置する平面(以下、「設置面」とする。)とバケット6の基準面とが形成する掘削角度等を導き出すことができる。なお、バケット6の基準面は、バケット6の構成要素が形成する面の何れかであり、例えば、バケット6の背面である。
The attachment
図4は、掘削角度の例を示す概略図であり、図4(A)は、ショベル50に接近する方向に高くなる45度の角度の法面を形成する際の掘削角度を示し、図4(B)は、ショベル50から遠ざかる方向に高くなる30度の法面を形成する際の掘削角度を示す。ここでは、ショベル50に接近する方向に高くなる法面を形成する際の掘削角度を正値で示し、ショベル50から遠ざかる方向に高くなる法面を形成する際の掘削角度を負値で示す。 FIG. 4 is a schematic diagram illustrating an example of an excavation angle. FIG. 4A illustrates an excavation angle when a slope having a 45-degree angle that increases in a direction approaching the shovel 50 is formed. (B) shows the excavation angle at the time of forming a 30-degree slope that becomes higher in the direction away from the shovel 50. Here, the excavation angle when forming a slope that increases in the direction approaching the shovel 50 is indicated by a positive value, and the excavation angle when forming a slope that increases in the direction away from the shovel 50 is indicated by a negative value.
また、アタッチメント状態検出装置33は、ブームシリンダ7、アームシリンダ8、及びバケットシリンダ9のそれぞれにおける作動油の圧力を検出する圧力センサを含み得る。
Further, the attachment
また、アタッチメント状態検出装置33は、ブーム4、アーム5、バケット6のそれぞれに対応する操作レバー(図示せず。)の操作量を検出するレバー操作量センサを含み得る。
Further, the attachment
また、アタッチメント状態検出装置33は、ブームシリンダ7、アームシリンダ8、及びバケットシリンダ9のそれぞれに作動油を供給する油圧ポンプ(図示せず。)の吐出圧を検出する吐出圧センサ、油圧ポンプの吐出流量を検出する流量センサ等を含み得る。
The attachment
入力装置34は、制御装置30に対して各種情報を入力する装置である。具体的には、キャビン10内に配置されるボタン、スイッチ、ダイヤル、タッチパネル等である。
The
表示装置35は、各種情報を表示する装置である。本実施例では、表示装置35は、例えば、液晶ディスプレイである。
The
次に、制御装置30における各種機能要素について説明する。
Next, various functional elements in the
アタッチメント関連情報生成部300は、アタッチメント関連情報を生成するための機能要素である。
The attachment-related
「アタッチメント関連情報」とは、建設機械のアタッチメントに関連する情報であり、テキスト、図形、写真等、前方画像上に重畳表示できるものであれば何れの形態であってもよい。本実施例において、アタッチメント関連情報は、掘削アタッチメントの先端とショベル50の基準位置との間の水平距離に関する情報、設置面から掘削アタッチメントの先端までの垂直距離に関する情報、設置面とバケット6の基準面とが形成する掘削角度に関する情報、掘削アタッチメントの先端と予め設定された目標掘削深さとの間の差に関する情報、掘削アタッチメントの輪郭に関する情報等を含む。なお、ショベル50の基準位置は、例えば、ショベル50の旋回中心上の一点、キャビン10の前端面上の一点等である。
The “attachment-related information” is information relating to the attachment of the construction machine, and may be in any form as long as it can be superimposed and displayed on a front image, such as a text, a graphic, or a photograph. In this embodiment, the attachment-related information includes information on the horizontal distance between the tip of the excavation attachment and the reference position of the shovel 50, information on the vertical distance from the installation surface to the tip of the excavation attachment, and the reference of the installation surface and the
本実施例では、アタッチメント関連情報生成部300は、例えば、アタッチメント状態検出装置33の出力に基づいてアタッチメント関連情報を生成する。
In the present embodiment, the attachment-related
作業量推定部301は、建設機械の作業量を推定するための機能要素である。本実施例では、作業量推定部301は、アタッチメント状態検出装置33の出力に基づいてショベル50の掘削アタッチメントによる作業量を推定する。
The work
掘削アタッチメントによる作業量は、例えば、バケット6によって持ち上げられる土砂の体積や重量である。具体的には、作業量推定部301は、ブーム角度センサ33a、アーム角度センサ33b、及びバケット角度センサ33cのそれぞれの検出値に基づいて掘削アタッチメントの姿勢を導き出す。そして、作業量推定部301は、ブームシリンダ7の作動油の圧力を検出する圧力センサの検出値に基づいて、バケット6によって持ち上げられた土砂の重量を掘削アタッチメントの作業量として推定する。掘削アタッチメントの姿勢を考慮するのは、バケット6が同じ重量の土砂を持ち上げる場合であっても、ショベル50とバケット6との間の水平距離が大きくなるにつれて、ブームシリンダ7の作動油の圧力が増大するためである。
The work amount of the excavation attachment is, for example, the volume and weight of the earth and sand lifted by the
表示制御部302は、表示装置35に表示される画面の内容を制御するための機能要素である。本実施例では、表示制御部302は、撮像装置31が撮像した前方画像上にアタッチメント関連情報生成部300が生成したアタッチメント関連情報を重畳表示させる。また、表示制御部302は、前方画像におけるアタッチメント画像の表示位置とアタッチメント関連情報の表示位置とを連動させる。具体的には、表示制御部302は、アタッチメント状態検出装置33の出力に基づいてアタッチメント画像の表示位置を導き出し、導き出したアタッチメント画像の表示位置に基づいて、アタッチメント関連情報の表示位置を決定する。そして、表示制御部302は、前方画面上の、決定した表示位置にアタッチメント関連情報を重畳表示させる。なお、表示制御部302は、掘削アタッチメントの姿勢が決まれば、アタッチメント画像の表示位置を一意に決定することができる。撮像装置31がキャビン10に固定的に取り付けられているためである。
The
図5及び図6は、表示装置35の画面Gに重畳表示されるアタッチメント関連情報の例を示す。図5及び図6のそれぞれにおいて、実線は、前方画像に含まれる実写画像を示し、破線は、前方画像に重畳表示される情報を示す。
5 and 6 show examples of the attachment-related information superimposed and displayed on the screen G of the
図5において、情報(線分)G1は、ショベル50が位置する平面(設置面)を表す線分であり、線分G1a及び線分G1bで構成される。線分G1aは、例えば、下部走行体1の左側のクローラの前方への延長線を示し、線分G1bは、例えば、設置面へ投影された掘削アタッチメントの投影線及びその延長線を示す。 In FIG. 5, information (line segment) G1 is a line segment representing a plane (installation surface) on which the shovel 50 is located, and includes a line segment G1a and a line segment G1b. The line segment G1a indicates, for example, a forward extension line of the crawler on the left side of the lower traveling body 1, and the line segment G1b indicates, for example, a projection line of the excavation attachment projected on the installation surface and its extension line.
情報(線分)G2は、情報G1と同様、設置面を表す線分であり、例えば、線分G1a及び線分G1bに垂直な線分である。また、線分G2は、バケット6の先端の鉛直下方の点を通過する。
The information (line segment) G2 is a line segment representing the installation surface, like the information G1, and is, for example, a line segment perpendicular to the line segments G1a and G1b. The line segment G2 passes through a point vertically below the tip of the
情報G3は、バケット6の先端位置を表す情報であり、先端中心点G3a、垂直補助線G3b、及び水平補助線G3cで構成される。先端中心点G3aは、例えば、バケット6の先端にある爪部の幅方向の中点に相当する。また、垂直補助線G3bは、先端中心点G3aから画面Gの鉛直下方に延びる垂直線である。したがって、垂直補助線G3bは、線分G1b及び線分G2の双方と直交する。水平補助線G3cは、先端中心点G3aから画面Gの左右に延びる水平線である。したがって、水平補助線G3cは、線分G2に平行に延びる。
The information G3 is information indicating the tip position of the
情報G4は、目標掘削深さを表す情報であり、水平補助線G4a及び矢印G4bで構成される。目標掘削深さは、入力装置34を通じて設定される値である。水平補助線G4aは、目標掘削深さにおいて、垂直補助線G3bとの交点から画面Gの左右に延びる水平線である。したがって、水平補助線G4aは、線分G2及び水平補助線G3cのそれぞれに平行に延びる。矢印G4bは、目標掘削深さのレベルを強調して提示するための画像であり、矢印の先端が水平補助線G4aと一致する。
The information G4 is information indicating a target excavation depth, and includes a horizontal auxiliary line G4a and an arrow G4b. The target excavation depth is a value set through the
情報G5は、バケット6の先端から目標掘削深さまでの垂直距離を表す情報であり、双方向矢印G5a及び数値表示G5bで構成される。双方向矢印G5aは、水平補助線G3cと水平補助線G4aとの間に、垂直補助線G3bに平行に配置される。数値表示G5bは、バケット6の先端から目標掘削深さまでの垂直距離を表す数値表示であり、双方向矢印G5aに隣接して配置される。図5は、バケット6の先端から目標掘削深さまでの垂直距離が1.3メートルであることを示す。
The information G5 is information indicating a vertical distance from the tip of the
情報G6は、バケット6の先端から設置面までの垂直距離を表す情報であり、双方向矢印G6a及び数値表示G6bで構成される。双方向矢印G6aは、線分G2と水平補助線G3cと間に、垂直補助線G3bに平行に配置される。数値表示G6bは、バケット6の先端から設置面までの垂直距離を表す数値表示であり、双方向矢印G6aに隣接して配置される。図5は、バケット6の先端から設置面までの垂直距離が0.5メートルであることを示す。
The information G6 is information indicating a vertical distance from the tip of the
情報G7は、バケット6の先端とショベル50の基準位置との間の水平距離を表す情報であり、片方向矢印G7a及び数値表示G7bで構成される。片方向矢印G7aは、線分G1bに平行に配置される。数値表示G7bは、バケット6の先端とショベル50の基準位置との間の水平距離を表す数値表示であり、片方向矢印G7aに隣接して配置される。図5は、バケット6の先端とショベル50の基準位置との間の水平距離が2.3メートルであることを示す。
The information G7 is information indicating a horizontal distance between the tip of the
情報G8は、バケット6によって掘削された土砂の重量を表す情報であり、片方向矢印G8a及び数値表示G8bで構成される。片方向矢印G8aは、バケット6によって掘削された土砂に関する情報であることを強調して提示するためにバケット6の実画像から側方に引き出される水平線である。数値表示G8bは、バケット6によって掘削された土砂の重量を表す数値表示であり、片方向矢印G8aに隣接して配置される。図5は、バケット6によって掘削された土砂の重量が0kgであることを示す。
The information G8 is information indicating the weight of the earth and sand excavated by the
情報G9は、設置面とバケット6の基準面とが形成する掘削角度を表す情報であり、補助線G9a、補助線G9b、及び数値表示G9cで構成される。補助線G9aは、バケット6の基準面である背面に沿って延びる線分である。補助線G9bは、設置面と補助線G9aとの間に形成される角度であることを強調して提示するために設置面と補助線G9aとの間に配置される曲線である。数値表示G9cは、掘削角度を表す数値表示であり、補助線G9bに隣接して配置される。図5は、掘削角度が−18度であることを示す。
The information G9 is information indicating an excavation angle formed by the installation surface and the reference surface of the
情報G10は、ショベル50の前後方向及び左右方向の傾きを表す情報であり、中心点G10a、左右傾斜度目盛りG10b、左右傾斜度指示矢印G10c、前後傾斜度目盛りG10d、前後傾斜度指示矢印G10eで構成される。中心点G10aは、ショベル50の中心を表す点である。左右傾斜度目盛りG10bは、ショベル50の左右方向の傾き(ロール角)に対応する目盛りであり、図5において0°より下に位置する目盛りが右方向への傾きに対応し、0°より上に位置する目盛りが左方向への傾きに対応する。左右傾斜度指示矢印G10cは、傾き検出装置32の出力に基づいて左右傾斜度目盛りG10bにおけるロール角の値を指示する矢印である。図5は、ショベル50が右方向に約5°傾斜している状態を示す。前後傾斜度目盛りG10dは、ショベル50の前後方向の傾き(ピッチ角)に対応する目盛りであり、図5において0°より下に位置する目盛りが後方への傾きに対応し、0°より上に位置する目盛りが前方への傾きに対応する。前後傾斜度指示矢印G10eは、傾き検出装置32の出力に基づいて前後傾斜度目盛りG10dにおけるピッチ角の値を指示する矢印である。図5は、ショベル50が後方に約10°傾斜している状態を示す。
The information G10 is information representing the inclination of the shovel 50 in the front-rear direction and the left-right direction. The information G10 includes a center point G10a, a left-right inclination scale G10b, a left-right inclination instruction arrow G10c, a front-rear inclination index G10d, and a front-rear inclination instruction arrow G10e. Be composed. The center point G10a is a point representing the center of the shovel 50. The left-right inclination scale G10b is a scale corresponding to the inclination (roll angle) of the shovel 50 in the left-right direction, and a scale located below 0 ° in FIG. The scale located at corresponds to the leftward tilt. The left-right inclination degree instruction arrow G10c is an arrow that indicates the value of the roll angle on the left-right inclination degree scale G10b based on the output of the
また、図6の情報G11は、バケット6の存在位置を表す情報であり、バケット6の輪郭画像である。輪郭画像G11は、前方画像における実際のバケット6の画像が可視であるか不可視であるかにかかわらず、画面Gにおける実際のバケット6と同じ位置に、実際のバケット6と同じ姿勢で重畳表示される。図6は、実際のバケット6が土砂に埋没して不可視となっているが、バケット6の輪郭画像により土砂内のバケット6の位置及び姿勢が認識可能となっている状態を示す。
6 is information indicating the location of the
上述の情報G1〜情報G11のそれぞれは、赤色、緑色、黄色等の視認し易い色で前方画像上に重畳表示され、任意の組み合わせで表示・非表示が設定される。 Each of the above information G1 to information G11 is superimposed and displayed on the front image in an easily recognizable color such as red, green, and yellow, and display / non-display is set in an arbitrary combination.
また、情報G3〜情報G9、及び情報G11のそれぞれは、表示制御部302により、前方画像における実際の掘削アタッチメントの画像(アタッチメント画像)の表示位置の変化に連動してその表示位置が変更される。
The display position of each of the information G3 to the information G9 and the information G11 is changed by the
次に、図7を参照しながら、モニタシステム100が表示装置35に表示させる表示画像を生成する処理(以下、「表示画像生成処理」とする。)について説明する。なお、図7は、表示画像生成処理の流れを示すフローチャートであり、モニタシステム100は、所定周期で繰り返しこの表示画像生成処理を実行する。
Next, a process of generating a display image to be displayed on the
最初に、モニタシステム100は、撮像装置31を用いてショベル50の前方を撮像して前方画像を取得する(ステップS1)。
First, the
その後、モニタシステム100は、アタッチメント状態検出装置33を用いてショベル50の掘削アタッチメントの状態を検出する(ステップS2)。具体的には、モニタシステム100は、ブーム角度センサ33a、アーム角度センサ33b、バケット角度センサ33c、並びに、ブームシリンダ7、アームシリンダ8、及びバケットシリンダ9のそれぞれにおける圧力を検出する圧力センサの出力を取得する。
Thereafter, the
その後、モニタシステム100は、制御装置30におけるアタッチメント関連情報生成部300により、検出した掘削アタッチメントの状態に基づいて、アタッチメント関連情報を生成する(ステップS3)。具体的には、モニタシステム100は、掘削アタッチメントの先端とショベル50の基準位置との間の水平距離に関する情報、設置面から掘削アタッチメントの先端までの距離に関する情報、設置面とバケット6の基準面とが形成する掘削角度に関する情報、掘削アタッチメントの先端と予め設定された目標掘削深さとの間の差に関する情報、バケット6の輪郭に関する情報等を作成する。
Thereafter, the
また、モニタシステム100は、制御装置30における作業量推定部301により、検出した掘削アタッチメントの状態に基づいて、バケット6によって掘削された土砂の重量をアタッチメント関連情報として推定する。
Further, the
その後、モニタシステム100は、制御装置30における表示制御部302により、検出した掘削アタッチメントの状態に基づいて、前方画像における実際のバケット6の先端の表示位置を導き出し、アタッチメント関連情報のそれぞれの表示位置を決定する(ステップS4)。なお、アタッチメント関連情報のそれぞれの表示位置は、前方画像における実際のバケット6の先端の表示位置に予め関連付けられている。但し、アタッチメント関連情報のそれぞれの表示位置は、前方画像における実際のバケット6の先端の表示位置以外の位置に関連付けられていてもよい。また、ステップS3とステップS4とは順不同であり、アタッチメント関連情報の表示位置を決定した後でアタッチメント関連情報の内容(例えば掘削角度の値である。)を生成してもよい。
Thereafter, the
その後、モニタシステム100は、表示制御部302により、前方画像上の決定した表示位置にアタッチメント関連情報を重畳表示させる(ステップS5)。
After that, the
また、モニタシステム100は、表示制御部302により、設置面を表す線分G1a、G1b、G2(図5参照。)を前方画像上に重畳表示させる(ステップS6)。
The
さらに、モニタシステム100は、表示制御部302により、ショベル50の前後方向及び左右方向の傾きを表す傾斜情報を前方画像上に重畳表示させる(ステップS7)。
Further, the
なお、ステップS5、ステップS6、及びステップS7は順不同である。また、設置面を表す線分、アタッチメント関連情報、傾斜情報は同じ色で表示されてもよく、異なる色で表示されてもよい。同様に、複数のアタッチメント関連情報のそれぞれは、同じ色で表示されてもよく、異なる色で表示されてもよい。 Steps S5, S6, and S7 are in no particular order. Further, the line segment representing the installation surface, the attachment-related information, and the inclination information may be displayed in the same color or may be displayed in different colors. Similarly, each of the plurality of attachment-related information may be displayed in the same color, or may be displayed in different colors.
以上の構成により、モニタシステム100は、前方画像におけるアタッチメント画像の表示位置とアタッチメント関連情報の表示位置とを連動させて表示することで、ショベル50の掘削アタッチメントの状態をオペレータに直感的に理解させることができる。
With the configuration described above, the
また、モニタシステム100は、バケット6の先端と設置面との間の垂直距離、及び、バケット6の先端とショベル50との間の水平距離を同時に表示することで、掘削アタッチメントの状態をオペレータに直感的に理解させることができる。
Further, the
また、モニタシステム100は、バケット6の実写画像の周辺の所定位置にそのバケット6の掘削角度を表示するので、掘削アタッチメントの状態をオペレータに直感的に理解させることができ、作業性を向上させることができる。
Further, the
また、モニタシステム100は、バケット6の実写画像の周辺の所定位置にそのバケット6により掘削された土砂の重量を表示するので、掘削アタッチメントの状態をオペレータに直感的に理解させることができ、作業性を向上させることができる。
Further, the
また、モニタシステム100は、バケット6の実写画像上にバケット6の輪郭画像を重畳表示するので、バケット6が土砂に埋没したり、水中に潜没したり、或いは、物陰に隠れたりして不可視となる場合であっても、バケット6の位置及び姿勢をオペレータに提示することができる。その結果、モニタシステム100は、掘削アタッチメントの状態をオペレータに直感的に理解させることができ、作業性を向上させることができる。
In addition, since the
また、モニタシステム100は、バケット6の実写画像の周辺の所定位置に、バケット6の先端と目標掘削深さとの間の距離を重畳表示するので、掘削アタッチメントの状態をオペレータに直感的に理解させることができる。
Further, the
また、モニタシステム100は、ショベル50の前後方向及び左右方向の傾きに関する情報等、掘削アタッチメントの状態に直接的には関係しない情報をも前方画像上に重畳表示させることができる。その結果、モニタシステム100は、掘削アタッチメントの状態をオペレータに直感的に理解させると同時に、ショベル50の周囲の状況をオペレータに分かり易く提示することができ、作業性を向上させることができる。
In addition, the
また、モニタシステム100は、フロントウィンドウの横に表示装置35を取り付けたことにより、フロントウィンドウを通じた実際のショベル外部の状況と表示装置35に表示される画像とをほぼ同時にオペレータに視認させることができる。その結果、掘削アタッチメントの状態をオペレータに直感的に理解させることができる。
Further, the
以上、本発明の好ましい実施例について詳説したが、本発明は、上述した実施例に制限されることはなく、本発明の範囲を逸脱することなしに上述した実施例に種々の変形及び置換を加えることができる。 Although the preferred embodiment of the present invention has been described in detail, the present invention is not limited to the above-described embodiment, and various modifications and substitutions can be made to the above-described embodiment without departing from the scope of the present invention. Can be added.
例えば、上述の実施例では、本発明がショベル50に適用された場合を説明する。しかしながら、本発明は、これに限定されることはない。本発明は、例えば、リフティングマグネット、グラップル、破砕機等を備えた他の建設機械にも適用可能である。 For example, in the above-described embodiment, a case where the present invention is applied to the shovel 50 will be described. However, the invention is not limited to this. The present invention is also applicable to other construction machines including, for example, a lifting magnet, a grapple, a crusher, and the like.
具体的には、リフティングマグネットを備える建設機械に適用される場合、アタッチメント関連情報は、リフティングマグネットの持ち上げ重量に関する情報を含む。 Specifically, when applied to a construction machine having a lifting magnet, the attachment-related information includes information on the lifting weight of the lifting magnet.
また、グラップル、破砕機等を備える建設機械に適用される場合、アタッチメント関連情報は、グラップル、破砕機等の輪郭画像を含む。これにより、オペレータは、実際のグラップル、破砕機等が物陰に隠れて不可視となっていても、その位置や開閉具合を認識することができる。 In addition, when applied to a construction machine including a grapple, a crusher, and the like, the attachment-related information includes a contour image of the grapple, the crusher, and the like. Thus, even if the actual grapple, crusher, and the like are hidden behind the object and become invisible, the operator can recognize the position and the opening / closing state.
また、上述の実施例では、バケット6は、前後方向に回動(開閉)可能な構成を採用するが、チルトバケットのように左右方向にも回動可能な構成を採用してもよい。この場合、アタッチメント関連情報は、設置面とバケット6の背面とが形成する前後方向掘削角度に関する情報に加え、或いはその前後方向掘削角度に関する情報に代えて、設置面とバケット6の左右の側面とが形成する左右方向掘削角度に関する情報を含む。
Further, in the above-described embodiment, the
1・・・下部走行体 2・・・旋回機構 3・・・上部旋回体 4・・・ブーム 5・・・アーム 6・・・バケット 7・・・ブームシリンダ 8・・・アームシリンダ 9・・・バケットシリンダ 10・・・キャビン 11・・・フロントウィンドウ 30・・・制御装置 31・・・撮像装置 32・・・傾き検出装置 33・・・アタッチメント状態検出装置 33a・・・ブーム角度センサ 33b・・・アーム角度センサ 33c・・・バケット角度センサ 34・・・入力装置 35・・・表示装置 50・・・ショベル 100・・・モニタシステム 300・・・アタッチメント関連情報生成部 301・・・作業量推定部 302・・・表示制御部
DESCRIPTION OF SYMBOLS 1 ... Lower traveling
Claims (11)
ショベルの周囲にある物体によって前記バケットが不可視となった場合、前記バケットが認識可能となる態様で前記バケットに関する画像を表示するステップを有する、
ショベルの表示方法。 An excavator display method comprising: a lower traveling body, an upper revolving body rotatably disposed on the lower traveling body, and an attachment including a bucket, and an attachment that lifts the earth and sand taken in the bucket in an exposed state. So,
When the bucket becomes invisible due to an object around a shovel, the image processing apparatus further includes a step of displaying an image related to the bucket in a mode in which the bucket can be recognized.
Excavator display method.
ショベルの周囲にある物体によって前記バケットが不可視となった場合、前記バケットが認識可能となる態様で前記バケットに関する画像を表示するように構成されている、
ショベルの表示装置。 An excavator display device comprising: a lower traveling body, an upper revolving body pivotally disposed on the lower traveling body, and an attachment including a bucket, and an attachment for lifting the earth and sand taken in the bucket while exposing the earth and sand. So,
When the bucket is invisible due to an object around the shovel, the bucket is configured to display an image related to the bucket in a recognizable manner.
Excavator display device.
該下部走行体に旋回可能に配置された上部旋回体と、
バケットを含み、該バケット内に取り込んだ土砂を露出させた状態で持ち上げるアタッチメントと、
表示装置と、を備えたショベルであって、
ショベルの周囲にある物体によって前記バケットが不可視となった場合、前記バケットが認識可能となる態様で前記バケットに関する画像が前記表示装置に表示される、
ショベル。 An undercarriage,
An upper revolving structure that is rotatably arranged on the lower traveling structure,
An attachment that includes a bucket and lifts the earth and sand taken in the bucket in an exposed state,
A shovel comprising: a display device;
When the bucket becomes invisible due to an object around the shovel, an image related to the bucket is displayed on the display device in a mode in which the bucket can be recognized.
Excavator.
請求項3に記載のショベル。 An outline image of the bucket is displayed on the display device,
The shovel according to claim 3.
請求項4に記載のショベル。 The display position of the contour image is changed in conjunction with the change in the position of the bucket.
The shovel according to claim 4.
請求項4又は5に記載のショベル。 The posture of the contour image is changed in conjunction with the change in the posture of the bucket.
The shovel according to claim 4.
請求項4乃至6の何れかに記載のショベル。 The outline image is superimposed and displayed on an image that reflects a scene in front of the revolving superstructure,
The shovel according to claim 4.
請求項3乃至7の何れかに記載のショベル。 In the case where the bucket is buried in earth and sand, in the case where the bucket is immersed in water, and in the case where the bucket is hidden behind an object, an image relating to the bucket is formed in such a manner that the bucket can be recognized. Is displayed on the display device,
The shovel according to claim 3.
前記ブームに取り付けられるブーム角度センサと、前記アームに取り付けられるアーム角度センサと、前記バケットに取り付けられるバケット角度センサと、を有し、
前方を撮像する撮像装置を有する、
請求項3乃至8の何れかに記載のショベル。 The attachment further includes a boom and an arm,
A boom angle sensor attached to the boom, an arm angle sensor attached to the arm, and a bucket angle sensor attached to the bucket,
Having an imaging device for imaging the front,
The shovel according to claim 3.
前記ブームと前記アームとに関する画像が前記表示装置に表示される、
請求項3乃至8の何れかに記載のショベル。 The attachment further includes a boom and an arm,
Images related to the boom and the arm are displayed on the display device.
The shovel according to claim 3.
前記ブームと前記アームとに関する画像を表示するように構成されている、
請求項2に記載のショベルの表示装置。 The attachment further includes a boom and an arm,
Is configured to display an image related to the boom and the arm,
The display device of the shovel according to claim 2.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018117460A JP6644832B2 (en) | 2018-06-20 | 2018-06-20 | Excavator, excavator display method, and excavator display device |
JP2019129600A JP6918867B2 (en) | 2018-06-20 | 2019-07-11 | Excavator, excavator display method and excavator display device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018117460A JP6644832B2 (en) | 2018-06-20 | 2018-06-20 | Excavator, excavator display method, and excavator display device |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016043277A Division JP6639960B2 (en) | 2016-03-07 | 2016-03-07 | Excavator |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019129600A Division JP6918867B2 (en) | 2018-06-20 | 2019-07-11 | Excavator, excavator display method and excavator display device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018141364A JP2018141364A (en) | 2018-09-13 |
JP6644832B2 true JP6644832B2 (en) | 2020-02-12 |
Family
ID=63526492
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018117460A Active JP6644832B2 (en) | 2018-06-20 | 2018-06-20 | Excavator, excavator display method, and excavator display device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6644832B2 (en) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002294763A (en) * | 2001-03-30 | 2002-10-09 | Hitachi Constr Mach Co Ltd | Positional detector and display for working machine |
US20060034535A1 (en) * | 2004-08-10 | 2006-02-16 | Koch Roger D | Method and apparatus for enhancing visibility to a machine operator |
JP4787202B2 (en) * | 2007-04-26 | 2011-10-05 | 東亜建設工業株式会社 | 浚 渫 Support system |
US8340873B2 (en) * | 2010-01-20 | 2012-12-25 | Caterpillar Trimble Control Technologies, Llc | Machine control and guidance system incorporating a portable digital media device |
-
2018
- 2018-06-20 JP JP2018117460A patent/JP6644832B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2018141364A (en) | 2018-09-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5941663B2 (en) | Construction machine monitoring system | |
JP6639960B2 (en) | Excavator | |
JP5908500B2 (en) | Excavator image display device | |
EP3590094B1 (en) | Augmented reality display for material moving machines | |
JP6568228B2 (en) | Display device and display system for work machine | |
KR20200096480A (en) | Shovel and shovel management system | |
JP7210129B2 (en) | Excavator | |
US11732439B2 (en) | Remote control system and main control device | |
JPWO2016158265A1 (en) | Work machine | |
JP2017071915A (en) | Construction management system and construction management method | |
JP6872945B2 (en) | Construction machinery | |
JP6651607B2 (en) | Excavator | |
KR20200038885A (en) | Shovel, shovel display device and shovel display method | |
JP2008121280A (en) | Excavation machine with excavating state display device | |
JP6689763B2 (en) | Excavator | |
JP6689945B2 (en) | Excavator and shovel display device | |
JP6626710B2 (en) | Work vehicle and work vehicle control method | |
JP6644832B2 (en) | Excavator, excavator display method, and excavator display device | |
JP6918867B2 (en) | Excavator, excavator display method and excavator display device | |
JP7504838B2 (en) | Shovel, shovel display method, and shovel display device | |
JP6567736B2 (en) | Shovel, shovel display method, and shovel display device | |
JP2008106431A (en) | Excavating equipment with excavation condition display control device | |
JP7092714B2 (en) | Work machine control device and work machine control method | |
KR20220158838A (en) | Excavator and its control method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A625 | Written request for application examination (by other person) |
Free format text: JAPANESE INTERMEDIATE CODE: A625 Effective date: 20180704 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190225 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190312 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20190513 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190711 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190827 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191015 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200107 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200108 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6644832 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |