JPWO2017159744A1 - Excavator - Google Patents

Excavator Download PDF

Info

Publication number
JPWO2017159744A1
JPWO2017159744A1 JP2018505986A JP2018505986A JPWO2017159744A1 JP WO2017159744 A1 JPWO2017159744 A1 JP WO2017159744A1 JP 2018505986 A JP2018505986 A JP 2018505986A JP 2018505986 A JP2018505986 A JP 2018505986A JP WO2017159744 A1 JPWO2017159744 A1 JP WO2017159744A1
Authority
JP
Japan
Prior art keywords
distance information
height
stereo camera
reference height
controller
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018505986A
Other languages
Japanese (ja)
Other versions
JP6651607B2 (en
Inventor
裕介 佐野
裕介 佐野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sumitomo Heavy Industries Ltd
Original Assignee
Sumitomo Heavy Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sumitomo Heavy Industries Ltd filed Critical Sumitomo Heavy Industries Ltd
Publication of JPWO2017159744A1 publication Critical patent/JPWO2017159744A1/en
Application granted granted Critical
Publication of JP6651607B2 publication Critical patent/JP6651607B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26—Indicating devices
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/245—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures using a plurality of fixed, simultaneously operating transducers
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00—Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/04—Interpretation of pictures
    • G01C11/06—Interpretation of pictures by comparison of two or more pictures of the same area
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C15/00—Surveying instruments or accessories not provided for in groups G01C1/00 - G01C13/00

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Mining & Mineral Resources (AREA)
  • Multimedia (AREA)
  • Civil Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Structural Engineering (AREA)
  • Component Parts Of Construction Machinery (AREA)
  • Measurement Of Optical Distance (AREA)
  • Operation Control Of Excavators (AREA)
  • Length Measuring Devices With Unspecified Measuring Means (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本発明の実施例に係るショベルは、下部走行体（１）と、下部走行体（１）に旋回可能に搭載される上部旋回体（３）と、上部旋回体（３）に取り付けられるアタッチメントと、アタッチメントに取り付けられた、測定対象地表の形状を測定するステレオカメラ（Ｓ４）と、アタッチメントの姿勢を計測するブーム角度センサ（Ｓ１）と、ステレオカメラ（Ｓ４）の第１ステレオペア画像により、ステレオカメラ（Ｓ４）から測定対象地表までの距離情報を算出するコントローラ（３０）を備える。コントローラ（３０）は、ブーム角度センサ（Ｓ１）の検出値に基づいて導き出されるアタッチメントの姿勢の変化による影響を排除して距離情報を算出する。  An excavator according to an embodiment of the present invention includes a lower traveling body (1), an upper revolving body (3) that is turnably mounted on the lower traveling body (1), and an attachment that is attached to the upper revolving body (3). Stereo camera (S4) that measures the shape of the measurement target surface attached to the attachment, boom angle sensor (S1) that measures the posture of the attachment, and the first stereo pair image of stereo camera (S4) A controller (30) for calculating distance information from the camera (S4) to the measurement target ground surface is provided. The controller (30) calculates the distance information by eliminating the influence of the change in the posture of the attachment derived based on the detection value of the boom angle sensor (S1).

Description

本発明は、ショベルに関する。   The present invention relates to an excavator.

キャビン上に取り付けられたステレオカメラにより、掘削箇所の地形を測定可能なショベルが知られている（例えば特許文献１参照）。   An excavator capable of measuring the topography of an excavation site using a stereo camera mounted on a cabin is known (see, for example, Patent Document 1).

特開２００２−３２８０２２号公報Japanese Patent Laid-Open No. 2002-328022

特許文献１に係るショベルは、土砂形状測定装置としてのステレオカメラがキャビン上に取り付けられている。そのため、深掘り掘削時においては、掘削箇所が手前の土砂に遮られて測定できない場合がある。   In the shovel according to Patent Document 1, a stereo camera as a soil shape measuring device is mounted on a cabin. Therefore, at the time of deep excavation, the excavation part may be blocked by the earth and sand in the foreground and measurement may not be possible.

上記課題に鑑み、深掘り掘削時においても掘削箇所の地形を正確に測定可能なショベルを提供することが望ましい。   In view of the above problems, it is desirable to provide an excavator that can accurately measure the topography of the excavation site even during deep excavation.

本発明の一実施形態に係るショベルは、下部走行体と、前記下部走行体に旋回可能に搭載される上部旋回体と、前記上部旋回体に取り付けられるアタッチメントと、前記アタッチメントに取り付けられた、測定対象地表の形状を測定する土砂形状測定装置と、前記アタッチメントの姿勢を計測する姿勢センサと、前記土砂形状測定装置の第１測定値により、前記土砂形状測定装置から前記測定対象地表までの距離情報を算出する制御部を備えるショベルであって、前記制御部は、前記姿勢センサの検出値に基づいて導き出される前記アタッチメントの姿勢の変化による影響を排除して距離情報を算出する。   An excavator according to an embodiment of the present invention includes a lower traveling body, an upper revolving body that is rotatably mounted on the lower traveling body, an attachment that is attached to the upper revolving body, and a measurement that is attached to the attachment. Distance information from the earth and sand shape measuring device to the surface to be measured by a first and second measured value of the earth and sand shape measuring device for measuring the shape of the target ground surface, a posture sensor for measuring the posture of the attachment, and the earth and sand shape measuring device. The control unit calculates distance information by eliminating the influence due to the change in the posture of the attachment derived based on the detection value of the posture sensor.

上述の手段により、深掘り掘削時においても掘削箇所の地形を正確に測定可能なショベルを提供できる。   By the above-described means, it is possible to provide a shovel capable of accurately measuring the topography of the excavation site even during deep excavation.

本発明の実施例に係るショベルの側面図である。It is a side view of the shovel which concerns on the Example of this invention. 図１のショベルの構成例を示す図である。It is a figure which shows the structural example of the shovel of FIG. 距離情報算出処理の一例のフローチャートである。It is a flowchart of an example of distance information calculation processing. 第２測定値へ補正する原理の説明図である。It is explanatory drawing of the principle correct | amended to a 2nd measured value. ステレオカメラの焦点距離を調整する手法の説明図である。It is explanatory drawing of the method of adjusting the focal distance of a stereo camera. 本発明の別の実施例に係るショベルの構成例を示す図である。It is a figure which shows the structural example of the shovel which concerns on another Example of this invention. 距離情報算出処理の別の一例のフローチャートである。It is a flowchart of another example of distance information calculation processing. 距離情報を算出する原理の説明図である。It is explanatory drawing of the principle which calculates distance information.

図１は、本発明の実施例に係るショベルの側面図である。   FIG. 1 is a side view of an excavator according to an embodiment of the present invention.

ショベルは、自走可能なクローラ式の下部走行体１と、この下部走行体１上に旋回機構２を介して旋回可能に搭載された上部旋回体３を有している。   The excavator has a crawler-type lower traveling body 1 capable of self-propelling and an upper revolving body 3 mounted on the lower traveling body 1 through a revolving mechanism 2 so as to be capable of revolving.

上部旋回体３には、ブーム４が取り付けられている。ブーム４の先端にはアーム５が取り付けられ、アーム５の先端にはエンドアタッチメントとしてのバケット６が取り付けられている。   A boom 4 is attached to the upper swing body 3. An arm 5 is attached to the tip of the boom 4, and a bucket 6 as an end attachment is attached to the tip of the arm 5.

ブーム４、アーム５、及びバケット６によりアタッチメントが構成される。ブーム４、アーム５、バケット６は、ブームシリンダ７、アームシリンダ８、バケットシリンダ９によりそれぞれ油圧駆動される。ブーム４には姿勢センサとしてのブーム角度センサＳ１が取り付けられ、アーム５には姿勢センサとしてのアーム角度センサＳ２が取り付けられ、バケット６には姿勢センサとしてのバケット角度センサＳ３が取り付けられる。   The boom 4, the arm 5, and the bucket 6 constitute an attachment. The boom 4, arm 5, and bucket 6 are hydraulically driven by a boom cylinder 7, an arm cylinder 8, and a bucket cylinder 9, respectively. A boom angle sensor S1 as an attitude sensor is attached to the boom 4, an arm angle sensor S2 as an attitude sensor is attached to the arm 5, and a bucket angle sensor S3 as an attitude sensor is attached to the bucket 6.

ブーム角度センサＳ１はブーム４の姿勢を計測する。本実施例では、ブーム角度センサＳ１は水平面に対する傾斜を検出して上部旋回体３に対するブーム４の回動角度を検出する加速度センサである。   The boom angle sensor S1 measures the posture of the boom 4. In the present embodiment, the boom angle sensor S <b> 1 is an acceleration sensor that detects a tilt angle with respect to the horizontal plane and detects a rotation angle of the boom 4 with respect to the upper swing body 3.

アーム角度センサＳ２はアーム５の姿勢を計測する。本実施例では、アーム角度センサＳ２は水平面に対する傾斜を検出してブーム４に対するアーム５の回動角度を検出する加速度センサである。   The arm angle sensor S2 measures the posture of the arm 5. In the present embodiment, the arm angle sensor S <b> 2 is an acceleration sensor that detects the rotation angle of the arm 5 relative to the boom 4 by detecting the inclination with respect to the horizontal plane.

バケット角度センサＳ３はバケット６の姿勢を計測する。本実施例では、バケット角度センサＳ３は水平面に対する傾斜を検出してアーム５に対するバケット６の回動角度を検出する加速度センサである。   Bucket angle sensor S3 measures the attitude of bucket 6. In the present embodiment, the bucket angle sensor S3 is an acceleration sensor that detects the rotation angle of the bucket 6 with respect to the arm 5 by detecting the inclination with respect to the horizontal plane.

ブーム角度センサＳ１、アーム角度センサＳ２、及びバケット角度センサＳ３は、可変抵抗器を利用したポテンショメータ、対応する油圧シリンダのストローク量を検出するストロークセンサ、連結ピン回りの回動角度を検出するロータリエンコーダ等であってもよい。加速度センサとジャイロセンサの組み合わせで構成されていてもよい。   The boom angle sensor S1, the arm angle sensor S2, and the bucket angle sensor S3 are a potentiometer using a variable resistor, a stroke sensor that detects a stroke amount of a corresponding hydraulic cylinder, and a rotary encoder that detects a rotation angle around a connecting pin. Etc. You may be comprised by the combination of the acceleration sensor and the gyro sensor.

ブーム４には土砂形状測定装置としてのステレオカメラＳ４が取り付けられている。土砂形状測定装置は、レーザー距離計、レーザレンジファインダ等であってよい。ステレオカメラＳ４はアーム５に取り付けられていてもよい。ステレオカメラＳ４はブーム４とアーム５の両方に取り付けられていてもよい。   The boom 4 is provided with a stereo camera S4 as a soil shape measuring device. The earth and sand shape measuring apparatus may be a laser distance meter, a laser range finder, or the like. The stereo camera S4 may be attached to the arm 5. Stereo camera S4 may be attached to both boom 4 and arm 5.

上部旋回体３には運転室としてのキャビン１０が設けられ且つエンジン１１等の動力源が搭載されている。また、キャビン１０には通信手段としての通信装置Ｓ５が設けられている。   The upper swing body 3 is provided with a cabin 10 as a cab and is mounted with a power source such as an engine 11. The cabin 10 is provided with a communication device S5 as communication means.

通信装置Ｓ５は、ショベルと外部との間の通信を制御する。通信装置Ｓ５は、例えば、他の場所にある管理装置１００とショベルとの間の無線通信を制御する。   The communication device S5 controls communication between the shovel and the outside. The communication device S5 controls, for example, wireless communication between the management device 100 in another location and the excavator.

キャビン１０内には、入力装置Ｄ１、音声出力装置Ｄ２、表示装置Ｄ３、高さ設定スイッチＤ４、コントローラ３０等が設置されている。   In the cabin 10, an input device D1, an audio output device D2, a display device D3, a height setting switch D4, a controller 30 and the like are installed.

コントローラ３０は、ショベルの駆動制御を行う制御部として機能する。本実施例では、コントローラ３０は、ＣＰＵ及び内部メモリを含む演算処理装置で構成される。コントローラ３０の各種機能は、ＣＰＵが内部メモリに格納されたプログラムを実行することで実現される。   The controller 30 functions as a control unit that performs drive control of the shovel. In this embodiment, the controller 30 is composed of an arithmetic processing unit including a CPU and an internal memory. Various functions of the controller 30 are realized by the CPU executing programs stored in the internal memory.

入力装置Ｄ１は、ショベルの操作者がコントローラ３０等に各種情報を入力するための装置である。本実施例では、入力装置Ｄ１は、表示装置Ｄ３の周囲に取り付けられるメンブレンスイッチである。入力装置Ｄ１としてタッチパネル等が用いられてもよい。   The input device D1 is a device for an excavator operator to input various information to the controller 30 and the like. In this embodiment, the input device D1 is a membrane switch attached around the display device D3. A touch panel or the like may be used as the input device D1.

音声出力装置Ｄ２は、コントローラ３０等からの音声出力指令に応じて各種音声情報を出力する。本実施例では、音声出力装置Ｄ２として、コントローラ３０に直接接続される車載スピーカが利用される。音声出力装置Ｄ２として、ブザー等の警報器が利用されてもよい。   The audio output device D2 outputs various audio information in response to an audio output command from the controller 30 or the like. In this embodiment, an in-vehicle speaker that is directly connected to the controller 30 is used as the audio output device D2. An alarm device such as a buzzer may be used as the audio output device D2.

表示部としての表示装置Ｄ３は、コントローラ３０からの指令に応じて各種画像情報を出力する。本実施例では、キャビン１０内で運転席に向かって取り付けられる表示装置Ｄ３として、コントローラ３０に直接接続される車載液晶ディスプレイが利用される。   The display device D3 as a display unit outputs various image information in response to a command from the controller 30. In the present embodiment, an in-vehicle liquid crystal display directly connected to the controller 30 is used as the display device D3 attached to the driver's seat in the cabin 10.

高さ設定スイッチＤ４は、ショベルの操作者がコントローラ３０等に基準高さを入力するための装置である。本実施例では、高さ設定スイッチＤ４として、操作レバーに付与されているスイッチが利用される。キャリブレーションスイッチ等が利用されてもよい。   The height setting switch D4 is a device for an operator of the excavator to input a reference height to the controller 30 or the like. In the present embodiment, a switch provided to the operation lever is used as the height setting switch D4. A calibration switch or the like may be used.

次に、図２を参照しながら、ショベルの各種機能要素について説明する。図２は、ショベルの構成例を示す機能ブロック図である。   Next, various functional elements of the excavator will be described with reference to FIG. FIG. 2 is a functional block diagram illustrating a configuration example of the excavator.

本実施例では、コントローラ３０は、ステレオカメラＳ４から測定対象地表までの距離情報を算出する。コントローラ３０にはステレオカメラＳ４から第１測定値が入力される。第１測定値は、ステレオカメラＳ４が取得するデータであり、例えば視差データである。視差データは、例えば、左右のカメラで得られたステレオペア画像である。ステレオペア画像に写る範囲及びステレオペア画像に写っている物の大きさは外乱に応じて変化する。外乱は、例えば、ブーム４の姿勢の変化、すなわち、ステレオカメラＳ４の高さの変化を含む。コントローラ３０は、ブーム４の姿勢の変化がステレオペア画像に与える影響を推定する。そして、その影響が相殺されるようにステレオペア画像に写る範囲及びステレオペア画像に写っている物の大きさを変化させることでステレオペア画像を調整する。そして、調整後のステレオペア画像に基づいて正確な距離情報を算出する。   In the present embodiment, the controller 30 calculates distance information from the stereo camera S4 to the measurement target ground surface. The controller 30 receives the first measurement value from the stereo camera S4. The first measurement value is data acquired by the stereo camera S4, for example, parallax data. The parallax data is, for example, a stereo pair image obtained by the left and right cameras. The range shown in the stereo pair image and the size of the object shown in the stereo pair image change according to the disturbance. The disturbance includes, for example, a change in the posture of the boom 4, that is, a change in the height of the stereo camera S4. The controller 30 estimates the influence of the change in the posture of the boom 4 on the stereo pair image. Then, the stereo pair image is adjusted by changing the range appearing in the stereo pair image and the size of the object appearing in the stereo pair image so that the influence is offset. Then, accurate distance information is calculated based on the adjusted stereo pair image.

コントローラ３０は、様々な機能を担う機能部を含む。本実施例では、コントローラ３０は、高さ位置演算部３１、距離演算部３２、メモリ部３３を含む。   The controller 30 includes functional units that perform various functions. In the present embodiment, the controller 30 includes a height position calculation unit 31, a distance calculation unit 32, and a memory unit 33.

高さ位置演算部３１は、ブーム角度センサＳ１の検出値に基づいて、ブーム４に取り付けられたステレオカメラＳ４の高さ位置を演算する。高さ位置演算部３１には、高さ設定スイッチＤ４から基準高さを設定する信号が入力される。   The height position calculation unit 31 calculates the height position of the stereo camera S4 attached to the boom 4 based on the detection value of the boom angle sensor S1. A signal for setting a reference height is input to the height position calculation unit 31 from the height setting switch D4.

基準高さを設定する信号は、例えば、ショベルの操作者が高さ設定スイッチＤ４を押したときに高さ位置演算部３１に入力される。高さ位置演算部３１は、基準高さを設定する信号が入力されると、ブーム角度センサＳ１の検出値からそのときのステレオカメラＳ４の高さ位置を演算して基準高さとする。高さ位置は、ショベルの接地面を含む平面に対する高さである。基準高さの設定は、例えば、ステレオカメラＳ４による測定が開始される前に行われる。   The signal for setting the reference height is input to the height position calculation unit 31 when the operator of the excavator presses the height setting switch D4, for example. When the signal for setting the reference height is input, the height position calculation unit 31 calculates the height position of the stereo camera S4 at that time from the detection value of the boom angle sensor S1 and sets it as the reference height. The height position is a height with respect to a plane including the ground contact surface of the excavator. The reference height is set, for example, before the measurement by the stereo camera S4 is started.

高さ位置演算部３１は、測定時のステレオカメラＳ４の高さ位置と、基準高さとに基づいて、ステレオカメラＳ４の移動高さ（基準高さからの高さ変化量）を算出する。ステレオカメラＳ４の移動高さは、基準高さ設定時のステレオカメラＳ４の高さ位置から、移動後のステレオカメラＳ４の高さ位置までの変化量に相当する。高さ位置演算部３１は、ステレオカメラＳ４の移動高さを、ステレオカメラＳ４の移動高さに相当する視差データ関連情報に変換して出力してもよい。視差データ関連情報は、例えば、ステレオペア画像に写る範囲及びステレオペア画像に写っている物の大きさに関する情報である。   The height position calculation unit 31 calculates the moving height of the stereo camera S4 (height change amount from the reference height) based on the height position of the stereo camera S4 at the time of measurement and the reference height. The moving height of the stereo camera S4 corresponds to the amount of change from the height position of the stereo camera S4 at the time of setting the reference height to the height position of the stereo camera S4 after the movement. The height position calculation unit 31 may convert the movement height of the stereo camera S4 into parallax data related information corresponding to the movement height of the stereo camera S4 and output it. The parallax data related information is, for example, information related to the range that appears in the stereo pair image and the size of the object that appears in the stereo pair image.

コントローラ３０は、高さ位置演算部３１から出力されたステレオカメラＳ４の移動高さに相当する視差データ関連情報に基づいて、ステレオカメラＳ４から出力された第１測定値（視差データ）を第２測定値（視差データ）へ補正する。第２測定値は、基準高さに位置する仮想的なステレオカメラが取得した視差データ（ステレオペア画像）に相当する。その際、コントローラ３０は、第１測定値（第１ステレオペア画像）が、第２測定値（第２ステレオペア画像）となるように焦点距離を調整（視差を調整）する。コントローラ３０は、例えば、第１ステレオペア画像に写る範囲及び第１ステレオペア画像に写っている物の大きさを変化させて第２ステレオペア画像を生成する。   Based on the parallax data related information corresponding to the moving height of the stereo camera S4 output from the height position calculation unit 31, the controller 30 outputs the first measurement value (parallax data) output from the stereo camera S4 to the second. Correction to measurement values (parallax data). The second measurement value corresponds to parallax data (stereo pair image) acquired by a virtual stereo camera located at the reference height. At that time, the controller 30 adjusts the focal length (adjusts the parallax) so that the first measurement value (first stereo pair image) becomes the second measurement value (second stereo pair image). For example, the controller 30 generates the second stereo pair image by changing the range shown in the first stereo pair image and the size of the object shown in the first stereo pair image.

その後、コントローラ３０は、第２ステレオペア画像を距離演算部３２へ出力する。   Thereafter, the controller 30 outputs the second stereo pair image to the distance calculation unit 32.

距離演算部３２は、第２ステレオペア画像に基づいて、基準高さから測定対象地表Ｊまでの距離情報を演算する。距離情報は、距離画像であってもよい。距離演算部３２は、演算した距離情報を表示装置Ｄ３と、メモリ部３３へ出力する。   The distance calculation unit 32 calculates distance information from the reference height to the measurement target ground surface J based on the second stereo pair image. The distance information may be a distance image. The distance calculation unit 32 outputs the calculated distance information to the display device D3 and the memory unit 33.

表示装置Ｄ３は、取得した複数の距離情報に基づいて地形の断面形状を生成して表示する。   The display device D3 generates and displays a cross-sectional shape of the terrain based on the acquired plurality of distance information.

メモリ部３３は、取得した距離情報を通信装置Ｓ５へ出力する。通信装置Ｓ５は、通信回線を利用して距離情報を管理装置１００へ送信する。   The memory unit 33 outputs the acquired distance information to the communication device S5. The communication device S5 transmits distance information to the management device 100 using a communication line.

次に、図３を参照しながら、コントローラ３０が実行する距離情報算出処理について説明する。図３は、距離情報算出処理のフローチャートである。この処理は所定の時間間隔で繰り返される。   Next, the distance information calculation process executed by the controller 30 will be described with reference to FIG. FIG. 3 is a flowchart of the distance information calculation process. This process is repeated at predetermined time intervals.

コントローラ３０の高さ位置演算部３１は、ステップ（以下、ＳＴと略す）１で、高さ設定スイッチＤ４から入力された基準高さを設定する信号に基づいて基準高さを設定する。   In step (hereinafter abbreviated as ST) 1, the height position calculation unit 31 of the controller 30 sets the reference height based on a signal for setting the reference height input from the height setting switch D4.

その後、コントローラ３０は、ＳＴ２でステレオカメラＳ４を用いた測定を開始する。   Thereafter, the controller 30 starts measurement using the stereo camera S4 in ST2.

コントローラ３０は、高さ位置演算部３１から出力されたステレオカメラＳ４の移動高さに相当する視差データ関連情報に基づいて、ステレオカメラＳ４から出力された第１測定値（第１ステレオペア画像）を第２測定値（第２ステレオペア画像）へ補正する（ＳＴ３）。   Based on the parallax data related information corresponding to the moving height of the stereo camera S4 output from the height position calculation unit 31, the controller 30 outputs the first measurement value (first stereo pair image) output from the stereo camera S4. Is corrected to the second measurement value (second stereo pair image) (ST3).

図４を参照しながら、コントローラ３０が実施するＳＴ３の処理について詳しく説明する。図４は、第２ステレオペア画像を生成する原理の説明図である。   The process of ST3 performed by the controller 30 will be described in detail with reference to FIG. FIG. 4 is an explanatory diagram of the principle of generating the second stereo pair image.

図４において、Ｈｎは、第２ステレオペア画像に基づく高さを指す。Ｈは、基準高さである。Ｈｎ'は、第１ステレオペア画像に基づく高さを指す。ΔＺは、ステレオカメラＳ４の移動高さである。したがって、第２ステレオペア画像に基づく高さＨｎは、第１ステレオペア画像に基づく高さＨｎ'から移動高さΔＺを差し引いて算出できる。移動高さΔＺは、高さ位置演算部３１で算出される。   In FIG. 4, Hn indicates the height based on the second stereo pair image. H is a reference height. Hn ′ indicates the height based on the first stereo pair image. ΔZ is the moving height of the stereo camera S4. Therefore, the height Hn based on the second stereo pair image can be calculated by subtracting the moving height ΔZ from the height Hn ′ based on the first stereo pair image. The moving height ΔZ is calculated by the height position calculation unit 31.

その後、コントローラ３０は、第１ステレオペア画像が、第２ステレオペア画像となるように焦点距離を調整（視差を調整）する処理を行う（ＳＴ４）。   Thereafter, the controller 30 performs a process of adjusting the focal length (adjusting the parallax) so that the first stereo pair image becomes the second stereo pair image (ST4).

次に図５を参照しながら、コントローラ３０が実行するＳＴ４の処理を説明する。図５は、ステレオカメラＳ４の焦点距離（画角）を調整する手法の説明図である。図５は、ステレオペア画像のうちの一方である右視点画像を実線で示し、ステレオペア画像のうちの他方である左視点画像を破線で示している。   Next, ST4 processing executed by the controller 30 will be described with reference to FIG. FIG. 5 is an explanatory diagram of a method for adjusting the focal length (view angle) of the stereo camera S4. FIG. 5 shows a right viewpoint image which is one of the stereo pair images by a solid line, and a left viewpoint image which is the other of the stereo pair images by a broken line.

（１）は、ステレオカメラＳ４が基準高さから撮像した際の物体Ｘの画像を示している。（１）が有する視差を例えば１５画素とする。（２）は、ブーム４が上方へ移動した際にステレオカメラＳ４が撮像した物体Ｘの画像を示している。（２）が有する視差を例えば１０画素とする。コントローラ３０は、（３）に示すように（２）の物体Ｘが（１）の物体Ｘと同じ大きさになるように焦点距離（画角）を調整させて視差を５画素分増やす処理を行う。本実施例のコントローラ３０は、ステレオカメラＳ４の高さの変化に応じて、画素数の補正を行う。すなわち、コントローラ３０は、第１ステレオペア画像に写る範囲及び第１ステレオペア画像に写っている物の大きさを光学的に変化させる。但し、コントローラ３０は、第１ステレオペア画像に写る範囲及び第１ステレオペア画像に写っている物の大きさをデジタル画像処理的に変化させてもよい。   (1) shows an image of the object X when the stereo camera S4 images from the reference height. The parallax included in (1) is, for example, 15 pixels. (2) shows an image of the object X captured by the stereo camera S4 when the boom 4 moves upward. The parallax possessed by (2) is, for example, 10 pixels. As shown in (3), the controller 30 adjusts the focal length (view angle) so that the object X in (2) has the same size as the object X in (1), and increases the parallax by 5 pixels. Do. The controller 30 of the present embodiment corrects the number of pixels according to the change in the height of the stereo camera S4. That is, the controller 30 optically changes the range shown in the first stereo pair image and the size of the object shown in the first stereo pair image. However, the controller 30 may change the range shown in the first stereo pair image and the size of the object shown in the first stereo pair image in a digital image processing manner.

その後、コントローラ３０の距離演算部３２は、ＳＴ３で生成された第２測定値（第２ステレオペア画像）に基づいて、基準高さから測定対象地表Ｊまでの距離情報を演算する（ＳＴ５）。   Thereafter, the distance calculation unit 32 of the controller 30 calculates distance information from the reference height to the measurement target ground surface J based on the second measurement value (second stereo pair image) generated in ST3 (ST5).

上述では、コントローラ３０がステレオカメラＳ４の鉛直下方の距離情報を算出する処理を説明したが、コントローラ３０は、アタッチメントの動作によって、ステレオカメラＳ４の姿勢が変化しても同様の処理を行う。   In the above description, the process in which the controller 30 calculates distance information in the vertical direction of the stereo camera S4 has been described. However, the controller 30 performs the same process even if the attitude of the stereo camera S4 changes due to the attachment operation.

その後、コントローラ３０は、演算した距離情報を、表示装置Ｄ３やメモリ部３３へ出力する。   Thereafter, the controller 30 outputs the calculated distance information to the display device D3 and the memory unit 33.

上述のように、本実施例のショベルは、ステレオカメラＳ４をアタッチメントとしてのブーム４に取り付けたので、深掘り掘削時においても掘削箇所の地形を測定できる。また、本実施例のショベルは、ステレオカメラＳ４の第１ステレオペア画像から、ステレオカメラＳ４の移動高さによる影響を取り除くように生成された第２ステレオペア画像に基づいて正確な距離情報を算出するので、測定時にブーム４の姿勢が変化しても掘削箇所の地形を正確に測定できる。   As described above, since the excavator of the present embodiment has the stereo camera S4 attached to the boom 4 as an attachment, the topography of the excavation site can be measured even during deep excavation. Further, the excavator of this embodiment calculates accurate distance information based on the second stereo pair image generated so as to remove the influence of the moving height of the stereo camera S4 from the first stereo pair image of the stereo camera S4. Therefore, even if the posture of the boom 4 changes during measurement, the topography of the excavation site can be accurately measured.

次に、本発明の別の実施例に係るショベルについて説明する。図６は本発明の別の実施例に係るショベルの構成例を示す図である。   Next, an excavator according to another embodiment of the present invention will be described. FIG. 6 is a diagram showing a configuration example of an excavator according to another embodiment of the present invention.

図６に示すショベルの構成例は、コントローラ３０が距離情報を演算する手順が異なる点で図２に示すショベルの構成例と異なるが、その他の点で共通する。そのため共通部分の説明を省略し、相違部分を詳細に説明する。   The configuration example of the shovel shown in FIG. 6 is different from the configuration example of the shovel shown in FIG. 2 in that the procedure for the controller 30 to calculate distance information is different, but is common in other points. Therefore, description of common parts is omitted, and different parts are described in detail.

本実施例の距離演算部３２には、ステレオカメラＳ４から第１測定値（第１ステレオペア画像）が入力される。距離演算部３２は、入力された第１測定値（第１ステレオペア画像）に基づいて第１距離情報を演算する。本実施例では例えば第１ステレオペア画像が有する視差から第１距離情報を演算する。第１距離情報は、ステレオカメラＳ４の移動高さを含んだステレオカメラＳ４から測定対象地表Ｊまでの距離情報である。   The distance measurement unit 32 of the present embodiment receives the first measurement value (first stereo pair image) from the stereo camera S4. The distance calculation unit 32 calculates first distance information based on the input first measurement value (first stereo pair image). In the present embodiment, for example, the first distance information is calculated from the parallax of the first stereo pair image. The first distance information is distance information from the stereo camera S4 to the measurement target ground surface J including the moving height of the stereo camera S4.

コントローラ３０は、高さ位置演算部３１から出力されたステレオカメラＳ４の移動高さに基づいて距離演算部３２が演算した第１距離情報を、基準高さからの距離情報へ補正する。   The controller 30 corrects the first distance information calculated by the distance calculation unit 32 based on the moving height of the stereo camera S4 output from the height position calculation unit 31 to the distance information from the reference height.

次に、図７を参照しながら、コントローラ３０が実行する距離情報算出処理を説明する。図７は、距離情報算出処理のフローチャートである。この処理は所定の時間間隔で繰り返される。   Next, distance information calculation processing executed by the controller 30 will be described with reference to FIG. FIG. 7 is a flowchart of the distance information calculation process. This process is repeated at predetermined time intervals.

コントローラ３０の高さ位置演算部３１は、ＳＴ２１で、高さ設定スイッチＤ４から入力された基準高さを設定する信号に基づいて基準高さを設定する。   In ST21, the height position calculator 31 of the controller 30 sets the reference height based on the signal for setting the reference height input from the height setting switch D4.

その後、コントローラ３０は、ＳＴ２２でステレオカメラＳ４を用いた測定を開始する。   Thereafter, the controller 30 starts measurement using the stereo camera S4 in ST22.

コントローラ３０の距離演算部３２は、ステレオカメラＳ４から出力された第１測定値（第１ステレオペア画像）に基づいて第１距離情報を算出する（ＳＴ２３）。   The distance calculation unit 32 of the controller 30 calculates first distance information based on the first measurement value (first stereo pair image) output from the stereo camera S4 (ST23).

コントローラ３０は、高さ位置演算部３１から出力されたステレオカメラＳ４の移動高さに基づいて、距離演算部３２が演算した第１距離情報を、基準高さからの距離情報へ補正する（ＳＴ２４）。   Based on the moving height of the stereo camera S4 output from the height position calculation unit 31, the controller 30 corrects the first distance information calculated by the distance calculation unit 32 to distance information from the reference height (ST24). ).

図８を参照しながら、コントローラ３０が実施するＳＴ２４の処理について詳しく説明する。図８は、第１距離情報から正確な距離情報を算出する原理の説明図である。   The process of ST24 performed by the controller 30 will be described in detail with reference to FIG. FIG. 8 is an explanatory diagram of the principle of calculating accurate distance information from the first distance information.

図８において、Ｈｎは、補正後の距離情報を指す。Ｈは、基準高さを指す。ΔＺは、ステレオカメラＳ４の移動高さを指す。Ｘ２は、ステレオカメラＳ４が撮像する物体を指す。   In FIG. 8, Hn indicates distance information after correction. H refers to a reference height. ΔZ indicates the moving height of the stereo camera S4. X2 indicates an object imaged by the stereo camera S4.

Ｒｎは、基準高さにあるステレオカメラＳ４から物体Ｘ２までの距離を指す。Ｒｎ'は、移動したステレオカメラＳ４から物体Ｘ２までの距離を指す。Ｒｎ、Ｒｎ'は、ステレオカメラＳ４が出力する第１ステレオペア画像から導き出される。Ｈｎ'は、Ｒｎ'から算出される第１距離情報を指す。Ｌは、上部旋回体３からステレオカメラＳ４までの距離を指す。Ｌは、例えば、内部メモリ等に予め記憶されている。αは、ステレオカメラＳ４が基準高さにあるときのブーム４の角度を指す。α'は、ステレオカメラＳ４がΔＺだけ移動したときのブーム４の角度を指す。α、α'は、例えば、ブーム角度センサＳ１によって検出される。θｎは、ステレオカメラＳ４が基準高さにあるときのステレオカメラＳ４と物体Ｘ２とを結ぶ線分の、ステレオカメラＳ４の光軸（鉛直線）に対する角度を指す。θｎ'は、ステレオカメラＳ４がΔＺだけ移動したときのステレオカメラＳ４と物体Ｘ２とを結ぶ線分の、ステレオカメラＳ４の光軸（鉛直線）に対する角度を指す。θｎ、θｎ'は、例えば、ステレオカメラＳ４の内部パラメータから算出される。ΔＸは、ステレオカメラＳ４のＸ方向（図８の左右方向）の移動距離を指す。Ｗは、基準高さにあるステレオカメラＳ４の光軸とＸ２との距離を指す。   Rn indicates the distance from the stereo camera S4 at the reference height to the object X2. Rn ′ indicates the distance from the moved stereo camera S4 to the object X2. Rn and Rn ′ are derived from the first stereo pair image output from the stereo camera S4. Hn ′ indicates the first distance information calculated from Rn ′. L indicates the distance from the upper swing body 3 to the stereo camera S4. For example, L is stored in advance in an internal memory or the like. α indicates the angle of the boom 4 when the stereo camera S4 is at the reference height. α ′ indicates the angle of the boom 4 when the stereo camera S4 moves by ΔZ. α and α ′ are detected by, for example, the boom angle sensor S1. θn indicates an angle with respect to the optical axis (vertical line) of the stereo camera S4 of a line connecting the stereo camera S4 and the object X2 when the stereo camera S4 is at the reference height. θn ′ indicates an angle with respect to the optical axis (vertical line) of the stereo camera S4 of a line segment connecting the stereo camera S4 and the object X2 when the stereo camera S4 moves by ΔZ. θn and θn ′ are calculated from internal parameters of the stereo camera S4, for example. ΔX indicates the movement distance of the stereo camera S4 in the X direction (left and right direction in FIG. 8). W indicates the distance between the optical axis of the stereo camera S4 at the reference height and X2.

具体的に距離情報Ｈｎは、以下の式により算出できる。   Specifically, the distance information Hn can be calculated by the following equation.

移動高さΔＺは、式（１）により求められる。   The moving height ΔZ is obtained by the equation (1).

ΔＺ＝Ｌｓiｎα'−Ｌｓｉｎα （１）
ΔＸは、式（２）により求められる。ΔZ = Lsin α′−L sin α (1)
ΔX is obtained by the equation (2).

ΔＸ＝Ｌｃｏｓα'−Ｌｃｏｓα （２）
θｎは、式（３）で表される。θｎ'は、式（３）'で表される。ΔX = Lcos α′−L cos α (2)
θn is expressed by Expression (3). θn ′ is expressed by Expression (3) ′.

θｎ＝ｓｉｎ−１（Ｗ／Ｒｎ） （３）
θｎ'＝ｓｉｎ−１（（Ｗ−ΔＸ）／Ｒｎ'） （３）'
第１距離情報Ｈｎ'は、式（４）により求められる。θn = sin −1 (W / Rn) (3)
θn ′ = sin −1 ((W−ΔX) / Rn ′) (3) ′
The first distance information Hn ′ is obtained by Expression (4).

Ｈｎ'＝Ｒｎ'×ｃоｓθｎ' （４）
距離情報Ｈｎは、式（５）により求められる。Hn ′ = Rn ′ × cos θn ′ (4)
The distance information Hn is obtained by Expression (5).

Ｈｎ＝Ｒｎ'×ｃоｓθｎ'−ΔＺ （５）
端的にいうと、距離情報Ｈｎは、第１距離情報Ｈｎ'から移動高さΔＺを差し引くことにより算出できる。Hn = Rn ′ × cos θn′−ΔZ (5)
In short, the distance information Hn can be calculated by subtracting the moving height ΔZ from the first distance information Hn ′.

上述では、コントローラ３０がステレオカメラＳ４の鉛直下方の距離情報を算出する処理を説明したが、コントローラ３０は、アタッチメントの動作によって、ステレオカメラＳ４の姿勢が変化しても同様の処理を行う。鉛直下方以外の複数方向においても同様の処理を行う。   In the above description, the process in which the controller 30 calculates distance information in the vertical direction of the stereo camera S4 has been described. However, the controller 30 performs the same process even if the attitude of the stereo camera S4 changes due to the attachment operation. Similar processing is performed in a plurality of directions other than vertically below.

その後、コントローラ３０は、演算した距離情報を、表示装置Ｄ３やメモリ部３３へ出力する。   Thereafter, the controller 30 outputs the calculated distance information to the display device D3 and the memory unit 33.

上述のように、別の実施例のショベルにおいても、ステレオカメラＳ４の第１測定値（第１ステレオペア画像）からステレオカメラＳ４の移動高さによる影響を排除して正確な距離情報を算出するので、測定時にブーム４の姿勢が移動しても掘削箇所の地形を正確に測定できる。   As described above, also in the excavator of another embodiment, accurate distance information is calculated by eliminating the influence of the moving height of the stereo camera S4 from the first measurement value (first stereo pair image) of the stereo camera S4. Therefore, even if the posture of the boom 4 moves during measurement, the topography of the excavation site can be accurately measured.

以上、本発明の好ましい実施例について詳説したが、本発明は、上述した実施例に制限
されることはなく、本発明の範囲を逸脱することなしに上述した実施例に種々の変形及び
置換を加えることができる。Although the preferred embodiments of the present invention have been described in detail above, the present invention is not limited to the above-described embodiments, and various modifications and substitutions can be made to the above-described embodiments without departing from the scope of the present invention. Can be added.

本願は、２０１６年３月１６日に出願した日本国特許出願２０１６−０５３００７号に基づく優先権を主張するものであり、この日本国特許出願の全内容を本願に参照により援用する。   This application claims priority based on Japanese Patent Application No. 2016-053007 filed on Mar. 16, 2016, the entire contents of which are incorporated herein by reference.

１・・・下部走行体 ２・・・旋回機構 ３・・・上部旋回体 ４・・・ブーム ５・・・アーム ６・・・バケット ７・・・ブームシリンダ ８・・・アームシリンダ ９・・・バケットシリンダ １０・・・キャビン １１・・・エンジン ３０・・・コントローラ ３１・・・高さ位置演算部 ３２・・・距離演算部 ３３・・・メモリ部 Ｓ１・・・ブーム角度センサ Ｓ２・・・アーム角度センサ Ｓ３・・・バケット角度センサ Ｓ４・・・ステレオカメラ（土砂形状測定装置） Ｓ５・・・通信装置（通信手段） １００・・・管理装置 Ｄ１・・・入力装置 Ｄ２・・・音声出力装置 Ｄ３・・・表示装置（表示部） Ｄ４・・・高さ設定スイッチ   DESCRIPTION OF SYMBOLS 1 ... Lower traveling body 2 ... Turning mechanism 3 ... Upper turning body 4 ... Boom 5 ... Arm 6 ... Bucket 7 ... Boom cylinder 8 ... Arm cylinder 9 ... Bucket cylinder 10 ... cabin 11 ... engine 30 ... controller 31 ... height position calculation unit 32 ... distance calculation unit 33 ... memory unit S1 ... boom angle sensor S2 ... Arm angle sensor S3 ... Bucket angle sensor S4 ... Stereo camera (earth and sand shape measuring device) S5 ... Communication device (communication means) 100 ... Management device D1 ... Input device D2 ... Voice Output device D3 ... Display device (display unit) D4 ... Height setting switch

Claims (7)

下部走行体と、
前記下部走行体に旋回可能に搭載される上部旋回体と、
前記上部旋回体に取り付けられるアタッチメントと、
前記アタッチメントに取り付けられた、測定対象地表の形状を測定する土砂形状測定装置と、
前記アタッチメントの姿勢を計測する姿勢センサと、
前記土砂形状測定装置の第１測定値により、前記土砂形状測定装置から前記測定対象地表までの距離情報を算出する制御部を備えるショベルであって、
前記制御部は、前記姿勢センサの検出値に基づいて導き出される前記アタッチメントの姿勢の変化による影響を排除して距離情報を算出する、
ショベル。A lower traveling body,
An upper swivel body that is turnably mounted on the lower traveling body;
An attachment attached to the upper swing body;
Earth and sand shape measuring device for measuring the shape of the measurement target surface attached to the attachment,
An attitude sensor for measuring the attitude of the attachment;
According to a first measurement value of the earth and sand shape measuring device, an excavator including a control unit that calculates distance information from the earth and sand shape measuring device to the measurement target surface,
The control unit calculates distance information by eliminating the influence of a change in the posture of the attachment derived based on a detection value of the posture sensor;
Excavator. 前記制御部は、基準高さを設定し、前記土砂形状測定装置から取得した前記第１測定値を、前記姿勢センサの前記検出値と前記基準高さとに基づいて補正して、前記基準高さからの距離情報を算出する、
請求項１に記載のショベル。The control unit sets a reference height, corrects the first measurement value acquired from the earth and sand shape measuring device based on the detection value of the posture sensor and the reference height, and thereby sets the reference height. Calculate distance information from
The excavator according to claim 1. 前記制御部は、前記土砂形状測定装置の前記第１測定値と前記姿勢センサの前記検出値と前記基準高さとに基づいて第２測定値を生成し、前記第２測定値から前記基準高さからの距離情報を算出する、
請求項２に記載のショベル。The control unit generates a second measurement value based on the first measurement value of the earth and sand shape measuring device, the detection value of the posture sensor, and the reference height, and the reference height is calculated from the second measurement value. Calculate distance information from
The shovel according to claim 2. 前記制御部は、前記土砂形状測定装置から取得した前記第１測定値から第１距離情報を算出し、前記第１距離情報と前記姿勢センサの前記検出値と前記基準高さとに基づいて、前記基準高さからの距離情報を算出する、
請求項２に記載のショベル。The control unit calculates first distance information from the first measurement value acquired from the earth and sand shape measuring device, and based on the first distance information, the detection value of the posture sensor, and the reference height, Calculate distance information from the reference height,
The shovel according to claim 2. 前記基準高さを設定する信号を出力する高さ設定スイッチが備えられている、
請求項２に記載のショベル。A height setting switch for outputting a signal for setting the reference height;
The shovel according to claim 2. 前記上部旋回体に取り付けられた運転室と、
前記運転室内に設置された表示部と、を更に有し、
前記制御部は、距離情報を前記表示部に表示する、
請求項１に記載のショベル。A cab attached to the upper swing body,
A display unit installed in the driver's cab,
The control unit displays distance information on the display unit.
The excavator according to claim 1. 通信手段を更に備え、
前記制御部は、距離情報を前記通信手段を介して管理装置へ送信する、
請求項１に記載のショベル。A communication means,
The control unit transmits distance information to the management device via the communication means;
The excavator according to claim 1.
JP2018505986A 2016-03-16 2017-03-15 Excavator Active JP6651607B2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016053007 2016-03-16
JP2016053007 2016-03-16
PCT/JP2017/010481 WO2017159744A1 (en) 2016-03-16 2017-03-15 Shovel

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2019227756A Division JP6848039B2 (en) 2016-03-16 2019-12-17 Excavator

Publications (2)

Publication Number Publication Date
JPWO2017159744A1 true JPWO2017159744A1 (en) 2018-11-29
JP6651607B2 JP6651607B2 (en) 2020-02-19

Family

ID=59851194

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2018505986A Active JP6651607B2 (en) 2016-03-16 2017-03-15 Excavator
JP2019227756A Active JP6848039B2 (en) 2016-03-16 2019-12-17 Excavator

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2019227756A Active JP6848039B2 (en) 2016-03-16 2019-12-17 Excavator

Country Status (2)

Country Link
JP (2) JP6651607B2 (en)
WO (1) WO2017159744A1 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102018200060B4 (en) * 2018-01-04 2024-05-08 Robert Bosch Gmbh Method for operating a mobile work machine and mobile work machine
CN109440854A (en) * 2018-10-18 2019-03-08 南京天辰礼达电子科技有限公司 A method of calculating bucket point and large arm shaft core position relationship
JP7003082B2 (en) * 2019-03-27 2022-01-20 日立建機株式会社 Work machine
JP7248122B2 (en) * 2019-07-17 2023-03-29 日本電気株式会社 Drilling trajectory generation method, system, and drilling trajectory generation device
JP2021070922A (en) * 2019-10-29 2021-05-06 住友重機械工業株式会社 Shovel

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1194550A (en) * 1997-09-24 1999-04-09 Kikuo Tokida Method and system for earth work management, and light reflecting device for optical wave range-finding
JP2012255286A (en) * 2011-06-08 2012-12-27 Topcon Corp Construction machine control system
JP2016008484A (en) * 2014-06-26 2016-01-18 住友建機株式会社 Construction machinery
WO2016013691A1 (en) * 2015-10-15 2016-01-28 株式会社小松製作所 Position measuring system and position measuring method

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003344045A (en) * 2002-05-29 2003-12-03 Yaskawa Electric Corp Image processing apparatus
US10094654B2 (en) * 2014-08-25 2018-10-09 Trimble Navigation Limited All-in-one integrated sensing device for machine control

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1194550A (en) * 1997-09-24 1999-04-09 Kikuo Tokida Method and system for earth work management, and light reflecting device for optical wave range-finding
JP2012255286A (en) * 2011-06-08 2012-12-27 Topcon Corp Construction machine control system
JP2016008484A (en) * 2014-06-26 2016-01-18 住友建機株式会社 Construction machinery
WO2016013691A1 (en) * 2015-10-15 2016-01-28 株式会社小松製作所 Position measuring system and position measuring method

Also Published As

Publication number Publication date
JP6651607B2 (en) 2020-02-19
JP6848039B2 (en) 2021-03-24
WO2017159744A1 (en) 2017-09-21
JP2020046439A (en) 2020-03-26

Similar Documents

Publication Publication Date Title
JP6848039B2 (en) Excavator
JP7305823B2 (en) Excavator and measurement system for excavator
WO2015182455A1 (en) Work state detection system of work vehicle, and work vehicle
JP6050525B2 (en) Position measuring system, work machine, and position measuring method
JP5759798B2 (en) Construction machine control system
JP6794193B2 (en) Image display system for work machines
JP6707047B2 (en) Construction machinery
JP5108350B2 (en) Work amount measuring method and work amount measuring apparatus for hydraulic excavator
JP7285051B2 (en) Display control device and display control method
US20160244949A1 (en) Posture calculation device of working machinery, posture calculation device of excavator, and working machinery
JP7420733B2 (en) Display control system and display control method
JPWO2015173920A1 (en) Hydraulic excavator calibration system and calibration method
US20170146343A1 (en) Outside Recognition Device
JP2012112108A (en) Periphery monitoring device for work machine
JP2008144379A (en) Image processing system of remote controlled working machine
CN111032962B (en) Construction machine
WO2022070720A1 (en) Display control device and display method
WO2019225133A1 (en) Hydraulic shovel and system
JP2007061042A (en) Automatic control system of farm working machine
JP7536580B2 (en) Display control device and display method
JP6433664B2 (en) Overhead image display device for construction machinery
KR20220010221A (en) Excavator bucket MONITORING APPARATUS BASED ON AROUND VIEW MONITORING AND METHOD THEREOF
JP6923144B2 (en) Image display system for work machines
JP6954145B2 (en) Tip attachment dimensional measuring device
AU2023208395A1 (en) Image correction device, image correction method, and remote operation system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180810

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190528

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190726

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20190917

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191217

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20191224

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200121

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200122

R150 Certificate of patent or registration of utility model

Ref document number: 6651607

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150