JP7133562B2 - 材料移動機械のための拡張現実ディスプレイ - Google Patents
材料移動機械のための拡張現実ディスプレイ Download PDFInfo
- Publication number
- JP7133562B2 JP7133562B2 JP2019547684A JP2019547684A JP7133562B2 JP 7133562 B2 JP7133562 B2 JP 7133562B2 JP 2019547684 A JP2019547684 A JP 2019547684A JP 2019547684 A JP2019547684 A JP 2019547684A JP 7133562 B2 JP7133562 B2 JP 7133562B2
- Authority
- JP
- Japan
- Prior art keywords
- virtual
- instrument
- image
- excavator
- terrain
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 239000000463 material Substances 0.000 title claims description 91
- 230000003190 augmentative effect Effects 0.000 title claims description 80
- 238000005553 drilling Methods 0.000 claims description 53
- 238000012546 transfer Methods 0.000 claims description 37
- 238000000034 method Methods 0.000 claims description 14
- 239000007787 solid Substances 0.000 claims description 5
- 238000013461 design Methods 0.000 description 17
- 230000003044 adaptive effect Effects 0.000 description 4
- 238000009412 basement excavation Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000008447 perception Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000012800 visualization Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 241001236644 Lavinia Species 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 239000002689 soil Substances 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
Images
Classifications
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/26—Indicating devices
- E02F9/261—Surveying the work-site to be treated
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/24—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view in front of the vehicle
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F3/00—Dredgers; Soil-shifting machines
- E02F3/04—Dredgers; Soil-shifting machines mechanically-driven
- E02F3/28—Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets
- E02F3/30—Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets with a dipper-arm pivoted on a cantilever beam, i.e. boom
- E02F3/32—Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets with a dipper-arm pivoted on a cantilever beam, i.e. boom working downwardly and towards the machine, e.g. with backhoes
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F3/00—Dredgers; Soil-shifting machines
- E02F3/04—Dredgers; Soil-shifting machines mechanically-driven
- E02F3/28—Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets
- E02F3/36—Component parts
- E02F3/42—Drives for dippers, buckets, dipper-arms or bucket-arms
- E02F3/43—Control of dipper or bucket position; Control of sequence of drive operations
- E02F3/435—Control of dipper or bucket position; Control of sequence of drive operations for dipper-arms, backhoes or the like
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/20—Drives; Control devices
- E02F9/22—Hydraulic or pneumatic drives
- E02F9/2264—Arrangements or adaptations of elements for hydraulic drives
- E02F9/2271—Actuators and supports therefor and protection therefor
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/24—Safety devices, e.g. for preventing overload
- E02F9/245—Safety devices, e.g. for preventing overload for preventing damage to underground objects during excavation, e.g. indicating buried pipes or the like
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/26—Indicating devices
- E02F9/261—Surveying the work-site to be treated
- E02F9/262—Surveying the work-site to be treated with follow-up actions to control the work tool, e.g. controller
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/26—Indicating devices
- E02F9/264—Sensors and their calibration for indicating the position of the work tool
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/26—Indicating devices
- E02F9/264—Sensors and their calibration for indicating the position of the work tool
- E02F9/265—Sensors and their calibration for indicating the position of the work tool with follow-up actions (e.g. control signals sent to actuate the work tool)
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
- B60R2300/304—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
- B60R2300/305—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images merging camera image with lines or icons
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
Landscapes
- Engineering & Computer Science (AREA)
- Mining & Mineral Resources (AREA)
- General Engineering & Computer Science (AREA)
- Civil Engineering (AREA)
- Structural Engineering (AREA)
- Mechanical Engineering (AREA)
- Multimedia (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Life Sciences & Earth Sciences (AREA)
- Paleontology (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Computer Graphics (AREA)
- Processing Or Creating Images (AREA)
- Component Parts Of Construction Machinery (AREA)
Description
これらの詳細が、本明細書に記載の様々な実施形態の必須の構成要素である要素に関連することを含意するものとして解釈してはならず、それは、ある特定の要素が、本説明に付随する複数の図面それぞれに図示されている場合であっても同様であることに留意されたい。更に、添付の請求項で定義されている実施形態を含むがこれらに限定されない本開示の範囲から逸脱することなく、修正及び変形が可能であることは明らかであろう。より具体的には、本開示のいくつかの態様を、好ましい又は特に有利なものとして本明細書中で特定しているものの、本開示はこれらの態様に必ずしも限定されないと考えられる。
102 機械シャーシ
104 掘削用リンケージ組立体
106 誘導用構造
108 掘削機ブーム
110 掘削機スティック
112 器具連結器
114 掘削器具、回転掘削器具
120 ブーム力学センサ
122 スティック力学センサ
123 器具力学センサ
124 カメラ
125 ディスプレイ
126 地形
130 器具画像、キャプチャ画像
132 仮想トレンチ
134、134’、134A、134B、134C 拡張現実オーバレイ画像
140 器具前縁部
142 地形126の長手方向に配置された表面部分
144 仮想器具バー
146 仮想標的バー
150 設計表面
152A、152B 側壁
154 前壁
160 バー間隔
162、172、182 調整可能な長さ
163、173、183 調整可能な深さ
164、174、184 調整可能な幅
170、180 バー間隔
190、200 制御スキーム
190、192 パイプ
Claims (19)
- 材料移動機械であって:
材料移動器具;
前記材料移動機械の上に位置決めされ、前記材料移動器具と、前記材料移動器具の作業領域内の地形とを包含する視野を備える、カメラ;
拡張ディスプレイ;並びに
前記材料移動器具の位置を表す位置信号を生成するよう構成された1つ以上の力学センサと、前記拡張ディスプレイに通信可能に連結されたメモリ及び画像生成器を備える構造コントローラとを備える、制御構造
を備え、
前記構造コントローラは:
前記メモリに、前記地形の地下特徴の3次元モデルを保存し;
前記カメラによって、前記材料移動器具と、前記材料移動器具の前記作業領域内の地形とを含む器具画像をキャプチャし;
前記画像生成器を通して、前記器具画像の対応する部分と、地下特徴の前記3次元モデルとを重畳することによって、重畳画像を生成し;
前記材料移動器具の前記位置に基づいて、仮想トレンチを生成し;
前記仮想トレンチと、前記器具画像と地下特徴の前記3次元モデルとの重畳部分とを含む、拡張現実オーバレイ画像を生成するために、前記仮想トレンチを前記重畳画像の上に重ね;
前記仮想トレンチ内の前記3次元モデルの地下特徴を見せ、また前記仮想トレンチの外側の前記3次元モデルの地下特徴を隠すように、前記画像生成器を通して、前記拡張現実オーバレイ画像を生成し;
前記拡張現実オーバレイ画像を前記拡張ディスプレイ上に表示する
よう、プログラムされる、材料移動機械。 - 前記構造コントローラは、前記材料移動器具の前記器具前縁部の下に配置された前記地形の長手方向に配置された表面部分に対する、前記材料移動器具の器具前縁部の位置に基づいて、前記仮想トレンチを生成するようプログラムされる、請求項1に記載の材料移動機械。
- 前記構造コントローラは:
前記材料移動器具の前記器具前縁部に重畳された仮想器具バー;及び
前記地形の前記長手方向に配置された表面部分に重畳された仮想標的バーであって、前記地形上の前記仮想標的バーに対する前記仮想器具バーの位置に基づいて、前記拡張現実オーバレイ画像内での位置を調整するよう構成される、仮想標的バー
を備えるように、前記拡張現実オーバレイ画像を生成するようプログラムされる、請求項2に記載の材料移動機械。 - 前記仮想器具バーは、赤色の実線からなり;
前記仮想標的バーは、前記仮想トレンチの最下部を、緑色の実線として含み;
前記仮想トレンチは、複数の赤色の破線によって画定される、請求項3に記載の材料移動機械。 - 前記構造コントローラは、前記仮想標的バーが前記仮想トレンチの最下部を含み、かつ前記仮想トレンチが:
地下表面;
前記地下表面間に配置された側壁のペア;及び
前記側壁のペアの間、かつ前記仮想標的バーの下方に配置された前壁
を備えるように、前記仮想トレンチを生成するようプログラムされる、請求項3に記載の材料移動機械。 - 前記構造コントローラは:
前記仮想器具バーと前記仮想標的バーとの間のバー間隔であって、前記材料移動器具の前記器具前縁部と前記地形の前記長手方向に配置された表面部分との間の、対応する現実世界の間隔に対して、拡大縮小可能である、バー間隔;
前記バー間隔に反比例する、前記仮想標的バーの調整可能な幅;及び
前記バー間隔に正比例する、前記側壁のペアの調整可能な長さ
を生成するようプログラムされる、請求項5に記載の材料移動機械。 - 前記仮想標的バーの前記調整可能な幅は、前記仮想トレンチの前記前壁の幅に等しい、請求項6に記載の材料移動機械。
- 前記構造コントローラは、前記地下表面、前記側壁のペア、及び前記仮想トレンチの前記前壁の境界を、前記拡張現実オーバレイ画像内に破線として描画するようプログラムされる、請求項5に記載の材料移動機械。
- 前記構造コントローラは、前記仮想器具バーの前記位置に基づいて前記仮想トレンチを調整するようプログラムされる、請求項2に記載の材料移動機械。
- 前記構造コントローラは、前記地下特徴を含む少なくとも1ペアのパイプを前記地形の下方に配置するようプログラムされる、請求項1に記載の材料移動機械。
- 前記構造コントローラは、前記パイプのペアのうちの第1のパイプを、前記パイプのペアのうちの第2のパイプの上方に、前記第2のパイプに対して角度を有して配置するようプログラムされる、請求項10に記載の材料移動機械。
- 前記構造コントローラは、前記パイプのペアのうちの前記第1のパイプを、前記パイプのペアのうちの前記第2のパイプに対して垂直に配置するようプログラムされる、請求項11に記載の材料移動機械。
- 前記構造コントローラは:
前記拡張現実オーバレイ画像内に、前記仮想トレンチを、前記パイプのペアそれぞれの少なくとも一部分を含むように生成し;
前記パイプのペアそれぞれを、互いに異なる色で表示する
ようプログラムされる、請求項12に記載の材料移動機械。 - 前記構造コントローラは:
前記仮想トレンチを、前壁を備えるように生成し;
前記パイプのペアのうちの一方のパイプを、前記仮想トレンチの前記前壁に対して交差する角度で配置する
ようプログラムされる、請求項12に記載の材料移動機械。 - 前記材料移動機械は、機械シャーシ及び掘削用リンケージ組立体を備える掘削機であり;
前記掘削用リンケージ組立体は、合わせて複数のリンケージ組立体位置を画定する掘削機ブーム及び掘削機スティックを備え;
前記掘削用リンケージ組立体は、前記機械シャーシと共に、又は前記機械シャーシに対して、揺動するよう構成され;
前記掘削機スティックは、前記掘削機ブームに対して縦回転するよう構成され;
前記材料移動器具は、前記掘削機スティックに機械的に連結された掘削器具であり;
前記制御構造は、前記複数のリンケージ組立体位置を通して前記掘削用リンケージ組立体を作動させるよう構成された、1つ以上のリンケージ組立体アクチュエータを備える、請求項1に記載の材料移動機械。 - 掘削機であって:
機械シャーシ;
掘削器具;
掘削機ブーム及び掘削機スティックを備える、掘削用リンケージ組立体であって、前記掘削機ブーム及び前記掘削機スティックは合わせて、複数のリンケージ組立体位置を画定し、前記掘削用リンケージ組立体は、前記機械シャーシと共に、又は前記機械シャーシに対して、揺動するよう構成され、前記掘削機スティックは、前記掘削機ブームに対して縦回転するよう構成され、前記掘削器具は、前記掘削機スティックに機械的に連結される、掘削用リンケージ組立体;
前記掘削機上に位置決めされ、前記掘削器具と、前記掘削器具の前記作業領域内の地形とを包含する視野を備える、カメラ;並びに
制御構造であって、前記掘削器具の位置を表す位置信号を生成するよう構成された1つ以上の力学センサと、前記掘削用リンケージ組立体を、前記複数のリンケージ組立体位置を通して作動させるよう構成された、1つ以上のリンケージ組立体アクチュエータと、前記拡張ディスプレイに通信可能に連結されたメモリ及び画像生成器を備える構造コントローラとを備える、制御構造
を備え、
前記構造コントローラは:
前記メモリに、前記地形の地下特徴の3次元モデルを保存し;
前記カメラによって、前記掘削器具と、前記掘削器具の前記作業領域内の地形とを含む器具画像をキャプチャし;
前記画像生成器を通して、前記器具画像の対応する部分と、地下特徴の前記3次元モデルとを重畳することによって、重畳画像を生成し;
前記切削器具の器具前縁部の、前記器具前縁部の下に配置された前記地形の長手方向に配置された表面部分に関する位置に基づいて、仮想トレンチを生成し;
前記画像生成器を通して、前記仮想トレンチと、前記器具画像と地下特徴の前記3次元モデルとの重畳部分とを含む、拡張現実オーバレイ画像を生成するために、前記仮想トレンチを前記重畳画像の上に重ね、ここで仮想器具バーが、前記材料移動器具の器具前縁部に重畳され、仮想標的バーが、前記地形の長手方向に配置された表面部分に重畳され;
前記地形上の前記仮想標的バーに対する前記仮想器具バーの位置に基づいて、前記仮想トレンチを調整し;
前記仮想トレンチ内の前記3次元モデルの地下特徴を見せ、また前記仮想トレンチの外側の前記3次元モデルの地下特徴を隠すように、前記拡張現実オーバレイ画像を生成し;
前記拡張現実オーバレイ画像を前記拡張ディスプレイ上に表示する
よう、プログラムされる、掘削機。 - 拡張ディスプレイを利用する材料移動機械を動作させる方法であって:
前記材料移動機械を地形上に配置するステップであって、前記材料移動機械は、材料移動器具、カメラ、前記拡張ディスプレイ、及び制御構造を備え、ここで:
(i)前記カメラは前記掘削機上に位置決めされ、前記材料移動器具と、前記材料移動器具の作業領域内の地形とを包含する視野を備え;
(ii)前記制御構造は:前記材料移動器具の位置を表す位置信号を生成するよう構成された1つ以上の力学センサ;メモリ;及び前記拡張ディスプレイに通信可能に連結された画像生成器を備える、ステップ;
前記メモリに、前記地形の地下特徴の3次元モデルを保存するステップ;
前記カメラによって、前記材料移動器具と、前記材料移動器具の前記作業領域内の地形とを含む器具画像をキャプチャするステップ;
前記画像生成器を通して、前記器具画像の対応する部分と、地下特徴の前記3次元モデルとを重畳することによって、重畳画像を生成するステップ;
前記材料移動器具の前記位置に基づいて、仮想トレンチを生成するステップ;
前記仮想トレンチと、前記器具画像と地下特徴の前記3次元モデルとの重畳部分とを含む、拡張現実オーバレイ画像を生成するために、前記仮想トレンチを前記重畳画像の上に重ねるステップ;
前記仮想トレンチ内の前記3次元モデルの地下特徴を見せ、また前記仮想トレンチの外側の前記3次元モデルの地下特徴を隠すように、前記画像生成器を通して、前記拡張現実オーバレイ画像を生成するステップ;
前記拡張現実オーバレイ画像を前記拡張ディスプレイ上に表示するするステップ;並びに
前記制御構造を利用して前記材料移動機械を動作させ、前記拡張現実オーバレイ画像に基づいて、前記材料移動器具を前記地形に対して移動させるステップ
を含む、方法。 - 前記材料移動器具の器具前縁部の、前記器具前縁部の下に配置された前記地形の長手方向に配置された表面部分に対する位置に基づいて、前記仮想トレンチを生成するステップ;
前記材料移動器具の前記器具前縁部に重畳された仮想器具バー、及び前記地形の前記長手方向に配置された表面部分に重畳された仮想標的バーを含む、前記拡張現実オーバレイ画像を生成するステップ
を更に含む、請求項17に記載の方法。 - 前記地形上の前記仮想標的バーに対する前記仮想器具バーの位置に基づいて、前記拡張現実オーバレイ画像内の前記仮想標的バーの位置を調整するステップ;
前記仮想トレンチの深さを、前記仮想標的バーと前記仮想器具バーとの間のバー間隔に反比例する量で調整するステップ;
前記仮想トレンチの幅を、前記バー間隔に反比例する量で調整するステップ;及び
前記仮想トレンチの側壁の長さを、前記バー間隔に正比例する量で調整するステップ
を更に含む、請求項18に記載の方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201762466542P | 2017-03-03 | 2017-03-03 | |
US62/466,542 | 2017-03-03 | ||
PCT/US2018/020579 WO2018160921A1 (en) | 2017-03-03 | 2018-03-02 | Augmented reality display for material moving machines |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020509272A JP2020509272A (ja) | 2020-03-26 |
JP7133562B2 true JP7133562B2 (ja) | 2022-09-08 |
Family
ID=63357286
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019547684A Active JP7133562B2 (ja) | 2017-03-03 | 2018-03-02 | 材料移動機械のための拡張現実ディスプレイ |
Country Status (5)
Country | Link |
---|---|
US (2) | US10301798B2 (ja) |
EP (1) | EP3590094B1 (ja) |
JP (1) | JP7133562B2 (ja) |
AU (1) | AU2018227862B9 (ja) |
WO (1) | WO2018160921A1 (ja) |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9235763B2 (en) | 2012-11-26 | 2016-01-12 | Trimble Navigation Limited | Integrated aerial photogrammetry surveys |
JP6480830B2 (ja) * | 2015-08-24 | 2019-03-13 | 株式会社小松製作所 | ホイールローダの制御システム、その制御方法およびホイールローダの制御方法 |
WO2018062374A1 (ja) * | 2016-09-30 | 2018-04-05 | 住友建機株式会社 | ショベル |
JP6434476B2 (ja) * | 2016-12-06 | 2018-12-05 | ファナック株式会社 | 拡張現実シミュレーション装置及び拡張現実シミュレーションプログラム |
ES2773051T3 (es) * | 2017-06-16 | 2020-07-09 | Abb Schweiz Ag | Flujo de video modificado para soportar el control remoto de una grúa de contenedores |
NO344567B1 (en) * | 2018-04-12 | 2020-02-03 | Geonord As | Construction machine guidance system |
JP7080750B2 (ja) * | 2018-06-29 | 2022-06-06 | 株式会社小松製作所 | 表示制御システム、遠隔操作システム、表示制御装置、および表示制御方法 |
US10755484B1 (en) * | 2018-08-17 | 2020-08-25 | Bentley Systems, Incorporated | Estimating subsurface feature locations during excavation |
US10755483B1 (en) * | 2018-08-17 | 2020-08-25 | Bentley Systems, Incorporated | Techniques for accurate and faithful projections in an outdoor augmented reality view |
US10699488B1 (en) * | 2018-09-07 | 2020-06-30 | Facebook Technologies, Llc | System and method for generating realistic augmented reality content |
JP7201486B2 (ja) * | 2019-03-13 | 2023-01-10 | 日立建機株式会社 | 作業機械 |
DE102019207151A1 (de) * | 2019-05-16 | 2020-11-19 | Robert Bosch Gmbh | Verfahren zur Analyse der Bodenbeschaffenheit und/oder des Härtegrads des Bodens |
EP3748583A1 (en) | 2019-06-04 | 2020-12-09 | My Virtual Reality Software AS | Subsurface utility visualization |
WO2021060466A1 (ja) * | 2019-09-27 | 2021-04-01 | 株式会社タダノ | クレーン情報表示システム |
CN110805080B (zh) * | 2019-10-16 | 2022-08-19 | 广西弘德茂机械有限公司 | 一种装载机作业场地的人员安全防护系统 |
US10943360B1 (en) * | 2019-10-24 | 2021-03-09 | Trimble Inc. | Photogrammetric machine measure up |
KR102399227B1 (ko) * | 2019-12-30 | 2022-05-17 | 주식회사 지오멕스소프트 | Gpr 탐사를 이용한 지하시설물 관리시스템 |
EP3865982B1 (en) | 2020-02-17 | 2024-04-17 | Hexagon Technology Center GmbH | Augmented viewing of a scenery and subsurface infrastructure |
US20220136214A1 (en) * | 2020-11-05 | 2022-05-05 | Trimble Inc. | High-accuracy augmented reality display for construction machines |
JP2022173801A (ja) * | 2021-05-10 | 2022-11-22 | コベルコ建機株式会社 | 施工支援システムおよび施工支援方法 |
WO2022255995A1 (en) * | 2021-06-02 | 2022-12-08 | Vertechs Energy Solutions Llc | Augmented reality drilling, completion and production visualization system and synergy method based on holographic projection |
US20230141588A1 (en) * | 2021-11-11 | 2023-05-11 | Caterpillar Paving Products Inc. | System and method for configuring augmented reality on a worksite |
JP2023120743A (ja) * | 2022-02-18 | 2023-08-30 | 日立建機株式会社 | 表示制御装置、及び遠隔操作装置 |
JP2023172301A (ja) * | 2022-05-23 | 2023-12-06 | 日立建機株式会社 | 遠隔制御システム、遠隔操作型作業機械システム、および作業情報表示制御方法 |
US11949845B2 (en) | 2022-08-31 | 2024-04-02 | Caterpillar Inc. | Dynamic visual overlay for enhanced terrain perception on remote control construction equipment |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001317941A (ja) | 2000-03-09 | 2001-11-16 | Caterpillar Inc | 土工現場における物体を表示するための方法および装置 |
JP2006053922A (ja) | 2004-08-10 | 2006-02-23 | Caterpillar Inc | 機械操作者にとっての視認性を高める方法及び装置 |
JP2013044226A (ja) | 2011-08-22 | 2013-03-04 | Deere & Co | 立入禁止区域を有する埋設された公共施設のデータ |
JP2014054354A (ja) | 2012-09-12 | 2014-03-27 | Toshiba Corp | 軌道同期シャトルヘリカルスキャンct装置 |
WO2014054354A1 (ja) | 2012-10-05 | 2014-04-10 | 株式会社小松製作所 | 掘削機械の表示システム及び掘削機械 |
US20140188333A1 (en) | 2012-12-27 | 2014-07-03 | Caterpillar Inc. | Augmented Reality Implement Control |
JP2014129676A (ja) | 2012-12-28 | 2014-07-10 | Komatsu Ltd | 建設機械の表示システムおよびその制御方法 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6735888B2 (en) | 2001-05-18 | 2004-05-18 | Witten Technologies Inc. | Virtual camera on the bucket of an excavator displaying 3D images of buried pipes |
US20080000111A1 (en) | 2006-06-29 | 2008-01-03 | Francisco Roberto Green | Excavator control system and method |
US20080047170A1 (en) | 2006-08-24 | 2008-02-28 | Trimble Navigation Ltd. | Excavator 3D integrated laser and radio positioning guidance system |
US8139108B2 (en) | 2007-01-31 | 2012-03-20 | Caterpillar Inc. | Simulation system implementing real-time machine data |
US8817238B2 (en) * | 2007-10-26 | 2014-08-26 | Deere & Company | Three dimensional feature location from an excavator |
US8689471B2 (en) | 2012-06-19 | 2014-04-08 | Caterpillar Trimble Control Technologies Llc | Method and system for controlling an excavator |
US20150199106A1 (en) * | 2014-01-14 | 2015-07-16 | Caterpillar Inc. | Augmented Reality Display System |
WO2015162710A1 (ja) | 2014-04-23 | 2015-10-29 | 株式会社日立製作所 | 掘削装置 |
US9428885B2 (en) * | 2014-09-15 | 2016-08-30 | Trimble Navigation Limited | Guidance system for earthmoving machinery |
US9824490B1 (en) * | 2015-06-08 | 2017-11-21 | Bentley Systems, Incorporated | Augmentation of a dynamic terrain surface |
DE102015221356B4 (de) * | 2015-10-30 | 2020-12-24 | Conti Temic Microelectronic Gmbh | Vorrichtung und Verfahren zur Bereitstellung einer Fahrzeugrundumansicht |
US10190288B2 (en) * | 2016-04-08 | 2019-01-29 | Ace/Avant Concrete Construction Co., Inc. | Excavation measurement with light curtain |
-
2018
- 2018-03-02 AU AU2018227862A patent/AU2018227862B9/en active Active
- 2018-03-02 US US15/910,121 patent/US10301798B2/en active Active
- 2018-03-02 JP JP2019547684A patent/JP7133562B2/ja active Active
- 2018-03-02 WO PCT/US2018/020579 patent/WO2018160921A1/en active Application Filing
- 2018-03-02 EP EP18760630.6A patent/EP3590094B1/en active Active
-
2019
- 2019-04-05 US US16/376,126 patent/US10550549B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001317941A (ja) | 2000-03-09 | 2001-11-16 | Caterpillar Inc | 土工現場における物体を表示するための方法および装置 |
JP2006053922A (ja) | 2004-08-10 | 2006-02-23 | Caterpillar Inc | 機械操作者にとっての視認性を高める方法及び装置 |
JP2013044226A (ja) | 2011-08-22 | 2013-03-04 | Deere & Co | 立入禁止区域を有する埋設された公共施設のデータ |
JP2014054354A (ja) | 2012-09-12 | 2014-03-27 | Toshiba Corp | 軌道同期シャトルヘリカルスキャンct装置 |
WO2014054354A1 (ja) | 2012-10-05 | 2014-04-10 | 株式会社小松製作所 | 掘削機械の表示システム及び掘削機械 |
US20140188333A1 (en) | 2012-12-27 | 2014-07-03 | Caterpillar Inc. | Augmented Reality Implement Control |
JP2014129676A (ja) | 2012-12-28 | 2014-07-10 | Komatsu Ltd | 建設機械の表示システムおよびその制御方法 |
Also Published As
Publication number | Publication date |
---|---|
AU2018227862B9 (en) | 2022-11-24 |
EP3590094B1 (en) | 2022-05-04 |
AU2018227862B2 (en) | 2022-11-17 |
EP3590094A1 (en) | 2020-01-08 |
US20190249398A1 (en) | 2019-08-15 |
US20180251961A1 (en) | 2018-09-06 |
US10550549B2 (en) | 2020-02-04 |
JP2020509272A (ja) | 2020-03-26 |
AU2018227862A1 (en) | 2019-10-10 |
US10301798B2 (en) | 2019-05-28 |
WO2018160921A1 (en) | 2018-09-07 |
EP3590094A4 (en) | 2020-12-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7133562B2 (ja) | 材料移動機械のための拡張現実ディスプレイ | |
JP7285051B2 (ja) | 表示制御装置、および表示制御方法 | |
US10584466B2 (en) | Shovel and method of controlling shovel | |
CN109757114B (zh) | 作业机械的显示控制装置、作业机械、作业机械的显示控制方法 | |
KR20180099714A (ko) | 쇼벨 | |
JP6872945B2 (ja) | 建設機械 | |
JP7372029B2 (ja) | 表示制御装置、表示制御システムおよび表示制御方法 | |
WO2019175917A1 (ja) | 作業機械 | |
JP6918716B2 (ja) | 建設機械 | |
JP7080750B2 (ja) | 表示制御システム、遠隔操作システム、表示制御装置、および表示制御方法 | |
JP4012448B2 (ja) | 建設機械の掘削作業教示装置 | |
JP2024028438A (ja) | 作業機械の画像表示システム及び作業機械の画像表示方法 | |
JP2024052764A (ja) | 表示制御装置及び表示方法 | |
WO2017061512A1 (ja) | 施工方法、作業機械の制御システム及び作業機械 | |
JP6928740B2 (ja) | 施工管理システム、作業機械、及び施工管理方法 | |
JP7344675B2 (ja) | 表示システム、遠隔操作システムおよび表示方法 | |
WO2022070707A1 (ja) | 表示制御装置及び表示方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210302 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211130 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211201 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20220301 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220427 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220803 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220829 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7133562 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |