JP2021103840A - 作業支援サーバ、撮像装置の選択方法 - Google Patents
作業支援サーバ、撮像装置の選択方法 Download PDFInfo
- Publication number
- JP2021103840A JP2021103840A JP2019234102A JP2019234102A JP2021103840A JP 2021103840 A JP2021103840 A JP 2021103840A JP 2019234102 A JP2019234102 A JP 2019234102A JP 2019234102 A JP2019234102 A JP 2019234102A JP 2021103840 A JP2021103840 A JP 2021103840A
- Authority
- JP
- Japan
- Prior art keywords
- work
- work machine
- image
- image pickup
- machine
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 67
- 238000010187 selection method Methods 0.000 title description 2
- 239000000284 extract Substances 0.000 claims abstract description 7
- 238000000034 method Methods 0.000 claims description 16
- 230000007246 mechanism Effects 0.000 description 16
- 230000008859 change Effects 0.000 description 15
- 238000004891 communication Methods 0.000 description 14
- 240000004050 Pentaglottis sempervirens Species 0.000 description 8
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 7
- 238000010276 construction Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 3
- 239000010720 hydraulic oil Substances 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000007790 scraping Methods 0.000 description 1
- 239000002689 soil Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/20—Drives; Control devices
- E02F9/2025—Particular purposes of control systems not otherwise provided for
- E02F9/205—Remotely operated machines, e.g. unmanned vehicles
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/26—Indicating devices
- E02F9/261—Surveying the work-site to be treated
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/26—Indicating devices
- E02F9/264—Sensors and their calibration for indicating the position of the work tool
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
- G05D1/0038—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with simple or augmented images from one or more cameras located onboard the vehicle, e.g. tele-operation
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
- G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F3/00—Dredgers; Soil-shifting machines
- E02F3/04—Dredgers; Soil-shifting machines mechanically-driven
- E02F3/28—Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets
- E02F3/36—Component parts
- E02F3/42—Drives for dippers, buckets, dipper-arms or bucket-arms
- E02F3/43—Control of dipper or bucket position; Control of sequence of drive operations
- E02F3/435—Control of dipper or bucket position; Control of sequence of drive operations for dipper-arms, backhoes or the like
Landscapes
- Engineering & Computer Science (AREA)
- Mining & Mineral Resources (AREA)
- Civil Engineering (AREA)
- General Engineering & Computer Science (AREA)
- Structural Engineering (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Aviation & Aerospace Engineering (AREA)
- Automation & Control Theory (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Operation Control Of Excavators (AREA)
- Closed-Circuit Television Systems (AREA)
- Component Parts Of Construction Machinery (AREA)
- Selective Calling Equipment (AREA)
Abstract
Description
撮像画像の送信中止指示を行う(STEP106)。作業支援サーバ10は、現在、撮像画像を送信しているカメラ1に限らず、作業現場の全てのカメラに対して送信中止指示を行ってもよい。以上で、作業支援サーバ10の一連の処理を終了する。
Claims (8)
- 作業者が表示装置に表示された撮像画像を見ながら作業機械を遠隔操作する際に、複数の撮像装置と通信して当該作業機械による作業を支援する作業支援サーバであって、
前記複数の撮像装置の中から、予め設定した視野角から定められる撮像範囲に、前記作業機械が含まれる前記撮像装置を候補として抽出する第1支援処理要素と、
前記候補の中から、前記作業機械の移動に基づいて、当該作業機械の向き又は大きさが最適な前記撮像範囲が得られる前記撮像装置を選択して前記表示装置に出力させる第2支援処理要素と、
を備えていることを特徴とする作業支援サーバ。 - 請求項1に記載の作業支援サーバにおいて、
前記第2支援処理要素は、前記作業機械の移動を、前記撮像装置で撮像された撮像画像に含まれる当該作業機械の位置と大きさの少なくとも一方に基づいて判断することを特徴とする作業支援サーバ。 - 請求項1又は2に記載の作業支援サーバにおいて、
前記第2支援処理要素は、前記作業機械の移動中に、当該作業機械の側面画像又は側面のズームアウト画像が撮像可能な前記撮像装置を選択することを特徴とする作業支援サーバ。 - 請求項1〜3の何れか1項に記載の作業支援サーバにおいて、
前記表示装置は、前記作業機械の向きが異なる2以上の撮像画像を表示することを特徴とする作業支援サーバ。 - 作業者が表示装置に表示された撮像画像を見ながら作業機械を遠隔操作する際に、複数の撮像装置と通信して当該作業機械による作業を支援する作業支援サーバであって、
前記複数の撮像装置の中から、予め設定した視野角から定められる撮像範囲に、前記作業機械が含まれる前記撮像装置を候補として抽出する第1支援処理要素と、
前記候補の中から、前記作業機械の作業内容に基づいて、当該作業内容が認識可能な最適な前記撮像範囲が得られる前記撮像装置を選択して前記表示装置に出力させる第3支援処理要素を備えていることを特徴とする作業支援サーバ。 - 請求項5に記載の作業支援サーバにおいて、
前記第3支援処理要素は、前記作業機械が作業している場合に、当該作業機械の正面画像若しくは側面画像、又は先端アタッチメントのズームイン画像が撮像可能な前記撮像装置を選択することを特徴とする作業支援サーバ。 - 作業者が表示装置に表示された撮像画像を見ながら作業機械を遠隔操作して作業する際に、サーバと接続された複数の撮像装置から少なくとも1つを選択して当該作業機械の作業を撮像し、当該作業を支援する撮像装置の選択方法であって、
前記複数の撮像装置の中から、予め設定した視野角から定められる撮像範囲に、前記作業機械が含まれる前記撮像装置を候補として抽出する第1のステップと、
前記作業機械が移動したと判断された場合に、前記候補の中から当該作業機械の向き又は大きさが最適な前記撮像範囲が得られる前記撮像装置を選択して前記表示装置に出力させる第2のステップと、
を備えていることを特徴とする撮像装置の選択方法。 - 作業者が表示装置に表示された撮像画像を見ながら作業機械を遠隔操作して作業する際に、サーバと接続された複数の撮像装置から少なくとも1つを選択して当該作業機械の作業を撮像し、当該作業を支援する撮像装置の選択方法であって、
前記複数の撮像装置の中から、予め設定した視野角から定められる撮像範囲に、前記作業機械が含まれる前記撮像装置を候補として抽出する第1のステップと、
前記作業機械の作業内容に基づいて、前記候補の中から当該作業内容が認識可能な最適な前記撮像範囲が得られる前記撮像装置を選択して前記表示装置に出力させる第3のステップと、
を備えていることを特徴とする撮像装置の選択方法。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019234102A JP7409074B2 (ja) | 2019-12-25 | 2019-12-25 | 作業支援サーバ、撮像装置の選択方法 |
US17/781,435 US20220412049A1 (en) | 2019-12-25 | 2020-08-28 | Work assisting server and method for selecting imaging device |
PCT/JP2020/032599 WO2021131161A1 (ja) | 2019-12-25 | 2020-08-28 | 作業支援サーバ、撮像装置の選択方法 |
EP20905930.2A EP4050164A4 (en) | 2019-12-25 | 2020-08-28 | WORK ASSISTANCE SERVER AND METHODS FOR SELECTING IMAGING EQUIPMENT |
CN202080090412.2A CN114868382A (zh) | 2019-12-25 | 2020-08-28 | 作业辅助服务器、拍摄装置的选择方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019234102A JP7409074B2 (ja) | 2019-12-25 | 2019-12-25 | 作業支援サーバ、撮像装置の選択方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021103840A true JP2021103840A (ja) | 2021-07-15 |
JP7409074B2 JP7409074B2 (ja) | 2024-01-09 |
Family
ID=76575844
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019234102A Active JP7409074B2 (ja) | 2019-12-25 | 2019-12-25 | 作業支援サーバ、撮像装置の選択方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20220412049A1 (ja) |
EP (1) | EP4050164A4 (ja) |
JP (1) | JP7409074B2 (ja) |
CN (1) | CN114868382A (ja) |
WO (1) | WO2021131161A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11860641B2 (en) * | 2021-01-28 | 2024-01-02 | Caterpillar Inc. | Visual overlays for providing perception of depth |
US11885102B2 (en) * | 2021-12-20 | 2024-01-30 | Caterpillar Inc. | Visual overlays for indicating stopping distances of remote controlled machines |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1028265A (ja) * | 1996-07-11 | 1998-01-27 | Hitachi Constr Mach Co Ltd | 遠隔操縦作業機械の作業現場モニタ装置 |
JP2007074217A (ja) * | 2005-09-06 | 2007-03-22 | Kansai Electric Power Co Inc:The | 撮影システムおよび撮影部を選択させるためのプログラム |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3809309B2 (ja) * | 1999-09-27 | 2006-08-16 | キヤノン株式会社 | カメラ制御システム及びカメラ制御方法及び記憶媒体 |
EP1872345B1 (en) * | 2005-03-25 | 2011-03-02 | Sensormatic Electronics, LLC | Intelligent camera selection and object tracking |
US9043483B2 (en) * | 2008-03-17 | 2015-05-26 | International Business Machines Corporation | View selection in a vehicle-to-vehicle network |
IL198107A0 (en) * | 2009-04-07 | 2010-03-28 | Amos Group Ltd | A system and a method for managing events |
EP2511677B1 (en) * | 2011-04-12 | 2020-08-19 | Tamtron Oy | Monitoring system for a material transfer vehicle |
JP5597596B2 (ja) * | 2011-06-07 | 2014-10-01 | 株式会社小松製作所 | 作業車両の周辺監視装置 |
US20180120098A1 (en) * | 2015-04-24 | 2018-05-03 | Hitachi, Ltd. | Volume Estimation Apparatus, Working Machine Including the Same, and Volume Estimation System |
JP6567940B2 (ja) * | 2015-10-05 | 2019-08-28 | 株式会社小松製作所 | 施工管理システム |
CN108370432A (zh) | 2015-12-08 | 2018-08-03 | 住友重机械工业株式会社 | 挖土机的通信系统、多旋翼飞行器及挖土机 |
US10634492B2 (en) * | 2016-08-31 | 2020-04-28 | Deere & Company | Methods and apparatus to track a blade |
EP3385458B1 (en) * | 2017-02-09 | 2023-03-29 | Komatsu Ltd. | Work vehicle and display device |
CN110520890B (zh) | 2017-07-14 | 2023-12-22 | 株式会社小松制作所 | 工作信息发送装置、施工管理系统、工作信息发送方法及计算机可读记录介质 |
JP7023492B2 (ja) | 2017-12-02 | 2022-02-22 | 学校法人早稲田大学 | 移動体の追従画像提示システム |
JP7026505B2 (ja) | 2017-12-27 | 2022-02-28 | 株式会社小松製作所 | 作業現場の管理システム及び作業現場の管理方法 |
JP7150447B2 (ja) | 2018-02-28 | 2022-10-11 | 株式会社小松製作所 | 情報提示装置および情報提示方法 |
JP6481121B1 (ja) | 2018-05-02 | 2019-03-13 | 株式会社センシンロボティクス | 飛行体の制御に関する情報表示方法 |
JP7351478B2 (ja) * | 2019-07-26 | 2023-09-27 | 株式会社小松製作所 | 表示システム、遠隔操作システム、及び表示方法 |
-
2019
- 2019-12-25 JP JP2019234102A patent/JP7409074B2/ja active Active
-
2020
- 2020-08-28 WO PCT/JP2020/032599 patent/WO2021131161A1/ja unknown
- 2020-08-28 EP EP20905930.2A patent/EP4050164A4/en active Pending
- 2020-08-28 US US17/781,435 patent/US20220412049A1/en active Pending
- 2020-08-28 CN CN202080090412.2A patent/CN114868382A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1028265A (ja) * | 1996-07-11 | 1998-01-27 | Hitachi Constr Mach Co Ltd | 遠隔操縦作業機械の作業現場モニタ装置 |
JP2007074217A (ja) * | 2005-09-06 | 2007-03-22 | Kansai Electric Power Co Inc:The | 撮影システムおよび撮影部を選択させるためのプログラム |
Also Published As
Publication number | Publication date |
---|---|
US20220412049A1 (en) | 2022-12-29 |
EP4050164A1 (en) | 2022-08-31 |
WO2021131161A1 (ja) | 2021-07-01 |
JP7409074B2 (ja) | 2024-01-09 |
CN114868382A (zh) | 2022-08-05 |
EP4050164A4 (en) | 2023-01-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20140111648A1 (en) | Device For Monitoring Area Around Working Machine | |
JP7420733B2 (ja) | 表示制御システムおよび表示制御方法 | |
JP2016089388A (ja) | 作業支援画像生成装置、及びそれを備えた作業機械の遠隔操縦システム | |
WO2020095830A1 (ja) | 建設機械の遠隔操作装置 | |
JP6767241B2 (ja) | 端末装置、制御装置、データ統合装置、作業車両、撮像システム、および撮像方法 | |
WO2021131161A1 (ja) | 作業支援サーバ、撮像装置の選択方法 | |
WO2021124654A1 (ja) | 作業支援サーバ、作業支援方法および作業支援システム | |
WO2021176883A1 (ja) | 作業支援サーバ、作業支援方法 | |
WO2021153187A1 (ja) | 作業支援サーバおよび作業支援システム | |
JP2021079762A (ja) | 合成距離画像の作成方法、土砂採取モニター用画像の作成方法、及び、合成距離画像の作成装置 | |
JP7351478B2 (ja) | 表示システム、遠隔操作システム、及び表示方法 | |
JP2023040971A (ja) | 遠隔操作支援装置、遠隔操作支援システムおよび遠隔操作支援方法 | |
CN114730440A (zh) | 作业支援服务器、作业支援方法及作业支援系统 | |
JP7508815B2 (ja) | 作業支援サーバ、作業支援方法 | |
WO2023136070A1 (ja) | 遠隔操作支援システムおよび遠隔操作支援方法 | |
JP7490948B2 (ja) | 作業支援サーバおよび作業支援システム | |
EP4060129A1 (en) | Remote operation support system and remote operation support method | |
JP2021130973A (ja) | 情報提示システム | |
WO2017169598A1 (ja) | 端末装置、制御装置、データ統合装置、作業車両、撮像システム、および撮像方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220725 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230627 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230825 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231121 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231204 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7409074 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |