JP2023122359A - Remote operation system - Google Patents

Remote operation system Download PDF

Info

Publication number
JP2023122359A
JP2023122359A JP2022026026A JP2022026026A JP2023122359A JP 2023122359 A JP2023122359 A JP 2023122359A JP 2022026026 A JP2022026026 A JP 2022026026A JP 2022026026 A JP2022026026 A JP 2022026026A JP 2023122359 A JP2023122359 A JP 2023122359A
Authority
JP
Japan
Prior art keywords
work
remote control
image
revolving
revolving body
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022026026A
Other languages
Japanese (ja)
Inventor
正充 栗栖
Masamitsu Kurisu
大祐 近藤
Daisuke Kondo
誠弥 瀧本
Seiya Takimoto
陽二郎 大畠
Yojiro Ohata
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Komatsu Ltd
Osaka University NUC
Original Assignee
Komatsu Ltd
Osaka University NUC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Komatsu Ltd, Osaka University NUC filed Critical Komatsu Ltd
Priority to JP2022026026A priority Critical patent/JP2023122359A/en
Publication of JP2023122359A publication Critical patent/JP2023122359A/en
Pending legal-status Critical Current

Links

Images

Abstract

To provide a remote operation system configured to improve workability.SOLUTION: A hydraulic shovel 100 includes a turning body which turns around a pivot, and a camera 20. The camera 20 is mounted on the turning body to image an object existing in a work site. A remote operation system 200 includes: a remote operation apparatus 40 which receives an input from an operator regarding a turning direction of the turning body; a display device 50 for displaying an image; and a remote controller 60 for controlling the hydraulic shovel 100. The remote controller 60 displays, on the display device 50, a reversed image obtained by horizontally flipping the image captured by the camera 20, and outputs a control signal to turn the turning body in a direction opposite the turning direction input to the remote operation apparatus 40, to the hydraulic shovel 100.SELECTED DRAWING: Figure 4

Description

本開示は、作業機械を遠隔操作するための遠隔操作システムに関する。 The present disclosure relates to a remote control system for remotely controlling work machines.

特開2018-207244号公報(特許文献1)には、旋回軸を中心に旋回する旋回体および旋回体に支持される作業機を有する作業機械に搭載され、画像を撮影する撮像装置と、作業機械の外部に存在する表示装置と、作業機械の外部に存在し、作業機械と通信可能な制御装置と、を備え、制御装置は、画像を撮像装置から取得する画像データ取得部と、画像データ取得部で取得された画像を表示装置に表示させる表示制御部と、を有する、遠隔操作システムが開示されている。 Japanese Patent Laying-Open No. 2018-207244 (Patent Document 1) describes an imaging device that is mounted on a work machine having a revolving body that revolves around a revolving shaft and a work machine that is supported by the revolving body, and that captures an image; a display device that exists outside the machine; and a control device that exists outside the work machine and can communicate with the work machine. and a display control unit that causes a display device to display an image acquired by the acquisition unit.

特開2018-207244号公報JP 2018-207244 A

油圧ショベルによる掘削積込作業の場合、掘削した土砂をダンプトラックなどの目標位置へと運搬するために、旋回体を旋回させる。このときの旋回方向は現場の状況により異なる。作業現場を頻繁に切替え可能な状況で油圧ショベルなどの作業機械を遠隔操作する場合、掘削後の旋回体の旋回方向が異なると、遠隔操作を実行するオペレータが混乱し、作業性が低下する可能性がある。 In the case of excavation and loading work using a hydraulic excavator, the revolving body is revolved to transport the excavated earth and sand to a target position such as a dump truck. The turning direction at this time differs depending on the situation at the site. When remotely operating a work machine such as a hydraulic excavator in a situation where the work site can be changed frequently, if the swing direction of the swing structure after excavation is different, the operator who performs the remote operation may get confused and work efficiency may decrease. have a nature.

本開示では、作業性を向上できる遠隔操作システムが提案される。 The present disclosure proposes a remote control system capable of improving workability.

本開示に従うと、作業機械を遠隔操作するための遠隔操作システムが提案される。作業機械は、旋回軸を中心に旋回する旋回体と、撮像装置とを有している。撮像装置は、旋回体に搭載されており、作業現場に存在する撮像対象を撮像する。遠隔操作システムは、旋回体の旋回方向についてのオペレータの入力を受け付ける操作装置と、画像を表示する表示装置と、作業機械を制御するコントローラとを備えている。コントローラは、撮像装置によって撮像された撮像画像を左右反転した反転画像を表示装置に表示し、操作装置に入力された旋回方向とは逆方向に旋回体を旋回させる制御信号を作業機械に出力する。 According to the present disclosure, a remote control system is proposed for remotely controlling a work machine. The work machine has a revolving body that revolves around a revolving shaft and an imaging device. The image pickup device is mounted on the revolving body and picks up an image of an image pickup target present at the work site. The remote control system includes an operation device that receives an operator's input regarding the turning direction of the turning body, a display device that displays an image, and a controller that controls the working machine. The controller displays on the display device a reversed image obtained by horizontally reversing the captured image captured by the imaging device, and outputs to the work machine a control signal for rotating the rotating body in a direction opposite to the rotating direction input to the operating device. .

本開示に係る遠隔操作システムによれば、作業性を向上することができる。 According to the remote control system according to the present disclosure, workability can be improved.

油圧ショベルの外観図である。1 is an external view of a hydraulic excavator; FIG. 油圧ショベルの遠隔操作システムの一例を模式的に示す図である。1 is a diagram schematically showing an example of a remote control system for a hydraulic excavator; FIG. 遠隔操作装置の一例を模式的に示す図である。It is a figure which shows an example of a remote control typically. 遠隔操作システムの構成例を示す機能ブロック図である。It is a functional block diagram which shows the structural example of a remote control system. 油圧ショベルの遠隔操作方法を示すフローチャートである。4 is a flow chart showing a remote control method for a hydraulic excavator; 油圧ショベルと運搬機械との位置関係の一例を示す模式図である。FIG. 3 is a schematic diagram showing an example of a positional relationship between a hydraulic excavator and a transport machine; 撮像画像の一例を示す図である。It is a figure which shows an example of a captured image. 撮像画像を左右反転した反転画像の一例を示す図である。It is a figure which shows an example of the reverse image which reversed the captured image right and left. 旋回体の旋回方向を反転させた油圧ショベルと運搬機械との仮想的な位置関係の一例を示す模式図である。FIG. 4 is a schematic diagram showing an example of a virtual positional relationship between a hydraulic excavator and a transport machine in which the revolving direction of the revolving structure is reversed; 油圧ショベルの遠隔操作方法の他の例を示すフローチャートである。4 is a flow chart showing another example of a remote control method for a hydraulic excavator;

以下、実施形態について図に基づいて説明する。以下の説明では、同一部品には、同一の符号を付している。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。 Embodiments will be described below with reference to the drawings. In the following description, the same reference numerals are given to the same parts. Their names and functions are also the same. Therefore, detailed description thereof will not be repeated.

図1は、実施形態に基づく遠隔操作システムによって遠隔操作される作業機械の一例としての、油圧ショベル100の外観図である。図1に示されるように、作業機械として、本例においては、主に油圧ショベル100を例に挙げて説明する。 FIG. 1 is an external view of a hydraulic excavator 100 as an example of a work machine remotely controlled by a remote control system based on an embodiment. As shown in FIG. 1, in this example, a hydraulic excavator 100 will be mainly described as a working machine.

油圧ショベル100は、作業現場に存在し、作業現場で作業する。油圧ショベル100は、土砂または鉱石などの対象物の掘削作業を実行し、掘削された対象物をダンプトラックなどの運搬機械に積み込む積込作業を実行する。実施形態の油圧ショベル100は、遠隔操作可能な仕様の作業機械である。油圧ショベル100の操縦は、遠隔操作システムを用いた遠隔地からの無線信号により行う。油圧ショベル100は、搭乗したオペレータによる操縦機能を搭載していない。 The hydraulic excavator 100 is present at the work site and works at the work site. The hydraulic excavator 100 excavates an object such as earth and sand or ore, and performs a loading operation of loading the excavated object onto a transport machine such as a dump truck. The hydraulic excavator 100 of the embodiment is a work machine with specifications that can be remotely controlled. Operation of the hydraulic excavator 100 is performed by radio signals from a remote location using a remote control system. The hydraulic excavator 100 is not equipped with an operation function by an operator on board.

油圧ショベル100は、本体1を備えている。本体1は、旋回体3と、走行体5とを有している。 A hydraulic excavator 100 includes a main body 1 . The main body 1 has a revolving body 3 and a traveling body 5 .

走行体5は、一対の履帯5Crと、走行モータ5Mとを有している。油圧ショベル100は、履帯5Crの回転により走行可能である。走行モータ5Mは、走行体5の駆動源として設けられている。走行モータ5Mは、油圧により作動する油圧モータである。なお、走行体5が車輪(タイヤ)を有していてもよい。 The traveling body 5 has a pair of crawler belts 5Cr and a traveling motor 5M. The hydraulic excavator 100 can travel by rotating the crawler belts 5Cr. The traveling motor 5M is provided as a drive source for the traveling body 5. As shown in FIG. The traveling motor 5M is a hydraulic motor operated by hydraulic pressure. Note that the traveling body 5 may have wheels (tires).

旋回体3は、走行体5の上に配置され、かつ走行体5により支持されている。旋回体3は、旋回軸RXを中心として走行体5に対して旋回可能に、走行体5に搭載されている。旋回体3は、車室4を有している。車室4の前面は、透明な窓板4Wで覆われている。窓板4Wは、強化ガラスなどで構成されている。車室4内には、空間4Sが形成されている。 The revolving body 3 is arranged on the running body 5 and supported by the running body 5 . The revolving body 3 is mounted on the running body 5 so as to be able to revolve with respect to the running body 5 about the revolving axis RX. The revolving body 3 has a compartment 4 . The front surface of the compartment 4 is covered with a transparent window plate 4W. The window plate 4W is made of tempered glass or the like. A space 4S is formed in the vehicle interior 4 .

旋回体3は、エンジンが収容されるエンジンルーム9と、旋回体3の後部に設けられるカウンタウェイトとを有している。エンジンルーム9には、後述するエンジン31および油圧ポンプ32などが配置されている。 The revolving body 3 has an engine room 9 in which an engine is housed, and a counterweight provided at the rear part of the revolving body 3 . In the engine room 9, an engine 31, a hydraulic pump 32, etc., which will be described later, are arranged.

旋回体3において、エンジンルーム9の前方に手すり19が設けられている。手すり19には、アンテナ21が設けられている。アンテナ21は、たとえばGNSS(Global Navigation Satellite Systems:全地球航法衛星システム)用のアンテナである。アンテナ21は、車幅方向に互いに離れるように旋回体3に設けられた第1アンテナ21Aおよび第2アンテナ21Bを有している。 A handrail 19 is provided in front of the engine room 9 in the revolving body 3 . An antenna 21 is provided on the handrail 19 . Antenna 21 is, for example, an antenna for GNSS (Global Navigation Satellite Systems). The antenna 21 has a first antenna 21A and a second antenna 21B provided on the revolving body 3 so as to be separated from each other in the vehicle width direction.

油圧ショベル100は、油圧により作動する作業機2を備えている。作業機2は、旋回体3に支持されている。作業機2は、ブーム6と、アーム7と、バケット8とを有している。ブーム6の基端部は、ブームフートピン13を介して旋回体3に回転可能に連結されている。アーム7の基端部は、ブーム先端ピン14を介してブーム6の先端部に回転可能に連結されている。バケット8は、アーム先端ピン15を介してアーム7の先端部に回転可能に連結されている。アーム7およびバケット8のそれぞれは、ブーム6の先端側で移動可能な可動部材である。 The hydraulic excavator 100 includes a working machine 2 that operates hydraulically. The working machine 2 is supported by the revolving body 3 . The work implement 2 has a boom 6 , an arm 7 and a bucket 8 . A base end of the boom 6 is rotatably connected to the revolving body 3 via a boom foot pin 13 . A base end of the arm 7 is rotatably connected to a tip of the boom 6 via a boom tip pin 14 . Bucket 8 is rotatably connected to the tip of arm 7 via arm tip pin 15 . Each of the arm 7 and the bucket 8 is a movable member that can move on the tip side of the boom 6 .

バケット8は、複数の刃を有している。バケット8は、刃を有していなくてもよい。バケット8の先端部は、ストレート形状の鋼板で形成されていてもよい。バケット8は、作業機2の先端に取付可能なアタッチメントの一例である。作業の種類に応じて、アタッチメントが、ブレーカ、グラップル、またはリフティングマグネットなどに付け替えられる。 Bucket 8 has a plurality of blades. Bucket 8 may not have blades. The tip of the bucket 8 may be formed of a straight steel plate. Bucket 8 is an example of an attachment that can be attached to the tip of work implement 2 . Depending on the type of work, the attachment can be replaced with a breaker, grapple, or lifting magnet.

なお本実施形態においては、作業機2を基準として、油圧ショベル100の各部の位置関係について説明する。 In this embodiment, the positional relationship of each part of the hydraulic excavator 100 will be described with the work machine 2 as a reference.

作業機2のブーム6は、旋回体3に対して、ブームフートピン13を中心に回転する。旋回体3に対して回転するブーム6の特定の部分、たとえばブーム6の先端部が移動する軌跡は円弧状であり、その円弧を含む平面が特定される。油圧ショベル100を平面視した場合に、当該平面は直線として表される。この直線の延びる方向が、油圧ショベル100の本体1の前後方向、または旋回体3の前後方向であり、以下では単に前後方向ともいう。油圧ショベル100の本体1の左右方向(車幅方向)、または旋回体3の左右方向とは、平面視において前後方向と直交する方向であり、以下では単に左右方向ともいう。車両本体の上下方向、または旋回体3の上下方向とは、前後方向および左右方向によって定められる平面に直交する方向であり、以下では単に上下方向ともいう。 The boom 6 of the work machine 2 rotates around the boom foot pin 13 with respect to the revolving body 3 . A specific portion of the boom 6 that rotates relative to the revolving structure 3, for example, the tip of the boom 6, travels along an arc, and a plane that includes the arc is specified. When the hydraulic excavator 100 is viewed from above, the plane is represented as a straight line. The direction in which this straight line extends is the front-rear direction of the main body 1 of the hydraulic excavator 100 or the front-rear direction of the revolving body 3, and is hereinafter simply referred to as the front-rear direction. The left-right direction (vehicle width direction) of the main body 1 of the hydraulic excavator 100 or the left-right direction of the revolving body 3 is a direction orthogonal to the front-rear direction in a plan view, and is hereinafter simply referred to as the left-right direction. The vertical direction of the vehicle main body or the vertical direction of the revolving body 3 is a direction orthogonal to a plane defined by the front-rear direction and the left-right direction, and is hereinafter simply referred to as the vertical direction.

前後方向において、油圧ショベル100の本体1から作業機2が突き出している側が前方向であり、前方向と反対方向が後方向である。前方向を視て左右方向の右側、左側がそれぞれ右方向、左方向である。上下方向において地面のある側が下側、空のある側が上側である。 In the front-rear direction, the side where the work implement 2 protrudes from the main body 1 of the hydraulic excavator 100 is the front direction, and the direction opposite to the front direction is the rear direction. The right side and the left side in the horizontal direction are the right direction and the left direction, respectively, when viewed in the forward direction. In the vertical direction, the side with the ground is the lower side, and the side with the sky is the upper side.

作業機2は、ブームシリンダ10と、アームシリンダ11と、バケットシリンダ12とを有している。ブームシリンダ10は、ブーム6を駆動する。アームシリンダ11は、アーム7を駆動する。バケットシリンダ12は、バケット8を駆動する。ブームシリンダ10、アームシリンダ11、およびバケットシリンダ12のそれぞれは、作動油によって駆動される油圧シリンダである。 The work machine 2 has a boom cylinder 10 , an arm cylinder 11 and a bucket cylinder 12 . A boom cylinder 10 drives the boom 6 . Arm cylinder 11 drives arm 7 . Bucket cylinder 12 drives bucket 8 . Each of the boom cylinder 10, the arm cylinder 11, and the bucket cylinder 12 is a hydraulic cylinder driven by hydraulic fluid.

油圧ショベル100は、カメラ20を備えている。カメラ20は、油圧ショベル100の周辺の作業現場に存在する撮像対象を撮像して、撮像対象の画像を取得するための撮像装置である。カメラ20は、旋回体3に搭載されている。 The hydraulic excavator 100 has a camera 20 . The camera 20 is an imaging device for capturing an image of an imaging target existing in a work site around the hydraulic excavator 100 and obtaining an image of the imaging target. A camera 20 is mounted on the revolving body 3 .

カメラ20によって撮像される撮像対象は、作業現場において施工される施工対象を含む。施工対象は、油圧ショベル100の作業機2によって掘削される掘削対象を含む。掘削対象は、掘削前の掘削対象(すなわち、現況地形)、掘削中の掘削対象、および掘削後の掘削対象を含む。カメラ20の撮像対象は、油圧ショベル100の周辺の障害物を含む。 The object to be imaged by the camera 20 includes a construction object to be constructed at a work site. The construction target includes an excavation target to be excavated by the working machine 2 of the hydraulic excavator 100 . The excavation target includes an excavation target before excavation (ie, the current terrain), an excavation target during excavation, and an excavation target after excavation. Objects captured by the camera 20 include obstacles around the hydraulic excavator 100 .

カメラ20の撮像対象は、油圧ショベル100の少なくとも一部を含む。カメラ20の撮像対象は、作業機2の少なくとも一部を含む。カメラ20の撮像対象は、油圧ショベル100の周辺に配置される他の作業機械を含む。他の作業機械は、油圧ショベル100の掘削対象を運搬する運搬機械を含む。他の作業機械は、ダンプトラックを含む。 An imaging target of the camera 20 includes at least part of the hydraulic excavator 100 . An imaging target of camera 20 includes at least part of work machine 2 . The imaging target of the camera 20 includes other working machines arranged around the hydraulic excavator 100 . Other work machines include transport machines that transport excavation targets for the excavator 100 . Other work machines include dump trucks.

カメラ20は、光学系と、光学系を通過した光を受光するイメージセンサとを有している。イメージセンサは、CCD(Couple Charged Device)イメージセンサまたはCMOS(Complementary Metal Oxide Semiconductor)イメージセンサを含んでいる。 The camera 20 has an optical system and an image sensor that receives light that has passed through the optical system. The image sensor includes a CCD (Couple Charged Device) image sensor or a CMOS (Complementary Metal Oxide Semiconductor) image sensor.

カメラ20は、右前方カメラ20Aと、右側方カメラ20Bと、後方カメラ20Cと、左側方カメラ20Dと、前方カメラ20Eを含んでいる。 The cameras 20 include a right front camera 20A, a right side camera 20B, a rear camera 20C, a left side camera 20D, and a front camera 20E.

右前方カメラ20Aと右側方カメラ20Bとは、旋回体3の上面の右側縁部に配置されている。右前方カメラ20Aは、右側方カメラ20Bよりも前方に配置されている。右前方カメラ20Aと右側方カメラ20Bとは、前後方向における旋回体3の中央部付近に、前後に並んで配置されている。右前方カメラ20Aは、旋回体3の右前方を撮像する。右前方カメラ20Aの光軸は、右前方カメラ20Aから右斜め前方向に延びている。右側方カメラ20Bは、旋回体3の右後方を撮像する。右側方カメラ20Bの光軸は、右側方カメラ20Bから右斜め後ろ方向に延びている。 The right front camera 20A and the right side camera 20B are arranged on the right edge of the upper surface of the revolving body 3 . The right front camera 20A is arranged ahead of the right side camera 20B. The right front camera 20A and the right side camera 20B are arranged side by side in the front-rear direction near the central portion of the revolving body 3 in the front-rear direction. The right front camera 20A captures an image of the right front of the revolving body 3 . The optical axis of the right front camera 20A extends obliquely to the right from the right front camera 20A. The right side camera 20B captures an image of the right rear of the revolving body 3 . The optical axis of the right side camera 20B extends obliquely to the right and rearward from the right side camera 20B.

後方カメラ20Cは、前後方向において旋回体3の後端部に配置されており、左右方向において旋回体3の中央部に配置されている。旋回体3の後端部には、採掘時などにおいて車体のバランスをとるためのカウンタウェイトが設置されている。後方カメラ20Cは、カウンタウェイトの上面に配置されている。後方カメラ20Cは、旋回体3の後方を撮像する。後方カメラ20Cの光軸は、後方カメラ20Cから後方向に延びている。左側方カメラ20Dは、旋回体3の上面の左側縁部に配置されている。左側方カメラ20Dは、前後方向における旋回体3の中央部付近に配置されている。左側方カメラ20Dは、旋回体3の左方を撮像する。左側方カメラ20Dの光軸は、左側方カメラ20Dから左方向に延びている。 The rear camera 20C is arranged at the rear end portion of the revolving body 3 in the front-rear direction, and is arranged in the central portion of the revolving body 3 in the left-right direction. A counterweight is installed at the rear end of the revolving body 3 to balance the vehicle during mining or the like. The rear camera 20C is arranged on the upper surface of the counterweight. The rear camera 20</b>C takes an image of the rear of the revolving body 3 . The optical axis of the rear camera 20C extends rearward from the rear camera 20C. The left camera 20</b>D is arranged on the left edge of the upper surface of the revolving body 3 . The left side camera 20D is arranged near the central portion of the revolving body 3 in the front-rear direction. The left side camera 20</b>D images the left side of the revolving body 3 . The optical axis of the left side camera 20D extends leftward from the left side camera 20D.

前方カメラ20Eは、旋回体3の前部に配置されている。前方カメラ20Eは、作業機2の左側に配置されている。前方カメラ20Eは、車室4の内部に配置されている。前方カメラ20Eは、車室4に収容されている。前方カメラ20Eは、車室4内の空間4Sに配置されている。前方カメラ20Eは、窓板4Wを通して旋回体3の前方を撮像する。前方カメラ20Eの光軸は、前方カメラ20Eから前方向に延びている。前方カメラ20Eによって撮像される撮像画像は、旋回体3の前方の地形と、作業機2の少なくとも一部とを含み得る。 The front camera 20E is arranged in front of the revolving body 3 . Front camera 20</b>E is arranged on the left side of work machine 2 . The front camera 20E is arranged inside the vehicle interior 4 . The front camera 20E is accommodated in the vehicle interior 4. As shown in FIG. The front camera 20E is arranged in the space 4S inside the vehicle interior 4 . The front camera 20E images the front of the revolving body 3 through the window plate 4W. The optical axis of front camera 20E extends forward from front camera 20E. A captured image captured by the front camera 20</b>E may include the topography in front of the revolving body 3 and at least part of the work implement 2 .

油圧ショベル100は、通信装置22と、車体コントローラ26とを備えている。通信装置22は、通信アンテナを含んでいる。通信アンテナは、たとえばエンジンルーム9の上方に配置されている。通信装置22は、遠隔地より送信された制御信号を受信する。車体コントローラ26は、受信した制御信号に基づいて、エンジン31、作業機2、および旋回体3などを制御する。通信装置22はまた、油圧ショベル100の情報を含む信号を、遠隔地に送信する。通信装置22は、カメラ20が撮像した撮像対象の撮像画像、油圧ショベル100の位置情報および姿勢情報などを、遠隔地に送信する。 The hydraulic excavator 100 includes a communication device 22 and a vehicle body controller 26 . Communication device 22 includes a communication antenna. The communication antenna is arranged above the engine room 9, for example. The communication device 22 receives control signals transmitted from a remote location. The vehicle body controller 26 controls the engine 31, the work implement 2, the revolving body 3, etc. based on the received control signal. The communication device 22 also transmits a signal containing information on the excavator 100 to a remote location. The communication device 22 transmits the captured image of the imaging target captured by the camera 20, the position information and posture information of the hydraulic excavator 100, and the like to a remote location.

図2は、油圧ショベル100の遠隔操作システム200の一例を模式的に示す図である。遠隔操作システム200は、油圧ショベル100の外部に存在する。油圧ショベル100は、遠隔操作システム200によって遠隔操作される。遠隔操作システム200は、たとえば、遠隔操作施設に設けられる。遠隔操作施設は、油圧ショベル100の存在する作業現場に設置されていてもよく、作業現場から離れた遠隔地に設置されていてもよい。 FIG. 2 is a diagram schematically showing an example of a remote control system 200 for the hydraulic excavator 100. As shown in FIG. The remote control system 200 exists outside the hydraulic excavator 100 . The hydraulic excavator 100 is remotely controlled by a remote control system 200 . Remote control system 200 is provided, for example, at a remote control facility. The remote control facility may be installed at the work site where the hydraulic excavator 100 exists, or may be installed at a remote location away from the work site.

遠隔操作システム200は、遠隔操作装置40と、表示装置50と、遠隔コントローラ60と、通信装置72とを主に備えている。遠隔操作装置40、表示装置50、遠隔コントローラ60および通信装置72のそれぞれは、油圧ショベル100とは別体で設けられている。 The remote control system 200 mainly includes a remote control device 40 , a display device 50 , a remote controller 60 and a communication device 72 . Each of the remote operation device 40 , the display device 50 , the remote controller 60 and the communication device 72 is provided separately from the hydraulic excavator 100 .

油圧ショベル100は、ネットワーク400を介して、遠隔操作システム200に接続されている。ネットワーク400は、インターネット、ローカルエリアネットワーク(LAN)、携帯電話通信網、および衛星通信網の少なくとも一つを含んでいる。ネットワーク400は、通信されるデータを中継する中継局を含んでもよい。 A hydraulic excavator 100 is connected to a remote control system 200 via a network 400 . Network 400 includes at least one of the Internet, a local area network (LAN), a cellular network, and a satellite communication network. Network 400 may include relay stations that relay data to be communicated.

油圧ショベル100の通信装置22は、ネットワーク400を介して、遠隔操作システム200に、油圧ショベル100の情報を含む信号を送信する。遠隔操作システム200は、通信装置72で受信した、カメラ20が撮像した撮像対象の撮像画像を、遠隔コントローラ60で処理して、表示装置50に表示する。 The communication device 22 of the hydraulic excavator 100 transmits a signal including information on the hydraulic excavator 100 to the remote control system 200 via the network 400 . The remote control system 200 processes the captured image of the imaging target captured by the camera 20 and received by the communication device 72 by the remote controller 60 and displays it on the display device 50 .

図3は、遠隔操作装置40の一例を模式的に示す図である。図3に示される遠隔操作装置40と表示装置50とは、遠隔操作施設に設けられている遠隔操作室に配置されている。遠隔操作装置40は、操縦シート45に着座したオペレータによって操作される。オペレータは、表示装置50の表示画面と正対するように、操縦シート45に着座する。オペレータは、表示装置50を介して作業現場の状況を視認する。オペレータは、表示装置50の表示画面を見ながら、遠隔操作装置40を操作する。 FIG. 3 is a diagram schematically showing an example of the remote control device 40. As shown in FIG. The remote control device 40 and the display device 50 shown in FIG. 3 are arranged in a remote control room provided in a remote control facility. The remote control device 40 is operated by an operator seated on the control seat 45 . The operator sits on the control seat 45 facing the display screen of the display device 50 . The operator visually recognizes the situation of the work site through the display device 50 . The operator operates the remote controller 40 while looking at the display screen of the display device 50 .

遠隔操作装置40は、作業機2および旋回体3の動作のために操作される左作業レバー41および右作業レバー42と、走行体5の動作のために操作される左走行レバー43および右走行レバー44とを含んでいる。 The remote control device 40 includes a left working lever 41 and a right working lever 42 operated to operate the working machine 2 and the revolving body 3, and a left traveling lever 43 and a right traveling lever 43 operated to operate the traveling body 5. and a lever 44 .

左作業レバー41は、操縦シート45の左方に配置されている。操縦シート45に着座したオペレータは、左手で左作業レバー41を把持して、左作業レバー41を操作する。左作業レバー41により、アーム7および旋回体3が操作される。左作業レバー41は、旋回体3の旋回方向と、アーム7の上下動とについてのオペレータの入力を受け付ける。左作業レバー41の前後方向の操作は、旋回体3の旋回に対応し、前後方向の操作に応じて旋回体3の右旋回動作および左旋回動作が実行される。左作業レバー41の左右方向の操作は、アーム7の操作に対応し、左右方向の操作に応じてアーム7の上方向への動作および下方向への動作が実行される。 The left working lever 41 is arranged on the left side of the control seat 45 . An operator seated on the control seat 45 holds the left working lever 41 with his left hand and operates the left working lever 41 . The left working lever 41 operates the arm 7 and the revolving body 3 . The left working lever 41 receives an operator's input regarding the revolving direction of the revolving body 3 and the vertical movement of the arm 7 . Operation of the left working lever 41 in the front-rear direction corresponds to turning of the revolving body 3, and the revolving body 3 is rotated to the right and left in response to the operation in the front-rear direction. The lateral operation of the left working lever 41 corresponds to the operation of the arm 7, and the arm 7 is moved upward and downward according to the lateral operation.

右作業レバー42は、操縦シート45の右方に配置されている。操縦シート45に着座したオペレータは、右手で右作業レバー42を把持して、右作業レバー42を操作する。右作業レバー42により、ブーム6およびバケット8が操作される。右作業レバー42は、ブーム6の上下動およびバケット8の上下動についてのオペレータの入力を受け付ける。右作業レバー42の前後方向の操作は、ブーム6の操作に対応し、前後方向の操作に応じてブーム6が上昇する動作および下降する動作が実行される。右作業レバー42の左右方向の操作は、バケット8の操作に対応し、左右方向の操作に応じてバケット8の下方向への動作および上方向への動作が実行される。 The right working lever 42 is arranged on the right side of the control seat 45 . An operator seated on the control seat 45 holds the right working lever 42 with his right hand and operates the right working lever 42 . The boom 6 and the bucket 8 are operated by the right working lever 42 . The right working lever 42 receives operator input regarding vertical movement of the boom 6 and vertical movement of the bucket 8 . Operation of the right working lever 42 in the front-rear direction corresponds to operation of the boom 6, and the boom 6 is raised and lowered according to the operation in the front-rear direction. The operation of the right working lever 42 in the left-right direction corresponds to the operation of the bucket 8, and the bucket 8 is moved downward and upward in accordance with the operation in the left-right direction.

操縦シート45の左方にはまた、左コンソール48が配置されている。操縦シート45の右方にはまた、右コンソール49が配置されている。 A left console 48 is also arranged to the left of the operator seat 45 . A right console 49 is also arranged to the right of the operator seat 45 .

左走行レバー43および右走行レバー44は、操縦シート45の前方に配置されている。左走行レバー43および右走行レバー44は、左右に並んで、左走行レバー43が左側に、右走行レバー44が右側に配置されている。左走行レバー43および右走行レバー44は、走行体5の走行についてのオペレータの入力を受け付ける。左走行レバー43の前後方向の操作に応じて、走行体5の左側の履帯5Crの前進動作および後進動作が実行される。右走行レバー44の前後方向の操作に応じて、走行体5の右側の履帯5Crの前進動作および後進動作が実行される。 The left travel lever 43 and the right travel lever 44 are arranged in front of the control seat 45 . The left travel lever 43 and the right travel lever 44 are arranged side by side, with the left travel lever 43 on the left and the right travel lever 44 on the right. The left travel lever 43 and the right travel lever 44 receive an operator's input regarding travel of the travel body 5 . In accordance with the operation of the left traveling lever 43 in the longitudinal direction, the crawler belt 5Cr on the left side of the traveling body 5 is moved forward and backward. In accordance with the operation of the right traveling lever 44 in the longitudinal direction, the crawler belt 5Cr on the right side of the traveling body 5 is moved forward and backward.

表示装置50は、操縦シート45の前方に配置されている。表示装置50は、左走行レバー43および右走行レバー44よりも操縦シート45から離れて配置されている。表示装置50は、液晶ディスプレイまたは有機ELディスプレイのような、フラットパネルディスプレイを含んでいる。表示装置50は、画像を表示する。表示装置50は、カメラ20によって撮像されネットワーク400を介して取得した撮像画像を表示可能である。表示装置50はまた、撮像画像を遠隔コントローラ60で処理した後の画像を表示可能である。具体的には表示装置50は、カメラ20によって撮像された撮像画像を左右反転した、反転画像を表示可能である。 The display device 50 is arranged in front of the control seat 45 . The display device 50 is arranged further away from the control seat 45 than the left travel lever 43 and the right travel lever 44 . Display device 50 includes a flat panel display such as a liquid crystal display or an organic EL display. The display device 50 displays images. The display device 50 can display a captured image captured by the camera 20 and acquired via the network 400 . The display device 50 can also display an image after the captured image has been processed by the remote controller 60 . Specifically, the display device 50 can display a reversed image obtained by horizontally reversing the captured image captured by the camera 20 .

図3では、1つの表示画面が表示装置50を構成する例が示されているが、表示装置50は複数の表示画面を含んでもよい。表示装置50は、中央の表示画面の上下左右に各1つずつの表示画面が隣り合って並べられた計5つの表示画面を含んでもよく、縦3段横3列に互いに隣り合って並べられた計9つの表示画面を含んでもよく、他の任意の態様で配列された任意の数の表示画面を含んでもよい。表示装置50は、操縦シート45の前方に配置された表示画面に加えて、操縦シート45の左方、操縦シートの右方、および/または操縦シート45の上方に配置された表示画面を含んでもよい。 Although FIG. 3 shows an example in which one display screen configures the display device 50, the display device 50 may include a plurality of display screens. The display device 50 may include a total of five display screens arranged adjacent to each other above, below, to the left, and to the right of the central display screen. It may include a total of nine display screens, or any number of display screens arranged in any other manner. The display device 50 may include a display screen arranged in front of the operator's seat 45 and a display screen arranged to the left of the operator's seat 45, to the right of the operator's seat, and/or above the operator's seat 45. good.

図4は、遠隔操作システム200の構成例を示す機能ブロック図である。遠隔操作システム200は、ネットワーク400を介して、油圧ショベル100に接続されており、また、運搬機械300に接続されている。 FIG. 4 is a functional block diagram showing a configuration example of the remote control system 200. As shown in FIG. The remote control system 200 is connected to the excavator 100 and the transport machine 300 via the network 400 .

図1に示されるカメラ20で撮像された撮像画像は、車体コントローラ26に入力される。アンテナ21は、受信した電波(GNSS電波)に応じた信号を、グローバル座標演算部23に出力する。グローバル座標演算部23は、アンテナ21より入力された信号に基づいて、グローバル座標系におけるアンテナ21の現在の位置を検出する。グローバル座標系は、緯度、経度および高度で示される、地球を基準とする3次元座標系である。アンテナ21の緯度、経度および高度の座標データで、グローバル座標系におけるアンテナ21の絶対位置が規定される。グローバル座標系におけるアンテナ21の現在の位置は、車体コントローラ26に入力される。 A captured image captured by the camera 20 shown in FIG. 1 is input to the vehicle body controller 26 . The antenna 21 outputs a signal corresponding to the received radio wave (GNSS radio wave) to the global coordinate calculation unit 23 . Global coordinate calculation unit 23 detects the current position of antenna 21 in the global coordinate system based on the signal input from antenna 21 . The global coordinate system is a three-dimensional coordinate system referenced to the earth, indicated by latitude, longitude and altitude. The latitude, longitude and altitude coordinate data of the antenna 21 define the absolute position of the antenna 21 in the global coordinate system. The current position of the antenna 21 in the global coordinate system is input to the vehicle body controller 26 .

車体コントローラ26に入力された撮像画像およびアンテナ21の位置情報は、ネットワーク400を介して、遠隔操作システム200に送信される。 The captured image and the position information of the antenna 21 input to the vehicle body controller 26 are transmitted to the remote control system 200 via the network 400 .

油圧ショベル100は、油圧ポンプ32がエンジン31によって駆動され、油圧ポンプ32から吐出された作動油が方向制御弁33を介して各種の油圧アクチュエータ34に供給されるように、構成されている。油圧アクチュエータ34への油圧の供給および排出が制御されることにより、作業機2の動作、旋回体3の旋回、および走行体5の走行動作が制御される。油圧アクチュエータ34は、図1に示されるブームシリンダ10、アームシリンダ11、バケットシリンダ12および走行モータ5Mと、旋回モータとを含んでいる。 The hydraulic excavator 100 is configured such that a hydraulic pump 32 is driven by an engine 31 and hydraulic oil discharged from the hydraulic pump 32 is supplied to various hydraulic actuators 34 via a direction control valve 33 . By controlling the supply and discharge of hydraulic pressure to the hydraulic actuator 34, the operation of the work implement 2, the swinging of the revolving body 3, and the traveling motion of the traveling body 5 are controlled. Hydraulic actuator 34 includes boom cylinder 10, arm cylinder 11, bucket cylinder 12, travel motor 5M, and swing motor shown in FIG.

エンジン31は、たとえばディーゼルエンジンである。車体コントローラ26からの制御信号の出力に従ってエンジン31への燃料の噴射量が調整されることにより、エンジン31の出力が制御される。エンジン31は、油圧ポンプ32に連結するための駆動軸を有している。 Engine 31 is, for example, a diesel engine. The output of the engine 31 is controlled by adjusting the injection amount of fuel to the engine 31 according to the output of the control signal from the vehicle body controller 26 . The engine 31 has a drive shaft for connecting with the hydraulic pump 32 .

油圧ポンプ32は、エンジン31の駆動軸に連結されている。エンジン31の回転駆動力が油圧ポンプ32に伝達されることにより、油圧ポンプ32が駆動される。油圧ポンプ32は、斜板を有し、斜板の傾転角が変更されることにより吐出容量を変化させる可変容量型の油圧ポンプである。油圧ポンプ32は、作業機2の駆動、走行体5の走行、および旋回体3の旋回に用いる作動油を供給する。油圧ポンプ32から吐出された作動油は、減圧弁によって一定の圧力に減圧されて、方向制御弁33に供給される。 The hydraulic pump 32 is connected to the drive shaft of the engine 31 . The hydraulic pump 32 is driven by the rotational driving force of the engine 31 being transmitted to the hydraulic pump 32 . The hydraulic pump 32 is a variable displacement hydraulic pump that has a swash plate and changes the displacement by changing the tilt angle of the swash plate. The hydraulic pump 32 supplies hydraulic oil used for driving the work machine 2 , traveling the traveling body 5 , and turning the revolving body 3 . Hydraulic oil discharged from the hydraulic pump 32 is decompressed to a constant pressure by a decompression valve and supplied to the directional control valve 33 .

方向制御弁33は、ロッド状のスプールを動かして作動油が流れる方向を切り換えるスプール方式の弁である。方向制御弁33は、ブームシリンダ10、アームシリンダ11、バケットシリンダ12、走行モータ5M、および旋回モータのそれぞれの作動油の供給量を調整するそれぞれのスプールを有している。車体コントローラ26からの制御信号の出力に従って各スプールが軸方向に移動することにより、油圧アクチュエータ34に対する作動油の供給量が調整される。 The directional control valve 33 is a spool-type valve that moves a rod-shaped spool to switch the direction in which hydraulic oil flows. The directional control valve 33 has respective spools for adjusting the amount of hydraulic oil supplied to the boom cylinder 10, the arm cylinder 11, the bucket cylinder 12, the travel motor 5M, and the swing motor. By moving each spool in the axial direction according to the output of the control signal from the vehicle body controller 26, the amount of hydraulic fluid supplied to the hydraulic actuator 34 is adjusted.

運搬機械300は、たとえばダンプトラックである。実施形態における運搬機械300は、管制施設から送信される制御指令に基づいて走行する無人車両である。運搬機械300には、運搬機械300の位置を検出する位置検出装置が搭載される。位置検出装置は、GNSSを利用して、グローバル座標系における運搬機械300の絶対位置を検出する。運搬機械300は、通信装置302を備えている。位置検出装置によって検出された運搬機械300の位置情報は、ネットワーク400を介して、遠隔操作システム200に送信される。 Transport machine 300 is, for example, a dump truck. The transport machine 300 in the embodiment is an unmanned vehicle that travels based on a control command transmitted from a control facility. The transporting machine 300 is equipped with a position detection device that detects the position of the transporting machine 300 . The position detection device uses GNSS to detect the absolute position of the transport machine 300 in the global coordinate system. The transport machine 300 includes a communication device 302 . The position information of transporting machine 300 detected by the position detection device is transmitted to remote control system 200 via network 400 .

位置検出装置によって検出された運搬機械300の位置情報は、車車間通信により油圧ショベル100に送信されてもよい。車車間通信を利用して、油圧ショベル100が運搬機械300の位置情報を検出してもよい。グローバル座標系におけるアンテナ21の現在の位置と、油圧ショベル100と運搬機械300との相対位置関係とに基づいて、車体コントローラ26がグローバル座標系における運搬機械300の絶対位置を求めてもよい。運搬機械300の位置情報は、油圧ショベル100からネットワーク400を介して遠隔操作システム200に送信されてもよい。 The position information of the transporting machine 300 detected by the position detection device may be transmitted to the hydraulic excavator 100 through inter-vehicle communication. The excavator 100 may detect the position information of the transporting machine 300 using inter-vehicle communication. Based on the current position of the antenna 21 in the global coordinate system and the relative positional relationship between the hydraulic excavator 100 and the transporting machine 300, the vehicle body controller 26 may obtain the absolute position of the transporting machine 300 in the global coordinate system. The position information of the transporting machine 300 may be transmitted from the hydraulic excavator 100 to the remote control system 200 via the network 400 .

遠隔操作システム200は、油圧ショベル100の外部の遠隔操作施設に配置されている。遠隔操作システム200は、遠隔操作装置40と、表示装置50と、遠隔コントローラ60と、通信装置72とを備えている。 The remote control system 200 is arranged in a remote control facility outside the hydraulic excavator 100 . The remote control system 200 includes a remote control device 40 , a display device 50 , a remote controller 60 and a communication device 72 .

遠隔操作装置40は、図3にも示される各レバー41~44に加えて、操作内容設定部46と、モード設定受付部47とを有している。 The remote control device 40 has an operation content setting section 46 and a mode setting receiving section 47 in addition to the respective levers 41 to 44 shown in FIG.

遠隔コントローラ60は、通常モードと反転モードとを選択的に設定可能である。通常モードの設定時、遠隔コントローラ60は、カメラ20によって撮像された撮像画像を表示装置50に出力して、表示装置50に撮像画像を表示させる。反転モードの設定時、遠隔コントローラ60は、カメラ20によって撮像された撮像画像を左右反転した反転画像を表示装置50に出力して、表示装置50に反転画像を表示される。 The remote controller 60 can selectively set normal mode and reverse mode. When the normal mode is set, the remote controller 60 outputs the captured image captured by the camera 20 to the display device 50 and causes the display device 50 to display the captured image. When the reverse mode is set, the remote controller 60 outputs to the display device 50 a reversed image obtained by horizontally reversing the captured image captured by the camera 20 , and the reversed image is displayed on the display device 50 .

また、通常モードの設定時、遠隔コントローラ60は、オペレータによる左作業レバー41の操作によって入力された旋回方向に旋回体3を旋回させる制御信号を、油圧ショベル100に出力する。反転モードの設定時、遠隔コントローラ60は、オペレータによる左作業レバー41の操作によって入力された旋回方向とは逆方向に旋回体3を旋回させる制御信号を、油圧ショベル100に出力する。たとえばオペレータが左作業レバー41を後方向に操作する場合に、通常モードが設定されていれば旋回体3を左旋回させ、反転モードが設定されていれば旋回体3を右旋回させるように、油圧ショベル100が制御される。 Further, when the normal mode is set, the remote controller 60 outputs to the excavator 100 a control signal for rotating the revolving body 3 in the revolving direction input by the operation of the left work lever 41 by the operator. When the reverse mode is set, the remote controller 60 outputs to the hydraulic excavator 100 a control signal that causes the revolving body 3 to revolve in a direction opposite to the revolving direction input by the operator's operation of the left work lever 41 . For example, when the operator operates the left working lever 41 backward, if the normal mode is set, the revolving body 3 is turned left, and if the reverse mode is set, the revolving body 3 is turned right. , the excavator 100 is controlled.

操作内容設定部46は、土砂を掘削した油圧ショベル100が掘削した土砂を運搬機械300へと運搬するために旋回体3を旋回させるときに、通常モードの設定時と反転モードの設定時との両方において旋回体3を右旋回方向と左旋回方向とのいずれか一方の方向に旋回させる操作の入力を受け付けるように、遠隔操作装置40の操作内容を設定する。操作内容設定部46は、たとえばオペレータが手で操作可能なスイッチであってもよく、左コンソール48または右コンソール49に設置されていてもよい。 The operation content setting unit 46 determines whether the normal mode is set or the reverse mode is set when the revolving body 3 is turned to transport the earth and sand excavated by the hydraulic excavator 100 that has excavated the earth and sand to the transporting machine 300 . In both cases, the operation content of the remote control device 40 is set so as to receive an operation input for turning the turning body 3 in either the right turning direction or the left turning direction. The operation content setting unit 46 may be, for example, a switch that can be manually operated by the operator, and may be installed on the left console 48 or the right console 49 .

上述した通り、オペレータは、左作業レバー41を前方向に操作することによって旋回体3を右旋回させることができ、左作業レバー41を後方向に操作することによって旋回体3を左旋回させることができる。操作内容設定部46は、オペレータによる左作業レバー41の前方向への操作と後方向への操作とのうち、いずれか一方の操作の入力を受け付け、いずれか他方の操作の入力を無効にするように、遠隔操作装置40の操作内容を設定する。 As described above, the operator can turn the revolving body 3 to the right by operating the left working lever 41 forward, and turn the revolving body 3 to the left by operating the left working lever 41 backward. be able to. The operation content setting unit 46 receives input of either one of forward and rearward operations of the left working lever 41 by the operator, and invalidates input of the other operation. The operation contents of the remote control device 40 are set as follows.

たとえば、操作内容設定部46によって左旋回方向が設定された場合、土砂を運搬機械300へと運搬するために旋回体3を旋回させようとするオペレータが左作業レバー41を後方向に操作すると旋回体3が旋回動作し、一方、オペレータが左作業レバー41を前方向に操作しても旋回体3が旋回動作しないような構成とすることができる。操作内容設定部46によって左旋回方向が設定された場合、土砂を運搬機械300へ積み込んだ後に次の掘削作業のために旋回体3を旋回させようとするオペレータが左作業レバー41を前方向に操作すると旋回体3が旋回動作し、一方、オペレータが左作業レバー41を後方向に操作しても旋回体3が旋回動作しないような構成とすることができる。 For example, when the left turning direction is set by the operation content setting unit 46, when the operator who intends to turn the turning body 3 to carry the earth and sand to the transporting machine 300 operates the left working lever 41 in the rearward direction, the turning is made. A configuration can be adopted in which the rotating body 3 rotates, but the rotating body 3 does not rotate even when the operator operates the left working lever 41 forward. When the left turning direction is set by the operation content setting unit 46, the operator who intends to turn the revolving body 3 for the next excavation work after loading earth and sand onto the transporting machine 300 pushes the left work lever 41 forward. When operated, the revolving body 3 performs revolving motion, and on the other hand, even when the operator operates the left working lever 41 backward, the revolving body 3 does not perform revolving motion.

バケット8内の荷の重量を、たとえばブームシリンダ10内の作動油の圧力に基づいて、演算することができる。この演算結果より、バケット8内に土砂が積まれているか否かを判断することができる。バケット8内に土砂が積まれていれば、オペレータによる旋回体3を旋回させようとする操作が、土砂を運搬機械300へ運搬するための操作(後述する、作業機2を掘削作業位置から積込作業位置へと移動させるための操作)であると判断できる。バケット8内に土砂が積まれていなければ、オペレータによる旋回体3を旋回させようとする操作が、土砂を運搬機械300に積み込んだ後の、作業機2を掘削作業のための位置へ戻すための操作(後述する、作業機2を積込作業位置から掘削作業位置へと移動させる操作)であると判断できる。 The weight of the load in bucket 8 can be calculated, for example, based on the pressure of hydraulic fluid in boom cylinder 10 . From this calculation result, it can be determined whether or not the bucket 8 is filled with earth and sand. If the bucket 8 is loaded with earth and sand, the operator's operation to turn the revolving body 3 is an operation for transporting the earth and sand to the transport machine 300 (to be described later, the work machine 2 is loaded from the excavation work position). It can be determined that it is an operation for moving to the loading work position). If the bucket 8 is not loaded with earth and sand, the operator's operation to swing the revolving body 3 returns the work machine 2 to the position for the excavation work after the earth and sand are loaded onto the transport machine 300. (an operation of moving the work machine 2 from the loading work position to the excavation work position, which will be described later).

オペレータによる左作業レバー41の操作を無効にする処理は、たとえば、オペレータが左作業レバー41を前後方向に操作しても遠隔コントローラ60から油圧ショベル100に旋回体3を旋回させる制御信号を出力させないようにすることで、実現できる。後述する制御信号出力部69が、旋回体3を旋回させる制御信号を生成しないようにしてもよい。制御信号出力部69が、方向制御弁33のスプールを移動させない制御信号を生成するようにしてもよい。または、左作業レバー41をロックしてもよい。 The process of disabling the operation of the left working lever 41 by the operator is, for example, not causing the remote controller 60 to output a control signal for turning the revolving body 3 to the hydraulic excavator 100 even if the operator operates the left working lever 41 in the longitudinal direction. It can be realized by doing A control signal output unit 69 (to be described later) may not generate a control signal for rotating the rotating body 3 . The control signal output unit 69 may generate a control signal that does not move the spool of the directional control valve 33 . Alternatively, the left working lever 41 may be locked.

モード設定受付部47は、通常モードと反転モードとのいずれかのモードを選択するオペレータの入力を受け付ける。たとえば、オペレータは、油圧ショベル100と運搬機械300との相対位置関係を認識して、その油圧ショベル100に対して通常モードと反転モードとのいずれのモードを設定するかを、選択できる。遠隔操作システム200を用いて複数の油圧ショベル100を遠隔操作する場合、複数の油圧ショベル100の各々毎に、通常モードと反転モードとのいずれのモードを設定するかを選択できる。モード設定受付部47は、たとえばオペレータが手で操作可能なスイッチであってもよく、左コンソール48または右コンソール49に設置されていてもよい。 The mode setting reception unit 47 receives an operator's input to select one of the normal mode and the reverse mode. For example, the operator can recognize the relative positional relationship between the excavator 100 and the transporting machine 300 and select which mode to set for the excavator 100, the normal mode or the reverse mode. When remote-controlling a plurality of excavators 100 using the remote control system 200 , it is possible to select which mode to set for each of the plurality of excavators 100 , the normal mode or the reverse mode. Mode setting reception unit 47 may be, for example, a switch that can be manually operated by an operator, and may be installed on left console 48 or right console 49 .

遠隔コントローラ60は、作業機械選択部61を有している。図2に示されるように遠隔操作システム200によって複数の油圧ショベル100が遠隔操作される場合に、作業機械選択部61は、遠隔操作される対象となる油圧ショベル100を1つずつ順に選択する。 The remote controller 60 has a working machine selector 61 . When a plurality of hydraulic excavators 100 are remotely controlled by the remote control system 200 as shown in FIG. 2, the working machine selection unit 61 sequentially selects the hydraulic excavators 100 to be remotely controlled one by one.

遠隔コントローラ60は、画像取得部62を有している。画像取得部62は、油圧ショベル100のカメラ20によって撮像された撮像画像を取得する。 The remote controller 60 has an image acquisition section 62 . The image acquisition unit 62 acquires a captured image captured by the camera 20 of the hydraulic excavator 100 .

遠隔コントローラ60は、作業位置取得部63を有している。作業位置取得部63は、油圧ショベル100の作業機2が掘削作業をする掘削作業位置と、作業機2が運搬機械300への積込作業をする積込作業位置との相対位置関係を取得する。積込作業位置は、作業機2が掘削作業位置にある状態から旋回体3を旋回させたときに作業機2が配置される位置として規定される。作業機2を掘削作業位置に位置させて掘削作業をした油圧ショベル100が、走行することなく、旋回軸RXを中心に旋回体3を旋回することで、作業機2を運搬機械300の荷台の上方に位置させることができる。運搬機械300の荷台の上方に配置したバケット8を上方向(ダンプ方向)へ移動させることで、バケット8内の対象物を荷台に積み込むことができる。 The remote controller 60 has a working position acquisition section 63 . The work position acquisition unit 63 acquires the relative positional relationship between the excavation work position where the work machine 2 of the hydraulic excavator 100 performs excavation work and the loading work position where the work machine 2 carries out the loading work on the transport machine 300. . The loading position is defined as a position at which the work implement 2 is arranged when the revolving body 3 is swung from the state where the work implement 2 is at the excavation work position. The hydraulic excavator 100 that has performed the excavation work with the work machine 2 positioned at the excavation work position rotates the revolving body 3 around the turning axis RX without traveling, so that the work machine 2 is placed on the loading platform of the transport machine 300. can be positioned above. By moving the bucket 8 arranged above the loading platform of the transport machine 300 upward (dumping direction), the object in the bucket 8 can be loaded onto the loading platform.

上述した通り、作業機2は旋回体3から前方向へ突き出しており、作業機2が掘削作業位置にあるときの旋回体3の右方または左方のいずれかに、運搬機械300が配置される。掘削作業後に作業機2を運搬機械300の荷台の上方へ移動させるための旋回体3の旋回方向は、旋回体3に対する運搬機械300の配置に応じて、右回り方向(平面視において時計回り方向)または左回り方向(平面視において反時計回り方向)のいずれかの方向となる。具体的に、旋回体3の右方に運搬機械300がある場合には、旋回体3を右方向に旋回させて、作業機2を掘削作業位置から積込作業位置へ移動させる。旋回体3の左方に運搬機械300がある場合には、旋回体3を左回り方向に旋回させて、作業機2を掘削作業位置から積込作業位置へ移動させる。 As described above, the work machine 2 protrudes forward from the revolving body 3, and the transport machine 300 is arranged on either the right or left side of the revolving body 3 when the work machine 2 is in the excavating position. be. The turning direction of the revolving body 3 for moving the work implement 2 above the platform of the transport machine 300 after the excavation work depends on the arrangement of the transport machine 300 with respect to the revolving body 3. ) or counterclockwise direction (counterclockwise direction in plan view). Specifically, when the transport machine 300 is on the right side of the revolving body 3, the revolving body 3 is revolved rightward to move the working machine 2 from the excavating position to the loading position. When the transport machine 300 is on the left side of the revolving body 3, the revolving body 3 is revolved counterclockwise to move the working machine 2 from the excavating position to the loading position.

掘削作業位置と積込作業位置との相対位置関係は、たとえば、カメラ20(典型的には、前方カメラ20E、右前方カメラ20A、または左側方カメラ20Dのいずれか一つまたは複数)によって撮像した油圧ショベル100の周囲の撮像画像を解析して、撮像画像中の運搬機械300の位置を検出することにより、取得することができる。掘削作業位置と積込作業位置との相対位置関係は、グローバル座標系における油圧ショベル100の絶対位置と運搬機械300の絶対位置とから、取得することができる。掘削作業位置と積込作業位置との相対位置関係は、作業現場に設けた基準位置、たとえば基準杭の先端の位置、を元にした3次元座標系における油圧ショベル100および運搬機械300の位置から、取得することができる。 The relative positional relationship between the excavation work position and the loading work position is captured by, for example, the camera 20 (typically, one or more of the front camera 20E, the right front camera 20A, and the left side camera 20D). It can be obtained by analyzing a captured image around the hydraulic excavator 100 and detecting the position of the transport machine 300 in the captured image. The relative positional relationship between the excavation work position and the loading work position can be acquired from the absolute positions of the excavator 100 and the transport machine 300 in the global coordinate system. The relative positional relationship between the excavation work position and the loading work position is determined from the positions of hydraulic excavator 100 and transport machine 300 in a three-dimensional coordinate system based on a reference position provided at the work site, for example, the position of the tip of a reference pile. , can be obtained.

遠隔コントローラ60は、操作入力取得部64を有している。操作入力取得部64は、遠隔操作装置40に入力されたオペレータの操作を取得する。より特定的には、操作入力取得部64は、旋回体3の旋回方向についての左作業レバー41の操作を取得する。 The remote controller 60 has an operation input acquisition section 64 . The operation input acquisition unit 64 acquires an operator's operation input to the remote control device 40 . More specifically, the operation input acquiring unit 64 acquires the operation of the left work lever 41 in the rotating direction of the rotating body 3 .

遠隔コントローラ60は、モード選択部65を有している。モード選択部65は、操作内容設定部46により設定された遠隔操作装置40の操作内容と、作業位置取得部63の取得する掘削作業位置と積込作業位置との相対位置関係と、に基づいて、通常モードと反転モードとのいずれかのモードを選択的に設定する。モード選択部65は、操作内容設定部46によって設定された旋回の方向に旋回体3を旋回させるようにオペレータが左作業レバー41を操作したときに、作業機2を掘削作業位置から積込作業位置へと移動させる方向へ旋回体3が旋回するように、複数の油圧ショベル100の各々毎に、通常モードと反転モードとのいずれかのモードを選択する。 The remote controller 60 has a mode selector 65 . The mode selection unit 65 is based on the operation content of the remote control device 40 set by the operation content setting unit 46 and the relative positional relationship between the excavation work position and the loading work position acquired by the work position acquisition unit 63. , to selectively set one of the normal mode and the reverse mode. The mode selection unit 65 moves the work implement 2 from the excavation work position to the loading work when the operator operates the left work lever 41 so as to turn the revolving body 3 in the turning direction set by the operation content setting unit 46 . Either the normal mode or the reverse mode is selected for each of the plurality of hydraulic excavators 100 so that the revolving body 3 revolves in the direction to move it to the position.

たとえば、運搬機械300が油圧ショベル100の左方に配置されている場合、旋回体3が左旋回することで、作業機2を掘削作業位置から積込作業位置へと移動させることができる。そこで、操作内容設定部46によって左旋回方向が設定されているときには、モード選択部65は、オペレータの入力した旋回方向に旋回体3を旋回させる通常モードを選択する。操作内容設定部46によって右旋回方向が設定されているときには、モード選択部65は、オペレータの入力した旋回方向とは逆方向に旋回体3を旋回させる反転モードを選択する。 For example, when the transport machine 300 is arranged on the left side of the hydraulic excavator 100, the swing body 3 swings left to move the work machine 2 from the excavating position to the loading position. Therefore, when the left turning direction is set by the operation content setting unit 46, the mode selection unit 65 selects the normal mode for turning the turning body 3 in the turning direction input by the operator. When the right turning direction is set by the operation content setting unit 46, the mode selecting unit 65 selects a reverse mode in which the turning body 3 turns in a direction opposite to the turning direction input by the operator.

遠隔コントローラ60は、画像反転処理部66を有している。画像反転処理部66は、反転モードの設定時に、カメラ20によって撮像された撮像画像を左右反転させる処理を行い、反転画像を作成する。 The remote controller 60 has an image inversion processor 66 . When the reverse mode is set, the image reversal processing unit 66 performs a process of horizontally reversing the captured image captured by the camera 20 to create a reversed image.

遠隔コントローラ60は、画像出力部67を有している。画像出力部67は、表示装置50に画像を出力して、表示装置50に画像を表示させる。画像出力部67は、通常モードの設定時に、カメラ20によって撮像され画像取得部62によって取得された撮像画像を表示装置50に出力して、表示装置50に撮像画像を表示させる。画像出力部67は、反転モードの設定時に、画像反転処理部66で作成された反転画像を表示装置50に出力して、表示装置50に反転画像を表示させる。 The remote controller 60 has an image output section 67 . The image output unit 67 outputs an image to the display device 50 and causes the display device 50 to display the image. When the normal mode is set, the image output unit 67 outputs the captured image captured by the camera 20 and acquired by the image acquisition unit 62 to the display device 50 and causes the display device 50 to display the captured image. When the reverse mode is set, the image output unit 67 outputs the reversed image created by the image reverse processing unit 66 to the display device 50 and causes the display device 50 to display the reversed image.

遠隔コントローラ60は、旋回方向反転処理部68を有している。旋回方向反転処理部68は、反転モードの設定時に、遠隔操作装置40に入力された旋回方向を反転させる処理を実行する。 The remote controller 60 has a turning direction reversal processor 68 . The turning direction reversal processing unit 68 performs processing for reversing the turning direction input to the remote control device 40 when the reversing mode is set.

旋回モータへ作動油を供給することにより、旋回体3が旋回する。方向制御弁33における旋回モータの作動油の供給量を調整するスプールを軸方向に移動させることで、旋回モータへ作動油が供給される。当該スプールの軸方向の移動方向を逆にし、旋回モータへ供給される作動油の流れ方向を逆にして、旋回モータの回転方向を逆にすることで、旋回体3の旋回方向を反転できる。 The revolving superstructure 3 revolves by supplying hydraulic oil to the revolving motor. Hydraulic oil is supplied to the swing motor by axially moving the spool for adjusting the amount of hydraulic oil supplied to the swing motor in the directional control valve 33 . By reversing the axial movement direction of the spool, reversing the flow direction of hydraulic oil supplied to the revolving motor, and reversing the revolving direction of the revolving motor, the revolving direction of the revolving body 3 can be reversed.

操作入力取得部64は、旋回体3の旋回方向についての遠隔操作装置40(左作業レバー41)の操作を取得して、左作業レバー41の操作に基づく方向制御弁33のスプールの移動方向を規定する。旋回方向反転処理部68は、反転モードの設定時に、方向制御弁33のスプールの移動方向を、遠隔操作装置40の操作に基づいて規定された移動方向とは逆の方向に変更する処理をする。なお、通常モードの設定時には、旋回方向反転処理部68は、旋回体3の旋回方向を反転させる処理を実行しない。 The operation input acquisition unit 64 acquires the operation of the remote control device 40 (the left working lever 41) regarding the turning direction of the turning body 3, and determines the moving direction of the spool of the directional control valve 33 based on the operation of the left working lever 41. stipulate. When the reversal mode is set, the turning direction reversing processing unit 68 performs processing to change the moving direction of the spool of the directional control valve 33 to the direction opposite to the moving direction specified based on the operation of the remote control device 40. . Note that when the normal mode is set, the turning direction reversal processing unit 68 does not execute processing for reversing the turning direction of the revolving body 3 .

遠隔コントローラ60は、制御信号出力部69を有している。制御信号出力部69は、油圧ショベル100に出力される制御信号を生成する。通常モードの設定時に、制御信号出力部69は、遠隔操作装置40に入力された旋回方向に旋回体3を旋回させる制御信号を生成する。制御信号出力部69は、遠隔操作装置40の操作に基づく方向に方向制御弁33のスプールを移動させる制御信号を生成する。反転モードの設定時に、制御信号出力部69は、遠隔操作装置40に入力された旋回方向とは逆方向に旋回体3を旋回させる制御信号を生成する。制御信号出力部69は、旋回方向反転処理部68の処理によって変更された方向に方向制御弁33のスプールを移動させる制御信号を生成する。 The remote controller 60 has a control signal output section 69 . The control signal output unit 69 generates control signals to be output to the excavator 100 . When the normal mode is set, the control signal output unit 69 generates a control signal for turning the turning body 3 in the turning direction input to the remote control device 40 . The control signal output unit 69 generates a control signal for moving the spool of the directional control valve 33 in the direction based on the operation of the remote control device 40 . When the reverse mode is set, the control signal output unit 69 generates a control signal that causes the revolving superstructure 3 to revolve in a direction opposite to the revolving direction input to the remote control device 40 . The control signal output unit 69 generates a control signal for moving the spool of the directional control valve 33 in the direction changed by the processing of the turning direction reversal processing unit 68 .

通信装置72は、制御信号出力部69の生成した制御信号を、ネットワーク400を介して、油圧ショベル100に送信する。 The communication device 72 transmits the control signal generated by the control signal output unit 69 to the hydraulic excavator 100 via the network 400 .

図5は、油圧ショベル100の遠隔操作方法を示すフローチャートである。図4について説明した内容と一部重複もあるが、図5および後続の図を参照して、実施形態の油圧ショベル100の遠隔操作方法について、以下に説明する。 FIG. 5 is a flowchart showing a remote control method for the hydraulic excavator 100. As shown in FIG. Although there is some overlap with the content described with reference to FIG. 4, the remote control method for the hydraulic excavator 100 of the embodiment will be described below with reference to FIG. 5 and subsequent figures.

図5に示されるように、まずステップS1において、掘削作業位置を取得する。作業位置取得部63は、油圧ショベル100が掘削作業をするときの作業機2の位置である掘削作業位置を取得する。作業位置取得部63は、グローバル座標系における油圧ショベル100の現在の位置と、土砂などの対象物の位置とに基づいて、掘削作業位置を規定してもよい。グローバル座標系における油圧ショベル100の現在の位置は、アンテナ21で受信したGNSS電波に基づいて検出される。対象物の位置は、カメラ20によって撮像された油圧ショベル100の周囲の撮像画像を解析して、検出することができる。対象物の位置は、油圧ショベル100の周囲の現況地形の形状または設計地形の形状に基づいて規定されてもよい。 As shown in FIG. 5, first, in step S1, an excavation work position is acquired. The work position acquisition unit 63 acquires an excavation work position, which is the position of the work implement 2 when the hydraulic excavator 100 performs excavation work. The work position acquisition unit 63 may define the excavation work position based on the current position of the hydraulic excavator 100 in the global coordinate system and the position of an object such as earth and sand. The current position of the hydraulic excavator 100 in the global coordinate system is detected based on GNSS radio waves received by the antenna 21 . The position of the object can be detected by analyzing the captured image around the hydraulic excavator 100 captured by the camera 20 . The location of the object may be defined based on the shape of the existing terrain or the shape of the designed terrain around the excavator 100 .

ステップS2において、積込作業位置を取得する。作業位置取得部63は、油圧ショベル100が運搬機械300に対象物を積み込む積込作業をするときの作業機2の位置である積込作業位置を取得する。作業位置取得部63は、運搬機械300の現在の位置に基づいて積込作業位置を規定してもよい。グローバル座標系における運搬機械300の絶対位置から運搬機械300の現在の位置が検出されてもよい。カメラ20によって撮像された油圧ショベル100の周囲の撮像画像を解析して、撮像画像中の運搬機械300の位置を検出することにより、運搬機械300の現在の位置が検出されてもよい。 In step S2, the loading work position is obtained. The work position acquisition unit 63 acquires a loading work position, which is the position of the work machine 2 when the hydraulic excavator 100 performs a loading work of loading objects onto the transporting machine 300 . The work position acquisition unit 63 may specify the loading work position based on the current position of the transporting machine 300 . The current position of the transporting machine 300 may be detected from the absolute position of the transporting machine 300 in the global coordinate system. The current position of the transporting machine 300 may be detected by analyzing the captured image around the hydraulic excavator 100 captured by the camera 20 and detecting the position of the transporting machine 300 in the captured image.

ステップS3において、掘削作業位置と積込作業位置との相対位置関係を取得する。作業位置取得部63は、ステップS1で取得した掘削作業位置と、ステップS2で取得した積込作業位置とに基づいて、掘削作業位置と積込作業位置との相対位置関係を取得する。 In step S3, the relative positional relationship between the excavation work position and the loading work position is acquired. The work position acquisition unit 63 acquires the relative positional relationship between the excavation work position and the loading work position based on the excavation work position acquired in step S1 and the loading work position acquired in step S2.

図6は、油圧ショベル100と運搬機械300との位置関係の一例を示す模式図である。図6に示される油圧ショベル100A,100B,100Cの各々の作業機2は、掘削作業位置にある。運搬機械300Aは、油圧ショベル100Aの左方に配置されている。油圧ショベル100Aの旋回体3を左旋回させることで、油圧ショベル100Aの作業機2を掘削作業位置から積込作業位置に移動させることができる。運搬機械300Bは、油圧ショベル100Bの左方に配置されている。油圧ショベル100Bの旋回体3を左旋回させることで、油圧ショベル100Bの作業機2を掘削作業位置から積込作業位置に移動させることができる。運搬機械300Cは、油圧ショベル100Cの右方に配置されている。油圧ショベル100Cの旋回体3を右旋回させることで、油圧ショベル100Cの作業機2を掘削作業位置から積込作業位置に移動させることができる。 FIG. 6 is a schematic diagram showing an example of the positional relationship between the hydraulic excavator 100 and the transport machine 300. As shown in FIG. Each work implement 2 of hydraulic excavators 100A, 100B, and 100C shown in FIG. 6 is in the excavation work position. The transport machine 300A is arranged to the left of the hydraulic excavator 100A. By rotating the revolving body 3 of the hydraulic excavator 100A to the left, the working machine 2 of the hydraulic excavator 100A can be moved from the excavation work position to the loading work position. The transport machine 300B is arranged to the left of the hydraulic excavator 100B. By rotating the revolving body 3 of the hydraulic excavator 100B to the left, the working machine 2 of the hydraulic excavator 100B can be moved from the excavation work position to the loading work position. The transport machine 300C is arranged on the right side of the excavator 100C. By rotating the revolving body 3 of the hydraulic excavator 100C to the right, the working machine 2 of the hydraulic excavator 100C can be moved from the excavation work position to the loading work position.

図5に戻って、ステップS4において、旋回体3を旋回させるための遠隔操作装置40の操作方向を設定する。油圧ショベル100を用いた掘削積込作業を開始する前に、オペレータは、遠隔操作装置40の操作内容設定部46を操作することで、掘削作業位置から積込作業位置へ作業機2を移動させるために旋回体3を右旋回させる左作業レバー41の操作をするか左旋回させる左作業レバー41の操作をするかを、予め設定する。遠隔コントローラ60は、オペレータによる操作内容設定部46を介した操作内容の設定の入力を受ける。 Returning to FIG. 5, in step S4, the operation direction of the remote control device 40 for rotating the rotating body 3 is set. Before starting the excavation and loading work using the hydraulic excavator 100, the operator operates the operation content setting unit 46 of the remote control device 40 to move the working machine 2 from the excavation work position to the loading work position. Therefore, it is set in advance whether to operate the left working lever 41 for turning the revolving body 3 to the right or to operate the left working lever 41 for turning the revolving body 3 to the left. The remote controller 60 receives input of operation content setting via the operation content setting unit 46 by the operator.

ステップS5において、旋回体3の旋回方向の反転が必要か否かの判断が行われる。たとえば、ステップS4において、掘削作業後の積込作業のために旋回体3を左旋回させる操作をする設定がされたとする。図6に示される油圧ショベル100A,100Bは、旋回体3を左旋回させることで作業機2を掘削作業位置から積込作業位置に移動できる。一方、油圧ショベル100Cは、作業機2を掘削作業位置から積込作業位置に移動するには、旋回体3を右旋回させる必要がある。そのため、ステップS5の判断においては、油圧ショベル100A,100Bについては反転が必要でないと判断され、油圧ショベル100Cについては反転が必要であると判断される。 In step S5, it is determined whether or not it is necessary to reverse the turning direction of the turning body 3. FIG. For example, in step S4, it is assumed that an operation to turn the revolving body 3 to the left is made for the loading work after the excavation work. Hydraulic excavators 100A and 100B shown in FIG. 6 can move the work machine 2 from the excavation work position to the loading work position by turning the revolving body 3 to the left. On the other hand, the hydraulic excavator 100C needs to rotate the revolving body 3 to the right in order to move the work implement 2 from the excavation work position to the loading work position. Therefore, in the determination of step S5, it is determined that the hydraulic excavators 100A and 100B do not need to be reversed, and that the hydraulic excavator 100C needs to be reversed.

ステップS5の判断で反転が必要である(ステップS5においてYES)と判断された油圧ショベル100Cについては、ステップS6に進み、遠隔コントローラ60は、掘削積込作業を開始する指令の入力を受ける。 For excavator 100C determined to require reversing in step S5 (YES in step S5), the process proceeds to step S6, and remote controller 60 receives an input of a command to start excavation and loading work.

ステップS7において、画像取得部62は、カメラ20によって撮像された撮像画像を取得する。図7は、撮像画像の一例を示す図である。図7に示される正転画像NIは、油圧ショベル100Cに搭載されている前方カメラ20E(図1)で撮像された旋回体3の前方の撮像画像である。正転画像NIは、左右反転処理がされていない。正転画像NIには、車室4のフレームと,作業機2の一部とが含まれている。正転画像NIにおいて、作業機2は、車室4の右側にある。 In step S<b>7 , the image acquisition unit 62 acquires the captured image captured by the camera 20 . FIG. 7 is a diagram showing an example of a captured image. The normal image NI shown in FIG. 7 is a captured image of the front of the revolving body 3 captured by the front camera 20E (FIG. 1) mounted on the hydraulic excavator 100C. The normal image NI is not horizontally inverted. The normal image NI includes the frame of the cabin 4 and part of the work implement 2 . In the normal image NI, the work implement 2 is on the right side of the vehicle compartment 4 .

次にステップS8において、撮像画像を左右反転する処理をする。図8は、撮像画像を左右反転した反転画像の一例を示す図である。画像反転処理部66は、図7に示される正転画像NIを左右反転させた反転画像RIを作成する。反転画像RIにおいて、作業機2は、車室4の左側にある。 Next, in step S8, processing for horizontally inverting the captured image is performed. FIG. 8 is a diagram showing an example of an inverted image obtained by horizontally inverting a captured image. The image reversal processing unit 66 creates a reversed image RI by horizontally reversing the normal reversed image NI shown in FIG. In the reverse image RI, the work implement 2 is on the left side of the vehicle interior 4 .

ステップS9において、画像を出力する。画像出力部67は、ステップS8で作成された反転画像RIを、表示装置50に出力して、表示装置50に反転画像RIを表示させる。 In step S9, the image is output. The image output unit 67 outputs the reverse image RI created in step S8 to the display device 50, and causes the display device 50 to display the reverse image RI.

ステップS10において、オペレータは、表示装置50に表示された反転画像RIを見ながら、掘削作業後の積込作業のために旋回体3を旋回させる操作をする。 In step S10, the operator, while viewing the reversed image RI displayed on the display device 50, performs an operation to turn the revolving structure 3 for the loading work after the excavation work.

図9は、旋回体3の旋回方向を反転させた油圧ショベル100CVと運搬機械300CVとの仮想的な位置関係の一例を示す模式図である。撮像画像を左右反転させた反転画像RIにおいて、見かけ上、旋回体3を左旋回させる。オペレータは、旋回体3を左旋回させるための操作をする。オペレータは、左作業レバー41を後方向に操作する。図9に示される油圧ショベル100CVでは、他の油圧ショベル100A,100Bと同様に、旋回体3を左旋回させることで、作業機2が掘削作業位置から積込作業位置に移動する。図9に示される掘削作業位置から、油圧ショベル100CVの旋回体3が左方向に旋回して、油圧ショベル100CVのバケット8が運搬機械300CVの上方に配置されることになる。 FIG. 9 is a schematic diagram showing an example of a virtual positional relationship between the hydraulic excavator 100CV in which the revolving direction of the revolving body 3 is reversed and the transport machine 300CV. In the inverted image RI obtained by horizontally inverting the captured image, the rotating body 3 is apparently rotated to the left. The operator performs an operation to turn the revolving body 3 to the left. The operator operates the left working lever 41 backward. In the hydraulic excavator 100CV shown in FIG. 9, similarly to the other hydraulic excavators 100A and 100B, the work implement 2 moves from the excavation work position to the loading work position by turning the revolving body 3 to the left. From the excavation work position shown in FIG. 9, the revolving body 3 of the hydraulic excavator 100CV is revolved leftward, and the bucket 8 of the hydraulic excavator 100CV is arranged above the transport machine 300CV.

ステップS11において、旋回体3の旋回方向を反転させる処理をする。旋回方向反転処理部68は、旋回体3の旋回方向を、オペレータの操作に基づく左方向とは逆の、右方向とする処理を実行する。旋回方向反転処理部68は、油圧ショベル100Cの旋回モータの回転方向を、平面視における反時計回り方向から、時計回り方向へと変更する。より具体的には、図4に示される油圧ショベル100Cの方向制御弁33のうち、旋回モータに供給される作動油の流量を調整するスプールの軸方向の移動方向を、逆向きにする。 In step S11, processing for reversing the turning direction of the turning body 3 is performed. The turning direction reversing processing unit 68 performs processing to change the turning direction of the turning body 3 to the right direction, which is opposite to the left direction based on the operator's operation. The turning direction reversal processing unit 68 changes the rotation direction of the turning motor of the hydraulic excavator 100C from the counterclockwise direction in plan view to the clockwise direction. More specifically, in the directional control valve 33 of the hydraulic excavator 100C shown in FIG. 4, the axial movement direction of the spool that adjusts the flow rate of hydraulic oil supplied to the swing motor is reversed.

ステップS16において、旋回体3を旋回させる制御信号が油圧ショベル100に出力される。ステップS11で旋回方向を反転させる処理が行われているので、制御信号出力部69は、遠隔操作装置40に入力された旋回方向(左旋回)とは逆方向(右旋回)に旋回体3を旋回させる制御信号を、油圧ショベル100Cに出力する。 In step S<b>16 , a control signal for rotating the rotating body 3 is output to the hydraulic excavator 100 . Since the process of reversing the turning direction is performed in step S11, the control signal output unit 69 causes the turning body 3 to rotate in the opposite direction (right turning) to the turning direction (left turning) input to the remote control device 40. to the hydraulic excavator 100C.

ステップS17において、制御信号を受けた車体コントローラ26が、方向制御弁33を制御して、旋回体3を右方向に旋回させる。図6に示される油圧ショベル100Cが右旋回することによって、油圧ショベル100Cのバケット8が運搬機械300Cの荷台の上方に配置される。 In step S17, the vehicle body controller 26 that has received the control signal controls the direction control valve 33 to turn the revolving body 3 rightward. By turning the hydraulic excavator 100C shown in FIG. 6 to the right, the bucket 8 of the hydraulic excavator 100C is arranged above the platform of the transporting machine 300C.

ステップS18において、油圧ショベル100Cの車体コントローラ26がバケット8をダンプ方向に動作させることによって、バケット8内の対象物を運搬機械300Cの荷台上に落下させる。このようにして、対象物の運搬機械300Cへの積込作業が行われる。そして、ステップS19において、掘削積込作業を終了する。 In step S18, the vehicle body controller 26 of the hydraulic excavator 100C causes the bucket 8 to move in the dumping direction, thereby dropping the object in the bucket 8 onto the platform of the transporting machine 300C. In this manner, the work of loading the object onto the transporting machine 300C is performed. Then, in step S19, the excavation and loading work is finished.

積込作業の終了後に、作業機2を積込作業位置から掘削作業位置へ戻すために、図9に示される油圧ショベル100CVの旋回体3を右旋回させる操作が行われる。オペレータは、左作業レバー41を前方向に操作する。制御信号出力部69は、オペレータの操作に基づく旋回方向(右旋回)とは逆方向(左旋回)に旋回体3を旋回させる制御信号を、油圧ショベル100Cに出力する。図6に示される油圧ショベル100Cを左旋回することによって、作業機2が掘削作業位置へと移動する。 After completion of the loading work, an operation is performed to turn the revolving body 3 of the hydraulic excavator 100CV shown in FIG. 9 to the right in order to return the working machine 2 from the loading work position to the excavation work position. The operator operates the left working lever 41 forward. The control signal output unit 69 outputs to the hydraulic excavator 100C a control signal for rotating the revolving structure 3 in the opposite direction (left turning) to the turning direction (right turning) based on the operator's operation. By turning the hydraulic excavator 100C shown in FIG. 6 to the left, the work implement 2 moves to the excavation work position.

ステップS5の判断で反転が必要でない(ステップS5においてNO)と判断された油圧ショベル100A,100Bについては、ステップS12に進み、ステップS6と同様に、遠隔コントローラ60は掘削積込作業を開始する指令の入力を受ける。ステップS13において、ステップS7と同様に、画像取得部62は、油圧ショベル100A,100Bに搭載されている前方カメラ20Eで撮像された旋回体3の前方の撮像画像を取得する。 For hydraulic excavators 100A and 100B determined in step S5 that reversing is not necessary (NO in step S5), the process proceeds to step S12, and remote controller 60 issues a command to start excavation and loading work in the same manner as in step S6. receive the input of In step S13, similarly to step S7, the image acquisition unit 62 acquires the captured image in front of the revolving body 3 captured by the front camera 20E mounted on the hydraulic excavators 100A and 100B.

ステップS14において、画像を出力する。画像出力部67は、ステップS13で取得された撮像画像(正転画像NI、図7)を、表示装置50に出力して、表示装置50に正転画像NIを表示させる。 In step S14, the image is output. The image output unit 67 outputs the picked-up image (normal image NI, FIG. 7) acquired in step S13 to the display device 50, and causes the display device 50 to display the normal image NI.

ステップS15において、オペレータは、表示装置50に表示された正転画像NIを見ながら、掘削作業後の積込作業のために旋回体3を旋回させる左作業レバー41の操作をする。正転画像NIにおいて、旋回体3を左旋回させる。オペレータは、旋回体3を左旋回させるための操作をする。オペレータは、左作業レバー41を後方向に操作する。油圧ショベル100A,100Bでは、旋回体3を左旋回させることで、作業機2が掘削作業位置から積込作業位置に移動する。図6に示される掘削作業位置から、油圧ショベル100CVの旋回体3が左方向に旋回して、油圧ショベル100CVのバケット8が運搬機械300CVの上方に配置されることになる。 In step S15, the operator operates the left work lever 41 to turn the revolving body 3 for the loading work after the excavation work while viewing the normal rotation image NI displayed on the display device 50. FIG. In the normal image NI, the rotating body 3 is rotated to the left. The operator performs an operation to turn the revolving body 3 to the left. The operator operates the left working lever 41 backward. In the hydraulic excavators 100A and 100B, the work machine 2 moves from the excavation work position to the loading work position by turning the revolving body 3 to the left. From the excavation work position shown in FIG. 6, the revolving body 3 of the hydraulic excavator 100CV turns to the left, and the bucket 8 of the hydraulic excavator 100CV is arranged above the transport machine 300CV.

続いてステップS16において、旋回体3を旋回させる制御信号が油圧ショベル100に出力される。制御信号出力部69は、遠隔操作装置40に入力された旋回方向(左旋回)に旋回体3を旋回させる制御信号を、油圧ショベル100A,100Bに出力する。 Subsequently, in step S<b>16 , a control signal for rotating the rotating body 3 is output to the hydraulic excavator 100 . The control signal output unit 69 outputs to the excavators 100A and 100B a control signal for turning the revolving structure 3 in the turning direction (left turning) input to the remote control device 40 .

ステップS17において、制御信号を受けた車体コントローラ26が、方向制御弁33を制御して、旋回体3を左方向に旋回させる。図6に示される油圧ショベル100A,100Bが左旋回することによって、油圧ショベル100A,100Bのバケット8が運搬機械300の荷台の上方に配置される。 In step S17, the vehicle body controller 26 that has received the control signal controls the direction control valve 33 to turn the revolving body 3 leftward. By turning the excavators 100A and 100B shown in FIG.

ステップS18において、油圧ショベル100A,100Bの車体コントローラ26がバケット8をダンプ方向に動作させることによって、バケット8内の対象物を運搬機械300A,300Bの荷台上に落下させる。このようにして、対象物の運搬機械300A,300Bへの積込作業が行われる。そして、ステップS19において、掘削積込作業を終了する。 In step S18, the vehicle body controllers 26 of the hydraulic excavators 100A, 100B operate the buckets 8 in the dumping direction, thereby dropping the objects in the buckets 8 onto the platforms of the transport machines 300A, 300B. In this manner, the work of loading the objects onto the transport machines 300A and 300B is performed. Then, in step S19, the excavation and loading work is terminated.

積込作業の終了後に、作業機2を積込作業位置から掘削作業位置へ戻すために、油圧ショベル100A,100Bの旋回体3を右旋回させる操作が行われる。オペレータは、左作業レバー41を前方向に操作する。制御信号出力部69は、オペレータの操作に基づく旋回方向(右旋回)に旋回体3を旋回させる制御信号を、油圧ショベル100A,100Bに出力する。図6に示される油圧ショベル100A,100Bを右旋回することによって、作業機2が掘削作業位置へと移動する。 After the loading work is completed, the revolving bodies 3 of the hydraulic excavators 100A and 100B are rotated to the right in order to return the working machine 2 from the loading work position to the excavation work position. The operator operates the left working lever 41 forward. The control signal output unit 69 outputs to the hydraulic excavators 100A and 100B a control signal for rotating the revolving structure 3 in the revolving direction (right turning) based on the operator's operation. By turning the hydraulic excavators 100A and 100B shown in FIG. 6 to the right, the work implement 2 moves to the excavation work position.

図10は、油圧ショベル100の遠隔操作方法の他の例を示すフローチャートである。図10に示されるステップS1~ステップS3では、図5に示されるステップS1~ステップS3と同じ処理が行われる。続いてステップS24において、各油圧ショベル100について、通常モードと反転モードとのいずれかのモードの設定が行われる。この設定は、オペレータが遠隔操作装置40のモード設定受付部47に入力することで、行われる。オペレータは、ステップS3で取得した掘削作業位置と積込作業位置との相対位置関係に基づいて、各油圧ショベル100について、通常モードと反転モードとのいずれかのモードを選択する。 FIG. 10 is a flowchart showing another example of the remote control method for the hydraulic excavator 100. As shown in FIG. In steps S1 to S3 shown in FIG. 10, the same processes as steps S1 to S3 shown in FIG. 5 are performed. Subsequently, in step S24, each hydraulic excavator 100 is set to either the normal mode or the reverse mode. This setting is performed by the operator's input to the mode setting reception unit 47 of the remote control device 40 . The operator selects one of the normal mode and the reverse mode for each excavator 100 based on the relative positional relationship between the excavating work position and the loading work position acquired in step S3.

たとえば、油圧ショベル100の旋回体3を右旋回させる操作よりも左旋回させる操作を好むオペレータであるとする。その場合、図6に示される、運搬機械300Aが本体1の左方に配置されている油圧ショベル100A、および、運搬機械300Bが本体1の左方に配置されている油圧ショベル100Bについては、旋回体3を左旋回させて作業機2を掘削作業位置から積込作業位置へ移動させることになるため、通常モードを選択する。運搬機械300Cが本体1の右方に配置されている油圧ショベル100Cについては、旋回体3を右旋回させて作業機2を掘削作業位置から積込作業位置へ移動させることになるため、反転モードを選択する。 For example, assume that the operator prefers to turn the revolving body 3 of the hydraulic excavator 100 to the left rather than to the right. In this case, the hydraulic excavator 100A in which the transporting machine 300A is arranged on the left side of the main body 1 and the hydraulic excavator 100B in which the transporting machine 300B is arranged on the left side of the main body 1 shown in FIG. Since the body 3 is turned to the left to move the work machine 2 from the excavation work position to the loading work position, the normal mode is selected. For the hydraulic excavator 100C in which the transport machine 300C is arranged on the right side of the main body 1, the revolving body 3 is rotated to the right to move the working machine 2 from the excavation work position to the loading work position. Select mode.

次にステップS25において、各油圧ショベル100について、選択されたモードが反転モードであるか否かの判断が行われる。反転モードに設定された油圧ショベル100Cについて、ステップS6に進み、以下、図5で説明した処理と同じ処理が行われる。通常モードに設定された油圧ショベル100A,100Bについて、ステップS12に進み、以下、図5で説明した処理と同じ処理が行われる。 Next, in step S25, for each hydraulic excavator 100, it is determined whether or not the selected mode is the reverse mode. For the hydraulic excavator 100C set to the reverse mode, the process proceeds to step S6, and the same process as the process described with reference to FIG. 5 is performed. For the hydraulic excavators 100A and 100B set to the normal mode, the process proceeds to step S12, and the same process as the process described with reference to FIG. 5 is performed.

上述した説明と一部重複する記載もあるが、本実施形態の特徴的な構成および作用効果についてまとめて説明すると、以下の通りである。 Although there are descriptions that partially overlap with the above description, the characteristic configuration and effects of the present embodiment will be collectively described as follows.

図4に示されるように、遠隔コントローラ60は、画像反転処理部66と、画像出力部67と、旋回方向反転処理部68と、制御信号出力部69とを有している。図5~10に示されるように、画像反転処理部66は、カメラ20によって撮像された撮像画像を左右反転する。画像出力部67は、反転画像RIを表示装置50に出力する。旋回方向反転処理部68は、左作業レバー41に入力された旋回体3の旋回方向を反転させる処理を実行する。制御信号出力部69は、左作業レバー41に入力された旋回方向とは逆方向に旋回体3を旋回させる制御信号を、油圧ショベル100に出力する。 As shown in FIG. 4 , the remote controller 60 has an image reversal processing section 66 , an image output section 67 , a turning direction reversal processing section 68 and a control signal output section 69 . As shown in FIGS. 5 to 10, the image inversion processor 66 horizontally inverts the captured image captured by the camera 20. FIG. The image output unit 67 outputs the reverse image RI to the display device 50 . The turning direction reversal processing unit 68 executes processing for reversing the turning direction of the revolving body 3 input to the left working lever 41 . The control signal output unit 69 outputs to the hydraulic excavator 100 a control signal for rotating the revolving body 3 in the opposite direction to the revolving direction input to the left work lever 41 .

油圧ショベル100の作業機2を掘削作業位置に配置して掘削作業を実行した後、旋回体3が旋回して、作業機2を積込作業位置へと移動させる。油圧ショベル100が掘削した対象物が積み込まれる運搬機械300の、掘削作業位置に対する相対位置は、作業現場の状況によって変わる。油圧ショベル100の左方に運搬機械300が配置される場合があり、油圧ショベル100の右方に運搬機械300が配置される場合もある。 After the work machine 2 of the hydraulic excavator 100 is arranged at the excavation work position and the excavation work is executed, the revolving body 3 turns to move the work machine 2 to the loading work position. The relative position of the transporting machine 300 loaded with the object excavated by the hydraulic excavator 100 with respect to the excavation work position changes depending on the conditions of the work site. The transport machine 300 may be arranged on the left side of the hydraulic excavator 100 and may be arranged on the right side of the hydraulic excavator 100 .

たとえば、油圧ショベル100の右方に運搬機械300が配置された場合に、表示装置50に反転画像RIを表示させ、オペレータは反転画像RIを見ながら旋回体3を左旋回させる操作をし、このオペレータの操作による旋回方向を反転させて、油圧ショベル100に対して旋回体3を右旋回させる制御信号を出力することができる。これにより、旋回体3を右旋回させて、作業機2を掘削作業位置から積込作業位置へと移動させることができる。油圧ショベル100の左方に運搬機械300が配置された場合と油圧ショベル100の右方に運搬機械300が配置された場合とで、オペレータは旋回体3を同じ方向に旋回させる操作をすればよくなる。上記の例の場合、オペレータの操作が旋回体3を左旋回させる操作に揃えられることになる。 For example, when the transport machine 300 is arranged on the right side of the hydraulic excavator 100, the display device 50 displays the reverse image RI, and the operator operates to turn the revolving structure 3 to the left while viewing the reverse image RI. A control signal can be output to the hydraulic excavator 100 to turn the revolving body 3 to the right by reversing the revolving direction by the operator's operation. As a result, the revolving body 3 can be rotated to the right to move the working machine 2 from the excavating position to the loading position. When the transporting machine 300 is arranged on the left side of the hydraulic excavator 100 and when the transporting machine 300 is arranged on the right side of the hydraulic excavator 100, the operator only has to perform the operation to swing the revolving structure 3 in the same direction. . In the case of the above example, the operation of the operator is aligned with the operation of turning the revolving body 3 to the left.

運搬機械300の油圧ショベル100に対する相対位置にかかわらず、オペレータは同じ操作をして旋回体3を旋回させて、作業機2を掘削作業位置から積込作業位置に適切に移動させることができる。見かけ上の旋回方向が統一されるので、掘削作業後の積込作業のために旋回体3を左右のどちらの方向に旋回させればよいかオペレータが混乱することを低減できる。オペレータが旋回方向を間違えたり、作業が停滞したりすることを回避できる。したがって、作業性を向上することができる。 Regardless of the relative position of the transport machine 300 with respect to the hydraulic excavator 100, the operator can perform the same operation to swing the revolving body 3 to appropriately move the work implement 2 from the excavating position to the loading position. Since the apparent revolving direction is unified, it is possible to reduce the operator's confusion as to which direction, left or right, the revolving body 3 should be revolved for the loading operation after the excavation operation. It is possible to prevent the operator from making a mistake in the turning direction and from stagnating the work. Therefore, workability can be improved.

図4に示されるように、遠隔コントローラ60は、モード選択部65を有している。モード選択部65は、通常モードと反転モードとのいずれかのモードを選択する。通常モードの設定時、画像出力部67は、カメラ20によって撮像された撮像画像を表示装置50に出力する。制御信号出力部69は、左作業レバー41に入力された旋回方向に旋回体3を旋回させる制御信号を、油圧ショベル100に出力する。反転モードの設定時、画像出力部67は、撮像画像を左右反転した反転画像を表示装置50に出力する。制御信号出力部69は、左作業レバー41に入力された旋回方向とは逆方向に旋回体3を旋回させる制御信号を、油圧ショベル100に出力する。 As shown in FIG. 4, remote controller 60 has mode selector 65 . A mode selection unit 65 selects one of the normal mode and the reverse mode. When the normal mode is set, the image output unit 67 outputs the captured image captured by the camera 20 to the display device 50 . The control signal output unit 69 outputs to the hydraulic excavator 100 a control signal for rotating the revolving body 3 in the revolving direction input to the left work lever 41 . When the reverse mode is set, the image output unit 67 outputs to the display device 50 a reversed image obtained by horizontally reversing the captured image. The control signal output unit 69 outputs to the hydraulic excavator 100 a control signal for rotating the revolving body 3 in the opposite direction to the revolving direction input to the left work lever 41 .

運搬機械300の油圧ショベル100に対する相対位置に従って、通常モードと反転モードとのいずれかのモードを適切に選択することで、旋回体3を旋回させて掘削作業位置から積込作業位置に作業機2を移動させるためのオペレータの操作を統一できる。たとえば、油圧ショベル100の左方に運搬機械300が配置された場合に通常モードとし、油圧ショベル100の右方に運搬機械300が配置された場合に反転モードとすることで、作業機2を掘削作業位置から積込作業位置へと移動させるためのオペレータの操作が左旋回に揃えられることになる。旋回体3を左右のどちらの方向に旋回させればよいかオペレータが混乱することを低減でき、したがって、作業性を向上することができる。 By appropriately selecting one of the normal mode and the reverse mode according to the relative position of the transport machine 300 with respect to the hydraulic excavator 100, the revolving body 3 is revolved to move the work machine 2 from the excavation work position to the loading work position. The operator's operation for moving can be unified. For example, when the transporting machine 300 is placed on the left side of the excavator 100, the normal mode is set, and when the transporting machine 300 is placed on the right side of the hydraulic excavator 100, the reverse mode is set, so that the work implement 2 excavates. The operator's operation for moving from the work position to the loading work position is aligned with the left turn. It is possible to reduce the operator's confusion as to which direction, left or right, the revolving body 3 should be revolved, thus improving workability.

図4に示されるように、遠隔操作装置40は、操作内容設定部46を有している。操作内容設定部46は、通常モードの設定時と反転モードの設定時との両方において、掘削作業後の積込作業のために旋回体3を右旋回方向と左旋回方向とのいずれか一方の方向に旋回させる操作の入力を受け付けるように、遠隔操作装置40の操作内容を設定する。 As shown in FIG. 4 , the remote controller 40 has an operation content setting section 46 . The operation content setting unit 46 rotates the revolving body 3 in either the clockwise or counterclockwise direction for the loading operation after the excavation operation, both when the normal mode is set and when the reversal mode is set. The operation content of the remote control device 40 is set so as to receive an input of an operation to turn in the direction of .

オペレータが、旋回体3を右旋回方向と左旋回方向とのいずれか一方の方向に旋回させる操作をより好む場合には、その好ましい一方方向への旋回操作の入力を受け付け、他方方向への旋回操作の入力を受け付けないように、設定することができる。これにより、オペレータの操作を確実に統一できる。一方方向への旋回によって油圧ショベル100が掘削作業位置から積込作業位置へと移動するように運搬機械300が配置されている場合には通常モードを選択し、他方方向への旋回操作によって油圧ショベル100が掘削作業位置から積込作業位置へと移動するように運搬機械300が配置されている場合には反転モードを選択できる。このようにすれば、オペレータによる一方方向へ旋回させようとする操作で、油圧ショベル100の作業機2を掘削作業位置から積込作業位置へ確実に移動させることができる。 If the operator prefers to turn the turning body 3 in either one of the right turning direction and the left turning direction, the input of the turning operation in the preferred one direction is accepted, and the operation in the other direction is accepted. It can be set not to accept the input of turning operation. As a result, operator operations can be reliably unified. When the transporting machine 300 is arranged so that the excavator 100 moves from the excavation work position to the loading work position by turning in one direction, the normal mode is selected, and the turning operation in the other direction moves the hydraulic excavator 100 to the loading work position. The reversal mode can be selected when the haulage machine 300 is positioned such that the haulage machine 300 moves from the digging position to the loading position. In this way, the operator can reliably move the work implement 2 of the excavator 100 from the excavation work position to the loading work position by the operation of turning it in one direction.

掘削作業後の積込作業のために、旋回体3を右旋回方向と左旋回方向とのいずれか一方の方向に旋回させる操作の入力を受け付け、いずれか他方の方向に旋回させる操作の入力を受け付けないようにすることで、オペレータが左作業レバー41の操作の方向を誤ったとしても、旋回体3が意図しない方向へ旋回することを回避できる。したがって、作業効率の低下を抑制することができる。 For loading work after excavation work, an input of an operation to turn the revolving body 3 in one of the right turning direction and the left turning direction is received, and an input of an operation to turn in the other direction is received. is not accepted, it is possible to prevent the swinging body 3 from swinging in an unintended direction even if the operator operates the left working lever 41 in the wrong direction. Therefore, a decrease in work efficiency can be suppressed.

図4に示されるように、遠隔コントローラ60は、作業位置取得部63を有している。作業位置取得部63は、油圧ショベル100が掘削作業をするときの作業機2の位置である掘削作業位置と、油圧ショベル100が運搬機械300への積込作業をするときの作業機2の位置である積込作業位置との相対位置関係を取得する。掘削作業位置と積込作業位置との相対位置関係に基づいて通常モードと反転モードとのいずれかのモードを選択することができ、これにより、オペレータの統一された操作によって、油圧ショベル100の作業機2を掘削作業位置から積込作業位置へ確実に移動させることができる。 As shown in FIG. 4 , the remote controller 60 has a working position acquisition section 63 . The work position acquisition unit 63 acquires an excavation work position, which is the position of the work implement 2 when the hydraulic excavator 100 performs excavation work, and a position of the work implement 2 when the hydraulic excavator 100 performs loading work on the transport machine 300. Acquire the relative positional relationship with the loading work position. Either the normal mode or the reversal mode can be selected based on the relative positional relationship between the excavation work position and the loading work position. The machine 2 can be reliably moved from the excavating position to the loading position.

図5に示されるように、モード選択部65は、作業位置取得部63の取得する掘削作業位置と積込作業位置との相対位置関係に基づいて、操作内容設定部46によって設定された旋回の方向に旋回体3を旋回させるようにオペレータが左作業レバー41を操作したときに、作業機2が掘削作業位置から積込作業位置へと移動するように、通常モードと反転モードとのいずれかのモードを選択する。遠隔コントローラ60は、操作内容設定部46によって設定された旋回の方向と、作業位置取得部63の取得する掘削作業位置と積込作業位置との相対位置関係とに基づいて、自動で通常モードと反転モードとのいずれかのモードを選択することができる。 As shown in FIG. 5, the mode selection unit 65 selects the turning position set by the operation content setting unit 46 based on the relative positional relationship between the excavation work position and the loading work position acquired by the work position acquisition unit 63. Either the normal mode or the reversal mode is selected so that when the operator operates the left working lever 41 so as to turn the revolving body 3 in the direction, the working machine 2 moves from the excavating work position to the loading work position. mode. The remote controller 60 automatically switches from the normal mode to the normal mode based on the turning direction set by the operation content setting unit 46 and the relative positional relationship between the excavation work position and the loading work position acquired by the work position acquisition unit 63. Either mode with reverse mode can be selected.

図4に示されるように、遠隔操作装置40は、モード設定受付部47を有している。モード設定受付部47は、通常モードと反転モードとのいずれかのモードを選択するオペレータの入力を受け付ける。オペレータは、油圧ショベル100と運搬機械300との相対位置関係に基づいて、自分の好みの方向に旋回体3を旋回させる操作によって作業機2が掘削作業位置から積込作業位置へ移動するように、通常モードと反転モードとのいずれかのモードを選択することができる。 As shown in FIG. 4 , the remote control device 40 has a mode setting reception section 47 . The mode setting reception unit 47 receives an operator's input to select one of the normal mode and the reverse mode. Based on the relative positional relationship between the hydraulic excavator 100 and the transport machine 300, the operator can rotate the revolving body 3 in a desired direction so that the work implement 2 moves from the excavating position to the loading position. , either normal mode or reverse mode can be selected.

図2に示されるように、遠隔操作システム200は、複数の油圧ショベル100を遠隔操作する。図6,9に示されるように、複数の油圧ショベル100の各々毎に、通常モードと反転モードとのいずれかのモードが選択的に設定される。 As shown in FIG. 2 , the remote control system 200 remotely controls a plurality of hydraulic excavators 100 . As shown in FIGS. 6 and 9, each of the plurality of hydraulic excavators 100 is selectively set to either the normal mode or the reverse mode.

図6に示される複数の油圧ショベル100を一人のオペレータが遠隔操作する場合、各々の油圧ショベル100A,100B,100Cを切り替えながら操作をすることになる。複数の油圧ショベル100に、掘削後の旋回方向が異なる油圧ショベル100Cが含まれると、オペレータが混乱することがある。 When one operator remotely operates a plurality of hydraulic excavators 100 shown in FIG. 6, the operation is performed while switching between the respective hydraulic excavators 100A, 100B, and 100C. If the plurality of hydraulic excavators 100 includes the hydraulic excavator 100C that rotates in different directions after excavation, the operator may be confused.

図6に示される油圧ショベル100A,100Bについて通常モードが選択され油圧ショベル100Cについて反転モードが選択されることにより、油圧ショベル100Cについてのみ撮像画像と旋回操作とを反転する。その結果、図9に示されるように、油圧ショベル100A,100B,100CVの作業機2を掘削作業位置から積込作業位置へ移動させるための、旋回体3の見かけ上の旋回方向を統一することができる。複数の油圧ショベル100を全て同じ方向に旋回するように操作することで、オペレータは混乱なく切り替えながらの作業ができる。したがって、作業性を向上することができる。 By selecting the normal mode for the excavators 100A and 100B shown in FIG. 6 and selecting the reversal mode for the excavator 100C, only the excavator 100C is reversed in the captured image and the turning operation. As a result, as shown in FIG. 9, the apparent turning direction of the revolving body 3 for moving the work implements 2 of the hydraulic excavators 100A, 100B, and 100CV from the excavation work position to the loading work position can be unified. can be done. By operating the plurality of hydraulic excavators 100 so that they all turn in the same direction, the operator can work while switching without confusion. Therefore, workability can be improved.

上記の実施形態では、作業機械の一例として油圧ショベル100を挙げているが、ローディングショベル、機械式のロープショベル、バケットクレーン、ホイールローダなどの他の種類の作業機械にも適用可能である。ホイールローダの場合は、旋回体が車体前部となり、左右ステアリング操作によって、右旋回または左旋回を行いながら掘削積込作業を実施する。 In the above-described embodiment, the hydraulic excavator 100 is used as an example of a working machine, but it can also be applied to other types of working machines such as loading shovels, mechanical rope shovels, bucket cranes, and wheel loaders. In the case of a wheel loader, the revolving body is the front part of the vehicle body, and excavation and loading work is carried out while turning right or left by left and right steering operations.

実施形態では、油圧ショベル100が、油圧アクチュエータ34である旋回モータを備え、旋回モータに作動油が供給されることにより旋回体3が旋回する例について説明した。この例に限られず、ショベルは、電気モータを備えてもよい。ショベルは、作業機2の動作および走行の駆動源であるエンジンと、電気エネルギーで旋回体3を駆動する電気モータとを備える、ハイブリッドショベルであってもよい。ショベルは、旋回体3の旋回、走行体5による走行、および作業機2の動作の駆動源がいずれも電動機であり、当該電動機はバッテリに蓄えられた電気エネルギーにより駆動される、電動ショベルであってもよい。 In the embodiment, an example has been described in which the hydraulic excavator 100 includes a swing motor, which is the hydraulic actuator 34, and the swing body 3 swings when hydraulic oil is supplied to the swing motor. The shovel is not limited to this example and may include an electric motor. The excavator may be a hybrid excavator that includes an engine that is a drive source for operating and traveling the work machine 2 and an electric motor that drives the revolving body 3 with electrical energy. The excavator is an electric excavator in which the driving source for the revolving of the revolving body 3, the traveling by the traveling body 5, and the operation of the working machine 2 are all electric motors, and the electric motors are driven by electric energy stored in a battery. may

実施形態では、オペレータは、画像が反転されているか否かを意識することなく、表示装置50に表示されている画像の見たままを頼りに、適切な方向へ旋回体3を旋回させる操作を行う。したがって、他の操作においても同様に画像と矛盾しないことが望ましい。たとえば、油圧ショベルの左走行レバー43および右走行レバー44の操作、ホイールローダの場合における左右ステアリング操作など、左右の極性を持つ操作は、旋回方向反転処理部68の処理と同様に左右反転されることで、矛盾のない操作手法が実現される。 In the embodiment, the operator relies on the image displayed on the display device 50 as he or she sees it, without being conscious of whether or not the image is reversed. conduct. Therefore, it is desirable to be consistent with the image in other operations as well. For example, operations with left-right polarity, such as operation of the left travel lever 43 and right travel lever 44 of a hydraulic excavator, left-right steering operation in the case of a wheel loader, are horizontally reversed in the same manner as the turning direction reversal processing unit 68. Thus, a consistent operating method is realized.

今回開示された実施形態はすべての点で例示であって、制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。 The embodiments disclosed this time are illustrative in all respects and should be considered not restrictive. The scope of the present invention is indicated by the scope of the claims rather than the above description, and is intended to include all modifications within the scope and meaning equivalent to the scope of the claims.

1 本体、2 作業機、3 旋回体、4 車室、4W 窓板、5 走行体、20 カメラ、20A 右前方カメラ、20B 右側方カメラ、20C 後方カメラ、20D 左側方カメラ、20E 前方カメラ、21 アンテナ、21A 第1アンテナ、21B 第2アンテナ、22,72,302 通信装置、23 グローバル座標演算部、26 車体コントローラ、40 遠隔操作装置、41 左作業レバー、42 右作業レバー、43 左走行レバー、44 右走行レバー、45 操縦シート、46 操作内容設定部、47 モード設定受付部、48 左コンソール、49 右コンソール、50 表示装置、60 遠隔コントローラ、61 作業機械選択部、62 画像取得部、63 作業位置取得部、64 操作入力取得部、65 モード選択部、66 画像反転処理部、67 画像出力部、68 旋回方向反転処理部、69 制御信号出力部、100,100A,100B,100C,100CV 油圧ショベル、200 遠隔操作システム、300,300A,300B,300C,300CV 運搬機械、400 ネットワーク、NI 正転画像、RI 反転画像、RX 旋回軸。 REFERENCE SIGNS LIST 1 main body 2 working machine 3 revolving body 4 vehicle compartment 4W window plate 5 traveling body 20 camera 20A right front camera 20B right side camera 20C rear camera 20D left side camera 20E front camera 21 Antenna 21A first antenna 21B second antenna 22,72,302 communication device 23 global coordinate calculation unit 26 vehicle body controller 40 remote control device 41 left work lever 42 right work lever 43 left travel lever 44 right travel lever, 45 control seat, 46 operation content setting unit, 47 mode setting reception unit, 48 left console, 49 right console, 50 display device, 60 remote controller, 61 work machine selection unit, 62 image acquisition unit, 63 work position acquisition unit 64 operation input acquisition unit 65 mode selection unit 66 image reversal processing unit 67 image output unit 68 turning direction reversal processing unit 69 control signal output unit 100, 100A, 100B, 100C, 100CV hydraulic excavator , 200 remote control system, 300, 300A, 300B, 300C, 300CV transport machine, 400 network, NI normal image, RI reverse image, RX pivot axis.

Claims (7)

作業機械を遠隔操作するための遠隔操作システムであって、
前記作業機械は、旋回軸を中心に旋回する旋回体と、前記旋回体に搭載され、作業現場に存在する撮像対象を撮像する撮像装置とを有し、
前記遠隔操作システムは、
前記旋回体の旋回方向についてのオペレータの入力を受け付ける操作装置と、
画像を表示する表示装置と、
前記作業機械を制御するコントローラとを備え、
前記コントローラは、前記撮像装置によって撮像された撮像画像を左右反転した反転画像を前記表示装置に表示し、前記操作装置に入力された前記旋回方向とは逆方向に前記旋回体を旋回させる制御信号を前記作業機械に出力する、遠隔操作システム。
A remote control system for remotely controlling a work machine, comprising:
The work machine has a revolving body that revolves around a revolving axis, and an imaging device that is mounted on the revolving body and captures an image of an imaging target that exists at a work site,
The remote control system is
an operating device that receives an operator's input regarding the turning direction of the turning body;
a display device for displaying an image;
a controller that controls the working machine;
The controller displays on the display device a reversed image obtained by horizontally reversing the captured image captured by the imaging device, and a control signal for rotating the rotating body in a direction opposite to the rotating direction input to the operating device. to the work machine.
前記コントローラは、通常モードと反転モードとを選択的に設定し、
前記通常モードの設定時、前記撮像画像を前記表示装置に表示し、前記操作装置に入力された前記旋回方向に前記旋回体を旋回させる制御信号を前記作業機械に出力し、
前記反転モードの設定時、前記反転画像を前記表示装置に表示し、前記操作装置に入力された前記旋回方向とは逆方向に前記旋回体を旋回させる制御信号を前記作業機械に出力する、請求項1に記載の遠隔操作システム。
The controller selectively sets a normal mode and an inversion mode,
When the normal mode is set, the captured image is displayed on the display device, and a control signal for rotating the rotating body in the rotating direction input to the operating device is output to the working machine,
When the reversal mode is set, the reversal image is displayed on the display device, and a control signal for revolving the revolving body in a direction opposite to the revolving direction input to the operating device is output to the working machine. Item 1. The remote control system according to item 1.
前記通常モードの設定時と前記反転モードの設定時との両方において前記旋回体を一方方向に旋回させる操作の入力を受け付けるように、前記操作装置の操作内容を設定する操作内容設定部をさらに備える、請求項2に記載の遠隔操作システム。 An operation content setting unit configured to set the operation content of the operating device so as to receive an input of an operation to rotate the rotating body in one direction both when the normal mode is set and when the reverse mode is set. 3. The remote control system according to claim 2. 前記作業機械が第1の作業をする第1作業位置と、前記第1作業位置から前記旋回体が旋回した位置である、前記作業機械が第2の作業をする第2作業位置と、の相対位置関係を取得する作業位置取得部をさらに備える、請求項1から請求項3のいずれか1項に記載の遠隔操作システム。 A relationship between a first work position where the work machine performs a first work and a second work position where the work machine performs a second work, which is a position where the revolving body has swung from the first work position 4. The remote control system according to any one of claims 1 to 3, further comprising a work position acquisition unit that acquires positional relationships. 前記コントローラは、前記作業位置取得部の取得する前記相対位置関係に基づいて、前記旋回体を前記一方方向に旋回させる操作で前記作業機械が前記第1作業位置から前記第2作業位置へと移動するように、前記通常モードと前記反転モードとのいずれかのモードを選択する、請求項3を引用する請求項4に記載の遠隔操作システム。 The controller moves the work machine from the first work position to the second work position by an operation of turning the revolving body in the one direction based on the relative positional relationship acquired by the work position acquisition unit. 5. The remote control system according to claim 4, wherein one of the normal mode and the reverse mode is selected so that the remote control system cites claim 3. 前記通常モードと前記反転モードとのいずれかのモードを選択するオペレータの入力を受け付けるモード設定受付部をさらに備える、請求項2または請求項3に記載の遠隔操作システム。 4. The remote control system according to claim 2, further comprising a mode setting reception unit that receives operator input for selecting one of said normal mode and said reverse mode. 前記遠隔操作システムは、複数の前記作業機械を遠隔操作し、
複数の前記作業機械の各々毎に、前記通常モードと前記反転モードとを選択的に設定する、請求項2に記載の遠隔操作システム。
The remote control system remotely controls the plurality of work machines,
3. The remote control system according to claim 2, wherein said normal mode and said reverse mode are selectively set for each of said plurality of work machines.
JP2022026026A 2022-02-22 2022-02-22 Remote operation system Pending JP2023122359A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022026026A JP2023122359A (en) 2022-02-22 2022-02-22 Remote operation system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2022026026A JP2023122359A (en) 2022-02-22 2022-02-22 Remote operation system

Publications (1)

Publication Number Publication Date
JP2023122359A true JP2023122359A (en) 2023-09-01

Family

ID=87799216

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022026026A Pending JP2023122359A (en) 2022-02-22 2022-02-22 Remote operation system

Country Status (1)

Country Link
JP (1) JP2023122359A (en)

Similar Documents

Publication Publication Date Title
CN107407074B (en) Display system and engineering machinery
CN112867831B (en) Excavator
JP2023115325A (en) Shovel
CN111788358B (en) Excavator
CN112840283A (en) Remote operation device for construction machine
WO2020090985A1 (en) Display control system and display control method
CN111902583A (en) Excavator
CN112411662B (en) Excavator
CN114174597A (en) Excavator
WO2022210173A1 (en) Excavator display device and excavator
CN114207223A (en) Control system, control method for work vehicle, and work vehicle
JP2023122359A (en) Remote operation system
CN114206703A (en) Control system, control method for work vehicle, and work vehicle
US20220341124A1 (en) Shovel and remote operation support apparatus
WO2022210143A1 (en) Display device for shovel, shovel, and shovel asssistance device
WO2021166559A1 (en) Remote operation system for work machine
CN112384660B (en) Working machine
CN113454292A (en) Excavator
US20230167627A1 (en) Work machine remote control system
US20230050071A1 (en) Work machine and remote control system for work machine
KR102659076B1 (en) shovel
JP7092714B2 (en) Work machine control device and work machine control method
JP2022137769A (en) Shovel, and information processor
JP2023122360A (en) image generation system
CN117242227A (en) Control system and control method for loading machine