JP6471030B2 - Remote control system for cargo handling equipment - Google Patents

Remote control system for cargo handling equipment Download PDF

Info

Publication number
JP6471030B2
JP6471030B2 JP2015082500A JP2015082500A JP6471030B2 JP 6471030 B2 JP6471030 B2 JP 6471030B2 JP 2015082500 A JP2015082500 A JP 2015082500A JP 2015082500 A JP2015082500 A JP 2015082500A JP 6471030 B2 JP6471030 B2 JP 6471030B2
Authority
JP
Japan
Prior art keywords
cargo handling
handling machine
side transmission
remote operation
transmission device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015082500A
Other languages
Japanese (ja)
Other versions
JP2016199388A (en
Inventor
貴章 西川
貴章 西川
進 下田
進 下田
林 亨
亨 林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
IHI Transport Machinery Co Ltd
Original Assignee
IHI Transport Machinery Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by IHI Transport Machinery Co Ltd filed Critical IHI Transport Machinery Co Ltd
Priority to JP2015082500A priority Critical patent/JP6471030B2/en
Publication of JP2016199388A publication Critical patent/JP2016199388A/en
Application granted granted Critical
Publication of JP6471030B2 publication Critical patent/JP6471030B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Ship Loading And Unloading (AREA)

Description

本発明は、荷役運搬機械の遠隔操作システムに関するものである。   The present invention relates to a remote operation system for a cargo handling machine.

一般に、荷役運搬機械としては、例えば、アンローダ、コンテナクレーン、タワークレーン等が存在する。   In general, for example, an unloader, a container crane, a tower crane, or the like exists as a cargo handling and transporting machine.

前述の如き荷役運搬機械の場合、高所に運転室が設けられ、該運転室にオペレータが乗り込み、操作レバーや各種スイッチ等の運転操作用機器を操作することにより運転を行うようになっている。   In the case of the cargo handling machine as described above, a driver's cab is provided at a high place, and an operator gets into the driver's cab and operates by operating driving operation devices such as operation levers and various switches. .

しかしながら、近年、特にアンローダやコンテナクレーンの場合、荷役運搬機械の大型化並びに高速化に伴い、前記運転室の設置位置は更に高く且つ運転室の移動も高速となっているため、オペレータの負担が大きくなり、労働条件が過酷になっていると共に、オペレータのための落下防止用の安全装置等を設置する必要もあった。   However, in recent years, especially in the case of unloaders and container cranes, with the increase in size and speed of the cargo handling equipment, the installation position of the operator's cab is higher and the operator's cab is moving at a higher speed. It has become larger and the working conditions have become severe, and it has been necessary to install a safety device for preventing the fall of the operator.

このため、高所での過酷な運転作業をなくすことができ、オペレータの負担軽減を図り得ると共に、運転室並びにオペレータのための落下防止用の安全装置等の設置を不要とし得る荷役運搬機械の遠隔操作システムの開発が進められている。   For this reason, it is possible to eliminate a severe driving operation at a high place, reduce the burden on the operator, and eliminate the need to install a safety device for preventing the operator's cab and the operator from falling, etc. Development of remote control system is in progress.

尚、前記荷役運搬機械の遠隔操作システムの一般的技術水準を示すものとしては、例えば、特許文献1、2、3がある。   In addition, there exist patent document 1, 2, 3 as what shows the general technical level of the remote control system of the said material handling machine.

特開平6−206618号公報JP-A-6-206618 特開2003−212475号公報JP 2003-212475 A 特開2013−116773号公報JP 2013-116773 A

しかしながら、特許文献1、2、3に開示されている荷役運搬機械の遠隔操作システムはいずれも、カメラの撮像映像をそのまま表示させているだけであるため、実際の運転室での操作と比較して距離感がつかみにくく、操作性の面で改善が望まれていた。   However, all of the remote control systems for cargo handling machines disclosed in Patent Documents 1, 2, and 3 simply display the captured image of the camera as it is, and therefore, compared with the actual operation in the cab. Therefore, it is difficult to grasp the sense of distance, and improvement in operability has been desired.

本発明は、上記従来の問題点に鑑みてなしたもので、実際の映像に距離や状態量等の情報を併せて表示することにより、操作性を向上し得る荷役運搬機械の遠隔操作システムを提供しようとするものである。   The present invention has been made in view of the above-described conventional problems, and provides a remote operation system for a cargo handling machine that can improve operability by displaying information such as distance and state quantity in an actual image. It is something to be offered.

本発明は、荷役運搬機械に機械側遠隔運転制御機器を設けると共に、地上に遠隔操作室を設置し、該遠隔操作室でのオペレータによる操作により荷役運搬機械の運転を行う荷役運搬機械の遠隔操作システムであって、
前記機械側遠隔運転制御機器は、
前記荷役運搬機械の運転状況映像を撮像する監視カメラと、
前記荷役運搬機械の状態量を検出するセンサと、
該センサで検出された荷役運搬機械の状態量が入力され且つ荷役運搬機械の駆動装置を制御する本体制御コントローラと、
前記監視カメラから映像データを取り込み且つ前記本体制御コントローラとの間で制御データの授受を行う荷役運搬機械側伝送装置と、
を備え、
前記遠隔操作室には、
前記荷役運搬機械を操作する操作機器と、
該操作機器からの信号を集約する操作機器信号集約コントローラと、
該操作機器信号集約コントローラとの間で制御データの授受を行い且つ前記荷役運搬機械側伝送装置との間で信号を送受信する遠隔操作室側伝送装置と、
該遠隔操作室側伝送装置で受信された前記映像データに基づき前記荷役運搬機械の接触を回避すべき物体までの距離を画像処理によって割り出す画像処理装置と、
該画像処理装置で割り出された距離及び前記センサで検出された荷役運搬機械の状態量をオーバーレイした実際の運転状況映像を表示し且つオペレータが装着自在な装着表示装置と
を設けたことを特徴とする荷役運搬機械の遠隔操作システムにかかるものである。
The present invention provides a machine-side remote operation control device in a cargo handling machine, a remote operation room installed on the ground, and the operation of the cargo handling machine by an operation by an operator in the remote operation room. A system,
The machine side remote operation control device is,
A surveillance camera that captures an operation status image of the material handling and handling machine;
A sensor for detecting a state quantity of the cargo handling machine;
A main body controller for inputting a state quantity of the cargo handling machine detected by the sensor and controlling a driving device of the cargo handling machine;
A loading / unloading machine-side transmission device that captures video data from the monitoring camera and exchanges control data with the main body controller;
With
In the remote control room,
An operating device for operating the cargo handling machine;
An operation device signal aggregation controller for collecting signals from the operation device;
A remote operation room side transmission device that exchanges control data with the operation equipment signal aggregation controller and transmits / receives signals to / from the cargo handling machine side transmission device;
An image processing device for determining, by image processing, a distance to an object that should avoid contact with the cargo handling machine based on the video data received by the remote control room side transmission device;
And a mounting display device that displays an actual driving situation image overlaying the distance determined by the image processing apparatus and the state quantity of the cargo handling machine detected by the sensor, and that can be mounted by an operator. This is related to the remote control system for the cargo handling machine.

前記荷役運搬機械の遠隔操作システムにおいては、前記遠隔操作室に、前記遠隔操作室側伝送装置へ接点データを入力する非常停止スイッチを設けると共に、該非常停止スイッチにより接点データが遠隔操作室側伝送装置へ入力された際に前記荷役運搬機械側伝送装置から出力される接点データにより電磁接触器を切断し前記駆動装置への電力供給を遮断するハードワイヤードを前記機械側遠隔運転制御機器に備えることが好ましい。   In the remote operation system for the cargo handling machine, an emergency stop switch for inputting contact data to the remote operation room side transmission device is provided in the remote operation room, and contact data is transmitted by the emergency stop switch to the remote operation room side. The machine-side remote operation control device is provided with a hard-wired device that cuts off the magnetic contactor and cuts off the power supply to the drive device by contact data output from the cargo handling machine side transmission device when input to the device. Is preferred.

前記荷役運搬機械の遠隔操作システムにおいて、前記監視カメラは、ステレオカメラ、或いは単眼カメラを複数個配設して構成したステレオカメラであることが好ましい。   In the remote operation system for the cargo handling machine, the monitoring camera is preferably a stereo camera or a stereo camera configured by arranging a plurality of monocular cameras.

前記荷役運搬機械の遠隔操作システムにおいては、前記遠隔操作室に、オペレータの声を音声データとして遠隔操作室側伝送装置へ入力するマイクと、該遠隔操作室側伝送装置から出力される音声データに基づき実際の音声を出力するスピーカとを設けると共に、現場監視員の声を音声データとして荷役運搬機械側伝送装置へ入力するマイクと、該荷役運搬機械側伝送装置から出力される音声データに基づき実際の音声を出力するスピーカとを前記機械側遠隔運転制御機器に備えることが好ましい。   In the remote operation system for the cargo handling machine, a microphone for inputting an operator's voice as audio data to the remote operation room side transmission device and audio data output from the remote operation room side transmission device are input to the remote operation room. And a speaker for outputting the actual sound based on the voice, and a microphone for inputting the voice of the on-site supervisor as voice data to the cargo handling machine side transmission device and the voice data output from the cargo handling machine side transmission device. It is preferable that the machine side remote operation control device is provided with a speaker that outputs the sound of

前記荷役運搬機械の遠隔操作システムにおいては、前記荷役運搬機械側伝送装置と前記遠隔操作室側伝送装置とを光ファイバーケーブルで接続することが好ましい。   In the remote handling system for the cargo handling machine, it is preferable that the cargo handling machine side transmission device and the remote control room side transmission device are connected by an optical fiber cable.

本発明の荷役運搬機械の遠隔操作システムによれば、実際の映像に距離や状態量等の情報を併せて表示することにより、操作性を向上し得るという優れた効果を奏し得る。   According to the remote operation system for a cargo handling machine of the present invention, it is possible to obtain an excellent effect that operability can be improved by displaying information such as distance and state quantity in an actual image.

本発明の荷役運搬機械の遠隔操作システムの実施例を示すブロック図である。It is a block diagram which shows the Example of the remote control system of the material handling machine of this invention. 本発明の荷役運搬機械の遠隔操作システムの実施例における駆動装置の動力系統を示す電気回路図である。It is an electric circuit diagram which shows the motive power system of the drive device in the Example of the remote control system of the material handling machine of this invention. 本発明の荷役運搬機械の遠隔操作システムの実施例における装着表示装置としてウェアラブルグラスを用い固定表示装置として大画面モニタを用いた場合の操作手順を示すフローチャートである。It is a flowchart which shows the operation procedure at the time of using a wearable glass as a mounting | wearing display apparatus and using a large screen monitor as a fixed display apparatus in the Example of the remote operation system of the material handling machine of this invention. 本発明の荷役運搬機械の遠隔操作システムの実施例における装着表示装置としてウェアラブルグラスを用い固定表示装置として大画面モニタを用いた場合の操作手順を示すフローチャートである。It is a flowchart which shows the operation procedure at the time of using a wearable glass as a mounting | wearing display apparatus and using a large screen monitor as a fixed display apparatus in the Example of the remote operation system of the material handling machine of this invention. 本発明の遠隔操作システムが適用される荷役運搬機械の一例として連続式アンローダを示す概要構成図である。It is a schematic block diagram which shows a continuous unloader as an example of the cargo handling machine to which the remote control system of this invention is applied. 図5のVI部詳細図である。FIG. 6 is a detailed view of a VI part in FIG. 5.

以下、本発明の実施の形態を添付図面を参照して説明する。   Embodiments of the present invention will be described below with reference to the accompanying drawings.

図1〜図6は本発明の荷役運搬機械の遠隔操作システムの実施例である。   1 to 6 show an embodiment of a remote control system for a cargo handling machine according to the present invention.

先ず、本発明の遠隔操作システムが適用される荷役運搬機械の一例として連続式アンローダについてその概要を説明する。   First, an outline of a continuous unloader will be described as an example of a cargo handling machine to which the remote control system of the present invention is applied.

前記荷役運搬機械としての連続式アンローダは、図5に示す如く、岸壁1に敷設されたレール2上を走行可能な走行フレーム3上に、傾動自在なブーム4を備えた旋回フレーム5を設け、前記ブーム4先端に、船倉6の内部の鉄鉱石等のバラ物7を掻き取って船倉6の外部に搬出可能なバケットエレベータ8を吊り下げてなる構成を有している。前記ブーム4の内部には、前記バケットエレベータ8で掻き取ったバラ物7をブーム4基端側へ搬送可能なブームコンベヤ9が配設されている。又、前記走行フレーム3には、前記ブームコンベヤ9からシュート11を介して送給されるバラ物7を走行フレーム3の外部に搬出可能な搬出コンベヤ10が配設されている。   As shown in FIG. 5, the continuous unloader as the cargo handling machine is provided with a revolving frame 5 having a tiltable boom 4 on a traveling frame 3 capable of traveling on a rail 2 laid on the quay 1, At the tip of the boom 4, a bucket elevator 8 that scrapes off a loose object 7 such as iron ore inside the hold 6 and can be carried out of the hold 6 is suspended. Inside the boom 4 is disposed a boom conveyor 9 capable of conveying the loose article 7 scraped by the bucket elevator 8 to the base end side of the boom 4. The traveling frame 3 is provided with a carry-out conveyor 10 that can carry the loose article 7 fed from the boom conveyor 9 through the chute 11 to the outside of the traveling frame 3.

前記連続式アンローダにおいては、船倉6の内部のバラ物7は、バケットエレベータ8のバケット19によって掻き取られて船倉6の外部に積み出され、ブームコンベヤ9によってブーム4の先端側から基端側へ搬送され、シュート11を介して搬出コンベヤ10上に落下し、該搬出コンベヤ10により走行フレーム3の外部へ搬出されるようになっている。   In the continuous unloader, the bulk material 7 inside the hold 6 is scraped off by the bucket 19 of the bucket elevator 8 and loaded out of the hold 6, and the boom 4 moves from the front end side to the base end side of the boom 4. And is dropped onto the carry-out conveyor 10 via the chute 11 and is carried out of the traveling frame 3 by the carry-out conveyor 10.

前記バケットエレベータ8は、図5及び図6に示す如く、前記ブーム4先端に上下方向へ延びる本体フレーム12を枢着して構成されている。該本体フレーム12の下端部には、端面を開放した外枠フレーム13に対し入れ子状となるよう内枠フレーム14を伸縮自在に配設してなる掻き取り部フレーム15が、昇降フレーム23を介し略水平に取り付けられている。前記掻き取り部フレーム15の外枠フレーム13の基端と内枠フレーム14の先端にはスプロケット16,17が設けられ、該スプロケット16,17と前記本体フレーム12上部に設けられたスプロケット18には、多数のバラ物7掻き取り用のバケット19を取り付けた無端状のチェーン20が掛け回されている。   As shown in FIGS. 5 and 6, the bucket elevator 8 is configured by pivotally attaching a main body frame 12 extending in the vertical direction at the tip of the boom 4. At the lower end of the main body frame 12, a scraper frame 15, which has an inner frame frame 14 that is telescopically disposed so as to be nested with respect to the outer frame frame 13 with an open end face, is provided via a lifting frame 23. It is mounted almost horizontally. Sprockets 16 and 17 are provided at the proximal end of the outer frame 13 and the distal end of the inner frame 14 of the scraping part frame 15, and the sprockets 16 and 17 and the sprocket 18 provided on the upper part of the main body frame 12 are provided. An endless chain 20 to which a large number of buckets 19 for scraping off loose articles 7 are attached is hung around.

前記外枠フレーム13に対する内枠フレーム14の伸縮は、シリンダ21の伸縮作動によって行われるようになっている。又、前記内枠フレーム14の伸縮に伴いチェーン20の張力変化が生じることをなくすために、前記外枠フレーム13は、本体フレーム12に対しシリンダ22の伸縮作動により昇降可能な昇降フレーム23に連結されている。図6中実線で示すように前記シリンダ21が伸張して内枠フレーム14が外枠フレーム13に対して伸びるときには、前記シリンダ21の作動と連動してシリンダ22が伸張し昇降フレーム23を介して外枠フレーム13が本体フレーム12側に引き寄せられる形で上昇するようになっている。一方、図6中仮想線で示すように前記シリンダ21が収縮して内枠フレーム14が外枠フレーム13に対して縮むときには、前記シリンダ21の作動と連動してシリンダ22が収縮し昇降フレーム23を介して外枠フレーム13が本体フレーム12側から離される形で下降し、これによりチェーン20の張力が常に一定に保持されるようになっている。   The expansion and contraction of the inner frame 14 with respect to the outer frame 13 is performed by the expansion and contraction operation of the cylinder 21. The outer frame frame 13 is connected to an elevating frame 23 that can be moved up and down by the expansion and contraction operation of the cylinder 22 with respect to the main body frame 12 in order to prevent the tension of the chain 20 from changing due to the expansion and contraction of the inner frame frame 14. Has been. As shown by the solid line in FIG. 6, when the cylinder 21 extends and the inner frame 14 extends relative to the outer frame 13, the cylinder 22 expands in conjunction with the operation of the cylinder 21 and passes through the lifting frame 23. The outer frame 13 is raised so as to be drawn toward the main body frame 12 side. On the other hand, when the cylinder 21 contracts and the inner frame frame 14 contracts with respect to the outer frame frame 13 as shown by the phantom line in FIG. As a result, the outer frame 13 is lowered away from the main body frame 12 side, so that the tension of the chain 20 is always kept constant.

そして、本実施例では、前記連続式アンローダに、図1に示す如く、機械側遠隔運転制御機器50を設けると共に、地上に遠隔操作室80を設置し、該遠隔操作室80でのオペレータによる操作により前記連続式アンローダの運転を行うようにしてある。   In this embodiment, as shown in FIG. 1, the continuous unloader is provided with a machine-side remote operation control device 50 and a remote operation room 80 on the ground, and an operation by the operator in the remote operation room 80 is performed. Thus, the continuous unloader is operated.

前記機械側遠隔運転制御機器50は、監視カメラ51と、センサ52と、マイク53及びスピーカ54と、本体制御コントローラ55と、ハードワイヤード56と、荷役運搬機械側伝送装置57とを備えている。   The machine-side remote operation control device 50 includes a monitoring camera 51, a sensor 52, a microphone 53 and a speaker 54, a main body controller 55, a hard wired 56, and a cargo handling machine side transmission device 57.

前記監視カメラ51は、前記連続式アンローダの運転状況映像を撮像するステレオカメラである。前記監視カメラ51は、単眼カメラを複数個配設して構成したステレオカメラであっても良い。尚、前記監視カメラ51は、例えば、図5の本体フレーム12の上方における複数箇所、並びに該本体フレーム12の下部における複数箇所に設けるようにしてある。   The monitoring camera 51 is a stereo camera that captures an operation status image of the continuous unloader. The monitoring camera 51 may be a stereo camera configured by arranging a plurality of monocular cameras. The monitoring cameras 51 are provided at, for example, a plurality of locations above the main body frame 12 and a plurality of locations below the main body frame 12 in FIG.

前記センサ52は、前記連続式アンローダの状態量を検出するものである。前記連続式アンローダの状態量としては、例えば、バケットエレベータ駆動トルク、払出量、ブーム起伏シリンダ圧力、風速等を挙げることができる。   The sensor 52 detects a state quantity of the continuous unloader. Examples of the state quantity of the continuous unloader include a bucket elevator driving torque, a payout amount, a boom hoisting cylinder pressure, and a wind speed.

前記本体制御コントローラ55は、前記センサ52で検出された前記連続式アンローダの状態量が入力され且つ前記連続式アンローダのインバータモータ等の駆動装置58を制御するようになっている。   The main body controller 55 receives the state quantity of the continuous unloader detected by the sensor 52 and controls a driving device 58 such as an inverter motor of the continuous unloader.

前記荷役運搬機械側伝送装置57は、前記監視カメラ51から映像データを取り込み且つ前記本体制御コントローラ55との間で制御データの授受を行うようになっている。   The cargo handling and transporting machine side transmission device 57 takes video data from the monitoring camera 51 and exchanges control data with the main body controller 55.

一方、前記遠隔操作室80には、操作機器81と、操作機器信号集約コントローラ82と、遠隔操作室側伝送装置83と、画像処理装置84と、装着表示装置85と、マイク86及びスピーカ87と、非常停止スイッチ88と、固定表示装置89とを設けてある。   On the other hand, the remote operation room 80 includes an operation device 81, an operation device signal aggregation controller 82, a remote operation room side transmission device 83, an image processing device 84, a mounting display device 85, a microphone 86 and a speaker 87. An emergency stop switch 88 and a fixed display device 89 are provided.

前記操作機器81は、前記連続式アンローダを操作する機器である。   The operating device 81 is a device that operates the continuous unloader.

前記操作機器信号集約コントローラ82は、前記操作機器81からの信号を集約するようになっている。   The operation device signal aggregation controller 82 is configured to collect signals from the operation device 81.

前記遠隔操作室側伝送装置83は、前記操作機器信号集約コントローラ82との間で制御データの授受を行い且つ前記荷役運搬機械側伝送装置57との間で信号を送受信するようになっている。   The remote operation room side transmission device 83 exchanges control data with the operation equipment signal aggregation controller 82 and transmits / receives signals to / from the cargo handling machine side transmission device 57.

前記画像処理装置84は、前記遠隔操作室側伝送装置83で受信された前記映像データに基づき前記連続式アンローダの接触を回避すべき物体(例えば、船倉6の開口縁部や内壁その他)までの距離を画像処理によって割り出すようになっている。   The image processing device 84 is connected to an object (for example, an opening edge or inner wall of the hold 6 or the like) that should avoid contact with the continuous unloader based on the video data received by the remote control room side transmission device 83. The distance is determined by image processing.

前記装着表示装置85は、前記画像処理装置84で割り出された距離及び前記センサ52で検出された前記連続式アンローダの状態量をオーバーレイした実際の運転状況映像を表示するようになっている。前記装着表示装置85としては、例えば、オペレータが装着自在なウェアラブルグラスを採用することができる。因みに、前記装着表示装置85としてのウェアラブルグラスに対する情報表示に関しては、人が知覚する現実環境をコンピュータによって拡張する拡張現実(AR:Augmented Reality)の技術が応用できる。   The wearing display device 85 displays an actual driving situation image that overlays the distance determined by the image processing device 84 and the state quantity of the continuous unloader detected by the sensor 52. As the wearing display device 85, for example, wearable glasses that can be worn by an operator can be adopted. Incidentally, regarding the information display on the wearable glass as the wearing display device 85, augmented reality (AR) technology in which a real environment perceived by a person is expanded by a computer can be applied.

又、本実施例の場合、前記装着表示装置85に加え更に大画面モニタのような固定表示装置89を設け、実際の運転状況映像を表示するようになっている。前記大画面モニタのような固定表示装置89は、必要箇所に対して遠近処理(三次元距離画像表示用処理)や水蒸気透過処理、暗視処理、逆光補正、全周囲俯瞰映像処理(サラウンドビュー(登録商標)用処理)等の画像処理された監視カメラ51の映像を常時表示する機能を有している。前記監視カメラ51の映像は、緊急時の画面切替の手間をなくすため、全て常時分割して表示するようになっている。尚、前記連続式アンローダの動作方向をオペレータが混乱しない映像表示とする。   In the present embodiment, a fixed display device 89 such as a large screen monitor is provided in addition to the mounting display device 85 so as to display an actual driving situation image. The fixed display device 89 such as the large screen monitor has a perspective process (three-dimensional distance image display process), a water vapor transmission process, a night vision process, a backlight correction, an all-around overhead view video process (surround view ( (Registered trademark) processing) and the like. All the images of the monitoring camera 51 are always divided and displayed in order to eliminate the trouble of screen switching in an emergency. It should be noted that the operation direction of the continuous unloader is a video display that does not disturb the operator.

前記装着表示装置85と固定表示装置89は前記操作機器信号集約コントローラ82にも接続されている。   The wearing display device 85 and the fixed display device 89 are also connected to the operation device signal aggregation controller 82.

前記非常停止スイッチ88は、前記遠隔操作室側伝送装置83へ接点データを入力するようになっており、該非常停止スイッチ88により接点データが遠隔操作室側伝送装置83へ入力された際には、前記荷役運搬機械側伝送装置57から出力される接点データにより前記ハードワイヤード56が作動して電磁接触器68,69,71(図2参照)を切断し前記駆動装置58への電力供給を遮断するようになっている。   The emergency stop switch 88 inputs contact data to the remote operation room side transmission device 83. When contact data is input to the remote operation room side transmission device 83 by the emergency stop switch 88, the emergency stop switch 88 receives the contact data. The hard wired 56 is activated by the contact data output from the cargo handling machine side transmission device 57 to cut off the magnetic contactors 68, 69, 71 (see FIG. 2) and cut off the power supply to the drive device 58. It is supposed to be.

前記遠隔操作室80に設けられたマイク86は、オペレータの声を音声データとして遠隔操作室側伝送装置83へ入力し、又、前記機械側遠隔運転制御機器50に備えられたマイク53は、現場監視員の声を音声データとして荷役運搬機械側伝送装置57へ入力するようになっている。前記遠隔操作室80に設けられたスピーカ87は、前記遠隔操作室側伝送装置83から出力される音声データに基づき実際の音声を出力し、又、前記機械側遠隔運転制御機器50に備えられたスピーカ54は、前記荷役運搬機械側伝送装置57から出力される音声データに基づき実際の音声を出力するようになっている。尚、前記連続式アンローダの場合、船倉6のハッチ口の周りに現場監視員が配備され、前記マイク53、マイク86及びスピーカ54、スピーカ87を通じて、現場監視員とオペレータとの間でバラ物7の掻き取りに関する指示や連絡を相互に行うようになっている。   The microphone 86 provided in the remote operation room 80 inputs the operator's voice as voice data to the remote operation room side transmission device 83, and the microphone 53 provided in the machine side remote operation control device 50 includes The voice of the supervisor is input to the cargo handling machine side transmission device 57 as voice data. The speaker 87 provided in the remote operation room 80 outputs an actual sound based on the sound data output from the remote operation room side transmission device 83, and is provided in the machine side remote operation control device 50. The speaker 54 outputs an actual voice based on the voice data output from the cargo handling machine side transmission device 57. In the case of the continuous unloader, an on-site supervisor is arranged around the hatch mouth of the hold 6, and the loose object 7 is exchanged between the on-site supervisor and the operator through the microphone 53, microphone 86, speaker 54, and speaker 87. Instructions and communications regarding scraping of each other are made mutually.

前記荷役運搬機械側伝送装置57と前記遠隔操作室側伝送装置83は、光ファイバーケーブルOFCで接続してある。尚、状況に応じて無線にすることも可能である。   The cargo handling machine side transmission device 57 and the remote control room side transmission device 83 are connected by an optical fiber cable OFC. Note that it is possible to be wireless depending on the situation.

前記荷役運搬機械としての前記連続式アンローダの場合、前記駆動装置58としては、例えば、図2に示す如く、バケットエレベータ駆動モータ59、バケットエレベータ旋回モータ60、ブーム旋回モータ61、走行モータ62、ブーム起伏油圧ポンプ63、ブームコンベヤモータ64を挙げることができる。前記バケットエレベータ駆動モータ59、バケットエレベータ旋回モータ60、ブーム旋回モータ61、走行モータ62は、電源ACに対し断路器65、変圧器66、遮断器67、電磁接触器68を介して並列接続されている。前記ブーム起伏油圧ポンプ63は、電源ACに対し断路器65、変圧器66、電磁接触器69、遮断器70を介して接続されている。前記ブームコンベヤモータ64は、電源ACに対し断路器65、変圧器66、電磁接触器71、遮断器72を介して接続されている。前記電磁接触器68,69,71は、前記非常停止スイッチ88により接点データ(図1参照)が遠隔操作室側伝送装置83へ入力された際、前記荷役運搬機械側伝送装置57から出力される接点データ(図1参照)による前記ハードワイヤード56の作動によって切断され、前記駆動装置58(バケットエレベータ駆動モータ59、バケットエレベータ旋回モータ60、ブーム旋回モータ61、走行モータ62、ブーム起伏油圧ポンプ63、ブームコンベヤモータ64)への電力供給を遮断するようになっている。これにより、前記本体制御コントローラ55(図1参照)が万一故障しても、非常停止だけは正常に作動するようにしてある。   In the case of the continuous unloader as the cargo handling machine, the drive device 58 includes, for example, a bucket elevator drive motor 59, a bucket elevator turning motor 60, a boom turning motor 61, a traveling motor 62, and a boom as shown in FIG. An undulating hydraulic pump 63 and a boom conveyor motor 64 can be exemplified. The bucket elevator drive motor 59, the bucket elevator turning motor 60, the boom turning motor 61, and the traveling motor 62 are connected in parallel to the power source AC via a disconnector 65, a transformer 66, a circuit breaker 67, and an electromagnetic contactor 68. Yes. The boom hoisting hydraulic pump 63 is connected to the power supply AC through a disconnector 65, a transformer 66, an electromagnetic contactor 69, and a circuit breaker 70. The boom conveyor motor 64 is connected to the power source AC through a disconnector 65, a transformer 66, an electromagnetic contactor 71, and a circuit breaker 72. When the contact data (see FIG. 1) is input to the remote control room side transmission device 83 by the emergency stop switch 88, the electromagnetic contactors 68, 69, 71 are output from the cargo handling machine side transmission device 57. The drive device 58 (bucket elevator drive motor 59, bucket elevator swing motor 60, boom swing motor 61, travel motor 62, boom hoisting hydraulic pump 63, The power supply to the boom conveyor motor 64) is cut off. As a result, even if the main body controller 55 (see FIG. 1) breaks down, only an emergency stop operates normally.

前記装着表示装置85としてのウェアラブルグラスは、操作開始/終了モード機能、通常運用モード機能、異常発生時モード機能、ガイダンス機能という四つの機能を有し、オペレータの操作を支援するための追加情報が表示されると共に、音声ガイダンスが流されるようになっている。   The wearable glass as the wearing display device 85 has four functions of an operation start / end mode function, a normal operation mode function, an abnormality occurrence mode function, and a guidance function, and additional information for supporting the operation of the operator. In addition to being displayed, voice guidance is played.

前記操作開始/終了モード機能は、前記連続式アンローダの操作準備の状態表示(操作準備が完了しているかどうかの表示)と、前記連続式アンローダの操作準備を完了するための操作の開始/終了手順表示とを行う機能である。   The operation start / end mode function includes an operation preparation status display of the continuous unloader (displaying whether or not operation preparation is completed) and an operation start / end for completing the operation preparation of the continuous unloader. This is a function to display the procedure.

前記通常運用モード機能は、運転状態表示と、距離・状態量表示と、カメラ映像とを表示する機能である。運転状態表示は、連続式アンローダの運転中(駆動中)/停止中の状態を表示するものである。前記距離・状態量表示は、オペレータが常に監視したい前記連続式アンローダの距離・状態量表示と、距離・状態量監視による警告の表示とを行うものである。前記距離・状態量表示では、連続式アンローダを例にした場合、例えば、バケットエレベータ8と船倉6の開口縁部や内壁との距離、並びにバケットエレベータ駆動トルク、払出量、ブーム起伏シリンダ圧力、風速等を表示するようになっている。これと併せて設定状態の表示と切替も行えるようになっている。そして、前記距離・状態量監視により、前記バケットエレベータ8と船倉6の開口縁部や内壁との距離が許容値未満となったり、バケットエレベータ駆動トルク、払出量、ブーム起伏シリンダ圧力、風速等がそれぞれ許容値を超えたりした場合には、警告を表示すると共に、警告回避操作指示も行われるようになっている。前記カメラ映像表示では、複数ある監視カメラ51の映像からオペレータが選択した一つの映像を表示するようになっている。   The normal operation mode function is a function for displaying a driving state display, a distance / state amount display, and a camera image. The operation status display indicates a status of the continuous unloader being operated (driving) / stopped. The distance / state quantity display displays the distance / state quantity of the continuous unloader that the operator always wants to monitor and displays a warning by monitoring the distance / state quantity. In the distance / state quantity display, when a continuous unloader is taken as an example, for example, the distance between the bucket elevator 8 and the opening edge or inner wall of the hold 6, the bucket elevator driving torque, the discharge amount, the boom hoisting cylinder pressure, the wind speed Etc. are displayed. At the same time, the setting state can be displayed and switched. And by the distance / state quantity monitoring, the distance between the bucket elevator 8 and the opening edge or inner wall of the hold 6 becomes less than the allowable value, the bucket elevator driving torque, the amount of delivery, the boom hoisting cylinder pressure, the wind speed, etc. When each exceeds an allowable value, a warning is displayed and a warning avoidance operation instruction is also given. In the camera image display, one image selected by the operator from the images of a plurality of monitoring cameras 51 is displayed.

前記異常発生時モード機能は、故障状態(重/軽故障)、故障内容(エラー番号、エラー項目)、故障復旧手順を表示する機能である。   The abnormality occurrence mode function is a function for displaying a failure state (heavy / light failure), a failure content (error number, error item), and a failure recovery procedure.

前記ガイダンス機能は、上記の三つの機能(操作開始/終了モード機能、通常運用モード機能、異常発生時モード機能)に応じた音声ガイダンス機能である。   The guidance function is a voice guidance function corresponding to the above three functions (operation start / end mode function, normal operation mode function, and abnormality occurrence mode function).

前記装着表示装置85としてのウェアラブルグラスの操作入力としては、音声認識、視線追尾、ジェスチャー、ジョイスティック、トラックボール、マウス、タッチパッド等を選択することができる。尚、前記装着表示装置85としては、ヘッドマウントディスプレイを採用しても良い。   As an operation input of the wearable glass as the wearing display device 85, voice recognition, line-of-sight tracking, gesture, joystick, trackball, mouse, touch pad, or the like can be selected. The mounting display device 85 may be a head mounted display.

前記固定表示装置89としての大画面モニタでは、必要箇所に対して遠近処理(三次元距離画像表示用処理)や水蒸気透過処理、暗視処理、逆光補正、全周囲俯瞰映像処理(サラウンドビュー(登録商標)用処理)等の画像処理された監視カメラ51の映像が常時表示される。   In the large screen monitor as the fixed display device 89, a perspective process (3D distance image display process), a water vapor transmission process, a night vision process, a backlight correction, an all-around overhead view video process (surround view (registered) The image of the surveillance camera 51 subjected to image processing such as (trademark) processing) is always displayed.

そして、前記装着表示装置85としてのウェアラブルグラス及び前記固定表示装置89としての大画面モニタを用いた場合の操作手順は、図3及び図4に示すフローチャートのようになる。   The operation procedure when the wearable glass as the wearing display device 85 and the large screen monitor as the fixed display device 89 are used is as shown in the flowcharts of FIGS.

先ず、オペレータがウェアラブルグラスを装着し、該ウェアラブルグラス及び大画面モニタを起動する(ステップS1参照)。   First, the operator wears wearable glasses and activates the wearable glasses and the large screen monitor (see step S1).

前記ステップS1でウェアラブルグラス及び大画面モニタを起動後、荷役運搬機械としての連続式アンローダの操作電源を投入する(ステップS2参照)。該ステップS2で操作電源を投入した後、前記荷役運搬機械の運転準備判定が行われる(ステップS3参照)。該ステップS3で運転準備未完了と判定された場合、ウェアラブルグラスは操作開始モードに入り、該ウェアラブルグラスには操作を開始するための運転準備手順の表示が行われると共に、音声ガイダンスが流される。オペレータはウェアラブルグラスの表示と音声ガイダンスに従って荷役運搬機械の運転準備を行う(ステップS4参照)。運転準備完了後は、ウェアラブルグラスの音声ガイダンスに従ってオペレータは荷役運搬機械の操作を開始する(ステップS5参照)。   After starting the wearable glass and the large screen monitor in the step S1, the operation power of the continuous unloader as the cargo handling machine is turned on (see step S2). After the operation power is turned on in step S2, the preparation for operation of the cargo handling machine is determined (see step S3). When it is determined in step S3 that the driving preparation is not completed, the wearable glass enters the operation start mode, the driving preparation procedure for starting the operation is displayed on the wearable glass, and voice guidance is played. The operator prepares for operation of the cargo handling machine according to the display of wearable glass and voice guidance (see step S4). After the operation preparation is completed, the operator starts the operation of the cargo handling machine according to the voice guidance of the wearable glass (see step S5).

前記荷役運搬機械の状態(正常か異常か)によってオペレータの運転操作方法は異なるため、前記ステップS5の操作開始から続いて前記荷役運搬機械の状態判定が行われる(ステップS6参照)。   Since the operation method of the operator differs depending on the state (normal or abnormal) of the cargo handling machine, the status determination of the cargo handling machine is performed following the start of the operation in step S5 (see step S6).

前記ステップS6で荷役運搬機械の状態としてモータ過負荷等の故障異常が発生していると判定された場合、前記ウェアラブルグラスは異常発生時モードに入り、故障状態(重/軽故障)、故障内容(エラー番号、エラー項目)、故障復旧手順が表示されると共に、音声ガイダンスが流される。オペレータは異常状態表示と音声ガイダンスに従って操作を行い、異常を解除する(ステップS7参照)。   If it is determined in step S6 that a fault abnormality such as a motor overload has occurred as the state of the material handling machine, the wearable glass enters the abnormal mode, and the fault state (heavy / light fault), fault content (Error number, error item), failure recovery procedure is displayed, and voice guidance is played. The operator operates according to the abnormal state display and voice guidance to cancel the abnormality (see step S7).

前記ステップS6で荷役運搬機械の状態が正常であると判定された場合、前記ウェアラブルグラスは通常運用モードに入り、オペレータはウェアラブルグラスの機能であるカメラ映像表示を必要に応じて選択する(ステップS8参照)。該ステップS8でオペレータがウェアラブルグラスの機能であるカメラ映像表示を選択しない場合、荷役運搬機械の停止中/運転中の運転状態や距離・状態量がウェアラブルグラスに表示される。オペレータは、ウェアラブルグラスの表示及び荷役運搬機械に配設された複数の監視カメラ51が写した映像を大画面モニタで見ながら遠隔操作を行う(ステップS9参照)。   When it is determined in step S6 that the state of the cargo handling machine is normal, the wearable glass enters the normal operation mode, and the operator selects a camera video display function of the wearable glass as necessary (step S8). reference). When the operator does not select the camera image display which is a wearable glass function in step S8, the operating state, distance, and state quantity of the cargo handling machine being stopped / operating are displayed on the wearable glass. The operator performs a remote operation while viewing on the large screen monitor the display of the wearable glass and the images taken by the plurality of monitoring cameras 51 disposed on the cargo handling machine (see step S9).

前記ステップS8でオペレータがウェアラブルグラスの機能であるカメラ映像表示を選択した場合、オペレータは更に、前記複数ある監視カメラ51の映像から常時監視したいカメラ映像(視線を離さずに注意して見たい映像)を一つ選択する(ステップS10参照)。この時、ウェアラブルグラスには荷役運搬機械の運転状態、距離・状態量が表示され、オペレータは前記ウェアラブルグラスに表示される荷役運搬機械の運転状態、距離・状態量、カメラ映像及び大画面モニタのカメラ映像を見ながら遠隔操作を行う(ステップ11参照)。   When the operator selects camera image display, which is a wearable glass function, in step S8, the operator further wants to constantly monitor the images of the plurality of monitoring cameras 51 (images to watch carefully without taking his eyes off). ) Is selected (see step S10). At this time, the wearable glass displays the operation state, distance and state quantity of the cargo handling machine, and the operator displays the operation state, distance and state quantity of the cargo handling machine displayed on the wearable glass, the camera image and the large screen monitor. Remote operation is performed while viewing the camera image (see step 11).

前記ステップS9或いはステップS11で遠隔操作が行われている間、前記ウェアラブルグラスには距離・状態量監視が行われる(ステップS12参照)。該ステップS12での距離・状態量監視により、前記連続式アンローダを例にした場合、前記バケットエレベータ8と船倉6の開口縁部や内壁との距離が許容値未満となったり、或いはバケットエレベータ駆動トルク、払出量、ブーム起伏シリンダ圧力、風速等がそれぞれ許容値を超えたりしたとき、ウェアラブルグラスには、警告を表示すると共に、警告回避操作指示も行われ、更に警告回避のための音声ガイダンスが流され、オペレータはウェアラブルグラスの警告表示、警告回避操作指示、及び音声ガイダンスに従って、大画面モニタのカメラ映像を見ながら遠隔操作を行う(ステップS13参照)。尚、前記ステップS13から前記ステップS6に戻り、前述の操作が繰り返される。   While the remote operation is being performed in step S9 or step S11, the wearable glass is monitored for distance and state quantity (see step S12). When the continuous unloader is taken as an example by monitoring the distance and state quantity in step S12, the distance between the bucket elevator 8 and the opening edge or inner wall of the hold 6 is less than the allowable value, or the bucket elevator is driven. When torque, payout amount, boom hoisting cylinder pressure, wind speed, etc. exceed allowable values, a warning is displayed on the wearable glass, a warning avoidance operation instruction is also given, and voice guidance for avoiding the warning is also provided. The operator performs remote operation while viewing the camera image of the large screen monitor according to the warning display of the wearable glass, the warning avoidance operation instruction, and the voice guidance (see step S13). Note that the process returns from the step S13 to the step S6, and the above-described operation is repeated.

前記ステップS12での距離・状態量監視により、前記バケットエレベータ8と船倉6の開口縁部や内壁との距離が許容値以上で且つバケットエレベータ駆動トルク、払出量、ブーム起伏シリンダ圧力、風速等がそれぞれ許容値以下である場合には、オペレータがウェアラブルグラスの機能として運転終了モードを選択しているか否かの判定が行われる(ステップS14参照)。該ステップS14で運転終了モードが選択されていない場合には、前記ステップS6に戻り、前述の操作が繰り返される。   According to the distance / state quantity monitoring in step S12, the distance between the bucket elevator 8 and the opening edge or inner wall of the hold 6 is not less than an allowable value, and the bucket elevator driving torque, the amount of discharge, the boom hoisting cylinder pressure, the wind speed, etc. When each is below the allowable value, it is determined whether or not the operator has selected the operation end mode as a function of the wearable glass (see step S14). If the operation end mode is not selected in step S14, the process returns to step S6 and the above-described operation is repeated.

前記ステップS14で運転終了モードが選択された場合、図4に示す如く、ウェアラブルグラスには遠隔運転を終了するための操作手順が表示されると共に、音声ガイダンスが流され、オペレータは、ウェアラブルグラスの表示と音声ガイダンスに従って荷役運搬機械の遠隔操作を終了する(ステップS15参照)。該ステップS15での操作終了後、オペレータは荷役運搬機械の操作電源を切る(ステップS16参照)。   When the operation end mode is selected in the step S14, as shown in FIG. 4, an operation procedure for ending the remote operation is displayed on the wearable glass, and voice guidance is played. Remote operation of the material handling machine is terminated according to the display and voice guidance (see step S15). After the operation in step S15 is completed, the operator turns off the operation power of the cargo handling machine (see step S16).

前記ステップS16で荷役運搬機械の操作電源を切った後、オペレータはウェアラブルグラスを外し、該ウェアラブルグラス及び大画面モニタの電源を切り、荷役運搬機械の遠隔運転を終了する(ステップS17参照)。   After turning off the operation power of the cargo handling machine in step S16, the operator removes the wearable glass, turns off the wearable glass and the large screen monitor, and ends the remote operation of the cargo handling machine (see step S17).

前述した通り、本実施例では、特許文献1、2、3に開示されている荷役運搬機械の遠隔操作システムのようにカメラの撮像映像をそのまま表示させるだけではなく、画像処理装置84で割り出された距離及び前記センサ52で検出された連続式アンローダの状態量をオーバーレイした実際の運転状況映像を表示するため、操作性の面で大幅な改善を行うことが可能となる。   As described above, in the present embodiment, not only the captured image of the camera is displayed as it is as in the remote control system of the cargo handling machine disclosed in Patent Documents 1, 2, and 3, but the image processing device 84 calculates the image. Since the actual driving situation image is displayed by overlaying the measured distance and the state quantity of the continuous unloader detected by the sensor 52, it is possible to greatly improve the operability.

こうして、実際の映像に距離や状態量等の情報を併せて表示することにより、操作性を向上し得る。   In this way, operability can be improved by displaying information such as the distance and the state quantity together with the actual video.

そして、前記遠隔操作室80には、前記遠隔操作室側伝送装置83へ接点データを入力する非常停止スイッチ88を設けると共に、該非常停止スイッチ88により接点データが遠隔操作室側伝送装置83へ入力された際に前記荷役運搬機械側伝送装置57から出力される接点データにより電磁接触器68,69,71を切断し前記駆動装置58への電力供給を遮断するハードワイヤード56を前記機械側遠隔運転制御機器50に備えているので、前記本体制御コントローラ55(図1参照)が万一故障しても、非常停止だけは正常に作動させることができ、故障に対処する二重化を図った構成として有効となる。   The remote operation room 80 is provided with an emergency stop switch 88 for inputting contact data to the remote operation room side transmission device 83, and the contact data is input to the remote operation room side transmission device 83 by the emergency stop switch 88. When this is done, the machine-side remote operation of the hard-wired 56 that cuts off the magnetic contactors 68, 69, and 71 and cuts off the power supply to the drive device 58 based on the contact data output from the cargo handling machine-side transmission device 57. Since the control device 50 is provided, even if the main body controller 55 (see FIG. 1) breaks down, only an emergency stop can be operated normally, and it is effective as a dual configuration to cope with the failure. It becomes.

又、前記監視カメラ51は、ステレオカメラ、或いは単眼カメラを複数個配設して構成したステレオカメラであるため、奥行きのある三次元画像を装着表示装置85としてのウェアラブルグラスに表示可能となり、実際の運転室での操作に近い臨場感を実現でき、操作性を高める上で有効となる。   Further, since the monitoring camera 51 is a stereo camera or a stereo camera configured by arranging a plurality of monocular cameras, it is possible to display a three-dimensional image having a depth on the wearable glass as the wearing display device 85. This makes it possible to realize a sense of reality close to the operation in the driver's cab, which is effective in improving operability.

更に又、前記遠隔操作室80には、オペレータの声を音声データとして遠隔操作室側伝送装置83へ入力するマイク86と、該遠隔操作室側伝送装置83から出力される音声データに基づき実際の音声を出力するスピーカ87とを設けると共に、現場監視員の声を音声データとして荷役運搬機械側伝送装置57へ入力するマイク53と、該荷役運搬機械側伝送装置57から出力される音声データに基づき実際の音声を出力するスピーカ54とを前記機械側遠隔運転制御機器50に備えることにより、オペレータと現場監視員との間で作業に関する意思の疎通を図ることができ、作業を効率良く行うことができる。   Furthermore, the remote operation room 80 has a microphone 86 for inputting the operator's voice as audio data to the remote operation room side transmission device 83, and actual audio data output from the remote operation room side transmission device 83. A speaker 87 for outputting sound is provided, and the microphone 53 for inputting the voice of the on-site supervisor as sound data to the cargo handling machine side transmission device 57 and the voice data output from the cargo handling machine side transmission device 57. By providing the machine-side remote operation control device 50 with the speaker 54 that outputs the actual voice, communication between the operator and the field supervisor can be facilitated, and the work can be performed efficiently. it can.

又、前記荷役運搬機械側伝送装置57と前記遠隔操作室側伝送装置83とを光ファイバーケーブルOFCで接続したことにより、画像の伝送を遅延なく行うことができ、遠隔操作を的確に進めることができる。   Further, since the cargo handling machine side transmission device 57 and the remote control room side transmission device 83 are connected by an optical fiber cable OFC, the image can be transmitted without delay, and the remote operation can be performed accurately. .

尚、本発明の荷役運搬機械の遠隔操作システムは、上述の実施例にのみ限定されるものではなく、連続式アンローダ以外のコンテナクレーンやタワークレーン等にも適用可能なこと等、その他、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。   The remote operation system for the cargo handling machine of the present invention is not limited to the above-described embodiment, and can be applied to container cranes, tower cranes, etc. other than the continuous unloader. Of course, various changes can be made without departing from the scope of the present invention.

50 機械側遠隔運転制御機器
51 監視カメラ
52 センサ
53 マイク
54 スピーカ
55 本体制御コントローラ
56 ハードワイヤード
57 荷役運搬機械側伝送装置
58 駆動装置
68 電磁接触器
69 電磁接触器
71 電磁接触器
80 遠隔操作室
81 操作機器
82 操作機器信号集約コントローラ
83 遠隔操作室側伝送装置
84 画像処理装置
85 装着表示装置
86 マイク
87 スピーカ
88 非常停止スイッチ
89 固定表示装置
OFC 光ファイバーケーブル
50 Machine-side remote operation control device 51 Surveillance camera 52 Sensor 53 Microphone 54 Speaker 55 Main body controller 56 Hard wired 57 Cargo handling machine-side transmission device 58 Drive device 68 Electromagnetic contactor 69 Electromagnetic contactor 71 Electromagnetic contactor 80 Remote operation room 81 Operation device 82 Operation device signal aggregation controller 83 Remote operation room side transmission device 84 Image processing device 85 Wearing display device 86 Microphone 87 Speaker 88 Emergency stop switch 89 Fixed display device OFC Optical fiber cable

Claims (5)

荷役運搬機械に機械側遠隔運転制御機器を設けると共に、地上に遠隔操作室を設置し、該遠隔操作室でのオペレータによる操作により荷役運搬機械の運転を行う荷役運搬機械の遠隔操作システムであって、
前記機械側遠隔運転制御機器は、
前記荷役運搬機械の運転状況映像を撮像する監視カメラと、
前記荷役運搬機械の状態量を検出するセンサと、
該センサで検出された荷役運搬機械の状態量が入力され且つ荷役運搬機械の駆動装置を制御する本体制御コントローラと、
前記監視カメラから映像データを取り込み且つ前記本体制御コントローラとの間で制御データの授受を行う荷役運搬機械側伝送装置と、
を備え、
前記遠隔操作室には、
前記荷役運搬機械を操作する操作機器と、
該操作機器からの信号を集約する操作機器信号集約コントローラと、
該操作機器信号集約コントローラとの間で制御データの授受を行い且つ前記荷役運搬機械側伝送装置との間で信号を送受信する遠隔操作室側伝送装置と、
該遠隔操作室側伝送装置で受信された前記映像データに基づき前記荷役運搬機械の接触を回避すべき物体までの距離を画像処理によって割り出す画像処理装置と、
該画像処理装置で割り出された距離及び前記センサで検出された荷役運搬機械の状態量をオーバーレイした実際の運転状況映像を表示し且つオペレータが装着自在な装着表示装置と
を設けたことを特徴とする荷役運搬機械の遠隔操作システム。
A remote operation system for a cargo handling machine having a machine-side remote operation control device installed in the cargo handling machine, a remote operation room installed on the ground, and the operation of the cargo handling machine by an operation by an operator in the remote operation room. ,
The machine side remote operation control device is,
A surveillance camera that captures an operation status image of the material handling and handling machine;
A sensor for detecting a state quantity of the cargo handling machine;
A main body controller for inputting a state quantity of the cargo handling machine detected by the sensor and controlling a driving device of the cargo handling machine;
A loading / unloading machine-side transmission device that captures video data from the monitoring camera and exchanges control data with the main body controller;
With
In the remote control room,
An operating device for operating the cargo handling machine;
An operation device signal aggregation controller for collecting signals from the operation device;
A remote operation room side transmission device that exchanges control data with the operation equipment signal aggregation controller and transmits / receives signals to / from the cargo handling machine side transmission device;
An image processing device for determining, by image processing, a distance to an object that should avoid contact with the cargo handling machine based on the video data received by the remote control room side transmission device;
And a mounting display device that displays an actual driving situation image overlaying the distance determined by the image processing apparatus and the state quantity of the cargo handling machine detected by the sensor, and that can be mounted by an operator. Remote control system for cargo handling and transporting machines.
前記遠隔操作室に、前記遠隔操作室側伝送装置へ接点データを入力する非常停止スイッチを設けると共に、該非常停止スイッチにより接点データが遠隔操作室側伝送装置へ入力された際に前記荷役運搬機械側伝送装置から出力される接点データにより電磁接触器を切断し前記駆動装置への電力供給を遮断するハードワイヤードを前記機械側遠隔運転制御機器に備えた請求項1記載の荷役運搬機械の遠隔操作システム。   The remote control room is provided with an emergency stop switch for inputting contact data to the remote control room side transmission device, and when the contact data is input to the remote control room side transmission device by the emergency stop switch, the cargo handling machine The remote operation of the cargo handling machine according to claim 1, wherein the machine side remote operation control device is provided with a hard wired device that cuts off the magnetic contactor by the contact data output from the side transmission device and cuts off the power supply to the drive device. system. 前記監視カメラは、ステレオカメラ、或いは単眼カメラを複数個配設して構成したステレオカメラである請求項1又は2記載の荷役運搬機械の遠隔操作システム。   The remote operation system for a cargo handling machine according to claim 1 or 2, wherein the monitoring camera is a stereo camera or a stereo camera configured by arranging a plurality of monocular cameras. 前記遠隔操作室に、オペレータの声を音声データとして遠隔操作室側伝送装置へ入力するマイクと、該遠隔操作室側伝送装置から出力される音声データに基づき実際の音声を出力するスピーカとを設けると共に、現場監視員の声を音声データとして荷役運搬機械側伝送装置へ入力するマイクと、該荷役運搬機械側伝送装置から出力される音声データに基づき実際の音声を出力するスピーカとを前記機械側遠隔運転制御機器に備えた請求項1〜3の何れか一項に記載の荷役運搬機械の遠隔操作システム。   The remote operation room is provided with a microphone for inputting an operator's voice as audio data to the remote operation room side transmission device, and a speaker for outputting actual sound based on the audio data output from the remote operation room side transmission device. And a microphone for inputting the voice of the field supervisor as voice data to the cargo handling machine side transmission device and a speaker for outputting actual voice based on the voice data output from the cargo handling machine side transmission device. The remote operation system for a cargo handling machine according to any one of claims 1 to 3, provided in a remote operation control device. 前記荷役運搬機械側伝送装置と前記遠隔操作室側伝送装置とを光ファイバーケーブルで接続した請求項1〜4の何れか一項に記載の荷役運搬機械の遠隔操作システム。   The remote operation system of the cargo handling machine according to any one of claims 1 to 4, wherein the cargo handling machine side transmission device and the remote control room side transmission device are connected by an optical fiber cable.
JP2015082500A 2015-04-14 2015-04-14 Remote control system for cargo handling equipment Active JP6471030B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015082500A JP6471030B2 (en) 2015-04-14 2015-04-14 Remote control system for cargo handling equipment

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015082500A JP6471030B2 (en) 2015-04-14 2015-04-14 Remote control system for cargo handling equipment

Publications (2)

Publication Number Publication Date
JP2016199388A JP2016199388A (en) 2016-12-01
JP6471030B2 true JP6471030B2 (en) 2019-02-13

Family

ID=57424084

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015082500A Active JP6471030B2 (en) 2015-04-14 2015-04-14 Remote control system for cargo handling equipment

Country Status (1)

Country Link
JP (1) JP6471030B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024090219A1 (en) * 2022-10-28 2024-05-02 コベルコ建機株式会社 Remote operation assistance system and remote operation device for work machine

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6306552B2 (en) * 2015-10-13 2018-04-04 株式会社タダノ Remote control device and guidance system
JP6914770B2 (en) * 2017-07-28 2021-08-04 Ihi運搬機械株式会社 Cable routing structure for material handling machinery
EP3594168A1 (en) * 2018-07-13 2020-01-15 EPSILON Kran GmbH. Crane controls with visualising device
ES2877592T3 (en) 2018-07-13 2021-11-17 Epsilon Kran Gmbh Vehicle with a crane and a crane control
KR102135883B1 (en) * 2018-11-30 2020-07-20 주식회사 무스마 System and method for analyzing cargo of crane
KR102430256B1 (en) * 2019-11-14 2022-08-09 인하대학교 산학협력단 Information providing system for remote control of unmanned tower crane
CN113320995A (en) * 2021-05-25 2021-08-31 中冶南方工程技术有限公司 Unmanned control system for stockyard stacker-reclaimer

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06206618A (en) * 1993-01-08 1994-07-26 Ishikawajima Harima Heavy Ind Co Ltd Remote operation method for unloader
JP2003212475A (en) * 2002-01-21 2003-07-30 Ishikawajima Harima Heavy Ind Co Ltd Remote operation device for container crane
JP2013116773A (en) * 2011-12-01 2013-06-13 Shimizu Corp Remote operation system of tower crane

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024090219A1 (en) * 2022-10-28 2024-05-02 コベルコ建機株式会社 Remote operation assistance system and remote operation device for work machine

Also Published As

Publication number Publication date
JP2016199388A (en) 2016-12-01

Similar Documents

Publication Publication Date Title
JP6471030B2 (en) Remote control system for cargo handling equipment
JP7108750B2 (en) System and method
US10829347B2 (en) Optical detection system for lift crane
JP5876679B2 (en) Performance line display device
JP5580614B2 (en) Construction machine with surveillance camera
US10730725B2 (en) Display apparatus for traveling cranes and synchronizing aparatus for traveling cranes
CN103563358A (en) Device for monitoring area around working machine
CN107407078A (en) The periphery monitoring apparatus of Work machine and the environment monitoring method of Work machine
CN104584540A (en) Environment monitoring device for operating machinery
JP2013142037A (en) Suspended load monitoring camera device for working vehicle
KR102027395B1 (en) Display system of work machine, and display method of work machine
JP2011079648A (en) Stationary image display system
JP6113342B1 (en) Lifting position adjustment device for overhead crane
JP6917167B2 (en) Bird's-eye view image display device for construction machinery
JP6162481B2 (en) Work area line display device
KR101523197B1 (en) Safety management system for crane using bluetooth
CN211653475U (en) Remote control system for bulk cargo wharf ship loader
JP6293684B2 (en) Management system and management server
CN108975165B (en) Tower crane monitoring system and method and tower crane
JP2016166087A (en) Image display device
JP2018039476A (en) Image display system
JP7119371B2 (en) Crane and information display method
JPWO2019163875A1 (en) Camera device, suspended load monitoring system, and work equipment
JP2016160034A (en) Continuous unloader equipment
JP3226637U (en) Remote work support system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180302

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181221

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190108

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190121

R150 Certificate of patent or registration of utility model

Ref document number: 6471030

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250