JP6631023B2 - Image display device - Google Patents

Image display device Download PDF

Info

Publication number
JP6631023B2
JP6631023B2 JP2015061197A JP2015061197A JP6631023B2 JP 6631023 B2 JP6631023 B2 JP 6631023B2 JP 2015061197 A JP2015061197 A JP 2015061197A JP 2015061197 A JP2015061197 A JP 2015061197A JP 6631023 B2 JP6631023 B2 JP 6631023B2
Authority
JP
Japan
Prior art keywords
hook
corresponding point
projection corresponding
projection
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015061197A
Other languages
Japanese (ja)
Other versions
JP2016179889A (en
Inventor
啓資 玉木
啓資 玉木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tadano Ltd
Original Assignee
Tadano Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tadano Ltd filed Critical Tadano Ltd
Priority to JP2015061197A priority Critical patent/JP6631023B2/en
Publication of JP2016179889A publication Critical patent/JP2016179889A/en
Application granted granted Critical
Publication of JP6631023B2 publication Critical patent/JP6631023B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明は、画像表示装置に関する。   The present invention relates to an image display device.

クレーンのブームやジブ(以下、ブーム等という。)には、下方の被写体を撮影するカメラが取り付けられている。ブーム等からは、ワイヤロープによりフックが吊り下げられていて、フックに吊り荷が玉掛けされる。そして、カメラは、ワイヤロープ、フック、吊り荷等が地上面等の水平面に投影された被写体を撮影する。
カメラで撮影された画像は、オペレータによってクレーンの操作が行われるオペレータ室に設けられたモニタに表示される。オペレータは、モニタに表示された画像を見ながらクレーンを操作して、吊り荷を所望とする場所に移動させる(例えば、特許文献1参照)。
A camera for photographing an object below is attached to a crane boom or jib (hereinafter, referred to as a boom or the like). From a boom or the like, a hook is suspended by a wire rope, and a suspended load is slung on the hook. Then, the camera captures an image of a subject in which a wire rope, a hook, a suspended load, and the like are projected on a horizontal plane such as the ground surface.
An image captured by the camera is displayed on a monitor provided in an operator room where the operator operates the crane. The operator operates the crane while watching the image displayed on the monitor to move the suspended load to a desired place (for example, see Patent Document 1).

特開平6−30315号公報JP-A-6-30315

クレーンのオペレータは、モニタに映し出されたフックの動きを見ながら、操作部に入力する操作を調整している。
しかし、カメラはフックの真上に設置されているのではないため、フックを吊り上げたワイヤロープは、表示部において、斜め方向に延びて映し出される。しかも、フックの位置は地上面から吊り上げられた位置にあるため、ブームを動かさずにフックを昇降のみさせた場合であっても、表示部に表示されたフックの位置は地上面等の背景画像に対して移動する。したがって、オペレータが、表示部に映し出された画像のみを見て、地上面等においてフックが降りる位置(フックの投影点)を認識するのは難しい。
本発明は上記事情に鑑みなされたものであって、表示部に表示されたフックの、地上面等特定の高さの水平面上への投影点の位置を、オペレータに認識させ易くすることができる画像表示装置を提供することを目的とする。
The operator of the crane adjusts the operation input to the operation unit while watching the movement of the hook displayed on the monitor.
However, since the camera is not installed directly above the hook, the wire rope that lifts the hook is projected on the display unit in an oblique direction. Moreover, since the hook is located at a position suspended from the ground surface, even if the hook is only moved up and down without moving the boom, the position of the hook displayed on the display unit is the background image such as the ground surface. To move against. Therefore, it is difficult for the operator to see only the image projected on the display unit and recognize the position where the hook descends (the projection point of the hook) on the ground surface or the like.
The present invention has been made in view of the above circumstances, and can make it easier for an operator to recognize the position of a projection point of a hook displayed on a display unit on a horizontal plane having a specific height such as the ground surface. It is an object to provide an image display device.

本発明は、クレーンのブームに設けられたカメラで撮影され、前記ブームからワイヤロープで吊り下げられたフックを含む画像を表示する表示部と、前記フックの、予め設定された高さの水平面への投影点に対応する、前記表示部に表示された投影対応点を求める投影対応点算出部と、を備え、前記表示部は、前記投影対応点算出部により求められた前記投影対応点を特定する印を、前記フックの画像とともに表示する画像表示装置である。   The present invention is directed to a display unit that displays an image that is captured by a camera provided on a crane boom and includes a hook that is suspended from the boom by a wire rope, and a horizontal plane having a predetermined height of the hook. And a projection corresponding point calculation unit for obtaining a projection corresponding point displayed on the display unit corresponding to the projection point of (a), wherein the display unit specifies the projection corresponding point obtained by the projection corresponding point calculation unit. An image display device for displaying a mark to be displayed together with an image of the hook.

本発明に係る画像表示装置によれば、表示部に表示されたフックの、地上面等特定の高さの水平面上への投影点の位置を、オペレータに認識させ易くすることができる。   ADVANTAGE OF THE INVENTION According to the image display apparatus which concerns on this invention, the position of the projection point on the horizontal surface of a specific height, such as a ground surface, of the hook displayed on the display part can be made easy for an operator to recognize.

クレーンを用いて吊り荷を移動させるクレーン作業の様子を示す模式図である。It is a schematic diagram which shows the mode of the crane operation | work which moves a suspended load using a crane. オペレータ室に設置された画像表示装置の一例を示す模式図である。It is a schematic diagram which shows an example of the image display apparatus installed in the operator room. 実施形態1の画像表示装置の構成を示すブロック図である。FIG. 2 is a block diagram illustrating a configuration of the image display device according to the first embodiment. 図1に示した模式図を簡略化した図である。It is the figure which simplified the schematic diagram shown in FIG. 投影対応点の位置を示す図2相当の模式図である。FIG. 3 is a schematic diagram corresponding to FIG. 2 showing the position of a projection corresponding point. 投影対応点を特定する印を表示した図2相当の模式図である。FIG. 3 is a schematic diagram corresponding to FIG. 2 displaying a mark for specifying a projection corresponding point. 実施形態2の画像表示装置の構成を示すブロック図である。FIG. 9 is a block diagram illustrating a configuration of an image display device according to a second embodiment. フックの移動方向(フック下降)を特定する印と、投影対応点を特定する印とを表示パネルに表示した例を示す模式図である。FIG. 7 is a schematic diagram showing an example in which a mark for specifying a hook moving direction (hook descent) and a mark for specifying a projection corresponding point are displayed on a display panel. フックの移動方向(フック上昇)を特定する印と、投影対応点を特定する印とを表示パネルに表示した例を示す模式図である。It is a schematic diagram which shows the example which displayed the mark which specifies the moving direction (hook rise) of a hook, and the mark which specifies a projection corresponding point on a display panel. 矢印の傍らに、その矢印が表す地上面における長さを示す文字を併せて表示した表示例を示す図である。It is a figure which shows the example of a display which displayed the character which shows the length on the ground surface which the arrow represents beside the arrow. 図7に示した画像表示装置における投影対応点算出部に代えて、投影対応点算出部を備えた実施形態3の画像表示装置を示すブロック図である。FIG. 8 is a block diagram illustrating an image display device according to a third embodiment including a projection corresponding point calculation unit instead of the projection corresponding point calculation unit in the image display device illustrated in FIG. 7. 投影対応点の位置を示す図2相当の模式図である。FIG. 3 is a schematic diagram corresponding to FIG. 2 showing the position of a projection corresponding point.

以下、本発明に係る画像表示装置の実施の形態について、図面を参照して説明する。
[実施形態1]
<クレーン作業>
図1は、下部走行体の上に上部旋回体が設置されたクレーン800を用いて吊り荷700を移動させるクレーン作業の様子を示す模式図である。クレーン800は、伸縮、起伏及び旋回するブーム810と、昇降するフック830と、ブーム810の伸縮、起伏及び旋回、並びにフック830の昇降の操作が入力される操作部820とを備えている。ブーム810の先端に設けられたシーブには、ウインチモータで巻き上げられ又は巻き下げられるワイヤロープ840が巻き掛けられている。ワイヤロープ840には、吊り荷700が玉掛けされるフック830が吊り下げられている。そして、吊り荷700は、ウインチモータによるワイヤロープ840の巻き上げ又は巻き下げの操作によりフック830とともに昇降する。
Hereinafter, an embodiment of an image display device according to the present invention will be described with reference to the drawings.
[Embodiment 1]
<Crane operation>
FIG. 1 is a schematic diagram showing a state of a crane operation of moving a suspended load 700 using a crane 800 in which an upper swing body is installed on a lower traveling body. The crane 800 includes a boom 810 that expands, lowers, and turns, a hook 830 that moves up and down, and an operation unit 820 to which operations of expanding, lowering, turning, and turning the boom 810 and raising and lowering the hook 830 are input. A wire rope 840 wound up or down by a winch motor is wound around a sheave provided at the tip of the boom 810. A hook 830 on which the suspended load 700 is slung is suspended from the wire rope 840. Then, the suspended load 700 moves up and down together with the hook 830 by the operation of hoisting or lowering the wire rope 840 by the winch motor.

なお、本明細書において「ブーム」とは、上部旋回体の一端を支点とした腕となる構造体の全般を意味する。したがって、本明細書における「ブーム」には、箱型構造ジブであるブームの他、ラチス構造ジブ、ブームを延長するための補助ジブも含まれる。   In this specification, the term “boom” means an entire structure that is an arm with one end of the upper swing body as a fulcrum. Therefore, the “boom” in the present specification includes a lattice structure jib and an auxiliary jib for extending the boom, in addition to a boom that is a box-shaped structure jib.

ブーム810の伸縮、起伏及び旋回、並びにフック830の昇降は、クレーン800のオペレータが、オペレータ室850に設けられた操作部820に対して操作を入力することで行われる。
具体的には、操作部820は、入力された操作に対応した操作信号Sを出力する。操作部820から出力された操作信号Sは、油圧ポンプ、方向制御弁、流量制御弁等の動作を制御する。そして、これら油圧ポンプ、方向制御弁、流量制御弁等の動作により、油圧モータや油圧シリンダが作動して、ブーム810の伸縮、起伏及び旋回、並びにフック830の昇降が行われる。
Extending and retracting, raising and lowering and turning of the boom 810, and lifting and lowering of the hook 830 are performed by an operator of the crane 800 inputting an operation to an operation unit 820 provided in an operator room 850.
Specifically, operation unit 820 outputs an operation signal S corresponding to the input operation. The operation signal S output from the operation unit 820 controls operations of a hydraulic pump, a direction control valve, a flow control valve, and the like. The hydraulic pump, the direction control valve, the flow control valve, and the like operate the hydraulic motor and the hydraulic cylinder to extend and retract the boom 810, raise and lower the swing, and raise and lower the hook 830.

そして、操作信号Sに基づいて状態が変化したブーム810の長さL、起伏角度α及び旋回角度βは、それぞれセンサによって検出され、ブーム810の状態に関する情報として、オペレータ室850に設けられたブーム状態情報部200(後述する図3参照)に入力される、   Then, the length L, the elevation angle α, and the turning angle β of the boom 810 whose state has changed based on the operation signal S are respectively detected by sensors, and boom provided in the operator room 850 as information on the state of the boom 810. The information is input to the state information unit 200 (see FIG. 3 described later).

また、ブーム810の先端には、フック830を含む下方の被写体を撮影する監視カメラ300が設けられている。監視カメラ300の撮影範囲は、例えば、図1において破線で示した範囲である。
図2は、オペレータ室850に設置された画像表示装置100の一例を示す模式図である。監視カメラ300で撮影された画像Pは、図2に示す画像表示装置100の表示パネル12に表示される。監視カメラ300は、フック830の鉛直線上からずれた位置に設置されている。したがって、表示パネル12において、画像P中のワイヤロープ840の画像840Aは、表示パネル12の外方から斜めに延びた画像840Aとなって表示されている。
なお、監視カメラ300は、光軸が鉛直方向に延びるように設定されていて、監視カメラ300の光軸とワイヤロープ840とは、水平面上で、例えば距離D1だけ離れている。
In addition, a surveillance camera 300 that captures an image of a lower subject including the hook 830 is provided at the tip of the boom 810. The shooting range of the monitoring camera 300 is, for example, a range indicated by a broken line in FIG.
FIG. 2 is a schematic diagram illustrating an example of the image display device 100 installed in the operator room 850. The image P captured by the monitoring camera 300 is displayed on the display panel 12 of the image display device 100 shown in FIG. Surveillance camera 300 is installed at a position shifted from the vertical line of hook 830. Therefore, on the display panel 12, the image 840A of the wire rope 840 in the image P is displayed as an image 840A extending obliquely from the outside of the display panel 12.
The monitoring camera 300 is set so that the optical axis extends in the vertical direction, and the optical axis of the monitoring camera 300 and the wire rope 840 are apart from each other by, for example, a distance D1 on a horizontal plane.

<画像表示装置>
図3は、本発明の実施形態1に係る画像表示装置100の構成を示すブロック図である。画像表示装置100は、図3に示すように、表示部10と投影対応点算出部40とを備えている。
表示部10は、入力された情報に基づいて表示する内容を処理する表示制御部11と、表示制御部11で処理された内容に応じた画像Pを表示する表示パネル12とを備えている。そして、表示制御部11は、前述したように監視カメラ300で撮影された画像Pが入力され、表示パネル12に表示させる画像Pに処理し、表示パネル12は、その処理された画像Pを表示する。画像Pにはフック830の画像830Aも含まれる。
<Image display device>
FIG. 3 is a block diagram illustrating a configuration of the image display device 100 according to the first embodiment of the present invention. As shown in FIG. 3, the image display device 100 includes a display unit 10 and a projection corresponding point calculation unit 40.
The display unit 10 includes a display control unit 11 that processes contents to be displayed based on the input information, and a display panel 12 that displays an image P corresponding to the contents processed by the display control unit 11. Then, the display control unit 11 receives the image P captured by the monitoring camera 300 as described above, processes the image P to be displayed on the display panel 12, and the display panel 12 displays the processed image P. I do. The image P also includes an image 830A of the hook 830.

投影対応点算出部40は、ブーム状態情報部200から入力されたブーム810の長さL及び起伏角度αに基づいて、フック830の、地上面H0(予め設定された水平面の一例)への投影点Mに対応する、表示パネル12に表示された投影対応点MAを求める。
ここで、投影対応点MAの算出について、図4,5,6を参照して以下に説明する。図4は、図1に示した模式図を簡略化した図、図5は、投影対応点MAの位置を示す図2相当の模式図、図6は、投影対応点MAを特定する印600を表示した図2相当の模式図である。
The projection corresponding point calculation unit 40 projects the hook 830 onto the ground surface H0 (an example of a preset horizontal plane) based on the length L and the elevation angle α of the boom 810 input from the boom state information unit 200. A projection corresponding point MA corresponding to the point M and displayed on the display panel 12 is obtained.
Here, the calculation of the projection corresponding point MA will be described below with reference to FIGS. 4 is a simplified diagram of the schematic diagram shown in FIG. 1, FIG. 5 is a schematic diagram corresponding to FIG. 2 showing the position of the projection corresponding point MA, and FIG. It is the schematic diagram corresponding to FIG. 2 displayed.

図4に示した状態からウインチモータを動作させてフック830を下降させると、フック830は、鉛直方向に下降して地上面H0に達する。この地上面H0に達したフック830の位置が、フック830の投影点Mである。そして、投影対応点MAは、表示パネル12に表示された画像Pにおける投影点Mの画像を意味する。
監視カメラ300の光軸とワイヤロープ840とは水平面上で例えば距離D1だけ離れているため、図5に示したように、表示パネル12に表示されたワイヤロープ840の画像840Aは、表示パネル12の外方から斜めに延びた画像840Aとなっている。そして、フック830を下降させると、表示パネル12に表示された画像Pにおけるフック830の画像830Aは、ワイヤロープ840の画像840Aに沿って下降する。
When the winch motor is operated from the state shown in FIG. 4 to lower the hook 830, the hook 830 descends vertically and reaches the ground surface H0. The position of the hook 830 that has reached the ground surface H0 is the projection point M of the hook 830. The projection corresponding point MA means an image of the projection point M in the image P displayed on the display panel 12.
Since the optical axis of the surveillance camera 300 and the wire rope 840 are separated on the horizontal plane by, for example, the distance D1, as shown in FIG. 5, an image 840A of the wire rope 840 displayed on the display panel 12 is displayed on the display panel 12 Is an image 840A that extends diagonally from the outside of the image. When the hook 830 is lowered, the image 830A of the hook 830 in the image P displayed on the display panel 12 is lowered along the image 840A of the wire rope 840.

フック830が地上面H0に到達したときの投影点Mに対応する投影対応点MAは、ワイヤロープ840の画像840Aの延長線上に存在する。
図4に示すように、ブーム810は、地上面H0から所定の高さ(地上高)h0の下部構造体の上に設置されている。ブーム810の長さL、起伏角度αのとき、ブーム810の先端から地上面H0までの距離(高さ)Hは、下記式(1)により算出される。
H=L×sinα+h0 (1)
The projection corresponding point MA corresponding to the projection point M when the hook 830 reaches the ground surface H0 exists on an extension of the image 840A of the wire rope 840.
As shown in FIG. 4, the boom 810 is installed on a lower structure having a predetermined height (ground height) h0 from the ground surface H0. When the length L of the boom 810 is equal to the elevation angle α, the distance (height) H from the tip of the boom 810 to the ground surface H0 is calculated by the following equation (1).
H = L × sin α + h0 (1)

また、監視カメラ300の画角をθとすると、監視カメラ300で撮影される地上面H0における撮影幅Dは、下記式(2)により算出される。
D={H×tan(θ/2)}×2 (2)
ここで、撮影幅Dの中心位置(監視カメラ300の光軸と地上面H0との交点)をOとすると、監視カメラ300の光軸とワイヤロープ840との水平面における距離はD1であるから、地上面H0における投影点Mは、撮影幅Dの中心位置Oから距離D1だけ離れた位置となる。
Further, assuming that the angle of view of the monitoring camera 300 is θ, the shooting width D on the ground surface H0 captured by the monitoring camera 300 is calculated by the following equation (2).
D = {H × tan (θ / 2)} × 2 (2)
Here, assuming that the center position of the photographing width D (the intersection between the optical axis of the monitoring camera 300 and the ground surface H0) is O, the distance between the optical axis of the monitoring camera 300 and the wire rope 840 in the horizontal plane is D1. The projection point M on the ground surface H0 is located at a distance D1 from the center position O of the shooting width D.

中心位置Oに対応する表示パネル12の中心位置を、図5に示すようにoとし、撮影幅Dに対する表示パネル12の大きさの比(表示比)をKとすると、中心位置Oから距離D1だけ離れた投影点Mに対応する投影対応点MAの、中心位置oから距離D1Aは、下記式(3)により算出される。
D1A=D1×K (3)
したがって、表示パネル12の画像Pにおける投影対応点MAは、表示パネル12の中心位置oから、式(1)〜(3)により算出された距離D1Aの位置で、かつワイヤロープ840の画像840Aの延長線840V上の位置であることが求められる。
Assuming that the center position of the display panel 12 corresponding to the center position O is o as shown in FIG. 5 and that the ratio of the size of the display panel 12 to the shooting width D (display ratio) is K, the distance D1 from the center position O is D1. The distance D1A from the center position o of the projection corresponding point MA corresponding to the projection point M that is only a distance away is calculated by the following equation (3).
D1A = D1 × K (3)
Therefore, the projection corresponding point MA in the image P of the display panel 12 is located at the distance D1A calculated from the center position o of the display panel 12 by the formulas (1) to (3) and the image 840A of the wire rope 840. It is required that the position be on the extension line 840V.

なお、ブーム810の起伏の支点までの地上高h0、監視カメラ300の画角θ、表示比Kは、ブーム810の状態に拘わらず一定であって、かつ予め設定されている値であるため、投影対応点算出部40に予め記憶されている。そして、投影対応点算出部40は、ブーム状態情報部200から入力されたブーム810の長さL及び起伏角度αと、予め記憶された上記の各値とに基づき、式(1)〜(3)にしたがって投影対応点MAの位置を求め、求められた投影対応点MAの位置を表示制御部11に出力する。   Note that the ground height h0 up to the fulcrum of the boom 810, the angle of view θ of the surveillance camera 300, and the display ratio K are constant regardless of the state of the boom 810 and are preset values. It is stored in the projection corresponding point calculation unit 40 in advance. Then, the projection corresponding point calculation unit 40 calculates the expressions (1) to (3) based on the length L and the elevation angle α of the boom 810 input from the boom state information unit 200 and the above-described values stored in advance. ), The position of the projection corresponding point MA is obtained, and the obtained position of the projection corresponding point MA is output to the display control unit 11.

表示制御部11は、図6に示すように、投影対応点算出部40から入力されたフック830の投影対応点MAの位置に、投影対応点MAを特定する印600(例えば、黒丸印)を生成する。そして、表示パネル12は、表示制御部11で生成された印600を、フック830の画像830Aを含む画像Pに重畳させて表示する。
なお、図6においては、表示制御部11の制御により、投影対応点MAとともに、投影対応点MAまで延びたワイヤロープ840の画像840Aの延長線840Vも表示されている。この延長線840Vについては表示しなくてもよい。延長線840Vを表示した場合には、オペレータに対して、延長線840Vの長さにより、地上面H0からフック830の現在の位置までのおおよその高さを認識させることができる。
なお、印600の形態は上述した黒丸印の他、白丸印や、×印等種々の形態を適用することができ、黒丸印に限定されない。
As illustrated in FIG. 6, the display control unit 11 places a mark 600 (for example, a black circle) for specifying the projection corresponding point MA at the position of the projection corresponding point MA of the hook 830 input from the projection corresponding point calculation unit 40. Generate. Then, the display panel 12 displays the mark 600 generated by the display control unit 11 so as to be superimposed on the image P including the image 830A of the hook 830.
In addition, in FIG. 6, under the control of the display control unit 11, the extension line 840V of the image 840A of the wire rope 840 extending to the projection corresponding point MA is displayed together with the projection corresponding point MA. It is not necessary to display the extension line 840V. When the extension line 840V is displayed, the operator can recognize the approximate height from the ground surface H0 to the current position of the hook 830 based on the length of the extension line 840V.
Note that the form of the mark 600 can be various forms such as a white circle and an X, in addition to the black circle described above, and is not limited to the black circle.

このように構成された画像表示装置100によれば、表示パネル12に表示されたフック830の、地上面H0への投影点Mに対応する投影対応点MAが印600で表示されるため、表示パネル12に表示された画像Pを見ながらクレーン800の操作を行うオペレータに対して、投影点Mの位置を認識させ易くすることができる。
なお、投影対応点算出部40は、式(1)〜(3)の演算に基づいて投影対応点MAの位置を算出したが、投影対応点MAの位置の算出方法は、式(1)〜(3)の演算に限定されるものではない。すなわち、具体的な演算式の内容は、監視カメラ300の設置位置やワイヤロープ840との位置関係等に応じて決まるため、これらの態様に応じて、具体的な演算式の内容は決定される。
According to the image display device 100 configured as described above, the projection corresponding point MA of the hook 830 displayed on the display panel 12 corresponding to the projection point M on the ground surface H0 is displayed by the mark 600. The operator who operates the crane 800 while viewing the image P displayed on the panel 12 can easily recognize the position of the projection point M.
Note that the projection corresponding point calculation unit 40 calculates the position of the projection corresponding point MA based on the calculations of Expressions (1) to (3). The calculation is not limited to (3). That is, the specific content of the arithmetic expression is determined according to the installation position of the monitoring camera 300, the positional relationship with the wire rope 840, and the like. Therefore, the specific content of the arithmetic expression is determined according to these aspects. .

[実施形態2]
上述した実施形態1の画像表示装置100は、フック830の地上面H0への投影点Mに対応した投影対応点MAを表示パネル12に表示するものであるが、投影対応点MAの他に、クレーン800の操作部820に入力された操作によるフック830の動きに対応した、投影対応点MAの移動する方向を特定する印500を併せて表示するようにしてもよい。
[Embodiment 2]
The image display apparatus 100 according to the first embodiment displays the projection corresponding point MA corresponding to the projection point M of the hook 830 on the ground surface H0 on the display panel 12, but in addition to the projection corresponding point MA, A mark 500 that specifies the direction in which the projection corresponding point MA moves, which corresponds to the movement of the hook 830 due to the operation input to the operation unit 820 of the crane 800, may also be displayed.

図7は、本発明の実施形態2に係る画像表示装置110の構成を示すブロック図である。画像表示装置110は、図7に示すように、上述した表示部10及び投影対応点算出部40に加えて、操作信号取得部20と移動方向算出部30とを備えている。
操作信号取得部20は、フック830を移動させるように操作部820に入力された操作により出力された操作信号Sを取得する。移動方向算出部30は、操作信号取得部20により取得された操作信号Sに基づいて、地上面H0等の水平面上での(水平面における)フック830の移動方向を求める。
FIG. 7 is a block diagram illustrating a configuration of the image display device 110 according to the second embodiment of the present invention. As shown in FIG. 7, the image display device 110 includes an operation signal acquisition unit 20 and a movement direction calculation unit 30 in addition to the display unit 10 and the projection corresponding point calculation unit 40 described above.
The operation signal acquisition unit 20 acquires an operation signal S output by an operation input to the operation unit 820 so as to move the hook 830. The movement direction calculation unit 30 determines the movement direction of the hook 830 (on the horizontal plane) on a horizontal plane such as the ground surface H0 based on the operation signal S acquired by the operation signal acquisition unit 20.

ここで、クレーン800をはじめとした機械には、操作部820に操作を入力してもフック830が実際に動き始めない、いわゆる不感帯域がある。この不感帯域は、例えば以下のような理由で発生する。すなわち、操作部820は、入力された操作を検知し、その検知した操作に対応した操作信号Sを出力する。しかし、操作信号Sによる流量制御弁や方向制御弁の開度に応じて油圧ポンプ等により発生した油圧が、吊り荷700の負荷に対して小さい場合は、フック830は動き始めない。
したがって、不感帯域は、操作部820に対する操作の入力が小さい範囲で主に発生する。そして、不感帯域を超えた大きさの操作の入力により、フック830は実際に動き始める。
なお、画像表示装置100の操作信号取得部20は、少なくとも上述した不感帯域での操作信号Sを取得する。
Here, the crane 800 and other machines have a so-called dead zone in which the hook 830 does not actually start moving even when an operation is input to the operation unit 820. This dead zone occurs for the following reason, for example. That is, the operation unit 820 detects an input operation and outputs an operation signal S corresponding to the detected operation. However, when the hydraulic pressure generated by the hydraulic pump or the like according to the opening of the flow control valve or the direction control valve by the operation signal S is smaller than the load of the suspended load 700, the hook 830 does not start moving.
Therefore, the dead zone mainly occurs in a range where the operation input to the operation unit 820 is small. Then, the hook 830 actually starts to move by the input of the operation having the size exceeding the dead zone.
The operation signal acquisition unit 20 of the image display device 100 acquires at least the operation signal S in the above-described dead band.

このように不感帯域での操作では、フック830は実際に動き始めないため、フック830の移動方向は存在しないことになる。しかし、入力された操作信号Sが上述した不感帯域に対応した操作信号Sであったとしても、移動方向算出部30は、負荷が無いと仮定して、水平面に対してフック830が動くであろう移動方向を求める。   As described above, in the operation in the dead zone, the hook 830 does not actually start to move, so that the moving direction of the hook 830 does not exist. However, even if the input operation signal S is the operation signal S corresponding to the above-mentioned dead zone, the moving direction calculation unit 30 assumes that there is no load and the hook 830 moves with respect to the horizontal plane. Find the direction of the wax movement.

移動方向算出部30により算出された、水平面上でのフック830の移動方向は、表示部10の表示制御部11に入力される。
ここで、フック830が移動することによってフック830の投影点Mが移動する方向は、フック830の移動方向に一致する。そして、表示パネル12に表示された投影対応点MAの移動方向は、フック830の画像830Aの移動方向に一致する。
そこで、表示制御部11は、フック830の画像830Aの移動方向を投影対応点MAの移動方向として適用する。すなわち、表示制御部11は、移動方向算出部30から入力された水平面上でのフック830の移動方向と、投影対応点算出部40により算出された投影対応点MAとに基づいて、表示パネル12に表示された投影対応点MAに対応させた移動方向を特定する印500(後述する図8参照)を生成する。そして、表示パネル12は、表示制御部11で生成された印500を、投影対応点MAを含む画像Pに重畳させて表示する。
The movement direction of the hook 830 on the horizontal plane calculated by the movement direction calculation unit 30 is input to the display control unit 11 of the display unit 10.
Here, the direction in which the projection point M of the hook 830 moves as the hook 830 moves corresponds to the direction in which the hook 830 moves. Then, the moving direction of the projection corresponding point MA displayed on the display panel 12 matches the moving direction of the image 830A of the hook 830.
Therefore, the display control unit 11 uses the moving direction of the image 830A of the hook 830 as the moving direction of the projection corresponding point MA. That is, the display control unit 11 determines the display panel 12 based on the movement direction of the hook 830 on the horizontal plane input from the movement direction calculation unit 30 and the projection corresponding point MA calculated by the projection corresponding point calculation unit 40. Is generated, a mark 500 (see FIG. 8 described later) for specifying the moving direction corresponding to the projection corresponding point MA displayed in. Then, the display panel 12 displays the mark 500 generated by the display control unit 11 so as to be superimposed on the image P including the projection corresponding point MA.

図8,9は、フック830の移動方向を特定する印500と、投影対応点MAを特定する印600とを表示パネル12に表示した例を示す模式図である。なお、図8に示した表示例では、ワイヤロープ840の巻き下げ(巻きほどき)によるフック830の下降(下方への移動)を特定する印500zとして×印を表示している。図9に示した表示例では、ワイヤロープ840の巻き上げによるフック830の上昇(上方への移動)を特定する印500zとして○印を表示している。   8 and 9 are schematic diagrams illustrating an example in which a mark 500 for specifying the moving direction of the hook 830 and a mark 600 for specifying the projection corresponding point MA are displayed on the display panel 12. Note that, in the display example shown in FIG. 8, an X mark is displayed as the mark 500z for specifying the lowering (moving downward) of the hook 830 due to the lowering (unwinding) of the wire rope 840. In the display example shown in FIG. 9, a mark z is displayed as a mark 500z that specifies the rise (movement upward) of the hook 830 due to the winding of the wire rope 840.

図8,9に示す例においては、移動方向算出部30は、水平面上でのフック830の移動方向を、ブーム810の伸縮及び起伏(不感帯域のために、実際に伸縮又は起伏していなくてもよい。以下、同じ。)の操作による、水平面上でのフック830の半径方向の動きと、ブーム810の旋回(不感帯域のために、実際に旋回していなくてもよい。以下、同じ。)の操作による、水平面上でのフック830の旋回方向の動きと、フック830の昇降による上昇方向又は下降方向の動きとに分ける。   In the examples shown in FIGS. 8 and 9, the movement direction calculation unit 30 determines whether the movement direction of the hook 830 on the horizontal plane is the expansion and contraction and the undulation of the boom 810. The same applies to the following.) The radial movement of the hook 830 on the horizontal plane and the turning of the boom 810 (because of the dead zone, it is not necessary to actually turn the hook. The operation is divided into the movement of the hook 830 in the turning direction on the horizontal plane and the movement of the hook 830 in the ascending or descending direction due to the elevation.

そして、表示制御部11は、表示パネル12に表示する印500として、移動方向算出部30から入力された半径方向の動きに基づいて、表示パネル12に表示された投影対応点MAに対応させた半径方向(表示パネル12の縦方向y)に沿った矢印500yと、移動方向算出部30から入力された旋回方向の動きに基づいて、表示パネル12に表示された投影対応点MAに対応させた旋回方向(表示パネル12の横方向x)に沿った矢印500xと、ワイヤロープ840の画像840Aに沿った上昇又は下降の別を示す印500zとを生成する。
各矢印500x,500yは、矢印500x,500yの先端が移動方向に一致するものとして生成される。印500zは、フック830の下降に対応して×印、上昇に対応して○印に生成される。
Then, the display control unit 11 makes the mark 500 displayed on the display panel 12 correspond to the projection corresponding point MA displayed on the display panel 12 based on the radial movement input from the movement direction calculation unit 30. Based on the arrow 500y along the radial direction (vertical direction y of the display panel 12) and the movement in the turning direction input from the moving direction calculation unit 30, it is made to correspond to the projection corresponding point MA displayed on the display panel 12. An arrow 500x along the turning direction (horizontal direction x of the display panel 12) and a mark 500z indicating whether to rise or fall along the image 840A of the wire rope 840 are generated.
Each of the arrows 500x and 500y is generated such that the tips of the arrows 500x and 500y coincide with the moving direction. The mark 500z is generated as a cross when the hook 830 is lowered, and a circle when the hook 830 is raised.

また、表示制御部11は、2つの矢印500y,500xの各始点を、表示パネル12に表示される画像Pにおける投影対応点MAの位置に対応させて、矢印500y,500xを生成する。表示制御部11は、フック830の下降又は上昇を特定する印500zを、表示パネル12に表示される投影対応点MAを特定する印600に重畳させて生成する。
表示パネル12は、図8,9に示すように、フック830の移動する方向を特定する印500として2つの矢印500x,500yを、それら矢印500x,500yの各始点をフック830の画像830Aに対応させて表示する。
なお、表示パネル12に表示された画像P上における投影対応点MAの位置は、投影対応点算出部40により算出されて表示制御部11に入力されている。
In addition, the display control unit 11 generates the arrows 500y and 500x by associating each start point of the two arrows 500y and 500x with the position of the projection corresponding point MA in the image P displayed on the display panel 12. The display control unit 11 generates a mark 500z specifying the lowering or rising of the hook 830 by superimposing the mark 500z specifying the projection corresponding point MA displayed on the display panel 12.
As shown in FIGS. 8 and 9, the display panel 12 has two arrows 500x and 500y as marks 500 for specifying the direction in which the hook 830 moves, and the starting points of the arrows 500x and 500y correspond to the image 830A of the hook 830. And display it.
Note that the position of the projection corresponding point MA on the image P displayed on the display panel 12 is calculated by the projection corresponding point calculation unit 40 and input to the display control unit 11.

このように構成された画像表示装置110によれば、操作部820に操作が入力されると、フック830が実際に動き始める前の段階から、投影対応点MAを特定する印600とともに、フック830(投影対応点MA)がこれから動こうとする移動方向を示す矢印500y,500x及び印500zが表示パネル12に表示される。したがって、本実施形態の画像表示装置100によれば、オペレータに表示パネル12に表示された矢印500y,500x及び印500zを視認させることで、オペレータに、投影対応点MAの移動方向を瞬時に認識させることができる。   According to the image display device 110 configured as described above, when an operation is input to the operation unit 820, the hook 830 is displayed together with the mark 600 specifying the projection corresponding point MA from a stage before the hook 830 actually starts moving. Arrows 500y, 500x and a mark 500z indicating the moving direction in which the (projected corresponding point MA) is about to move are displayed on the display panel 12. Therefore, according to the image display device 100 of the present embodiment, the operator can visually recognize the arrows 500y, 500x and the mark 500z displayed on the display panel 12, thereby instantly recognizing the moving direction of the projection corresponding point MA. Can be done.

また、本実施形態の画像表示装置110によれば、2つの方向の成分に対応した矢印500x,500yでフック830の移動方向を示すことにより、ブーム810の伸縮及び起伏のうち少なくとも一方の操作と、ブーム810の旋回の操作とが同時に行われている(複合操作が行われている)か否かを、オペレータに認識させることができる。
なお、矢印500yは、ブーム810の伸縮の単独の操作又は起伏の単独の操作が行われている場合と、ブーム810の伸縮及び起伏の操作が同時に行われ(複合操作が行われ)、かつ旋回中心からのフック830の作業半径が変化する場合とにおいて、表示されることになる。
Further, according to the image display device 110 of the present embodiment, the movement direction of the hook 830 is indicated by the arrows 500x and 500y corresponding to the components in the two directions, so that at least one of the expansion and contraction and the undulation of the boom 810 can be performed. The operator can recognize whether or not the operation of turning the boom 810 is performed simultaneously (combined operation is performed).
Note that an arrow 500y indicates that the operation of performing the sole operation of extending and retracting the boom 810 or the operation of performing the single operation of raising and lowering the boom 810 is performed at the same time (combined operation is performed), and the turning operation is performed. This is displayed when the working radius of the hook 830 from the center changes.

また、画像表示装置110は、入力された操作信号Sがフック830を実際に動かす操作信号(不感帯域を超えた操作信号)であると移動方向算出部30が判定したときは、表示制御部11が、投影対応点MAの移動方向を特定する印500を表示パネル12に表示しないようにしてもよい。
この場合、ブーム810が不感帯域を脱してフック830が実際に動き始めた後は、移動方向を特定する印500を表示パネル12に表示しないことにより、フック830の投影対応点MAの移動方向における背景画像が、移動方向を特定する印500によって隠されるのを防止することができる。
Further, when the moving direction calculation unit 30 determines that the input operation signal S is an operation signal for actually moving the hook 830 (an operation signal exceeding the dead band), the image display device 110 displays the display control unit 11. However, the mark 500 for specifying the moving direction of the projection corresponding point MA may not be displayed on the display panel 12.
In this case, after the boom 810 exits the dead zone and the hook 830 actually starts moving, the mark 500 for specifying the moving direction is not displayed on the display panel 12 so that the hook 830 is moved in the moving direction of the projection corresponding point MA. It is possible to prevent the background image from being hidden by the mark 500 that specifies the moving direction.

一方、画像表示装置110は、入力された操作信号Sがブーム810を伸縮させるとともに起伏させる複合操作に対応した操作信号である場合、地上面H0におけるフック830の投影点Mの旋回中心に対する半径がその複合操作により変化すると移動方向算出部30が判定したときは、ブーム810が不感帯域であるか否かに拘わらず、表示制御部11は投影対応点MAの半径方向の移動方向を特定する印500を表示し、上述した半径が複合操作により変化しないと移動方向算出部30が判定したときは、表示制御部11は投影対応点MAの半径方向の移動方向を特定する印500を表示しないようにしてもよい。   On the other hand, when the input operation signal S is an operation signal corresponding to the combined operation of extending and retracting the boom 810 and undulating, the radius of the projection point M of the hook 830 on the ground surface H0 with respect to the turning center is determined. When the moving direction calculation unit 30 determines that the movement is changed by the combined operation, the display control unit 11 determines the radial moving direction of the projection corresponding point MA regardless of whether the boom 810 is in the dead zone. When the moving direction calculating unit 30 determines that the radius does not change due to the composite operation, the display control unit 11 does not display the mark 500 that specifies the radial moving direction of the projection corresponding point MA. It may be.

オペレータが複合操作を行うように操作部820に操作を入力しているときは、オペレータは、入力している操作の内容と、実際のフック830の投影点Mの移動方向との対応関係を直感的に認識しづらくなることがある。しかし、フック830の投影点Mの半径が変化する複合操作のときは、画像表示装置110が、フック830の投影点Mが実際に動き始める前から移動方向を矢印500x,500yで表示することにより、半径が変化する動きとなることをオペレータに予告することができ、フック830の投影対応点MAと周囲との位置関係について注意を惹かせることができる。   When the operator inputs an operation to the operation unit 820 so as to perform a composite operation, the operator intuitively understands the correspondence between the content of the input operation and the actual moving direction of the projection point M of the hook 830. May be difficult to recognize. However, in the case of a composite operation in which the radius of the projection point M of the hook 830 changes, the image display device 110 displays the movement direction with arrows 500x and 500y before the projection point M of the hook 830 actually starts moving. The operator can be informed in advance that the movement will change the radius, so that the operator can draw attention to the positional relationship between the projection corresponding point MA of the hook 830 and the surroundings.

本実施形態の画像表示装置110は、フック830の投影対応点MAの移動方向を特定する印500として矢印500x,500yを適用したが、これらの矢印500x,500yの表示パネル12における長さを、地上面H0における所定の長さ(例えば、長さ1[m])を表す一定の長さに形成することもできる。   The image display device 110 of the present embodiment applies the arrows 500x and 500y as the marks 500 for specifying the moving direction of the projection corresponding point MA of the hook 830. The lengths of the arrows 500x and 500y on the display panel 12 are as follows. It may be formed to have a predetermined length representing a predetermined length (for example, length 1 [m]) on the ground surface H0.

このように、表示パネル12に示される矢印500x,500yの長さを、地上面H0における一定の長さに対応させたことにより、地上面H0において移動する投影対応点MAと周囲との距離感や、周囲の物体(障害物等)の大きさを、オペレータに認識させ易くすることができる。   As described above, the lengths of the arrows 500x and 500y shown on the display panel 12 correspond to the fixed lengths on the ground surface H0, so that the distance between the projection corresponding point MA moving on the ground surface H0 and the surroundings can be felt. Also, it is possible to make it easy for the operator to recognize the size of a surrounding object (such as an obstacle).

さらに、表示制御部11は、表示パネル12に表示された矢印500x,500yの傍らに、その矢印500x,500yが表す地上面H0における長さを示す文字を併せて表示させるようにしてもよい。
図10は、一方の矢印500yの傍らに、その矢印500yが表す地上面H0における長さを示す文字(例えば、長さ1[m]を表す「1m」の文字)を併せて表示した表示例を示す図である。
このように、地上面H0における矢印500yの長さを示す文字を併せて表示パネル12に表示させることにより、オペレータに、具体的な距離感や大きさに関する情報を提供することができる。
Further, the display control unit 11 may cause a character indicating the length on the ground surface H0 represented by the arrows 500x and 500y to be displayed beside the arrows 500x and 500y displayed on the display panel 12.
FIG. 10 is a display example in which a character indicating the length on the ground surface H0 indicated by the arrow 500y (for example, a character “1m” indicating a length of 1 [m]) is displayed beside one arrow 500y. FIG.
In this way, by displaying characters indicating the length of the arrow 500y on the ground surface H0 together with the display panel 12, it is possible to provide the operator with specific information regarding a sense of distance and size.

なお、表示制御部11は、上述した矢印500x,500yを、地上面H0での所定の長さに対応させて表示させるか否かを、監視カメラ300のズーム倍率や、フック830の地上高に応じて設定することもできる。
例えば、監視カメラ300のズーム倍率が大きいときは、所定の長さを示す矢印500x,500yが大きくなり過ぎて表示パネル12からはみ出すことが起こり得る。この場合には、矢印500x,500yの表示を、地上面H0での所定の長さよりも小さくすることで、表示パネル12に、矢印500x,500yの全体を表示することができる。
The display control unit 11 determines whether or not to display the above-described arrows 500x and 500y corresponding to a predetermined length on the ground surface H0 based on the zoom magnification of the monitoring camera 300 and the ground clearance of the hook 830. It can be set accordingly.
For example, when the zoom magnification of the surveillance camera 300 is large, the arrows 500x and 500y indicating the predetermined lengths may become too large and protrude from the display panel 12. In this case, by making the display of the arrows 500x and 500y smaller than the predetermined length on the ground surface H0, the entirety of the arrows 500x and 500y can be displayed on the display panel 12.

一方、監視カメラ300のズーム倍率が小さいときは、所定の長さを示す矢印500x,500yが小さくなり過ぎて視認しづらくなることが起こり得る。この場合には、矢印500x,500yの表示を、地上面H0での所定の長さよりも大きくすることで、表示パネル12における、矢印500x,500yの表示を見易くすることができる。   On the other hand, when the zoom magnification of the monitoring camera 300 is small, the arrows 500x and 500y indicating the predetermined length may be too small to be visually recognized. In this case, the display of the arrows 500x and 500y on the display panel 12 can be made easier to see by making the display of the arrows 500x and 500y longer than a predetermined length on the ground surface H0.

また、フック830の高さは、例えば、フック830を吊り下げているワイヤロープ840の繰り出し長さを検出することで、例えば移動方向算出部30により検出することができる。ワイヤロープ840の繰り出し長さは、ワイヤロープ840を巻き上げ、巻き下げするウインチモータの回転量に応じて間接的に検出することもできる。
そして、例えば、フック830の高さが高いとき(例えば、地上高50[m]程度のとき)は、矢印500x,500yの長さを地上面H0で長さ1[m]に対応させて表示しても、表示の長さが短くなり過ぎて視認しづらくなることが起こり得る。この場合には、矢印500x,500yの表示を、地上面H0での所定の長さよりも大きくすることで、表示パネル12における、矢印500x,500yの表示を見易くすることができる。
In addition, the height of the hook 830 can be detected by, for example, the moving direction calculation unit 30 by detecting the extension length of the wire rope 840 hanging the hook 830. The extension length of the wire rope 840 can also be indirectly detected according to the rotation amount of a winch motor that winds and unwinds the wire rope 840.
Then, for example, when the height of the hook 830 is high (for example, when the ground height is about 50 [m]), the lengths of the arrows 500x and 500y are displayed on the ground surface H0 in correspondence with the length 1 [m]. Even so, it is possible that the length of the display becomes too short to make it difficult to visually recognize. In this case, the display of the arrows 500x and 500y on the display panel 12 can be made easier to see by making the display of the arrows 500x and 500y longer than a predetermined length on the ground surface H0.

一方、フック830の高さが低いとき(例えば、地上高1[m]程度のとき)は、フック830が地上面H0に配置された吊り荷700に近づいている状況が想定される。この場合、矢印500x,500y自体の表示が不要となり得る。この場合、矢印500x,500yの大きさを、地上面H0での所定の長さよりも小さくすることで、吊り荷700の画像が矢印500x,500yで遮られるのを防止することができる。   On the other hand, when the height of the hook 830 is low (for example, at a height of about 1 [m] above the ground), it is assumed that the hook 830 is approaching the suspended load 700 arranged on the ground surface H0. In this case, it may not be necessary to display the arrows 500x and 500y themselves. In this case, by making the sizes of the arrows 500x and 500y smaller than the predetermined length on the ground surface H0, it is possible to prevent the image of the suspended load 700 from being blocked by the arrows 500x and 500y.

[実施形態3]
上述した実施形態1,2は、フック830の投影点Mを、地上面H0における投影点とした例を示すものである。しかし、本発明に係る画像表示装置は、フックの投影点として地上面への投影点に限定するものではない。すなわち、本発明の画像表示装置は、フックの投影点を、図4に示すように地上面H0から高さ(地上高)hの水平面Hhへの投影点M1とし、その投影点M1に対応する、表示パネル12に表示された投影対応点M1Aを特定する印610を、フック830の画像830Aとともに表示するものであってもよい。
[Embodiment 3]
Embodiments 1 and 2 described above show examples in which the projection point M of the hook 830 is a projection point on the ground surface H0. However, the image display device according to the present invention is not limited to the projection point of the hook on the ground surface. That is, the image display device of the present invention sets the projection point of the hook as the projection point M1 from the ground surface H0 to the horizontal plane Hh at a height (ground height) h as shown in FIG. 4, and corresponds to the projection point M1. The mark 610 for specifying the projection corresponding point M1A displayed on the display panel 12 may be displayed together with the image 830A of the hook 830.

具体的には、画像表示装置の投影対応点算出部が、フック830の、地上高hの水平面Hhへの投影点M1に対応する、表示パネル12に表示された投影対応点M1Aの位置を算出すればよい。
図11は、図7に示した画像表示装置110における投影対応点算出部40に代えて、投影対応点算出部41を備えた画像表示装置120を示すブロック図である。この画像表示装置120は、本発明に係る画像表示装置の一実施形態である。
Specifically, the projection corresponding point calculation unit of the image display device calculates the position of the projection corresponding point M1A displayed on the display panel 12 corresponding to the projection point M1 of the hook 830 on the horizontal plane Hh at the ground height h. do it.
FIG. 11 is a block diagram showing an image display device 120 including a projection corresponding point calculation unit 41 instead of the projection corresponding point calculation unit 40 in the image display device 110 shown in FIG. The image display device 120 is an embodiment of the image display device according to the present invention.

ここで、投影対応点算出部41は、ブーム状態情報部200から入力されたブーム810の長さL及び起伏角度αと、高さ入力部210に入力された地上高hとに基づいて、フック830の、地上高hの水平面Hh(予め設定された水平面の一例)への投影点M1に対応する、表示パネル12に表示された投影対応点M1Aの位置を求める。
具体的には、ブーム810の長さL、起伏角度αのとき、ブーム810の先端から地上高hの水平面Hhまでの距離(高さ)H′は、上記式(4)により算出される。
H′=H−h (4)
ただし、高さHは式(1)による。
Here, the projection corresponding point calculation unit 41 uses the hook L based on the length L and the elevation angle α of the boom 810 input from the boom state information unit 200 and the ground height h input to the height input unit 210. The position of the projection corresponding point M1A displayed on the display panel 12 corresponding to the projection point M1 on the horizontal plane Hh (an example of a preset horizontal plane) at the ground height h is obtained.
Specifically, when the length L of the boom 810 is equal to the elevation angle α, the distance (height) H ′ from the tip of the boom 810 to the horizontal plane Hh at the ground height h is calculated by the above equation (4).
H ′ = H−h (4)
However, the height H is based on equation (1).

また、監視カメラ300の画角をθとすると、監視カメラ300で撮影される地上高hの水平面Hhにおける撮影幅D′は、下記式(5)により算出される。
D′={H′×tan(θ/2)}×2 (5)
ここで、撮影幅D′の中心位置(監視カメラ300の光軸と水平面Hhとの交点)をO′とすると、水平面Hhにおける投影点M1は、撮影幅D′の中心位置O′から距離D1だけ離れた位置となる。
Further, assuming that the angle of view of the monitoring camera 300 is θ, the shooting width D ′ on the horizontal plane Hh at the ground height h captured by the monitoring camera 300 is calculated by the following equation (5).
D ′ = {H ′ × tan (θ / 2)} × 2 (5)
Here, assuming that the center position of the photographing width D '(intersection between the optical axis of the monitoring camera 300 and the horizontal plane Hh) is O', the projection point M1 on the horizontal plane Hh is a distance D1 from the center position O 'of the photographing width D'. It will be just a distance away.

図12は、投影対応点M1Aの位置及び印610を示す図2相当の模式図である。撮影幅D′に対する表示パネル12の大きさの比(表示比)をK′とすると、図12に示すように、中心位置O′から距離D1だけ離れた投影点M1に対応する投影対応点M1Aの、中心位置oから距離D1A′は、下記式(6)により算出される。
D1A′=D1×K′ (6)
したがって、表示パネル12の画像Pにおける投影対応点M1Aは、表示パネル12の中心位置oから、式(1),(4)〜(6)により算出された距離D1A′の位置で、かつワイヤロープ840の画像840Aの延長線840V上の位置であることが求められる。
FIG. 12 is a schematic diagram corresponding to FIG. 2 showing the position of the projection corresponding point M1A and the mark 610. Assuming that the ratio of the size of the display panel 12 to the photographing width D '(display ratio) is K', as shown in FIG. 12, the projection corresponding point M1A corresponding to the projection point M1 separated from the center position O 'by a distance D1. The distance D1A 'from the center position o is calculated by the following equation (6).
D1A ′ = D1 × K ′ (6)
Therefore, the projection corresponding point M1A in the image P of the display panel 12 is located at the position of the distance D1A 'calculated from the center position o of the display panel 12 by the equations (1), (4) to (6), and the wire rope. The position of the image 840 on the extension line 840V of the image 840A is required.

なお、ブーム810の起伏の支点までの地上高h0、監視カメラ300の画角θ、表示比Kは、ブーム810の状態に拘わらず一定であって、かつ予め設定されている値であるため、投影対応点算出部41に予め記憶されている。そして、投影対応点算出部41は、ブーム状態情報部200から入力されたブーム810の長さL及び起伏角度αと、高さ入力部210に入力された地上高hと、予め記憶された各値とに基づき、式(1),(4)〜(6)にしたがって投影対応点M1Aの位置を求め、求められた投影対応点M1Aの位置を表示制御部11に出力する。   Note that the ground height h0 up to the fulcrum of the boom 810, the angle of view θ of the surveillance camera 300, and the display ratio K are constant regardless of the state of the boom 810 and are preset values. It is stored in the projection corresponding point calculation unit 41 in advance. Then, the projection corresponding point calculation unit 41 calculates the length L and the elevation angle α of the boom 810 input from the boom state information unit 200, the ground height h input to the height input unit 210, and Based on the values, the position of the projection corresponding point M1A is obtained according to the equations (1), (4) to (6), and the obtained position of the projection corresponding point M1A is output to the display control unit 11.

表示制御部11は、投影対応点算出部41から入力されたフック830の投影対応点M1Aの位置に、投影対応点M1Aを特定する印610(例えば、×印)を生成する。そして、表示パネル12は、図12に示すように、表示制御部11で生成された印610を、フック830の画像830Aを含む画像Pに重畳させて表示する。   The display control unit 11 generates a mark 610 (for example, a cross) for specifying the projection corresponding point M1A at the position of the projection corresponding point M1A of the hook 830 input from the projection corresponding point calculation unit 41. Then, as shown in FIG. 12, the display panel 12 displays the mark 610 generated by the display control unit 11 so as to be superimposed on the image P including the image 830A of the hook 830.

このように構成された画像表示装置120によれは、地上高hの水平面Hhへの、フック830の投影点M1に対応する投影対応点M1Aを表示パネル12に表示させることができる。
これにより、フック830を例えば地上高hのビルの屋上等に降ろす場合にも、その屋上等への投影点M1に対応する投影対応点M1Aが印600で表示されるため、表示パネル12に表示された画像Pを見ながらクレーン800の操作を行うオペレータに対して、投影点M1の位置を認識させ易くすることができる。
According to the image display device 120 configured as described above, the projection corresponding point M1A corresponding to the projection point M1 of the hook 830 on the horizontal plane Hh at the ground height h can be displayed on the display panel 12.
Accordingly, even when the hook 830 is dropped on, for example, the roof of a building with a ground height h, the projection corresponding point M1A corresponding to the projection point M1 on the roof or the like is displayed with the mark 600, so that it is displayed on the display panel 12. The operator who operates the crane 800 while viewing the image P can easily recognize the position of the projection point M1.

なお、投影対応点算出部40が、地上面H0における投影対応点MAの位置を算出するのに対して、投影対応点算出部41は、地上高hの水平面における投影対応点M1Aの位置を算出する以外は、投影対応点算出部40と同じである。投影対応点算出部41は、地上高h=0とすることで、投影対応点算出部40と同様に、地上面H0における投影対応点MAの位置を算出することもできる。   Note that the projection corresponding point calculation unit 40 calculates the position of the projection corresponding point MA on the ground surface H0, whereas the projection corresponding point calculation unit 41 calculates the position of the projection corresponding point M1A on the horizontal plane at the ground height h. Otherwise, the configuration is the same as that of the projection corresponding point calculation unit 40. By setting the ground height h = 0, the projection corresponding point calculation unit 41 can also calculate the position of the projection corresponding point MA on the ground surface H0, similarly to the projection corresponding point calculation unit 40.

10 表示部
11 表示制御部
12 表示パネル
20 操作信号取得部
30 移動方向算出部
40 投影対応点算出部
100 画像表示装置
300 監視カメラ
800 クレーン
810 ブーム
820 操作部
830 フック
840 ワイヤロープ
Reference Signs List 10 display unit 11 display control unit 12 display panel 20 operation signal acquisition unit 30 moving direction calculation unit 40 projection corresponding point calculation unit 100 image display device 300 monitoring camera 800 crane 810 boom 820 operation unit 830 hook 840 wire rope

Claims (4)

クレーンのブームに設けられたカメラで撮影され、前記ブームからワイヤロープで吊り下げられたフックを含む画像を表示する表示部と、
前記フックの、予め設定された高さの水平面への投影点に対応する、前記表示部に表示された投影対応点を求める投影対応点算出部と、
前記フックを移動させるように操作部に入力された操作、に対応して出力された操作信号を取得する操作信号取得部と、
前記操作部に入力された操作により、水平面における前記フックの移動方向を、前記操作信号取得部により取得された操作信号に基づいて求める移動方向算出部と、を備え、
前記表示部は、前記投影対応点算出部により求められた前記投影対応点を特定する印を、前記フックの画像とともに表示し、
前記操作信号取得部が取得した操作信号が、前記操作部に操作を入力しても前記フックが実際に動き始めない不感帯域に対応した操作信号のときは、前記表示部は、前記移動方向算出部により求められた前記フックの移動方向を前記投影対応点の移動方向として特定する印を、前記投影対応点を特定する印とともに表示し、
前記操作信号取得部が取得した操作信号が、前記不感帯域を超えた大きさの操作に対応した、前記フックを実際に動かす操作信号であるときは、前記表示部は、前記投影対応点の移動方向として特定する印を表示しない画像表示装置。
A display unit that displays an image captured by a camera provided on a crane boom and that includes a hook suspended from the boom by a wire rope;
A projection corresponding point calculation unit that obtains a projection corresponding point displayed on the display unit, corresponding to a projection point on a horizontal plane having a preset height of the hook,
An operation signal acquisition unit that acquires an operation signal are output in correspondence with the operation, which is input to the operation portion so that moving the hook,
A moving direction calculating unit that obtains a moving direction of the hook in a horizontal plane based on the operation signal acquired by the operation signal acquiring unit, by an operation input to the operating unit,
The display unit displays a mark identifying the projection corresponding point obtained by the projection corresponding point calculation unit together with the hook image,
The operation signal operation signal acquisition unit has acquired, entering the operation to the operation section-out preparative operation signal corresponding to the dead zone in which the hook does not start actually move, the display unit, the moving direction A mark that specifies the moving direction of the hook determined by the calculating unit as the moving direction of the projection corresponding point is displayed together with a mark that specifies the projection corresponding point,
Operating signals the operating signal acquisition unit has acquired, corresponding to the operation of the size exceeds the deadband, when pre SL is an operation signal to actually move the hook, the display unit, of the projection corresponding point An image display device that does not display a mark that specifies a moving direction.
前記表示部に表示された、前記投影対応点の移動方向を特定する印の長さが、前記水平面における所定の長さに対応して一定の長さを表す請求項1に記載の画像表示装置。 The image display device according to claim 1 , wherein a length of a mark, which is displayed on the display unit and specifies a moving direction of the projection corresponding point, represents a certain length corresponding to a predetermined length on the horizontal plane. . 前記表示部は、前記所定の長さを表す文字を、前記投影対応点の移動方向を特定する印の傍に表示する請求項2に記載の画像表示装置。 The image display device according to claim 2, wherein the display unit displays a character representing the predetermined length beside a mark that specifies a moving direction of the projection corresponding point. 前記投影対応点算出部は、前記ブームの伸縮状態及び起伏状態並びに前記水平面の高さに応じて、前記投影対応点を求める請求項1から3のうちいずれか1項に記載の画像表示装置。 The projection corresponding point calculation unit, depending on the height of the expansion state and relief conditions and the horizontal plane of the boom, the image display apparatus according to any one of claims 1 or al 3 for obtaining the projection corresponding point .
JP2015061197A 2015-03-24 2015-03-24 Image display device Active JP6631023B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015061197A JP6631023B2 (en) 2015-03-24 2015-03-24 Image display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015061197A JP6631023B2 (en) 2015-03-24 2015-03-24 Image display device

Publications (2)

Publication Number Publication Date
JP2016179889A JP2016179889A (en) 2016-10-13
JP6631023B2 true JP6631023B2 (en) 2020-01-15

Family

ID=57131495

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015061197A Active JP6631023B2 (en) 2015-03-24 2015-03-24 Image display device

Country Status (1)

Country Link
JP (1) JP6631023B2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6772765B2 (en) * 2016-11-07 2020-10-21 株式会社タダノ Image display device
JP6888287B2 (en) * 2016-12-09 2021-06-16 株式会社タダノ crane
JP7033872B2 (en) 2017-09-19 2022-03-11 株式会社Nttファシリティーズ Work support device and work support method
JP7138421B2 (en) * 2017-10-02 2022-09-16 株式会社Nttファシリティーズ Work support device and work support method
JP7010072B2 (en) 2018-03-09 2022-01-26 株式会社タダノ Work vehicle
CN109215081A (en) * 2018-11-27 2019-01-15 合肥工业大学 A kind of tower crane space-location method based on machine vision
CN114408751B (en) * 2021-12-27 2023-05-30 上海旷通科技有限公司 Method and equipment for auxiliary positioning of lifting hook

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5876679B2 (en) * 2011-07-08 2016-03-02 株式会社タダノ Performance line display device
JP6017782B2 (en) * 2011-12-09 2016-11-02 株式会社タダノ Information system for height information of objects around suspended loads

Also Published As

Publication number Publication date
JP2016179889A (en) 2016-10-13

Similar Documents

Publication Publication Date Title
JP6631023B2 (en) Image display device
JP5876679B2 (en) Performance line display device
JP6121670B2 (en) Work plan confirmation device
JP6550803B2 (en) Image display device
US9783397B2 (en) Work state monitoring device for work vehicle
JP2013120176A (en) System for notifying height information of object around hoisting load
JP6888287B2 (en) crane
JP2015214409A (en) Boom collision avoidance system for work machine
JP2018090366A (en) Overwinding detection device
JP2016153335A (en) Suspended load monitoring equipment
JP6053141B2 (en) Work confirmation device
CN111788143B (en) Remote operation terminal and work vehicle
JP6528474B2 (en) Image display device
JP5557492B2 (en) Jib control device in crane equipment
US20220340398A1 (en) Crane information display system
JP2018076131A (en) Image display device
WO2021060471A1 (en) Crane information display system
JP2019142679A (en) Suspended load monitoring device
JP2015048209A (en) Crane device, track crane, and operation range control method of crane device
JP2016113218A (en) Dynamic lift off assist device
JP7088432B2 (en) Hazard range display device for cranes and cranes
JP2014105090A (en) Work confirmation device
EP4190737A1 (en) Dynamic lift-off control device and mobile crane
JP6680056B2 (en) Suspended position detector and suspended position detector
JP2023075793A (en) Crane device and control program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180316

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190205

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190212

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190315

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20190315

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190507

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190610

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191112

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191125

R150 Certificate of patent or registration of utility model

Ref document number: 6631023

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250