JP2015229582A - Height detector - Google Patents
Height detector Download PDFInfo
- Publication number
- JP2015229582A JP2015229582A JP2014117623A JP2014117623A JP2015229582A JP 2015229582 A JP2015229582 A JP 2015229582A JP 2014117623 A JP2014117623 A JP 2014117623A JP 2014117623 A JP2014117623 A JP 2014117623A JP 2015229582 A JP2015229582 A JP 2015229582A
- Authority
- JP
- Japan
- Prior art keywords
- height
- camera
- monitor
- boom
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Length Measuring Devices By Optical Means (AREA)
Abstract
Description
この発明は、ブーム先端部に設けたカメラで撮像した画像から物体の高さを検出する高さ検出装置に関する。 The present invention relates to a height detection device that detects the height of an object from an image captured by a camera provided at a boom tip.
従来から、ブームの先端部にカメラを設けたクレーン用監視カメラ装置が知られている(特許文献1参照)。 2. Description of the Related Art Conventionally, a crane surveillance camera device in which a camera is provided at the tip of a boom is known (see Patent Document 1).
係るクレーン用監視カメラ装置は、カメラハウジングをブームの先端に取り付け、このカメラハウジング内に軸を支点にしてX軸方向に回転可能に揺動台が設けられており、この揺動台に軸を支点にしてY軸方向に回転可能にカメラ台が設けられている。このカメラ台にテレビカメラが固定され、モータによって揺動台がX軸方向に回転し、別なモータによってカメラ台がY軸方向に回転し、これにより、フック周辺領域を広範囲に亘って撮影することができるようになっている。 In this crane surveillance camera device, a camera housing is attached to the tip of a boom, and a swing base is provided in the camera housing so as to be rotatable in the X-axis direction with the shaft as a fulcrum. A camera base is provided so as to be rotatable in the Y-axis direction as a fulcrum. A TV camera is fixed to the camera base, the swing base is rotated in the X-axis direction by a motor, and the camera base is rotated in the Y-axis direction by another motor, thereby photographing the area around the hook over a wide range. Be able to.
ところで、このようなクレーン用監視カメラ装置では、撮像される画像から物体の高さを求めることができないという問題がある。この問題を解消するためには、ステレオカメラを設ければよいが、このステレオカメラで撮像された2つの画像を画像処理しなければならず、このため、その高さを求めるための演算処理の構成が複雑になってしまうという問題がある。 By the way, in such a crane surveillance camera device, there is a problem that the height of an object cannot be obtained from a captured image. In order to solve this problem, a stereo camera may be provided. However, it is necessary to perform image processing on two images captured by the stereo camera. For this reason, an arithmetic process for obtaining the height is performed. There is a problem that the configuration becomes complicated.
この発明の目的は、画像処理を行わなくても物体の高さを求めることのできる高さ検出装置を提供することにある。 An object of the present invention is to provide a height detection apparatus that can determine the height of an object without performing image processing.
請求項1の発明は、作業機のブームの先端部に設けられたカメラと、このカメラで撮像した画像を表示するモニタとを備え、該モニタの画面に映し出されている物体の高さを求める高さ検出装置であって、
前記モニタの画面に表示されている物体像の下端及びその物体像の上端の位置と、カメラの高さ位置とに基づいて物体の高さを演算する演算手段を設けたことを特徴とする。
The invention of claim 1 includes a camera provided at the tip of the boom of the work implement and a monitor that displays an image captured by the camera, and obtains the height of the object displayed on the screen of the monitor. A height detection device,
An arithmetic means is provided for calculating the height of the object based on the position of the lower end of the object image displayed on the monitor screen, the position of the upper end of the object image, and the height position of the camera.
この発明によれば、画像処理を行わなくても、しかも1つのカメラで撮像した画像から物体の高さを求めることができる。 According to the present invention, the height of an object can be obtained from an image captured by one camera without performing image processing.
以下、この発明に係る高さ検出装置の実施の形態である実施例を図面に基づいて説明する。 Hereinafter, an embodiment as an embodiment of a height detection apparatus according to the present invention will be described with reference to the drawings.
[第1実施例] [First embodiment]
図1に高さ検出装置を搭載した作業機であるクレーン(作業車)としてラフテレーンクレーン10を示す。このラフテレーンクレーン10(以下クレーンとして記載する)は、走行機能を有する車両の本体部分となるキャリア11と、このキャリア11の前側に設けられた左右一対の前側アウトリガ12と、キャリア11の後側に設けられた左右一対の後側アウトリガ13と、キャリア11の上部に水平旋回可能に取り付けられた旋回台14と、旋回台14に設けたキャビン20と、旋回台14に固定されたブラケット15に取り付けられた伸縮ブーム16等とを備えている。 FIG. 1 shows a rough terrain crane 10 as a crane (work vehicle) which is a working machine equipped with a height detection device. The rough terrain crane 10 (hereinafter referred to as a crane) includes a carrier 11 serving as a main body portion of a vehicle having a traveling function, a pair of left and right front outriggers 12 provided on the front side of the carrier 11, and a rear side of the carrier 11. A pair of left and right rear outriggers 13 provided on the upper side of the carrier 11, a swivel base 14 attached to the top of the carrier 11, a cabin 20 provided on the swivel base 14, and a bracket 15 fixed to the swivel base 14. And a telescopic boom 16 attached thereto.
伸縮ブーム16は、その基端部が支持軸17を介して取り付けられており、支持軸17を中心に起伏可能となっている。ブラケット15と伸縮ブーム16との間には起伏用シリンダ18が介装され、この起伏用シリンダ18の伸縮により伸縮ブーム16が起伏される。 The telescopic boom 16 has a base end attached via a support shaft 17 and can be raised and lowered around the support shaft 17. A hoisting cylinder 18 is interposed between the bracket 15 and the telescopic boom 16, and the telescopic boom 16 is hoisted by expansion and contraction of the hoisting cylinder 18.
伸縮ブーム16は、ベースブーム16Aと中間ブーム16Bと先端ブーム16Cとを有し、この順序でベースブーム16A内に外側から内側に入れ子式に組み合わされて構成されている。また、伸縮ブーム16は伸縮シリンダ(図示せず)によって伸縮するようになっている。 The telescopic boom 16 has a base boom 16A, an intermediate boom 16B, and a tip boom 16C, and is configured to be nested in the base boom 16A in this order from the outside to the inside. The telescopic boom 16 is expanded and contracted by an expansion cylinder (not shown).
先端ブーム16Cの先端部にはシーブ23(図3A参照)が設けられており、このシーブ23にワイヤロープ25(以下ワイヤと表記する)が掛けられ、このワイヤ25によってフックブロック19が吊されている。フックブロック19にはフック21が取り付けられている。 A sheave 23 (see FIG. 3A) is provided at the tip of the tip boom 16C. A wire rope 25 (hereinafter referred to as a wire) is hung on the sheave 23, and the hook block 19 is suspended by the wire 25. Yes. A hook 21 is attached to the hook block 19.
ワイヤ25は、図示しないウインチによって巻き取られたり、送り出されたりする。 The wire 25 is wound or sent out by a winch (not shown).
先端ブーム16Cの先端部には、カメラユニット30が取り付けられている。 A camera unit 30 is attached to the distal end portion of the distal end boom 16C.
カメラユニット30は、自重によって常に下方に向くようにダンパを介して先端ブーム16Cの先端部に取り付けられた筺体31と、この筺体31内にパン方向及びチルト方向に傾斜可能に設けられたTVカメラなどである監視カメラ(カメラ)32と、監視カメラ32をパン方向に傾動させるパンモータ33(図2参照)と、監視カメラ32をチルト方向に傾動させるチルトモータ34などとを有している。 The camera unit 30 includes a housing 31 attached to the distal end portion of the front end boom 16C via a damper so as to always face downward due to its own weight, and a TV camera provided in the housing 31 so as to be tiltable in the pan direction and the tilt direction. A surveillance camera (camera) 32, a pan motor 33 (see FIG. 2) for tilting the surveillance camera 32 in the pan direction, a tilt motor 34 for tilting the surveillance camera 32 in the tilt direction, and the like.
また、カメラユニット30内には、監視カメラ32のパン方向の傾きを検出するパンセンサS1と、チルト方向の傾きを検出するチルトセンサS2とが設けられている。パンセンサS1及びチルトセンサS2は筺体31に対する監視カメラ32のパン方向及びチルト方向の傾斜角度を検出するが、筺体31は自重により真下を向くようになっているので、垂直線に対する監視カメラ32のパン方向及びチルト方向の傾斜角度を検出することになる。 In the camera unit 30, a pan sensor S1 for detecting the tilt in the pan direction of the monitoring camera 32 and a tilt sensor S2 for detecting the tilt in the tilt direction are provided. The pan sensor S1 and the tilt sensor S2 detect the tilt angle of the monitoring camera 32 in the pan direction and the tilt direction with respect to the housing 31, but the housing 31 is directed directly downward due to its own weight. The tilt angle in the direction and the tilt direction is detected.
監視カメラ32の傾斜(向き)の調整は、キャビン20内に設けた操作部(図示せず)のパンスイッチ(姿勢操作手段)SW1(図2参照)とチルトスイッチSW2(姿勢操作手段)の操作によって行われる。また、監視カメラ32はズームスイッチSW3の操作によってズームを行うようになっている。
[高さ検出装置]
The tilt (orientation) of the surveillance camera 32 is adjusted by operating a pan switch (posture operation means) SW1 (see FIG. 2) and a tilt switch SW2 (posture operation means) of an operation unit (not shown) provided in the cabin 20. Is done by. The surveillance camera 32 zooms by operating the zoom switch SW3.
[Height detection device]
図2は、物体の高さを検出する高さ検出装置100の構成を示すブロック図である。 FIG. 2 is a block diagram illustrating a configuration of a height detection apparatus 100 that detects the height of an object.
高さ検出装置100は、カメラユニット30と、監視カメラ32の傾斜角度を検出するパンセンサS1及びチルトセンサS2と、監視カメラ32で撮像された画像を表示するモニタ40と、モニタ40の表示画面(図示せず)に貼られたタッチパネル41と、タッチパネル41のタッチ位置を検出するタッチ位置検出センサ42と、ブーム姿勢検出センサ50と、コントローラ60とを備えている。
[ブーム姿勢検出センサ]
The height detection apparatus 100 includes a camera unit 30, a pan sensor S1 and a tilt sensor S2 that detect the tilt angle of the monitoring camera 32, a monitor 40 that displays an image captured by the monitoring camera 32, and a display screen of the monitor 40 ( A touch panel 41 attached to the touch panel 41 (not shown), a touch position detection sensor 42 that detects a touch position of the touch panel 41, a boom posture detection sensor 50, and a controller 60 are provided.
[Boom attitude detection sensor]
ブーム姿勢検出センサ50は、伸縮ブーム16の長さや起伏角や伸縮ブーム16の旋回角などを検出するものであり、それぞれを検出する各センサ(図示せず)を有している。
[コントローラ]
The boom posture detection sensor 50 detects the length and undulation angle of the telescopic boom 16, the turning angle of the telescopic boom 16, and the like, and has sensors (not shown) for detecting each.
[controller]
コントローラ60は、カメラ高さ演算部61及び物体高さ演算部(演算手段)62の他にモータ制御部63を有している。モータ制御部63は、パンスイッチSW1やチルトスイッチSW2の操作に基づいてパンモータ33やチルトモータ34を駆動制御する。 The controller 60 includes a motor control unit 63 in addition to the camera height calculation unit 61 and the object height calculation unit (calculation unit) 62. The motor control unit 63 drives and controls the pan motor 33 and the tilt motor 34 based on the operation of the pan switch SW1 and the tilt switch SW2.
また、コントローラ60は、キャビン20内に設けた操作部(図示せず)の操作によって各種のシリンダ(図示せず)を制御して伸縮ブーム16の伸縮動作や起伏動作や旋回動作を行わせるようになっている。
[カメラ高さ演算部]
In addition, the controller 60 controls various cylinders (not shown) by operating an operation unit (not shown) provided in the cabin 20 so that the telescopic boom 16 can be expanded, undulated and swung. It has become.
[Camera height calculator]
カメラ高さ演算部61は、ブーム姿勢検出センサ50が検出した検出信号(伸縮ブーム16の長さと起伏角)と、監視カメラ32の光学中心点と伸縮ブーム16の先端部のシーブ中心点との位置関係とに基づいて、地上から監視カメラ32の光学中心点までの高さを求める。光学中心点と伸縮ブーム16の先端部のシーブ中心点との位置関係は既知なので、カメラ位置のデータとしてカメラ高さ演算部61に予め入力されている。
[物体高さ演算部]
The camera height calculation unit 61 includes a detection signal (length and undulation angle of the telescopic boom 16) detected by the boom posture detection sensor 50, an optical center point of the monitoring camera 32, and a sheave center point of the distal end portion of the telescopic boom 16. Based on the positional relationship, the height from the ground to the optical center point of the monitoring camera 32 is obtained. Since the positional relationship between the optical center point and the sheave center point at the tip of the telescopic boom 16 is known, it is input in advance to the camera height calculation unit 61 as camera position data.
[Object height calculator]
物体高さ演算部62は、カメラ高さ演算部61が求めた地上から監視カメラ32の光学中心点までの高さと、タッチパネル41のタッチ位置とに基づいて物体の高さを求めるものであり、タッチパネル41のタッチ位置に基づいて後述する物体像の下端及び上端の位置を演算する位置演算部(図示せず)を有している。また、物体高さ演算部62は、後述する基準位置E1を求める基準位置算出部(図示せず)と、この基準位置E1に対応するモニタ40の画面上の基準画像位置GE1(図4参照)を求める座標位置算出部(図示せず)を有している。以下に、物体の高さを求める原理について説明する。
[原 理]
The object height calculation unit 62 calculates the height of the object based on the height from the ground obtained by the camera height calculation unit 61 to the optical center point of the monitoring camera 32 and the touch position of the touch panel 41. A position calculation unit (not shown) that calculates the positions of the lower and upper ends of an object image, which will be described later, based on the touch position of the touch panel 41 is provided. The object height calculation unit 62 also includes a reference position calculation unit (not shown) for obtaining a reference position E1 described later, and a reference image position GE1 on the screen of the monitor 40 corresponding to the reference position E1 (see FIG. 4). A coordinate position calculation unit (not shown) for obtaining Hereinafter, the principle for obtaining the height of the object will be described.
[Principle]
図3及び図3Aに示すように、地上から監視カメラ32の光学中心点Q1までの高さをHGnとし、この光学中心点Q1の真下の地上Fの位置を基準位置E1とする。監視カメラ32が真下に向けられている場合、図3及び図3Aの基準位置E1に対応するモニタ40(図4参照)の画面40G上の位置を基準画像位置GE1とすると、この基準画像位置GE1は画面40Gの画像中心位置GPaとなる。 As shown in FIGS. 3 and 3A, the height from the ground to the optical center point Q1 of the surveillance camera 32 is HGn, and the position of the ground F just below the optical center point Q1 is the reference position E1. When the monitoring camera 32 is directed directly below, assuming that the position on the screen 40G of the monitor 40 (see FIG. 4) corresponding to the reference position E1 in FIGS. 3 and 3A is the reference image position GE1, this reference image position GE1. Is the image center position GPa of the screen 40G.
また、監視カメラ32が撮像しているビル(物体)Tの高さをH1、ビルTの屋上の境界である縁部(上端)の位置をP1とし、この位置P1と光学中心点Q1とを結ぶ直線をL1、この直線L1と地上Fとの交点の位置をP2とし、この位置P2と基準位置E1との間の距離をB、ビルTの下端の位置をP3とし、この位置P3と基準位置E1との間の距離をA、光学中心点Q1と基準位置E1とを結ぶ直線をL2、直線L1と直線L2とのなす角度をθとすると、ビルTの壁面Taと直線L1とのなす角度はθとなる。 The height of the building (object) T captured by the surveillance camera 32 is H1, and the position of the edge (upper end) which is the boundary of the roof of the building T is P1, and this position P1 and the optical center point Q1 are The connecting straight line is L1, the position of the intersection of the straight line L1 and the ground F is P2, the distance between this position P2 and the reference position E1 is B, the lower end position of the building T is P3, and this position P3 and the reference When the distance between the position E1 is A, the straight line connecting the optical center point Q1 and the reference position E1 is L2, and the angle between the straight line L1 and the straight line L2 is θ, the wall Ta of the building T and the straight line L1 are formed. The angle is θ.
そして、図3A及び図4に示すように、光学中心点Q1と基準位置E1と位置P2を頂点とする三角形と、位置P1,P2,P3を頂点とする三角形は相似形であるから、HGn:B=H1:(B−A)である。これにより、H1=HGn・(1−A/B)となる。 As shown in FIGS. 3A and 4, the triangle having the vertexes at the optical center point Q1, the reference position E1, and the position P2 and the triangles having the vertexes at the positions P1, P2, and P3 are similar to each other. B = H1: (BA). As a result, H1 = HGn · (1−A / B).
すなわち、高さHGnと距離A,Bが分かれば、ビルTの高さを求めることができる。 That is, if the height HGn and the distances A and B are known, the height of the building T can be obtained.
高さHGnは、図3Aに示すように、地上Fから伸縮ブーム16の先端部のシーブ23の中心軸23Jまでの高さH2からオフセット量W2を差し引いた値として求めることができる。高さH2は、伸縮ブーム16の長さと起伏角により求めることができ、オフセット量W2はシーブ23と監視カメラ32の位置関係が分かっているので、伸縮ブーム16の起伏角が分かればオフセット量W2を求めることができる。 The height HGn can be obtained as a value obtained by subtracting the offset amount W2 from the height H2 from the ground F to the central axis 23J of the sheave 23 at the tip of the telescopic boom 16 as shown in FIG. 3A. The height H2 can be obtained from the length and undulation angle of the telescopic boom 16, and the offset amount W2 knows the positional relationship between the sheave 23 and the surveillance camera 32. Therefore, if the undulation angle of the telescopic boom 16 is known, the offset amount W2 is obtained. Can be requested.
また、図3Aに示す位置P2,P3は、図4に示すように、モニタ40の画面40Gに映し出されているビル像GTの交点GP2,GP3であるから、画面上において図3Aに示す距離Aは、図4に示す画面40G上の基準画像位置GE1(GPa)から交点GP3までの距離GAであり、距離Bは基準画像位置GE1から交点GP2までの距離GBである。この距離GA,GBはピクセル数として求める。 Further, since the positions P2 and P3 shown in FIG. 3A are the intersections GP2 and GP3 of the building image GT displayed on the screen 40G of the monitor 40 as shown in FIG. 4, the distance A shown in FIG. Is the distance GA from the reference image position GE1 (GPa) on the screen 40G shown in FIG. 4 to the intersection GP3, and the distance B is the distance GB from the reference image position GE1 to the intersection GP2. The distances GA and GB are obtained as the number of pixels.
したがって、高さHGnが分かっているので、監視カメラ32の画角とズーム倍率と画面40G上のピクセル数GA,GBとから距離A,Bを求めることができる。 Therefore, since the height HGn is known, the distances A and B can be obtained from the angle of view of the monitoring camera 32, the zoom magnification, and the number of pixels GA and GB on the screen 40G.
監視カメラ32がチルトやパンしている場合、例えば、図5に示すように、角度αだけ監視カメラ32が垂直線Loに対して傾斜している場合、監視カメラ32の光軸をLa、この光軸Laと地上Fの交点をPaとすると、この交点Paが図6に示す画面40Gの画像中心位置GPaとなる。また、図5において、監視カメラ32の光学中心点Q1の真下の位置が基準位置E1であり、この基準位置E1と交点Paとの離間距離Dは、D=HGn・tanαで求めることができる。 When the surveillance camera 32 is tilted or panned, for example, as shown in FIG. 5, when the surveillance camera 32 is inclined with respect to the vertical line Lo by an angle α, the optical axis of the surveillance camera 32 is set to La. If the intersection of the optical axis La and the ground F is Pa, this intersection Pa becomes the image center position GPa of the screen 40G shown in FIG. In FIG. 5, the position immediately below the optical center point Q1 of the monitoring camera 32 is the reference position E1, and the separation distance D between the reference position E1 and the intersection Pa can be obtained by D = HGn · tan α.
したがって、図6に示すように、画像中心位置GPaから下方(図6において)に、距離Dに対応したピクセル数GDだけ離れた画面40G上の位置が基準画像位置GE1となる。 Therefore, as shown in FIG. 6, the position on the screen 40G that is separated from the image center position GPa (in FIG. 6) by the number of pixels GD corresponding to the distance D becomes the reference image position GE1.
そして、画面40G上の基準画像位置GE1から交点GP3,GP2までの距離(ピクセル数)を求めれば、上記と同様にしてビルTの高さを求めることができる。
[動 作]
If the distance (number of pixels) from the reference image position GE1 on the screen 40G to the intersections GP3 and GP2 is obtained, the height of the building T can be obtained in the same manner as described above.
[Operation]
次に、上記のように構成される高さ検出装置100の動作について説明する。 Next, the operation of the height detection apparatus 100 configured as described above will be described.
いま、監視カメラ32が真下に向けられて、例えば図3及び図3Aに示すようにビルTが撮像され、モニタ40の画面に図4に示すように画面40Gが表示されているものとする。 Now, it is assumed that the surveillance camera 32 is pointed directly below, for example, the building T is imaged as shown in FIGS. 3 and 3A, and the screen 40G is displayed on the screen of the monitor 40 as shown in FIG.
図2に示すブーム姿勢検出センサ50は、このときの伸縮ブーム16の伸縮長さや起伏角を検出し、コントローラ60のカメラ高さ演算部61がブーム姿勢検出センサ50の検出信号と監視カメラ32の取付位置などに基づいて監視カメラ32の高さ位置HGn(図3及び図3A参照)を求める。 The boom posture detection sensor 50 shown in FIG. 2 detects the telescopic length and undulation angle of the telescopic boom 16 at this time, and the camera height calculation unit 61 of the controller 60 detects the detection signal of the boom posture detection sensor 50 and the monitoring camera 32. The height position HGn (see FIGS. 3 and 3A) of the monitoring camera 32 is obtained based on the mounting position and the like.
一方、コントローラ60の物体高さ演算部62は、パンセンサS1及びチルトセンサS2が検出する検出信号に基づいて、監視カメラ32が真下に向けられていると判断するとともに、監視カメラ32の光学中心点Q1の真下の基準位置E1に対応したモニタ40の画面40Gの基準画像位置GE1を求める。監視カメラ32が真下に向けられている場合、基準画像位置GE1は画面40Gの画像中心位置GPaとなる。 On the other hand, the object height calculation unit 62 of the controller 60 determines that the monitoring camera 32 is directed directly below based on the detection signals detected by the pan sensor S1 and the tilt sensor S2, and the optical center point of the monitoring camera 32. A reference image position GE1 of the screen 40G of the monitor 40 corresponding to the reference position E1 directly below Q1 is obtained. When the monitoring camera 32 is pointed directly below, the reference image position GE1 is the image center position GPa of the screen 40G.
また、物体高さ演算部62は、基準画像位置GE1を通るとともに伸縮ブーム16の伸長方向に延びるガイドラインNを図4に示すようにモニタ40の画面40G上に表示する。 Further, the object height calculation unit 62 displays a guideline N passing through the reference image position GE1 and extending in the extending direction of the telescopic boom 16 on the screen 40G of the monitor 40 as shown in FIG.
オペレータは、モニタ40に表示されているガイドラインNとビルTの屋上の境界線を示す境界線像(上端)GT1との交点GP2上と、ビルTの地上Fとの境界線を示す境界線像(下端)GT2とガイドラインNとの交点GP3上とをタッチパネル41を介してタッチする。タッチパネル41がタッチされると、タッチ位置検出センサ42がタッチされた位置を検出する。 The operator displays the boundary line image indicating the boundary line between the intersection line GP2 between the guideline N displayed on the monitor 40 and the boundary line image (upper end) GT1 indicating the boundary line on the roof of the building T and the ground F of the building T. (Lower end) Touch the intersection GP3 between GT2 and the guideline N via the touch panel 41. When the touch panel 41 is touched, the touched position detection sensor 42 detects the touched position.
物体高さ演算部62は、タッチ位置検出センサ42が検出したタッチ位置に基づいて図4に示す距離GA,GBのピクセル数を求め、このピクセル数GA,GBと、監視カメラ32の高さHGnとに基づいて、原理で説明したように幾何学的にビルTの高さH1を求める。この高さH1はモニタ40の画面に表示する。 The object height calculation unit 62 calculates the number of pixels of the distances GA and GB shown in FIG. 4 based on the touch position detected by the touch position detection sensor 42, and the number of pixels GA and GB and the height HGn of the monitoring camera 32. Based on the above, the height H1 of the building T is obtained geometrically as described in the principle. This height H1 is displayed on the screen of the monitor 40.
このように、物体高さ演算部62は、監視カメラ32の高さ位置HGnと、タッチ位置検出センサ42が検出したタッチ位置とに基づいて、幾何学的にビルTの高さを求めるものであるから、画像処理が不要となり、しかも1つの監視カメラ32で撮像した画像から物体の高さを求めることができるので、物体高さ演算部62の演算処理の構成は簡単なものとなり、安価な高さ検出装置100を提供することができる。
[監視カメラ32がチルトやパンしている場合]
As described above, the object height calculation unit 62 geometrically calculates the height of the building T based on the height position HGn of the monitoring camera 32 and the touch position detected by the touch position detection sensor 42. Therefore, no image processing is required, and the height of the object can be obtained from an image captured by one monitoring camera 32. Therefore, the configuration of the calculation processing of the object height calculation unit 62 is simple and inexpensive. The height detection apparatus 100 can be provided.
[When surveillance camera 32 is tilted or panned]
図5に示すように、監視カメラ32が傾斜して例えば監視カメラ32の光軸Laが垂直線Loに対して角度α傾斜している場合、物体高さ演算部62は、パンセンサS1及びチルトセンサS2が検出する検出信号に基づいて、監視カメラ32が垂直線に対して角度αで傾斜していると判断する。そして、物体高さ演算部62は、監視カメラ32の光学中心点Q1の真下の基準位置E1に対応したモニタ40の画面40G上の基準画像位置GE1を原理で説明したように求め、この基準画像位置GE1を通り、伸縮ブーム16の伸長方向に延びたガイドラインNを図6に示すようにモニタ40の画面40G上に表示させる。 As shown in FIG. 5, when the monitoring camera 32 is tilted and, for example, the optical axis La of the monitoring camera 32 is tilted at an angle α with respect to the vertical line Lo, the object height calculation unit 62 includes the pan sensor S1 and the tilt sensor. Based on the detection signal detected by S2, it is determined that the surveillance camera 32 is inclined at an angle α with respect to the vertical line. Then, the object height calculator 62 obtains the reference image position GE1 on the screen 40G of the monitor 40 corresponding to the reference position E1 directly below the optical center point Q1 of the monitoring camera 32 as described in principle, and this reference image The guideline N passing through the position GE1 and extending in the extending direction of the telescopic boom 16 is displayed on the screen 40G of the monitor 40 as shown in FIG.
オペレータは、図6に示すように、モニタ40に表示されているガイドラインNとビルTの屋上の境界線を示す境界線像(上端)GT1との交点GP2上と、ビルTの地上Fとの境界線を示す境界線像(下端)GT2とガイドラインNとの交点GP3上とをタッチパネル41を介してタッチすれば、物体高さ演算部62は、上記と同様に幾何学的にビルTの高さを求めてモニタ40に表示する。 As shown in FIG. 6, the operator connects the guideline N displayed on the monitor 40 and the boundary line image (upper end) GT1 indicating the boundary line of the roof of the building T GT1 and the ground F of the building T to the ground F If the boundary line image (lower end) GT2 indicating the boundary line and the intersection GP3 of the guideline N are touched via the touch panel 41, the object height calculation unit 62 geometrically increases the height of the building T as described above. This is displayed on the monitor 40.
このように、監視カメラ32がチルトやパンしている場合であっても、幾何学的にビルTの高さを求めることができ、画像処理が不要となり、しかも1つの監視カメラ32で撮像した画像から物体の高さを求めることができるので、物体高さ演算部62の演算処理の構成は簡単なものとなり、安価な高さ検出装置100を提供することができる。
ところで、上記実施例では、タッチパネル41のタッチ位置を交点GP2,GP3としているが、そのタッチ位置付近の画像の輪郭線の位置を画像認識により求めて、そのタッチ位置に近い輪郭線の位置を交点GP2,GP3として求めてもよい。この場合、タッチ位置付近の画像部分だけを画像処理すればよいので、画像処理の負荷が小さくて済むとともに、正確な交点GP2,GP3を求めることができ、ビルTの正確な高さを求めることができることになる。
また、ビルTの建物のような場合、上端と下端の境界線が平行になっていることを利用して、その上端と下端の境界線をパターン認識によって求めてもよい。この場合、その境界線の位置が画像認識によって分かるので、交点GP2,GP3の位置を求めることができ、このためタッチパネル41は不要となる。また、この場合も、パターン認識を利用するので画像処理の負荷が小さく、しかも建物の正確な高さを求めることができる。
さらに、モニタ40の表示画面にカーソルを表示させ、このカーソルを交点位置GP2,GP3に移動させて、この交点位置GP2,GP3をカーソルで指定して求めるようにしてもよい。この場合、画像認識とタッチパネル41は不要となる。
Thus, even when the surveillance camera 32 is tilted or panned, the height of the building T can be obtained geometrically, image processing is not required, and the image is taken by one surveillance camera 32. Since the height of the object can be obtained from the image, the configuration of the calculation processing of the object height calculation unit 62 is simple, and the inexpensive height detection apparatus 100 can be provided.
By the way, in the said Example, although the touch position of the touch panel 41 is made into intersection GP2, GP3, the position of the outline of the image of the vicinity of the touch position is calculated | required by image recognition, and the position of the outline close to the touch position is the intersection You may obtain | require as GP2 and GP3. In this case, since only the image portion near the touch position needs to be image-processed, the image processing load can be reduced, and the accurate intersections GP2 and GP3 can be obtained, and the exact height of the building T can be obtained. Will be able to.
Further, in the case of a building T, the boundary line between the upper end and the lower end may be obtained by pattern recognition using the fact that the boundary line between the upper end and the lower end is parallel. In this case, since the position of the boundary line is known by image recognition, the positions of the intersections GP2 and GP3 can be obtained, and thus the touch panel 41 is not necessary. Also in this case, since pattern recognition is used, the image processing load is small, and the accurate height of the building can be obtained.
Furthermore, a cursor may be displayed on the display screen of the monitor 40, the cursor may be moved to the intersection positions GP2 and GP3, and the intersection positions GP2 and GP3 may be specified by the cursor and obtained. In this case, image recognition and the touch panel 41 are unnecessary.
この発明は、上記実施例に限られるものではなく、特許請求の範囲の各請求項に係る発明の要旨を逸脱しない限り、設計の変更や追加等は許容される。 The present invention is not limited to the above-described embodiments, and design changes and additions are permitted without departing from the spirit of the invention according to each claim of the claims.
10 クレーン
16 伸縮ブーム
32 監視カメラ(カメラ)
40 モニタ
41 タッチパネル
50 ブーム姿勢検出センサ
60 コントローラ
61 カメラ高さ演算部
62 物体高さ演算部
S1 パンセンサ
S2 チルトセンサ
SW1 パンスイッチ(姿勢操作手段)
SW2 チルトスイッチ(姿勢操作手段)
10 Crane 16 Telescopic boom 32 Surveillance camera (camera)
40 Monitor 41 Touch Panel 50 Boom Attitude Detection Sensor 60 Controller 61 Camera Height Calculation Unit 62 Object Height Calculation Unit S1 Pan Sensor S2 Tilt Sensor SW1 Pan Switch (Attitude Operation Unit)
SW2 Tilt switch (Attitude control means)
Claims (4)
前記モニタの画面に表示されている物体像の下端及びその物体像の上端の位置と、カメラの高さ位置とに基づいて物体の高さを演算する演算手段を設けたことを特徴とする高さ検出装置。 A height detection device that includes a camera provided at a tip of a boom of a work implement and a monitor that displays an image captured by the camera, and obtains the height of an object displayed on the screen of the monitor. ,
A high unit characterized by comprising a calculation means for calculating the height of an object based on the position of the lower end of the object image displayed on the monitor screen, the upper end of the object image, and the height position of the camera. Detection device.
前記演算手段は、前記物体像の下端及び上端をタッチパネルを介してタッチすることにより物体像の下端及び上端の位置を演算する位置演算部を有し、この位置演算部が求めた物体像の下端及び上端の位置と、カメラの高さ位置とに基づいて物体の高さを求めることを特徴とする請求項1に記載の高さ検出装置。 A touch panel provided on the screen of the monitor;
The calculation means includes a position calculation unit that calculates the positions of the lower end and the upper end of the object image by touching the lower end and the upper end of the object image via a touch panel, and the lower end of the object image obtained by the position calculation unit The height detection apparatus according to claim 1, wherein the height of the object is obtained based on the position of the upper end and the height position of the camera.
前記演算手段は、前記傾斜角検出手段が検出したカメラの傾斜角とブーム姿勢検出手段が検出したブームの長さ及び起伏角とに基づいて前記基準位置を求める基準位置算出部と、この基準位置算出部が求めた基準位置に対応するモニタの画面上の基準画像位置を求める座標位置算出部とを有し、
前記ガイドラインは、前記座標位置算出部が求めた基準画像位置を通るように表示されることを特徴とする請求項3に記載の高さ検出装置。 Inclination angle detection means for detecting the inclination angle of the camera, and boom posture detection means for detecting the posture of the boom,
The calculation means includes a reference position calculation unit for obtaining the reference position based on the tilt angle of the camera detected by the tilt angle detection means and the boom length and undulation angle detected by the boom posture detection means, and the reference position A coordinate position calculation unit for obtaining a reference image position on the monitor screen corresponding to the reference position obtained by the calculation unit;
The height detection apparatus according to claim 3, wherein the guide line is displayed so as to pass through a reference image position obtained by the coordinate position calculation unit.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014117623A JP6402497B2 (en) | 2014-06-06 | 2014-06-06 | Height detection device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014117623A JP6402497B2 (en) | 2014-06-06 | 2014-06-06 | Height detection device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015229582A true JP2015229582A (en) | 2015-12-21 |
JP6402497B2 JP6402497B2 (en) | 2018-10-10 |
Family
ID=54886575
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014117623A Active JP6402497B2 (en) | 2014-06-06 | 2014-06-06 | Height detection device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6402497B2 (en) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019501398A (en) * | 2016-01-11 | 2019-01-17 | ダトロン・アクチエンゲゼルシャフト | Method for determining XYZ reference coordinates of workpiece and machine tool |
JP2019147685A (en) * | 2018-02-28 | 2019-09-05 | 株式会社タダノ | Crane calculating length of slinging tool and method for calculating length of slinging tool |
US10544012B2 (en) | 2016-01-29 | 2020-01-28 | Manitowoc Crane Companies, Llc | Visual outrigger monitoring system |
US10717631B2 (en) | 2016-11-22 | 2020-07-21 | Manitowoc Crane Companies, Llc | Optical detection and analysis of crane hoist and rope |
CN115508818A (en) * | 2022-10-11 | 2022-12-23 | 北京中科飞鸿科技股份有限公司 | Radio altimeter simulation height measuring device |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013120176A (en) * | 2011-12-09 | 2013-06-17 | Tadano Ltd | System for notifying height information of object around hoisting load |
-
2014
- 2014-06-06 JP JP2014117623A patent/JP6402497B2/en active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013120176A (en) * | 2011-12-09 | 2013-06-17 | Tadano Ltd | System for notifying height information of object around hoisting load |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019501398A (en) * | 2016-01-11 | 2019-01-17 | ダトロン・アクチエンゲゼルシャフト | Method for determining XYZ reference coordinates of workpiece and machine tool |
US10544012B2 (en) | 2016-01-29 | 2020-01-28 | Manitowoc Crane Companies, Llc | Visual outrigger monitoring system |
US10717631B2 (en) | 2016-11-22 | 2020-07-21 | Manitowoc Crane Companies, Llc | Optical detection and analysis of crane hoist and rope |
US10829347B2 (en) | 2016-11-22 | 2020-11-10 | Manitowoc Crane Companies, Llc | Optical detection system for lift crane |
US11124392B2 (en) | 2016-11-22 | 2021-09-21 | Manitowoc Crane Companies, Llc | Optical detection and analysis for boom angles on a crane |
US11130658B2 (en) | 2016-11-22 | 2021-09-28 | Manitowoc Crane Companies, Llc | Optical detection and analysis of a counterweight assembly on a crane |
JP2019147685A (en) * | 2018-02-28 | 2019-09-05 | 株式会社タダノ | Crane calculating length of slinging tool and method for calculating length of slinging tool |
CN115508818A (en) * | 2022-10-11 | 2022-12-23 | 北京中科飞鸿科技股份有限公司 | Radio altimeter simulation height measuring device |
CN115508818B (en) * | 2022-10-11 | 2024-01-30 | 北京中科飞鸿科技股份有限公司 | Radio altimeter simulation height measurement device |
Also Published As
Publication number | Publication date |
---|---|
JP6402497B2 (en) | 2018-10-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5876679B2 (en) | Performance line display device | |
US9667923B2 (en) | Camera attitude detection device and work region line display device | |
JP6402497B2 (en) | Height detection device | |
JP6017782B2 (en) | Information system for height information of objects around suspended loads | |
US9540218B2 (en) | Work plan verification device | |
JP5971994B2 (en) | Crane work monitoring device | |
JP2011207571A (en) | Crane control device and crane | |
JP2016153335A (en) | Suspended load monitoring equipment | |
JP2011079648A (en) | Stationary image display system | |
CN111386369B (en) | Construction machine | |
JP6080450B2 (en) | Surveillance camera device | |
JP6550803B2 (en) | Image display device | |
JP6162481B2 (en) | Work area line display device | |
JP2014151979A (en) | Map preparation device for service car | |
US20210238017A1 (en) | Crane and information-sharing system | |
JP6053141B2 (en) | Work confirmation device | |
JP6421451B2 (en) | Camera posture detection device | |
JP6146994B2 (en) | Crane surveillance camera | |
JP6097063B2 (en) | Height measuring device and height measuring method | |
JP6257947B2 (en) | Work vehicle ambient information acquisition device | |
JP6202667B2 (en) | Crane lighting equipment | |
JP7107447B2 (en) | Crane information display system | |
JP6528474B2 (en) | Image display device | |
JP7167464B2 (en) | Remote control terminal and work vehicle equipped with remote control terminal | |
JP2021098587A (en) | Crane performance line display device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170518 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180424 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180619 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20180619 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180710 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180724 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180814 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180827 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6402497 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |