JP2021009481A - Unmanned aircraft control system - Google Patents
Unmanned aircraft control system Download PDFInfo
- Publication number
- JP2021009481A JP2021009481A JP2019121894A JP2019121894A JP2021009481A JP 2021009481 A JP2021009481 A JP 2021009481A JP 2019121894 A JP2019121894 A JP 2019121894A JP 2019121894 A JP2019121894 A JP 2019121894A JP 2021009481 A JP2021009481 A JP 2021009481A
- Authority
- JP
- Japan
- Prior art keywords
- aerial vehicle
- unmanned aerial
- control system
- control unit
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004364 calculation method Methods 0.000 claims abstract description 24
- 230000008859 change Effects 0.000 claims description 65
- 238000003384 imaging method Methods 0.000 claims description 52
- 238000001514 detection method Methods 0.000 claims description 46
- 230000003287 optical effect Effects 0.000 claims description 14
- 238000007689 inspection Methods 0.000 description 37
- 238000010586 diagram Methods 0.000 description 19
- 238000000034 method Methods 0.000 description 18
- 230000005540 biological transmission Effects 0.000 description 14
- 230000001151 other effect Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008439 repair process Effects 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
Landscapes
- Studio Devices (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Abstract
Description
本発明は、無人航空機と操作装置とを備えた無人航空機制御システムに関する。 The present invention relates to an unmanned aerial vehicle control system including an unmanned aerial vehicle and an operating device.
近年、無人航空機を用いて、例えば高所の位置等を点検する方法が知られている。また、無人航空機の操縦を補助する機能が種々検討されている。例えば、特許文献1には、無人航空機の操縦を補助する機能として、無人航空機の離陸時の不安定性を減少させる方法が提案されている。 In recent years, a method of inspecting, for example, the position of a high place using an unmanned aerial vehicle has been known. In addition, various functions for assisting the operation of unmanned aerial vehicles have been studied. For example, Patent Document 1 proposes a method of reducing instability during takeoff of an unmanned aerial vehicle as a function of assisting the operation of the unmanned aerial vehicle.
ところで、無人航空機は操縦者から数百m〜数km離れていても飛行可能であるが、操縦者と無人航空機との距離が離れている場合、操縦者は無人航空機の向きを判別することが困難となる。これにより、操縦者の前方方向と無人航空機の前方方向とが異なる場合、無人航空機を操縦者の意図する方向に操縦するのは困難である。このため、無人航空機による障害物等への接近や飛行禁止区域への侵入につながる、という問題点がある。 By the way, an unmanned aerial vehicle can fly even if it is several hundred meters to several kilometers away from the pilot, but when the distance between the pilot and the unmanned aerial vehicle is large, the pilot can determine the direction of the unmanned aerial vehicle. It will be difficult. As a result, it is difficult to steer the unmanned aerial vehicle in the direction intended by the pilot when the forward direction of the pilot and the forward direction of the unmanned aerial vehicle are different. For this reason, there is a problem that the unmanned aerial vehicle may approach obstacles and the like and invade the no-fly zone.
本発明は、このような点を鑑みてなされたものであり、無人航空機の操縦性を向上させることが可能な無人航空機制御システムを提供することを課題とする。 The present invention has been made in view of these points, and an object of the present invention is to provide an unmanned aerial vehicle control system capable of improving the maneuverability of an unmanned aerial vehicle.
本発明に係る無人航空機制御システムは、前方の方位を検出する第1方位センサを有する無人航空機と、前記無人航空機の飛行を制御する制御部を有し、前記無人航空機の飛行を操作する操作装置とを備えた無人航空機制御システムであって、前記操作装置は、前記無人航空機を旋回させて前記無人航空機の前方の方位を変更する変更ボタンをさらに有し、前記制御部は、目標方位を設定する方位設定部と、前記目標方位と前記変更ボタンの入力時の前記第1方位センサが検出した検出方位とから前記無人航空機の旋回角度を算出する旋回角度算出部と、前記旋回角度に基づいて前記無人航空機を旋回させ前記無人航空機の前方の方位を前記目標方位に変更する方位制御部と、を備える。 The unmanned aerial vehicle control system according to the present invention has an unmanned aerial vehicle having a first azimuth sensor for detecting a forward direction and a control unit for controlling the flight of the unmanned aerial vehicle, and is an operating device for operating the flight of the unmanned aerial vehicle. An unmanned aerial vehicle control system comprising the above, wherein the operating device further has a change button for turning the unmanned aerial vehicle to change the forward orientation of the unmanned aerial vehicle, and the control unit sets a target orientation. Based on the turning angle calculation unit that calculates the turning angle of the unmanned aerial vehicle from the target direction and the detection direction detected by the first direction sensor when the change button is input, and the turning angle. It includes a direction control unit that turns the unmanned aerial vehicle and changes the direction in front of the unmanned aerial vehicle to the target direction.
なお、本明細書および特許請求の範囲において、「ボタン」とは、物理ボタン(物理キーともいう)に限らず、タッチパネル等の非機械式のボタンを含む概念である。 In the present specification and claims, the "button" is a concept that includes not only physical buttons (also referred to as physical keys) but also non-mechanical buttons such as a touch panel.
本発明の無人航空機制御システムによれば、操縦者と無人航空機との距離が離れており操縦者が無人航空機の向きを判別することができない場合であっても、操縦者が変更ボタンを操作(入力)することにより、旋回角度算出部が算出した旋回角度に基づいて方位制御部は無人航空機を旋回させ無人航空機の前方の方位を目標方位に変更する。このため、無人航空機を操縦者の意図する方向に操縦することができるので、無人航空機による障害物等への接近や飛行禁止区域への侵入を抑制することができる。このように、無人航空機の操縦性を向上させることができる。 According to the unmanned aerial vehicle control system of the present invention, the operator operates the change button even when the distance between the operator and the unmanned aerial vehicle is so large that the operator cannot determine the direction of the unmanned aerial vehicle. By inputting), the direction control unit turns the unmanned aerial vehicle based on the turning angle calculated by the turning angle calculation unit, and changes the front direction of the unmanned aerial vehicle to the target direction. Therefore, since the unmanned aerial vehicle can be operated in the direction intended by the operator, it is possible to prevent the unmanned aerial vehicle from approaching obstacles and the like and entering the no-fly zone. In this way, the maneuverability of the unmanned aerial vehicle can be improved.
上記無人航空機制御システムにおいて、好ましくは、前記方位設定部は、前記無人航空機が離陸したタイミングで前記第1方位センサが検出した検出方位を前記目標方位に設定する。このように構成すれば、操縦者が変更ボタンを操作することにより、無人航空機の向き(前方の方位)を離陸位置での方位(離陸時の方位)に変更することができる。このため、操縦者は離陸位置での無人航空機の向き(方位)を覚えておくだけで、意図する方向に無人航空機を容易に操縦することができる。 In the unmanned aerial vehicle control system, preferably, the directional setting unit sets the detected directional sensor detected by the first directional sensor at the timing when the unmanned aerial vehicle takes off as the target directional control. With this configuration, the operator can change the direction of the unmanned aerial vehicle (direction in front) to the direction at the takeoff position (direction at takeoff) by operating the change button. Therefore, the operator can easily operate the unmanned aerial vehicle in the intended direction only by remembering the direction (direction) of the unmanned aerial vehicle at the takeoff position.
上記無人航空機制御システムにおいて、好ましくは、前記操作装置は、前記操作装置の方位を検出する第2方位センサを有し、前記方位設定部は、前記変更ボタンの入力時の前記第2方位センサが検出した検出方位を、前記目標方位に設定する。このように構成すれば、操縦者が変更ボタンを操作することにより、無人航空機の向き(前方の方位)を操作装置の方位(向き)に変更することができる。このため、操縦者は無人航空機の方向に操作装置を向けるだけで、すなわち操縦者は無人航空機の方向に体を向けるだけで、操作装置の向きと無人航空機の向きとが一致するので、操縦者は意図する方向に無人航空機を容易に操縦することができる。 In the unmanned aircraft control system, preferably, the operating device has a second directional sensor that detects the direction of the operating device, and the directional setting unit uses the second directional sensor when the change button is input. The detected detection direction is set to the target direction. With this configuration, the operator can change the direction of the unmanned aerial vehicle (direction in front) to the direction (direction) of the operating device by operating the change button. For this reason, the pilot simply points the operating device in the direction of the unmanned aerial vehicle, that is, the operator simply turns the body in the direction of the unmanned aerial vehicle, and the orientation of the operating device matches the orientation of the unmanned aerial vehicle. Can easily steer an unmanned aerial vehicle in the intended direction.
上記無人航空機制御システムにおいて、好ましくは、前記無人航空機には、建物の屋根を撮像する撮像装置が搭載されており、前記方位設定部は、前記建物の前記屋根の輪郭線を構成する複数の直線部のうち、所定の直線部と直交する方位を、前記目標方位に設定する。このように構成すれば、無人航空機の前後左右方向と屋根の輪郭線を構成する直線部の方向とが平行になるので、無人航空機を屋根の輪郭線に沿って容易に移動させることができる。 In the unmanned aerial vehicle control system, preferably, the unmanned aerial vehicle is equipped with an imaging device for imaging the roof of a building, and the directional setting unit is a plurality of straight lines constituting the contour line of the roof of the building. Among the parts, the direction orthogonal to the predetermined straight line part is set as the target direction. With this configuration, the front-back and left-right directions of the unmanned aerial vehicle and the direction of the straight line portion forming the contour line of the roof are parallel to each other, so that the unmanned aerial vehicle can be easily moved along the contour line of the roof.
この場合、前記旋回角度算出部は、前記所定の直線部が前記撮像装置による撮像画像の横方向に沿って写るように前記目標方位を補正し、補正した目標方位と前記検出方位とから前記旋回角度を算出してもよい。このように構成すれば、撮像装置のパン角が0度以外の場合(撮像装置の光軸方向と無人航空機の前後方向とが一致していない場合)であっても、屋根の直線部を撮像画像の横方向に沿って写らせることができる。 In this case, the turning angle calculation unit corrects the target azimuth so that the predetermined straight line portion is captured along the lateral direction of the image captured by the imaging device, and the turning from the corrected target azimuth and the detected directional direction. The angle may be calculated. With this configuration, even if the pan angle of the image pickup device is other than 0 degrees (when the optical axis direction of the image pickup device and the front-rear direction of the unmanned aerial vehicle do not match), the straight part of the roof is imaged. It can be projected along the horizontal direction of the image.
上記無人航空機制御システムにおいて、好ましくは、前記無人航空機には、構造物を撮像する撮像装置が搭載されており、前記操作装置は、前記撮像装置により撮像する撮像ボタンをさらに有し、前記制御部は、前記撮像ボタンの入力時の前記第1方位センサが検出した検出方位を撮像画像データに関連付けて記憶し、前記方位設定部は、前記撮像画像データに関連付けて記憶された前記検出方位を、前記目標方位に設定する。このように構成すれば、例えば、同じ構造物に対して繰り返し点検等を行う場合に、初回の検査時に無人航空機の方位を撮像画像データに関連付けて記憶し、2回目以降の検査時に無人航空機の方位を初回の検査時に記憶した方位に変更することができる。これにより、初回の検査時の撮像画像と2回目以降の検査時の撮像画像とを同じ向きにすることができるので、画像の確認を容易に行うことができる。 In the unmanned aircraft control system, preferably, the unmanned aircraft is equipped with an image pickup device for imaging a structure, and the operation device further includes an image pickup button for imaging by the image pickup device, and the control unit. Stores the detection orientation detected by the first orientation sensor at the time of inputting the imaging button in association with the captured image data, and the orientation setting unit stores the detected orientation stored in association with the captured image data. Set to the target direction. With this configuration, for example, when the same structure is repeatedly inspected, the orientation of the unmanned aerial vehicle is stored in association with the captured image data at the first inspection, and the unmanned aerial vehicle is stored at the second and subsequent inspections. The orientation can be changed to the orientation memorized during the first inspection. As a result, the captured image at the first inspection and the captured image at the second and subsequent inspections can be oriented in the same direction, so that the images can be easily confirmed.
この場合、好ましくは、前記無人航空機は、前記無人航空機の位置を検出する位置検出装置をさらに有し、前記制御部は、前記撮像ボタンの入力時の前記位置検出装置が検出した検出位置を前記記憶された検出方位とともに前記撮像画像データに関連付けて記憶し、前記制御部による前記目標方位の変更に伴って、前記無人航空機の位置を前記検出位置に制御する。このように構成すれば、初回の検査時に無人航空機の位置を撮像画像データに関連付けて記憶し、2回目以降の検査時に無人航空機の位置を初回の検査時に記憶した位置に移動させることができる。これにより、初回の検査時の撮像位置と2回目以降の検査時の撮像位置とを同じ位置にすることができるので、画像の確認をより容易に行うことができる。 In this case, preferably, the unmanned aerial vehicle further includes a position detecting device for detecting the position of the unmanned aerial vehicle, and the control unit obtains the detection position detected by the position detecting device at the time of inputting the imaging button. It is stored in association with the captured image data together with the stored detection direction, and the position of the unmanned aerial vehicle is controlled to the detection position as the target direction is changed by the control unit. With this configuration, the position of the unmanned aerial vehicle can be stored in association with the captured image data at the time of the first inspection, and the position of the unmanned aerial vehicle can be moved to the position stored at the time of the first inspection at the second and subsequent inspections. As a result, the imaging position at the time of the first inspection and the imaging position at the time of the second and subsequent inspections can be set to the same position, so that the image can be confirmed more easily.
上記無人航空機制御システムにおいて、好ましくは、前記無人航空機には、光軸が前記無人航空機の前方に対して水平方向に成す角度であるパン角を変更可能な撮像装置が搭載されており、前記制御部は、前記変更ボタンの入力時の前記パン角を初期設定値に変更するパン角制御部を有する。このように構成すれば、例えば、無人航空機の向きと撮像装置の光軸の向きとを容易に一致させることができる。これにより、操縦者は操作装置の表示画面を見ながら無人航空機を操縦することができるので、無人航空機の操縦性をより向上させることができる。 In the unmanned aerial vehicle control system, preferably, the unmanned aerial vehicle is equipped with an imaging device capable of changing a pan angle, which is an angle formed by an optical axis in a horizontal direction with respect to the front of the unmanned aerial vehicle. The unit has a pan angle control unit that changes the pan angle at the time of inputting the change button to an initial set value. With this configuration, for example, the orientation of the unmanned aerial vehicle and the orientation of the optical axis of the image pickup apparatus can be easily matched. As a result, the operator can operate the unmanned aerial vehicle while looking at the display screen of the operating device, so that the maneuverability of the unmanned aerial vehicle can be further improved.
本発明によれば、無人航空機の操縦性を向上させることが可能な無人航空機制御システムを提供することができる。 According to the present invention, it is possible to provide an unmanned aerial vehicle control system capable of improving the maneuverability of an unmanned aerial vehicle.
以下、本発明の実施形態に係る無人航空機制御システムについて、図面を参照しながら説明する。 Hereinafter, the unmanned aerial vehicle control system according to the embodiment of the present invention will be described with reference to the drawings.
(第1実施形態)
図1は、本発明の第1実施形態に係る無人航空機制御システム1を示す模式図である。図2は、本発明の第1実施形態に係る無人航空機制御システム1の無人航空機10の構成を示すブロック図である。図3は、本発明の第1実施形態に係る無人航空機制御システム1の操作装置2の操縦装置30の構成を示すブロック図である。図4は、本発明の第1実施形態に係る無人航空機制御システム1の操作装置2の携帯端末50の構成を示すブロック図である。
(First Embodiment)
FIG. 1 is a schematic view showing an unmanned aerial vehicle control system 1 according to the first embodiment of the present invention. FIG. 2 is a block diagram showing a configuration of an unmanned aerial vehicle 10 of the unmanned aerial vehicle control system 1 according to the first embodiment of the present invention. FIG. 3 is a block diagram showing a configuration of a control device 30 of the operation device 2 of the unmanned aerial vehicle control system 1 according to the first embodiment of the present invention. FIG. 4 is a block diagram showing a configuration of a mobile terminal 50 of the operation device 2 of the unmanned aerial vehicle control system 1 according to the first embodiment of the present invention.
図1に示すように、本実施形態に係る無人航空機制御システム1は、無人航空機(UAV)10と、無人航空機10を制御する操作装置2と、によって構成されている。本実施形態では、無人航空機制御システム1は、例えば建物の屋根に損傷等の異常が生じているか否かを点検する際に用いられる。 As shown in FIG. 1, the unmanned aerial vehicle control system 1 according to the present embodiment is composed of an unmanned aerial vehicle (UAV) 10 and an operating device 2 for controlling the unmanned aerial vehicle 10. In the present embodiment, the unmanned aerial vehicle control system 1 is used, for example, when inspecting whether or not an abnormality such as damage has occurred on the roof of a building.
無人航空機10は、所謂ドローンであり、操作装置2から送信される後述する撮像位置データ等に基づいて、目標の屋根の上方まで自律飛行し屋根を撮像する。無人航空機10は、撮像した画像を操作装置2に送信する。 The unmanned aerial vehicle 10 is a so-called drone, and autonomously flies to above the target roof and images the roof based on the image pickup position data and the like transmitted from the operation device 2. The unmanned aerial vehicle 10 transmits the captured image to the operating device 2.
操作装置2は、操縦装置30および携帯端末50によって構成されている。携帯端末50は、操縦装置30の所定位置に固定されている。携帯端末50は、例えば、所定のプログラム(アプリケーションソフトウェア)をインストールしたスマートフォン、タブレット端末、パーソナルコンピュータ等であり、本実施形態ではスマートフォンである。操作装置2は、無人航空機10が撮像した画像を取得するとともに、後述する表示部52に画像を表示する。 The operation device 2 is composed of a control device 30 and a mobile terminal 50. The mobile terminal 50 is fixed at a predetermined position of the control device 30. The mobile terminal 50 is, for example, a smartphone, a tablet terminal, a personal computer, or the like on which a predetermined program (application software) is installed, and is a smartphone in the present embodiment. The operating device 2 acquires an image captured by the unmanned aerial vehicle 10 and displays the image on a display unit 52 described later.
以下、無人航空機10および操作装置2をより具体的に説明する。 Hereinafter, the unmanned aerial vehicle 10 and the operating device 2 will be described more specifically.
[無人航空機10の構成]
無人航空機10は図2に示すように、送受信部11と、受信機12と、高さセンサ13と、撮像装置14と、駆動部16と、第1方位センサ19と、ジャイロセンサ20と、制御部21と、を備えている。
[Structure of unmanned aerial vehicle 10]
As shown in FIG. 2, the unmanned aerial vehicle 10 controls the transmission / reception unit 11, the receiver 12, the height sensor 13, the image pickup device 14, the drive unit 16, the first direction sensor 19, and the gyro sensor 20. It includes a unit 21 and.
送受信部11は、操縦装置30との間でデータの無線送受信を行う。送受信部11が操縦装置30から受信する主要なデータとしては、飛行高さデータ、撮像位置データ、旋回角度データ等が挙げられる。送受信部11が操縦装置30に送信する主要なデータとしては、撮像した画像データ、方位データ等が挙げられる。 The transmission / reception unit 11 wirelessly transmits / receives data to / from the control device 30. The main data received by the transmission / reception unit 11 from the control device 30 includes flight height data, imaging position data, turning angle data, and the like. Examples of the main data transmitted by the transmission / reception unit 11 to the control device 30 include captured image data, orientation data, and the like.
受信機12は、GPS信号を受信するとともに、受信したGPS信号に基づいて受信機12の位置(経度、緯度)、すなわち無人航空機10自身の位置を検出する。 The receiver 12 receives the GPS signal and detects the position (longitude, latitude) of the receiver 12, that is, the position of the unmanned aerial vehicle 10 itself based on the received GPS signal.
高さセンサ13は、例えば気圧を計測する気圧センサからなり、無人航空機10の地面に対する高さ位置を検出する。なお、高さセンサ13を設けず、受信機12が受信したGPS信号に基づいて無人航空機10の地面に対する高さ位置を検出してもよい。 The height sensor 13 includes, for example, a barometric pressure sensor that measures barometric pressure, and detects the height position of the unmanned aerial vehicle 10 with respect to the ground. The height sensor 13 may not be provided, and the height position of the unmanned aerial vehicle 10 with respect to the ground may be detected based on the GPS signal received by the receiver 12.
撮像装置14は、カラーのデジタル画像を撮像できるカメラ(撮像部)を含んでおり、屋根を撮像して画像データを取得する。この画像データには、撮像位置データが関連付けられていてもよい。撮像装置14は、カメラに含まれるレンズの光軸を水平方向に動かすパン機能、上下方向に動かすチルト機能を有する。撮像装置14は、カメラの光軸のパン角およびチルト角を調整する調整部14aを含んでいる。なお、パン角とは、光軸が無人航空機10の前方に対して水平方向に成す角度であり、パン角の範囲は、例えば、無人航空機10の前方を中心として左右方向に約75度の角度範囲である。チルト角とは、光軸が無人航空機10の前方に対して上下方向に成す角度であり、チルト角の範囲は、例えば、無人航空機10の前方に対して、上側に30度の位置から下側に90度の位置(無人航空機10の真下の位置)までの角度範囲である。 The image pickup device 14 includes a camera (imaging unit) capable of capturing a color digital image, and images the roof to acquire image data. Imaging position data may be associated with this image data. The image pickup apparatus 14 has a pan function for moving the optical axis of the lens included in the camera in the horizontal direction and a tilt function for moving the optical axis in the vertical direction. The image pickup apparatus 14 includes an adjustment unit 14a for adjusting the pan angle and tilt angle of the optical axis of the camera. The pan angle is an angle formed by the optical axis in the horizontal direction with respect to the front of the unmanned aerial vehicle 10, and the range of the pan angle is, for example, an angle of about 75 degrees in the left-right direction centered on the front of the unmanned aerial vehicle 10. The range. The tilt angle is an angle formed by the optical axis in the vertical direction with respect to the front of the unmanned aerial vehicle 10, and the range of the tilt angle is, for example, from a position of 30 degrees upward to the lower side with respect to the front of the unmanned aerial vehicle 10. It is an angle range up to a position of 90 degrees (a position directly below the unmanned aerial vehicle 10).
駆動部16は、複数の回転翼と、回転翼に付与する駆動力を発生するモータと、モータに電力を供給する蓄電池と、を含んでいる。複数の回転翼の回転速度を個別に制御することによって、無人航空機10の飛行高さ、飛行経路、飛行速度、水平度、向き等を変更することができる。 The drive unit 16 includes a plurality of rotor blades, a motor that generates a driving force applied to the rotor blades, and a storage battery that supplies electric power to the motors. By individually controlling the rotation speeds of the plurality of rotor blades, the flight height, flight path, flight speed, levelness, orientation, etc. of the unmanned aerial vehicle 10 can be changed.
第1方位センサ19は、無人航空機10が向いている方位(前方の方位)を検出する。 The first direction sensor 19 detects the direction (forward direction) in which the unmanned aerial vehicle 10 is facing.
ジャイロセンサ20は、無人航空機10のピッチ軸、ロール軸およびヨー軸回りの角速度を検出する。これにより、無人航空機10の姿勢や旋回角度(水平面内における回転角度)を制御することが可能となる。 The gyro sensor 20 detects the angular velocities around the pitch axis, roll axis, and yaw axis of the unmanned aerial vehicle 10. This makes it possible to control the attitude and turning angle (rotation angle in the horizontal plane) of the unmanned aerial vehicle 10.
制御部21は、演算装置(CPU)21aおよび記憶装置(例えばRAM、ROM等)21bを含んでいる。演算装置21aは、記憶装置21bに記憶されている動作プログラムを実行する。 The control unit 21 includes an arithmetic unit (CPU) 21a and a storage device (for example, RAM, ROM, etc.) 21b. The arithmetic unit 21a executes an operation program stored in the storage device 21b.
制御部21は、送受信部11が受信した飛行高さデータ、撮像位置データ、旋回角度データ等を記憶する。また、制御部21は、撮像位置データおよび飛行高さデータに基づいて駆動部16を制御して、無人航空機10を自律飛行させる。また、制御部21は、撮像位置データに基づいて撮像装置14を制御して、撮像位置で屋根を撮像する。また、制御部21は、旋回角度データに基づいて駆動部16を制御して、無人航空機10を水平方向に所定角度旋回させる。また、制御部21は、撮像装置14が取得した画像データを記憶するとともに、操縦装置30に送信する。また、制御部21は、第1方位センサ19の検出結果(検出方位)を航空機方位データとして記憶するとともに、操縦装置30に送信する。 The control unit 21 stores flight height data, imaging position data, turning angle data, and the like received by the transmission / reception unit 11. Further, the control unit 21 controls the drive unit 16 based on the imaging position data and the flight height data to autonomously fly the unmanned aerial vehicle 10. Further, the control unit 21 controls the imaging device 14 based on the imaging position data to image the roof at the imaging position. Further, the control unit 21 controls the drive unit 16 based on the turning angle data to turn the unmanned aerial vehicle 10 at a predetermined angle in the horizontal direction. Further, the control unit 21 stores the image data acquired by the image pickup device 14 and transmits the image data to the control device 30. Further, the control unit 21 stores the detection result (detection direction) of the first direction sensor 19 as aircraft direction data and transmits it to the control device 30.
また、制御部21は、操縦装置30からの各種制御信号に基づいて、無人航空機10を所定方向に移動させたり、所定角度旋回させたり、撮像装置14のパン角やチルト角を変更したり、撮像装置14により画像を撮像したりする。また、制御部21は、後述するように、操縦装置30からの初期設定信号により、撮像装置14のパン角およびチルト角を初期設定値に変更する。 Further, the control unit 21 moves the unmanned aerial vehicle 10 in a predetermined direction, turns a predetermined angle, changes the pan angle and the tilt angle of the image pickup device 14, based on various control signals from the control device 30. An image is taken by the image pickup device 14. Further, as will be described later, the control unit 21 changes the pan angle and the tilt angle of the image pickup device 14 to the initial setting values by the initial setting signal from the control device 30.
[操作装置2の構成]
操作装置2は図1に示すように、操縦装置30および携帯端末50によって構成されている。
[Configuration of operating device 2]
As shown in FIG. 1, the operation device 2 is composed of a control device 30 and a mobile terminal 50.
操縦装置30は、無人航空機10の飛行を操作するためのものであり、図3に示すように、送受信部31と、操作部32と、入力部34と、制御部39と、を備えている。なお、制御部39および携帯端末50の後述する制御部59は、本発明の「制御部」の一例である。 The control device 30 is for operating the flight of the unmanned aerial vehicle 10, and includes a transmission / reception unit 31, an operation unit 32, an input unit 34, and a control unit 39, as shown in FIG. .. The control unit 39 and the control unit 59 described later of the mobile terminal 50 are examples of the "control unit" of the present invention.
送受信部31は、無人航空機10との間でデータの送受信を行うとともに、後述するように携帯端末50との間でデータの送受信を行う。 The transmission / reception unit 31 transmits / receives data to / from the unmanned aerial vehicle 10, and also transmits / receives data to / from the mobile terminal 50 as described later.
操作部32は、操作レバー、操作ボタン、ダイヤル等からなる。例えば操作レバー32a(図1参照)は、無人航空機10を前進後進および水平方向に旋回させるためのものであり、操作レバー32b(図1参照)は、無人航空機10を上下方向および左右方向に移動させるためのものである。操作部32には、操作レバー32aおよび32bの他、無人航空機10の撮像装置14のパン角およびチルト角を変更するためのダイヤル(図示せず)等が設けられている。 The operation unit 32 includes an operation lever, an operation button, a dial, and the like. For example, the operating lever 32a (see FIG. 1) is for moving the unmanned aerial vehicle 10 forward and backward and turning horizontally, and the operating lever 32b (see FIG. 1) moves the unmanned aerial vehicle 10 in the vertical and horizontal directions. It is for letting you. In addition to the operation levers 32a and 32b, the operation unit 32 is provided with a dial (not shown) for changing the pan angle and tilt angle of the image pickup device 14 of the unmanned aerial vehicle 10.
入力部34は、無人航空機10の撮像装置14により撮像を行うための撮像ボタン34a、及び変更ボタン34b等からなる。変更ボタン34bは、後述するように、無人航空機10を旋回させて無人航空機10の向き(前方の方位)を目標方位に変更するためのボタンである。なお、変更ボタン34bは、操縦装置30に予め設けられているボタンを、無人航空機10の向きを目標方位に変更するための変更ボタンとして割り当てたものである。 The input unit 34 includes an image pickup button 34a and a change button 34b for taking an image by the image pickup device 14 of the unmanned aerial vehicle 10. The change button 34b is a button for turning the unmanned aerial vehicle 10 and changing the direction (forward direction) of the unmanned aerial vehicle 10 to the target direction, as will be described later. The change button 34b is a button provided in advance in the control device 30 as a change button for changing the direction of the unmanned aerial vehicle 10 to the target direction.
制御部39は、操作部32の操作や入力部34の入力により、無人航空機10の飛行や撮像等を制御する。制御部39は、演算装置(CPU)39aおよび記憶装置(例えばRAM、ROM等)39bを含んでいる。演算装置39aは、記憶装置39bに記憶されている動作プログラムを実行する。また、制御部39は、送受信部31が受信した画像データ、航空機方位データ(無人航空機10の第1方位センサ19の検出結果)等を記憶する。 The control unit 39 controls the flight, imaging, and the like of the unmanned aerial vehicle 10 by operating the operation unit 32 and inputting from the input unit 34. The control unit 39 includes an arithmetic unit (CPU) 39a and a storage device (for example, RAM, ROM, etc.) 39b. The arithmetic unit 39a executes an operation program stored in the storage device 39b. Further, the control unit 39 stores image data, aircraft orientation data (detection result of the first orientation sensor 19 of the unmanned aerial vehicle 10) and the like received by the transmission / reception unit 31.
図4に示すように、携帯端末50は、送受信部51と、表示部52と、入力部53と、制御部59と、を備えている。 As shown in FIG. 4, the mobile terminal 50 includes a transmission / reception unit 51, a display unit 52, an input unit 53, and a control unit 59.
送受信部51は、操縦装置30との間でデータの送受信を行う。ここでは、携帯端末50の送受信部51と操縦装置30の送受信部31との間で無線通信を行う例について説明するが、携帯端末50と操縦装置30とを有線接続することにより通信を行ってもよい。 The transmission / reception unit 51 transmits / receives data to / from the control device 30. Here, an example of performing wireless communication between the transmission / reception unit 51 of the mobile terminal 50 and the transmission / reception unit 31 of the control device 30 will be described, but communication is performed by connecting the mobile terminal 50 and the control device 30 by wire. May be good.
表示部52は、例えば液晶表示パネルからなり、地図データを表示したり、無人航空機10の撮像装置14が撮像した画像を表示したりする。なお、地図データは、インターネットを介して取得したものであってもよいし、後述する記憶装置59bに予め記憶されているものであってもよい。 The display unit 52 includes, for example, a liquid crystal display panel, and displays map data or an image captured by the image pickup device 14 of the unmanned aerial vehicle 10. The map data may be acquired via the Internet or may be stored in advance in a storage device 59b described later.
入力部53は、操縦者により操作・入力されるものであり、例えば、表示部52上に配置されるタッチパネルや、物理ボタンからなる。入力部53は、無人航空機10の撮像装置14により撮像を行うための撮像ボタン53aおよび変更ボタン53b等からなる。撮像ボタン53aおよび変更ボタン53bは、それぞれ操縦装置30の撮像ボタン34aおよび変更ボタン34bと同様の機能を有する。 The input unit 53 is operated and input by the operator, and includes, for example, a touch panel arranged on the display unit 52 and physical buttons. The input unit 53 includes an image pickup button 53a, a change button 53b, and the like for taking an image by the image pickup device 14 of the unmanned aerial vehicle 10. The image pickup button 53a and the change button 53b have the same functions as the image pickup button 34a and the change button 34b of the control device 30, respectively.
制御部59は、入力部53の入力により無人航空機10の飛行や撮像等を操縦装置30を介して制御する。制御部59は、演算装置(CPU)59aおよび記憶装置(例えばRAM、ROM等)59bを含んでいる。演算装置59aは、記憶装置59bに記憶されている動作プログラムを実行する。制御部59がプログラムを実行することによって、後述する各処理を実現することができる。このようなプログラムは、例えばインターネットを介してダウンロードすることによって取得され、記憶装置59bに記憶される。制御部59は、送受信部51が受信した画像データ、航空機方位データ(無人航空機10の第1方位センサ19の検出結果)等を記憶する。 The control unit 59 controls the flight, imaging, and the like of the unmanned aerial vehicle 10 via the control device 30 by the input of the input unit 53. The control unit 59 includes an arithmetic unit (CPU) 59a and a storage device (for example, RAM, ROM, etc.) 59b. The arithmetic unit 59a executes an operation program stored in the storage device 59b. By executing the program by the control unit 59, each process described later can be realized. Such a program is acquired, for example, by downloading via the Internet and stored in the storage device 59b. The control unit 59 stores image data received by the transmission / reception unit 51, aircraft orientation data (detection result of the first orientation sensor 19 of the unmanned aerial vehicle 10), and the like.
図5は、本発明の第1実施形態に係る無人航空機制御システム1の携帯端末50の制御ブロック図である。次に、図5を参照して、本実施形態の携帯端末50の制御部59について詳細に説明する。制御部59は、ソフトウェアとして、方位設定部59c、旋回角度算出部59d、方位制御部59eおよびパン角制御部59fを備えている。 FIG. 5 is a control block diagram of the mobile terminal 50 of the unmanned aerial vehicle control system 1 according to the first embodiment of the present invention. Next, the control unit 59 of the mobile terminal 50 of the present embodiment will be described in detail with reference to FIG. The control unit 59 includes a direction setting unit 59c, a turning angle calculation unit 59d, a direction control unit 59e, and a pan angle control unit 59f as software.
方位設定部59cは、無人航空機10を旋回させて無人航空機10の前方をある方位に向ける際の目標方位を設定する。方位設定部59cには、第1方位センサ19の検出信号が入力される。本実施形態では、方位設定部59cは、第1方位センサ19が離陸したタイミングで第1方位センサ19が検出した検出方位を目標方位に設定する。方位設定部59cは、設定した目標方位を旋回角度算出部59dに出力する。 The direction setting unit 59c sets a target direction when turning the unmanned aerial vehicle 10 to direct the front of the unmanned aerial vehicle 10 to a certain direction. The detection signal of the first direction sensor 19 is input to the direction setting unit 59c. In the present embodiment, the direction setting unit 59c sets the detection direction detected by the first direction sensor 19 as the target direction at the timing when the first direction sensor 19 takes off. The direction setting unit 59c outputs the set target direction to the turning angle calculation unit 59d.
旋回角度算出部59dは、無人航空機10を旋回させて無人航空機10の前方の方位を目標方位に変更するために必要な無人航空機10の旋回角度を算出する。旋回角度算出部59dは、目標方位と、操縦装置30の変更ボタン34b又は携帯端末50の変更ボタン53bの入力時(操縦者により押された時)の第1方位センサ19が検出した検出方位と、から無人航空機10の旋回角度を算出する。 The turning angle calculation unit 59d calculates the turning angle of the unmanned aerial vehicle 10 required to turn the unmanned aerial vehicle 10 and change the front direction of the unmanned aerial vehicle 10 to the target direction. The turning angle calculation unit 59d includes the target direction and the detection direction detected by the first direction sensor 19 when the change button 34b of the control device 30 or the change button 53b of the mobile terminal 50 is input (when pressed by the operator). , The turning angle of the unmanned aerial vehicle 10 is calculated from.
具体的には、本実施形態では、旋回角度算出部59dには、方位設定部59cが設定した目標方位と、第1方位センサ19の検出信号と、操縦装置30の変更ボタン34bおよび携帯端末50の変更ボタン53bの入力信号と、が入力される。旋回角度算出部59dは、目標方位と、変更ボタン34b又は53bの入力時の第1方位センサ19が検出した検出方位と、の角度差を算出する。この角度差は、無人航空機10の前方の方位を目標方位にするために必要な無人航空機10の旋回角度である。旋回角度算出部59dは、算出した旋回角度を方位制御部59eに出力する。 Specifically, in the present embodiment, the turning angle calculation unit 59d includes the target direction set by the direction setting unit 59c, the detection signal of the first direction sensor 19, the change button 34b of the control device 30, and the mobile terminal 50. The input signal of the change button 53b of is input. The turning angle calculation unit 59d calculates the angle difference between the target direction and the detection direction detected by the first direction sensor 19 when the change button 34b or 53b is input. This angle difference is the turning angle of the unmanned aerial vehicle 10 required to set the front direction of the unmanned aerial vehicle 10 as the target direction. The turning angle calculation unit 59d outputs the calculated turning angle to the directional control unit 59e.
方位制御部59eは、入力された旋回角度に基づいて無人航空機10に制御信号を送信する。これにより、無人航空機10は旋回角度算出部59dにより算出された旋回角度だけ旋回し、無人航空機10の向き(前方の方位)が目標方位に変更される。 The directional control unit 59e transmits a control signal to the unmanned aerial vehicle 10 based on the input turning angle. As a result, the unmanned aerial vehicle 10 turns by the turning angle calculated by the turning angle calculation unit 59d, and the direction (forward direction) of the unmanned aerial vehicle 10 is changed to the target direction.
パン角制御部59fには、操縦装置30の変更ボタン34bおよび携帯端末50の変更ボタン53bの入力信号と、が入力される。パン角制御部59fは、変更ボタン34b又は53bの入力時に撮像装置14の調整部14aによりパン角およびチルト角を初期設定値に変更するための初期設定信号を操縦装置30を介して無人航空機10に送信する。 The input signals of the change button 34b of the control device 30 and the change button 53b of the mobile terminal 50 are input to the pan angle control unit 59f. When the change button 34b or 53b is input, the pan angle control unit 59f sends an initial setting signal for changing the pan angle and tilt angle to the initial set values by the adjusting unit 14a of the imaging device 14 via the control device 30 to the unmanned aerial vehicle 10 Send to.
次に、本実施形態の屋根の点検方法について詳細に説明する。なお、ここでは、撮像装置14で撮像される画像の縦横比を3:4、撮像装置14のパン角の初期設定値を0度、撮像装置14のチルト角の初期設定値を−90度(すなわち、撮像装置14の光軸は鉛直方向)、として説明する。 Next, the roof inspection method of the present embodiment will be described in detail. Here, the aspect ratio of the image captured by the imaging device 14 is 3: 4, the initial setting value of the pan angle of the imaging device 14 is 0 degrees, and the initial setting value of the tilt angle of the imaging device 14 is −90 degrees ( That is, the optical axis of the image pickup apparatus 14 is in the vertical direction).
工程S1において、操縦者(点検者)は、携帯端末50に点検対象の建物の住所等を入力する。これにより、携帯端末50の表示部52には、入力した住所周辺の上空からの地図画像が表示され、操縦者は、地図画像から点検対象の建物の屋根を指定するとともに屋根の輪郭線を指定する。この輪郭線の指定は、タッチパネル等の入力部53を用いて地図画像上で容易に行うことができる。地図画像には位置情報(緯度、経度)および方位情報が含まれているため、指定した輪郭線に対応するように、位置情報(緯度、経度)および方位情報を含む輪郭線データが生成される。生成された輪郭線データは記憶装置59bに記憶されるとともに、操縦装置30を介して無人航空機10に送信される。 In step S1, the operator (inspector) inputs the address and the like of the building to be inspected into the mobile terminal 50. As a result, the display unit 52 of the mobile terminal 50 displays a map image from the sky around the input address, and the operator specifies the roof of the building to be inspected and the outline of the roof from the map image. To do. The contour line can be easily specified on the map image by using the input unit 53 such as a touch panel. Since the map image contains position information (latitude, longitude) and direction information, contour line data including position information (latitude, longitude) and direction information is generated so as to correspond to the specified contour line. .. The generated contour line data is stored in the storage device 59b and transmitted to the unmanned aerial vehicle 10 via the control device 30.
工程S2において、操縦者は、屋根の高さを入力部53に入力する。これにより、屋根よりも所定高さだけ高い位置に無人航空機10の飛行高さが設定され、飛行高さデータが操縦装置30を介して無人航空機10に送信される。 In step S2, the operator inputs the height of the roof to the input unit 53. As a result, the flight height of the unmanned aerial vehicle 10 is set at a position higher than the roof by a predetermined height, and the flight height data is transmitted to the unmanned aerial vehicle 10 via the control device 30.
工程S3において、無人航空機10は、離陸位置(ホームポイントともいう)から離陸する。無人航空機10が離陸位置から上昇する際に、無人航空機10の第1方位センサ19は、無人航空機10の前方の方位を検出し、検出結果(航空機方位データ)を操縦装置30を介して携帯端末50に送信する。携帯端末50は、この検出結果を記憶装置59bに記憶する。 In step S3, the unmanned aerial vehicle 10 takes off from the takeoff position (also referred to as the home point). When the unmanned aerial vehicle 10 rises from the takeoff position, the first orientation sensor 19 of the unmanned aerial vehicle 10 detects the front orientation of the unmanned aerial vehicle 10, and the detection result (aircraft orientation data) is transmitted to the portable terminal via the control device 30. Send to 50. The mobile terminal 50 stores the detection result in the storage device 59b.
工程S4において、方位設定部59cは、第1方位センサ19が離陸した際に第1方位センサ19が検出した検出方位を目標方位に設定する。方位設定部59cは、設定した目標方位を旋回角度算出部59dに出力する。 In step S4, the direction setting unit 59c sets the detection direction detected by the first direction sensor 19 when the first direction sensor 19 takes off as the target direction. The direction setting unit 59c outputs the set target direction to the turning angle calculation unit 59d.
工程S5において、無人航空機10は、建物の上空の目標位置まで自律飛行する。また、無人航空機10は、撮像装置14により屋根の画像を撮像し、撮像データを記憶装置21bに記憶するとともに操縦装置30を介して携帯端末50に送信する。携帯端末50は、撮像データを記憶装置59bに記憶するとともに、撮像画像を表示部52に表示する。 In step S5, the unmanned aerial vehicle 10 autonomously flies to a target position above the building. Further, the unmanned aerial vehicle 10 captures an image of the roof by the image pickup device 14, stores the image pickup data in the storage device 21b, and transmits the image pickup data to the mobile terminal 50 via the control device 30. The mobile terminal 50 stores the captured data in the storage device 59b and displays the captured image on the display unit 52.
なお、無人航空機10が建物の上空の目標位置に到達した際に、例えば、無人航空機10が建物の上空に到達したことを知らせるためのメッセージ等が携帯端末50の表示部52に表示されてもよい。 When the unmanned aerial vehicle 10 reaches the target position in the sky above the building, for example, even if a message or the like for notifying that the unmanned aerial vehicle 10 has reached the sky above the building is displayed on the display unit 52 of the mobile terminal 50. Good.
建物の屋根の検査においては、必要に応じて、操縦者は手動で無人航空機10を操縦する。具体的には、本実施形態では、撮像装置14の調整部14aによりパン角を0度とし、撮像装置14のチルト角を−90度(すなわち、撮像装置14の光軸は鉛直方向)としているため、撮像画像は屋根の真上方向からの画像になる。しかしながら、例えば建物の側壁を点検したり、屋根を斜め上方から点検したりする場合がある。この場合、操縦者は、撮像装置14のパン角およびチルト角を変更したり、無人航空機10を前後左右に移動させたり旋回させたりする。又、無人航空機10を障害物等から遠ざけたり、飛行禁止区域に侵入するのを防止したりすることを目的として、無人航空機10を前後左右に移動させたりする。 In the inspection of the roof of the building, the operator manually operates the unmanned aerial vehicle 10 as needed. Specifically, in the present embodiment, the pan angle is set to 0 degrees by the adjusting unit 14a of the image pickup device 14, and the tilt angle of the image pickup device 14 is set to −90 degrees (that is, the optical axis of the image pickup device 14 is in the vertical direction). Therefore, the captured image is an image from directly above the roof. However, for example, the side wall of the building may be inspected, or the roof may be inspected from diagonally above. In this case, the operator changes the pan angle and tilt angle of the image pickup device 14, and moves or turns the unmanned aerial vehicle 10 back and forth and left and right. Further, the unmanned aerial vehicle 10 is moved back and forth and left and right for the purpose of keeping the unmanned aerial vehicle 10 away from obstacles and the like and preventing it from entering the no-fly zone.
このとき、操縦者と無人航空機10との距離が離れている場合、操縦者は無人航空機10の向きを判別することが困難であるため、無人航空機10を操縦者の意図する方向に操縦するのは困難である。 At this time, if the distance between the operator and the unmanned aerial vehicle 10 is large, it is difficult for the operator to determine the direction of the unmanned aerial vehicle 10, so the unmanned aerial vehicle 10 is operated in the direction intended by the operator. It is difficult.
そこで、本実施形態では、操縦者は、無人航空機10を手動で操縦する場合、操縦装置30の変更ボタン34b又は携帯端末50の変更ボタン53bを押す。これにより、無人航空機10は、所定角度だけ旋回し、無人航空機10の向き(方位)は、離陸位置での無人航空機10の向き(方位)に変更される。 Therefore, in the present embodiment, when manually maneuvering the unmanned aerial vehicle 10, the operator presses the change button 34b of the control device 30 or the change button 53b of the mobile terminal 50. As a result, the unmanned aerial vehicle 10 turns by a predetermined angle, and the direction (direction) of the unmanned aerial vehicle 10 is changed to the direction (direction) of the unmanned aerial vehicle 10 at the takeoff position.
具体的には、操縦者が操縦装置30の変更ボタン34b又は携帯端末50の変更ボタン53bを押すと、工程S6において、変更ボタン34b又は53bが入力されたと判断され、工程S7に進む。操縦者が無人航空機10を手動で操縦しない場合は、工程S10に進む。 Specifically, when the operator presses the change button 34b of the control device 30 or the change button 53b of the mobile terminal 50, it is determined in step S6 that the change button 34b or 53b has been input, and the process proceeds to step S7. If the operator does not manually operate the unmanned aerial vehicle 10, the process proceeds to step S10.
工程S7において、旋回角度算出部59dは、目標方位と、変更ボタン34b又は53bの入力時の第1方位センサ19が検出した検出方位と、から旋回角度を算出する。旋回角度算出部59dは、算出した旋回角度を方位制御部59eに出力する。 In step S7, the turning angle calculation unit 59d calculates the turning angle from the target direction and the detection direction detected by the first direction sensor 19 when the change button 34b or 53b is input. The turning angle calculation unit 59d outputs the calculated turning angle to the directional control unit 59e.
工程S8において、方位制御部59eは、入力された旋回角度に基づいて無人航空機10に制御信号を送信する。これにより、無人航空機10は旋回角度算出部59dにより算出された旋回角度だけ旋回する。このとき、無人航空機10は、ジャイロセンサ20を用いて正確に上記旋回角度だけ旋回する。これにより、無人航空機10は、離陸位置における無人航空機10の向き(方位)と同じ方向を向く。このため、操縦者は、離陸位置における無人航空機10の向き(方位)を覚えておくだけで、意図する方向に無人航空機10を容易に操縦することが可能となる。 In step S8, the directional control unit 59e transmits a control signal to the unmanned aerial vehicle 10 based on the input turning angle. As a result, the unmanned aerial vehicle 10 turns by the turning angle calculated by the turning angle calculation unit 59d. At this time, the unmanned aerial vehicle 10 turns exactly by the above turning angle using the gyro sensor 20. As a result, the unmanned aerial vehicle 10 faces the same direction as the direction (direction) of the unmanned aerial vehicle 10 at the takeoff position. Therefore, the operator can easily operate the unmanned aerial vehicle 10 in the intended direction only by remembering the direction (direction) of the unmanned aerial vehicle 10 at the takeoff position.
工程S9において、パン角制御部59fは、撮像装置14のパン角およびチルト角を初期設定値に変更するための初期設定信号を無人航空機10に送信する。これにより、撮像装置14の調整部14aによりパン角が0度、チルト角が−90度に変更され、無人航空機10の前後左右方向と撮像画像の上下左右方向とが一致する。このため、操縦者は表示部52を見ながら無人航空機10を意図する方向に容易に操縦することができる。 In step S9, the pan angle control unit 59f transmits an initial setting signal for changing the pan angle and tilt angle of the image pickup apparatus 14 to the initial set values to the unmanned aerial vehicle 10. As a result, the pan angle is changed to 0 degrees and the tilt angle is changed to −90 degrees by the adjusting unit 14a of the image pickup device 14, and the front-back and left-right directions of the unmanned aerial vehicle 10 coincide with the up-down and left-right directions of the captured image. Therefore, the operator can easily operate the unmanned aerial vehicle 10 in the intended direction while looking at the display unit 52.
無人航空機10の手動での操縦が終了すると、工程S10において、操縦者は操縦装置30のリターンボタン(図示せず)を押す。これにより、操縦装置30から無人航空機10にリターン信号が送信され、無人航空機10が離陸位置の上方まで自律飛行して戻ってくる。このとき、携帯端末50の表示部52には、図7に示すような画像が表示される。なお、図7の領域Rは、無人航空機10の真下の位置(着陸予定位置)を示している。 When the manual operation of the unmanned aerial vehicle 10 is completed, in step S10, the operator presses the return button (not shown) of the control device 30. As a result, a return signal is transmitted from the control device 30 to the unmanned aerial vehicle 10, and the unmanned aerial vehicle 10 autonomously flies to above the takeoff position and returns. At this time, an image as shown in FIG. 7 is displayed on the display unit 52 of the mobile terminal 50. The area R in FIG. 7 indicates a position (planned landing position) directly below the unmanned aerial vehicle 10.
操縦者は、表示画像の領域Rがホームポイントにある場合、操縦装置30の図示しない着陸ボタンを押す。これにより、無人航空機10がホームポイントに着陸する。なお、無人航空機10がホームポイントの上方まで自律飛行して戻って来た際に、表示部52に、着陸の可否を操縦者に求めるメッセージ(例えば「着陸しますか?」)が表示されてもよい。そして、表示部52に表示されている「OK」ボタンを操縦者が押すことによって無人航空機10をホームポイントに着陸させてもよい。 When the area R of the displayed image is at the home point, the pilot presses a landing button (not shown) of the pilot device 30. As a result, the unmanned aerial vehicle 10 lands at the home point. When the unmanned aerial vehicle 10 autonomously flies above the home point and returns, a message asking the pilot to land or not (for example, "Do you want to land?") Is displayed on the display unit 52. May be good. Then, the unmanned aerial vehicle 10 may be landed at the home point by the operator pressing the "OK" button displayed on the display unit 52.
また、例えば、無人航空機10の着陸できる範囲が狭い場合には、GPS等の受信機12を利用しても、画像の領域Rがホームポイントからずれる場合がある。この場合、操縦者は、無人航空機10を操縦して表示画像の領域Rをホームポイントに移動させた後、手動または自律飛行により無人航空機10を着陸させる。また、風が強い場合も、操縦者は無人航空機10を徐々に降下させながら位置を修正し着陸させる。このように着陸時に操縦者による操縦が必要な場合にも、上述したように、操縦装置30の変更ボタン34b又は携帯端末50の変更ボタン53bを用いて、無人航空機10の向き(方位)をホームポイント(離陸位置)での無人航空機10の向き(方位)に変更してもよい。 Further, for example, when the landing range of the unmanned aerial vehicle 10 is narrow, the area R of the image may deviate from the home point even if the receiver 12 such as GPS is used. In this case, the pilot steers the unmanned aerial vehicle 10 to move the area R of the displayed image to the home point, and then lands the unmanned aerial vehicle 10 manually or by autonomous flight. Also, even when the wind is strong, the pilot corrects the position and lands while gradually lowering the unmanned aerial vehicle 10. Even when the pilot needs to control the aircraft at the time of landing, the direction (orientation) of the unmanned aerial vehicle 10 can be set by using the change button 34b of the control device 30 or the change button 53b of the mobile terminal 50 as described above. The direction (orientation) of the unmanned aerial vehicle 10 at the point (takeoff position) may be changed.
また、図8に示すように、無人航空機10(機体)の向きと撮像装置14の向きとが異なっている場合もある。具体的には、図8では、無人航空機10は図中、左上方向を向いており、撮像装置14は無人航空機10の前方方向に対して右方向にパン角(ここでは約45度)が設定されている。この状態では、操縦者は意図する方向に無人航空機10を操縦することが困難である。そこで、携帯端末50の表示部52に、無人航空機10の向き(図中、左上の表示)や、操縦装置30の操作方向(図中、右上の表示)および無人航空機10の移動方向(図中、中央の表示)を表示してもよい。この場合、操縦装置30の操作方向と無人航空機10の移動方向との対応関係が容易に理解できるように、操縦装置30の操作方向を示す矢印とこれに対応する無人航空機10の移動方向を示す矢印とに同じ着色やハッチング等を施してもよい。この場合、操縦者は、表示部52を見ながら、意図する方向に無人航空機10を容易に操縦することが可能となる。 Further, as shown in FIG. 8, the orientation of the unmanned aerial vehicle 10 (airframe) and the orientation of the imaging device 14 may be different. Specifically, in FIG. 8, the unmanned aerial vehicle 10 faces the upper left direction in the figure, and the image pickup device 14 sets the pan angle (here, about 45 degrees) to the right with respect to the forward direction of the unmanned aerial vehicle 10. Has been done. In this state, it is difficult for the operator to operate the unmanned aerial vehicle 10 in the intended direction. Therefore, the orientation of the unmanned aerial vehicle 10 (displayed in the upper left in the figure), the operating direction of the control device 30 (displayed in the upper right in the figure), and the moving direction of the unmanned aerial vehicle 10 (in the figure) are displayed on the display unit 52 of the mobile terminal 50. , Center display) may be displayed. In this case, an arrow indicating the operation direction of the control device 30 and the corresponding movement direction of the unmanned aerial vehicle 10 are shown so that the correspondence relationship between the operation direction of the control device 30 and the movement direction of the unmanned aerial vehicle 10 can be easily understood. The same coloring or hatching as the arrow may be applied. In this case, the operator can easily operate the unmanned aerial vehicle 10 in the intended direction while looking at the display unit 52.
本実施形態では、上記のように、操縦者と無人航空機10との距離が離れており操縦者が無人航空機10の向きを判別することができない場合であっても、操縦者が変更ボタン34b又は53bを操作(入力)することにより、旋回角度算出部59dが算出した旋回角度に基づいて方位制御部59eは無人航空機10を旋回させ無人航空機10の前方の方位を目標方位に変更することができる。このため、無人航空機10を操縦者の意図する方向に操縦することができる。その結果、無人航空機10による障害物等への接近や飛行禁止区域への侵入を抑制することができる。このように、無人航空機10の操縦性を向上させることができる。 In the present embodiment, as described above, even when the distance between the operator and the unmanned aerial vehicle 10 is large and the operator cannot determine the direction of the unmanned aerial vehicle 10, the operator can use the change button 34b or By operating (inputting) 53b, the direction control unit 59e can turn the unmanned aerial vehicle 10 and change the front direction of the unmanned aerial vehicle 10 to the target direction based on the turning angle calculated by the turning angle calculation unit 59d. .. Therefore, the unmanned aerial vehicle 10 can be operated in the direction intended by the operator. As a result, it is possible to prevent the unmanned aerial vehicle 10 from approaching obstacles and the like and entering the no-fly zone. In this way, the maneuverability of the unmanned aerial vehicle 10 can be improved.
また、上記のように、方位設定部59cは、無人航空機10が離陸したタイミングで第1方位センサ19が検出した検出方位を目標方位に設定する。これにより、操縦者が変更ボタン34b又は53bを操作することにより、無人航空機10の向き(前方の方位)を離陸位置での方位(離陸時の方位)に変更することができる。このため、操縦者は離陸位置での無人航空機10の向き(方位)を覚えておくだけで、意図する方向に無人航空機10を容易に操縦することができる。 Further, as described above, the direction setting unit 59c sets the detection direction detected by the first direction sensor 19 at the timing when the unmanned aerial vehicle 10 takes off as the target direction. As a result, the operator can change the direction of the unmanned aerial vehicle 10 (direction in front) to the direction at the takeoff position (direction at takeoff) by operating the change button 34b or 53b. Therefore, the operator can easily operate the unmanned aerial vehicle 10 in the intended direction only by remembering the direction (direction) of the unmanned aerial vehicle 10 at the takeoff position.
また、上記のように、制御部59は、変更ボタン34b又は53bの入力時にパン角を初期設定値に変更するパン角制御部59fを有する。これにより、無人航空機10の向きと撮像装置14の光軸の向きとを容易に一致させることができる。このため、操縦者は携帯端末50の表示部52を見ながら無人航空機10を操縦することができるので、無人航空機10の操縦性をより向上させることができる。 Further, as described above, the control unit 59 has a pan angle control unit 59f that changes the pan angle to the initial set value when the change button 34b or 53b is input. As a result, the orientation of the unmanned aerial vehicle 10 and the orientation of the optical axis of the imaging device 14 can be easily matched. Therefore, since the operator can operate the unmanned aerial vehicle 10 while looking at the display unit 52 of the mobile terminal 50, the maneuverability of the unmanned aerial vehicle 10 can be further improved.
(第2実施形態)
図9は、本発明の第2実施形態に係る無人航空機制御システム1の操作装置2の操縦装置30の構成を示すブロック図である。この第2実施形態では、上記第1実施形態と異なり、無人航空機10の向き(方位)を操縦装置30の向き(方位)に変更する場合について説明する。
(Second Embodiment)
FIG. 9 is a block diagram showing a configuration of a control device 30 of the operation device 2 of the unmanned aerial vehicle control system 1 according to the second embodiment of the present invention. In the second embodiment, unlike the first embodiment, a case where the direction (direction) of the unmanned aerial vehicle 10 is changed to the direction (direction) of the control device 30 will be described.
操縦装置30は、図9に示すように、送受信部31、操作部32、入力部34および制御部39に加え、第2方位センサ37を備えている。 As shown in FIG. 9, the control device 30 includes a second direction sensor 37 in addition to the transmission / reception unit 31, the operation unit 32, the input unit 34, and the control unit 39.
第2方位センサ37は、操縦装置30の方位を検出する。ここで、操縦装置30の方位とは、操縦装置30を上方から見た際に、操縦装置30の下部から上部に向かう方向の方位である。例えば、図1においては、上方向の方位である。 The second direction sensor 37 detects the direction of the control device 30. Here, the orientation of the control device 30 is the direction in the direction from the lower part to the upper part of the control device 30 when the control device 30 is viewed from above. For example, in FIG. 1, it is an upward direction.
制御部39は、第2方位センサ37の検出結果を操縦装置方位データとして記憶するとともに、携帯端末50に送信する。 The control unit 39 stores the detection result of the second direction sensor 37 as the control device direction data and transmits it to the mobile terminal 50.
図10は、本発明の第2実施形態に係る無人航空機制御システム1の携帯端末50の制御ブロック図である。次に、図10を参照して、本実施形態の携帯端末50の制御部59について説明する。 FIG. 10 is a control block diagram of the mobile terminal 50 of the unmanned aerial vehicle control system 1 according to the second embodiment of the present invention. Next, the control unit 59 of the mobile terminal 50 of the present embodiment will be described with reference to FIG.
本実施形態では、方位設定部59cには、第1方位センサ19の検出信号は入力されず、第2方位センサ37の検出信号が入力される。また、方位設定部59cには、変更ボタン34bおよび53bの入力信号が入力される。 In the present embodiment, the detection signal of the first direction sensor 19 is not input to the direction setting unit 59c, but the detection signal of the second direction sensor 37 is input. Further, the input signals of the change buttons 34b and 53b are input to the direction setting unit 59c.
本実施形態では、方位設定部59cは、変更ボタン34b又は53bの入力時の第2方位センサ37が検出した検出方位を、目標方位に設定する。 In the present embodiment, the direction setting unit 59c sets the detection direction detected by the second direction sensor 37 when the change button 34b or 53b is input as the target direction.
第2実施形態のその他の構成は、上記第1実施形態と同様である。 Other configurations of the second embodiment are the same as those of the first embodiment.
次に、本実施形態の屋根の点検方法について説明する。 Next, the roof inspection method of the present embodiment will be described.
本実施形態の屋根の点検方法は図11に示すように、上記第1実施形態と異なり、工程S4がなく、工程S6と工程S7との間に目標方位を設定する工程S11が設けられている。 As shown in FIG. 11, the roof inspection method of the present embodiment is different from the first embodiment, and there is no step S4, and a step S11 for setting a target direction is provided between the steps S6 and S7. ..
本実施形態では、操縦者が操縦装置30の変更ボタン34b又は携帯端末50の変更ボタン53bを押すと、工程S6において、変更ボタン34b又は53bが入力されたと判断され、工程S11に進む。 In the present embodiment, when the operator presses the change button 34b of the control device 30 or the change button 53b of the mobile terminal 50, it is determined in step S6 that the change button 34b or 53b has been input, and the process proceeds to step S11.
工程S11において、方位設定部59cは、変更ボタン34b又は53bの入力時の第2方位センサ37が検出した検出方位を、目標方位に設定する。方位設定部59cは、設定した目標方位を旋回角度算出部59dに出力する。 In step S11, the orientation setting unit 59c sets the detection orientation detected by the second orientation sensor 37 when the change button 34b or 53b is input as the target orientation. The direction setting unit 59c outputs the set target direction to the turning angle calculation unit 59d.
工程S8において、無人航空機10は、所定の旋回角度だけ旋回し、操縦装置30の向き(方位)と同じ方向を向く。 In step S8, the unmanned aerial vehicle 10 turns by a predetermined turning angle and faces the same direction as the direction (direction) of the control device 30.
第2実施形態のその他の点検方法は、上記第1実施形態と同様である。 The other inspection methods of the second embodiment are the same as those of the first embodiment.
本実施形態では、上記のように、方位設定部59cは、変更ボタン34b又は53bの入力時の第2方位センサ37が検出した検出方位を、目標方位に設定する。これにより、操縦者が変更ボタン34b又は53bを操作することによって、無人航空機10の向きを操縦装置30の方位(向き)に変更することができる。このため、操縦者は無人航空機10の方向に操縦装置30を向けるだけで、すなわち操縦者は無人航空機10の方向に体を向けるだけで、操縦装置30の向きと無人航空機10の向きとが一致するので、操縦者は意図する方向に無人航空機10を容易に操縦することができる。 In the present embodiment, as described above, the orientation setting unit 59c sets the detection orientation detected by the second orientation sensor 37 when the change button 34b or 53b is input as the target orientation. As a result, the operator can change the direction of the unmanned aerial vehicle 10 to the direction (direction) of the control device 30 by operating the change button 34b or 53b. Therefore, the pilot only points the control device 30 in the direction of the unmanned aerial vehicle 10, that is, the operator only turns his body in the direction of the unmanned aerial vehicle 10, and the direction of the control device 30 and the direction of the unmanned aerial vehicle 10 match. Therefore, the operator can easily operate the unmanned aerial vehicle 10 in the intended direction.
第2実施形態のその他の効果は、上記第1実施形態と同様である。 Other effects of the second embodiment are the same as those of the first embodiment.
(第3実施形態)
図12は、本発明の第3実施形態の携帯端末50の制御ブロック図である。この第3実施形態では、上記第1および第2実施形態と異なり、屋根71(図14参照)の長手方向となる直線部71aが撮像装置14による撮像画像の横方向に沿って写るように、無人航空機10の向き(方位)を変更する場合について説明する。また、点検する屋根71が寄棟であり、平面視矩形状である場合について説明する。
(Third Embodiment)
FIG. 12 is a control block diagram of the mobile terminal 50 according to the third embodiment of the present invention. In the third embodiment, unlike the first and second embodiments, the linear portion 71a in the longitudinal direction of the roof 71 (see FIG. 14) is captured along the lateral direction of the image captured by the imaging device 14. A case where the direction (direction) of the unmanned aerial vehicle 10 is changed will be described. Further, a case where the roof 71 to be inspected is a hipped roof and has a rectangular shape in a plan view will be described.
本実施形態では図12に示すように、制御部59は、ソフトウェアとして、地図画像データ記憶部59gをさらに備えている。地図画像データ記憶部59gには、位置情報(緯度、経度)および方位情報を含む上空からの地図画像のデータが記憶されている。 In the present embodiment, as shown in FIG. 12, the control unit 59 further includes a map image data storage unit 59g as software. The map image data storage unit 59g stores map image data from the sky including position information (latitude, longitude) and azimuth information.
本実施形態では、方位設定部59cには、第1方位センサ19の検出信号は入力されない。方位設定部59cは、上空からの地図画像において建物70の屋根71の輪郭線を構成する複数の直線部のうち、所定の直線部(ここでは直線部71a)と直交する方位を、目標方位に設定する。 In the present embodiment, the detection signal of the first direction sensor 19 is not input to the direction setting unit 59c. The direction setting unit 59c sets the direction orthogonal to the predetermined straight line portion (here, the straight line portion 71a) as the target direction among the plurality of straight line portions constituting the contour line of the roof 71 of the building 70 in the map image from the sky. Set.
第3実施形態のその他の構成は、上記第1実施形態と同様である。 Other configurations of the third embodiment are the same as those of the first embodiment.
次に、本実施形態の屋根71の点検方法について説明する。 Next, an inspection method of the roof 71 of the present embodiment will be described.
本実施形態の屋根71の点検方法は図13に示すように、上記第1実施形態と異なり、工程S4がなく、工程S1と工程S2との間に目標方位を設定する工程S21が設けられている。 As shown in FIG. 13, the inspection method of the roof 71 of the present embodiment is different from the first embodiment, and there is no step S4, and a step S21 for setting a target direction is provided between the steps S1 and S2. There is.
本実施形態では、工程S21において、方位設定部59cは、工程S1で生成された輪郭線データに基づいて、屋根71の長手方向となる直線部71aと短手方向となる直線部71bとを決定する。そして、方位設定部59cは、直線部71aと直交する方位を、目標方位に設定する。これにより、工程S8において無人航空機10が所定の旋回角度だけ旋回すると、図14に示すように、屋根71の長手方向となる直線部71aが撮像装置14による撮像画像の横方向に沿って写る。 In the present embodiment, in step S21, the orientation setting unit 59c determines a straight line portion 71a in the longitudinal direction and a straight line portion 71b in the lateral direction of the roof 71 based on the contour line data generated in step S1. To do. Then, the orientation setting unit 59c sets the orientation orthogonal to the straight line portion 71a as the target orientation. As a result, when the unmanned aerial vehicle 10 turns by a predetermined turning angle in step S8, as shown in FIG. 14, the straight portion 71a, which is the longitudinal direction of the roof 71, is captured along the lateral direction of the image captured by the imaging device 14.
第3実施形態のその他の点検方法は、上記第1実施形態と同様である。 The other inspection methods of the third embodiment are the same as those of the first embodiment.
本実施形態では、上記のように、方位設定部59cは、建物70の屋根71の輪郭線を構成する複数の直線部のうち、所定の直線部71aと直交する方位を、目標方位に設定する。これにより、無人航空機10の前後左右方向と屋根71の輪郭線を構成する直線部71b、71aの方向とが平行になるので、無人航空機10を屋根71の輪郭線に沿って容易に移動させることができる。 In the present embodiment, as described above, the orientation setting unit 59c sets the orientation orthogonal to the predetermined straight line portion 71a among the plurality of straight line portions constituting the contour line of the roof 71 of the building 70 as the target orientation. .. As a result, the front-back and left-right directions of the unmanned aerial vehicle 10 and the directions of the straight lines 71b and 71a forming the contour line of the roof 71 become parallel, so that the unmanned aerial vehicle 10 can be easily moved along the contour line of the roof 71. Can be done.
第3実施形態のその他の効果は、上記第1実施形態と同様である。 Other effects of the third embodiment are the same as those of the first embodiment.
(第4実施形態)
図15は、本発明の第4実施形態に係る無人航空機制御システム1の無人航空機10の構成を示すブロック図である。この第4実施形態では、上記第3実施形態と異なり、変更ボタン34b又は53bの入力時にパン角を初期設定値に変更しない場合について説明する。
(Fourth Embodiment)
FIG. 15 is a block diagram showing a configuration of an unmanned aerial vehicle 10 of the unmanned aerial vehicle control system 1 according to the fourth embodiment of the present invention. In the fourth embodiment, unlike the third embodiment, a case where the pan angle is not changed to the initial set value when the change button 34b or 53b is input will be described.
無人航空機10では図15に示すように、撮像装置14は、調整部14aの動作からカメラ(撮像部)のパン角を検出するパン角検出センサ14bを含んでいる。パン角検出センサ14bは、検出したパン角を制御部21に出力する。 In the unmanned aerial vehicle 10, as shown in FIG. 15, the image pickup device 14 includes a pan angle detection sensor 14b that detects the pan angle of the camera (imaging unit) from the operation of the adjustment unit 14a. The pan angle detection sensor 14b outputs the detected pan angle to the control unit 21.
制御部21は、入力されたパン角を記憶するとともに、操縦装置30を介して携帯端末50に送信する。 The control unit 21 stores the input pan angle and transmits it to the mobile terminal 50 via the control device 30.
図16は、本発明の第4実施形態に係る無人航空機制御システム1の携帯端末50の制御ブロック図である。次に、図16を参照して、本実施形態の携帯端末50の制御部59について説明する。 FIG. 16 is a control block diagram of the mobile terminal 50 of the unmanned aerial vehicle control system 1 according to the fourth embodiment of the present invention. Next, the control unit 59 of the mobile terminal 50 of the present embodiment will be described with reference to FIG.
本実施形態では図16に示すように、制御部59には、パン角制御部59fが設けられていない。このため、上記第3実施形態のように無人航空機10の向きを変更したとしても、撮像装置14のパン角が0度以外の場合には、直線部71b、71aは撮像画像の上下左右方向と平行にならない。すなわち、表示部52に対して屋根71が斜めに表示されてしまう。そこで、本実施形態では、制御部59は、以下のように構成されている。 In the present embodiment, as shown in FIG. 16, the control unit 59 is not provided with the pan angle control unit 59f. Therefore, even if the direction of the unmanned aerial vehicle 10 is changed as in the third embodiment, if the pan angle of the image pickup device 14 is other than 0 degrees, the straight lines 71b and 71a are in the vertical and horizontal directions of the captured image. Not parallel. That is, the roof 71 is displayed obliquely with respect to the display unit 52. Therefore, in the present embodiment, the control unit 59 is configured as follows.
本実施形態では、旋回角度算出部59dには、パン角検出センサ14bの検出信号が入力される。また、旋回角度算出部59dは、入力されたパン角から、直線部71aが撮像装置14の撮像画像の横方向に沿って写るように、目標方位を補正する。具体的には、例えば、パン角が右方向に45度に設定されている場合には、目標方位を左方向に45度補正する。また、旋回角度算出部59dは、補正した目標方位と第1方位センサ19が検出した検出方位とから旋回角度を算出する。 In the present embodiment, the detection signal of the pan angle detection sensor 14b is input to the turning angle calculation unit 59d. Further, the turning angle calculation unit 59d corrects the target direction from the input pan angle so that the straight line unit 71a is captured along the lateral direction of the image captured by the imaging device 14. Specifically, for example, when the pan angle is set to 45 degrees to the right, the target direction is corrected by 45 degrees to the left. Further, the turning angle calculation unit 59d calculates the turning angle from the corrected target direction and the detection direction detected by the first direction sensor 19.
これにより、無人航空機10の方位を制御する工程S8において無人航空機10が所定の旋回角度だけ旋回すると、上記第3実施形態と同様、屋根71の長手方向となる直線部71aが撮像装置14による撮像画像の横方向に沿って写る。なお、このとき、無人航空機10は、直線部71aおよび71bに対して例えば45度傾斜した方向を向いている。 As a result, when the unmanned aerial vehicle 10 turns by a predetermined turning angle in the step S8 for controlling the orientation of the unmanned aerial vehicle 10, the linear portion 71a in the longitudinal direction of the roof 71 is imaged by the imaging device 14 as in the third embodiment. It appears along the horizontal direction of the image. At this time, the unmanned aerial vehicle 10 is facing a direction inclined by, for example, 45 degrees with respect to the straight lines 71a and 71b.
第4実施形態のその他の構成および点検方法は、上記第3実施形態と同様である。 The other configurations and inspection methods of the fourth embodiment are the same as those of the third embodiment.
本実施形態では、上記のように、旋回角度算出部59dは、所定の直線部が撮像装置14による撮像画像の横方向に沿って写るように、目標方位を補正し、補正した目標方位と検出方位とから旋回角度を算出する。これにより、撮像装置14のパン角が0度以外の場合(撮像装置14の光軸方向と無人航空機10の前後方向とが一致していない場合)であっても、屋根71の直線部71aを撮像画像の横方向に沿って写らせることができる。また、建物70の紙図面に描かれている屋根71の向きと画像の屋根71の向きとを一致させることができるので、例えば屋根71の点検作業性を向上させることができる。 In the present embodiment, as described above, the turning angle calculation unit 59d corrects the target direction so that the predetermined straight line part is captured along the lateral direction of the image captured by the image pickup device 14, and detects the corrected target direction. The turning angle is calculated from the direction. As a result, even when the pan angle of the image pickup device 14 is other than 0 degrees (when the optical axis direction of the image pickup device 14 and the front-rear direction of the unmanned aerial vehicle 10 do not match), the straight portion 71a of the roof 71 can be formed. It can be captured along the horizontal direction of the captured image. Further, since the orientation of the roof 71 drawn on the paper drawing of the building 70 and the orientation of the roof 71 in the image can be matched, for example, the inspection workability of the roof 71 can be improved.
第4実施形態のその他の効果は、上記第3実施形態と同様である。 Other effects of the fourth embodiment are the same as those of the third embodiment.
(第5実施形態)
この第5実施形態では、上記第1〜第4実施形態と異なり、例えば同一の構造物を繰り返し点検する場合に特に有効な構成について説明する。
(Fifth Embodiment)
In the fifth embodiment, unlike the first to fourth embodiments, for example, a configuration that is particularly effective when the same structure is repeatedly inspected will be described.
無人航空機10(図1参照)による点検において、例えば補修が必要な懸念がある部分を一定期間経過後に再度点検することが想定される。補修が必要な懸念がある部分とは、例えば、住宅(構造物)の屋根材においてひび割れに進展する懸念のある変色部分や、橋梁等の構造物に発生したひび割れ部分等が挙げられる。又、構造物の施工状況の進捗を把握する際にも、ある範囲を一定期間経過後に再度点検することが想定される。このように同じ位置で繰り返し点検等を行う場合、撮像装置14の向きを同じにすると、画像の確認を容易に行うことが可能となる。 In the inspection by the unmanned aerial vehicle 10 (see FIG. 1), for example, it is assumed that the part that may need repair is inspected again after a certain period of time. Examples of parts that may need repair include discolored parts that may develop into cracks in the roofing material of a house (structure), cracked parts that occur in structures such as bridges, and the like. In addition, when grasping the progress of the construction status of the structure, it is assumed that a certain range will be inspected again after a certain period of time. When performing repeated inspections and the like at the same position in this way, if the orientation of the image pickup apparatus 14 is the same, it is possible to easily confirm the image.
そこで、本実施形態では図3および図4に示すように、携帯端末50の制御部59は、撮像ボタン34aまたは53aの入力時に第1方位センサ19が検出した検出方位を撮像画像データに関連付けて記憶装置59bに記憶する。具体的には、撮像ボタン34aまたは53aが入力されると、第1方位センサ19が無人航空機10の方位を検出し、検出結果が携帯端末50に送信される。また、撮像装置14が撮像した撮像画像も携帯端末50に送信される。そして、制御部59は、無人航空機10の方位を撮像画像データに関連付けて記憶する。これにより、例えば入力部53を用いて撮像画像を選択することにより、構造物を撮像した時の無人航空機10の方位を後から読み出すことが可能となる。 Therefore, in the present embodiment, as shown in FIGS. 3 and 4, the control unit 59 of the mobile terminal 50 associates the detection direction detected by the first direction sensor 19 when the image pickup button 34a or 53a is input with the captured image data. It is stored in the storage device 59b. Specifically, when the image pickup button 34a or 53a is input, the first orientation sensor 19 detects the orientation of the unmanned aerial vehicle 10, and the detection result is transmitted to the mobile terminal 50. In addition, the captured image captured by the imaging device 14 is also transmitted to the mobile terminal 50. Then, the control unit 59 stores the orientation of the unmanned aerial vehicle 10 in association with the captured image data. This makes it possible to later read out the orientation of the unmanned aerial vehicle 10 when the structure is imaged, for example, by selecting the captured image using the input unit 53.
本実施形態では、制御部59は、撮像ボタン34aまたは53aの入力時における無人航空機10の方位だけでなく、撮像位置(経度、緯度および飛行高さ)、撮像装置14のパン角、チルト角、ズーム(焦点距離)も同様にして、撮像画像データに関連付けて記憶装置59bに記憶する。無人航空機10の位置(経度、緯度および飛行高さ)を検出する受信機12および高さセンサ13は、本発明の「位置検出装置」の一例である。 In the present embodiment, the control unit 59 determines not only the direction of the unmanned aerial vehicle 10 at the time of input of the image pickup button 34a or 53a, but also the image pickup position (longitude, latitude and flight height), the pan angle and tilt angle of the image pickup device 14. Similarly, the zoom (focal length) is stored in the storage device 59b in association with the captured image data. The receiver 12 and the height sensor 13 that detect the position (longitude, latitude, and flight height) of the unmanned aerial vehicle 10 are examples of the "position detection device" of the present invention.
変更ボタン34b又は53bが操縦者によって入力される(押される)と、方位設定部59cは、撮像画像データに関連付けて記憶された方位を目標方位に設定し、上記実施形態と同様、無人航空機10の向き(方位)が目標方位に変更される。また、本実施形態では、制御部59による目標方位の変更に伴って、無人航空機10の撮像位置、撮像装置14のパン角、チルト角、ズームも、この撮像画像データに関連付けて記憶された撮像位置、撮像装置14のパン角、チルト角、ズームに制御される。 When the change button 34b or 53b is input (pressed) by the operator, the direction setting unit 59c sets the direction stored in association with the captured image data as the target direction, and as in the above embodiment, the unmanned aerial vehicle 10 The direction (direction) of is changed to the target direction. Further, in the present embodiment, the imaging position of the unmanned aerial vehicle 10 and the pan angle, tilt angle, and zoom of the imaging device 14 are also captured in association with the captured image data as the target orientation is changed by the control unit 59. It is controlled by the position, the pan angle, the tilt angle, and the zoom of the image pickup device 14.
本実施形態では、再度点検が必要な屋根を撮像する際に、操縦者によって撮像ボタン34aまたは53aが入力される。これにより、屋根を撮像した時の無人航空機10の向き(方位)が記憶される。そして、一定期間経過後に、同じ屋根を再度撮像する際に、操縦者によって変更ボタン34b又は53bが入力されることによって、記憶装置59bに記憶された方位に目標方位が設定され、無人航空機10の向きが以前同じ屋根を撮像した時の向きに変更される。また、本実施形態では、撮像位置、撮像装置14のパン角、チルト角、ズームも、以前同じ屋根を撮像した時と同じ設定に変更される。このため、以前撮像した時と同じ条件で同じ屋根を撮像することができる。 In the present embodiment, when the roof that needs to be inspected again is imaged, the image pickup button 34a or 53a is input by the operator. As a result, the direction (direction) of the unmanned aerial vehicle 10 when the roof is imaged is stored. Then, after a certain period of time has elapsed, when the same roof is imaged again, the change button 34b or 53b is input by the operator, so that the target direction is set to the direction stored in the storage device 59b, and the unmanned aerial vehicle 10 The orientation is changed to the orientation when the same roof was previously imaged. Further, in the present embodiment, the imaging position, the pan angle, the tilt angle, and the zoom of the imaging device 14 are also changed to the same settings as when the same roof was imaged before. Therefore, it is possible to image the same roof under the same conditions as when the previous image was taken.
また、本実施形態では、撮像ボタン34aまたは53aが操縦者によって入力されると、無人航空機10の方位だけでなく撮像位置も記憶されるため、操縦者が変更ボタン34b又は53bを入力するだけで、無人航空機10は離陸位置から目的の屋根上空まで自律飛行し、以前撮像した時と同じ向きで同じ位置に移動することが可能である。 Further, in the present embodiment, when the image pickup button 34a or 53a is input by the operator, not only the direction of the unmanned aerial vehicle 10 but also the image pickup position is stored, so that the operator simply inputs the change button 34b or 53b. , The unmanned aerial vehicle 10 can autonomously fly from the takeoff position to the target roof sky and move to the same position in the same direction as when the image was previously taken.
なお、繰り返し点検の必要な構造物が複数存在することが想定される。この場合、無人航空機10の方位、撮像位置、撮像装置14のパン角、チルト角、ズームに関するデータのセットが、記憶装置59bに複数セット記憶される。操縦者が携帯端末50を用いて目的の構造物の撮像画像を選択することによって、複数のデータセットの中から目的のデータセットが抽出される。操縦者が変更ボタン34b又は53bを入力することによって、無人航空機10の方位、撮像位置、撮像装置14のパン角、チルト角、ズームが、目的の構造物の撮像画像データに関連付けて記憶された方位、撮像位置、撮像装置14のパン角、チルト角、ズームに制御される。 It is assumed that there are a plurality of structures that require repeated inspection. In this case, a plurality of sets of data relating to the orientation of the unmanned aerial vehicle 10, the imaging position, the pan angle, the tilt angle, and the zoom of the imaging device 14 are stored in the storage device 59b. When the operator uses the mobile terminal 50 to select an image of the target structure, the target data set is extracted from the plurality of data sets. When the operator inputs the change button 34b or 53b, the orientation, the imaging position, the pan angle, the tilt angle, and the zoom of the imaging device 14 are stored in association with the captured image data of the target structure. It is controlled by the orientation, the imaging position, the pan angle, the tilt angle, and the zoom of the imaging device 14.
第5実施形態のその他の構造および点検方法は、上記第1実施形態と同様である。 The other structure and inspection method of the fifth embodiment are the same as those of the first embodiment.
本実施形態では、上記のように、制御部59は、撮像ボタン34aまたは53aの入力時の第1方位センサ19が検出した検出方位を撮像画像データに関連付けて記憶装置59bに記憶し、方位設定部59cは、記憶された検出方位を目標方位に設定する。これにより、例えば、同じ構造物に対して繰り返し点検等を行う場合に、初回の検査時に無人航空機10の方位を撮像画像データに関連付けて記憶し、2回目以降の検査時に無人航空機10の方位を初回の検査時に記憶した方位に変更することができる。これにより、初回の検査時の撮像画像と2回目以降の検査時の撮像画像とを同じ向きにすることができるので、画像の確認を容易に行うことができる。 In the present embodiment, as described above, the control unit 59 stores the detected direction detected by the first direction sensor 19 at the time of input of the image pickup button 34a or 53a in the storage device 59b in association with the captured image data, and sets the direction. The unit 59c sets the stored detection direction as the target direction. As a result, for example, when the same structure is repeatedly inspected, the orientation of the unmanned aerial vehicle 10 is stored in association with the captured image data at the first inspection, and the orientation of the unmanned aerial vehicle 10 is stored at the second and subsequent inspections. The orientation can be changed to the one memorized at the time of the first inspection. As a result, the captured image at the first inspection and the captured image at the second and subsequent inspections can be oriented in the same direction, so that the images can be easily confirmed.
また、上記のように、制御部59は、撮像ボタン34aまたは53aの入力時の受信機12および高さセンサ13が検出した検出位置を撮像画像データに関連付けて記憶し、制御部59による目標方位の変更に伴って、無人航空機10の位置を撮像画像データに関連付けて記憶された検出位置に制御する。これにより、初回の検査時に無人航空機10の位置を撮像画像データに関連付けて記憶し、2回目以降の検査時に無人航空機10の位置を初回の検査時に記憶した位置に移動させることができる。このため、初回の検査時の撮像位置と2回目以降の検査時の撮像位置とを同じ位置にすることができるので、画像の確認をより容易に行うことができる。 Further, as described above, the control unit 59 stores the detection position detected by the receiver 12 and the height sensor 13 at the time of input of the image pickup button 34a or 53a in association with the image pickup image data, and the target orientation by the control unit 59. With the change of, the position of the unmanned aerial vehicle 10 is controlled to the detection position stored in association with the captured image data. Thereby, the position of the unmanned aerial vehicle 10 can be stored in association with the captured image data at the time of the first inspection, and the position of the unmanned aerial vehicle 10 can be moved to the position stored at the time of the first inspection at the second and subsequent inspections. Therefore, the imaging position at the time of the first inspection and the imaging position at the time of the second and subsequent inspections can be set to the same position, so that the image can be confirmed more easily.
第5実施形態のその他の効果は、上記第1実施形態と同様である。 Other effects of the fifth embodiment are the same as those of the first embodiment.
なお、今回開示された実施形態は、すべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した実施形態の説明ではなく特許請求の範囲によって示され、さらに特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれる。 It should be noted that the embodiments disclosed this time are exemplary in all respects and are not considered to be restrictive. The scope of the present invention is shown by the scope of claims rather than the description of the above-described embodiment, and further includes all modifications within the meaning and scope equivalent to the scope of claims.
例えば、上記実施形態では、操縦装置30と携帯端末50とによって操作装置2が構成される例について示したが、本発明はこれに限らない。例えば、操縦装置30の機能も有する携帯端末50のみ、又は、携帯端末50の機能も有する操縦装置30のみによって、操作装置2が構成されていてもよい。 For example, in the above embodiment, the operation device 2 is configured by the control device 30 and the mobile terminal 50, but the present invention is not limited to this. For example, the operation device 2 may be configured only by the mobile terminal 50 having the function of the control device 30, or only by the control device 30 having the function of the control device 50.
また、上記実施形態では、無人航空機10にジャイロセンサ20を設ける例について示したが、本発明はこれに限らない。例えば、ジャイロセンサ20の替りに加速度センサを設けてもよい。 Further, in the above embodiment, an example in which the gyro sensor 20 is provided in the unmanned aerial vehicle 10 has been shown, but the present invention is not limited to this. For example, an acceleration sensor may be provided instead of the gyro sensor 20.
また、上記実施形態では、着陸時に、表示画像の領域Rがホームポイントからずれている場合に無人航空機10を手動で移動させる例について示したが、本発明はこれに限らない。例えば、ホームポイントであることを無人航空機制御システム1により識別可能なシートや板をホームポイントに配置しておき、表示画像の領域Rとシートや板の位置とが一致するように、無人航空機10が自動で位置を調整しながら着陸するように構成してもよい。 Further, in the above embodiment, an example in which the unmanned aerial vehicle 10 is manually moved when the area R of the displayed image deviates from the home point at the time of landing is shown, but the present invention is not limited to this. For example, a seat or board that can be identified as a home point by the unmanned aerial vehicle control system 1 is arranged at the home point, and the unmanned aerial vehicle 10 is arranged so that the area R of the displayed image and the position of the seat or board match. May be configured to land while automatically adjusting its position.
また、表示画像の領域Rの表示サイズが無人航空機10の高さに応じて変化してもよい。例えば、無人航空機10が高い位置にある場合は領域Rの表示サイズを小さくし、無人航空機10が低くなるにつれて領域Rの表示サイズを大きくしてもよい。 Further, the display size of the area R of the display image may change according to the height of the unmanned aerial vehicle 10. For example, when the unmanned aerial vehicle 10 is in a high position, the display size of the area R may be reduced, and the display size of the area R may be increased as the unmanned aerial vehicle 10 becomes lower.
また、上記実施形態では、着陸時に撮像装置14が真下を向いており(パン角が0度、チルト角が−90度)、領域Rが表示画像の中心に配置されている例について示したが、本発明はこれに限らない。例えば、撮像装置14が斜め下方向を向いていてもよく、この場合、撮像装置14のパン角およびチルト角と無人航空機10の高さとに基づいて、表示画像中の無人航空機10の真下に該当する位置を算出して領域Rを表示してもよい。 Further, in the above embodiment, an example is shown in which the image pickup device 14 faces directly downward at the time of landing (pan angle is 0 degrees, tilt angle is −90 degrees), and the region R is arranged at the center of the displayed image. The present invention is not limited to this. For example, the image pickup device 14 may face diagonally downward, and in this case, it corresponds to directly below the unmanned aerial vehicle 10 in the display image based on the pan angle and tilt angle of the image pickup device 14 and the height of the unmanned aerial vehicle 10. The area R may be displayed by calculating the position to be used.
また、上記第2実施形態では、操作装置2の向き(方位)を検出するために操縦装置30に第2方位センサ37を設ける例について示したが、本発明はこれに限らず、携帯端末50に設けられた方位センサを用いて操作装置2の向き(方位)を検出してもよい。 Further, in the second embodiment, an example in which the second azimuth sensor 37 is provided in the control device 30 in order to detect the direction (direction) of the operation device 2 is shown, but the present invention is not limited to this, and the mobile terminal 50 is not limited to this. The direction (direction) of the operating device 2 may be detected by using the direction sensor provided in the above.
また、強風の場合などに無人航空機10の揺れや風による移動速度に応じて、着陸位置を予測して領域Rを表示してもよい。 Further, in the case of a strong wind or the like, the landing position may be predicted and the area R may be displayed according to the shaking of the unmanned aerial vehicle 10 and the moving speed due to the wind.
また、上記第5実施形態では、屋根を撮像した時の無人航空機10の向き(方位)を撮像画像データに関連付けて記憶する例について示したが、本発明はこれに限らない。例えば、操縦装置30の入力部34および携帯端末50の入力部53の少なくとも一方に、無人航空機10の向き(方位)を記憶するための方位記憶ボタン(図示せず)を撮像ボタン34aまたは53aとは別に設ける。そして、操縦者が方位記憶ボタンを入力することにより、無人航空機10の方位を記憶装置59bに記憶するように構成してもよい。 Further, in the fifth embodiment, an example in which the direction (direction) of the unmanned aerial vehicle 10 when the roof is imaged is stored in association with the captured image data has been shown, but the present invention is not limited to this. For example, at least one of the input unit 34 of the control device 30 and the input unit 53 of the mobile terminal 50 has a direction storage button (not shown) for storing the direction (direction) of the unmanned aerial vehicle 10 as an image pickup button 34a or 53a. Will be provided separately. Then, the operator may input the direction storage button to store the direction of the unmanned aerial vehicle 10 in the storage device 59b.
また、上述した実施形態および変形例の構成を適宜組み合わせて得られる構成についても、本発明の技術的範囲に含まれる。例えば、上記第1〜第5実施形態の構成を組み合わせてもよい。この場合、上記第1〜第5実施形態の変更ボタンのそれぞれに対応する複数の変更ボタンを設けてもよい。 Further, a configuration obtained by appropriately combining the configurations of the above-described embodiments and modifications is also included in the technical scope of the present invention. For example, the configurations of the first to fifth embodiments may be combined. In this case, a plurality of change buttons corresponding to each of the change buttons of the first to fifth embodiments may be provided.
1:無人航空機制御システム、2:操作装置、10:無人航空機、14:撮像装置、19:第1方位センサ、34b:変更ボタン、37:第2方位センサ、39:制御部、53b:変更ボタン、59:制御部、59c:方位設定部、59d:旋回角度算出部、59e:方位制御部、59f:パン角制御部、70:建物、71:屋根、71a、71b:直線部
1: Unmanned aircraft control system, 2: Operating device, 10: Unmanned aircraft, 14: Imaging device, 19: First direction sensor, 34b: Change button, 37: Second direction sensor, 39: Control unit, 53b: Change button , 59: Control unit, 59c: Direction setting unit, 59d: Turning angle calculation unit, 59e: Direction control unit, 59f: Pan angle control unit, 70: Building, 71: Roof, 71a, 71b: Straight unit
Claims (8)
前記無人航空機の飛行を制御する制御部を有し、前記無人航空機の飛行を操作する操作装置とを備えた無人航空機制御システムであって、
前記操作装置は、前記無人航空機を旋回させて前記無人航空機の前方の方位を変更する変更ボタンをさらに有し、
前記制御部は、目標方位を設定する方位設定部と、前記目標方位と前記変更ボタンの入力時の前記第1方位センサが検出した検出方位とから前記無人航空機の旋回角度を算出する旋回角度算出部と、前記旋回角度に基づいて前記無人航空機を旋回させ前記無人航空機の前方の方位を前記目標方位に変更する方位制御部と、を備えることを特徴とする無人航空機制御システム。 An unmanned aerial vehicle with a first directional sensor that detects the directional direction ahead,
An unmanned aerial vehicle control system having a control unit for controlling the flight of the unmanned aerial vehicle and an operating device for operating the flight of the unmanned aerial vehicle.
The operating device further comprises a change button that turns the unmanned aerial vehicle to change the forward orientation of the unmanned aerial vehicle.
The control unit calculates the turning angle of the unmanned aircraft from the direction setting unit for setting the target direction and the detection direction detected by the first direction sensor when the target direction and the change button are input. An unmanned aircraft control system comprising a unit and a directional control unit that turns the unmanned aircraft based on the turning angle and changes the front direction of the unmanned aircraft to the target directional direction.
前記方位設定部は、前記変更ボタンの入力時の前記第2方位センサが検出した検出方位を、前記目標方位に設定することを特徴とする請求項1に記載の無人航空機制御システム。 The operating device has a second directional sensor that detects the direction of the operating device.
The unmanned aerial vehicle control system according to claim 1, wherein the directional setting unit sets the detection directional detected by the second directional sensor at the time of inputting the change button to the target directional.
前記方位設定部は、前記建物の前記屋根の輪郭線を構成する複数の直線部のうち、所定の直線部と直交する方位を、前記目標方位に設定することを特徴とする請求項1に記載の無人航空機制御システム。 The unmanned aerial vehicle is equipped with an imaging device that images the roof of a building.
The first aspect of claim 1, wherein the orientation setting unit sets an orientation orthogonal to a predetermined straight line portion as the target orientation among a plurality of straight line portions constituting the contour line of the roof of the building. Unmanned aircraft control system.
前記操作装置は、前記撮像装置により撮像する撮像ボタンをさらに有し、
前記制御部は、前記撮像ボタンの入力時の前記第1方位センサが検出した検出方位を撮像画像データに関連付けて記憶し、
前記方位設定部は、前記撮像画像データに関連付けて記憶された前記検出方位を、前記目標方位に設定することを特徴とする請求項1に記載の無人航空機制御システム。 The unmanned aerial vehicle is equipped with an imaging device that images a structure.
The operating device further includes an imaging button for imaging by the imaging device.
The control unit stores the detection direction detected by the first direction sensor at the time of inputting the image pickup button in association with the pictured image data.
The unmanned aerial vehicle control system according to claim 1, wherein the direction setting unit sets the detected direction stored in association with the captured image data to the target direction.
前記制御部は、
前記撮像ボタンの入力時の前記位置検出装置が検出した検出位置を前記記憶された検出方位とともに前記撮像画像データに関連付けて記憶し、
前記制御部による前記目標方位の変更に伴って、前記無人航空機の位置を前記検出位置に制御することを特徴とする請求項6に記載の無人航空機制御システム。 The unmanned aerial vehicle further comprises a position detecting device for detecting the position of the unmanned aerial vehicle.
The control unit
The detection position detected by the position detection device at the time of inputting the image pickup button is stored together with the stored detection direction in association with the captured image data.
The unmanned aerial vehicle control system according to claim 6, wherein the position of the unmanned aerial vehicle is controlled to the detection position according to the change of the target direction by the control unit.
前記制御部は、前記変更ボタンの入力時の前記パン角を初期設定値に変更するパン角制御部を有することを特徴とする請求項1に記載の無人航空機制御システム。 The unmanned aerial vehicle is equipped with an imaging device capable of changing the pan angle, which is an angle formed by the optical axis in the horizontal direction with respect to the front of the unmanned aerial vehicle.
The unmanned aerial vehicle control system according to claim 1, wherein the control unit includes a pan angle control unit that changes the pan angle at the time of inputting the change button to an initial set value.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019121894A JP7348759B2 (en) | 2019-06-28 | 2019-06-28 | unmanned aircraft control system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019121894A JP7348759B2 (en) | 2019-06-28 | 2019-06-28 | unmanned aircraft control system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021009481A true JP2021009481A (en) | 2021-01-28 |
JP7348759B2 JP7348759B2 (en) | 2023-09-21 |
Family
ID=74199977
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019121894A Active JP7348759B2 (en) | 2019-06-28 | 2019-06-28 | unmanned aircraft control system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7348759B2 (en) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130162822A1 (en) * | 2011-12-27 | 2013-06-27 | Hon Hai Precision Industry Co., Ltd. | Computing device and method for controlling unmanned aerial vehicle to capture images |
JP2017138162A (en) * | 2016-02-02 | 2017-08-10 | Jfe鋼板株式会社 | Inspection system and inspection method of structure |
JP2018142246A (en) * | 2017-02-28 | 2018-09-13 | キヤノンマーケティングジャパン株式会社 | System, and control method and program thereof |
JP2019064349A (en) * | 2017-09-29 | 2019-04-25 | キヤノンマーケティングジャパン株式会社 | System, and control method, program of the same |
-
2019
- 2019-06-28 JP JP2019121894A patent/JP7348759B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130162822A1 (en) * | 2011-12-27 | 2013-06-27 | Hon Hai Precision Industry Co., Ltd. | Computing device and method for controlling unmanned aerial vehicle to capture images |
JP2017138162A (en) * | 2016-02-02 | 2017-08-10 | Jfe鋼板株式会社 | Inspection system and inspection method of structure |
JP2018142246A (en) * | 2017-02-28 | 2018-09-13 | キヤノンマーケティングジャパン株式会社 | System, and control method and program thereof |
JP2019064349A (en) * | 2017-09-29 | 2019-04-25 | キヤノンマーケティングジャパン株式会社 | System, and control method, program of the same |
Also Published As
Publication number | Publication date |
---|---|
JP7348759B2 (en) | 2023-09-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20200019189A1 (en) | Systems and methods for operating unmanned aerial vehicle | |
JP6671375B2 (en) | How to fly a drone | |
US11340634B2 (en) | Systems and methods for height control of a movable object | |
JP4012749B2 (en) | Remote control system | |
US20180143636A1 (en) | Autonomous system for shooting moving images from a drone, with target tracking and holding of the target shooting angle | |
JP6785020B1 (en) | Remote control system and its control device | |
JP6873515B1 (en) | Remote control system and its control device | |
JP7006449B2 (en) | Work vehicle management system | |
JP2019175312A (en) | Management system for working vehicle | |
CN113287077B (en) | Information processing device, information processing method, and unmanned aerial vehicle | |
EP3288828B1 (en) | Unmanned aerial vehicle system and method for controlling an unmanned aerial vehicle | |
JP7348759B2 (en) | unmanned aircraft control system | |
JP6986303B2 (en) | Remote control system and its control device | |
JP7241584B2 (en) | Roof inspection methods and programs | |
JP7456908B2 (en) | Unmanned aerial vehicle control device for roof inspection | |
JP2022010965A (en) | Flight device | |
US10023310B2 (en) | Unmanned flying object and flight control method thereof | |
WO2023139628A1 (en) | Area setting system and area setting method | |
US11835970B2 (en) | Unmanned aerial vehicle with work implement view and overview mode for industrial vehicles | |
WO2023187891A1 (en) | Determination system and determination method | |
JP7545758B2 (en) | Flight Control System | |
WO2022134300A1 (en) | Flight guidance method, electric motor calibration method, display device and readable storage medium | |
JP2023156807A (en) | Work support device and work system having the same |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220602 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230531 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230606 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230731 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230829 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230908 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7348759 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |