WO2020012632A1 - Ｕａｖ制御装置およびｕａｖ制御方法 - Google Patents

Ｕａｖ制御装置およびｕａｖ制御方法 Download PDF

Info

Publication number
WO2020012632A1
WO2020012632A1 PCT/JP2018/026468 JP2018026468W WO2020012632A1 WO 2020012632 A1 WO2020012632 A1 WO 2020012632A1 JP 2018026468 W JP2018026468 W JP 2018026468W WO 2020012632 A1 WO2020012632 A1 WO 2020012632A1
Authority
WO
WIPO (PCT)
Prior art keywords
uav
image
destination
flight
unit
Prior art date
Application number
PCT/JP2018/026468
Other languages
English (en)
French (fr)
Inventor
下谷　光生
宏和 千代延
Original Assignee
三菱電機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三菱電機株式会社 filed Critical 三菱電機株式会社
Priority to JP2020529942A priority Critical patent/JP7042911B2/ja
Priority to PCT/JP2018/026468 priority patent/WO2020012632A1/ja
Publication of WO2020012632A1 publication Critical patent/WO2020012632A1/ja

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64C—AEROPLANES; HELICOPTERS
    • B64C13/00—Control systems or transmitting systems for actuating flying-control surfaces, lift-increasing flaps, air brakes, or spoilers
    • B64C13/02—Initiating means
    • B64C13/16—Initiating means actuated automatically, e.g. responsive to gust detectors
    • B64C13/18—Initiating means actuated automatically, e.g. responsive to gust detectors using automatic pilot
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/10—Simultaneous control of position or course in three dimensions
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G5/00—Traffic control systems for aircraft, e.g. air-traffic control [ATC]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00—UAVs specially adapted for particular uses or applications
    • B64U2101/30—UAVs specially adapted for particular uses or applications for imaging, photography or videography
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U70/00—Launching, take-off or landing arrangements
    • B64U70/40—Landing characterised by flight manoeuvres, e.g. deep stall

Definitions

  • the present invention relates to flight control of UAV (Unmanned Aerial Vehicle).
  • UAV Unmanned Aerial Vehicle
  • Patent Literature 1 a flight route along a road map is planned with a road as an observation target, and a road condition is observed using a UAV.
  • the positioning accuracy of the positioning information by the GNSS installed in the UAV is about several meters, when the UAV reaches the destination specified on the planar road map or the three-dimensional map for flight, it takes several tens cm. It was difficult to reach the destination with positional accuracy.
  • the present invention has been made in view of this problem, and has as its object to make a UAV reach a destination with high accuracy.
  • a UAV control device includes a destination image acquisition unit that acquires a destination image that is an image of a destination photographed from the sky, and a captured image acquisition that acquires a captured image below the UAV by a camera mounted on the UAV.
  • a positioning unit for measuring the position of the UAV using the GNSS signal, a point setting unit for setting a landing preparation point above the vicinity of the destination, and a UAV flying as the first flight from the departure point to the landing preparation point
  • a flight control unit that controls the UAV so that the UAV flies from the landing preparation point to the destination as a second flight.
  • the flight control unit determines the position of the UAV measured by the positioning unit in the first flight. In the second flight, the UAV is controlled and the destination image is compared with the captured image to specify the destination on the captured image, and the relative position between the UAV and the destination is determined. Grip to, to determine the flight path of UAV.
  • a destination image which is an image of a destination photographed from the sky is acquired, an image photographed below the UAV by a camera mounted on the UAV is acquired, and the position of the UAV is acquired using a GNSS signal.
  • a landing preparation point is set above the vicinity of the destination, and the UAV flies from the departure point to the landing preparation point as the first flight, and then flies from the landing preparation point to the destination as the second flight.
  • the UAV is controlled by utilizing the position of the UAV measured using the GNSS signal, and in the second flight, the destination image and the photographed image are controlled.
  • the flight path of the UAV is determined.
  • FIG. 2 is a block diagram illustrating a configuration of a UAV according to the first embodiment.
  • FIG. 2 is a diagram illustrating a flight path of a UAV according to the first embodiment.
  • 4 is a flowchart illustrating an overall operation of the UAV control device according to the first embodiment.
  • 4 is a flowchart illustrating a second flight control of the UAV control device according to the first embodiment.
  • FIG. 9 is a block diagram illustrating a configuration of a UAV according to a second embodiment. It is a figure showing an aerial photograph group. It is a figure showing a destination picture. It is a figure showing the coordinates of the destination in a destination image. It is a figure showing a UAV photography picture.
  • FIG. 1 is a block diagram illustrating a configuration of a UAV according to the first embodiment.
  • FIG. 2 is a diagram illustrating a flight path of a UAV according to the first embodiment.
  • 4 is a flowchart illustrating an overall operation of the UAV
  • FIG. 4 is a diagram illustrating a relationship between a destination image and a landing preparation point.
  • FIG. 4 is a diagram illustrating a UAV photographed image after the photographing direction is adjusted.
  • FIG. 14 is a block diagram showing a configuration of a UAV according to a modification of the second embodiment.
  • FIG. 14 is a block diagram showing a configuration of a UAV according to a modification of the second embodiment. It is a figure showing a destination picture when a destination is located in a boundary of two aerial photographs. It is a figure showing the destination image generated from four aerial photographs. It is a figure which shows the landing preparation point on the line segment which connects the shooting position of the destination image and the destination. It is a flowchart which shows the update process of the flight route in 2nd flight control.
  • FIG. 14 is a block diagram showing a configuration of a UAV according to a modification of the second embodiment.
  • It is a figure showing a destination picture when a destination is located in a boundary of two aerial photographs.
  • FIG. 14 is a block diagram illustrating a configuration of a UAV according to a third embodiment. It is a figure showing the destination picture which is an ortho picture.
  • FIG. 14 is a block diagram illustrating a configuration of a UAV according to a fourth embodiment. It is a figure showing the destination image to which the mask processing was performed.
  • FIG. 15 is a block diagram illustrating a configuration of a UAV according to a fifth embodiment.
  • FIG. 15 is a diagram illustrating a flight path of a UAV according to the fifth embodiment.
  • 15 is a flowchart illustrating an overall operation of the UAV control device according to the fifth embodiment.
  • 15 is a flowchart illustrating a second flight control of the UAV control device according to the fifth embodiment. It is a figure showing a target mobile object picture.
  • FIG. 25 is a block diagram showing a configuration of a UAV according to a modification of the fifth embodiment.
  • 15 is a flowchart illustrating a second flight control of a UAV control device according to a modification of the fifth embodiment.
  • It is a figure which shows the image which superimposed the target moving body image on the aerial photograph around the landing preparation point.
  • FIG. 2 is a diagram illustrating a hardware configuration of a UAV control device.
  • FIG. 2 is a diagram illustrating a hardware configuration of a UAV control device.
  • FIG. 3 is a diagram illustrating a configuration example of a UAV control device including a server.
  • FIG. 1 is a block diagram showing a configuration of the UAV 1 according to the first embodiment.
  • the UAV 1 includes a UAV control device 101, a camera 21, a GNSS (Global Navigation Satellite system) receiver 22, a driving unit 23, and a battery 24.
  • the camera 21 is mounted on the UAV 1 and can mainly shoot a portion below the UAV 1.
  • the driving unit 23 operates by receiving power supply from the battery 24, and is a motor and a propeller that generate thrust for the UAV 1 to fly.
  • the GNSS receiver 22 is mounted on the UAV 1 and receives radio waves from GNSS satellites.
  • the UAV control device 101 includes a destination image acquisition unit 11, a positioning unit 12, a captured image acquisition unit 13, a point setting unit 14, and a flight control unit 15.
  • the destination image acquisition unit 11 acquires a destination image which is an image of the destination taken from the sky.
  • the positioning unit 12 acquires a GNSS signal from the GNSS receiver 22 and measures the current position of the UAV 1 based on the signal.
  • the positioning unit 12 may measure the current position using sensor information such as an acceleration sensor or an altitude sensor (not shown) in addition to the GNSS signal.
  • the captured image acquisition unit 13 acquires the captured image from the camera 21 and outputs the captured image to the flight control unit 15.
  • the point setting unit 14 sets a landing preparation point above the vicinity of the destination.
  • the captured image include the destination. Therefore, in this specification, when the camera 21 captures an image immediately below the UAV1, the range in which the captured image includes the destination is defined as "over the vicinity of the destination". Therefore, the landing preparation point may be right above the destination.
  • FIG. 2 shows the flight path of UAV 1 from departure point A to destination D.
  • the landing preparation point C is set slightly above the starting point A in the sky above the destination D.
  • a section from the departure point A to the landing preparation point C is referred to as a first section S1, and a flight in the first section S1 is referred to as a first flight.
  • a section from the landing preparation point C to the destination D is defined as a second section S2, and a flight in the second section is defined as a second flight.
  • the flight control unit 15 causes the UAV 1 to fly to the landing preparation point C using the UAV 1 position information measured by the positioning unit 12 for the first section S 1.
  • the position information measured by the positioning unit 12 includes an error of the GNSS signal, and its accuracy is about several meters.
  • the flight control unit 15 determines the relative positional relationship between the UAV 1 and the destination D with high accuracy by comparing the destination image and the captured image, and reaches the destination D. Controls flight of UAV1. As a result, the UAV 1 can accurately reach the destination D with an accuracy of several tens of cm.
  • FIG. 3 is a flowchart showing a flight control process of the UAV 1 by the flight control unit 15.
  • FIG. 4 is a flowchart showing the detailed processing of step S104 in FIG. 3, and is a flowchart relating to flight control in the second section.
  • the operation of the flight control unit 15 will be described with reference to FIGS.
  • the flow of FIG. 3 starts at the timing when destination information is input to the UAV control device 101, for example.
  • the destination image acquisition unit 11 acquires destination information (step S101).
  • the destination information includes a destination image and coordinates in the image of the destination D in the destination image.
  • the point setting unit 14 sets a landing preparation point C above the vicinity of the destination D based on the position information of the destination D (step S102).
  • the flight control part 15 performs flight control of the 1st area S1 (step S103).
  • the flight control unit 15 controls the drive unit 23 to fly the UAV 1 from the departure point A to the landing preparation point C based on the position information of the UAV 1 obtained from the positioning unit 12 and the position information of the destination D.
  • the flight control unit 15 performs flight control of the second section S2 (step S104).
  • the camera 21 photographs below the UAV 1 and the photographed image acquiring unit 13 acquires a photographed image (step S1041).
  • the flight control unit 15 acquires the captured image from the captured image acquisition unit 13 and specifies the position of the destination D in the captured image by comparing the captured image with the destination image (step S1042).
  • the flight control unit 15 determines the relative positional relationship between the UAV 1 and the destination D from the position of the destination D in the captured image, and controls the flight of the UAV 1 in a direction approaching the destination D based on the relative positional relationship (step). S1043).
  • the flight control unit 15 determines whether the UAV 1 has reached the destination based on the position information acquired from the positioning unit 12 or the captured image acquired from the captured image acquisition unit 13 (Step S1044). If the UAV1 has not reached the destination in step S1044, the process of the flight control unit 15 returns to step S1043, and continues the flight control of step S1043 until the UAV1 reaches the destination.
  • the UAV control device 101 includes a destination image acquisition unit 11 that acquires a destination image that is an image of a destination D taken from the sky, and an image captured below the UAV1 by a camera 21 mounted on the UAV1. , A positioning unit 12 that measures the position of the UAV 1 using the GNSS signal, a point setting unit 14 that sets a landing preparation point C in the sky near the destination, and a UAV 1 And a flight control unit 15 that controls the UAV 1 to fly from the landing preparation point C to the destination as a second flight after flying from the landing preparation point as a first flight.
  • the flight control unit 15 controls the UAV 1 using the position of the UAV 1 measured by the positioning unit 12 in the first flight, and compares the destination image with the captured image in the second flight to capture the image.
  • the destination D on the image is specified, the relative position between the UAV1 and the destination D is grasped, and the flight route of the UAV1 is determined.
  • the UAV controller 101 controls the UAV 1 to the destination D with high accuracy after the landing preparation point C because the flight route is determined by comparing the destination image and the captured image without using the GNSS signal. Can be.
  • FIG. 5 is a block diagram showing a configuration of the UAV 2 according to the second embodiment.
  • the UAV 2 includes a UAV control device 102 instead of the UAV control device 101 as compared with the UAV 1 of the first embodiment.
  • the UAV control device 102 includes an aerial photograph storage unit 16 in addition to the configuration of the UAV control device 101.
  • the aerial photograph storage unit 16 stores an aerial photograph group photographing a geographic area from the sky and coordinates in an image indicating where an arbitrary point in the geographic area covered by the aerial photograph group is located on the aerial photograph. Have been.
  • the aerial photograph group covers at least the destination of UAV1.
  • FIG. 6 shows an aerial photograph group of N rows and M columns stored in the aerial photograph storage unit 16.
  • each aerial photograph Q11-QNM is shown as a rectangle, but may be another shape such as a triangle, a circle, or a honeycomb shape, and the same applies to a captured image.
  • Each aerial photograph Q11-QNM is an image taken in a direction directly below from a specific altitude. That is, for example, the horizontal coordinates of a point appearing at the center of the aerial photograph Q11 are the horizontal coordinates of the shooting position of the aerial photograph Q11.
  • an aerial photograph will be described, but a satellite photograph may be used instead of an aerial photograph as long as the resolution is such that the destination D can be determined.
  • each of the aerial photographs Q11-QNM may be obtained by subjecting aerial photographs taken at different photographing altitudes to a process of converting the aerial photograph to a specific photographing altitude.
  • the aerial photograph storage unit 16 may store aerial photographs at a plurality of photographing altitudes in the same geographical range.
  • the destination image acquiring unit 11 acquires aerial photographs at a plurality of photographing altitudes as the destination image. Then, the flight control unit 15 checks one destination image close to the shooting altitude of the shot image with the shot image.
  • the aerial photograph storage unit 16 stores coordinates in an image of an arbitrary point in a geographical area covered by the aerial photograph group. Therefore, the destination image acquiring unit 11 can be acquired as the destination image Q des aerial photograph destination D has been taken, for example, aerial photographs QNM from aerial group.
  • Figure 7 shows the destination image Q des.
  • the roof of the building which is somewhat reflected in the upper left corner from the center position Pnm is the destination D.
  • the geographic coordinates covered by the destination image Q des are the geographic coordinates P UL (x, y) of the upper left point P UL of the destination image Q des and the geographic coordinates P DR of the lower right point P DR ( x, y).
  • the position P des of the destination D in the destination image Q des is represented by an xy coordinate system having either the point P UL or the point P UL as an origin.
  • FIG. 8 shows the coordinates P des (x, y) in the image of the position P des of the destination D with the point P UL as the origin.
  • x-direction is the lateral direction
  • y direction of the rectangular of the destination image Q des is the longitudinal direction.
  • the altitude of the destination D may be added as the z coordinate
  • the coordinates of the destination D in the image may be represented as D (x, y, z).
  • FIG. 9 shows a captured image R1 immediately below the UAV1 captured by the camera 21 when the UAV1 reaches the landing preparation point C.
  • the flight control unit 15 specifies the position P des of the destination D on the captured image R1 by comparing the destination image Q des of FIG. 7 with the captured image R1 of FIG. Thereby, the flight control unit 15 can grasp the positional relationship between the UAV 1 and the destination D.
  • the horizontal coordinates and the altitude of the landing preparation point C and each identical to the center position Pnm and photographing altitude destination image Q des. That is, the landing preparation point C is located directly above Pnm.
  • the positional relationship between the landing preparation point C and the destination D is as shown in FIG. 10, and the direction of the destination D viewed from the landing preparation point C is represented by an angle ( ⁇ , ⁇ ).
  • the angle ⁇ is an angle formed by a line segment connecting P des and P nm and the y direction of the destination image Q des .
  • the angle ⁇ is an angle formed by a line segment connecting the landing preparation point C and the center position Pnm and a line segment connecting the landing preparation point C and Pdes.
  • the angle ( ⁇ , ⁇ ) is calculated from the coordinates in the image of P des and the altitude of the landing preparation point C. Therefore, the UAV 1 that has reached the landing preparation point C can reach the destination D by descending in the direction of ( ⁇ , ⁇ ).
  • the flight control unit 15 may calculate the flight route of the second section S2 by another method. For example, after the flight control unit 15 specifies the position P des of the destination D on the photographed image R1 shown in FIG. 9, the UAV control device 102 captures the image of the camera 21 so that P des is located at the center of the photographed image. Adjust the direction. FIG. 11 shows a captured image R2 of the camera 21 obtained in this manner. In the captured image R2, P des is located at the center. At this time, the change direction of the shooting direction of the camera 21 is a direction in which the destination D is viewed from the UAV 1, and therefore, the flight control unit 15 may control the driving unit 23 so as to lower the UAV 1 in the direction.
  • FIG. 12 is a block diagram showing a configuration of a UAV 2A according to a first modification of the second embodiment.
  • the UAV 2A includes a UAV control device 102A instead of the UAV control device 102 as compared with the UAV 2.
  • the UAV control device 102A includes an image conversion unit 151 in the flight control unit 15.
  • the image conversion unit 151 performs an image conversion process as necessary, and unifies the shooting altitude or viewpoint of both images. That is, the image conversion process performed by the image conversion unit 151 includes a viewpoint conversion process and a shooting height conversion process. The image conversion unit 151 performs a viewpoint conversion process on the destination image, and performs a shooting height conversion process on one or both of the destination image and the captured image.
  • the destination image acquisition unit 11 acquires a plurality of aerial photographs having different photographing directions in a geographic range including the destination as destination images, and outputs the acquired aerial photographs to the flight control unit 15.
  • the image conversion unit 151 uses a plurality of destination images to perform a viewpoint conversion process of matching the viewpoint of the destination image with the viewpoint of the captured image, that is, the horizontal coordinate of the shooting position of the destination image to the captured image. A process for matching the horizontal coordinates of the shooting position is performed.
  • the flight control unit 15 can easily perform the collation by collating the destination image after the viewpoint conversion with the captured image.
  • FIG. 10 illustrates the case where the altitude of the landing preparation point C is the same as the shooting altitude of the destination image Qdes , but these may be different. However, in this case, the appearance of the building or the like is different between the destination image Q des and the captured image at the landing preparation point C. Therefore, before the flight control unit 15 performs image matching, the processing for unifying the imaging altitudes of both images is performed. It is desirable to carry out. At this time, the image conversion unit 151 may perform an altitude conversion process on one of the destination image Q des and the captured image to match the other imaging altitude, or perform an imaging process on both of the destination image Q des and the captured image that is different from any of the images. An altitude conversion process that matches the altitude may be performed. The flight control unit 15 can easily perform the collation by collating the captured image on which the processing for unifying the photography altitude has been performed with the destination image.
  • the flight control unit 15 may divide the two images into a plurality of regions and collate each region instead of collating the entire region at once.
  • the destination image Q des and the captured image are each divided into nine rectangular areas of three rows and three columns, and an area including the position P des of the destination D in the destination image Q des and one of the captured images To two regions.
  • the image conversion unit 151 performs the viewpoint conversion processing and the shooting height conversion processing as necessary. If the landing preparation point C is set right above the destination D, it is highly possible that the destination D is in the center of the captured image, and therefore, the first time, the center area of the captured image can be compared. desirable. If the destination D is not shown in the center area of the captured image in the first verification, the flight control unit 15 uses another area of the captured image for verification.
  • Flight control unit 15 in turn each of the divided regions of the captured image to the identifiable destination D in the captured image, matching the region including the position P des destination D of the destination image Q des. According to the above method, although the number of times of matching increases, the load of the image conversion process is reduced because the image conversion unit 151 does not necessarily need to perform the image conversion process on all the regions of the captured image.
  • the image conversion unit 151 may perform the image conversion processing on the destination image Q des after the UAV 1 arrives at the landing preparation point C, or after the landing preparation point C is set, the UAV 1 moves to the landing preparation point C. It may be performed at an arbitrary timing until the arrival. In the latter case, the amount of processing performed by the UAV controller 102 in real time after the UAV 1 arrives at the landing preparation point C can be reduced, so that the processing load on the CPU or GPU can be reduced.
  • the landing is ready point C is set just above the center position P nm of the destination image Q des, may be set directly above the destination D. Then, since the destination D is easily captured in the captured image R1, the image comparison is facilitated.
  • FIG. 13 is a block diagram showing a configuration of a UAV 2B according to a second modification of the second embodiment.
  • the UAV 2B includes a camera 21, a GNSS receiver 22, a driving unit 23, a battery 24, a communication unit 25, and a UAV control device 102B, and is connected to the server 31 by the communication unit 25.
  • the UAV control device 102B is obtained by removing the aerial photograph storage unit 16 and the image conversion unit 151 from the UAV control device 102A of the first modification.
  • the server 31 includes an aerial photograph storage unit 311 and an image conversion unit 312.
  • the captured image is transmitted from the captured image acquisition unit 13 to the server 31 via the communication unit 25.
  • the aerial photograph storage unit 311 stores the aerial photograph group described in FIG. 6 and the like
  • the image conversion unit 312 selects the aerial photograph including the destination D from the aerial photograph storage unit 311 as the destination image.
  • the image conversion unit 312 performs an image conversion process on the selected destination image so as to match the shooting altitude and viewpoint with the shot image at the landing preparation point C.
  • the destination image subjected to the image conversion processing by the image conversion unit 312 is acquired by the destination image acquisition unit 11 via the communication unit 25.
  • the UAV controller 102A may transmit the altitude and horizontal coordinates of the landing preparation point to the server 31 at the time when the landing preparation point is determined, instead of the captured image at the landing preparation point C. If the altitude and the horizontal coordinate of the landing preparation point C are known, the server 31 can perform the image conversion processing on the destination image in accordance with the altitude and the horizontal coordinate.
  • the UAV control device 102B since the server 31 performs the image conversion process for unifying the shooting altitude and the viewpoint between the destination image and the shot image, the UAV control device 102B needs to perform the image conversion process. Absent. Further, since the aerial photograph group is stored in the server 31, the UAV control device 102B does not need to store the aerial photograph group. Therefore, although the communication process with the server 31 occurs, the configuration of the UAV control device 102B can be simplified. Further, it is possible to cope with a case where the UAV 2B cannot accurately reach the landing preparation point C, or a case where the landing preparation point C is changed during the flight of the UAV 2B.
  • the destination image may be created from a plurality of aerial photographs.
  • FIG. 14 shows a case where the destination D is located at the boundary between two adjacent aerial photographs.
  • Destination image acquiring unit 11, the two aerial photographs were synthesized, the composite photograph may be the destination image Q des those cut on one aerial size.
  • FIG. 15 shows a case where the destination D is located in one aerial photograph. Even in this case, the destination image acquisition unit 11 combines the aerial photograph including the destination D and one or more adjacent aerial photographs, and cuts out the composite photograph to the size of one aerial photograph.
  • the ground image Q des may be used.
  • the destination image acquiring unit 11 creates a destination image from a composite photograph of a plurality of aerial photographs, thereby making the destination D the center of the destination image Q des as shown in FIG. It is possible.
  • the destination D is included at the center of both the destination image Q des and the captured image, and the matching processing of both images is easy. become.
  • the photographing range of the destination image Q des is smaller than the imaging range of the captured image R1, R2.
  • the shooting range of the destination image Q des may be larger than the shooting ranges of the shot images R1 and R2. Even if the shooting range is small, the destination image Q des includes the destination, so that the position of the destination on the shot image can be specified by comparing the destination image Q des with the shot image. is there. Then, as the shooting range of the destination image Q des is smaller, the processing load required for image comparison is reduced.
  • the flight in the first section S1 from the departure point A to the landing preparation point C includes an initial flight rising from the departure point A to a specific cruising altitude, and a cruising flight flying to the landing preparation point C while maintaining the cruising altitude. May be configured. By maintaining a cruising altitude in a cruising flight, wasteful energy consumption can be suppressed.
  • the cruising altitude may be the same as the landing preparation altitude which is the altitude of the landing preparation point C.
  • the cruising altitude information may be stored in the aerial photograph storage unit 16.
  • FIG. 6 illustrates the aerial photograph group
  • three-dimensional data of a ground object may be used instead of the aerial photograph.
  • the three-dimensional data is obtained by photographing the same geographic area from a plurality of directions.
  • the viewpoint conversion processing can be easily performed.
  • the landing preparation point C is positioned directly above the center position Pnm of the destination image Q des.
  • the point setting unit 14 may set the landing preparation point C at another place.
  • point setting unit 14 may set the landing preparation point C to a point on a line connecting the imaging position E and the destination D of the destination image Q des.
  • the direction in which the destination D is photographed from the photographing position E is the same as the direction in which the destination D is photographed from the landing preparation point C. Therefore, the difference in the appearance of the destination D between the destination image Q des and the captured image at the landing preparation point C is reduced.
  • the flight control unit 15 performs the image comparison, the viewpoint conversion process or the altitude conversion process becomes unnecessary, or the load on the conversion process can be reduced.
  • FIG. 17 shows a flowchart in the case of updating the flight route.
  • the flowchart of FIG. 17 is different from the flowchart of FIG. 4 in that the return destination in the case of NO in step S1044 is changed from step S1043 to step S1041. In the flow of FIG.
  • step S1044 is a step in which the flight control unit 15 determines whether or not the UAV has reached the destination.
  • the timing at which this step is performed may be the timing when the UAV has reached the predetermined altitude. Alternatively, it may be performed at predetermined time intervals.
  • the destination image obtaining unit 11 may obtain the destination image for each predetermined altitude from the aerial photograph storage unit 16 in advance in the UAV control devices 102 and 102A, or the UAV In the control device 102B, a destination image for each predetermined altitude may be acquired from the server 31 via the communication unit 25.
  • the captured image acquisition unit 13 transmits the captured image at the landing preparation point C to the server 31 via the communication unit 25.
  • the photographed image acquiring unit 13 transmits a photographed image photographed not only at the landing preparation point C but also at any timing from the landing preparation point C to the destination D via the communication unit 25 to the server 31. May be.
  • These captured images are images of the vicinity of the destination D taken from the sky, and may be stored in the aerial photograph storage unit 311 of the server 31 as an aerial photograph group.
  • the photographed image acquiring unit 13 may add information of photographing conditions, such as time of photographing, weather, illuminance, and direction of the sun, to the photographed image transmitted to the server 31.
  • the aerial photograph storage unit 311 may store the aerial photograph for each photographing condition.
  • the destination image acquiring unit 11 can acquire, as the destination image, an aerial photograph under the photographing conditions close to the photographing conditions when the camera 21 photographs below the UAV at the landing preparation point C. For example, if the direction of the sun is different, the direction of the shadow of the building is different, etc. However, by preparing a destination image whose shooting conditions are close to those of the shot image, image matching can be easily performed. Further, in the case of an image captured at night, a difference occurs between an image due to fixed illumination such as a window light of a building and moving illumination such as a neon sign or a search light. A correction may be made to exclude the existing area, and then stored as an aerial photograph in the aerial photograph storage unit 311. Alternatively, the server 31 may add a moving pattern or a changing pattern of the moving illumination as metadata to the aerial photograph.
  • FIG. 18 is a block diagram illustrating a configuration of the UAV 3 according to the third embodiment.
  • the UAV 3 includes a UAV control device 103 instead of the UAV control device 102 as compared with the UAV 2 of the second embodiment.
  • the UAV control device 103 differs from the UAV control device 102 in that the flight control unit 15 includes an orthographic conversion unit 152.
  • the destination image is an aerial photograph taken by an aerial camera, and thus is an image in which a target object is centrally projected as shown in FIG. Therefore, as the object shown in the image is higher from the ground, and as the object moves from the center to the peripheral portion, the image is misaligned.
  • the aerial photograph stored in the aerial photograph storage unit 16 is defined as an ortho image
  • the ortho image is defined as a destination image.
  • Ortho-images are obtained by orthographic transformation of ordinary aerial photographs, which eliminates image misalignment on the image and has the same size as the map, without tilt as seen from directly above. It is an image displayed at a position.
  • FIG. 19 shows an orthorectified image obtained by orthogonally transforming the destination image shown in FIG.
  • the destination image acquisition unit 11 acquires such an ortho image from the aerial photograph storage unit 16 as a destination image.
  • the flight control unit 15 acquires a destination image that is an orthorectified image from the destination image acquisition unit 11 and acquires a captured image of the camera 21 at the landing preparation point C from the captured image acquisition unit 13.
  • the orthographic conversion unit 152 orthographically converts the captured image into an orthorectified image.
  • the flight control unit 15 checks the captured image converted into the ortho image with the destination image, and specifies the position of the destination on the captured image.
  • the flight control unit 15 since the captured image to be image-collated and the destination image are both ortho-images, it is possible to accurately perform image collation even when the photographing directions of both images are different. Therefore, the flight control unit 15 does not need to perform an image conversion process for unifying the viewpoints of both images.
  • the imaging direction of the camera 21 be directly below the UAV3.
  • the orthographic conversion unit 152 does not have to perform the orthographic conversion of the photographed image.
  • the flight control unit 15 can reduce the processing load by comparing the captured image with the destination image as it is.
  • FIG. 20 is a block diagram showing a configuration of UAV 4 according to Embodiment 4.
  • the UAV 4 includes a UAV control device 104 instead of the UAV control device 103 as compared with the configuration of the UAV 3 of the third embodiment.
  • the UAV control device 104 differs from the UAV control device 103 in that the flight control unit 15 includes a mask processing unit 153 in addition to the orthographic conversion unit 152.
  • the flight control unit 15 compares the destination image with the captured image.
  • a moving body is traveling on a road, a track, and a waterway in the shooting range of the destination image. Since the position of the moving body changes with time, the range in which the moving body travels, such as a road, becomes a noise component in the collation between the destination image and the captured image.
  • the mask processing unit 153 performs a mask process on the destination image so as to mask the range in which the moving object travels in a fixed pattern.
  • the mask processing unit 153 may determine an area to be masked based on the road map.
  • the flight control unit 15 checks the destination image on which the mask processing has been performed by the mask processing unit 153 with the captured image, and specifies the position of the destination on the captured image.
  • Other operations of the UAV control device 104 are the same as those of the UAV control device 103 of the third embodiment.
  • FIG. 21 shows a destination image Q des after the mask processing has been performed.
  • a region where the moving body is traveling such as a road, is masked as the mask region Rm.
  • the mask processing unit 153 may perform a mask process on the captured image as well as the destination image.
  • the area masked by the mask processing unit 153 may include an area where illumination is performed, an area where a captured image changes due to moving illumination, and the like, in addition to a road and the like on which the moving object travels.
  • FIG. 22 is a block diagram showing a configuration of the UAV 5 according to the fifth embodiment.
  • the UAV 5 includes a camera 21, a GNSS receiver 22, a driving unit 23, a battery 24, a communication unit 26, and a UAV control device 105.
  • UAV control device 105 has the same configuration as UAV control device 101 of the first embodiment.
  • the destination is a feature such as the roof of a building, and the destination image is an image obtained by photographing a geographical area including the destination from the sky as shown in FIG.
  • the destination is a moving body that stops or runs, and the UAV control device 105 performs flight control until the UAV 5 lands on the moving body.
  • a moving object serving as a destination of the UAV 5 is referred to as a destination moving object.
  • This embodiment can be used for applications such as delivery of a package to a moving object by the UAV 5 or charging of the UAV 5 at the moving object.
  • FIG. 23 shows a target moving object image DVP which is an image of the target moving object taken from above.
  • the destination image acquisition unit 11 acquires the destination moving object image DVP in FIG. 23 as a destination image.
  • the positioning unit 12 measures the current position of the UAV 5 based on the GNSS signal, as in the other embodiments.
  • the communication unit 26 communicates with the target mobile unit, acquires the current position of the target mobile unit and the future travel route, and outputs the obtained position to the point setting unit 14.
  • the point setting unit 14 acquires the current position and the travel route of the target moving object from the communication unit 26, and estimates the future position of the target moving object based on these. Further, the point setting unit 14 acquires the current position of the UAV 5 from the positioning unit 12, and sets a point at which the UAV 5 can reach the sky in the vicinity of the target moving object as the landing preparation point C.
  • the camera 21 captures the image immediately below the UAV 5 at the landing preparation point C, it is desirable that the captured image includes the target moving object. Therefore, in the present embodiment, when the camera 21 captures an image immediately below the UAV 5, a range in which the captured image includes the target mobile object is defined as “over the vicinity of the destination mobile object”.
  • FIG. 24 shows the relationship between the departure point A, the destination moving object DV, and the landing preparation point C.
  • the flight section from the departure point A to the landing preparation point C is the first section S1
  • the flight section from the landing preparation point C to the landing at the destination mobile DV is the second section S2 (see FIG. 24). (Not shown).
  • the flight control unit 15 controls the flight of the UAV 5 to the landing preparation point C based on the UAV 5 position information measured by the positioning unit 12, as in the other embodiments. Further, in the second section S2, the flight control unit 15 determines the relative positional relationship between the UAV 5 and the destination by comparing the destination image with the captured image as in the other embodiments, Determine the flight path.
  • FIG. 25 is a flowchart showing a flight control process of the UAV 5 by the flight control unit 15.
  • FIG. 26 is a flowchart showing the detailed processing of step S509 in FIG. 25, and is a flowchart relating to flight control in the second section.
  • the operation of the flight control unit 15 will be described with reference to FIGS.
  • the flow of FIG. 25 is started, for example, at the timing when the information of the target moving object is input to the UAV control device 105.
  • the communication unit 26 acquires a traveling state including the current position of the target moving object and a future traveling route (step S501), and outputs this to the point setting unit 14.
  • the point setting unit 14 sets a landing preparation point C based on the traveling state of the target mobile unit and the current position of the UAV 5 acquired from the positioning unit 12 (Step S502).
  • the flight control unit 15 sets the current position of the UAV 5 as the departure point A, and determines a flight path in the first section S1 from the departure point A to the landing preparation point C (step S503).
  • the process of determining the flight route of the first section S1 is the same as that of the embodiment 1-4.
  • the destination image acquiring unit 11 acquires a destination moving body image (Step S504).
  • the flight control unit 15 controls the drive unit 23 to fly the UAV 5 from the departure point A to the landing preparation point C along the flight path determined in step S503 (step S505).
  • This is the flight control of the first section S1.
  • the communication unit 26 communicates with the target mobile at any time, such as at a fixed cycle, acquires the latest traveling state of the target mobile, and outputs it to the point setting unit 14 (step S506).
  • the point setting unit 14 determines whether there is a change in the traveling state of the target moving body (step S507), and if there is a change, resets the landing preparation point C based on the latest traveling state (step S502). For example, the point setting unit 14 updates the landing preparation point C when, for example, traffic congestion occurs and the target mobile changes its planned traveling route, or when the traveling speed of the target mobile is faster than originally planned.
  • step S508 If there is no change in the traveling state of the target moving body, the processing of UAV control apparatus 105 proceeds to step S508.
  • the flight control unit 15 has obtained the current position of the UAV 5 from the positioning unit 12, and determines whether or not the UAV 5 has reached the landing preparation point C based on this (step S508). Then, the flight control unit 15 continues the flight control of the first section S1 until the UAV 5 reaches the landing preparation point C (step S505). When the UAV 5 reaches the landing preparation point C, the flight control unit 15 subsequently performs flight control in the second section (step S509).
  • the camera 21 captures an image of the area below the UAV 5, and the captured image acquisition unit 13 acquires a captured image (step S5091).
  • the flight control unit 15 acquires the photographed image from the photographed image acquiring unit 13 and identifies the position of the target moving object in the photographed image by comparing the photographed image with the target moving object image (step S5092). . If the target moving object is not shown in the captured image as shown in FIG. 27, the flight control unit 15 adjusts the shooting direction of the camera 21 until the target moving object is picked up, as shown in FIG. 28 or FIG. Shoot another area. At this time, since the travel route of the target moving body is known, the flight control unit 15 may change the shooting direction of the camera 21 along the route.
  • the flight control unit 15 determines the position of the target moving object in the captured image by considering peripheral information of the target moving object. Can be identified.
  • the peripheral information of the target moving object includes, for example, an image of the periphery of the target moving object by a camera mounted on the target moving object.
  • the flight control unit 15 acquires, for example, an image of a moving object traveling in front of the target moving object or an image of a building around the target moving object as peripheral information of the target moving object via the communication unit 26. . Then, the flight control unit 15 specifies the position of the target moving object in the captured image by comparing the captured image with the target moving object image in consideration of the peripheral information.
  • the flight control unit 15 adjusts the shooting direction of the camera 21 so that the target moving object is located at the center of the captured image (Step S5093). Since the shooting direction of the camera 21 at this time is the direction in which the target moving object is viewed from the UAV 5, the flight control unit 15 controls the flight of the UAV 5 in the direction (step S5094). However, even if the UAV 5 flies toward the position of the target moving object at the time of step S5093, it cannot reach the target moving object if the target moving object is moving. Therefore, the flight control unit 15 may determine the flight route of the UAV 5 by adding the correction based on the moving direction of the target moving body to the shooting direction of the camera 21 at the time of step S5093.
  • the flight control unit 15 determines whether the UAV 5 has landed on the target moving object based on the position information acquired from the positioning unit 12 or the captured image acquired from the captured image acquisition unit 13 (step S5095). If the UAV 5 has not reached the destination in step S5095, the process of the flight control unit 15 returns to step S5091, and continues the flight control until the UAV 5 reaches the destination.
  • the flight control unit 15 may control the flight of the UAV 5 so that the UAV 5 moves at the same speed as the destination mobile unit. This facilitates collation between the captured image and the target moving object image. At this time, since the area other than the target moving body in the captured image changes with time, the flight control unit 15 may perform the mask processing on the area as in the fourth embodiment.
  • FIG. 30 is a block diagram showing a configuration of a UAV 5A according to a modification of the fifth embodiment.
  • the UAV 5A includes a UAV control device 105A instead of the UAV control device 105 as compared with the configuration of the UAV 5.
  • the UAV control device 105A includes an aerial photograph storage unit 16 in addition to the configuration of the UAV control device 105.
  • the aerial photograph storage unit 16 stores, in the aerial photograph, a group of aerial photographs in which a specific geographic region is photographed from the sky and an arbitrary point in the geographic region covered by the aerial photograph group. And the coordinates in the image indicating whether or not to execute. It is desirable that the aerial photograph group covers at least the travel route of the target mobile object.
  • FIG. 31 is a flowchart showing the flight control of the second section by the UAV control device 105A.
  • the flow of FIG. 31 shows a detailed flow of step S509 of FIG. 25, and is provided with step S5093A instead of step S5093 of FIG.
  • the flight control unit 15 specifies the position of the target moving object in the captured image by comparing the captured image with the target moving object image (step S5092).
  • the destination image acquisition unit 11 acquires from the aerial photograph storage unit 16 an aerial photograph that includes the same horizontal coordinate point as the landing preparation point C in the photographing range, and outputs the acquired aerial photograph to the flight control unit 15.
  • the flight control unit 15 determines the positional relationship between the UAV 5 and the target moving object by comparing the captured image with the aerial photograph (step S5093A). For example, when the captured image is a captured image immediately below UAV5, the center position of the captured image matches the horizontal coordinates of UAV5. Therefore, the flight control unit 15 specifies the position corresponding to the center position of the captured image and the position corresponding to the position of the target moving object on the aerial photograph, so that the UAV 5 and the target moving object in the horizontal direction are specified. The position can be grasped.
  • the flight control unit 15 grasps the three-dimensional relative positions of the UAV 5 and the target moving object, and flies in the second section so that the UAV 5 approaches the target moving object. The route can be determined.
  • the flight control unit 15 may superimpose the target moving object image on the aerial photograph when matching the captured image with the aerial photograph. Since the flight control unit 15 can acquire the position information of the target moving object from the communication unit 26, as shown in FIG. 32, the position of the target moving object corresponding to the current position of the target moving object DVP can be superimposed. Then, the flight control unit 15 checks the aerial photograph on which the target moving object image DVP is superimposed with the captured image. In this case, the flight control unit 15 can easily perform image matching by matching not only the target moving object but also the surrounding features.
  • the destination image acquisition unit 11 is realized by the processing circuit 61 shown in FIG. That is, the processing circuit 61 includes the destination image acquisition unit 11, the positioning unit 12, the captured image acquisition unit 13, the point setting unit 14, the flight control unit 15, and the aerial photograph storage unit 16 (hereinafter, referred to as the "destination image acquisition unit 11 and the like"). ”).
  • the processing circuit 61 dedicated hardware may be applied, or a processor that executes a program stored in a memory may be applied.
  • the processor is, for example, a central processing unit, a processing unit, an arithmetic unit, a microprocessor, a microcomputer, a DSP (Digital Signal Processor), or the like.
  • the processing circuit 61 When the processing circuit 61 is dedicated hardware, the processing circuit 61 includes, for example, a single circuit, a composite circuit, a programmed processor, a parallel programmed processor, an ASIC (Application Specific Integrated Circuit), and an FPGA (Field-Programmable). Gate Array) or a combination of these.
  • Each function of each unit such as the destination image acquisition unit 11 may be realized by a plurality of processing circuits 61, or the functions of each unit may be realized by one processing circuit.
  • the processing circuit 61 When the processing circuit 61 is a processor, the functions of the destination image acquisition unit 11 and the like are realized by a combination of software and the like (software, firmware or software and firmware). Software and the like are described as programs and stored in a memory. As shown in FIG. 34, a processor 62 applied to the processing circuit 61 reads out and executes a program stored in a memory 63 to realize the function of each unit. That is, the UAV control device 101 obtains a destination image which is an image of the destination taken from the sky, obtains a captured image below the UAV by a camera mounted on the UAV, and uses the GNSS signal.
  • software and the like are described as programs and stored in a memory.
  • a processor 62 applied to the processing circuit 61 reads out and executes a program stored in a memory 63 to realize the function of each unit. That is, the UAV control device 101 obtains a destination image which is an image of the destination taken from the sky, obtains a captured image below the UAV by
  • the memory 63 includes, for example, a non-volatile memory such as a RAM (Random Access Memory), a ROM (Read Only Memory), a flash memory, an EPROM (Erasable Programmable Read Only Memory), and an EEPROM (Electrically Erasable Programmable Read Only Memory).
  • a non-volatile memory such as a RAM (Random Access Memory), a ROM (Read Only Memory), a flash memory, an EPROM (Erasable Programmable Read Only Memory), and an EEPROM (Electrically Erasable Programmable Read Only Memory).
  • volatile semiconductor memory HDD (Hard Disk Drive), magnetic disk, flexible disk, optical disk, compact disk, mini disk, DVD (Digital Versatile Disk) and its drive device, or any storage medium used in the future There may be.
  • each function of the destination image acquisition unit 11 and the like is realized by one of hardware and software has been described above.
  • the present invention is not limited to this, and a configuration in which a part of the destination image acquisition unit 11 and the like is realized by dedicated hardware and another part is realized by software and the like may be used.
  • the function of the destination image acquisition unit 11 is realized by a processing circuit as dedicated hardware, and the processing circuit 61 as the processor 62 otherwise reads and executes a program stored in the memory 63. It is possible to realize that function.
  • the processing circuit can realize each function described above by hardware, software, or the like, or a combination thereof.
  • the aerial photograph storage unit 16 is configured by the memory 63, they may be configured by a single memory 63 or may be configured by individual memories.
  • the UAV control device is not only a device mounted on the UAV, but also a PND (Portable Navigation Device), a communication terminal (for example, a mobile terminal such as a mobile phone, a smartphone, and a tablet), and functions of an application installed therein, and
  • the present invention can also be applied to a system constructed as a system by appropriately combining servers and the like.
  • each function or each component of the UAV control device described above may be dispersedly arranged in each device constituting the system, or may be arranged intensively in any device.
  • FIG. 35 shows a configuration example of a UAV control device 101 including the UAV 1 and the server 40.
  • a destination image acquisition unit 11, a captured image acquisition unit 13, a point setting unit 14, and a flight control unit 15 are arranged in the server 40, and the positioning unit 12 is arranged in the UAV1.
  • each embodiment can be freely combined, or each embodiment can be appropriately modified or omitted within the scope of the invention.
  • the present invention has been described in detail, the above description is illustrative in all aspects, and the present invention is not limited thereto. It is understood that innumerable modifications that are not illustrated can be assumed without departing from the scope of the present invention.

Landscapes

  • Engineering & Computer Science (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Navigation (AREA)

Abstract

本発明は、ＵＡＶを目的地まで高精度に到達させることを目的とする。ＵＡＶ制御装置（１０１）は、目的地画像を取得する目的地画像取得部（１１）と、ＵＡＶ（１）の下方の撮影画像を取得する撮影画像取得部（１３）と、ＧＮＳＳ信号を用いてＵＡＶ（１）の位置を測定する測位部（１２）と、着陸準備ポイント（Ｃ）を設定するポイント設定部（１４）と、ＵＡＶ（１）の飛行を制御する飛行制御部（１５）を備える。飛行制御部（１５）は、出発地（Ａ）から着陸準備ポイント（Ｃ）までの第１飛行においては、測位部（１２）が測定したＵＡＶ（１）の位置を利用してＵＡＶ（１）を制御し、着陸準備ポイント（Ｃ）から目的地（Ｄ）までの第２飛行においては、目的地画像と撮影画像とを照合することにより、撮影画像上の目的地（Ｄ）を特定し、ＵＡＶ（１）と目的地（Ｄ）との相対位置を把握し、ＵＡＶ（１）の飛行経路を決定する。

Description

ＵＡＶ制御装置およびＵＡＶ制御方法
　この発明は、ＵＡＶ（Unmanned aerial vehicle）の飛行制御に関する。
　近年、ドローンなどのＵＡＶを輸送または情報収集に活用する取り組みが行われている。例えば特許文献１では、道路を観測対象として道路地図に沿った飛行経路を計画し、ＵＡＶを用いた道路状況の観測を行っている。
特開２０１７－８４１２２号公報
　ところが、ＵＡＶに設置されたＧＮＳＳによる測位情報の位置精度は数ｍ程度であるため、平面道路地図または飛行用の３次元地図上で指定した目的地にＵＡＶを到達させる場合、数十ｃｍ単位の位置精度で目的地に到達させることは困難であった。本発明はこの問題点に鑑み、ＵＡＶを目的地まで高精度に到達させることを目的とする。
　本発明のＵＡＶ制御装置は、目的地を上空から撮影した画像である目的地画像を取得する目的地画像取得部と、ＵＡＶに搭載されたカメラによるＵＡＶの下方の撮影画像を取得する撮影画像取得部と、ＧＮＳＳ信号を用いてＵＡＶの位置を測定する測位部と、目的地の近傍の上空に着陸準備ポイントを設定するポイント設定部と、ＵＡＶが出発地から着陸準備ポイントまで第１飛行として飛行した後、着陸準備ポイントから目的地まで第２飛行として飛行するようにＵＡＶを制御する飛行制御部と、を備え、飛行制御部は、第１飛行においては、測位部が測定したＵＡＶの位置を利用してＵＡＶを制御し、第２飛行においては、目的地画像と撮影画像とを照合することにより、撮影画像上の目的地を特定し、ＵＡＶと目的地との相対位置を把握し、ＵＡＶの飛行経路を決定する。
　本発明のＵＡＶ制御方法は、目的地を上空から撮影した画像である目的地画像を取得し、ＵＡＶに搭載されたカメラによるＵＡＶの下方の撮影画像を取得し、ＧＮＳＳ信号を用いてＵＡＶの位置を測定し、目的地の近傍の上空に着陸準備ポイントを設定し、ＵＡＶが出発地から着陸準備ポイントまで第１飛行として飛行した後、着陸準備ポイントから目的地まで第２飛行として飛行するようにＵＡＶを飛行制御し、飛行制御は、第１飛行においては、ＧＮＳＳ信号を用いて測定されたＵＡＶの位置を利用してＵＡＶを制御し、第２飛行においては、目的地画像と撮影画像とを照合して、撮影画像上の目的地を特定することにより、ＵＡＶの飛行経路を決定する。
　本発明によれば、目的地画像と撮影画像とを照合することによりＵＡＶと目的地との相対位置を把握するため、ＧＮＳＳ信号の誤差を排除し高精度にＵＡＶを目的地に到達させることが可能である。本発明の目的、特徴、態様、および利点は、以下の詳細な説明と添付図面とによって、より明白となる。
実施の形態１のＵＡＶの構成を示すブロック図である。 実施の形態１のＵＡＶの飛行経路を示す図である。 実施の形態１のＵＡＶ制御装置の全体動作を示すフローチャートである。 実施の形態１のＵＡＶ制御装置の第２飛行制御を示すフローチャートである。 実施の形態２のＵＡＶの構成を示すブロック図である。 航空写真群を示す図である。 目的地画像を示す図である。 目的地画像における目的地の座標を示す図である。 ＵＡＶ撮影画像を示す図である。 目的地画像と着陸準備ポイントとの関係を示す図である。 撮影方向の調整後のＵＡＶ撮影画像を示す図である。 実施の形態２の変形例に係るＵＡＶの構成を示すブロック図である。 実施の形態２の変形例に係るＵＡＶの構成を示すブロック図である。 目的地が２枚の航空写真の境界に位置する場合の目的地画像を示す図である。 ４枚の航空写真から生成される目的地画像を示す図である。 目的地画像の撮影位置と目的地とを結ぶ線分上の着陸準備ポイントを示す図である。 第２飛行制御における飛行経路の更新処理を示すフローチャートである。 実施の形態３のＵＡＶの構成を示すブロック図である。 オルソ画像である目的地画像を示す図である。 実施の形態４のＵＡＶの構成を示すブロック図である。 マスク処理が施された目的地画像を示す図である。 実施の形態５のＵＡＶの構成を示すブロック図である。 実施の形態５のＵＡＶの飛行経路を示す図である。 実施の形態５のＵＡＶ制御装置の全体動作を示すフローチャートである。 実施の形態５のＵＡＶ制御装置の第２飛行制御を示すフローチャートである。 目的移動体画像を示す図である。 ＵＡＶの撮影画像を示す図である。 ＵＡＶの撮影画像を示す図である。 ＵＡＶの撮影画像を示す図である。 実施の形態５の変形例のＵＡＶの構成を示すブロック図である。 実施の形態５の変形例のＵＡＶ制御装置の第２飛行制御を示すフローチャートである。 着陸準備ポイント周辺の航空写真に目的移動体画像を重畳した画像を示す図である。 ＵＡＶ制御装置のハードウェア構成を示す図である。 ＵＡＶ制御装置のハードウェア構成を示す図である。 サーバを含むＵＡＶ制御装置の構成例を示す図である。
　＜Ａ．実施の形態１＞
　＜Ａ－１．構成＞
　図１は、実施の形態１のＵＡＶ１の構成を示すブロック図である。ＵＡＶ１は、ＵＡＶ制御装置１０１、カメラ２１、ＧＮＳＳ（Global Navigation Satellite system）受信機２２、駆動部２３およびバッテリー２４を備えている。カメラ２１は、ＵＡＶ１に搭載されており、主にＵＡＶ１の下方を撮影することが可能である。駆動部２３はバッテリー２４から電力供給を受けて動作し、ＵＡＶ１に飛行のための推力を発生させるモータとプロペラである。ＧＮＳＳ受信機２２は、ＵＡＶ１に搭載されており、ＧＮＳＳ衛星からの電波を受信する。
　ＵＡＶ制御装置１０１は、目的地画像取得部１１、測位部１２、撮影画像取得部１３、ポイント設定部１４および飛行制御部１５を備える。目的地画像取得部１１は、目的地を上空から撮影した画像である目的地画像を取得する。測位部１２は、ＧＮＳＳ受信機２２からＧＮＳＳ信号を取得し、これに基づきＵＡＶ１の現在位置を測定する。なお、測位部１２はＧＮＳＳ信号に加えて、図示しない加速度センサまたは高度センサ等のセンサ情報を用いて現在位置の測定を行っても良い。撮影画像取得部１３は、カメラ２１からその撮影画像を取得し、飛行制御部１５に出力する。ポイント設定部１４は、目的地の近傍の上空に着陸準備ポイントを設定する。着陸準備ポイントでカメラ２１がＵＡＶ１の真下を撮影した際、撮影画像に目的地が含まれることが望ましい。従って、本明細書では、カメラ２１がＵＡＶ１の真下を撮影した際、撮影画像に目的地が含まれる範囲を、「目的地の近傍の上空」と定義する。従って、着陸準備ポイントは、目的地の真上であっても良い。
　図２は、出発地Ａから目的地ＤまでのＵＡＶ１の飛行経路を示している。図２において、着陸準備ポイントＣは、目的地Ｄの上空のやや出発地Ａよりに設定されている。出発地Ａから着陸準備ポイントＣまでの区間を第１区間Ｓ１とし、第１区間Ｓ１の飛行を第１飛行とする。また、着陸準備ポイントＣから目的地Ｄまでの区間を第２区間Ｓ２とし、第２区間の飛行を第２飛行とする。飛行制御部１５は、第１区間Ｓ１については、測位部１２が測定したＵＡＶ１の位置情報を用いてＵＡＶ１を着陸準備ポイントＣまで飛行させる。測位部１２の測定した位置情報は、ＧＮＳＳ信号の誤差を含んでおり、その精度はおよそ数ｍである。
　従って、飛行制御部１５は、第２区間Ｓ２については、目的地画像と撮影画像を照合することにより、高精度にＵＡＶ１と目的地Ｄとの相対的な位置関係を把握し、目的地ＤまでＵＡＶ１を飛行制御する。これにより、ＵＡＶ１は数十ｃｍ単位の精度で正確に目的地Ｄに到達することが可能となる。
　＜Ａ－２．動作＞
　図３は、飛行制御部１５によるＵＡＶ１の飛行制御処理を示すフローチャートである。図４は、図３のステップＳ１０４の詳細な処理を示すフローチャートであり、第２区間の飛行制御に関するフローチャートである。以下、図３および図４に沿って飛行制御部１５の動作を説明する。
　図３のフローは、例えばＵＡＶ制御装置１０１に目的地の情報が入力されたタイミングで開始する。まず、目的地画像取得部１１は、目的地情報を取得する（ステップＳ１０１）。ここで、目的地情報とは、目的地画像と、目的地画像における目的地Ｄの画像内座標とを含む。次に、ポイント設定部１４は、目的地Ｄの位置情報に基づき、目的地Ｄの近傍の上空に着陸準備ポイントＣを設定する（ステップＳ１０２）。そして、飛行制御部１５は、第１区間Ｓ１の飛行制御を行う（ステップＳ１０３）。ここで飛行制御部１５は、測位部１２から取得したＵＡＶ１の位置情報と、目的地Ｄの位置情報とに基づき、ＵＡＶ１を出発地Ａから着陸準備ポイントＣまで飛行するよう駆動部２３を制御する。ＵＡＶ１が着陸準備ポイントＣに到達すると、続いて飛行制御部１５は、第２区間Ｓ２の飛行制御を行う（ステップＳ１０４）。
　本ステップでは、カメラ２１がＵＡＶ１の下方を撮影し、撮影画像取得部１３が撮影画像を取得する（ステップＳ１０４１）。次に、飛行制御部１５は、撮影画像取得部１３から撮影画像を取得し、撮影画像を目的地画像と照合することにより、撮影画像中の目的地Ｄの位置を特定する（ステップＳ１０４２）。飛行制御部１５は、撮影画像中の目的地Ｄの位置から、ＵＡＶ１と目的地Ｄの相対的な位置関係を把握し、これに基づき、ＵＡＶ１を目的地Ｄに近づく方向に飛行制御する（ステップＳ１０４３）。その後、飛行制御部１５は測位部１２から取得する位置情報または撮影画像取得部１３から取得する撮影画像により、ＵＡＶ１が目的地に到達したか否かを判断する（ステップＳ１０４４）。ステップＳ１０４４において、ＵＡＶ１が目的地に到達していなければ、飛行制御部１５の処理はステップＳ１０４３に戻り、ＵＡＶ１が目的地に到達するまでステップＳ１０４３の飛行制御を続ける。
　実施の形態１のＵＡＶ制御装置１０１は、目的地Ｄを上空から撮影した画像である目的地画像を取得する目的地画像取得部１１と、ＵＡＶ１に搭載されたカメラ２１によるＵＡＶ１の下方の撮影画像を取得する撮影画像取得部１３と、ＧＮＳＳ信号を用いてＵＡＶ１の位置を測定する測位部１２と、目的地の近傍の上空に着陸準備ポイントＣを設定するポイント設定部１４と、ＵＡＶ１が出発地から着陸準備ポイントまで第１飛行として飛行した後、着陸準備ポイントＣから目的地まで第２飛行として飛行するようにＵＡＶ１を制御する飛行制御部１５と、を備える。飛行制御部１５は、第１飛行においては、測位部１２が測定したＵＡＶ１の位置を利用してＵＡＶ１を制御し、第２飛行においては、目的地画像と撮影画像とを照合することにより、撮影画像上の目的地Ｄを特定し、ＵＡＶ１と目的地Ｄとの相対位置を把握し、ＵＡＶ１の飛行経路を決定する。このようにＵＡＶ制御装置１０１は、着陸準備ポイントＣ以降は、ＧＮＳＳ信号を用いず目的地画像と撮影画像の照合により飛行経路を決定するため、高精度にＵＡＶ１を目的地Ｄまで飛行制御することができる。
　＜Ｂ．実施の形態２＞
　＜Ｂ－１．構成＞
　図５は、実施の形態２のＵＡＶ２の構成を示すブロック図である。ＵＡＶ２は、実施の形態１のＵＡＶ１と比較すると、ＵＡＶ制御装置１０１に代えてＵＡＶ制御装置１０２を備えている。ＵＡＶ制御装置１０２は、ＵＡＶ制御装置１０１の構成に加えて、航空写真記憶部１６を備えている。
　航空写真記憶部１６は、地理的領域を上空から撮影した航空写真群と、航空写真群がカバーする地理的領域の任意の地点が航空写真上のどこに位置するかを示す画像内座標とが格納されている。航空写真群は、少なくともＵＡＶ１の目的地をカバーしている。
　図６は、航空写真記憶部１６に格納されたＮ行Ｍ列の航空写真群を示している。図６では各航空写真Ｑ１１－ＱＮＭが矩形で示されているが、三角形、円形、ハニカム形状など他の形状であっても良く、撮影画像についても同様である。各航空写真Ｑ１１－ＱＮＭは、ある特定の高度から真下の方向に撮影された画像である。つまり、例えば航空写真Ｑ１１の中心に写っている地点の水平座標が、航空写真Ｑ１１の撮影位置の水平座標である。なお、本実施の形態では航空写真について説明するが、目的地Ｄを判別することが可能な解像度である限り、航空写真に代えて衛星写真が用いられても良い。また、各航空写真Ｑ１１－ＱＮＭは、異なる撮影高度で撮影された航空写真に対して、特定の撮影高度に変換する処理が施されたものでも良い。また、航空写真記憶部１６には同一の地理的範囲について、複数の撮影高度の航空写真が格納されていても良い。この場合、目的地画像取得部１１は、複数の撮影高度の航空写真を目的地画像として取得する。そして、飛行制御部１５は、撮影画像の撮影高度に近い一つの目的地画像を撮影画像と照合する。
　航空写真記憶部１６には、航空写真群がカバーする地理的領域の任意の地点の画像内座標が格納されている。従って、目的地画像取得部１１は、航空写真群の中から目的地Ｄが撮影されている航空写真、例えば航空写真ＱＮＭを目的地画像Ｑｄｅｓとして取得することが可能である。図７は、目的地画像Ｑｄｅｓを示している。目的地画像Ｑｄｅｓにおいて、中心位置Ｐｎｍからやや左上に写っている建物の屋上が目的地Ｄである。目的地画像Ｑｄｅｓがカバーする地理的座標は、目的地画像Ｑｄｅｓの左上の地点ＰＵＬの地理的座標ＰＵＬ（ｘ、ｙ）と、右下の地点ＰＤＲの地理的座標ＰＤＲ（ｘ、ｙ）により表される。また、目的地画像Ｑｄｅｓにおける目的地Ｄの位置Ｐｄｅｓは、地点ＰＵＬまたは地点ＰＵＬのいずれかを原点とするｘｙ座標系により表される。図８は、地点ＰＵＬを原点とした目的地Ｄの位置Ｐｄｅｓの画像内座標Ｐｄｅｓ（ｘ、ｙ）を表している。ここで、ｘ方向は矩形の目的地画像Ｑｄｅｓの横方向、ｙ方向は縦方向である。これに、目的地Ｄの高度がｚ座標として加えられ、目的地Ｄの画像内座標はＤ（ｘ，ｙ，ｚ）と表されても良い。
　＜Ｂ－２．動作＞
　以下、第２区間Ｓ２の飛行経路の算出方法を説明する。図９は、ＵＡＶ１が着陸準備ポイントＣに到達したときにカメラ２１が撮影したＵＡＶ１の真下の撮影画像Ｒ１を示している。飛行制御部１５は、図７の目的地画像Ｑｄｅｓと図９の撮影画像Ｒ１を照合して、撮影画像Ｒ１上の目的地Ｄの位置Ｐｄｅｓを特定する。これにより、飛行制御部１５はＵＡＶ１と目的地Ｄの位置関係を把握することが可能である。ここで、説明の簡単化のため、着陸準備ポイントＣの水平座標および高度を、目的地画像Ｑｄｅｓの中心位置Ｐｎｍおよび撮影高度とそれぞれ同一とする。すなわち、着陸準備ポイントＣはＰｎｍの真上に位置する。これにより、目的地画像と撮影画像に対して、後述する撮影高度変換処理と視点変換処理を行わなくても、両画像を照合することが可能になる。このとき、着陸準備ポイントＣと目的地Ｄの位置関係は、図１０に示されるものとなり、着陸準備ポイントＣから見た目的地Ｄの方向は、角度（θ，γ）で表される。ここで、角度θは、ＰｄｅｓとＰｎｍを結ぶ線分と、目的地画像Ｑｄｅｓのｙ方向がなす角である。そして、角度γは、着陸準備ポイントＣと中心位置Ｐｎｍとを結ぶ線分と、着陸準備ポイントＣとＰｄｅｓが結ぶ線分とがなす角である。角度（θ，γ）は、Ｐｄｅｓおよびの画像内座標と、着陸準備ポイントＣの高度から算出される。従って、着陸準備ポイントＣに到達したＵＡＶ１は、（θ，γ）の方向に降下することによって目的地Ｄに到達することができる。
　以上は、目的地Ｄの画像内座標を用いた第２区間Ｓ２の飛行経路の算出方法である。飛行制御部１５は、別の方法で第２区間Ｓ２の飛行経路を算出しても良い。例えば、飛行制御部１５が図９に示す撮影画像Ｒ１上の目的地Ｄの位置Ｐｄｅｓを特定した後、ＵＡＶ制御装置１０２は、Ｐｄｅｓが撮影画像の中心に位置するようにカメラ２１の撮影方向を調整する。こうして得られたカメラ２１の撮影画像Ｒ２を図１１に示す。撮影画像Ｒ２では、Ｐｄｅｓが中心に位置している。このときのカメラ２１の撮影方向の変化方向が、ＵＡＶ１から目的地Ｄを見る方向であるため、当該方向にＵＡＶ１を降下させるように、飛行制御部１５は駆動部２３を制御すれば良い。
　＜Ｂ－３．変形例＞
　図１２は、実施の形態２の第１の変形例のＵＡＶ２Ａの構成を示すブロック図である。ＵＡＶ２Ａは、ＵＡＶ２と比較すると、ＵＡＶ制御装置１０２に代えてＵＡＶ制御装置１０２Ａを備えている。ＵＡＶ制御装置１０２Ａは、飛行制御部１５に画像変換部１５１を備えている。
　画像変換部１５１は、必要に応じ画像変換処理を行い、両画像の撮影高度または視点を統一する。すなわち、画像変換部１５１の行う画像変換処理は、視点変換処理と撮影高度変換処理を含む。画像変換部１５１は、目的地画像に対して視点変換処理を行い、目的地画像と撮影画像の一方または両方に対して撮影高度変換処理を行う。
　まず、視点変換処理について説明する。図１０では、着陸準備ポイントＣと目的地画像Ｑｄｅｓの中心位置Ｐｎｍとの間で水平位置座標（ＸＹ座標）が同一の場合について説明したが、これらは異なっていても良い。しかし、その場合には目的地画像Ｑｄｅｓと着陸準備ポイントＣにおける撮影画像とで建物等の見え方が異なるため、飛行制御部１５で画像照合をする前に両画像の視点を統一することが望ましい。この視点変換処理は、同一の地理的範囲について撮影方向の異なる複数の航空写真が航空写真記憶部１６に格納されていることが前提となる。目的地画像取得部１１は、目的地を含む地理的範囲について撮影方向の異なる複数の航空写真を目的地画像として取得し、飛行制御部１５に出力する。飛行制御部１５では、画像変換部１５１が複数の目的地画像を用いて、目的地画像の視点を撮影画像の視点に合わせる視点変換処理、すなわち目的地画像の撮影位置の水平座標を撮影画像の撮影位置の水平座標に一致させる処理を行う。飛行制御部１５は、視点変換後の目的地画像を撮影画像と照合することで、容易に照合を行うことができる。
　次に、撮影高度変換処理について説明する。図１０では、着陸準備ポイントＣの高度が目的地画像Ｑｄｅｓの撮影高度と同一の場合について説明したが、これらは異なっていても良い。しかし、その場合には目的地画像Ｑｄｅｓと着陸準備ポイントＣにおける撮影画像とで建物等の見え方が異なるため、飛行制御部１５で画像照合をする前に両画像の撮影高度を統一する処理を行うことが望ましい。このとき、画像変換部１５１は、目的地画像Ｑｄｅｓと撮影画像の一方に対して、他方の撮影高度に合わせる高度変換処理を行っても良いし、両方に対して、いずれの画像とも異なる撮影高度に合わせる高度変換処理を行っても良い。飛行制御部１５は、撮影高度を統一する処理が行われた撮影画像と目的地画像を照合することにより、容易に照合を行うことができる。
　また、飛行制御部１５は、目的地画像Ｑｄｅｓと撮影画像を照合する際、全領域を一度に照合するのではなく、両画像を複数の領域に分割し、領域ごとに照合しても良い。例えば、目的地画像Ｑｄｅｓと撮影画像をそれぞれ３行３列の９個の矩形の領域に分割し、目的地画像Ｑｄｅｓのうち目的地Ｄの位置Ｐｄｅｓを含む領域と、撮影画像の１つの領域とを照合する。なお、この照合の前に画像変換部１５１は、必要に応じて上記の視点変換処理および撮影高度変換処理を行う。着陸準備ポイントＣが目的地Ｄの真上に設定されている場合、撮影画像の中心に目的地Ｄが写っている可能性が高いため、１回目は撮影画像の中心の領域を照合することが望ましい。１回目の照合で、撮影画像の中心の領域に目的地Ｄが写っていない場合、飛行制御部１５は、撮影画像の別の領域を照合に用いる。
　飛行制御部１５は、撮影画像中に目的地Ｄを特定できるまで撮影画像の各分割領域を順番に、目的地画像Ｑｄｅｓのうち目的地Ｄの位置Ｐｄｅｓを含む領域と照合する。以上の方法によれば、照合回数が増えるが、画像変換部１５１が必ずしも撮影画像の全ての領域について画像変換処理を行わなくても良いため、画像変換処理の負荷が削減される。
　画像変換部１５１は、目的地画像Ｑｄｅｓに対する画像変換処理を、ＵＡＶ１が着陸準備ポイントＣに着いてから行っても良いし、着陸準備ポイントＣが設定された後、ＵＡＶ１が着陸準備ポイントＣに到達するまでの間の任意のタイミングで行っても良い。後者の場合、ＵＡＶ１が着陸準備ポイントＣに到着してからリアルタイムでＵＡＶ制御装置１０２が行う処理量を削減できるため、ＣＰＵまたはＧＰＵの処理負荷を低減できる。
　図１０では、着陸準備ポイントＣが目的地画像Ｑｄｅｓの中心位置Ｐｎｍの真上に設定されているが、目的地Ｄの真上に設定されても良い。そうすれば、撮影画像Ｒ１に目的地Ｄが写りやすいため、画像照合が容易となる。
　図１３は、実施の形態２の第２の変形例のＵＡＶ２Ｂの構成を示すブロック図である。ＵＡＶ２Ｂは、カメラ２１、ＧＮＳＳ受信機２２、駆動部２３、バッテリー２４、通信部２５およびＵＡＶ制御装置１０２Ｂを備え、通信部２５によりサーバ３１と接続されている。ＵＡＶ制御装置１０２Ｂは、第１の変形例のＵＡＶ制御装置１０２Ａから、航空写真記憶部１６と画像変換部１５１を除外したものである。その代わりに、サーバ３１が航空写真記憶部３１１と画像変換部３１２を備えている。
　第２の変形例では、ＵＡＶ２Ｂが着陸準備ポイントＣに到達すると、撮影画像取得部１３から撮影画像が通信部２５を介してサーバ３１に送信される。サーバ３１では、航空写真記憶部３１１に図６等で説明した航空写真群が格納されており、画像変換部３１２が航空写真記憶部３１１から目的地Ｄを含む航空写真を目的地画像として選択する。さらに画像変換部３１２は、選択した目的地画像に、その撮影高度と視点を着陸準備ポイントＣにおける撮影画像に合わせる画像変換処理を行う。画像変換部３１２で画像変換処理が行われた目的地画像は、通信部２５を介して目的地画像取得部１１に取得される。
　ＵＡＶ制御装置１０２Ａは、着陸準備ポイントＣにおける撮影画像に代えて、着陸準備ポイントが定まった時点で、着陸準備ポイントの高度と水平座標をサーバ３１に送信しても良い。サーバ３１は、着陸準備ポイントＣの高度と水平座標が分かれば、それに合せて目的地画像に画像変換処理を行うことができる。
　第２の変形例によれば、目的地画像と撮影画像の間で撮影高度と視点を統一するための画像変換処理がサーバ３１で行われるため、ＵＡＶ制御装置１０２Ｂでは画像変換処理を行う必要がない。さらに、サーバ３１に航空写真群が記憶されているため、ＵＡＶ制御装置１０２Ｂでは航空写真群を記憶しておく必要がない。従って、サーバ３１との通信処理が発生するものの、ＵＡＶ制御装置１０２Ｂの構成を簡素化することが可能である。また、ＵＡＶ２Ｂが着陸準備ポイントＣに正確に到達できなかった場合、またはＵＡＶ２Ｂの飛行中に着陸準備ポイントＣが変更された場合にも対応することが可能である。
　図６，７では、航空写真群から１枚の航空写真を選択して目的地画像とすることについて説明した。しかし、目的地画像は複数枚の航空写真から作成されても良い。図１４は、隣り合う２枚の航空写真の境界に目的地Ｄが位置する場合を示している。目的地画像取得部１１は、当該２枚の航空写真を合成し、合成写真を１枚の航空写真のサイズに切り取ったものを目的地画像Ｑｄｅｓとしても良い。図１５は、１枚の航空写真内に目的地Ｄが位置する場合を示している。この場合でも目的地画像取得部１１は、目的地Ｄを含む航空写真とそれに隣接する１枚又は複数枚の航空写真を合成し、合成写真を１枚の航空写真のサイズに切り取ったものを目的地画像Ｑｄｅｓとしても良い。このように目的地画像取得部１１は、複数枚の航空写真の合成写真から目的地画像を作成することにより、図１５に示すように目的地Ｄを目的地画像Ｑｄｅｓの中心にすることが可能である。この場合、目的地Ｄの真上に着陸準備ポイントＣが設定されれば、目的地画像Ｑｄｅｓと撮影画像の両方において、それらの中心に目的地Ｄが含まれ、両画像の照合処理が容易になる。
　図７，９，１１において、目的地画像Ｑｄｅｓの撮影範囲は撮影画像Ｒ１，Ｒ２の撮影範囲より小さい。しかし、目的地画像Ｑｄｅｓの撮影範囲は撮影画像Ｒ１，Ｒ２の撮影範囲より大きくても良い。撮影範囲が小さくても、目的地画像Ｑｄｅｓには目的地が含まれているため、目的地画像Ｑｄｅｓと撮影画像の画像照合により撮影画像上の目的地の位置を特定することが可能である。そして、目的地画像Ｑｄｅｓの撮影範囲が小さい程、画像照合に要する処理負荷が軽減される。
　出発地Ａから着陸準備ポイントＣまでの第１区間Ｓ１の飛行は、出発地Ａから特定の巡航高度まで上昇する初期飛行と、その後、巡航高度を保ちながら着陸準備ポイントＣまで飛行する巡航飛行とで構成されても良い。巡航飛行において巡航高度を保つことにより、無駄なエネルギーの消費が抑えられる。なお、巡航高度は着陸準備ポイントＣの高度である着陸準備高度と同一であっても良い。巡航高度を着陸準備ポイントＣの高度以外の特定の高度とする場合、巡航高度の情報は航空写真記憶部１６に格納されていても良い。
　図６では航空写真群について説明したが、航空写真に代えて地上物の３次元データが用いられても良い。３次元データは、同一の地理的範囲を複数の方向から撮影することにより得られる。３次元データを目的地画像とすることにより、視点変換処理を容易に行うことが可能である。
　図１０では、着陸準備ポイントＣが目的地画像Ｑｄｅｓの中心位置Ｐｎｍの真上に位置している。しかし、ポイント設定部１４は他の場所に着陸準備ポイントＣを設定しても良い。例えば図１６に示すように、ポイント設定部１４は、目的地画像Ｑｄｅｓの撮影位置Ｅと目的地Ｄとを結ぶ線分上の一点に着陸準備ポイントＣを設定しても良い。このとき、撮影位置Ｅから目的地Ｄを撮影する方向と、着陸準備ポイントＣから目的地Ｄを撮影する方向が等しい。そのため、目的地画像Ｑｄｅｓと着陸準備ポイントＣにおける撮影画像との間で目的地Ｄの写り方に差異が少なくなる。そして、飛行制御部１５が画像照合を行う際に、視点変換処理または高度変換処理が不要になるか、あるいは変換処理にかかる負荷を軽減することができる。
　図４のフローで飛行制御部１５は、ＵＡＶ１が着陸準備ポイントＣに到達したときに画像照合を１回きり行い、第２区間Ｓ２の飛行経路を決定した。しかし、飛行制御部１５は、第２区間Ｓ２の飛行経路を決定した後、ＵＡＶが第２区間Ｓ２を飛行中に画像照合を複数回行い、画像照合結果に基づき飛行経路を更新しても良い。飛行経路の更新を行う場合のフローチャートを図１７に示す。図１７のフローチャートは、図４のフローチャートにおいて、ステップＳ１０４４でＮＯの場合の戻り先をステップＳ１０４３からステップＳ１０４１に変更したものである。図１７のフローにおいて、ステップＳ１０４４は、飛行制御部１５がＵＡＶが目的地に到達したか否かを判断するステップであるが、本ステップを行うタイミングは、ＵＡＶが所定高度に達したタイミングでも良いし、所定時間毎でも良い。所定高度毎にステップＳ１０４４を行う場合、目的地画像取得部１１は、ＵＡＶ制御装置１０２，１０２Ａにおいては、所定高度毎の目的地画像を予め航空写真記憶部１６から取得しても良いし、ＵＡＶ制御装置１０２Ｂにおいては、所定高度毎の目的地画像を通信部２５を介してサーバ３１から取得しても良い。
　第２の変形例では、撮影画像取得部１３が、通信部２５を介してサーバ３１に着陸準備ポイントＣにおける撮影画像を送信する。撮影画像取得部１３は、着陸準備ポイントＣに限らず、着陸準備ポイントＣから目的地Ｄに到達するまでの任意のタイミングで撮影された撮影画像を、通信部２５を介してサーバ３１に送信しても良い。これらの撮影画像は、目的地Ｄの近傍を上空から撮影した画像であるため、航空写真群としてサーバ３１の航空写真記憶部３１１に格納しても良い。また、撮影画像取得部１３は、サーバ３１に送信する撮影画像に、撮影時の時刻、天候、照度、太陽の方向などの撮影条件の情報を付加しても良い。そして、航空写真記憶部３１１は、撮影条件別に航空写真を格納しても良い。これにより、目的地画像取得部１１は、着陸準備ポイントＣにおいてカメラ２１がＵＡＶの下方を撮影する際の撮影条件に近い撮影条件の航空写真を目的地画像として取得することが可能となる。例えば太陽の方向が異なれば建物の影の方向等も異なるが、撮影画像と撮影条件の近い目的地画像を用意することにより、画像照合を容易に行うことができる。また、夜間に撮影された画像の場合は、建物の窓明かり等の固定照明と、ネオンサインまたはサーチライト等の移動照明による画像の差異が生じるため、サーバ３１は、撮影画像から照明が写っている領域を除外する修正を加えた上で、航空写真記憶部３１１に航空写真として格納しても良い。あるいは、サーバ３１は、移動照明の移動パターンまたは変化パターンをメタデータとして航空写真に付加しても良い。
　＜Ｃ．実施の形態３＞
　＜Ｃ－１．構成＞
　図１８は、実施の形態３のＵＡＶ３の構成を示すブロック図である。ＵＡＶ３は、実施の形態２のＵＡＶ２と比較すると、ＵＡＶ制御装置１０２に代えてＵＡＶ制御装置１０３を備えている。ＵＡＶ制御装置１０３は、飛行制御部１５に正射変換部１５２を備える点がＵＡＶ制御装置１０２と異なる。
　実施の形態１，２において、目的地画像は航空カメラで撮影された航空写真であるため、図７に示すように対象物が中心投影された画像である。従って、画像に写る対象物が地面から高いほど、また、画像の中心から周縁部に向かうほど、画像上の像に位置ずれが生じてしまう。
　そこで、実施の形態３では、航空写真記憶部１６に格納される航空写真をオルソ画像とし、オルソ画像を目的地画像とする。オルソ画像とは、通常の航空写真を正射変換することにより得られるもので、画像上の像の位置ずれを解消し、地図と同じく真上から見たような傾きの無い、像が正しい大きさと位置に表示される画像である。
　図１９に、図７に示す目的地画像が正射変換して得られたオルソ画像を示す。目的地画像取得部１１は、このようなオルソ画像を目的地画像として航空写真記憶部１６から取得する。飛行制御部１５は、目的地画像取得部１１からオルソ画像である目的地画像を取得し、撮影画像取得部１３から着陸準備ポイントＣにおけるカメラ２１の撮影画像を取得する。正射変換部１５２は、撮影画像を正射変換してオルソ画像にする。飛行制御部１５は、オルソ画像に変換された撮影画像を目的地画像と照合し、撮影画像上の目的地の位置を特定する。
　実施の形態３では、画像照合される撮影画像と目的地画像がいずれもオルソ画像であるため、両画像の撮影方向が異なっている場合でも正確に画像照合を行うことが可能である。従って、飛行制御部１５において、両画像の視点を統一する画像変換処理を行う必要はない。
　なお、撮影画像はオルソ画像に変換されることから、カメラ２１の撮影方向はＵＡＶ３の真下であることが望ましい。
　上記では、撮影画像を正射変換することについて説明した。しかし、撮影画像の周縁部において位置ずれが気にならない程度に撮影画像の撮影範囲が小さい場合には、正射変換部１５２は撮影画像の正射変換を行わなくても良い。この場合、飛行制御部１５は撮影画像をそのまま目的地画像と照合することにより、処理負荷を軽減することができる。
　＜Ｄ．実施の形態４＞
　＜Ｄ－１．構成＞
　図２０は、実施の形態４に係るＵＡＶ４の構成を示すブロック図である。ＵＡＶ４は、実施の形態３のＵＡＶ３の構成と比較すると、ＵＡＶ制御装置１０３に代えてＵＡＶ制御装置１０４を備えている。ＵＡＶ制御装置１０４は、飛行制御部１５が正射変換部１５２の他にマスク処理部１５３を備える点がＵＡＶ制御装置１０３と異なる。
　＜Ｄ－２．動作＞
　飛行制御部１５は、目的地画像と撮影画像を照合する。目的地画像の撮影範囲のうち、道路、線路、水路には移動体が走行している。移動体の位置は時間と共に変化するため、目的地画像と撮影画像の照合において、道路等、移動体が走行する範囲はノイズ成分となる。
　そこで、実施の形態４では、マスク処理部１５３により、目的地画像に対して、移動体が走行する範囲を一定のパターンでマスクするマスク処理を施す。このときマスク処理部１５３は、道路地図を基にマスクする領域を決定しても良い。そして、飛行制御部１５は、マスク処理部１５３でマスク処理が施された目的地画像を撮影画像と照合し、撮影画像上の目的地の位置を特定する。これ以外のＵＡＶ制御装置１０４の動作は、実施の形態３のＵＡＶ制御装置１０３と同様である。
　図２１は、マスク処理が行われた目的地画像Ｑｄｅｓを示している。目的地画像Ｑｄｅｓにおいて、道路等、移動体が走行している領域がマスク領域Ｒｍとしてマスクされている。なお、マスク処理部１５３は、目的地画像と同様に撮影画像にもマスク処理を施しても良い。
　マスク処理部１５３がマスクする領域は、移動体が走行する道路等の他、イルミネーションが行われている領域、移動照明などで撮影画像が変化する領域等を含んでも良い。
　＜Ｅ．実施の形態５＞
　＜Ｅ－１．構成＞
　図２２は、実施の形態５のＵＡＶ５の構成を示すブロック図である。ＵＡＶ５は、カメラ２１、ＧＮＳＳ受信機２２、駆動部２３、バッテリー２４、通信部２６およびＵＡＶ制御装置１０５を備えている。ＵＡＶ制御装置１０５は、実施の形態１のＵＡＶ制御装置１０１と同様の構成である。実施の形態１－４において、目的地は建物の屋上などの地物であり、目的地画像は、図７に示したように目的地を含む地理的範囲を上空から撮影した画像であった。これに対して実施の形態５では、目的地は停止または走行する移動体であり、ＵＡＶ制御装置１０５は、ＵＡＶ５を移動体に着陸させるまでの飛行制御を行う。以下、ＵＡＶ５の目的地となる移動体を目的移動体と称する。本実施の形態は、例えばＵＡＶ５による移動体への荷物の配送、またはＵＡＶ５の移動体での充電などの用途に利用することが可能である。
　図２３は、目的移動体を上方から撮影した画像である目的移動体画像ＤＶＰを示している。実施の形態５において目的地画像取得部１１は、図２３の目的移動体画像ＤＶＰを、目的地画像として取得する。
　測位部１２は、他の実施の形態と同様、ＧＮＳＳ信号に基づきＵＡＶ５の現在位置を測定する。
　通信部２６は、目的移動体と通信を行い、目的移動体の現在位置と今後の走行予定経路を取得してポイント設定部１４に出力する。ポイント設定部１４は、通信部２６から目的移動体の現在位置と走行経路を取得し、これらに基づき、目的移動体の将来の位置を推定する。また、ポイント設定部１４は測位部１２からＵＡＶ５の現在位置を取得し、ＵＡＶ５が目的移動体の近傍の上空に到達可能なポイントを着陸準備ポイントＣに設定する。着陸準備ポイントＣでカメラ２１がＵＡＶ５の真下を撮影した際、撮影画像に目的移動体が含まれることが望ましい。従って、本実施の形態では、カメラ２１がＵＡＶ５の真下を撮影した際、撮影画像に目的移動体が含まれる範囲を、「目的地移動体の近傍の上空」と定義する。
　図２４は、出発地Ａと目的移動体ＤＶと着陸準備ポイントＣの関係を示している。図２４において、出発地Ａから着陸準備ポイントＣまでの飛行区間が第１区間Ｓ１であり、着陸準備ポイントＣから目的移動体ＤＶに着陸するまでの飛行区間が第２区間Ｓ２（図２４に図示せず）である。
　飛行制御部１５は、第１区間Ｓ１においては、他の実施の形態と同様、測位部１２が測定したＵＡＶ５の位置情報に基づきＵＡＶ５を着陸準備ポイントＣまで飛行制御する。また、飛行制御部１５は、第２区間Ｓ２においては、他の実施の形態と同様、目的地画像と撮影画像とを照合することによりＵＡＶ５と目的地との相対的な位置関係を把握し、飛行経路を決定する。
　＜Ｅ－２．動作＞
　図２５は、飛行制御部１５によるＵＡＶ５の飛行制御処理を示すフローチャートである。図２６は、図２５のステップＳ５０９の詳細な処理を示すフローチャートであり、第２区間の飛行制御に関するフローチャートである。以下、図２５および図２６に沿って飛行制御部１５の動作を説明する。
　図２５のフローは、例えばＵＡＶ制御装置１０５に目的移動体の情報が入力されたタイミングで開始する。まず、通信部２６は、目的移動体の現在位置と今後の走行予定経路を含む走行状況を取得し（ステップＳ５０１）、これをポイント設定部１４に出力する。ポイント設定部１４は、目的移動体の走行状況と、測位部１２から取得したＵＡＶ５の現在位置に基づき、着陸準備ポイントＣを設定する（ステップＳ５０２）。
　次に、飛行制御部１５がＵＡＶ５の現在位置を出発地Ａとし、出発地Ａから着陸準備ポイントＣまでの第１区間Ｓ１の飛行経路を決定する（ステップＳ５０３）。第１区間Ｓ１の飛行経路の決定処理は実施の形態１－４と同様である。そして、目的地画像取得部１１が目的移動体画像を取得する（ステップＳ５０４）。
　次に、飛行制御部１５は、ＵＡＶ５を出発地Ａから着陸準備ポイントＣまでステップＳ５０３で決定した飛行経路に沿って飛行するよう駆動部２３を制御する（ステップＳ５０５）。これが、第１区間Ｓ１の飛行制御である。ＵＡＶ５が第１区間Ｓ１を飛行中、通信部２６は一定周期など随時に目的移動体と通信を行い、目的移動体の最新の走行状況を取得し、ポイント設定部１４に出力する（ステップＳ５０６）。ポイント設定部１４は、目的移動体の走行状況に変化があるか否かを判断し（ステップＳ５０７）、変化があれば最新の走行状況に基づき着陸準備ポイントＣの設定をやり直す（ステップＳ５０２）。例えば、渋滞が発生したため、目的移動体が走行予定経路を変更した場合、または目的移動体の走行速度が当初の予定よりも早い場合などに、ポイント設定部１４は着陸準備ポイントＣを更新する。
　目的移動体の走行状況に変化がなければ、ＵＡＶ制御装置１０５の処理はステップＳ５０８に移行する。飛行制御部１５は、測位部１２からＵＡＶ５の現在位置を取得しており、これに基づきＵＡＶ５が着陸準備ポイントＣに到達したか否かを判断する（ステップＳ５０８）。そして、飛行制御部１５はＵＡＶ５が着陸準備ポイントＣに到達するまで第１区間Ｓ１の飛行制御を継続する（ステップＳ５０５）。ＵＡＶ５が着陸準備ポイントＣに到達すれば、続いて飛行制御部１５は第２区間の飛行制御を行う（ステップＳ５０９）。
　第２区間の飛行制御では、まずカメラ２１がＵＡＶ５の下方を撮影し、撮影画像取得部１３が撮影画像を取得する（ステップＳ５０９１）。次に、飛行制御部１５は、撮影画像取得部１３から撮影画像を取得し、撮影画像を目的移動体画像と照合することにより、撮影画像中の目的移動体の位置を特定する（ステップＳ５０９２）。なお、図２７に示すように撮影画像中に目的移動体が写っていない場合、飛行制御部１５は目的移動体が写るまでカメラ２１の撮影方向を調整し、図２８または図２９に示すように別の範囲を撮影させる。このとき、目的移動体の走行経路が既知であるため、飛行制御部１５は当該経路に沿ってカメラ２１の撮影方向を変化させると良い。
　なお、撮影画像中に目的移動体画像と一致する目的移動体が複数写っている場合、飛行制御部１５は目的移動体の周辺情報を考慮することにより、目的移動体の撮影画像中の位置を特定することができる。目的移動体の周辺情報とは、例えば目的移動体に搭載されたカメラによる目的移動体の周辺の画像を含む。飛行制御部１５は、通信部２６を介して目的移動体の周辺情報として、例えば目的移動体の前方を走行している移動体の画像、または目的移動体の周辺にある建物の画像を取得する。そして、飛行制御部１５はこれらの周辺情報を考慮して撮影画像中と目的移動体画像を照合することにより、目的移動体の撮影画像中の位置を特定する。
　飛行制御部１５は、撮影画像中に目的移動体の位置を特定すると、目的移動体が撮影画像の中心に位置するようにカメラ２１の撮影方向を調整させる（ステップＳ５０９３）。このときのカメラ２１の撮影方向がＵＡＶ５から目的移動体を見た方向となるため、飛行制御部１５は当該方向に向かってＵＡＶ５を飛行制御する（ステップＳ５０９４）。但し、ＵＡＶ５がステップＳ５０９３時点の目的移動体の位置に向かって飛行しても、目的移動体が移動している場合には目的移動体に到達できない。そのため、飛行制御部１５は、ステップＳ５０９３時点のカメラ２１の撮影方向に、目的移動体の移動方向による補正を加えて、ＵＡＶ５の飛行経路を決定しても良い。
　飛行制御部１５は、測位部１２から取得する位置情報または撮影画像取得部１３から取得する撮影画像により、ＵＡＶ５が目的移動体に着陸したか否かを判断する（ステップＳ５０９５）。ステップＳ５０９５において、ＵＡＶ５が目的地に到達していなければ、飛行制御部１５の処理はステップＳ５０９１に戻り、ＵＡＶ５が目的地に到達するまで飛行制御を続ける。
　なお、ＵＡＶ５が目的地移動体の付近まで降下した場合、飛行制御部１５はＵＡＶ５が目的移動体と同一速度で移動するようにＵＡＶ５を飛行制御しても良い。これにより、撮影画像と目的移動体画像との照合が容易になる。この際、撮影画像において目的移動体以外の領域は時間と共に変化するため、飛行制御部１５は実施の形態４のように当該領域にマスク処理を行っても良い。
　＜Ｅ－３．変形例＞
　図３０は、実施の形態５の変形例のＵＡＶ５Ａの構成を示すブロック図である。ＵＡＶ５Ａは、ＵＡＶ５の構成と比較すると、ＵＡＶ制御装置１０５に代えてＵＡＶ制御装置１０５Ａを備えている。ＵＡＶ制御装置１０５Ａは、ＵＡＶ制御装置１０５の構成に加えて航空写真記憶部１６を備えている。航空写真記憶部１６には、実施の形態２と同様、特定の地理的領域を上空から撮影した航空写真群と、航空写真群がカバーする地理的領域の任意の地点が航空写真上のどこに位置するかを示す画像内座標とが格納されている。航空写真群は、少なくとも目的移動体の走行予定経路をカバーすることが望ましい。
　図３１は、ＵＡＶ制御装置１０５Ａによる第２区間の飛行制御を示すフローチャートである。図３１のフローは、図２５のステップＳ５０９の詳細なフローを示すものであり、図２６のステップＳ５０９３に代えてステップＳ５０９３Ａを設けたものである。ＵＡＶ制御装置１０５Ａにおいて、飛行制御部１５は、撮影画像を目的移動体画像と照合して撮影画像中の目的移動体の位置を特定する（ステップＳ５０９２）。その後、目的地画像取得部１１は、航空写真記憶部１６から着陸準備ポイントＣと同一の水平座標の地点を撮影範囲に含む航空写真を取得し、飛行制御部１５に出力する。飛行制御部１５は、撮影画像を航空写真と照合することにより、ＵＡＶ５と目的移動体の位置関係を把握する（ステップＳ５０９３Ａ）。例えば、撮影画像がＵＡＶ５の真下の撮影画像である場合、撮影画像の中心位置がＵＡＶ５の水平座標に一致する。従って、飛行制御部１５は、航空写真上で、撮影画像の中心位置に対応する位置と、目的移動体の位置に対応する位置を特定することにより、ＵＡＶ５と目的移動体の水平方向の相対的位置を把握することができる。これに、着陸準備ポイントＣの高度を加味することによって、飛行制御部１５はＵＡＶ５と目的移動体の３次元の相対的位置を把握し、ＵＡＶ５を目的移動体へ近づけるように第２区間の飛行経路を決定することができる。
　なお、飛行制御部１５は撮影画像を航空写真と照合する際、航空写真に目的移動体画像を重畳させておいても良い。飛行制御部１５は、通信部２６から目的移動体の位置情報を取得することが出来るため、図３２に示すように、目的移動体の現在位置に対応する航空写真の位置に、目的移動体画像ＤＶＰを重畳することが可能である。そして、飛行制御部１５は、目的移動体画像ＤＶＰが重畳された航空写真と撮影画像とを照合する。この場合、飛行制御部１５は、目的移動体だけでなくその周辺の地物を合せて照合することにより、容易に画像照合を行うことができる。
　＜Ｆ．ハードウェア構成＞
　上述したＵＡＶ制御装置１０１，１０２，１０２Ａ，１０２Ｂ，１０３，１０４，１０５，１０５Ａにおける、目的地画像取得部１１、測位部１２、撮影画像取得部１３、ポイント設定部１４、飛行制御部１５および航空写真記憶部１６は、図３３に示す処理回路６１により実現される。すなわち、処理回路６１は、目的地画像取得部１１、測位部１２、撮影画像取得部１３、ポイント設定部１４、飛行制御部１５および航空写真記憶部１６（以下、「目的地画像取得部１１等」と称する）を備える。処理回路６１には、専用のハードウェアが適用されても良いし、メモリに格納されるプログラムを実行するプロセッサが適用されても良い。プロセッサは、例えば中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、ＤＳＰ（Digital Signal Processor）等である。
　処理回路６１が専用のハードウェアである場合、処理回路６１は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-Programmable Gate Array）、またはこれらを組み合わせたものが該当する。目的地画像取得部１１等の各部の機能それぞれは、複数の処理回路６１で実現されてもよいし、各部の機能をまとめて一つの処理回路で実現されてもよい。
　処理回路６１がプロセッサである場合、目的地画像取得部１１等の機能は、ソフトウェア等（ソフトウェア、ファームウェアまたはソフトウェアとファームウェア）との組み合わせにより実現される。ソフトウェア等はプログラムとして記述され、メモリに格納される。図３４に示すように、処理回路６１に適用されるプロセッサ６２は、メモリ６３に記憶されたプログラムを読み出して実行することにより、各部の機能を実現する。すなわち、ＵＡＶ制御装置１０１は、目的地を上空から撮影した画像である目的地画像を取得するステップと、ＵＡＶに搭載されたカメラによるＵＡＶの下方の撮影画像を取得するステップと、ＧＮＳＳ信号を用いてＵＡＶの位置を測定するステップと、目的地の近傍の上空に着陸準備ポイントを設定するステップと、ＵＡＶを出発地から着陸準備ポイントまで飛行させた後、着陸準備ポイントから目的地まで第２飛行として飛行するようにＵＡＶを飛行制御するステップと、が結果的に実行されることになるプログラムを格納するためのメモリ６３を備える。
　換言すれば、このプログラムは、目的地画像取得部１１等の手順や方法をコンピュータに実行させるものであるともいえる。ここで、メモリ６３には、例えば、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＥＰＲＯＭ（Erasable Programmable Read Only Memory）、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read Only Memory）などの、不揮発性または揮発性の半導体メモリ、ＨＤＤ（Hard Disk Drive）、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、ＤＶＤ（Digital Versatile Disk）及びそのドライブ装置等、または、今後使用されるあらゆる記憶媒体であってもよい。
　以上、目的地画像取得部１１等の各機能が、ハードウェア及びソフトウェア等のいずれか一方で実現される構成について説明した。しかしこれに限ったものではなく、目的地画像取得部１１等の一部を専用のハードウェアで実現し、別の一部をソフトウェア等で実現する構成であってもよい。例えば、目的地画像取得部１１については専用のハードウェアとしての処理回路でその機能を実現し、それ以外についてはプロセッサ６２としての処理回路６１がメモリ６３に格納されたプログラムを読み出して実行することによってその機能を実現することが可能である。
　以上のように、処理回路は、ハードウェア、ソフトウェア等、またはこれらの組み合わせによって、上述の各機能を実現することができる。なお、航空写真記憶部１６は、メモリ６３から構成されるが、それらは単一のメモリ６３から構成されてもよいし、それぞれが個別のメモリから構成されてもよい。
　ＵＡＶ制御装置は、ＵＡＶに搭載される装置だけでなく、ＰＮＤ（Portable Navigation Device）、通信端末（例えば携帯電話、スマートフォン、およびタブレットなどの携帯端末）、およびこれらにインストールされるアプリケーションの機能、並びにサーバなどを適宜に組み合わせてシステムとして構築されるシステムにも適用することができる。この場合、以上で説明したＵＡＶ制御装置の各機能または各構成要素は、システムを構築する各機器に分散して配置されてもよいし、いずれかの機器に集中して配置されてもよい。その一例として図３５には、ＵＡＶ１とサーバ４０によるＵＡＶ制御装置１０１の構成例を示している。この例では、目的地画像取得部１１、撮影画像取得部１３、ポイント設定部１４および飛行制御部１５がサーバ４０に配置され、測位部１２がＵＡＶ１に配置されている。
　なお、本発明は、その発明の範囲内において、各実施の形態を自由に組み合わせたり、各実施の形態を適宜、変形、省略したりすることが可能である。この発明は詳細に説明されたが、上記した説明は、すべての態様において、例示であって、この発明がそれに限定されるものではない。例示されていない無数の変形例が、この発明の範囲から外れることなく想定され得るものと解される。
　１，２，２Ａ，２Ｂ，３，４，５，５Ａ　ＵＡＶ、１１　目的地画像取得部、１２　測位部、１３　撮影画像取得部、１４　ポイント設定部、１５　飛行制御部、１６　航空写真記憶部、２１　カメラ、２２　ＧＮＳＳ受信機、２３　駆動部、２４　バッテリー、２５，２６　通信部、３１，４０　サーバ、６１　処理回路、６２　プロセッサ、６３　メモリ、１０１，１０２，１０２Ａ，１０２Ｂ，１０３，１０４，１０５，１０５Ａ　ＵＡＶ制御装置、１５１　画像変換部、１５２　正射変換部、１５３　マスク処理部、３１１　航空写真記憶部、３１２　画像変換部。

Claims (16)

  1. 　目的地を上空から撮影した画像である目的地画像を取得する目的地画像取得部と、
    　ＵＡＶに搭載されたカメラによる前記ＵＡＶの下方の撮影画像を取得する撮影画像取得部と、
    　ＧＮＳＳ信号を用いて前記ＵＡＶの位置を測定する測位部と、
    　前記目的地の近傍の上空に着陸準備ポイントを設定するポイント設定部と、
    　前記ＵＡＶが出発地から前記着陸準備ポイントまで第１飛行として飛行した後、前記着陸準備ポイントから前記目的地まで第２飛行として飛行するように前記ＵＡＶを制御する飛行制御部と、を備え、
    　前記飛行制御部は、
    　　前記第１飛行においては、前記測位部が測定した前記ＵＡＶの位置を利用して前記ＵＡＶを制御し、
    　　前記第２飛行においては、前記目的地画像と前記撮影画像とを照合することにより、前記撮影画像上の前記目的地を特定し、前記ＵＡＶと前記目的地との相対位置を把握し、前記ＵＡＶの飛行経路を決定する、
    ＵＡＶ制御装置。
  2. 　前記飛行制御部は、前記目的地画像と前記撮影画像で撮影高度が異なる場合、前記目的地画像と前記撮影画像の一方または両方に撮影高度を変換する画像変換処理を行って、前記目的地画像と前記撮影画像で撮影高度を一致させたうえで両者を照合する、
    請求項１に記載のＵＡＶ制御装置。
  3. 　前記飛行制御部は、前記目的地画像の撮影高度を前記着陸準備ポイントの高度とする、
    請求項１に記載のＵＡＶ制御装置。
  4. 　前記飛行制御部は、前記目的地画像の中心位置の真上に前記着陸準備ポイントを設定する、
    請求項１に記載のＵＡＶ制御装置。
  5. 　前記飛行制御部は、前記目的地画像と前記撮影画像で撮影位置の水平座標が異なる場合、前記目的地画像に撮影位置の水平座標を変換する画像変換処理を行って、前記目的地画像と前記撮影画像で撮影位置の水平座標を一致させたうえで、両者を照合する、
    請求項１に記載のＵＡＶ制御装置。
  6. 　前記ＵＡＶ制御装置の外部のサーバに前記着陸準備ポイントの高度を送信し、
    　前記目的地画像取得部は、前記着陸準備ポイントの高度にあわせて撮影高度を変換する画像変換処理が行われた前記目的地画像を前記サーバから取得する、
    請求項１に記載のＵＡＶ制御装置。
  7. 　前記飛行制御部は、前記ＵＡＶ制御装置の外部のサーバに前記着陸準備ポイントの水平座標を送信し、
    　前記目的地画像取得部は、前記着陸準備ポイントの水平座標にあわせて撮影位置の水平座標を変換する画像変換処理が行われた前記目的地画像を前記サーバから取得する、
    請求項１に記載のＵＡＶ制御装置。
  8. 　前記第１飛行は、前記出発地から前記着陸準備ポイントの高度である着陸準備高度まで上昇する初期飛行と、前記初期飛行の後、前記着陸準備高度を保って前記着陸準備ポイントまで飛行する巡航飛行とを含む、
    請求項１に記載のＵＡＶ制御装置。
  9. 　前記飛行制御部は、前記目的地と前記目的地画像の撮影位置とを結ぶ線分上に前記着陸準備ポイントを設定する、
    請求項１に記載のＵＡＶ制御装置。
  10. 　前記飛行制御部は、前記第２飛行における複数の地点で、前記目的地画像と前記撮影画像とを照合して、前記撮影画像上の前記目的地を特定することにより、前記ＵＡＶの飛行経路を更新する、
    請求項１に記載のＵＡＶ制御装置。
  11. 　前記目的地画像取得部は、撮影高度が異なる複数の目的地画像と、複数の前記目的地画像における前記目的地の座標とを取得し、
    　前記飛行制御部は、前記撮影画像の撮影高度に応じて選択した一つの前記目的地画像を前記撮影画像と照合する、
    請求項１に記載のＵＡＶ制御装置。
  12. 　前記目的地画像はオルソ画像である、
    請求項１に記載のＵＡＶ制御装置。
  13. 　前記飛行制御部は、前記撮影画像を正射変換した上で前記目的地画像と照合する、
    請求項１２に記載のＵＡＶ制御装置。
  14. 　前記飛行制御部は、前記目的地画像と前記撮影画像に対して、道路、線路または水路の少なくともいずれか一つをマスクした上で、前記目的地画像と前記撮影画像とを照合する、
    請求項１に記載のＵＡＶ制御装置。
  15. 　前記目的地は、停止または走行する移動体であり、
    　前記飛行制御部は、移動体の現在位置と走行経路から前記移動体の将来の位置を推定し、推定結果と前記ＵＡＶの位置に基づき前記ＵＡＶが前記移動体の上方に到達可能なポイントを前記着陸準備ポイントとする、
    請求項１に記載のＵＡＶ制御装置。
  16. 　目的地を上空から撮影した画像である目的地画像を取得し、
    　ＵＡＶに搭載されたカメラによる前記ＵＡＶの下方の撮影画像を取得し、
    　ＧＮＳＳ信号を用いて前記ＵＡＶの位置を測定し、
    　前記目的地の近傍の上空に着陸準備ポイントを設定し、
    　前記ＵＡＶが出発地から前記着陸準備ポイントまで第１飛行として飛行した後、前記着陸準備ポイントから前記目的地まで第２飛行として飛行するように前記ＵＡＶを飛行制御し、
    　前記飛行制御は、
    　　前記第１飛行においては、前記ＧＮＳＳ信号を用いて測定された前記ＵＡＶの位置を利用して前記ＵＡＶを制御し、
    　　前記第２飛行においては、前記目的地画像と前記撮影画像とを照合して、前記撮影画像上の前記目的地を特定することにより、前記ＵＡＶの飛行経路を決定する、
    ＵＡＶ制御方法。
PCT/JP2018/026468 2018-07-13 2018-07-13 Ｕａｖ制御装置およびｕａｖ制御方法 WO2020012632A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2020529942A JP7042911B2 (ja) 2018-07-13 2018-07-13 Ｕａｖ制御装置およびｕａｖ制御方法
PCT/JP2018/026468 WO2020012632A1 (ja) 2018-07-13 2018-07-13 Ｕａｖ制御装置およびｕａｖ制御方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2018/026468 WO2020012632A1 (ja) 2018-07-13 2018-07-13 Ｕａｖ制御装置およびｕａｖ制御方法

Publications (1)

Publication Number Publication Date
WO2020012632A1 true WO2020012632A1 (ja) 2020-01-16

Family

ID=69141343

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/026468 WO2020012632A1 (ja) 2018-07-13 2018-07-13 Ｕａｖ制御装置およびｕａｖ制御方法

Country Status (2)

Country Link
JP (1) JP7042911B2 (ja)
WO (1) WO2020012632A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114253284A (zh) * 2021-12-22 2022-03-29 湖北襄开电力设备有限公司 无人机自动控制方法、装置、设备及存储介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114415736B (zh) * 2022-04-01 2022-07-12 之江实验室 一种无人机多阶段视觉精准降落方法和装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012071645A (ja) * 2010-09-28 2012-04-12 Topcon Corp 自動離着陸システム
US20130329061A1 (en) * 2012-06-06 2013-12-12 Samsung Electronics Co. Ltd. Method and apparatus for storing image data
JP2017056903A (ja) * 2015-09-18 2017-03-23 アイシン・エィ・ダブリュ株式会社 無人飛行体の制御システム、制御方法及び制御プログラム
JP2018084955A (ja) * 2016-11-24 2018-05-31 株式会社小糸製作所 無人航空機

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012071645A (ja) * 2010-09-28 2012-04-12 Topcon Corp 自動離着陸システム
US20130329061A1 (en) * 2012-06-06 2013-12-12 Samsung Electronics Co. Ltd. Method and apparatus for storing image data
JP2017056903A (ja) * 2015-09-18 2017-03-23 アイシン・エィ・ダブリュ株式会社 無人飛行体の制御システム、制御方法及び制御プログラム
JP2018084955A (ja) * 2016-11-24 2018-05-31 株式会社小糸製作所 無人航空機

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114253284A (zh) * 2021-12-22 2022-03-29 湖北襄开电力设备有限公司 无人机自动控制方法、装置、设备及存储介质

Also Published As

Publication number Publication date
JP7042911B2 (ja) 2022-03-28
JPWO2020012632A1 (ja) 2021-02-25

Similar Documents

Publication Publication Date Title
JP7556383B2 (ja) 情報処理装置、情報処理方法、情報処理プログラム、画像処理装置および画像処理システム
US9641810B2 (en) Method for acquiring images from arbitrary perspectives with UAVs equipped with fixed imagers
US11644839B2 (en) Systems and methods for generating a real-time map using a movable object
KR101329583B1 (ko) 회전익 구조체를 이용한 공중관측 지형자료 구축 방법 및 그 시스템
CN107251055B (zh) 走廊捕获
WO2018120350A1 (zh) 对无人机进行定位的方法及装置
JP5748561B2 (ja) 航空写真撮像方法及び航空写真撮像装置
KR101160454B1 (ko) 무인항공기의 자세 제어를 이용한 3ｄ 공간정보구축 방법
CN112470092A (zh) 一种测绘系统、测绘方法、装置、设备及介质
CN109655065A (zh) 一种无人机五航线规划方法及装置
CN106094876A (zh) 一种无人机目标锁定系统及其方法
US20220234753A1 (en) An Aerial Imaging System and Method
CN113875222A (zh) 拍摄控制方法和装置、无人机及计算机可读存储介质
WO2020012632A1 (ja) Ｕａｖ制御装置およびｕａｖ制御方法
WO2017203646A1 (ja) 撮像制御装置、影位置特定装置、撮像システム、移動体、撮像制御方法、影位置特定方法、及びプログラム
RU2798604C1 (ru) Бпла и способ выполнения аэрофотосъемки
RU2796697C1 (ru) Устройство и способ для формирования ортофотоплана
WO2024144434A1 (ru) Бпла и способ выполнения аэрофотосъемки
CN116745722A (zh) 无人机的控制方法、装置、无人机及存储介质
KR20150006752A (ko) 회전익 구조체를 이용한 공중관측 지형자료 구축 방법 및 그 시스템
WO2023097494A1 (zh) 全景图像拍摄方法、装置、无人机、系统及存储介质
KR102599649B1 (ko) 다수의 무인 비행체를 이용한 공간분할 방식의 위치정보제공 시스템 및 방법
CN117146782A (zh) 通过无人机地理坐标及其状态计算机载影像坐标系的方法
CN109782805A (zh) 激光雷达无人机规划航线的方法、装置、设备和存储介质
TH2101002912A (th) วิธีการและอุปกรณ์สำหรับการวางแผนจุดตัวอย่างสำหรับการสำรวจและการทำแผนที่,เครื่องปลายทางควบคุม

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18925800

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2020529942

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18925800

Country of ref document: EP

Kind code of ref document: A1