WO2023188270A1 - 航空機及び監視装置 - Google Patents

航空機及び監視装置 Download PDF

Info

Publication number
WO2023188270A1
WO2023188270A1 PCT/JP2022/016519 JP2022016519W WO2023188270A1 WO 2023188270 A1 WO2023188270 A1 WO 2023188270A1 JP 2022016519 W JP2022016519 W JP 2022016519W WO 2023188270 A1 WO2023188270 A1 WO 2023188270A1
Authority
WO
WIPO (PCT)
Prior art keywords
communication
data
wireless communication
modem
unit
Prior art date
Application number
PCT/JP2022/016519
Other languages
English (en)
French (fr)
Inventor
武彦 塩川
Original Assignee
三共木工株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三共木工株式会社 filed Critical 三共木工株式会社
Priority to PCT/JP2022/016519 priority Critical patent/WO2023188270A1/ja
Priority to PCT/JP2023/013137 priority patent/WO2023190847A1/ja
Publication of WO2023188270A1 publication Critical patent/WO2023188270A1/ja

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64CAEROPLANES; HELICOPTERS
    • B64C13/00Control systems or transmitting systems for actuating flying-control surfaces, lift-increasing flaps, air brakes, or spoilers
    • B64C13/02Initiating means
    • B64C13/16Initiating means actuated automatically, e.g. responsive to gust detectors
    • B64C13/20Initiating means actuated automatically, e.g. responsive to gust detectors using radiated signals
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64CAEROPLANES; HELICOPTERS
    • B64C39/00Aircraft not otherwise provided for
    • B64C39/02Aircraft not otherwise provided for characterised by special use
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U10/00Type of UAV
    • B64U10/10Rotorcrafts
    • B64U10/13Flying platforms

Definitions

  • the technology of the present disclosure relates to aircraft and monitoring devices.
  • Japanese Patent No. 6785019 discloses that at least a part of the communication path between the mobile object and the control device is made redundant with a satellite communication line and another communication line. Specifically, by using multiple communication methods together, the communication path between the multicopter and the control device is made redundant. Further, by making the means for connecting to the multicopter switchable between the satellite communication line and another communication line, the communication path with the multicopter is made redundant.
  • the technology of the present disclosure aims to provide an aircraft and a monitoring device that can communicate between the aircraft and the monitoring device using at least two communication methods.
  • an aircraft includes a first communication unit that performs first wireless communication, and a second communication unit that performs second wireless communication different from the first wireless communication. a communication unit, and a control unit that controls the first communication unit and the second communication unit so that data is transmitted to the monitoring device.
  • the monitoring device includes a display unit, each of the first communication unit and the second communication unit of the aircraft according to the first aspect, and each of the first wireless communication unit and the second wireless communication unit. a first wireless communication unit and a second wireless communication unit; a control unit that controls the display unit so that data received by the first wireless communication unit and the wireless communication unit are displayed; Equipped with
  • the aircraft of the third aspect includes a plurality of communication units that each perform different wireless communications, and a control unit that controls the plurality of communication units so that data is transmitted to a monitoring device.
  • a monitoring device includes a display section, a plurality of wireless communication sections each performing different wireless communication with the aircraft according to the third aspect, and a display section configured to display data received by the wireless communication section. and a control section that controls the section.
  • the first aspect and the second aspect of the technology of the present disclosure are capable of communicating between the aircraft and the monitoring device using at least two communication methods.
  • the third aspect and the fourth aspect of the technology of the present disclosure are , it is possible to communicate between the aircraft and the monitoring device using multiple communication methods.
  • FIG. 2 is a block diagram of a system including a drone 10A, monitoring devices 50S and 50G, a cloud server 200, and a live distribution server according to the first embodiment. It is a functional block diagram of CPU14 of FC12 of drone 10A. It is a flowchart of the communication program 40P executed by the CPU 14 of the FC 12. It is a timing chart of data transmission between the first modem 35A of the first communication control device 36 of the drone 10A and the second modem 35B of the second communication control device 38 of the drone 10A.
  • FIG. 3 is a diagram showing how data from the modem 35B is stored. It is a functional block diagram of CPU52S of monitoring device 50S of the 1st modification of a 1st embodiment. It is a flowchart of the data storage program of the monitoring device 50S of the 1st modification of 1st Embodiment.
  • the second data storage area 68M2 is a diagram showing how data from the second modem 35B is stored.
  • 12 is a timing chart of data transmission between the first modem 35A and the second modem 35B in a second modified example of the first embodiment.
  • the second communication control device 38 of the seventh modification of the first embodiment determines whether a failure has occurred in the communication by the first modem 35A of the first communication control device 36.
  • 3 is a flowchart of a failure occurrence determination program.
  • the FC 12 is notified by the second communication control device 38 of the seventh modification of the first embodiment that a failure has occurred in the communication by the first modem 35A of the first communication control device 36.
  • 2 is a flowchart of a program executed by the CPU 14 of FIG. It is a timing chart of each data transmission of the 1st modem 35A and the 2nd modem 35B of the 8th modification of a 1st embodiment.
  • FIG. 12 is a timing chart of data transmission between the first modem 35A and the second modem 35B in a ninth modification of the first embodiment.
  • It is a block diagram of a system including a drone 10B, monitoring devices 50S and 50G, a cloud server 200, and a live distribution server according to a second embodiment.
  • It is a block diagram of a system including a drone 10C, monitoring devices 50S and 50G, a cloud server 200, and a live distribution server according to a third embodiment.
  • FIG. 1 shows a drone 10A of the first embodiment, monitoring devices 50S and 50G, a cloud server device (hereinafter referred to as “cloud server”) 200, and a live distribution server device (hereinafter referred to as “live distribution server”).
  • cloud server a cloud server device
  • live distribution server a live distribution server device
  • the drone 10A includes a flight controller (FC) 12, a first communication control device 36, and a second communication control device 38.
  • the drone 10A includes a sensor 42, a first camera 32, and a second camera 34.
  • the drone 10A includes a battery 25 and four power supply modules (indicated as "power supply M” in FIG. 1) 12M1, 12M2, 36M, and 38M.
  • the FC 12 includes a computer and a secondary storage device 40 connected to the computer.
  • the computer includes a CPU (Central Processing Unit) 14, a ROM (Read Only Memory) 16, a RAM (Random Access Memory) 18, and an input/output (I/O) port 218.
  • the CPU 14, ROM 16, RAM 18, and I/O port 20 are interconnected via a bus 22.
  • a sensor 42 , a secondary storage device 40 , a first communication control device 36 , and a second communication control device 38 are connected to the I/O port 20 .
  • the secondary storage device 40 stores a communication program 40P (see FIG. 3), which will be described later.
  • the communication program 40P is read out from the secondary storage device 40 to the RAM 18, and executed by the CPU 14 to perform communication processing to be described later.
  • the communication program 40P may be stored in the ROM 16.
  • the secondary storage device 40 is a non-transitory tangible computer readable recording medium, such as a hard disk drive (HDD) or a solid disk drive (SSD). non-volatile such as tate drive) It is a storage device.
  • the secondary storage device 40 is an example of a “storage unit” and a “recording medium” of the technology of the present disclosure.
  • the first communication control device 36 includes a computer and a first modem 35A connected to the computer.
  • the computer of the first communication control device 36 includes a CPU 14A, a ROM 16A, a RAM 18A, and an I/O port 20A, which are interconnected via a bus 22A.
  • the I/O port 20 of the FC 12, the first camera 32, and the second camera 34 are connected to the I/O port 20A of the first communication control device 36.
  • the second communication control device 38 includes a computer and a second modem 35B connected to the computer.
  • the computer of the second communication control device 38 includes a CPU 14B, a ROM 16B, a RAM 18B, and an I/O port 20B, which are interconnected via a bus 22B.
  • the I/O port 20 of the FC 12, the first camera 32, and the second camera 34 are connected to the I/O port 20B of the second communication control device 38.
  • the sensor 42 is a GPS (Global Positioning System) sensor, a gyro sensor, an altitude sensor, an acceleration sensor, an atmospheric pressure sensor, or the like. Note that in FIG. 1, these are shown as sensors 42.
  • GPS Global Positioning System
  • a first camera 32 is provided at the tip and photographs an area in the direction of movement of the drone.
  • a second camera 34 is provided at the upper part of the rear end of the drone and photographs the entire state of the drone.
  • Power supply module 12M1, 12M2, 36M, and 38M are transformers.
  • the power supply modules 12M1 and 12M2 convert the voltage from the battery 25 into the voltage required by the FC 12.
  • the power supply module 36M changes the voltage from the battery 25 to the voltage required by the first communication control device 36.
  • the power supply module 38M converts the voltage from the battery 25 to the voltage required by the second communication control device 38.
  • the voltage from the battery is also supplied to the first camera 32 and the second camera 34 via the power supply module.
  • the first monitoring device 50S is placed in a first area that includes the first point from which the drone 10A is scheduled to take off.
  • the second monitoring device 50G is arranged in a second area including a second point where the drone 10A is scheduled to land.
  • the first monitoring device 50S includes a computer 50CS, an input device 62S, a first communication device 64S1, a second communication device 64S2, a display 66S, and a storage device 68S.
  • the computer 50CS includes a CPU 52S, a ROM 54S, a RAM 56S, and an I/O port 58S, which are interconnected via a bus 60S.
  • An input device 62S, a first communication device 64S1, a second communication device 64S2, a display 66S, and a storage device 68S are connected to the I/O port 58S.
  • the second monitoring device 50G includes a computer 50CG, an input device 62G, a first communication device 64G1, a second communication device 64G2, a display 66G, and a storage device 68G.
  • the computer 50CG includes a CPU 52G, a ROM 54G, a RAM 56G, and an I/O port 58G, which are interconnected via a bus 60G.
  • An input device 62G, a first communication device 64G1, a second communication device 64G2, a display 66G, and a storage device 68G are connected to the I/O port 58G.
  • the first modem 35A of the first communication control device 36, the first communication device 64S1 of the first monitoring device 50S, and the first communication device 64G1 of the second monitoring device 50G each communicate with the Internet 100. communicate through.
  • the first modem 35A communicates with each of the first communication device 64S1 of the first monitoring device 50S and the first communication device 64G1 of the second monitoring device 50G using a first wireless communication method using a first indirect wireless communication method. communicate.
  • the second modem 35B of the second communication control device 38, the second communication device 64S2 of the first monitoring device 50S, and the second communication device 64G2 of the second monitoring device 50G each communicate with the Internet 100. communicate through.
  • the second modem 35B performs second wireless communication different from the first wireless communication with each of the second communication device 64S2 of the first monitoring device 50S and the second communication device 64G2 of the second monitoring device 50G. That is, the second wireless communication is performed using a second indirect wireless communication method that is different from the first indirect wireless communication method.
  • the communication protocol is different from the second indirect wireless communication method between each of the second communication devices 64G2.
  • one of the first indirect wireless communication method and the second indirect wireless communication method is CDMA (Code Division Multiple Access), and the other method is W- CDMA (Wideband Code Division Multiple Access).
  • the drone 10A is an example of an "aircraft” according to the technology of the present disclosure.
  • the first modem 35A and the second modem 35B are examples of the "first communication unit” and the "second communication unit” of the technology of the present disclosure.
  • the first communication device 64S1 and the first communication device 64G1 are an example of a “first wireless communication unit” of the technology of the present disclosure.
  • the second communication device 64S2 and the second communication device 64G2 are an example of a “second wireless communication unit” of the technology of the present disclosure.
  • the CPU 14 is an example of a "control unit” in the technology of the present disclosure.
  • the CPUs 52S and 52G are an example of a "display control unit" of the technology of the present disclosure.
  • FIG. 2 shows a functional block diagram of the CPU 14 of the FC 12 of the drone 10A.
  • the functions of the CPU 14 include an import function, a creation function, a transmission processing function, a judgment function, and a processing function.
  • the CPU 14 executes the communication program 40P, it functions as the import section 11, the creation section 13, the transmission processing section 15, the judgment section 17, and the processing section 19.
  • FIG. 3 shows a flowchart of the communication program 40P executed by the CPU 14 of the FC 12.
  • the communication process and communication method are executed by the CPU 14 executing the communication program 40P.
  • the communication program 40P starts when a start button (not shown) is turned on.
  • step 102 the capture unit 11 controls the first communication control device 36 and the second communication control device 38 to capture the image from the first camera 32.
  • step 104 the capture unit 11 controls the first communication control device 36 and the second communication control device 38 to capture the image from the second camera 34.
  • step 106 the capture unit 11 captures data from the sensor.
  • the creation unit 13 controls the first communication control device 36 and the second communication control device 38 to create transmission data.
  • the transmission data includes image data of an image of an area in the direction of movement of the drone taken by the first camera 32, an image of the overall state of the drone taken by the second camera 34, and image data of the drone detected by the sensor. and state sensor data.
  • step 110 the transmission processing unit 15 controls the first communication control device 36 and the second communication control device so that the first modem 35A and the second modem 35B transmit the transmission data to each of the monitoring devices 50S and 50G. Controls the control device 38.
  • step 112 the determining unit 17 determines whether the flight is to be completed by determining whether or not a flight end instruction button (not shown) has been turned on. Note that the determining unit 17 determines whether or not the flight has ended by determining whether or not a flight stop instruction signal has been received from the first communication device 64G1 or the second communication device 64G2 of the monitoring device 50G. It's okay. If it is not determined that the flight has ended, in step 114 the determination unit 17 determines whether a predetermined time has elapsed since the transmission data was transmitted in step 110. If it is not determined that the predetermined time has elapsed since the transmission data was sent, the communication process returns to step 112. If it is determined that a predetermined period of time has passed since the transmission data was sent, the communication process returns to step 102.
  • step 112 If it is determined in step 112 that the flight has ended, the processing unit 19 executes a flight end process in step 116, and the communication process ends.
  • the flight termination process includes stopping the power supply to the motors for rotating each propeller.
  • FIG. 4 shows a timing chart (upper side) of transmission of the first modem 35A of the first communication control device 36 of the drone 10A and a timing chart of transmission data of the second modem 35B of the second communication control device 38 of the drone 10A.
  • a timing chart of transmission (bottom) is shown.
  • the timing of transmission of the first modem 35A of the first communication control device 36 and the timing of transmission of transmission data of the second modem 35B of the second communication control device 38 of the drone 10A are They are the same, and the contents of the respective transmission data D1 and D2 are also the same.
  • Transmission data D1 is data transmitted first from the first modem 35A and second modem 35B
  • transmission data D2 is data transmitted second from the first modem 35A and second modem 35B. This is the data.
  • FIG. 5 shows how data from the first modem 35A is stored in the first data storage area 68M1 provided in the storage area 68M of the storage device 68S of the monitoring device 50S.
  • a diagram showing how data from the second modem 35B in 68M2 is stored is shown.
  • the transmission data D1 first transmitted from the first modem 35A is stored in the first storage section 68M11 of the first data storage area 68M1, and the transmission data D1 is first transmitted from the second modem 35B.
  • the transmitted data D1 is stored in the first storage section 68M21 of the second data storage area 68M2.
  • the transmission data D2 transmitted second from the first modem 35A is stored in the second storage section 68M12 of the first data storage area 68M1, and the transmission data D2 transmitted second from the second modem 35B. is stored in the second storage section 68M22 of the second data storage area 68M2.
  • the third transmission data D3 is transmitted from the second modem 35B. Although the transmission data D3 is transmitted, the third transmission data D3 is not transmitted from the first modem 35A. Furthermore, if a data transmission failure occurs continuously in the first modem 35A, the transmission data D4, . . . are transmitted only from the second modem 35B, but the transmission data D4, ,... are not sent. In this case, as shown in FIG. 5, the transmission data D3, D4, . . .
  • the transmission data D3 is stored, the transmission data D4 is stored in the fourth storage section 68M24 of the second data storage area 68M2, and thereafter data is similarly stored in each storage section of the second data storage area 68M2.
  • the monitoring devices 50S and 50G receive transmission data from the first modem 35A and the second modem 35B, they immediately respond to each of the first modem 35A and the second modem 35B of the displays 66S and 66G. Display each data in real time in the display area.
  • the transmission data D1 and the transmission data D2 are displayed in real time in the display areas corresponding to the first modem 35A and the second modem 35B of the displays 66S and 66G, respectively.
  • the transmission data D3, D4, . . . are not received from the first modem 35A, no data is displayed in the display area corresponding to the first modem 35A.
  • the transmission data D3, D4, . . . continue to be received from the second modem 35B, the data continues to be displayed in the display area corresponding to the second modem 35B.
  • the person monitoring the monitoring devices 50S and 50G can recognize in real time that a failure has occurred in data transmission in the first modem 35A.
  • the monitors using the monitoring devices 50S and 50G can continue monitoring the drone 10A.
  • the communication paths between the drone 10A and each of the monitoring devices 50S and 50G can be made redundant.
  • the transmission processing unit 15 causes the first modem 35A and the second modem 35B to transmit transmission data to the cloud server 200 and the live distribution server 300 together with each of the monitoring devices 50S and 50G. Additionally, the first communication control device 36 and the second communication control device 38 may be controlled.
  • the transmitted data is stored in the cloud server 200. Furthermore, the live distribution server 300 performs live distribution of transmission data. Therefore, even a monitor who is not near the installation location of the monitoring devices 50S, 50G and cannot directly check the displays 66S, 66G can watch the drone 10A in real time by accessing the live distribution server 300 from his/her own terminal. can be monitored.
  • a modification of the first embodiment will be described. Note that the configuration of the modified example of the first embodiment described below is the same as that of the first embodiment, so the description thereof will be omitted. The modified example of the first embodiment also has the same effect as the first embodiment, so the different parts will be explained. (First modification of the first embodiment) The first modification of the first embodiment is applied to the monitoring device 50S and the monitoring device 50G, and since both have the same effect, the following will explain the monitoring device 50S as an example.
  • FIG. 6 shows a functional block diagram of the CPU 52S of the monitoring device 50S of the first modification of the first embodiment.
  • the functions of the CPU 52S of the monitoring device 50S include a set function, a judgment function, a storage processing function, and a processing function.
  • the CPU 52S executes the data storage program (see FIG. 7), it functions as a setting section 121, a determining section 123, a storage processing section 125, and a processing section 127.
  • FIG. 7 shows a flowchart of the data storage program of the monitoring device 50S of the first modification of the first embodiment.
  • the data storage program starts when a start button (not shown) is turned on.
  • start button not shown
  • the data storage program is executed, the data storage process and data storage method are executed.
  • the setting unit 121 sets the variable M to 1.
  • the variable M is a variable that identifies the first modem 35A and the second modem 35B, and therefore identifies the first data storage area 68M1 and the second data storage area 68M2 shown in FIG. .
  • step 103 the determining unit 123 determines whether a predetermined time has elapsed since the last time data was received from the first modem 35A. If it is not determined that a predetermined time has elapsed since the last time data was received from the first modem 35A, the data storage process proceeds to step 105, and it is determined that a predetermined time has elapsed since the last time data was received. If so, the data storage process proceeds to step 107.
  • the above transmission data is transmitted from each of the first modem 35A and the second modem 35B.
  • step 105 the storage processing unit 125 determines that if the transmission data has been transmitted from each of the first modem 35A and the second modem 35B before the determination in step 103 becomes affirmative, the storage processing unit 125 determines that the first communication Device 64S1 and second communication device 64S2 receive the transmitted data and in this case retain the data in retention storage 68S.
  • the data storage process returns to step 103.
  • step 107 the determining unit 123 determines whether data has been received. If it is determined that data has not been received, the data storage process proceeds to step 111, and if it is determined that data has been received, the data storage process proceeds to step 109.
  • step 107 If it is determined in step 107 that data has not been received, this means that no data has been received from the first modem 35A until a predetermined time has elapsed since the last time data was received. If it is determined in step 107 that data has been received, this means that the data has been received from the first modem 35A until a predetermined period of time has elapsed since the last time data was received.
  • the data sent from the first modem 35A is transmitted from the last time it was received.
  • the transmitted data will be received until a predetermined period of time has elapsed.
  • data will not be received until a predetermined time has elapsed since the last time transmission data was received from the first modem 35A.
  • the first modem It can be determined that there is no problem in data transmission in the modem 35A.
  • the first modem It can be determined that a problem has occurred in data transmission at 35A.
  • step 109 the storage processing unit 125 stores the data in the storage area determined by M.
  • the first modem 35A is identified by M
  • the first data storage area 68M1 is identified, and the step The data held in step 105 is stored.
  • step 117 the determining unit 123 determines whether the data storage process is finished by determining whether an end button (not shown) has been turned on. If the data storage process has not ended, the data storage process returns to step 103. If the data storage process is finished, this data storage process ends.
  • step 111 If step 111 is negative, there is a problem in data transmission not only in the first modem 35A but also in the second modem 35B, so in step 115, the processing unit 127 executes error processing. Then, the data storage process ends. Note that the error processing is to display a warning on the display 66S that a problem has occurred in data transmission in the first modem 35A and the second modem 35B.
  • the processing unit 127 displays the information on the display 66S from the time when the determination in step 111 becomes affirmative until before step 109, for example, before step 113. , a warning may be displayed that a problem has occurred in data transmission in the first modem 35A.
  • the timing of transmitting data of the first modem 35A of the first communication control device 36 and the timing of transmitting data of the second modem 35B of the second communication control device 38 of the drone 10A are different from each other. are the same, and the contents of the transmission data transmitted by each are also the same.
  • transmission data is initially stored in the data storage area 68M1 for the first modem 35A, and when it is determined that a failure has occurred in data transmission in the first modem 35A (see FIG. Step 107:N), storing the transmission data in the data storage area 68M2 for the second modem 35B.
  • FIG. 8 shows how transmission data from the first modem 35A is stored in the first data storage area 68M1 of the storage device 68S of the monitoring device 50S of the first modification of the first embodiment, A diagram showing how transmission data from the second modem 35B is stored in the second data storage area 68M2 is shown.
  • transmission data D1 and D2 are transmitted from each of the first modem 35A and the second modem 35B, but at the timing of transmitting transmission data D3, the first modem 35A transmits the data.
  • the transmitted data D3 and subsequent data are stored in the third storage section 68M23 of the second data storage area 68M2.
  • FIG. 9 shows a flowchart of a communication program executed by the CPU 14 of the FC 12 of the drone 10A according to the second modification of the first embodiment.
  • step 122 the processing unit 19 resets and starts (resets and restarts) the software timer.
  • step 124 the determining unit 17 determines whether the first period T1 (see FIG. 10) has elapsed based on the value of the software timer. If it is not determined that the first period T1 has elapsed, the determination is repeated until it is determined that the first period T1 has elapsed.
  • the capture unit 11 captures sensor data from the sensor 42 in step 126.
  • the creation unit 13 creates first transmission data Sd (see FIG. 10) including sensor data.
  • the transmission processing unit 15 causes the first communication control device 36 and the second modem 35B to transmit the first transmission data Sd to each of the monitoring devices 50S and 50G. Controls the second communication control device 38.
  • the determining unit 17 determines whether the second period T2 (see FIG. 10) has elapsed based on the value of the software timer. If it is not determined that the second period T2 has elapsed, the communication process returns to step 124.
  • the capture unit 11 controls the first communication control device 36 and the second communication control device to capture images from the first camera 32. Control device 38.
  • the capture unit 11 controls the first communication control device 36 and the second communication control device 38 to capture the image from the second camera 34.
  • the creation unit 13 creates second transmission data Sg (see FIG. 10) including image data of the image captured from the first camera 32 and the image captured from the second camera 34.
  • the transmission processing unit 15 causes the first communication control device 36 and the second modem 35B to transmit the second transmission data Sg to each of the monitoring devices 50S and 50G. Controls the second communication control device 38.
  • the determining unit 17 determines whether the flight has ended. If it is not determined that the flight has ended, the communication process returns to step 122. If it is determined that the flight has ended, the flight end process of step 116 is executed, and the communication process ends.
  • FIG. 10 shows a timing chart of data transmission by the first modem 35A and the second modem 35B in the second modification of the first embodiment.
  • first transmission data Sd including sensor data
  • second transmission data Sd including image data of each image captured from the first camera 32 and the second camera
  • the transmission data Sg is separately transmitted to each monitoring device 50S, 50G.
  • the first modem 35A and the second modem 35B each transmit the first transmission data Sd at a first time T1 interval and the second transmission data Sg at a second time T2 (>T1) interval. be done.
  • the first transmission data Sd and the second transmission data Sg from the first modem 35A and the second modem 35B are stored in the first data storage area 68M1 and the second data storage area. 68M2.
  • the first transmission data Sd and the second transmission data Sg will be transmitted from the second modem 35B, so these data cannot be stored. can be displayed on the displays 66S and 66G, and monitoring of the drone 10A can be continued.
  • FIG. 11 shows a flowchart of a communication program executed by the CPU 14 of the FC 12 of the drone 10A according to the third modification of the first embodiment.
  • FIG. 13A shows a timing chart of data transmission by the first modem 35A and the second modem 35B in the third modification of the first embodiment.
  • step 150 the processing unit 19 sets a variable F used in this communication program to 0.
  • the monitoring devices 50S and 50G determine whether or not a transmission failure has occurred in the first modem 35A.
  • the monitoring devices 50S and 50G determine that a transmission failure has occurred in the first modem 35A, they notify that a transmission failure has occurred in the first modem 35A.
  • step 102 the capture unit 11 controls the first communication control device 36 and the second communication control device 38 to capture the image from the first camera 32.
  • step 104 the capture unit 11 controls the first communication control device 36 and the second communication control device 38 to capture the image from the second camera 34.
  • the import unit 11 imports sensor data from the sensor 42.
  • the creation unit 13 transmits the first communication so as to create transmission data including image data of each image from the first camera 32 and the second camera 34, and sensor data from the sensor 42. Controls the control device 36 and the second communication control device 38.
  • the determination unit 17 determines whether the flight has ended. If it is not determined that the flight has ended, in step 114, the determining unit 17 determines whether a predetermined period of time has elapsed since it was not determined that the flight had ended. If it is not determined that a predetermined time has elapsed since it was not determined that the flight has ended, the determination is repeated until it is determined that the predetermined time has elapsed since it was not determined that the flight has ended.
  • the communication process returns to step 102.
  • the first modem 35A transmits transmission data to each of the monitoring devices 50S and 50G at predetermined time intervals, as shown in FIG. 13A.
  • step 156 the transmission processing unit 15 sets the second modem 35B to transmit the transmission data to each monitoring device 50S, 50G. 2 communication control device 38. After the process in step 158, the communication process proceeds to step 112.
  • the second modem 35B transmits the transmission data as shown in FIG. 13A. It is transmitted to each of the monitoring devices 50S and 50G at predetermined time intervals.
  • step 112 determines that the flight has ended.
  • the processing unit 19 executes a flight end process in step 116.
  • FIG. 12 shows a flowchart of the data storage program of the visual device 50S of the third modification of the first embodiment.
  • the monitoring device 50G also executes this data storage program, but since the processing is the same, only the data storage program of the viewing device 50S will be described below.
  • the data storage program starts when a start button (not shown) is turned on.
  • the determining unit 123 determines whether transmission data has been transmitted from the first modem 35A.
  • the transmission data is transmitted from the first modem 35A at predetermined intervals, so if there is no failure in communication with the first modem 35A, the transmission data is transmitted from the first modem 35A. is transmitted, and the determination at step 176 is affirmative. If it is determined that the transmission data has been transmitted from the first modem 35A, the storage processing unit 125 stores the transmission data in step 178.
  • step 190 the determining unit 123 determines whether the data storage process is finished by determining whether an end button (not shown) has been turned on. If it is determined that the data storage process has ended, the data storage process ends. If it is not determined that the process has ended, the data storage process returns to step 172.
  • the processing unit 127 notifies the second modem 35B that a failure has occurred in communication with the first modem 35A.
  • the second communication control device 38 controls the communication with the first modem 35A.
  • FC12 is notified that a failure has occurred. As a result, the FC 12 sets the variable F to 1 as described above.
  • the setting unit 121 sets variable F to 1.
  • step 188 the processing unit 127 detects the above-mentioned error. The process is executed, and this data communication process ends. Note that if the determination in step 176 is negative, data is transmitted in the first modem 35A before step 180, after step 180 and before step 182, or after step 182 and before step 190. A warning may be displayed to indicate that there is a problem with transmission.
  • the first modem 35A transmits the transmission data, and the transmission data is transmitted to the memory device 68S, 68G, and if a failure occurs in communication with the first modem 35A, the transmission data is transmitted from the second modem 35B, and the transmission data is stored in the storage devices 68S and 68G. .
  • the third modification of the first embodiment As described above, in the third modification of the first embodiment (see FIG. 13A), if there is no failure in communication with the first modem 35A, transmission is made only from the first modem 35A.
  • FIG. 13B shows a flowchart of a control data transmission program executed by the CPU 52S of the monitoring device 50S of the fourth modification of the first embodiment.
  • the control data transmission program enters a state when control data is input through the input device 62S.
  • the operator of the monitoring device 50S monitors the flight of the drone 10A on the display 66S, the operator may wish to change the current operating state of the drone 10A. Therefore, in the fourth modification, the operator transmits control data from the monitoring device 50S to the drone 10 to be able to change the current operating state of the drone 10A.
  • control data is, for example, the following data.
  • control data that instructs at least one of turning the first camera 32 or the second camera 34 on or off, changing the shooting direction, and changing the resolution.
  • control data that instructs at least one sensor to be turned on or off.
  • control data that instructs the drone 10A to land (because an abnormal situation (emergency situation) has occurred in the drone 10A). Specifically, when a parachute is provided, the parachute is opened or hovered and gradually lowered.
  • step 157 of FIG. 13B the processing unit 127 detects a communication device that is currently not in use. Specifically, the second communication device 64S2 that communicates with the second modem 35B is detected.
  • step 159 the processing unit 127 transmits the control data using the detected communication device.
  • the control data is received by the second modem 35B and transmitted to the FC 12 by the communication control device 38.
  • the CPU 14 of the FC 12 changes the current operating state of the drone 10A according to the control data.
  • FIG. 13C shows a flowchart of a communication program executed by the CPU 14 of the FC 12 of the drone 10A according to the fifth modification of the first embodiment.
  • the communication program of the fifth modification of the first embodiment is substantially the same as the communication program of the third modification of the first embodiment shown in FIG. 11, so the different parts will be explained.
  • the transmission data is transmitted by a predetermined first modem 35A, and if a transmission failure occurs in the first modem 35A, the transmission data is transmitted by the second modem 35B. ing.
  • the transmission data is transmitted by a modem selected based on the selection condition.
  • step 154A the processing unit 19 selects a modem to transmit the transmission data based on the following selection conditions.
  • the selection conditions are: a modem with a fast communication speed, a modem with a low communication fee, a modem with a communication fee that does not change depending on the amount of data, and a good communication condition (specifically, a modem with a monitoring device 50S) , 50G first communication device 64S1, 64G1, and second communication device 64S2, 64G2) modem with high radio wave strength, and modem with low frequency of communication failure.
  • step 154B the transmission processing unit 15 controls the communication control device 36 or communication control device 38 corresponding to the selected modem so that the selected modem transmits the transmission data to each of the monitoring devices 50S and 50G.
  • step 154B After the process in step 154B, the communication process proceeds to step 112.
  • FIG. 13D shows a flowchart of a communication program executed by the CPU 14 of the FC 12 of the drone 10A according to the sixth modification of the first embodiment.
  • steps 102, 104, and 106 of the communication program shown in FIG. 11 of the third modification of the first embodiment are executed.
  • step 171 the processing unit 19 estimates the data amount of each data based on the shooting direction and resolution of the first camera 32 and the second camera, and the content of each sensor data.
  • step 173 the creation unit 13 generates the first transmission data transmitted by the first modem 35A and the second transmission data transmitted by the second modem 35B, based on the data amount of each data and the above selection conditions. create.
  • step 173 The creation mode of step 173 will be specifically explained.
  • first is image data of the entire drone 10 from the second camera 34
  • second is sensor data
  • third is image data of the entire drone 10 from the first camera 32 in the traveling direction. Assume that it is image data.
  • the selection condition is to shorten the overall transmission time for one transmission. It is also assumed that the communication speed of the first modem 35A is faster than the communication speed of the second modem 35B.
  • the processing unit 19 creates the first transmission data to be transmitted by the first modem 35A so as to include the image data of the entire drone 10 of the second camera 34, and
  • the second modem 35B creates second transmission data so as to include the image data of the area ahead of the drone 10 in the traveling direction.
  • the order of data amount is the same as above, but the selection condition is to reduce the overall communication fee.
  • the communication fee for the second modem 35B varies depending on the amount of data, but for transmission using the first modem 35A, the fee remains constant until the amount of data to be transmitted reaches a predetermined value. However, if the amount of transmitted data exceeds a predetermined value, it is assumed that the call charge is higher than that of the second modem 3B.
  • the processing unit 19 creates the first transmission data to be transmitted by the first modem 35A so as to include the sensor data and the image data of the first camera 32 in the forward direction of movement of the drone 10, and
  • the second modem 35B creates second transmission data so as to include image data of the entire 34 drones 10.
  • the transmission processing unit 15 controls the communication control device 36 so that the first modem 35A transmits the first transmission data to each of the monitoring devices 50S and 50G.
  • the transmission processing unit 15 controls the communication control device 38 so that the second mode 35B transmits the second transmission data to each of the monitoring devices 50S and 50G.
  • the FC 12 of the drone 10A executes the communication program shown in FIG. 11.
  • the monitoring devices 50S and 50G do not execute the data storage program of FIG. 12.
  • the monitoring devices 50S and 50G store the transmission data transmitted in step 154 or step 156 in FIG. 11 in the storage devices 68S and 68G.
  • FIG. 14 shows a functional block diagram of the CPU 14B of the second communication control device 38 of the seventh modification of the first embodiment.
  • FIG. 15 shows that a failure has occurred in communication by the first modem 35A of the first communication control device 36, which is executed by the second communication control device 38 of the seventh modification of the first embodiment.
  • a flowchart of a failure occurrence determination program that determines whether or not a problem exists is shown.
  • the functions of the CPU 14B include an instruction function, a judgment function, and an output processing function. As shown in FIG. 14, the CPU 14B functions as an instruction unit 201, a determination unit 203, and an output processing unit 205 when the failure occurrence determination program is executed.
  • the instruction unit 201 instructs the CPU 14A of the first communication control device 36 to execute a predetermined calculation and to transmit the result of the calculation to the second communication control device 38.
  • the predetermined calculation is for determining whether or not the first communication control device 36 is out of order, and may be a calculation that can be completed and returned within a predetermined period (step 216), which will be described later. For example, addition or subtraction may be used.
  • step 214 the determining unit 203 determines whether a calculation result (specifically, a correct answer) has been received. If it is not determined that a calculation result (specifically, a correct answer) has been received, in step 216 the determining unit 203 determines whether a predetermined time has elapsed since the processing in step 212 was executed. If it is not determined that a predetermined period of time has passed since the execution of the process in step 212, the failure occurrence determination process returns to step 214.
  • a calculation result specifically, a correct answer
  • the calculation result (specifically, the correct answer) is transmitted from the first communication control device 36 before a predetermined period of time elapses from the execution of the process in step 212. be done. Therefore, if the calculation result (specifically, the correct answer) is transmitted from the first communication control device 36 before a predetermined period of time has elapsed from the execution of the process in step 212, the first communication control device 36 It can be determined that there is no failure, the determination at step 214 is affirmative, and the failure occurrence determination process ends.
  • the first communication control device 36 It can be determined that the first communication control device 36 is out of order, and the judgment in step 216 becomes affirmative, and in step 218, the output processing unit 205 notifies the FC 12 that the first communication control device 36 is out of order.
  • FIG. 16 shows that a failure has occurred in the communication from the second communication control device 38 of the seventh modification of the first embodiment to the first modem 35A of the first communication control device 36.
  • a flowchart of a program executed by the CPU 14 of the FC 12 that has been notified is shown. As shown in FIG. 16, the CPU 14 sets a variable F to 1 in step 220.
  • the seventh modification is also applied to the first communication control device 36. Therefore, the first communication control device 36 and the second communication control device 38 can mutually check whether the other is out of order.
  • FIG. 17 shows a timing chart of data transmission by the first modem 35A and the second modem 35B in the eighth modification of the first embodiment.
  • the first modem 35A of the first communication control device 36 and the second modem 35B of the second communication control device 38 transmit data to the monitoring device alternately at predetermined time intervals. Send to 50S and 50G.
  • the second modem 35B transmits the transmission data to the storage devices 68S and 68G at predetermined intervals.
  • the transmitted data includes image data of an image of an area in the direction of movement of the drone taken by the first camera 32 and an image of the entire state of the drone taken by the second camera 34, and image data of an image of the area in the direction of movement of the drone taken by the first camera 32, and image data of an image of the overall state of the drone taken by the second camera 34. and sensor data on the state of the drone.
  • FIG. 18 shows a timing chart of data transmission by the first modem 35A and the second modem 35B in the ninth modification of the first embodiment.
  • the first modem 35A of the first communication control device 36 transmits a plurality of (for example, three) pieces of first transmission data including sensor data on the state of the drone at regular time intervals. This information is transmitted to the monitoring devices 50S and 50G at predetermined time intervals. More specifically, after transmitting a plurality of pieces of first transmission data, the first modem 35A waits for a certain period of time and then transmits a plurality of pieces of transmission data.
  • the second modem 35B of the second communication control device 38 captures the image of the area in the direction of movement of the drone taken by the first camera 32 and the image of the overall state of the drone taken by the second camera 34.
  • Second transmission data including image data is transmitted to the monitoring devices 50S and 50G at predetermined time intervals. The timing at which the second modem 35B transmits the second transmission data is while the first modem 35A is on standby.
  • the second modem 35B transmits the first transmission data and the second transmission data to the monitoring devices 50S and 50G.
  • the transmission timing of the first transmission data is the same as the timing at which the first modem 35A transmits the first transmission data.
  • FIG. 19 shows a block diagram of a system including a drone 10B, monitoring devices 50S and 50G, a cloud server 200, and a live distribution server according to the second embodiment.
  • the drone 10B of the second embodiment has a first modem 35A of the first communication control device 36 and a second modem 35B of the second communication control device 38 in the drone 10A of the first embodiment.
  • the following communication devices are used. Equipped with.
  • the first communication control device 36 includes a first communication device 37A1 and a second communication device 37A2
  • the second communication control device 38 includes a first communication device 37B1 and a second communication device 37A2.
  • a communication device 37B2 is provided.
  • the first monitoring device 50S includes a first communication device 64ST1 and a second communication device 64ST2
  • the second monitoring device 50G includes a first communication device 64GT1 and a second communication device 64GT2.
  • the first communication device 37A1 of the first communication control device 36, the first communication device 64ST1 of the first monitoring device 50S, and the first communication device 64GT1 of the second monitoring device 50G are First wireless communication is performed using a wireless communication method.
  • the first communication device 37B1 of the second communication control device 38, the first communication device 64ST1 of the first monitoring device 50S, and the first communication device 64GT1 of the second monitoring device 50G are First wireless communication is performed using a wireless communication method.
  • the second communication device 37A2 of the first communication control device 36, the second communication device 64ST2 of the first monitoring device 50S, and the second communication device 64GT2 of the second monitoring device 50G are Second wireless communication is performed using a second direct wireless communication method different from the wireless communication method.
  • the second communication device 37B2 of the second communication control device 38, the second communication device 64ST2 of the first monitoring device 50S, and the second communication device 64GT2 of the second monitoring device 50G are A second wireless communication is performed using a wireless communication method.
  • the first direct wireless communication method and the second direct wireless communication method have different communication frequencies.
  • FIG. 20 shows a block diagram of a system including a drone 10C, monitoring devices 50S and 50G, a cloud server 200, and a live distribution server according to the third embodiment.
  • the drone 10C of the third embodiment includes the second modem 35B of the second communication control device 38 in the drone 10A of the first embodiment, the second communication device 64S2 of the first monitoring device 50S,
  • the second monitoring device 50G includes the following communication device instead of the second communication device 64G2.
  • the second communication control device 38 includes the second communication device 37B1 of the second embodiment.
  • the first monitoring device 50S includes the first communication device 64ST1 of the second embodiment
  • the second monitoring device 50G includes the first communication device 64GT1 of the second embodiment.
  • FIG. 21 shows a block diagram of a system including a drone 10D, monitoring devices 50S and 50G, a cloud server 200, and a live distribution server according to the fourth embodiment.
  • the second communication control device 38 of the first embodiment is omitted.
  • the first communication control device 36 of the drone 10D includes a modem 35B.
  • the communication method between the modem 35A and the first communication device 64S1 of the first monitoring device 50S and the first communication device 64G1 of the second monitoring device 50G is the same as the communication method of the first embodiment.
  • the communication method between the modem 35B and the second communication device 64S2 of the first monitoring device 50S and the second communication device 64G2 of the second monitoring device 50G is the same as the communication method of the first embodiment.
  • the first communication control device 36 of the drone 10D may include the first communication device 35A1 and the second communication device 37B1 (see FIG. 19) of the second embodiment instead of the modem 35A and the modem 35B. good.
  • FIG. 22 shows a block diagram of a system including a drone 10E, monitoring devices 50S and 50G, a cloud server 200, and a live distribution server according to the fifth embodiment.
  • the first communication control device 36 and the second communication control device 38 of the first embodiment are omitted.
  • Modem 35A and modem 35B are connected to FC12.
  • the drone 10E may include the first communicator 35A and the second communicator 37B of the second embodiment instead of the modem 35A and the modem 35B.
  • the monitoring devices 50S and 50G are similar to the monitoring devices 50S and 50G of the second embodiment.
  • the drone 10E may include the second communication device 37B of the second embodiment instead of the modem 35B.
  • the monitoring devices 50S and 50G are similar to the monitoring devices 50S and 50 of the third embodiment.
  • FIG. 23 shows a block diagram of a system including a drone 10F, monitoring devices 50S and 50G, a cloud server 200, and a live distribution server according to the sixth embodiment.
  • a first communication control device 36 and a second communication control device 38 are connected to the FC 12.
  • the sixth embodiment includes a first FC 12A and a second FC 12B having the same configuration as the FC 12 of the first embodiment.
  • a first communication control device 36 is connected to the first FC 12A.
  • a second communication control device 38 is connected to the second FC 12B.
  • the drone 10F may include the first communicator 35A and the second communicator 37B of the second embodiment instead of the modem 35A and the modem 35B.
  • the monitoring devices 50S and 50G are similar to the monitoring devices 50S and 50 of the second embodiment.
  • the drone 10F may be provided with the second communication device 37B of the second embodiment instead of the modem 35B.
  • the seventh embodiment includes the first FC 12A and second FC 12B of the sixth embodiment, and the first communication control device 36 of the fourth embodiment.
  • the modem 35A and the modem 35B may be replaced with the first communication device 35A and the second communication device 37B of the second embodiment.
  • the monitoring devices 50S and 50G are similar to the monitoring devices 50S and 50G of the second embodiment.
  • the second communication device 37B of the second embodiment may be provided in place of the modem 35B.
  • the monitoring devices 50S and 50G are similar to the monitoring devices 50S and 50 of the third embodiment.
  • the sensor 42 is connected to the FC 12, but the technology of the present disclosure is not limited thereto. Sensor 42 may be connected to a communication control device.
  • first camera 32 and the second camera 34 are connected to the communication control device, they may also be connected to the FC 12.
  • the drone is equipped with two modems, and each of the monitoring devices 50S and 50G is equipped with two communication devices (FIGS. 1, 21 to 23, etc.), but the technology of the present disclosure applies to this. Not limited.
  • the drone may include three or more modems, and each of the monitoring devices 50S and 50G may include three or more communication devices. In this case, each of the three or more combinations of modems and communication devices communicates using a different communication method.
  • the drone includes two communication devices, and each of the monitoring devices 50S and 50G includes two communication devices (see FIG. 19, etc.), but the technology of the present disclosure is not limited thereto.
  • the drone may include three or more communication devices, and each of the monitoring devices 50S and 50G may include three or more communication devices. In this case, each of the three or more combinations of communication devices and communication devices communicates using a different communication method.
  • the combination of modems and communication devices in the drone is also 1:1 (see Figure 20, etc.), but there are also combinations of 2 or more to 1, 1 to 2 or more, or multiple to multiple. But that's fine.
  • the technology of the present disclosure is not limited thereto.
  • a drone other unmanned aircraft, such as a radio-controlled airplane and a radio-controlled unmanned helicopter, or even a manned aircraft, such as a radio-controlled helicopter that can carry a person, may be used. good.
  • each component may exist as long as there is no contradiction.
  • each of the examples described above illustrates a case where each of the above processes is realized by a software configuration using a computer
  • the technology of the present disclosure is not limited to this.
  • each of the above processes may be performed only by a hardware configuration such as an FPGA (Field-Programmable Gate Array) or an ASIC (Application Specific Integrated Circuit).
  • FPGA Field-Programmable Gate Array
  • ASIC Application Specific Integrated Circuit
  • Non-transitory computer-readable media includes various types of tangible storage media.
  • Examples of non-transitory computer-readable media include magnetic recording media (e.g., flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (e.g., magneto-optical disks), CD-ROMs (Read Only Memory), CD-Rs, and CDs. - R/W, semiconductor memory (for example, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (Random Access Memory)).
  • the program may also be provided to the computer on various types of temporary computer-readable media. Examples of transitory computer-readable media include electrical signals, optical signals, and electromagnetic waves.
  • the temporary computer-readable medium can provide the program to the computer via wired communication channels, such as electrical wires and fiber optics, or wireless communication channels.

Abstract

航空機は、第1の無線通信をする第1の通信部と、前記第1の無線通信と異なる第2の無線通信をする第2の通信部と、データが監視装置に送信されるように前記第1の通信部及び前記第2の通信部を制御する制御部と、を備える。前記第1の通信部は、第1の間接無線通信方式で前記第1の無線通信をし、前記第2の通信部は、前記第1の間接無線通信方式と異なる第2の間接無線通信方式で前記第2の無線通信をする。前記第1の通信部及び前記第2の通信部は、前記送信先の装置が接続されるインターネットを介して間接無線通信する。

Description

航空機及び監視装置
 本開示の技術は、航空機及び監視装置に関する。
 特許第6785019号公報は、移動体と操縦装置とは、その通信経路の少なくとも一部を衛星通信回線および他の通信回線で冗長化することを開示している。具体的には、複数の通信方法を併用することでマルチコプターと操縦装置との間の通信経路を冗長化する。また、マルチコプターに接続する手段を衛星通信回線と他の通信回線との間で切り替え可能とすることにより、マルチコプターとの通信経路を冗長化する。
 しかし、上記技術では、マルチコプターを地上に設置された監視装置が監視する場合については考慮されていない。
 本開示の技術は、航空機と監視装置との間を少なくとも2つの通信方式で通信することができる航空機及び監視装置を提供することを目的とする。
 上記目的を達成するため本開示の技術の第1の態様の航空機は、第1の無線通信をする第1の通信部と、前記第1の無線通信と異なる第2の無線通信をする第2の通信部と、データが監視装置に送信されるように前記第1の通信部及び前記第2の通信部を制御する制御部と、を備える。
 第2の態様の監視装置は、表示部と、第1の態様の航空機の前記第1の通信部及び前記第2の通信部のそれぞれと前記第1の無線通信及び第2の無線親のそれぞれをする第1の無線通信部及び第2の無線通信部と、前記第1の無線通信部及び前記無線通信部により受信されたデータが表示されるように前記表示部を制御する制御部と、を備える。
 第3の態様の航空機は、各々異なる無線通信をする複数の通信部と、データが監視装置に送信されるように前記複数の通信部を制御する制御部と、を備える。
 第4の態様の監視装置は、表示部と、第3の態様の航空機と各々異なる無線通信をする複数の無線通信部と、前記無線通信部により受信されたデータが表示されるように前記表示部を制御する制御部と、を備える。
 本開示の技術の第1の態様及び第2の態様は、航空機と監視装置との間を少なくとも2つの通信方式で通信することができる
 本開示の技術の第3の態様及び第4の態様は、航空機と監視装置との間を複数の通信方式で通信することができる。
第1の実施の形態のドローン10A、監視装置50S、50G、クラウドサーバ200、及びライブ配信サーバを含むシステムのブロック図である。 ドローン10AのFC12のCPU14の機能ブロック図である。 FC12のCPU14が実行する通信プログラム40Pのフローチャートである。 ドローン10Aの第1の通信制御装置36の第1のモデム35Aとドローン10Aの第2の通信制御装置38の第2のモデム35Bとのそれぞれのデータの送信のタイミングチャートである。 監視装置50Sの記憶装置68Sの記憶領域68Mに設けられた、第1のデータ記憶領域68M1における第1のモデム35Aからのデータを記憶する様子を示し、第2のデータ記憶領域68M2における第2のモデム35Bからのデータを記憶する様子を示す図である。 第1の実施の形態の第1の変形例の監視装置50SのCPU52Sの機能ブロック図である。 第1の実施の形態の第1の変形例の監視装置50Sのデータ記憶プログラムのフローチャートである。 第1の実施の形態の第1の変形例の監視装置50Sの記憶装置68Sの第1のデータ記憶領域68M1における第1のモデム35Aからのデータを記憶する様子を示し、第2のデータ記憶領域68M2における第2のモデム35Bからのデータを記憶する様子を示す図である。 第1の実施の形態の第2の変形例のドローン10AのFC12のCPU14が実行する通信プログラムのフローチャートでる。 第1の実施の形態の第2の変形例の第1のモデム35Aと第2のモデム35Bとのそれぞれのデータの送信のタイミングチャートである。 第1の実施の形態の第3の変形例のドローン10AのFC12のCPU14が実行する通信プログラムのフローチャートでる。 第1の実施の形態の第3の変形例の監視装置50Sのデータ記憶プログラムのフローチャートである。 第1の実施の形態の第3の変形例の第1のモデム35Aと第2のモデム35Bとのそれぞれのデータの送信のタイミングチャートである。 第1の実施の形態の第4の変形例の監視装置50SのCPU52Sが実行する制御データ送信プログラムのフローチャートである。 第1の実施の形態の第5の変形例のドローン10AのFC12のCPU14が実行する通信プログラムのフローチャートでる。 第1の実施の形態の第6の変形例のドローン10AのFC12のCPU14が実行する通信プログラムのフローチャートでる。 第1の実施の形態の第7の変形例の第2の通信制御装置38のCPU14Bの機能ブロック図である。 第1の実施の形態の第7の変形例の第2の通信制御装置38が実行する、第1の通信制御装置36の第1のモデム35Aによる通信に障害が発生しているか否かを判断する障害発生判断プログラムのフローチャートである。 第1の実施の形態の第7の変形例の第2の通信制御装置38から、第1の通信制御装置36の第1のモデム35Aによる通信に障害が発生していることが通知されたFC12のCPU14が実行するプログラムのフローチャートである。 第1の実施の形態の第8の変形例の第1のモデム35Aと第2のモデム35Bとのそれぞれのデータの送信のタイミングチャートである。 第1の実施の形態の第9の変形例の第1のモデム35Aと第2のモデム35Bとのそれぞれのデータの送信のタイミングチャートである。 第2の実施の形態のドローン10B、監視装置50S、50G、クラウドサーバ200、及びライブ配信サーバを含むシステムのブロック図である。 第3の実施の形態のドローン10C、監視装置50S、50G、クラウドサーバ200、及びライブ配信サーバを含むシステムのブロック図である。 第4の実施の形態のドローン10D、監視装置50S、50G、クラウドサーバ200、及びライブ配信サーバを含むシステムのブロック図である。 第5の実施の形態のドローン10E、監視装置50S、50G、クラウドサーバ200、及びライブ配信サーバを含むシステムのブロック図である。 第6の実施の形態のドローン10F、監視装置50S、50G、クラウドサーバ200、及びライブ配信サーバを含むシステムのブロック図である。
 以下、図面を参照して、本開示の技術の実施の形態を説明する。
[第1の実施の形態]
 図1には、第1の実施の形態のドローン10A、監視装置50S、50G、クラウドサーバ装置(以下、「クラウドサーバ」という)200、及びライブ配信サーバ装置(以下、「ライブ配信サーバ」という)300を含むシステムのブロック図が示されている。図1に示すように、本実施の形態のシステムは、ドローン10A、監視装置50S、50G、クラウドサーバ200、及びライブ配信サーバ300がインターネット100を介して相互に接続されている。
 ドローン10Aは、フライトコントローラ(Flight Controller(FC))12、第1の通信制御装置36、及び第2の通信制御装置38を備えている。ドローン10Aは、センサ42、第1のカメラ32、及び第2のカメラ34を備えている。ドローン10Aは、バッテリ25、及び4個の電源モジュール(図1には、「電源M」と記載されている。)12M1、12M2、36M、38Mを備えている。
 FC12は、コンピュータ及び当該コンピュータに接続されている2次記憶装置40を備えている。当該コンピュータは、CPU(Central Processing Unit)14、ROM(Read Only Memory)16、RAM(Random Access Memory)18、及び入出力(I/O)ポート218を備えている。CPU14、ROM16、RAM18、及びI/Oポート20は、バス22を介して、相互に接続されている。
 I/Oポート20には、センサ42、2次記憶装置40、第1の通信制御装置36、及び第2の通信制御装置38が接続されている。
 2次記憶装置40には、後述する通信プログラム40P(図3参照)が記憶されている。2次記憶装置40から通信プログラム40PがRAM18に読み出され、CPU14により実行され、後述する通信処理が実行される。なお、通信プログラム40Pは、ROM16に記憶されてもよい。2次記憶装置40は、一時的でない有形のコンピュータが可読可能な記録媒体(non-transitory tangible Computer Readable media)であり、例えば、HDD(Hard disk drive)やSSD(Solid state drive)等の不揮発性の記憶装置である。
 2次記憶装置40は、本開示の技術の「記憶部」及び「記録媒体」の一例である。
 第1の通信制御装置36は、コンピュータ及び当該コンピュータに接続されている第1のモデム35Aを備えている。第1の通信制御装置36のコンピュータは、CPU14A、ROM16A、RAM18A、及びI/Oポート20Aを備え、これらはバス22Aを介して相互に接続されている。第1の通信制御装置36のI/Oポート20Aには、FC12のI/Oポート20、第1のカメラ32及び第2のカメラ34が接続されている。
 第2の通信制御装置38は、コンピュータ及び当該コンピュータに接続されている第2のモデム35Bを備えている。第2の通信制御装置38のコンピュータは、CPU14B、ROM16B、RAM18B、及びI/Oポート20Bを備え、これらはバス22Bを介して相互に接続されている。第2の通信制御装置38のI/Oポート20Bには、FC12のI/Oポート20、第1のカメラ32及び第2のカメラ34が接続されている。
 センサ42は、GPS(Global Positioning System)センサ、ジャイロセンサ、高度センサ、加速度センサ、気圧センサ等である。なお、図1では、これらをセンサ42として示されている。
 第1のカメラ32は、先端に設けられ、ドローンの進行方向の領域を撮影する
 第2のカメラ34は、ドローンの後端の上部に設けられ、ドローンの全体の様子を撮影する
 電源モジュール12M1、12M2、36M、38Mは、変圧器である。電源モジュール12M1、12M2は、バッテリ25からの電圧を、FC12が要求する電圧に変える。電源モジュール36Mは、バッテリ25からの電圧を、第1の通信制御装置36が要求する電圧に変える。電源モジュール38Mは、バッテリ25からの電圧を、第2の通信制御装置38が要求する電圧に変える。なお、図示していないが、バッテリからの電圧は、電源モジュールを介して、第1のカメラ32及び第2のカメラ34にも供給されている。
 第1の監視装置50Sは、ドローン10Aが離陸する予定の第1の地点を含む第1の領域に配置されている。第2の監視装置50Gは、ドローン10Aが着陸する予定の第2の地点を含む第2の領域に配置されている。
 第1の監視装置50Sは、コンピュータ50CS、入力装置62S、第1の通信装置64S1、第2の通信装置64S2、ディスプレイ66S、及び記憶装置68Sを備えている。コンピュータ50CSは、CPU52S、ROM54S、RAM56S、及びI/Oポート58Sを備え、これらはバス60Sを介して相互に接続されている。I/Oポート58Sには、入力装置62S、第1の通信装置64S1、第2の通信装置64S2、ディスプレイ66S、及び記憶装置68Sが接続されている。
 第2の監視装置50Gは、コンピュータ50CG、入力装置62G、第1の通信装置64G1、第2の通信装置64G2、ディスプレイ66G、及び記憶装置68Gを備えている。コンピュータ50CGは、CPU52G、ROM54G、RAM56G、及びI/Oポート58Gを備え、これらはバス60Gを介して相互に接続されている。I/Oポート58Gには、入力装置62G、第1の通信装置64G1、第2の通信装置64G2、ディスプレイ66G、及び記憶装置68Gが接続されている。
 第1の通信制御装置36の第1のモデム35Aと、第1の監視装置50Sの第1の通信装置64S1及び第2の監視装置50Gの第1の通信装置64G1の各々とは、インターネット100を介して、通信する。第1のモデム35Aは、第1の監視装置50Sの第1の通信装置64S1及び第2の監視装置50Gの第1の通信装置64G1の各々と、第1の間接無線通信方式で第1の無線通信をする。
 第2の通信制御装置38の第2のモデム35Bと、第1の監視装置50Sの第2の通信装置64S2及び第2の監視装置50Gの第2の通信装置64G2の各々とは、インターネット100を介して、通信する。第2のモデム35Bは、第1の監視装置50Sの第2の通信装置64S2及び第2の監視装置50Gの第2の通信装置64G2の各々と、第1の無線通信と異なる第2の無線通信、即ち、第1の間接無線通信方式と異なる第2の間接無線通信方式で、第2の無線通信をする。
 第1のモデム35Aと、第1の通信装置64S1及び第1の通信装置64G1の各々との間の第1の間接無線通信方式と、第2のモデム35Bと、第2の通信装置64S2及び第2の通信装置64G2の各々との間の第2の間接無線通信方式とは、通信のプロトコルが異なる。具体的には、第1の間接無線通信方式及び第2の間接無線通信方式の一方の方式は、CDMA(Code Division Multiple Access(「符号分割多元接続」)であり、他方の方式は、W-CDMA (Wideband Code Division Multiple Access(「広帯域符号分割多重接続」)である。
 ドローン10Aは、本開示の技術の「航空機」の一例である。第1のモデム35A及び第2のモデム35Bは、本開示の技術の「第1の通信部」及び「第2の通信部」の一例である。第1の通信装置64S1及び第1の通信装置64G1は、本開示の技術の「第1の無線通信部」の一例である。第2の通信装置64S2及び第2の通信装置64G2は、本開示の技術の「第2の無線通信部」の一例である。CPU14は、本開示の技術の「制御部」の一例である。CPU52S、52Gは、本開示の技術の「表示制御部」の一例である。
 図2には、ドローン10AのFC12のCPU14の機能ブロック図が示されている。CPU14の機能には、取り込み機能、作成機能、送信処理機能、判断機能、及び処理機能がある。図2に示すように、CPU14は、通信プログラム40Pを実行すると、取り込み部11、作成部13、送信処理部15、判断部17、及び処理部19として機能する。
 次に、本実施の形態の作用を説明する。
 図3には、FC12のCPU14が実行する通信プログラム40Pのフローチャートが示されている。CPU14が通信プログラム40Pを実行することにより、通信処理及び通信方法が実行される。通信プログラム40Pは、図示しないスタートボタンがオンされた場合にスタートする。
 ステップ102で、取り込み部11は、第1のカメラ32からの画像を取り込むように、第1の通信制御装置36及び第2の通信制御装置38を制御する。ステップ104で、取り込み部11は、第2のカメラ34からの画像を取り込むように、第1の通信制御装置36及び第2の通信制御装置38を制御する。
 ステップ106で、取り込み部11は、センサからのデータを取り込む。
 ステップ108で、作成部13は、送信データを作成するように、第1の通信制御装置36及び第2の通信制御装置38を制御する。送信データは、第1のカメラ32により撮影されたドローンの進行方向の領域の画像及び第2のカメラ34により撮影されたドローンの全体の様子の画像の画像データと、センサにより検出されたドローンの状態のセンサデータと、を有する。
 ステップ110で、送信処理部15は、各監視装置50S、50Gに送信データを第1のモデム35Aと第2のモデム35Bとが送信するように、第1の通信制御装置36及び第2の通信制御装置38を制御する。
 ステップ112で、判断部17は、図示しない飛行終了指示ボタンがオンされたか否かを判断することにより、飛行終了か否かを判断する。なお、判断部17は、監視装置50Gの第1の通信装置64G1又は第2の通信装置64G2から、飛行停止指示信号を受信したか否かを判断することにより、飛行終了か否かを判断してもよい。飛行終了と判断されなかった場合、ステップ114で、判断部17は、ステップ110で送信データを送信したときから所定時間経過したか否かを判断する。送信データを送信したときから所定時間経過したと判断されなかった場合には、通信処理はステップ112に戻る。送信データを送信したときから所定時間経過したと判断された場合、通信処理はステップ102に戻る。
 ステップ112で飛行終了と判断された場合には、ステップ116で、処理部19は、飛行終了処理を実行して、通信処理が終了する。なお、飛行終了処理は、各プロペラの回転のためのモータへの電源供給を停止する等である。
 図4には、ドローン10Aの第1の通信制御装置36の第1のモデム35Aの送信のタイミングチャート(上側)とドローン10Aの第2の通信制御装置38の第2のモデム35Bの送信データの送信のタイミングチャート(下側)が示されている。図4に示すように、第1の通信制御装置36の第1のモデム35Aの送信のタイミングとドローン10Aの第2の通信制御装置38の第2のモデム35Bの送信データの送信のタイミングとは同じであり、各々の送信する送信データD1、D2の内容も同じである。
 送信データD1は、第1のモデム35Aと第2のモデム35Bとから最初に送信されたデータであり、送信データD2は、第1のモデム35Aと第2のモデム35Bとから2番目に送信されたデータである。
 図5には、監視装置50Sの記憶装置68Sの記憶領域68Mに設けられた、第1のデータ記憶領域68M1における第1のモデム35Aからのデータを記憶する様子を示し、第2のデータ記憶領域68M2における第2のモデム35Bからのデータを記憶する様子を示す図が示されている。図5に示すように、第1のモデム35Aから最初に送信された送信データD1が第1のデータ記憶領域68M1の第1番目の記憶部68M11に記憶され、第2のモデム35Bから最初に送信された送信データD1が第2のデータ記憶領域68M2の第1番目の記憶部68M21に記憶される。第1のモデム35Aから2番目に送信された送信データD2が第1のデータ記憶領域68M1の第2番目の記憶部68M12に記憶され、第2のモデム35Bから2番目に送信された送信データD2が第2のデータ記憶領域68M2の第2番目の記憶部68M22に記憶される。
 ところで、例えば、図4に示すように、3番目の送信データD3が送信されるタイミングで、第1のモデム35Aにおいてデータ送信に障害が発生した場合、第2のモデム35Bからは、3番目の送信データD3が送信されるが、第1のモデム35Aからは、3番目の送信データD3は送信されない。更に、第1のモデム35Aに継続してデータ送信に障害が発生した場合、第2のモデム35Bのみから送信データD4、・・・が送信されるが、第1のモデム35Aからは送信データD4、・・・が送信されない。この場合、図5に示すように、第1のデータ記憶領域68M1には、送信データD3、D4、・・・は記憶されないが、第2のデータ記憶領域68M2の第3番目の記憶部68M23に送信データD3が記憶され、第2のデータ記憶領域68M2の第4番目の記憶部68M24に送信データD4が記憶され、以後、同様に第2のデータ記憶領域68M2の各記憶部にデータが記憶される。
 ところで、監視装置50S、50Gでは、第1のモデム35A及び第2のモデム35Bからの送信データを受信すると、直ちに、ディスプレイ66S、66Gの第1のモデム35A及び第2のモデム35Bの各々に対応する表示エリアに、各データをリアルタイムで表示する。
 よって、送信データD1、送信データD2は、ディスプレイ66S、66Gの第1のモデム35A及び第2のモデム35Bの各々に対応する表示エリアにリアルタイムで表示される。しかし、送信データD3、D4、・・・は、第1のモデム35Aからは受信しないので、第1のモデム35Aに対応する表示エリアにデータが表示されなくなる。なお、送信データD3、D4、・・・は、第2のモデム35Bから受信し続けるので、第2のモデム35Bに対応する表示エリアにデータが表示され続く。
 よって、監視装置50S、50Gでの監視者は、第1のモデム35Aにおいてデータ送信に障害が発生していることをリアルタイムで認識することができる。
 また、第2のモデム35Bから送信されたデータが表示され続くので、監視装置50S、50Gでの監視者は、ドローン10Aの監視を継続することができる。
 以上説明したように第1の実施の形態では、ドローン10Aと監視装置50S、50Gの各々との間の通信経路を冗長化することができる。
 図3のステップ110では、送信処理部15は、各監視装置50S、50Gと共に、クラウドサーバ200及びライブ配信サーバ300に、送信データを第1のモデム35Aと第2のモデム35Bとが送信するように、第1の通信制御装置36及び第2の通信制御装置38を制御するようにしてもよい。
 これにより、クラウドサーバ200に、送信データが保存される。また、ライブ配信サーバ300は、送信データをライブ配信する。よって、監視装置50S、50Gの設置場所付近におらずディスプレイ66S、66Gを直接確認できない監視者も、自分の端末からライブ配信サーバ300にアクセスすれば、自分の端末において、ドローン10Aを、リアルタイムに監視することができる。
[変形例]
 次に、第1の実施の形態の変形例を説明する。なお、以下に説明する第1の実施の形態の変形例の構成は、第1の実施の形態と同様であるので、その説明を省略する。第1の実施の形態の変形例の作用も、第1の実施の形態と同様の作用があるので、異なる部分を説明する。
(第1の実施の形態の第1の変形例)
 第1の実施の形態の第1の変形例は、監視装置50Sと監視装置50Gとに適用されるが、いずれの作用も同じであるので、以下、監視装置50Sを例にとり説明する。
 図6には、第1の実施の形態の第1の変形例の監視装置50SのCPU52Sの機能ブロック図が示されている。監視装置50SのCPU52Sの機能には、セット機能、判断機能、記憶処理機能、及び処理機能がある。図6に示すように、CPU52Sは、データ記憶プログラム(図7参照)を実行すると、セット部121、判断部123、記憶処理部125、及び処理部127として機能する。
 図7には、第1の実施の形態の第1の変形例の監視装置50Sのデータ記憶プログラムのフローチャートが示されている。データ記憶プログラムは、図示しないスタートボタンがオンされた場合にスタートする。データ記憶プログラムが実行されると、データ記憶処理及びデータ記憶方法が実行される。
 ステップ101で、セット部121は、変数Mを1にセットする。なお、変数Mは、第1のモデム35Aと第2のモデム35Bとを識別し、よって、図5に示す第1のデータ記憶領域68M1と第2のデータ記憶領域68M2とを識別する変数である。例えば、M=1では、第1のモデム35A、よって、第1のデータ記憶領域68M1を識別し、M=2では第2のモデム35B、よって、第2のデータ記憶領域68M2を識別する。
 ステップ103で、判断部123は、第1のモデム35Aからデータを前回受信したときから所定時間が経過したか否かを判断する。第1のモデム35Aからデータを前回受信したときから所定時間が経過したと判断されなかった場合には、データ記憶処理は、ステップ105に進み、前回受信したときから所定時間が経過したと判断された場合には、データ記憶処理は、ステップ107に進む。
 図3及び図4に示すように、ドローン10Aからは、第1のモデム35A及び第2のモデム35Bの各々から上記送信データが送信される。
 ステップ105で、記憶処理部125は、ステップ103の判断が肯定判定となるまでに、第1のモデム35A及び第2のモデム35Bの各々から上記送信データが送信されていれば、第1の通信装置64S1及び第2の通信装置64S2が上記送信データを受信し、この場合、データを保持記憶装置68Sに保持する。データ記憶処理は、ステップ103に戻る。
 ステップ107で、判断部123は、データを受信したか否かを判断する。データを受信したと判断されなかった場合には、データ記憶処理は、ステップ111に進み、データを受信したと判断された場合には、データ記憶処理は、ステップ109に進む。
 ステップ107でデータを受信したと判断されなかった場合は、第1のモデム35Aからデータを前回受信したときから所定時間が経過するまでの間にデータを受信しなかった場合である。ステップ107でデータを受信したと判断された場合は、第1のモデム35Aからデータを前回受信したときから所定時間が経過するまでの間にデータを受信した場合である。
 ところで、第1のモデム35Aからはデータが所定時間毎に送信されるので、第1のモデム35Aにおいてデータ送信に支障が発生していなければ、第1のモデム35Aから送信データを前回受信したときから所定時間が経過するまでの間に送信データを受信することになる。しかし、第1のモデム35Aにおいてデータ送信に支障が発生していれば、第1のモデム35Aから送信データを前回受信したときから所定時間が経過するまでの間にデータを受信しないことになる。
 よって、第1のモデム35Aから送信データを前回受信したときから所定時間が経過するまでの間に送信データを受信したと判断された場合(即ち、ステップ107が肯定判定された場合)、第1のモデム35Aにおいてデータ送信に支障が発生してしないと判断することができる。一方、第1のモデム35Aからデータを前回受信したときから所定時間が経過するまでの間にデータを受信したと判断されなかった場合(即ち、ステップ107が否定判定の場合)、第1のモデム35Aにおいてデータ送信に支障が発生していると判断することができる。
 ステップ107が肯定判定された場合、第1のモデム35Aにおいてデータ送信に支障が発生してしないと判断することができるので、ステップ109で、記憶処理部125は、Mで定まる記憶領域にデータを記憶する。具体的には、変数M=1の場合、Mにより第1のモデム35Aが識別され、第1のデータ記憶領域68M1(図5も参照)が識別され、第1のデータ記憶領域68M1に、ステップ105で保持されたデータを記憶する。
 ステップ117で、判断部123は、図示しない終了ボタンがオンされたか否かを判断することにより、データ記憶処理が終了か否かを判断する。データ記憶処理が終了でない場合には、データ記憶処理は、ステップ103に戻る。データ記憶処理が終了の場合には、本データ記憶処理は、終了する。
 ステップ107が否定判定の場合、第1のモデム35Aにおいてデータ送信に支障が発生していると判断することができるので、ステップ111で、判断部123は、変数Mが1であるか否かを判断する。変数M=1の場合には、ステップ113で、セット部121は、変数Mに、2をセットする。M=2では第2のモデム35B、よって、第2のデータ記憶領域68M2が識別される。ステップ113の処理後、データ記憶処理は、ステップ109に進む。
 ステップ111が否定判定の場合には、第1のモデム35Aばかりではなく、第2のモデム35Bにおいてもデータ送信に支障が発生しているので、ステップ115で、処理部127は、エラー処理を実行し、データ記憶処理は終了する。なお、エラー処理は、ディスプレイ66Sに、第1のモデム35Aと第2のモデム35Bにおいてデータ送信に支障が発生していることを警告表示することである。
 なお、ステップ111の判断が肯定判定となった場合、ステップ111の判断が肯定判定となった時からステップ109の前までの間、例えば、ステップ113の前に、処理部127は、ディスプレイ66Sに、第1のモデム35Aにおいてデータ送信に支障が発生していることを警告表示してもよい。
 前述したように、第1の通信制御装置36の第1のモデム35Aの送信データの送信のタイミングとドローン10Aの第2の通信制御装置38の第2のモデム35Bの送信データの送信のタイミングとは同じであり、各々の送信する送信データの内容も同じである。
 以上のデータ記憶処理により、最初は、第1のモデム35A用のデータ記憶領域68M1に送信データが記憶され、第1のモデム35Aにおいて、データ送信に障害が発生したと判断した場合(図6のステップ107:N)、第2のモデム35B用のデータ記憶領域68M2に送信データを記憶する。
 図8には、第1の実施の形態の第1の変形例の監視装置50Sの記憶装置68Sの第1のデータ記憶領域68M1における第1のモデム35Aからの送信データを記憶する様子を示し、第2のデータ記憶領域68M2における第2のモデム35Bからの送信データを記憶する様子を示す図が示されている。
 図4に示すように、第1のモデム35A及び第2のモデム35Bの各々から送信データD1、D2が送信されたが、送信データD3を送信するタイミングで、第1のモデム35Aにおいて、データ送信に障害が発生した場合、図8に示すように、第1のモデム35Aから送信された送信データD1、D2が第1のデータ記憶領域68M1の第1番目の記憶部68M11、第2番目の記憶部68M12に記憶され、送信データD3からは、第2のデータ記憶領域68M2の第3番目の記憶部68M23以降に記憶される。
 このように第1のモデム35Aにおいてデータ送信に障害が発生したと判断されるまで、第2のモデム35B用のデータ記憶領域68M2には送信データを記憶しないので、記憶装置68Sの記憶可能残量が減少することを、第2のモデム35B用のデータ記憶領域68M2にも送信データを記憶する場合より、遅くすることができる。
(第1の実施の形態の第2の変形例)
 図9には、第1の実施の形態の第2の変形例のドローン10AのFC12のCPU14が実行する通信プログラムのフローチャートが示されている。
 ステップ122で、処理部19は、ソフトウェアタイマーをリセットスタート(リセットし、リスタート)する。ステップ124で、判断部17は、ソフトウェアタイマーの値に基づいて、第1の期間T1(図10参照)が経過したか否かを判断する。第1の期間T1が経過したと判断されなかった場合には、第1の期間T1が経過したと判断されるまで、当該判断が繰り返される。
 第1の期間T1が経過したと判断された場合には、ステップ126で、取り込み部11は、センサ42からセンサデータを取り込む。ステップ128で、作成部13は、センサデータを含む第1の送信データSd(図10参照)を作成する。ステップ130で、送信処理部15は、各監視装置50S、50Gに第1の送信データSdを第1のモデム35Aと第2のモデム35Bとが送信するように、第1の通信制御装置36及び第2の通信制御装置38を制御する。
 ステップ132で、判断部17は、ソフトウェアタイマーの値に基づいて、第2の期間T2(図10参照)が経過したか否かを判断する。第2の期間T2が経過したと判断されなかった場合には、通信処理はステップ124に戻る。
 第2の期間T2が経過したと判断された場合には、ステップ134で、取り込み部11は、第1のカメラ32から画像を取り込むように、第1の通信制御装置36及び第2の通信制御装置38を制御する。ステップ136で、取り込み部11は、第2のカメラ34から画像を取り込むように、第1の通信制御装置36及び第2の通信制御装置38を制御する。ステップ138で、作成部13は、第1のカメラ32から取り込んだ画像及び第2のカメラ34から取り込んだ画像の画像データを含む第2の送信データSg(図10参照)を作成する。ステップ140で、送信処理部15は、各監視装置50S、50Gに第2の送信データSgを第1のモデム35Aと第2のモデム35Bとが送信するように、第1の通信制御装置36及び第2の通信制御装置38を制御する。
 ステップ112で、判断部17は、飛行終了か否かを判断する。飛行終了と判断されなかった場合、通信処理はステップ122に戻る。飛行終了と判断された場合、ステップ116の飛行終了処理が実行され、通信処理が終了する。
 図10には、第1の実施の形態の第2の変形例の第1のモデム35Aと第2のモデム35Bとのそれぞれのデータの送信のタイミングチャートが示されている。図9に示す通信プログラムがFC12のCPU14が実行すると、センサデータを含む第1の送信データSdと、第1のカメラ32及び第2のカメラ34から取り込んだ各画像の画像データを含む第2の送信データSgとが別々に、各監視装置50S、50Gに送信される。第1のモデム35A及び第2のモデム35Bの各々は、第1の送信データSdを第1の時間T1間隔で、第2の送信データSgを第2の時間T2(>T1)間隔でそれぞれ送信される。
 図5に示すように、第1のモデム35A及び第2のモデム35Bからの、第1の送信データSd及び第2の送信データSgは、第1のデータ記憶領域68M1と第2のデータ記憶領域68M2とに記憶される。例えば、第1のモデム35Aにおける送信に支障が発生しても、第2のモデム35Bから、第1の送信データSd及び第2の送信データSgが送信されるので、これらのデータを記憶することができ、ディスプレイ66S、66Gに表示でき、ドローン10Aの監視を継続することができる。
 なお、図8に示すように、例えば、第1のモデム35Aにおける送信に支障が発生するまでは、第1の送信データSd及び第2の送信データSgは、第1のデータ記憶領域68M1のみに記憶され、第1のモデム35Aにおける送信に支障が発生した場合には、第1の送信データSd及び第2の送信データSgは、第2のデータ記憶領域68M2のみに記憶されるようにしてもよい。
(第1の実施の形態の第3の変形例)
 図11には、第1の実施の形態の第3の変形例のドローン10AのFC12のCPU14が実行する通信プログラムのフローチャートが示されている。図13Aには、第1の実施の形態の第3の変形例の第1のモデム35Aと第2のモデム35Bとのそれぞれのデータの送信のタイミングチャートが示されている。
 ステップ150で、処理部19は、本通信プログラムで使用する変数Fを0にセットする。
 詳細には後述するが、監視装置50S、50Gは、第1のモデム35Aにおける送信に障害が発生していないか否かを判断する。監視装置50S、50Gは、第1のモデム35Aにおける送信に障害が発生していると判断した場合には、第1のモデム35Aにおける送信に障害が発生していことを通知する。
 FC12のCPU14の処理部19は、監視装置50S、50Gの少なくとも何れかから、第1のモデム35Aにおける送信に障害が発生していないことが通知された場合、変数Fに1をセットする。よって、変数F=0は、第1のモデム35Aにおける送信に障害が発生していないことを示し、変数F=1は、第1のモデム35Aにおける送信に障害が発生していることを示す。
 ステップ102で、取り込み部11は、第1のカメラ32からの画像を取り込むように、第1の通信制御装置36及び第2の通信制御装置38を制御する。ステップ104で、取り込み部11は、第2のカメラ34からの画像を取り込むように、第1の通信制御装置36及び第2の通信制御装置38を制御する。ステップ106で、取り込み部11は、センサ42からのセンサデータを取り込む。ステップ108で、作成部13は、第1のカメラ32及び第2のカメラ34からの各画像の画像データと、センサ42からのセンサデータとを含む送信データを作成するように、第1の通信制御装置36及び第2の通信制御装置38を制御する。
 ステップ152で、判断部17は、F=0であるか否か、即ち、第1のモデム35Aにおける送信に障害が発生していないか否かを判断する。F=0であると判断した場合には、ステップ154で、送信処理部15は、各監視装置50S、50Gに送信データを第1のモデム35Aが送信するように、第1の通信制御装置36を制御する。
 ステップ112で、判断部17は、飛行終了であるか否かを判断する。飛行終了であると判断されなかった場合には、ステップ114で、判断部17は、飛行終了であると判断されなかったときから所定時間経過したか否かを判断する。飛行終了であると判断されなかったときから所定時間経過したと判断されなかった場合には、飛行終了であると判断されなかったときから所定時間経過したと判断されるまで、当該判断を繰り返す。
 飛行終了であると判断されなかったときから所定時間経過したと判断された場合には、本通信処理はステップ102に戻る。
 よって、第1のモデム35Aにおける送信に障害が発生していない場合には、図13Aに示すように、第1のモデム35Aが送信データを各監視装置50S、50Gに所定時間毎に送信する。
 ステップ152で、F=0であると判断されなかった場合には、ステップ156で、送信処理部15は、各監視装置50S、50Gに送信データを第2のモデム35Bが送信するように、第2の通信制御装置38を制御する。ステップ158の処理後は、本通信処理は、ステップ112に進む。
 よって、第1のモデム35Aにおける送信に障害が発生したが、第2のモデム35Bにおける送信に障害が発生していない場合には、図13Aに示すように、第2のモデム35Bが送信データを各監視装置50S、50Gに所定時間毎に送信する。
 なお、ステップ112で、飛行終了であると判断された場合には、ステップ116で、処理部19は、飛行終了処理を実行する。
 図12には、第1の実施の形態の第3の変形例の視装置50Sのデータ記憶プログラムのフローチャートが示されている。監視装置50Gも、このデータ記憶プログラムを実行するが、それぞれ同じ処理であるので、以下、視装置50Sのデータ記憶プログラムのみ説明する。データ記憶プログラムは、図示しないスタートボタンがオンされた場合にスタートする。
 ステップ170で、セット部121は、本データ記憶プログラムで使用する変数Fに0をセットする。なお、変数F=0は、第1のモデム35Aにおける送信に障害が発生していないことを示し、変数F=1は、第1のモデム35Aにおける送信に障害が発生していることを示す。
 ステップ172で、判断部123は、所定時間が経過したか否かを判断する。所定時間が経過したと判断されなかった場合には、所定時間が経過したと判断されるまで、当該判断を繰り返す。所定時間が経過したと判断された場合には、ステップ174で、判断部123は、F=0か否かを判断する。F=0と判断された場合には、データ記憶処理は、ステップ176に進む。F=0と判断されなかった場合には、データ記憶処理は、ステップ184に進む。
 ステップ176で、判断部123は、第1のモデム35Aから送信データが送信されたか判断する。
 上記のように第1のモデム35Aから送信データが所定時間毎に送信されるので、第1のモデム35Aとの間の通信に障害が発生していなければ、第1のモデム35Aから送信データが送信され、ステップ176で判断は肯定判定となる。第1のモデム35Aから送信データが送信されたと判断された場合には、ステップ178で、記憶処理部125は、送信データを記憶する。
 ステップ190で、判断部123は、図示しない終了ボタンがオンされたか否かを判断することにより、データ記憶処理が終了か否かを判断する。終了と判断された場合には、データ記憶処理は終了する。終了と判断されなかった場合には、データ記憶処理は、ステップ172に戻る。
 ところで、第1のモデム35Aとの間の通信に障害が発生していると、第1のモデムから送信データが送信されず、ステップ176の判断は否定判定となる。よって、ステップ176の判断が否定判定となった場合は、第1のモデム35Aとの間の通信に障害が発生していると判断できる。そこで、ステップ180で、処理部127は、第1のモデム35Aとの間の通信に障害が発生したことを、第2のモデム35Bに通知する。第2の通信制御装置38は、第2のモデム35Bを介して、第1のモデム35Aとの間の通信に障害が発生したことが通知された場合、第1のモデム35Aとの間の通信に障害が発生したこと、FC12に通知する。これにより、上記のように、FC12は、変数Fに1をセットする。
 ステップ182で、セット部121は、変数Fに1をセットする。
 ステップ174でF=0と判断されなかった場合には、第2のモデム35Bから送信データが送信されることになる(図11のステップ156参照)。そこで、ステップ184で、判断部123は、第2のモデムから送信データが送信されたか否かを判断する。第2のモデム35Bから送信データが送信された判断された場合には、ステップ186で、記憶処理部125は、送信データを記憶する。
 しかし、ステップ184で第2のモデムから送信データが送信されたと判断されなかった場合には、第2のモデム35Bからも送信データが送信されていなので、テップ188で、処理部127は、上記エラー処理を実行し、本データ通信処理は終了する。なお、ステップ176の判断が否定判定となった場合に、ステップ180の前、ステップ180の後且つステップ182の前、又は、ステップ182の後かつステップ190の前に、第1のモデム35Aにおいてデータ送信に支障が発生していることを警告表示してもよい。
 このように(図13Aも参照)、第1のモデム35Aとの間の通信に障害が発生していないと、第1のモデム35Aから送信データが送信され、当該送信データは記憶訴装置68S、68Gに記憶され、第1のモデム35Aとの間の通信に障害が発生した場合には、第2のモデム35Bから送信データが送信され、当該送信データは、記憶装置68S、68Gに記憶される。
(第1の実施の形態の第4の変形例)
 上記のように第1の実施の形態の第3の変形例(図13A参照)では、第1のモデム35Aとの間の通信に障害が発生していないと、第1のモデム35Aのみから送信データが送信される、即ち、第2のモデム35Bと監視装置50S、50Gとの間では通信されていない。本第4の変形例では、例えば、第1のモデム35Aから送信データが送信され、第2のモデム35Bと監視装置50S、50Gとの間で通信されていない場合に、第2のモデム35Bと監視装置50S、50Gとの間で通信するものである。
 図13Bには、第1の実施の形態の第4の変形例の監視装置50SのCPU52Sが実行する制御データ送信プログラムのフローチャートが示されている。制御データ送信プログラムは、入力装置62Sにより、制御データが入力された場合にステートする。
 監視装置50Sでのオペレータは、ディスプレイ66Sで、ドローン10Aの飛行を監視して場合、ドローン10Aの現在の稼働状態を変更したいと考える場合がある。そこで、第4の変形例では、オペレータは、監視装置50Sからドローン10に制御データを送信し、ドローン10Aの現在の稼働状態を変更できるようにしている。
 ここで、制御データは、例えば、次のデータである。
 第1に、第1のカメラ32又は第2のカメラ34の、オン又はオフ、撮影方向の変更、及び解像度の変更の少なくとも1つを指示する制御データがある。
 第2に、少なくとも1つのセンサのオン又はオフを指示する制御データがある。
 第3に、ドローン10Aを着陸させることを指示する制御データがある(ドローン10Aに異常事態(緊急事態)が発生したため)。具体的には、パラシュートを備える場合には、当該パラシュートを開かせたり、ホバリングさせ徐々に下げたり、する。
 図13Bのステップ157で、処理部127は、現在使用されていない通信装置を検出する。具体的には、第2のモデム35Bと通信をする第2の通信装置64S2を検出する。
 ステップ159で、処理部127は、検出された通信装置により、制御データを送信する。制御データは、第2のモデム35Bにより受信され、通信制御装置38によりFC12に送信される。FC12のCPU14は、制御データに従って、ドローン10Aの現在の稼働状態を変更する。
 第4の変形例では、使用していないモデムを用いて制御データを送信して、ドローン10Aの現在の稼働状態を変更するので、モデムを有効活用することができる。
(第1の実施の形態の第5の変形例)
 図13Cには、第1の実施の形態の第5の変形例のドローン10AのFC12のCPU14が実行する通信プログラムのフローチャートが示されている。
 第1の実施の形態の第5の変形例の通信プログラムは、第1の実施の形態の第3の変形例の図11に示す通信プログラムと略同様であるので、異なる部分について説明する。
 図11に示す通信プログラムでは、送信データを、予め定められた第1のモデム35Aが送信し、第1のモデム35Aにおいて送信に障害が発生した場合、送信データを第2のモデム35Bが送信している。
 これに対し、第5の変形例では、選択条件に基づいて選択されたモデムにより送信データを送信する。
 ステップ152の判断が肯定判定の場合、ステップ154Aで、処理部19は、送信データを送信するモデムを、以下の選択条件に基づいて、選択する。
 選択条件は、通信速度が速いモデムであること、通信料金が安いモデムであること、通信料金がデータ量に応じて変動しないモデムであること、通信状況がよい(具体的には、監視装置50S、50Gの第1の通信装置64S1、64G1、第2の通信装置64S2、64G2からの電波の強さが大きい)モデムであること、及び通信障害の発生頻度が小さいモデムであること等である。
 ステップ154Bで、送信処理部15は、各監視装置50S、50Gに送信データを、選択したモデムが送信するように、選択したモデムに対応する通信制御装置36又は通信制御装置38を制御する。
 ステップ154Bの処理の後、通信処理はステップ112に進む。
 第5の変形例では、選択条件に沿ったモデムを選択して送信データを送信することができる。
(第1の実施の形態の第6の変形例)
 図13Dには、第1の実施の形態の第6の変形例のドローン10AのFC12のCPU14が実行する通信プログラムのフローチャートが示されている。
 第1の実施の形態の第6の変形例の通信プログラムでは、第1の実施の形態の第3の変形例の図11に示す通信プログラムのステップ102、104,106の処理を実行される。
 ステップ171で、処理部19は、第1のカメラ32及び第2のカメラの撮影方向及び解像度、及び、各センサデータの内容から、各データのデータ量を推定する。
 ステップ173で、作成部13は、各データのデータ量と上記選択条件とから、第1のモデム35Aが送信する第1の送信データ、及び第2のモデム35Bが送信する第2の送信データを作成する。
 ステップ173の作成態様を具体的に説明する。
 まず、第1の作成態様を説明する。
 例えば、データ量の大きい順が、第1に、第2のカメラ34のドローン10全体の画像データ、第2に、センサデータ、第3に、第1のカメラ32のドローン10の進行方向前方の画像データであったとする。
 選択条件として、1回に送信する全体の送信時間を短くすることであるとする。また、第1のモデム35Aでの通信速度が、第2のモデム35Bの通信速度より、速いとする。
 この場合、通信速度が遅い第2のモデム35Bがデータ量の大きいデータを送信し、通信速度が速い第1のモデム35Aがデータ量の小さいデータを送信したのでは、第1のモデム35Aによる送信が終わっても、第2のモデム35Bによるデータの送信が終わらず、全体の送信時間が長くなる。
 そこで、処理部19は、第2のカメラ34のドローン10全体の画像データを含むように、第1のモデム35Aが送信する第1の送信データを作成し、センサデータと第1のカメラ32のドローン10の進行方向前方の画像データとを含むように、第2のモデム35Bが送信第2の送信データを作成する。
 次に、第2の作成態様を説明する。
 データ量の順は上記の順であるが、選択条件として、全体の通信料金を安くすることであるとする。本変形例では、第2のモデム35Bの通信料金がデータ量に応じて変動するが、第1のモデム35Aでの送信では、送信する送信データのデータ量が所定値までは一定の料金であるが、送信データのデータ量が所定値を超えると、第2のモデム3Bの通話料金よりも高いとする。
 そして、第2のカメラ34のドローン10全体の画像データが上記所定値を超えるが、
センサデータと第1のカメラ32のドローン10の進行方向前方の画像データとの合計のデータ量が所定値を超えないとする。
 処理部19は、センサデータと第1のカメラ32のドローン10の進行方向前方の画像データとを含むように、第1のモデム35Aが送信する第1の送信データを作成し、第2のカメラ34のドローン10全体の画像データを含むように、第2のモデム35Bが送信第2の送信データを作成する。
 ステップ154Aで、送信処理部15は、各監視装置50S,50Gに第1の送信データを第1のモデム35Aが送信するように、通信制御装置36を制御する。
 ステップ154Bで、送信処理部15は、各監視装置50S,50Gに第2の送信データを第2のモデ35Bが送信するように、通信制御装置38を制御する。
 第6の変形例では、送信データ量及び選択条件に沿ったモデムを選択して送信データを送信することができる。
(第1の実施の形態の第7の変形例)
 第1の実施の形態の第7の変形例では、ドローン10AのFC12は、図11に示す通信プログラムを実行する。監視装置50S、50Gは、図12のデータ記憶プログラムを実行しない。監視装置50S、50Gは、図11のステップ154又はステップ156で送信された送信データを記憶装置68S、68Gに記憶する。
 図14には、第1の実施の形態の第7の変形例の第2の通信制御装置38のCPU14Bの機能ブロック図が示されている。図15には、第1の実施の形態の第7の変形例の第2の通信制御装置38が実行する、第1の通信制御装置36の第1のモデム35Aによる通信に障害が発生しているか否かを判断する障害発生判断プログラムのフローチャートが示されている。
 CPU14Bの機能には、指示機能、判断機能、及び出力処理機能がある。図14に示すように、CPU14Bは、障害発生判断プログラムを実行すると、指示部201、判断部203、出力処理部205として機能する。
 ステップ212で、指示部201は、第1の通信制御装置36のCPU14Aに、所定の計算の実行とその計算の結果を第2の通信制御装置38に送信することを指示する。なお、所定の計算は、第1の通信制御装置36が故障していないか否かを判断するためのもので、後述する(ステップ216)所定期間内に計算が終了し返信できる計算でよく、例えば、足し算又は引き算等でよい。
 ステップ214で、判断部203は、計算結果(具体的には、正解)を受信したか否かを判断する。計算結果(具体的には、正解)を受信したと判断されなかった場合には、ステップ216で、判断部203は、ステップ212の処理実行時から所定時間が経過したか否かを判断する。ステップ212の処理実行時から所定時間が経過した判断されなければ、障害発生判断処理は、ステップ214に戻る。
 第1の通信制御装置36が故障していない場合には、第1の通信制御装置36から計算結果(具体的には、正解)がステップ212の処理実行時から所定時間が経過するまでに送信される。よって、第1の通信制御装置36から計算結果(具体的には、正解)がステップ212の処理実行時から所定時間が経過するまでに送信された場合には、第1の通信制御装置36が故障していないと判断でき、ステップ214の判断が肯定判定となり、障害発生判断処理は終了する。
 しかし、第1の通信制御装置36から計算結果(具体的には、正解)がステップ212の処理実行時から所定時間が経過するまでに送信されなかった場合には、第1の通信制御装置36が故障していると判断でき、ステップ216の判断が肯定判定となり、ステップ218で、出力処理部205は、第1の通信制御装置36が故障であることを、FC12に通知する。
 図16には、第1の実施の形態の第7の変形例の第2の通信制御装置38から、第1の通信制御装置36の第1のモデム35Aによる通信に障害が発生していることが通知されたFC12のCPU14が実行するプログラムのフローチャートが示されている。図16に示すように、CPU14は、ステップ220で、変数Fに1をセットする。
 第7の変形例は、第1の通信制御装置36にも適用される。よって、第1の通信制御装置36と第2の通信制御装置38とは互いに相手が故障していないかを確かめることができる。
 なお、FC12が、第1の通信制御装置36と第2の通信制御装置38とに対し、図15に示す障害発生判断プログラムを実行してもよい。
(第1の実施の形態の第8の変形例)
 図17には、第1の実施の形態の第8の変形例の第1のモデム35Aと第2のモデム35Bとのそれぞれのデータの送信のタイミングチャートが示されている。
 図17に示すように、第1の通信制御装置36の第1のモデム35Aと第2の通信制御装置38の第2のモデム35Bとは、送信データを、所定時間間隔で交互に、監視装置50S、50Gに送信する。
 そして、例えば、第1のモデム35Aにおける送信に障害が発生した場合には、第2のモデム35Bが、送信データを、所定時間毎に、記憶装置68S、68Gに送信する。
 なお、送信データは、第1のカメラ32により撮影されたドローンの進行方向の領域の画像及び第2のカメラ34により撮影されたドローンの全体の様子の画像の画像データと、センサにより検出されたドローンの状態のセンサデータと、を有する。
(第1の実施の形態の第9の変形例)
 図18には、第1の実施の形態の第9の変形例の第1のモデム35Aと第2のモデム35Bとのそれぞれのデータの送信のタイミングチャートが示されている。
 図18に示すように、第1の通信制御装置36の第1のモデム35Aは、ドローンの状態のセンサデータを含む第1の送信データを、一定時間間隔で複数(例えば、3個)送信することを、所定時間間隔で監視装置50S、50Gに送信する。より詳細には、第1のモデム35Aは、第1の送信データを複数送信すると、一定時間待機した後、送信データを複数送信する。
 第2の通信制御装置38の第2のモデム35Bは、第1のカメラ32により撮影されたドローンの進行方向の領域の画像及び第2のカメラ34により撮影されたドローンの全体の様子の画像の画像データを含む第2の送信データを、所定時間間隔で監視装置50S、50Gに送信する。第2のモデム35Bが第2の送信データを送信するタイミングは、第1のモデム35Aが待機している間である。
 そして、例えば、第1のモデム35Aにおける送信に障害が発生した場合には、第2のモデム35Bが、第1の信データと第2の送信データとを監視装置50S、50Gに送信する。第1の送信データの送信タイミングは、第1のモデム35Aが第1の送信データを送信するタイミングと同じである。
[その他の実施の形態]
 以下、その他の実施の形態を説明する。以下に説明するその他の実施の形態の構成は、第1の実施の形態と同様であるので、同一部分には同一の符号を付して、同一部分の説明を省略し、主として異なる部分を説明する。
 また、以下に説明するその他の実施の形態では、ドローンからの送信データの内容及び送信データの送信タイミング、及び、第1の監視装置50S及び第2の監視装置50Gの送信データの記憶方法は、第1の実施の形態及び第1の実施の形態の各変形例と同様であるので、その説明を省略する。
[第2の実施の形態]
 次に、第2の実施の形態を説明する。図19には、第2の実施の形態のドローン10B、監視装置50S、50G、クラウドサーバ200、及びライブ配信サーバを含むシステムのブロック図が示されている。
 第2の実施の形態のドローン10Bは、第1の実施の形態のドローン10Aでの、第1の通信制御装置36の第1のモデム35A、第2の通信制御装置38の第2のモデム35B、第1の監視装置50Sの第1の通信装置64S1及び第2の通信装置64S2、第2の監視装置50Gの第1の通信装置64G1及び第2の通信装置64G2に代えて、以下の通信器を備える。
 即ち、ドローン10Bでは、第1の通信制御装置36は、第1の通信器37A1及び第2の通信器37A2を備え、第2の通信制御装置38は、第1の通信器37B1及び第2の通信器37B2を備える。また、第1の監視装置50Sは、第1の通信器64ST1及び第2の通信器64ST2を備え、第2の監視装置50Gは、第1の通信器64GT1及び第2の通信器64GT2を備える。
 第1の通信制御装置36の第1の通信器37A1と、第1の監視装置50Sの第1の通信器64ST1及び第2の監視装置50Gの第1の通信器64GT1とは、第1の直接無線通信方式で第1の無線通信をする。
 第2の通信制御装置38の第1の通信器37B1と、第1の監視装置50Sの第1の通信器64ST1及び第2の監視装置50Gの第1の通信器64GT1とは、第1の直接無線通信方式で第1の無線通信をする。
 第1の通信制御装置36の第2の通信器37A2と、第1の監視装置50Sの第2の通信器64ST2及び第2の監視装置50Gの第2の通信器64GT2とは、第1の直接無線通信方式と異なる第2の直接無線通信方式で第2の無線通信をする。
 第2の通信制御装置38の第2の通信器37B2と、第1の監視装置50Sの第2の通信器64ST2及び第2の監視装置50Gの第2の通信器64GT2とは、第2の直接無線通信方式で第2の無線通信をする。 
 第1の直接無線通信方式と第2の直接無線通信方式とは、通信の周波数が異なる。
 なお、以下の装置を省略してもよい。即ち、第1の通信制御装置36の第2の通信器37A2及び第2の通信制御装置38の第1の通信器37B1である。又は、第1の通信制御装置36の第1の通信器37A1及び第2の通信制御装置38の第2の通信器37B2である。
[第3の実施の形態]
 次に、第3の実施の形態を説明する。図20には、第3の実施の形態のドローン10C、監視装置50S、50G、クラウドサーバ200、及びライブ配信サーバを含むシステムのブロック図が示されている。
 第3の実施の形態のドローン10Cは、第1の実施の形態のドローン10Aでの第2の通信制御装置38の第2のモデム35B、第1の監視装置50Sの第2の通信装置64S2、第2の監視装置50Gのび第2の通信装置64G2に代えて、以下の通信器を備える。
 即ち、ドローン10Cでは、第2の通信制御装置38は、第2の実施の形態の第2の通信器37B1を備える。また、第1の監視装置50Sは、第2の実施の形態の第1の通信器64ST1を備え、第2の監視装置50Gは、第2の実施の形態の第1の通信器64GT1を備える。
 モデム35Aと第1の通信装置64S1、64G1との間の通信方式は、第1の実施の形態と同様の通信方式である。通信器37B1と第1の通信器64ST1、64GT1との間の通信方式は、第2の実施の形態と同様の通信方式である。
[第4の実施の形態]
 次に、第4の実施の形態を説明する。図21には、第4の実施の形態のドローン10D、監視装置50S、50G、クラウドサーバ200、及びライブ配信サーバを含むシステムのブロック図が示されている。
 第4の実施の形態のドローン10Dでは、第1の実施の形態の第2の通信制御装置38が省略されている。ドローン10Dの第1の通信制御装置36は、モデム35Bを備えている。
 モデム35Aと、第1の監視装置50Sの第1の通信装置64S1及び第2の監視装置50Gの第1の通信装置64G1との通信方式は、第1の実施の形態の通信方式と同様である。モデム35Bと、第1の監視装置50Sの第2の通信装置64S2及び第2の監視装置50Gの第2の通信装置64G2との通信方式は、第1の実施の形態の通信方式と同様である。
(第4の実施の形態の第1の変形例)
 ドローン10Dの第1の通信制御装置36は、モデム35A及びモデム35Bに代えて、第2の実施の形態の第1の通信器35A1及び第2の通信器37B1(図19参照)を備えてもよい。この場合、監視装置50S、50Gは、第2の実施の形態の監視装置50S、50と同様である。
(第4の実施の形態の第2の変形例)
 ドローン10Dの第1の通信制御装置36は、モデム35Bに代えて、第2の実施の形態の第2の通信器37B1(図20参照)を備えてもよい。この場合、監視装置50S、50Gは、第3の実施の形態の監視装置50S、50Gと同様である。
[第5の実施の形態]
 次に、第5の実施の形態を説明する。図22には、第5の実施の形態のドローン10E、監視装置50S、50G、クラウドサーバ200、及びライブ配信サーバを含むシステムのブロック図が示されている。
 第5の実施の形態のドローン10Eでは、第1の実施の形態の第1の通信制御装置36及び第2の通信制御装置38が省略されている。モデム35A及びモデム35Bは、FC12に接続されている。
(第5の実施の形態の第1の変形例)
 ドローン10Eでは、モデム35A及びモデム35Bに代えて、第2の実施の形態の第1の通信器35A及び第2の通信器37Bを備えてもよい。この場合、監視装置50S、50Gは、第2の実施の形態の監視装置50S、50Gと同様である。
(第5の実施の形態の第2の変形例)
 ドローン10Eでは、モデム35Bに代えて、第2の実施の形態の第2の通信器37Bを備えてもよい。この場合、監視装置50S、50Gは、第3の実施の形態の監視装置50S、50と同様である。
[第6の実施の形態]
 次に、第6の実施の形態を説明する。図23には、第6の実施の形態のドローン10F、監視装置50S、50G、クラウドサーバ200、及びライブ配信サーバを含むシステムのブロック図が示されている。
 第1の実施の形態(図1参照)では、FC12に、第1の通信制御装置36と第2の通信制御装置38とが接続されている。
 これに対し、第6の実施の形態(図23参照)では、第1の実施の形態のFC12と同様の構成の第1のFC12Aと第2のFC12Bとを備える。第1のFC12Aに第1の通信制御装置36が接続される。第2のFC12Bに第2の通信制御装置38が接続される。
(第6の実施の形態の第1の変形例)
 ドローン10Fでは、モデム35A及びモデム35Bに代えて、第2の実施の形態の第1の通信器35A及び第2の通信器37Bを備えてもよい。この場合、監視装置50S、50Gは、第2の実施の形態の監視装置50S、50と同様である。
(第6の実施の形態の第2の変形例)
 ドローン10Fでは、モデム35Bに代えて、第2の実施の形態の第2の通信器37Bを備えてもよい。この場合、監視装置50S、50Gは、第3の実施の形態の監視装置50S、50と同様である。
[第7の実施の形態]
 次に、第7の実施の形態を説明する。第7の実施の形態では、第6の実施の形態の第1のFC12A及び第2のFC12Bと、第4の実施の形態の第1の通信制御装置36とを備える。
(第7の実施の形態の第1の変形例)
 この場合、モデム35A及びモデム35Bに代えて、第2の実施の形態の第1の通信器35A及び第2の通信器37Bを備えてもよい。この場合、監視装置50S、50Gは、第2の実施の形態の監視装置50S、50Gと同様である。
(第7の実施の形態の第1の変形例)
 また、モデム35Bに代えて、第2の実施の形態の第2の通信器37Bを備えてもよい。この場合、監視装置50S、50Gは、第3の実施の形態の監視装置50S、50と同様である。
[更にその他の実施の形態]
 第1の実施の形態~第7の実施の形態の第2の変形例では、センサ42は、FC12に接続されているが、本開示の技術はこれに限定されない。センサ42は、通信制御装置に接続されてもよい。
 第1のカメラ32及び第2のカメラ34は、通信制御装置に接続されているが、FC12に接続されてもよい。
 以上説明した例では、ドローンは2個のモデムを備え且つ監視装置50S、50Gの各々は2個の通信装置を備えるが(図1、図21~図23等)、本開示の技術はこれに限定されない。ドローンは、3個以上の複数のモデムを備え且つ監視装置50S、50Gの各々は3個以上の複数の通信装置を備えてもよい。この場合のモデムと通信装置との3組以上の組み合わせの各々では、異なる通信方式で通信される。
 また、上記例では、ドローンは2個の通信器を備え且つ監視装置50S、50Gの各々は2個の通信機を備えるが(図19等)、本開示の技術はこれに限定されない。ドローンは、3個以上の複数の通信器を備え且つ監視装置50S、50Gの各々は3個の以上の複数の通信機を備えてもよい。この場合の通信器と通信機との3組以上の組み合わせの各々では、異なる通信方式で通信される。
 更に、上記例では、ドローンにおけるモデム対通信器の組み合わせも、1対1であるが(図20等)、2個以上対1個でも、1個対2個以上、複数個対複数個の組み合わせでもよい。
 以上説明した実施の形態及び各変形例では、ドローンを用いて説明したが、本開示の技術はこれに限定されない。例えば、ドローンに代えて、その他の無人飛行機、例えば、無線操縦可能な飛行機及び無線操縦可能な無人ヘリコプタ、更には、有人航空機、例えば、無線操縦可能な人が乗ることができるヘリコプタを用いてもよい。
 本開示において、各構成要素(装置等)は、矛盾が生じない限りは、1つのみ存在しても2つ以上存在してもよい。
 以上説明した各例では、コンピュータを利用したソフトウェア構成により上記各処理が実現される場合を例示したが、本開示の技術はこれに限定されるものではない。例えば、コンピュータを利用したソフトウェア構成に代えて、FPGA(Field-Programmable Gate Array)またはASIC(Application Specific Integrated Circuit)等のハードウェア構成のみによって、上記各処理が実行されるようにしてもよい。上記各処理のうちの一部の処理がソフトウェア構成により実行され、残りの処理がハードウェア構成によって実行されるようにしてもよい。
  なお、上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)、CD-ROM(Read Only Memory)CD-R、CD-R/W、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(Random Access Memory))を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
 以上説明した上記各処理はあくまでも一例である。従って、主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよいことは言うまでもない。
 本明細書に記載された全ての文献、特許出願、及び技術規格は、個々の文献、特許出願、及び技術規格が参照により取り込まれることが具体的にかつ個々に記載された場合と同様に、本明細書中に参照により取り込まれる。

Claims (22)

  1.  第1の無線通信をする第1の通信部と、
     前記第1の無線通信と異なる第2の無線通信をする第2の通信部と、
     データが監視装置に送信されるように前記第1の通信部及び前記第2の通信部を制御する制御部と、
     を備える航空機。
  2.  前記第1の通信部は、第1の間接無線通信方式で前記第1の無線通信をし、
     前記第2の通信部は、前記第1の間接無線通信方式と異なる第2の間接無線通信方式で前記第2の無線通信をする、
     請求項1に記載の航空機。
  3.  前記第1の通信部及び前記第2の通信部は、前記監視装置が接続されるインターネットを介して間接無線通信する、請求項2に記載の航空機。
  4.  前記第1の間接無線通信方式と前記第2の間接無線通信方式では、通信のプロトコルが異なる、請求項2又は請求項3に記載の航空機。
  5.  前記第1の通信部は、第1の直接無線通信方式で前記第1の無線通信をし、
     前記第2の通信部は、前記第1の直接無線通信方式と異なる第2の直接無線通信方式で前記第2の無線通信をする、
     請求項1に記載の航空機。
  6.  前記第1の直接無線通信方式と前記第2の直接無線通信方式では、通信の周波数が異なる、請求項5に記載の航空機。
  7.  前記第1の通信部は、間接無線通信方式又は直接無線通信方式で前記第1の無線通信をし、
     前記第2の通信部は、直接無線通信方式又は間接無線通信方式で前記第2の無線通信をする、
     請求項1に記載の航空機。
  8.  前記監視装置は、前記航空機が離陸する予定の第1の地点を含む第1の領域に配置された第1の監視装置及び前記航空機が着陸する予定の第2の地点を含む第2の領域に配置された第2の監視装置の少なくとも一方である、請求項1~請求項7の何れか1項に記載の航空機。
  9.  前記制御部は、前記データが、前記監視装置以外のサーバ装置に更に送信されるように前記第1の通信部及び前記第2の通信部を制御する、請求項1~請求項8の何れか1項に記載の航空機。
  10.  前記サーバ装置は、クラウドサーバ装置及びライブ配信サーバ装置の少なくとも一方である、請求項9に記載の航空機。
  11.  前記航空機の進行方向の領域を撮影する第1の撮影部と前記航空機を撮影する第2の撮影部とを更に備え、
     前記データは、前記第1の撮影部により撮影された前記航空機の進行方向の領域の画像及び前記第2の撮影部により撮影された前記航空機の画像の少なくとも一方の画像データを含む、請求項1~請求項10の何れか1項に記載の航空機。
  12.  前記航空機の状態を検出するセンサを更に備え、
     前記データは、前記センサにより検出された前記航空機の状態を示すセンサデータを含む、請求項1~請求項11の何れか1項に記載の航空機。
  13.  前記制御部は、前記データが前記第1の通信部及び前記第2の通信部の各々から同時又は交互に前記監視装置に送信されるように、前記第1の通信部及び前記第2の通信部を制御する、請求項1~請求項12の何れか1項に記載の航空機。
  14.  前記制御部は、前記第1の通信部及び前記第2の通信部の一方の通信に支障がある場合には、前記データが前記第1の通信部及び前記第2の通信部の他方から前記監視装置に送信されるように、前記第1の通信部及び前記第2の通信部を制御する、請求項1~請求項13の何れか1項に記載の航空機。
  15.  本体と、
     前記本体に接続される複数のアームと、
     前記複数のアームの各々の先端に設けられたモータと前記モータにより回転するプロペラと、
     前記制御部は、前記モータを更に制御する、
     請求項1~請求項14の何れか1項に記載の航空機。
  16.  前記制御部は、1個のフライトコントローラに設けられている、
     請求項1~請求項15の何れか1項に記載の航空機。
  17.  前記制御部は、
     第1のフライトコントローラに設けられている第1の制御部と、
     前記第1のフライトコントローラと異なる第2のフライトコントローラに設けられている第2の制御部と、
     である、請求項1~請求項15の何れか1項に記載の航空機。
  18.  前記第1の通信部は、第1の通信制御装置に設けられ、
     前記第2の通信部は、第2の通信制御装置に設けられている、
     請求項1~請求項15の何れか1項に記載の航空機。
  19.  前記第1の通信部及び前記第2の通信部は、1個の通信制御装置に設けられている、
     請求項1~請求項15の何れか1項に記載の航空機。
  20.  表示部と、
     請求項1~請求項19の何れか1項に記載の航空機の前記第1の通信部及び前記第2の通信部のそれぞれと前記第1の無線通信及び第2の無線親のそれぞれをする第1の無線通信部及び第2の無線通信部と、
     前記第1の無線通信部及び前記無線通信部により受信されたデータが表示されるように前記表示部を制御する制御部と、
     を備える監視装置。
  21.  各々異なる無線通信をする複数の通信部と、
     データが監視装置に送信されるように前記複数の通信部を制御する制御部と、
     を備える航空機。
  22.  表示部と、
     請求項21の航空機と各々異なる無線通信をする複数の無線通信部と、
     前記無線通信部により受信されたデータが表示されるように前記表示部を制御する制御部と、
     を備える監視装置。
PCT/JP2022/016519 2022-03-31 2022-03-31 航空機及び監視装置 WO2023188270A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/JP2022/016519 WO2023188270A1 (ja) 2022-03-31 2022-03-31 航空機及び監視装置
PCT/JP2023/013137 WO2023190847A1 (ja) 2022-03-31 2023-03-30 航空機

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2022/016519 WO2023188270A1 (ja) 2022-03-31 2022-03-31 航空機及び監視装置

Publications (1)

Publication Number Publication Date
WO2023188270A1 true WO2023188270A1 (ja) 2023-10-05

Family

ID=88199876

Family Applications (2)

Application Number Title Priority Date Filing Date
PCT/JP2022/016519 WO2023188270A1 (ja) 2022-03-31 2022-03-31 航空機及び監視装置
PCT/JP2023/013137 WO2023190847A1 (ja) 2022-03-31 2023-03-30 航空機

Family Applications After (1)

Application Number Title Priority Date Filing Date
PCT/JP2023/013137 WO2023190847A1 (ja) 2022-03-31 2023-03-30 航空機

Country Status (1)

Country Link
WO (2) WO2023188270A1 (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150230150A1 (en) * 2014-02-10 2015-08-13 SZ DJI Technology Co., Ltd Adaptive communication mode switching
US20160253907A1 (en) * 2015-01-29 2016-09-01 Qualcomm Incorporated Systems and Methods for Restricting Drone Airspace Access
WO2018105576A1 (ja) * 2016-12-05 2018-06-14 Kddi株式会社 飛行装置、制御装置、通信制御方法、及び制御方法
JP2020196440A (ja) * 2018-03-28 2020-12-10 株式会社ナイルワークス 無人飛行体
JP2021179976A (ja) * 2019-07-25 2021-11-18 株式会社プロドローン 遠隔操縦システムおよびその操縦装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150230150A1 (en) * 2014-02-10 2015-08-13 SZ DJI Technology Co., Ltd Adaptive communication mode switching
US20160253907A1 (en) * 2015-01-29 2016-09-01 Qualcomm Incorporated Systems and Methods for Restricting Drone Airspace Access
WO2018105576A1 (ja) * 2016-12-05 2018-06-14 Kddi株式会社 飛行装置、制御装置、通信制御方法、及び制御方法
JP2020196440A (ja) * 2018-03-28 2020-12-10 株式会社ナイルワークス 無人飛行体
JP2021179976A (ja) * 2019-07-25 2021-11-18 株式会社プロドローン 遠隔操縦システムおよびその操縦装置

Also Published As

Publication number Publication date
WO2023190847A1 (ja) 2023-10-05

Similar Documents

Publication Publication Date Title
US10454576B2 (en) UAV network
WO2019113727A1 (zh) 无人飞行器返航方法、装置、存储介质和无人飞行器
WO2017114501A1 (en) Uav network
CN111781954B (zh) 无人机巡检控制方法及装置
CN106708050B (zh) 一种图像采集方法及能够自主移动的设备
EP4040783A1 (en) Imaging device, camera-equipped drone, and mode control method, and program
US11884406B2 (en) Parachute landing methods and systems for an unmanned aerial vehicle
CN108924520B (zh) 传输控制方法、装置、控制器、拍摄设备及飞行器
CN111422081A (zh) 无人机巡航系统
US20220013015A1 (en) Situation-aware, intelligent data-synchronization methods for uav-inspection applications
US11575832B2 (en) Imaging device, camera-mounted drone, mode control method, and program
TW201939187A (zh) 管理機器人式運載工具的有限安全模式操作
WO2022262558A1 (zh) 一种无人机调度方法、系统及相关设备
US20220164179A1 (en) Unmanned aerial vehicle updater
US11620911B2 (en) Management device and flying device management method
WO2023188270A1 (ja) 航空機及び監視装置
JP2019026121A (ja) 無人航空機制御システム、その制御方法、及びプログラム
CN109508029B (zh) 无人机及其控制方法、装置、系统和计算机可读存储介质
WO2023173323A1 (zh) 无人机的功耗控制方法、装置、系统及存储介质
WO2020107465A1 (zh) 控制方法、无人机和计算机可读存储介质
EP3919374A1 (en) Image capturing method
WO2022027337A1 (zh) 可移动平台的控制系统、控制方法、设备及存储介质
CN110017737B (zh) 基于飞行器的配电方法及装置
CN106886226A (zh) 一种无人机系统
CN113792016B (zh) 提取行车数据的方法、装置、设备和介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22933873

Country of ref document: EP

Kind code of ref document: A1