JP2018055656A - Unmanned aircraft control system, and control method and program for the same - Google Patents

Unmanned aircraft control system, and control method and program for the same Download PDF

Info

Publication number
JP2018055656A
JP2018055656A JP2016194899A JP2016194899A JP2018055656A JP 2018055656 A JP2018055656 A JP 2018055656A JP 2016194899 A JP2016194899 A JP 2016194899A JP 2016194899 A JP2016194899 A JP 2016194899A JP 2018055656 A JP2018055656 A JP 2018055656A
Authority
JP
Japan
Prior art keywords
unmanned aircraft
network camera
unmanned
control system
aerial vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016194899A
Other languages
Japanese (ja)
Other versions
JP6575476B2 (en
JP2018055656A5 (en
Inventor
浩 長井
Hiroshi Nagai
浩 長井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Marketing Japan Inc
Original Assignee
Canon Marketing Japan Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Marketing Japan Inc filed Critical Canon Marketing Japan Inc
Priority to JP2016194899A priority Critical patent/JP6575476B2/en
Publication of JP2018055656A publication Critical patent/JP2018055656A/en
Publication of JP2018055656A5 publication Critical patent/JP2018055656A5/ja
Application granted granted Critical
Publication of JP6575476B2 publication Critical patent/JP6575476B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Studio Devices (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Selective Calling Equipment (AREA)
  • Alarm Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a mechanism capable of limiting operation of an unmanned aircraft while the aircraft is not photographed with a network camera.SOLUTION: An unmanned aircraft control system in which an unmanned aircraft, a network camera capable of photographing the unmanned aircraft, and an information processing device for providing instructions to the unmanned aircraft are connected together via a network has: photographing status determination means for determining whether or not the network camera is photographing the unmanned aircraft; and operation limiting means for limiting operation of the unmanned aircraft upon determination by the photographing status determination means that the network camera is not photographing the unmanned aircraft.SELECTED DRAWING: Figure 1

Description

無人航空機と遠隔操作端末との間の通信方式を、通信状況に応じて決定することの可能な無人航空機制御システム、その制御方法、及びプログラムに関する。   The present invention relates to an unmanned aerial vehicle control system capable of determining a communication method between an unmanned aerial vehicle and a remote control terminal according to a communication situation, a control method thereof, and a program.

従来、人が搭乗していない航空機である無人航空機が存在する。無人航空機は、大型なものから小型なものまで様々であるが、特に近年では遠隔操縦可能な小型の無人航空機(通称:ドローン)が注目されている(以下、小型の無人航空機を単に無人航空機と称する。)。   Conventionally, there is an unmanned aerial vehicle that is an aircraft on which a person is not on board. Unmanned aerial vehicles vary from large to small, but in recent years, small unmanned aerial vehicles (commonly called drones) that can be remotely controlled have attracted attention (hereinafter, small unmanned aerial vehicles are simply referred to as unmanned aerial vehicles). Called).

無人航空機は、クワッドコプターやマルチコプターとも呼ばれ、複数の回転翼を備えており、この回転翼の回転数を増減させることで、無人航空機の前進・後退・旋回・ホバリング等を行う。   An unmanned aerial vehicle is also called a quadcopter or a multicopter, and includes a plurality of rotor blades. By increasing or decreasing the number of rotations of the rotor blades, the unmanned aircraft advances, retreats, turns, and hovers.

こうした無人航空機は、プロポと呼ばれる遠隔操作端末からの動作指示に応じて動作するほか、モニタや入力装置が一体となった操作卓から制御することも可能である。   Such an unmanned aerial vehicle can be operated in response to an operation instruction from a remote operation terminal called a propo, and can be controlled from a console with an integrated monitor and input device.

また、ネットワークに接続可能なネットワークカメラをお天気カメラや監視カメラとして利用することが行われている。   In addition, network cameras that can be connected to a network are used as weather cameras and surveillance cameras.

特許文献1には、地上から撮影する監視カメラと、上空から撮影する映像部を有する飛行装置とを備えた監視システムにおいて、監視領域において撮影された画像を補完し、その画像中の領域の状況を把握するのに適した他の画像を得ることができる監視システムが提案されている。   In Patent Document 1, in a surveillance system including a surveillance camera that captures images from the ground and a flying device that includes a video unit that captures images from above, the image captured in the monitoring region is complemented, and the state of the region in the image A monitoring system that can obtain other images suitable for grasping the image has been proposed.

特開2016−118994号公報Japanese Patent Laid-Open No. 2006-118994

特許文献1では、監視カメラで撮影できないところを飛行装置によって補完するので、監視カメラが撮影できない領域も飛行装置によって撮影できてしまうようになっている。   In Japanese Patent Laid-Open No. 2004-26883, a place that cannot be photographed by the surveillance camera is supplemented by the flying device, so that an area that cannot be photographed by the surveillance camera can also be photographed by the flying device.

しかしながら、ネットワークカメラは、撮影可能領域を設定可能になっていることからも分かるように、撮影してはいけない領域が存在する場合がある。このような場合、撮影してはいけない領域を無人航空機によって自由に飛行・撮影されてしまうと問題が発生する場合があり、一定の制限を設けたいという要望がある。また、ネットカメラが無人航空機の動作を監視しておきたいという要望もある。   However, as can be seen from the fact that the network camera is capable of setting the shootable area, there may be areas that should not be shot. In such a case, a problem may occur if an area that should not be photographed is freely flew and photographed by an unmanned aircraft, and there is a demand for setting a certain restriction. There is also a demand for the net camera to monitor the operation of the unmanned aircraft.

そこで、本発明では、ネットワークカメラに撮影されていない状況で無人航空機の動作を制限可能な仕組みを提供することを目的とする。   Therefore, an object of the present invention is to provide a mechanism capable of restricting the operation of an unmanned aerial vehicle in a situation where no image is taken by a network camera.

無人航空機と、前記無人航空機を撮影可能なネットワークカメラ、および前記無人航空機に指示を行うための情報処理装置とがネットワークを介して接続された無人航空機制御システムであって、前記ネットワークカメラが前記無人航空機を撮影しているかどうかを判定する撮影状況判定手段と、前記撮影状況判定手段により、前記ネットワークカメラが前記無人航空機を撮影していない判定される場合に、前記無人航空機の動作を制限する動作制限手段と、を有することを特徴とする。   An unmanned aerial vehicle control system in which an unmanned aircraft, a network camera capable of photographing the unmanned aircraft, and an information processing apparatus for instructing the unmanned aircraft are connected via a network, the network camera being the unmanned aircraft An operation for restricting the operation of the unmanned aircraft when the network camera determines that the network camera is not photographing the unmanned aircraft by the photographing situation determination unit that determines whether or not the aircraft is photographed. And limiting means.

本発明によれば、 そこで、本発明では、ネットワークカメラに撮影されていない状況で無人航空機の動作を制限可能な仕組みを提供することを目的とする。   Therefore, according to the present invention, it is an object of the present invention to provide a mechanism capable of restricting the operation of an unmanned aerial vehicle in a situation where no image is taken by a network camera.

本発明の実施形態における、無人航空機制御システムのシステム構成の一例を示す図である。It is a figure which shows an example of the system configuration | structure of an unmanned aerial vehicle control system in embodiment of this invention. 無人航空機101のハードウェア構成の一例を示す図である。2 is a diagram illustrating an example of a hardware configuration of an unmanned aircraft 101. FIG. ネットワークカメラ103のハードウェア構成の一例を示す図である。2 is a diagram illustrating an example of a hardware configuration of a network camera 103. FIG. 無人航空機制御システムの機能構成の一例を示す図である。It is a figure which shows an example of a function structure of an unmanned aircraft control system. 制御用コンピュータ105に表示される操作画面の一例を示す図である。5 is a diagram illustrating an example of an operation screen displayed on a control computer 105. FIG. ネットワークカメラ103に設定された各種データの一例を示す図である。6 is a diagram illustrating an example of various data set in the network camera 103. FIG. 無人航空機101より取得する位置情報の一例を示す図である。It is a figure which shows an example of the positional information acquired from the unmanned aircraft 101. 無人航空機制御システムの動作制限情報の一例を示す図である。It is a figure which shows an example of the operation | movement restriction information of an unmanned aircraft control system. 第1の実施形態における、無人航空機の制御処理の一例を示すフローチャートである。It is a flowchart which shows an example of the control process of an unmanned aerial vehicle in 1st Embodiment. 第2の実施形態における、無人航空機の制御処理の一例を示すフローチャートである。It is a flowchart which shows an example of the control process of an unmanned aerial vehicle in 2nd Embodiment. 機能制限処理の一例を示すフローチャートである。It is a flowchart which shows an example of a function restriction | limiting process. 第2の実施形態における無人航空機が撮影された状態の一例を示す図である。It is a figure which shows an example of the state by which the unmanned aircraft in 2nd Embodiment was image | photographed.

以下、図面を参照して、本発明の実施形態を詳細に説明する。まず、第一の実施形態について説明する。
図1は、本実施形態における無人航空機制御システムのシステム構成を示す図である。
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. First, the first embodiment will be described.
FIG. 1 is a diagram showing a system configuration of an unmanned aerial vehicle control system according to the present embodiment.

本実施形態の無人航空機制御システムは、無人航空機101、プロポ102、ネットワークカメラ103、中継用BOX104、制御用コンピュータ105、および操作卓106が、ネットワーク110や無線LAN(移動体通信網を含む)120を介して通信接続可能に接続されている。尚、図1のシステム構成は一例であり、用途や目的に応じて様々な構成例がある。   The unmanned aerial vehicle control system according to the present embodiment includes an unmanned aircraft 101, a transmitter 102, a network camera 103, a relay BOX 104, a control computer 105, and a console 106, a network 110 and a wireless LAN (including a mobile communication network) 120. It is connected so that communication connection is possible via. Note that the system configuration in FIG. 1 is an example, and there are various configuration examples depending on the application and purpose.

ドローンとも呼ばれる無人航空機101は、プロポ102により遠隔操縦が可能な無人の航空機である。プロポ102からの指示に応じて、複数の回転翼を動作させて飛行する。   An unmanned aerial vehicle 101, also called a drone, is an unmanned aircraft that can be remotely controlled by a prop 102. In response to an instruction from the propo 102, the plurality of rotor blades are operated to fly.

この回転翼の回転数を増減させることで、無人航空機の前進・後退・旋回・ホバリング等を行う。尚、図1に示す無人航空機101の回転翼は4枚であるが、これに限らない。3枚であっても、6枚であっても、8枚であってもよい。   By increasing or decreasing the rotational speed of the rotor blades, the unmanned aircraft moves forward, backward, turns, hovers, and the like. Although the unmanned aircraft 101 shown in FIG. 1 has four rotor blades, the present invention is not limited to this. There may be three, six, or eight.

また、無人航空機101は、無線で飛行するものと有線で飛行するものとがあり、本発明ではどちらの方式で飛行しても構わないものとする。   The unmanned aerial vehicle 101 includes those that fly by radio and those that fly by wire. In the present invention, either method may be used.

プロポ102は、無人航空機101を操縦するための送信機(遠隔操作端末)である。プロポーショナル・システム(比例制御システム)であるので、プロポ102が有する操作部の移動量に比例して、無人航空機101の回転翼の回転数を制御することができる。尚、プロポ102は、いわゆるスマートフォンやタブレット端末といった携帯端末であってもよい。   The transmitter 102 is a transmitter (remote control terminal) for operating the unmanned aerial vehicle 101. Since it is a proportional system (proportional control system), the rotational speed of the rotor blades of the unmanned aerial vehicle 101 can be controlled in proportion to the amount of movement of the operation unit of the prop 102. The propo 102 may be a mobile terminal such as a so-called smartphone or tablet terminal.

ネットワークカメラ103は、無人航空機101を撮影可能な位置に設置され、(無人航空機101がネットワークカメラ103に撮影可能な位置を飛行する。)無人航空機101または他の撮影対象を撮影する。   The network camera 103 is installed at a position where the unmanned aerial vehicle 101 can be photographed, and photographs the unmanned aircraft 101 or other photographing objects (the unmanned aircraft 101 flies over a position where the network camera 103 can photograph).

例えば、ビルの屋上などに設置されお天気カメラとして利用することもできるし、建物の出入り口や街中に設置され監視カメラとして利用することもできる。   For example, it can be used as a weather camera installed on the roof of a building, or can be used as a surveillance camera installed at the entrance of a building or in the city.

ネットワークカメラ103は、レンズおよびカメラを内蔵し、その撮影方向を可変させるため、カメラのレンズの向きを左右に動かすパン、上下に動かすチルト、そして、望遠にしたり広角にしたりするズームの機能を有し、遠隔地から操作(PTZ制御)できるようになっている。   The network camera 103 incorporates a lens and a camera, and has a pan function for moving the camera lens to the left and right, a tilt for moving the camera up and down, and a zoom function for making it telephoto and wide-angle in order to change the shooting direction. However, it can be operated from a remote location (PTZ control).

中継BOX104は、ネットワークカメラ103や無人航空機101に対して電源を供給したり、操作卓106からの制御信号を伝えたりする機能を有する。   The relay BOX 104 has a function of supplying power to the network camera 103 and the unmanned aircraft 101 and transmitting a control signal from the console 106.

制御用コンピュータ105(情報処理装置)や操作卓106は、ネットワークカメラ103が設置された場所と物理的に距離が離れた遠隔地に設置されていてもよいし、例えば同一の敷地内等の物理的な距離はそれほど離れていない近距離に設置されていてもよい。   The control computer 105 (information processing apparatus) and the console 106 may be installed in a remote place that is physically separated from the place where the network camera 103 is installed. The general distance may be set at a short distance that is not so far away.

また、複数の無人航空機101やネットワークカメラ103をまとめて管理する集中管理センターに設定することも可能である。   It is also possible to set a centralized management center that collectively manages a plurality of unmanned aircraft 101 and network cameras 103.

制御用コンピュータは、複数の無人航空機101やネットワークカメラ103を制御するための操作卓106の制御回線を接続する機器であり、操作卓106は、無人航空機101やネットワークカメラ103を制御するための機器である。   The control computer is a device that connects the control lines of the console 106 for controlling the plurality of unmanned aircraft 101 and the network camera 103, and the console 106 is a device for controlling the unmanned aircraft 101 and the network camera 103. It is.

ネットワーク110および無線LAN120は、本無人航空機制御システムの各機器を接続するネットワークであって、各機器は、ネットワークで接続されていても無線LANで接続されていても、移動体通信網で接続されていても本システムは実施可能なものである。   The network 110 and the wireless LAN 120 are networks that connect each device of the unmanned aerial vehicle control system. Each device is connected by a mobile communication network, whether connected by a network or a wireless LAN. However, this system can be implemented.

図2は、無人航空機101のハードウェア構成を示す図である。尚、図2に示す無人航空機101のハードウェア構成は一例であり、用途や目的に応じて様々な構成例がある。   FIG. 2 is a diagram illustrating a hardware configuration of the unmanned aerial vehicle 101. Note that the hardware configuration of the unmanned aerial vehicle 101 shown in FIG. 2 is an example, and there are various configuration examples depending on the application and purpose.

フライトコントローラ200は無人航空機101の飛行制御を行うためのマイクロコントローラであり、CPU201、ROM202、RAM203、周辺バスインタフェース204(以下、周辺バスI/F204という。)を備えている。   The flight controller 200 is a microcontroller for performing flight control of the unmanned aerial vehicle 101, and includes a CPU 201, a ROM 202, a RAM 203, and a peripheral bus interface 204 (hereinafter referred to as a peripheral bus I / F 204).

CPU201は、システムバスに接続される各デバイスを統括的に制御する。また、ROM202あるいは周辺バスI/F304に接続される外部メモリ280には、CPU201の制御プログラムであるBIOS(Basic Input/Output System)やオペレーティングシステムプログラムが記憶されている。   The CPU 201 comprehensively controls each device connected to the system bus. The external memory 280 connected to the ROM 202 or the peripheral bus I / F 304 stores a basic input / output system (BIOS) that is a control program of the CPU 201 and an operating system program.

また外部メモリ280(記憶手段)には、無人航空機101の実行する機能を実現するために必要な各種プログラム等が記憶されている。RAM203(記憶手段)は、CPU201の主メモリ、ワークエリア等として機能する。   The external memory 280 (storage means) stores various programs and the like necessary for realizing the functions executed by the unmanned aircraft 101. A RAM 203 (storage means) functions as a main memory, work area, and the like for the CPU 201.

CPU201は、処理の実行に際して必要なプログラム等をRAM203にロードして、プログラムを実行することで各種動作を実現するものである。   The CPU 201 implements various operations by loading a program necessary for execution of processing into the RAM 203 and executing the program.

周辺バスI/F204は、各種周辺デバイスと接続するためのインタフェースである。周辺バスI/F204には、PMU210、SIMアダプタ220、無線LAN用BBユニット230、移動体通信用BBユニット240、GPSユニット250、センサ260、GCU270、外部メモリ280が接続されている。   The peripheral bus I / F 204 is an interface for connecting to various peripheral devices. Connected to the peripheral bus I / F 204 are a PMU 210, a SIM adapter 220, a wireless LAN BB unit 230, a mobile communication BB unit 240, a GPS unit 250, a sensor 260, a GCU 270, and an external memory 280.

PMU210はパワーマネジメントユニットであり、無人航空機101が備えるバッテリからESC211への電源供給を制御することができる。ESC211は、エレクトロニックスピードコントローラであり、ESC211に接続されるモータ212の回転数を制御することができる。ESC211によってモータ212を回転させることで、モータ212に接続されるプロペラ213(回転翼)を回転させる。   The PMU 210 is a power management unit and can control power supply from the battery included in the unmanned aircraft 101 to the ESC 211. The ESC 211 is an electronic speed controller and can control the rotation speed of the motor 212 connected to the ESC 211. By rotating the motor 212 using the ESC 211, the propeller 213 (rotary blade) connected to the motor 212 is rotated.

尚、ESC211、モータ212、プロペラ213のセットは、プロペラ213の数に応じて複数備えられている。例えば、クアッドコプターであれば、プロペラ213の数は4枚であるので、このセットが4つ必要となる。   Note that a plurality of sets of ESCs 211, motors 212, and propellers 213 are provided according to the number of propellers 213. For example, in the case of a quadcopter, the number of propellers 213 is four, so four sets are required.

SIMアダプタ220は、SIMカード221を挿入するためのカードアダプタである。SIMカード221の種類は特に問わない。移動体通信網を提供する通信事業者に応じたSIMカード221であればよい。   The SIM adapter 220 is a card adapter for inserting the SIM card 221. The type of the SIM card 221 is not particularly limited. Any SIM card 221 may be used depending on the carrier that provides the mobile communication network.

無線LAN用BBユニット230は、無線LANを介して通信を行うためのベースバンドユニットである。無線LAN用BBユニット230は、送信したいデータや信号からベースバンド信号を生成して変復調回路へ送出することができる。更に、受信したベースバンド信号から元のデータや信号を得ることができる。   The wireless LAN BB unit 230 is a baseband unit for performing communication via a wireless LAN. The wireless LAN BB unit 230 can generate a baseband signal from data or signals to be transmitted and send it to the modem circuit. Furthermore, original data and signals can be obtained from the received baseband signal.

また、無線LAN用RFユニット231は、無線LANを介して通信を行うためのRF(Radio Frequency)ユニットである。無線LAN用RFユニット231は、無線LAN用BBユニット230から送出されたベースバンド信号を無線LANの周波数帯に変調してアンテナから送信することができる。更に、無線LANの周波数帯の信号を受信すると、これをベースバンド信号に復調することができる。   The wireless LAN RF unit 231 is an RF (Radio Frequency) unit for performing communication via a wireless LAN. The wireless LAN RF unit 231 can modulate the baseband signal transmitted from the wireless LAN BB unit 230 into the frequency band of the wireless LAN and transmit it from the antenna. Furthermore, when a signal in the wireless LAN frequency band is received, it can be demodulated into a baseband signal.

移動体通信用BBユニット240は、移動体通信網を介して通信を行うためのベースバンドユニットである。移動体通信用BBユニット240は、送信したいデータや信号からベースバンド信号を生成して変復調回路へ送出することができる。更に、受信したベースバンド信号から元のデータや信号を得ることができる。   The mobile communication BB unit 240 is a baseband unit for performing communication via a mobile communication network. The mobile communication BB unit 240 can generate a baseband signal from data or signals to be transmitted and send it to the modem circuit. Furthermore, original data and signals can be obtained from the received baseband signal.

また、移動体通信用RFユニット241は、移動体通信網を介して通信を行うためのRF(Radio Frequency)ユニットである。移動体通信用RFユニット241は、移動体通信用BBユニット240から送出されたベースバンド信号を移動体通信網の周波数帯に変調してアンテナから送信することができる。更に、移動体通信網の周波数帯の信号を受信すると、これをベースバンド信号に復調することができる。   The mobile communication RF unit 241 is an RF (Radio Frequency) unit for performing communication via a mobile communication network. The mobile communication RF unit 241 can modulate the baseband signal transmitted from the mobile communication BB unit 240 into the frequency band of the mobile communication network and transmit it from the antenna. Further, when a signal in the frequency band of the mobile communication network is received, it can be demodulated into a baseband signal.

GPSユニット250は、グローバルポジショニングシステムにより、無人航空機101の現在位置を取得することの可能な受信機である。GPSユニット250は、GPS衛星からの信号を受信し、現在位置を推定することができる。   The GPS unit 250 is a receiver that can acquire the current position of the unmanned aerial vehicle 101 using a global positioning system. The GPS unit 250 can receive a signal from a GPS satellite and estimate the current position.

センサ260は、無人航空機101の傾き、向き、速度や周りの環境を計測するためのセンサである。無人航空機101はセンサ260として、ジャイロセンサ、加速度センサ、気圧センサ、磁気センサ、超音波センサ等を備えている。これらのセンサから取得したデータに基づいて、CPU201が無人航空機101の姿勢や移動を制御する。   The sensor 260 is a sensor for measuring the tilt, direction, speed, and surrounding environment of the unmanned aircraft 101. The unmanned aircraft 101 includes a gyro sensor, an acceleration sensor, an atmospheric pressure sensor, a magnetic sensor, an ultrasonic sensor, and the like as the sensor 260. Based on the data acquired from these sensors, the CPU 201 controls the attitude and movement of the unmanned aerial vehicle 101.

GCU270はジンバルコントロールユニットであり、カメラ271とジンバル272の動作を制御するためのユニットである。無人航空機101が飛行することにより機体に振動が発生したり、機体が不安定になったりするため、カメラ271で撮像した際にブレが発生しないよう、ジンバル272によって無人航空機101の振動を吸収し水平を維持する。また、ジンバル272によってカメラ271の遠隔操作を行うことも可能である。   The GCU 270 is a gimbal control unit and is a unit for controlling the operations of the camera 271 and the gimbal 272. The unmanned aerial vehicle 101 will vibrate or become unstable when the unmanned aerial vehicle 101 flies. Therefore, the gimbal 272 absorbs the vibration of the unmanned aerial vehicle 101 so that the camera 271 does not shake when captured by the camera 271. Maintain level. Further, the camera 271 can be remotely operated by the gimbal 272.

本発明の無人航空機101が後述する各種処理を実行するために用いられる各種プログラム等は外部メモリ280に記録されており、必要に応じてRAM203にロードされることによりCPU201によって実行されるものである。さらに、本発明に係わるプログラムが用いる定義ファイルや各種情報テーブルは外部メモリ280に格納されている。
図3は、ネットワークカメラ102のハードウェアの構成を示す構成図である。
CPU301は、システムバス304に接続される各デバイスやコントローラを統括的に制御する。
Various programs and the like used by the unmanned aerial vehicle 101 of the present invention to execute various processes, which will be described later, are recorded in the external memory 280 and are executed by the CPU 201 by being loaded into the RAM 203 as necessary. . Furthermore, definition files and various information tables used by the program according to the present invention are stored in the external memory 280.
FIG. 3 is a configuration diagram illustrating a hardware configuration of the network camera 102.
The CPU 301 comprehensively controls each device and controller connected to the system bus 304.

また、ROM302あるいは外部メモリ305には、CPU301の制御プログラムであるBIOS(Basic Input / Output System)やオペレーティングシステムプログラム(以下、OS)や、画像処理サーバ108の実行する機能を実現するために必要な後述する各種プログラム等が記憶されている。RAM303は、CPU301の主メモリ、ワークエリア等として機能する。   Further, the ROM 302 or the external memory 305 is necessary for realizing the functions executed by the BIOS (Basic Input / Output System), the operating system program (hereinafter referred to as OS), and the image processing server 108, which are control programs of the CPU 301. Various programs to be described later are stored. A RAM 303 functions as a main memory, work area, and the like for the CPU 301.

CPU301は、処理の実行に際して必要なプログラム等をRAM303にロードして、プログラムを実行することで各種動作を実現するものである。   The CPU 301 implements various operations by loading a program or the like necessary for execution of processing into the RAM 303 and executing the program.

メモリコントローラ(MC)306は、ブートプログラム、各種のアプリケーション、フォントデータ、ユーザファイル、編集ファイル、各種データ、画像データ等を記憶するハードディスク(HD)やPCMCIAカードスロットにアダプタを介して接続されるコンパクトフラッシュメモリやスマートメディア(登録商標)等の外部メモリ305へのアクセスを制御する。   The memory controller (MC) 306 is a compact connected via an adapter to a hard disk (HD) or PCMCIA card slot for storing a boot program, various applications, font data, user files, editing files, various data, image data, and the like. Controls access to an external memory 305 such as a flash memory or smart media (registered trademark).

カメラ部307は、画像処理部308と接続されており、監視対象に対して向けられたレンズを透過して得られた光をCCDやCMOS等の受光セルによって光電変換を行った後、RGB信号や補色信号を画像処理部308に対して出力する。   The camera unit 307 is connected to the image processing unit 308 and performs photoelectric conversion on the light obtained through the lens directed toward the monitoring target by a light receiving cell such as a CCD or CMOS, and then outputs an RGB signal. Or a complementary color signal is output to the image processing unit 308.

画像処理部308は、RGB信号や捕色信号に基づいて、ホワイトバランス調整、ガンマ処理、シャープネス処理を行い、更に、YC信号処理を施して輝度信号Yとクロマ信号(以下、YC信号)を生成し、YC信号を所定の圧縮形式(例えばJPEGフォーマット、あるいはMotionJPEGフォーマット等)で圧縮し、この圧縮されたデータは、画像データとして外部メモリ305へ一時保管される。   The image processing unit 308 performs white balance adjustment, gamma processing, and sharpness processing based on the RGB signal and the color collection signal, and further performs YC signal processing to generate a luminance signal Y and a chroma signal (hereinafter referred to as YC signal). Then, the YC signal is compressed in a predetermined compression format (for example, JPEG format or Motion JPEG format), and the compressed data is temporarily stored in the external memory 305 as image data.

通信I/Fコントローラ(通信I/FC)309は、ネットワークを介して、外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行しており、外部メモリ305に記憶された画像データは、通信I/Fコントローラ309によって外部機器へ送信される。   A communication I / F controller (communication I / FC) 309 connects and communicates with an external device via a network, executes communication control processing on the network, and stores an image stored in the external memory 305. Data is transmitted to the external device by the communication I / F controller 309.

図4は、無人航空機制御システムの機能構成の一例を示す図である。尚、図4に示す無人航空機101及びネットワークカメラ103の機能構成は一例であり、用途や目的に応じて様々な構成例がある。   FIG. 4 is a diagram illustrating an example of a functional configuration of the unmanned aerial vehicle control system. Note that the functional configurations of the unmanned aerial vehicle 101 and the network camera 103 shown in FIG. 4 are merely examples, and there are various configuration examples depending on applications and purposes.

無人航空機101は機能部として、飛行制御部411、無線LAN通信制御部412、移動体通信制御部413、GPS制御部414、センサ制御部415、撮像制御部416を備える。   The unmanned aircraft 101 includes a flight control unit 411, a wireless LAN communication control unit 412, a mobile communication control unit 413, a GPS control unit 414, a sensor control unit 415, and an imaging control unit 416 as functional units.

飛行制御部411は、無人航空機101の飛行を制御するための機能部である。無人航空機101が備える複数の回転翼を、プロポ102や中継BOX104や制御用コンピュータ105からの指示に応じて回転させ、前進・後退・旋回・ホバリング等を行う。   The flight control unit 411 is a functional unit for controlling the flight of the unmanned aircraft 101. A plurality of rotor blades included in the unmanned aerial vehicle 101 are rotated in accordance with instructions from the transmitter 102, the relay BOX 104, and the control computer 105 to perform forward movement, backward movement, turning, hovering, and the like.

無線LAN通信制御部412は、プロポ102との間で無線LANを介した通信を行うための機能部である。   The wireless LAN communication control unit 412 is a functional unit for performing communication with the transmitter 102 via the wireless LAN.

移動体通信制御部413は、プロポ102との間で移動体通信網を介した通信を行うための機能部である。移動体通信制御部413は、移動体通信用BBユニット240及び移動体通信用RFユニット241を制御し、移動体通信網の周波数帯に変調して信号を送信、また移動体通信網の周波数帯の信号を受信するとこれを復調する。   The mobile communication control unit 413 is a functional unit for performing communication with the transmitter 102 via the mobile communication network. The mobile communication control unit 413 controls the mobile communication BB unit 240 and the mobile communication RF unit 241, modulates the frequency to the mobile communication network, transmits a signal, and transmits the frequency band of the mobile communication network. When the signal is received, it is demodulated.

GPS制御部414は、無人航空機101の現在位置を取得するための機能部である。GPS制御部414は、GPSユニット250を制御してGPS衛星からの信号を受信し、無人航空機101の現在位置を推定する。   The GPS control unit 414 is a functional unit for acquiring the current position of the unmanned aircraft 101. The GPS control unit 414 controls the GPS unit 250 to receive a signal from a GPS satellite, and estimates the current position of the unmanned aircraft 101.

センサ制御部415は、センサ260で検出した情報を取得するための機能部である。無人航空機101が備える、ジャイロセンサ、加速度センサ、気圧センサ、磁気センサ、超音波センサ等の各種センサが検出した情報を常時取得し、飛行制御部411の飛行制御に用いる。   The sensor control unit 415 is a functional unit for acquiring information detected by the sensor 260. Information detected by various sensors such as a gyro sensor, an acceleration sensor, an atmospheric pressure sensor, a magnetic sensor, and an ultrasonic sensor included in the unmanned aircraft 101 is always acquired and used for flight control of the flight control unit 411.

撮像制御部416は、GCU270を介してカメラ271に撮像動作を行わせ、画像データを得るための機能部である。プロポ102からの指示に応じてカメラ271で撮像を行い、生成された画像データを外部メモリ280等に記憶する。または、生成された画像データをプロポ102や中継BOX103や制御用コンピュータ105に送信してもよい。   The imaging control unit 416 is a functional unit for obtaining image data by causing the camera 271 to perform an imaging operation via the GCU 270. The camera 271 captures an image in response to an instruction from the transmitter 102, and the generated image data is stored in the external memory 280 or the like. Alternatively, the generated image data may be transmitted to the transmitter 102, the relay BOX 103, and the control computer 105.

また、撮像制御部416は、プロポ102などからの指示に応じて、GCU270を介してジンバル272の動作制御を行い、カメラ271の撮像方向を制御することも可能である。   In addition, the imaging control unit 416 can also control the imaging direction of the camera 271 by controlling the operation of the gimbal 272 via the GCU 270 in response to an instruction from the transmitter 102 or the like.

また制御用コンピュータ105は機能部として、無人航空機撮影部421、無人航空機検知部422、ネットワークカメラ制御部423、および無人航空機制御部424を有する。
無人航空機撮影421は、ネットワークカメラ103に無人航空機を撮影させる機能を有する。
The control computer 105 includes an unmanned aircraft imaging unit 421, an unmanned aircraft detection unit 422, a network camera control unit 423, and an unmanned aircraft control unit 424 as functional units.
The unmanned aerial photography 421 has a function of causing the network camera 103 to photograph an unmanned aircraft.

無人航空機検知部422は、無人航空機から位置情報を取得することにより、無人航空機が飛行している(または存在している)位置情報を取得する機能を有する。   The unmanned aerial vehicle detection unit 422 has a function of acquiring position information where the unmanned aircraft is flying (or present) by acquiring position information from the unmanned aircraft.

ネットワークカメラ制御部423は、無人航空機撮影部421により受付けた命令に従ってネットワークカメラを制御したり、実際にネットワークカメラの制御をしたりすることができる。   The network camera control unit 423 can control the network camera in accordance with an instruction received by the unmanned aircraft imaging unit 421, or can actually control the network camera.

無人航空機制御部424は、動作制限を受ける無人航空機に対して、所定の機能制限を行う制御部である。
図5は、制御用コンピュータ105に表示される操作画面の一例を示す図である。
The unmanned aerial vehicle control unit 424 is a control unit that performs a predetermined function restriction on the unmanned aerial vehicle subjected to the operation restriction.
FIG. 5 is a diagram illustrating an example of an operation screen displayed on the control computer 105.

操作画面501は、ドローン502(無人航空機)、ネットワークカメラ503を操作する操作卓508と接続するための画面である。   The operation screen 501 is a screen for connecting to a console 508 for operating the drone 502 (unmanned aircraft) and the network camera 503.

ドローン502とネットワークカメラ503はタブによって切り替えで表示することが可能となっている。   The drone 502 and the network camera 503 can be switched and displayed by tabs.

図の例では、ドローン502のタブが表示されており、ドローン01(504)およびドローン03(505)は未接続で、ドローン02(504)は、操作卓Aに接続されている。すなわち操作卓Aでドローン02およびカメラ01を制御することが可能に接続されている。
同様に、ネットワークカメラ503を開くと、どの操作卓に接続されているのかが表示される。
In the example shown in the drawing, the tab of the drone 502 is displayed, the drone 01 (504) and the drone 03 (505) are not connected, and the drone 02 (504) is connected to the console A. In other words, the console A is connected so that the drone 02 and the camera 01 can be controlled.
Similarly, when the network camera 503 is opened, which console is connected is displayed.

操作卓508には、操作卓A509、操作卓510、および操作卓C511が選択可能に表示されている。操作卓とドローンを選択し、接続ボタン506を押下することで操作可能に接続される。切断507を押下すると接続が切断される。
図の例では、操作卓A509がドローン02およびカメラ01と接続されていることがわかる。
図6は、ネットワークカメラ103に設定された各種データの一例を示す図である。
On console 508, console A 509, console 510, and console C 511 are displayed in a selectable manner. The operator console and the drone are selected, and the connection button 506 is pressed so that the operation is possible. When the disconnect 507 is pressed, the connection is disconnected.
In the illustrated example, it can be seen that the console A509 is connected to the drone 02 and the camera 01.
FIG. 6 is a diagram illustrating an example of various data set in the network camera 103.

カメラNo601、パン稼働範囲602、チルト稼働範囲603、備考604、および非撮影領域606が設定されている。   A camera No. 601, a pan operation range 602, a tilt operation range 603, a remark 604, and a non-photographing area 606 are set.

カメラNoは、カメラの番号や識別な名称が設定されている。パン稼働範囲602は、パンの角度データで、設置に真北の方角とパンの角度データを合わせこんだものが記憶されている。   The camera number is set with a camera number or an identifying name. The pan operation range 602 stores pan angle data that is obtained by combining the true north direction and pan angle data with the installation.

チルト稼働範囲603は、チルトの稼働範囲が設定されており、備考604には、ネットワークカメラの領域制限が設定されている。   The tilt operating range 603 is set to the tilt operating range, and the remarks 604 is set to limit the area of the network camera.

非撮影禁止領域606とは、ネットワークカメラで撮影できない領域のことであり、これが無人航空機の非撮影領域として設定され、この領域はで無人航空機の機能を制限するようになっている。撮影可能な領域を記憶する撮影可能領域(撮影可能領域記憶手段)としてもよい。
図7は、無人航空機101より取得する位置情報の一例を示す図である。
The non-photographing prohibited area 606 is an area that cannot be photographed by the network camera, and is set as a non-photographing area of the unmanned aerial vehicle, which restricts the function of the unmanned aircraft. A shootable area (shootable area storage unit) that stores a shootable area may be used.
FIG. 7 is a diagram illustrating an example of position information acquired from the unmanned aerial vehicle 101.

実際に飛行している無人航空機が取得可能な情報であり、ドローンNo701に対応して、経度702、緯度703、高度704、備考705の情報をそれぞれのドローンから取得し記録されるものである。
本無人航空機制御システムは、この情報を利用して無人航空機の機能制限を行う。
図8は、無人航空機制御システムの動作制限情報の一例を示す図である。
It is information that can be acquired by an unmanned aircraft that is actually flying, and information on longitude 702, latitude 703, altitude 704, and remarks 705 is acquired from each drone and recorded corresponding to drone No701.
The unmanned aerial vehicle control system uses this information to limit the functions of the unmanned aerial vehicle.
FIG. 8 is a diagram illustrating an example of operation restriction information of the unmanned aircraft control system.

本発明では、所定の条件を満たさない場合に、無人航空機の動作制限を行うようになっており、動作制限情報について説明する。
カメラNo801、ドローンNo802、および機能制限803の情報を有している。
In the present invention, when the predetermined condition is not satisfied, the operation restriction of the unmanned aircraft is performed, and the operation restriction information will be described.
Information on camera No. 801, drone No. 802, and function restriction 803 is included.

カメラNo801は、No.3(カメラ01)からNo.3(カメラ03)まで3台が設定されており、設置されている地域で区別されるようにしてもよい。   Camera No. 801 is No. 3 (camera 01) to No.3. Three cameras up to 3 (camera 03) may be set, and may be distinguished by the area where they are installed.

ドローンNo802は、カメラNoとセットになったドローンの番号が記録されており、例えば東京のカメラであるNo.1のカメラには、ドローンNoがNo.1〜No.3が対応付いている。   In the drone No. 802, the number of the drone set together with the camera No. is recorded. No. 1 has a drone No. 1-No. 3 is associated.

機能制限803には、機能制限の内容が記録されている。カメラ01と対応付いたドローン01の機能制限は、「制限領域の外には出られない」設定がされており、ドローン01は、カメラ01に設定された領域以外には出られないように機能制限される。   In the function restriction 803, the contents of the function restriction are recorded. The function restriction of the drone 01 associated with the camera 01 is set to “cannot go outside the restricted area”, and the drone 01 functions so as not to go outside the area set for the camera 01. Limited.

「ネットワークカメラのパン動作に従う」の場合は、ネットワークカメラの操作に連動したパン動作が行われ、「カメラの映像を断」する場合は、映像にマスクしたり、黒画面にしたり、テキスト情報を出力して映像の制限を行ったりする。   When “follow network camera panning” is selected, panning is performed in conjunction with network camera operation, and when “camera image is cut off”, the video is masked, blackened, or text information is displayed. Output and restrict the video.

「撮影不可」の場合は、該当するドローンの撮影機能がオフになるように制限され、「センサー機能停止」の場合は、ドローンの有するセンサーの機能が停止される。なお、全てのセンサーを機能停止の対象としてもよいし、あらかじめ選択された種類のセンサーの機能を停止するようにしてもよい。
「基地に戻る」場合は、ドローンを所定の基地まで戻すよう制御される。
図9は、第1の実施形態における、無人航空機の制御処理の一例を示すフローチャートである。
In the case of “capable of photographing”, the photographing function of the corresponding drone is limited to be turned off, and in the case of “stop sensor function”, the function of the sensor of the drone is stopped. It should be noted that all sensors may be subject to function stop, or the function of a pre-selected type of sensor may be stopped.
In the case of “returning to the base”, the drone is controlled to return to the predetermined base.
FIG. 9 is a flowchart illustrating an example of control processing for an unmanned aerial vehicle according to the first embodiment.

ステップS901で、操作卓より無人航空機(ドローン)の選択を受付けると、ステップS902では、図8の機能制限情報から対応するネットワークカメラを特定する。   If the selection of the unmanned aircraft (drone) is accepted from the console in step S901, the corresponding network camera is specified from the function restriction information in FIG. 8 in step S902.

ネットワークカメラの情報を取得すると、無人航空機の制御を許可状態として、無人航空機の操作を受付ける。操作は、操作卓から行ってもよいし、プロポから行うようにしてもよい。   When the network camera information is acquired, the control of the unmanned aircraft is permitted and the operation of the unmanned aircraft is accepted. The operation may be performed from a console or from a radio.

ステップS904では、ドローンが操作中かどうかを判定し、操作中の場合は、無人航空機の飛行位置を取得するとともに飛行領域の判定を行い、ステップS913までの処理を繰り返し、操作が終了されると処理を終了する。   In step S904, it is determined whether the drone is being operated. If the drone is being operated, the flight position of the unmanned aircraft is acquired, the flight region is determined, the processing up to step S913 is repeated, and the operation ends. The process ends.

ステップS905では、図7に記憶されているドローンから取得された位置情報から緯度情報を取得し、図6に設定された非撮影禁止領域606に該当するかを判定する。   In step S905, latitude information is acquired from the position information acquired from the drone stored in FIG. 7, and it is determined whether it corresponds to the non-shooting prohibited area 606 set in FIG.

非撮影領域でない(範囲内)と判定された場合は、ステップS906に進み(特に処理は行わず)、ステップS908に進む。一方、非撮影領域である(範囲外)と判定された場合には、ステップS907に進み動作制限処理を行う。   If it is determined that the area is not a non-photographing area (within range), the process proceeds to step S906 (no particular processing is performed), and the process proceeds to step S908. On the other hand, if it is determined that the area is a non-photographing area (out of range), the process proceeds to step S907 to perform an operation restriction process.

ステップS908では、ステップS905と同様に経度が範囲内かどうかの判定を行い、範囲内の場合は、ステップS909に進み、範囲外(非撮影禁止領域)の場合は、ステップS910に進み動作制限処理を行う。   In step S908, it is determined whether the longitude is within the range as in step S905. If it is within the range, the process proceeds to step S909. If it is out of the range (non-shooting prohibited area), the process proceeds to step S910, and the operation restriction process is performed. I do.

ステップS911では、ステップS905やステップS908と同様に、パン動作の範囲内かどうかの判定を行う。   In step S911, as in step S905 and step S908, it is determined whether the pan operation is within the range.

パン動作範囲内であった場合には、ステップS912に進み、パン動作範囲外であった場合にはステップS913に進み動作制限を行う。   If it is within the pan operation range, the process proceeds to step S912, and if it is out of the pan operation range, the process proceeds to step S913 to limit the operation.

このように、第1の実施形態では、ドローンに対応付いたネットワークカメラの領域制限を利用し、ドローンがネットワークカメラの領域制限か外れてしまう場合には動作制限するようにした。
図10は、第2の実施形態における、無人航空機の制御処理の一例を示すフローチャートである。
As described above, in the first embodiment, the area limitation of the network camera corresponding to the drone is used, and the operation is limited when the drone falls outside the area limitation of the network camera.
FIG. 10 is a flowchart illustrating an example of control processing for an unmanned aerial vehicle according to the second embodiment.

第2の実施形態では、ドローンが対応するネットワークカメラから撮影可能な状態でない場合には動作制限するようにした。詳細について説明する。   In the second embodiment, the operation is restricted when the drone is not ready to shoot from the corresponding network camera. Details will be described.

ステップS1001で、操作卓より無人航空機(ドローン)の選択を受付けると、ステップS1002で、対応するネットワークカメラで撮影可能かどうかを判定する。撮影可能かどうかは、例えば、ネットワークカメラとドローンが通信できるかどうか、また、ネットワークカメラで対象のドローンを撮影できているかなど撮影状況を利用して判定することができる。
図12は、第2の実施形態における無人航空機が撮影された状態の一例を示す図である。
If selection of an unmanned aerial vehicle (drone) is accepted from the console in step S1001, it is determined in step S1002 whether the corresponding network camera can shoot. Whether or not shooting is possible can be determined using the shooting situation such as whether or not the network camera and the drone can communicate and whether or not the target drone can be shot by the network camera.
FIG. 12 is a diagram illustrating an example of a state in which an unmanned aerial vehicle according to the second embodiment is captured.

ネットワークカメラ1201と無人航空機1203が対応付いているものとして説明する。対応付いているとは、図8に示したように、カメラ03(池袋)であればとドローン07とのペアであり、ネットワークカメラの撮影範囲1202に無人航空機1203が存在すれば動作制限は受けないことになる。
動作制限を受ける場合、ネットワークカメラから撮影されない状態となると基地に戻るよう制御される。
Description will be made assuming that the network camera 1201 and the unmanned aircraft 1203 are associated with each other. As shown in FIG. 8, the correspondence is a pair of the camera 03 (Ikebukuro) and the drone 07. If the unmanned aircraft 1203 exists in the shooting range 1202 of the network camera, the operation is limited. There will be no.
When the operation is restricted, the camera is controlled to return to the base when it is not photographed from the network camera.

図10の説明に戻る。ステップS1002でドローンが撮影不可とされた場合、ドローンの飛行を許可せずに処理を終了する。一方、撮影可能であった場合は、飛行を許可しステップS1003に進む。   Returning to the description of FIG. If it is determined in step S1002 that the drone cannot be photographed, the process ends without permitting the drone to fly. On the other hand, if the photographing is possible, the flight is permitted and the process proceeds to step S1003.

ステップS1003では、ドローンが飛行中かどうかの判定を行い、飛行中の場合は、ステップS1006までの処理を繰り返し、飛行が終了すると処理を終了する。   In step S1003, it is determined whether or not the drone is in flight. If the drone is in flight, the process up to step S1006 is repeated, and the process ends when the flight ends.

ステップS1004では、飛行中のドローンがネットワークカメラで撮影可能かどうかの判定を行い(ステップS1002は、飛行前のドローンが撮影可能かどうか)、撮影可能な場合は、ステップS1005に進み、(特に何も処理をせず)ステップS1003に進み、飛行中かどうかの判定に戻る。   In step S1004, it is determined whether or not the drone in flight can be photographed with a network camera (step S1002 is whether or not the drone before flight can be photographed). The process proceeds to step S1003, and the process returns to the determination of whether or not the flight is in progress.

一方、ネットワークカメラで撮影できないと判定された場合はステップS1006に進み、動作制限処理を行う。
図11は、動作制限処理の一例を示すフローチャートである。
On the other hand, if it is determined that the image cannot be taken by the network camera, the process proceeds to step S1006 to perform an operation restriction process.
FIG. 11 is a flowchart illustrating an example of the operation restriction process.

ステップS1101で、対象のネットワークカメラとドローンの組み合わせに対応した機能制限を図8の動作制限情報より取得する。   In step S1101, the function restriction corresponding to the combination of the target network camera and the drone is acquired from the operation restriction information in FIG.

ステップS1102で機能制限の判定を行い、「操作を無効」であればステップS1103に進み、「カメラの映像を断」であればステップS1104に進み、「基地に戻る」であればステップS1105に進む。   In step S1102, the function restriction is determined. If “operation is invalid”, the process proceeds to step S1103. If “camera image is cut off”, the process proceeds to step S1104. If “return to base” is performed, the process proceeds to step S1105. .

なお、機能制限は本フローチャートで示した以外でも、動作制限情報として設定されているものが対象となることはいうまでもない。   Needless to say, the function restrictions other than those shown in this flowchart are targets set as operation restriction information.

ステップS1103では、ドローンの操作を一時的に無効とし処理を終了する。再度ネットワークカメラによって撮影可能となることで無効状態が解除される。   In step S1103, the drone operation is temporarily invalidated, and the process ends. The disabled state is canceled by enabling the network camera to take a picture again.

ステップs1104では、ドローンが撮影したカメラ映像の出力を断ち、処理を終了する。映像の断とは、マスク・黒塗り・文字による断などがあげられる。   In step s1104, the output of the camera image taken by the drone is cut off, and the process ends. Examples of video interruptions include masks, black painting, and characters.

ステップS1105では、ドローンに対して設定された基地まで対象のドローンを戻すよう制御して処理を終了する。   In step S1105, control is performed to return the target drone to the base set for the drone, and the process ends.

本発明は、例えば、システム、装置、方法、プログラム若しくは記憶媒体等としての実施形態も可能であり、具体的には、複数の機器から構成されるシステムに適用してもよいし、また、1つの機器からなる装置に適用してもよい。   The present invention can be implemented as a system, apparatus, method, program, storage medium, or the like, and can be applied to a system including a plurality of devices. You may apply to the apparatus which consists of one apparatus.

なお、本発明は、前述した実施形態の機能を実現するソフトウェアのプログラムを、システム或いは装置に直接、或いは遠隔から供給するものを含む。そして、そのシステム或いは装置のコンピュータが前記供給されたプログラムコードを読み出して実行することによっても達成される場合も本発明に含まれる。   Note that the present invention includes a software program that implements the functions of the above-described embodiments directly or remotely from a system or apparatus. The present invention also includes a case where the system or the computer of the apparatus is achieved by reading and executing the supplied program code.

したがって、本発明の機能処理をコンピュータで実現(実行可能と)するために、前記コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明は、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。   Therefore, in order to realize (executable) the functional processing of the present invention by a computer, the program code itself installed in the computer also realizes the present invention. In other words, the present invention includes a computer program itself for realizing the functional processing of the present invention.

その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、OSに供給するスクリプトデータ等の形態であってもよい。   In that case, as long as it has the function of a program, it may be in the form of object code, a program executed by an interpreter, script data supplied to the OS, and the like.

プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、MO、CD−ROM、CD−R、CD−RWなどがある。また、磁気テープ、不揮発性のメモリカード、ROM、DVD(DVD−ROM,DVD−R)などもある。   Examples of the recording medium for supplying the program include a flexible disk, hard disk, optical disk, magneto-optical disk, MO, CD-ROM, CD-R, and CD-RW. In addition, there are magnetic tape, nonvolatile memory card, ROM, DVD (DVD-ROM, DVD-R), and the like.

その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続する。そして、前記ホームページから本発明のコンピュータプログラムそのもの、若しくは圧縮され自動インストール機能を含むファイルをハードディスク等の記録媒体にダウンロードすることによっても供給できる。   As another program supply method, a browser on a client computer is used to connect to an Internet home page. The computer program itself of the present invention or a compressed file including an automatic installation function can be downloaded from the homepage by downloading it to a recording medium such as a hard disk.

また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるWWWサーバも、本発明に含まれるものである。   It can also be realized by dividing the program code constituting the program of the present invention into a plurality of files and downloading each file from a different homepage. That is, a WWW server that allows a plurality of users to download a program file for realizing the functional processing of the present invention on a computer is also included in the present invention.

また、本発明のプログラムを暗号化してCD−ROM等の記憶媒体に格納してユーザに配布し、所定の条件をクリアしたユーザに対し、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせる。そして、ダウンロードした鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて実現することも可能である。   In addition, the program of the present invention is encrypted, stored in a storage medium such as a CD-ROM, distributed to users, and key information for decryption is downloaded from a homepage via the Internet to users who have cleared predetermined conditions. Let It is also possible to execute the encrypted program by using the downloaded key information and install the program on a computer.

また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される。その他、そのプログラムの指示に基づき、コンピュータ上で稼動しているOSなどが、実際の処理の一部又は全部を行い、その処理によっても前述した実施形態の機能が実現され得る。   Further, the functions of the above-described embodiments are realized by the computer executing the read program. In addition, based on the instructions of the program, an OS or the like running on the computer performs part or all of the actual processing, and the functions of the above-described embodiments can also be realized by the processing.

さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれる。その後、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPUなどが実際の処理の一部又は全部を行い、その処理によっても前述した実施形態の機能が実現される。   Further, the program read from the recording medium is written in a memory provided in a function expansion board inserted into the computer or a function expansion unit connected to the computer. Thereafter, the CPU of the function expansion board or function expansion unit performs part or all of the actual processing based on the instructions of the program, and the functions of the above-described embodiments are realized by the processing.

なお、前述した実施形態は、本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。即ち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。   The above-described embodiments are merely examples of implementation in carrying out the present invention, and the technical scope of the present invention should not be construed as being limited thereto. That is, the present invention can be implemented in various forms without departing from the technical idea or the main features thereof.

101 無人航空機
102 プロポ
103 ネットワークカメラ

101 Unmanned Aircraft 102 Propo 103 Network Camera

Claims (7)

無人航空機と、前記無人航空機を撮影可能なネットワークカメラ、および前記無人航空機に指示を行うための情報処理装置とがネットワークを介して接続された無人航空機制御システムであって、
前記ネットワークカメラが前記無人航空機を撮影しているかどうかを判定する撮影状況判定手段と、
前記撮影状況判定手段により、前記ネットワークカメラが前記無人航空機を撮影していない判定される場合に、前記無人航空機の動作を制限する動作制限手段と、
を有することを特徴とする無人航空機制御システム。
An unmanned aircraft control system in which an unmanned aircraft, a network camera capable of photographing the unmanned aircraft, and an information processing device for instructing the unmanned aircraft are connected via a network,
A shooting situation determination means for determining whether the network camera is shooting the unmanned aircraft;
An operation restricting means for restricting the operation of the unmanned aircraft when the photographing situation determining means determines that the network camera is not photographing the unmanned aircraft;
An unmanned aerial vehicle control system.
前記撮影状況判定手段は、前記ネットワークカメラが前記無人航空機を撮影可能な状態であるかどうかの判定を行うことができ、
前記撮影状況判定手段により前記無人航空機を撮影可能な状態にないと判定された場合には、前記無人航空機を動作させないよう制御することを特徴とする請求項2記載の無人航空機制御システム。
The shooting situation determination means can determine whether the network camera is in a state in which the unmanned aircraft can be shot,
3. The unmanned aerial vehicle control system according to claim 2, wherein when the shooting situation determination unit determines that the unmanned aircraft is not in a state in which the unmanned aircraft can be shot, the unmanned aircraft control system is controlled so as not to operate.
前記動作制限は、前記無人航空機の撮影するカメラ映像を断することを特徴とする請求項1または2記載の無人航空機制御システム。   The unmanned aircraft control system according to claim 1 or 2, wherein the operation restriction cuts off a camera image taken by the unmanned aircraft. 前記動作制限は、前記無人航空機を当該無人航空機の基地に戻すことを特徴とする請求項1乃至3のいずれか1項に記載の無人航空機制御システム。   The unmanned aircraft control system according to any one of claims 1 to 3, wherein the operation restriction returns the unmanned aircraft to a base of the unmanned aircraft. 前記無人航空機を撮影可能なネットワークカメラの撮影可能領域を記憶する撮影可能領域記憶手段を更に有し、
前記動作制限は、前記ネットワークカメラの撮影可能領域の外には出られないように制限することを特徴とする請求項1乃至4記載の無人航空機制御システム。
And further comprising a shootable area storage means for storing a shootable area of a network camera capable of shooting the unmanned aircraft,
5. The unmanned aerial vehicle control system according to claim 1, wherein the operation restriction is performed so as not to go out of a shootable area of the network camera.
無人航空機と、前記無人航空機を撮影可能なネットワークカメラ、および前記無人航空機に指示を行うための情報処理装置とがネットワークを介して接続された無人航空機制御システムの制御方法であって、
前記ネットワークカメラが前記無人航空機を撮影しているかどうかを判定する撮影状況判定ステップと、
前記撮影状況判定手段により、前記ネットワークカメラが前記無人航空機を撮影していない判定される場合に、前記無人航空機の動作を制限する動作制限ステップと、
を有することを特徴とする無人航空機制御システムの制御方法。
A control method for an unmanned aerial vehicle control system in which an unmanned aircraft, a network camera capable of photographing the unmanned aircraft, and an information processing apparatus for instructing the unmanned aircraft are connected via a network,
A shooting situation determination step for determining whether the network camera is shooting the unmanned aircraft;
An operation restriction step for restricting the operation of the unmanned aircraft when the photographing situation determination means determines that the network camera is not photographing the unmanned aircraft;
A control method for an unmanned aerial vehicle control system, comprising:
無人航空機と、前記無人航空機を撮影可能なネットワークカメラ、および前記無人航空機に指示を行うための情報処理装置とがネットワークを介して接続された無人航空機制御システムで読み取り可能なプログラムであって、
前記無人航空機制御システムを、
前記ネットワークカメラが前記無人航空機を撮影しているかどうかを判定する撮影状況判定手段と、
前記撮影状況判定手段により、前記ネットワークカメラが前記無人航空機を撮影していない判定される場合に、前記無人航空機の動作を制限する動作制限手段と、
を有することを特徴とする無人航空機制御システムとして機能させるためのプログラム。

A program readable by an unmanned aerial vehicle control system in which an unmanned aircraft, a network camera capable of photographing the unmanned aircraft, and an information processing apparatus for instructing the unmanned aircraft are connected via a network,
The unmanned aerial vehicle control system,
A shooting situation determination means for determining whether the network camera is shooting the unmanned aircraft;
An operation restricting means for restricting the operation of the unmanned aircraft when the photographing situation determining means determines that the network camera is not photographing the unmanned aircraft;
A program for causing an unmanned aircraft control system to function.

JP2016194899A 2016-09-30 2016-09-30 Unmanned aircraft control system, control method thereof, and program Active JP6575476B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016194899A JP6575476B2 (en) 2016-09-30 2016-09-30 Unmanned aircraft control system, control method thereof, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016194899A JP6575476B2 (en) 2016-09-30 2016-09-30 Unmanned aircraft control system, control method thereof, and program

Publications (3)

Publication Number Publication Date
JP2018055656A true JP2018055656A (en) 2018-04-05
JP2018055656A5 JP2018055656A5 (en) 2018-05-24
JP6575476B2 JP6575476B2 (en) 2019-09-18

Family

ID=61836774

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016194899A Active JP6575476B2 (en) 2016-09-30 2016-09-30 Unmanned aircraft control system, control method thereof, and program

Country Status (1)

Country Link
JP (1) JP6575476B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019181997A1 (en) 2018-03-23 2019-09-26 保土谷化学工業株式会社 Compound including benzimidazole ring structure and organic electroluminescent element
WO2020088399A1 (en) * 2018-10-30 2020-05-07 深圳市大疆创新科技有限公司 Information processing device, flight control method, and flight control system
WO2020110401A1 (en) * 2018-11-29 2020-06-04 パナソニックIpマネジメント株式会社 Unmanned aircraft, information processing method, and program
JP2020098500A (en) * 2018-12-18 2020-06-25 株式会社リアルグローブ Commanding device
JP2021013161A (en) * 2019-06-28 2021-02-04 株式会社Kohden Camera and camera system

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6947962B2 (en) * 2016-09-30 2021-10-13 キヤノンマーケティングジャパン株式会社 Unmanned aerial vehicle control system, its control method, and program

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006051864A (en) * 2004-08-10 2006-02-23 Seiko Epson Corp Automatic flight controlling system, and automatic flight controlling method
JP2006082774A (en) * 2004-09-17 2006-03-30 Hiroboo Kk Unmanned flying object and its controlling method
JP2007068195A (en) * 2006-09-25 2007-03-15 Hitachi Ltd Monitor service system
JP2016171442A (en) * 2015-03-12 2016-09-23 セコム株式会社 Monitoring system and flight robot
WO2017006421A1 (en) * 2015-07-06 2017-01-12 株式会社0 Rotorcraft landing device
WO2017170148A1 (en) * 2016-03-31 2017-10-05 株式会社ニコン Flight device, electronic device and program

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006051864A (en) * 2004-08-10 2006-02-23 Seiko Epson Corp Automatic flight controlling system, and automatic flight controlling method
JP2006082774A (en) * 2004-09-17 2006-03-30 Hiroboo Kk Unmanned flying object and its controlling method
JP2007068195A (en) * 2006-09-25 2007-03-15 Hitachi Ltd Monitor service system
JP2016171442A (en) * 2015-03-12 2016-09-23 セコム株式会社 Monitoring system and flight robot
WO2017006421A1 (en) * 2015-07-06 2017-01-12 株式会社0 Rotorcraft landing device
WO2017170148A1 (en) * 2016-03-31 2017-10-05 株式会社ニコン Flight device, electronic device and program

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019181997A1 (en) 2018-03-23 2019-09-26 保土谷化学工業株式会社 Compound including benzimidazole ring structure and organic electroluminescent element
WO2020088399A1 (en) * 2018-10-30 2020-05-07 深圳市大疆创新科技有限公司 Information processing device, flight control method, and flight control system
WO2020110401A1 (en) * 2018-11-29 2020-06-04 パナソニックIpマネジメント株式会社 Unmanned aircraft, information processing method, and program
JP2020098500A (en) * 2018-12-18 2020-06-25 株式会社リアルグローブ Commanding device
JP2021013161A (en) * 2019-06-28 2021-02-04 株式会社Kohden Camera and camera system

Also Published As

Publication number Publication date
JP6575476B2 (en) 2019-09-18

Similar Documents

Publication Publication Date Title
JP6575476B2 (en) Unmanned aircraft control system, control method thereof, and program
US20230175864A1 (en) Method, device and system for processing a flight task
WO2018020673A1 (en) Image management system and unmanned flying body
JP2018103936A (en) Unmanned aircraft control system, control method thereof, and program
WO2018205104A1 (en) Unmanned aerial vehicle capture control method, unmanned aerial vehicle capturing method, control terminal, unmanned aerial vehicle control device, and unmanned aerial vehicle
JP2018070010A (en) Unmanned aircraft controlling system, controlling method and program thereof
JP2018092237A (en) Unmanned aircraft control system, and control method and program of the same
JP6781375B2 (en) Unmanned aerial vehicle control system, its control method, and program
JP2019026121A (en) Unmanned aircraft control system, control method therefor, and program
EP4040783A1 (en) Imaging device, camera-equipped drone, and mode control method, and program
JP2019137398A (en) Information processing apparatus, control method of information processing apparatus, unmanned aerial vehicle, control method of unmanned aerial vehicle, and program
JP2018173960A (en) Information processing system, control method thereof and program
JP2018090012A (en) Unmanned aircraft control system, method for controlling unmanned aircraft control system, and program
JP6265576B1 (en) Imaging control apparatus, shadow position specifying apparatus, imaging system, moving object, imaging control method, shadow position specifying method, and program
JP6555226B2 (en) Unmanned aircraft control system, control method thereof, and program
WO2019241970A1 (en) Unmanned aerial vehicle speaker control method and device
KR101884125B1 (en) System for Self-Camera and Method using the same
JP6947962B2 (en) Unmanned aerial vehicle control system, its control method, and program
JP2018142907A (en) Information processing apparatus, control method and program of information processing apparatus
CN110383814B (en) Control method, unmanned aerial vehicle, remote control device and nonvolatile storage medium
JP2018174441A (en) Unmanned aerial vehicle control system, information processing apparatus, unmanned aerial vehicle, their control methods, and program
JP2019064349A (en) System, and control method, program of the same
JP7081198B2 (en) Shooting system and shooting control device
JP6826294B2 (en) System, its control method, and program
JP2018129577A (en) Imaging system, control method thereof, and program

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20161101

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20161101

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180323

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180323

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20180703

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20181031

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20190109

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190221

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190305

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190425

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190723

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190805

R151 Written notification of patent or utility model registration

Ref document number: 6575476

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250