JP6452665B2 - Flight apparatus and communication method - Google Patents
Flight apparatus and communication method Download PDFInfo
- Publication number
- JP6452665B2 JP6452665B2 JP2016236240A JP2016236240A JP6452665B2 JP 6452665 B2 JP6452665 B2 JP 6452665B2 JP 2016236240 A JP2016236240 A JP 2016236240A JP 2016236240 A JP2016236240 A JP 2016236240A JP 6452665 B2 JP6452665 B2 JP 6452665B2
- Authority
- JP
- Japan
- Prior art keywords
- captured image
- text data
- image data
- radio wave
- control unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004891 communication Methods 0.000 title claims description 125
- 238000000034 method Methods 0.000 title claims description 13
- 230000005540 biological transmission Effects 0.000 claims description 123
- 238000001514 detection method Methods 0.000 claims description 9
- 230000008569 process Effects 0.000 claims description 6
- 230000003247 decreasing effect Effects 0.000 claims description 2
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical compound C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 description 10
- 230000007246 mechanism Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000007423 decrease Effects 0.000 description 4
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000007792 addition Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Landscapes
- Selective Calling Equipment (AREA)
- Telephonic Communication Services (AREA)
Description
本発明は、外部からの制御に基づいて飛行する飛行装置、及び飛行装置における通信方法に関する。 The present invention relates to a flying device that flies based on control from the outside, and a communication method in the flying device.
近年、遠隔から操縦することができる飛行装置であるドローンが普及している。特許文献1には、飛行装置に搭載されたカメラによって周囲を撮影し、撮影した画像のデータを、ユーザが飛行装置の操作に用いる端末に送信する技術が開示されている。 In recent years, drones, which are flying devices that can be remotely controlled, have become widespread. Japanese Patent Application Laid-Open No. 2004-228561 discloses a technique in which the surroundings are photographed by a camera mounted on a flying device, and data of the photographed image is transmitted to a terminal used by a user to operate the flying device.
従来のシステムにおいては、無線通信回線を介して、カメラで撮影した画像データ、及び飛行装置を制御するための制御データを、ユーザの端末に送信する。このように、飛行装置が画像データと制御データを送信する場合、大容量の画像データを伝送している間は制御データを送信できず、制御データを操縦装置に送信するまでに遅延が発生してしまう。制御データの伝送が遅延すると、飛行装置の状態に応じた迅速な制御が困難になり、飛行装置の飛行性能が低下してしまうという問題があった。 In a conventional system, image data captured by a camera and control data for controlling a flying device are transmitted to a user terminal via a wireless communication line. In this way, when the flying device transmits image data and control data, control data cannot be transmitted while large-capacity image data is being transmitted, and a delay occurs until control data is transmitted to the control device. End up. When transmission of control data is delayed, there is a problem that rapid control according to the state of the flying device becomes difficult, and flight performance of the flying device deteriorates.
そこで、本発明はこれらの点に鑑みてなされたものであり、飛行装置と操縦装置との間で制御データ以外のデータが伝送される場合の飛行性能の低下を防ぐことができる飛行装置を提供することを目的とする。 Accordingly, the present invention has been made in view of these points, and provides a flying device that can prevent a decrease in flight performance when data other than control data is transmitted between the flying device and the control device. The purpose is to do.
本発明の第1の態様の飛行装置は、外部からの制御に基づいて飛行する飛行装置であって、飛行中の前記飛行装置の状態に関するテキストデータを生成するテキストデータ生成部と、飛行している位置の周辺を撮影して撮像画像データを生成する画像データ生成部と、前記撮像画像データの送信よりも優先して、前記飛行装置を操縦するための操縦装置に前記テキストデータを送信する送信制御部と、を有する。 A flying device according to a first aspect of the present invention is a flying device that flies based on control from the outside, a text data generating unit that generates text data relating to a state of the flying device in flight, and a flight An image data generation unit that captures the vicinity of a position and generates captured image data, and transmission that transmits the text data to a control device for operating the flying device in preference to the transmission of the captured image data And a control unit.
前記送信制御部は、前記テキストデータを送信する際に再送処理を継続する時間を、前記撮像画像データを送信する際に再送処理を継続する時間よりも長くしてもよい。
前記送信制御部は、前記テキストデータを送信するタイミングの前の所定の時間において、前記撮像画像データの量を減少させてもよい。
The transmission control unit may make the time for continuing the retransmission process when transmitting the text data longer than the time for continuing the retransmission process when transmitting the captured image data.
The transmission control unit may reduce the amount of the captured image data at a predetermined time before the timing of transmitting the text data.
また、前記送信制御部は、前記テキストデータを送信する間、前記撮像画像データの送信を停止してもよい。前記送信制御部は、前記テキストデータの送信を開始するタイミングの前の所定の時間において、前記撮像画像データの送信を停止してもよい。 The transmission control unit may stop transmitting the captured image data while transmitting the text data. The transmission control unit may stop the transmission of the captured image data at a predetermined time before the timing of starting the transmission of the text data.
前記送信制御部は、前記撮像画像データ及び前記テキストデータの送信に用いる無線通信回線の通信品質が所定の閾値以下に低下したことを条件として、撮像画像データの送信よりも優先して、前記飛行装置を操縦するための操縦装置に前記テキストデータを送信してもよい。 The transmission control unit has priority over the transmission of the captured image data on the condition that the communication quality of the wireless communication line used for transmitting the captured image data and the text data has decreased to a predetermined threshold value or less. The text data may be transmitted to a control device for operating the device.
飛行中の位置を検出する位置検出部をさらに有し、前記送信制御部は、前記位置検出部が検出した位置が所定のエリアに含まれることを条件として、撮像画像データの送信よりも優先して、前記飛行装置を操縦するための操縦装置に前記テキストデータを送信してもよい。 The transmission control unit further includes a position detection unit that detects a position in flight, and the transmission control unit has priority over transmission of captured image data on condition that the position detected by the position detection unit is included in a predetermined area. The text data may be transmitted to a control device for controlling the flying device.
前記送信制御部は、携帯電話網の基地局を介して前記操縦装置にデータを送信可能な第1無線通信回線及び携帯電話網の基地局を介さず前記操縦装置にデータを送信可能な第2無線通信回線を用いて前記テキストデータを送信可能であり、前記第1無線通信回線及び前記第2無線通信回線のうち、伝搬遅延時間が小さい無線通信回線を用いて前記テキストデータを送信し、前記第1無線通信回線及び前記第2無線通信回線のうち、伝搬遅延時間が大きい無線通信回線を用いて前記撮像画像データを送信してもよい。 The transmission control unit is capable of transmitting data to the control device without passing through a first wireless communication line capable of transmitting data to the control device via a base station of a mobile phone network and a base station of a mobile phone network. The text data can be transmitted using a wireless communication line, and the text data is transmitted using a wireless communication line having a small propagation delay time among the first wireless communication line and the second wireless communication line, The captured image data may be transmitted using a wireless communication line having a long propagation delay time among the first wireless communication line and the second wireless communication line.
前記送信制御部は、携帯電話網の基地局を介して前記操縦装置にデータを送信可能な第1電波及び携帯電話網の基地局を介さず前記操縦装置にデータを送信可能な第2電波を用いて前記テキストデータを送信可能であり、前記第1電波及び前記第2電波のうち、強度が大きい電波を用いて前記テキストデータを送信し、前記第1電波及び前記第2電波のうち、強度が小さい電波を用いて前記撮像画像データを送信してもよい。 The transmission control unit generates a first radio wave that can transmit data to the control device via a base station of a mobile phone network and a second radio wave that can transmit data to the control device without going through a base station of a mobile phone network. The text data can be transmitted using the first radio wave and the second radio wave, and the text data is transmitted using a radio wave having a high intensity, and the first radio wave and the second radio wave have an intensity. The captured image data may be transmitted using a radio wave having a small.
データの通信に用いられる前記第1電波の強度分布を示す電波状態情報を取得する取得部をさらに有し、前記送信制御部は、前記電波状態情報に基づいて特定した飛行経路上の前記第1電波の強度と、測定した前記第2電波の電波強度とに基づいて、前記テキストデータ及び前記撮像画像データを送信する電波を決定してもよい。 The wireless communication system further includes an acquisition unit that acquires radio wave state information indicating an intensity distribution of the first radio wave used for data communication, and the transmission control unit includes the first on the flight path specified based on the radio wave state information. The radio wave for transmitting the text data and the captured image data may be determined based on the radio wave intensity and the measured radio wave intensity of the second radio wave.
前記送信制御部は、前記電波状態情報に基づいて特定した、前記テキストデータを送信するタイミングと、飛行速度とに基づいて特定される前記テキストデータを送信する位置における前記第1電波の強度に基づいて、前記テキストデータを送信する間に前記撮像画像データを送信する電波を決定してもよい。 The transmission control unit is based on the intensity of the first radio wave at a position for transmitting the text data specified based on the timing of transmitting the text data specified based on the radio wave state information and the flight speed. The radio wave for transmitting the captured image data may be determined while transmitting the text data.
本発明の第2の態様の通信方法は、コンピュータが実行する、外部からの制御に基づいて空中を飛行する飛行装置の飛行中の状態に関するテキストデータを生成するステップと、飛行している位置の周辺を撮影して撮像画像データを生成するステップと、前記撮像画像データの送信よりも優先して、前記飛行装置を操縦するための操縦装置に前記テキストデータを送信するステップと、を有する。 A communication method according to a second aspect of the present invention includes a step of generating text data relating to an in-flight state of a flying device flying in the air based on external control executed by a computer; Photographing the periphery and generating captured image data; and prioritizing transmission of the captured image data and transmitting the text data to a control device for operating the flying device.
本発明によれば、飛行装置と操縦装置との間で制御データ以外のデータが伝送される場合の飛行性能の低下を防ぐことができるという効果を奏する。 According to the present invention, it is possible to prevent a decrease in flight performance when data other than control data is transmitted between the flying device and the control device.
<第1の実施形態>
[本実施の形態の概要]
図1は、本実施の形態に係る飛行システムSの構成を示す図である。飛行システムSは、飛行装置1と操縦装置2とを備える。飛行装置1は、ユーザが操縦装置2を用いて操縦可能な装置であり、例えばドローンである。操縦装置2は、プロポ、スマートフォン及びタブレットのように、飛行装置1を操縦するための制御情報を、無線通信回線を介して送信可能な端末である。
<First Embodiment>
[Outline of this embodiment]
FIG. 1 is a diagram showing a configuration of a flight system S according to the present embodiment. The flight system S includes a flying device 1 and a control device 2. The flying device 1 is a device that can be operated by the user using the control device 2, and is a drone, for example. The control device 2 is a terminal that can transmit control information for controlling the flying device 1 via a wireless communication line, such as a radio, a smartphone, and a tablet.
ユーザが操縦装置2を操作すると、操縦装置2は、操作内容に応じた制御情報を飛行装置1に送信する。飛行装置1は、操縦装置2から受信した制御情報を用いて飛行制御を行う。飛行制御とは、操縦装置2の飛行方向及び飛行速度の制御を含み、具体的には、操縦装置2が有するプロペラや方向舵を制御することである。また、飛行装置1は、飛行位置及び飛行速度等のような、操縦に必要な飛行情報を操縦装置2に送信する。飛行情報は、例えば、飛行装置1の位置、高度、速度、方向、姿勢(傾き)、風速、及び飛行装置1に電力を供給する電池の残量に関する情報である。飛行装置1はカメラを有しており、カメラで撮影して生成した撮像画像データを操縦装置2に送信する。 When the user operates the control device 2, the control device 2 transmits control information corresponding to the operation content to the flying device 1. The flying device 1 performs flight control using the control information received from the control device 2. The flight control includes control of the flight direction and flight speed of the control device 2, and specifically, controls the propeller and rudder of the control device 2. Further, the flying device 1 transmits flight information such as a flight position and a flight speed necessary for maneuvering to the maneuvering device 2. The flight information is, for example, information on the position, altitude, speed, direction, posture (tilt), wind speed, and remaining battery level for supplying power to the flying device 1. The flying device 1 has a camera and transmits captured image data generated by photographing with the camera to the control device 2.
飛行装置1は、無線通信回線を用いて飛行情報及び撮像画像データを送信することができる。操縦装置2は、無線通信回線を用いて、飛行装置1を制御するための制御情報を送信することができる。飛行装置1及び操縦装置2は、例えば、無線通信回線W11、携帯電話網の基地局3、及び無線通信回線W12を介して情報を送受信する。 The flying device 1 can transmit flight information and captured image data using a wireless communication line. The control device 2 can transmit control information for controlling the flying device 1 using a wireless communication line. The flying device 1 and the control device 2 transmit and receive information via, for example, the wireless communication line W11, the mobile phone network base station 3, and the wireless communication line W12.
無線通信回線W11及び無線通信回線W12は、例えばLTE(Long Term Evolution)回線である。無線通信回線W12は、携帯電話網の移動端末の一種である操縦装置2と基地局3との間の無線通信回線であり、無線通信回線W11は、携帯電話網の移動端末の一種である飛行装置1と基地局3との間の無線通信回線である。 The wireless communication line W11 and the wireless communication line W12 are, for example, LTE (Long Term Evolution) lines. The wireless communication line W12 is a wireless communication line between the control device 2 that is a kind of mobile terminal of the mobile phone network and the base station 3, and the wireless communication line W11 is a flight that is a kind of mobile terminal of the mobile phone network. A wireless communication line between the device 1 and the base station 3.
飛行装置1は、撮像画像データの送信よりも優先して、飛行装置を操縦するための操縦装置に対して、飛行中の飛行装置の状態に関するテキストデータ(例えば飛行情報)を送信する。このようにすることで、飛行システムSにおいては、飛行装置1が撮像画像データを送信する必要がある場合であっても、飛行装置1の操縦をするために重要な飛行情報が操縦装置2に届く確実性を向上させ、飛行装置1の飛行の安全性を確保することができる。
以下、飛行装置1の構成を詳細に説明する。
The flying device 1 transmits text data (for example, flight information) related to the state of the flying device in flight to the control device for maneuvering the flying device in preference to the transmission of the captured image data. In this manner, in the flight system S, even when the flying device 1 needs to transmit the captured image data, flight information important for operating the flying device 1 is transmitted to the flying device 2. The certainty of arrival can be improved, and the flight safety of the flying device 1 can be ensured.
Hereinafter, the configuration of the flying device 1 will be described in detail.
[飛行装置1の構成]
図2は、飛行装置1の構成を示す図である。飛行装置1は、検出部11と、カメラ12と、通信部13と、飛行機構14と、記憶部15と、制御部16とを有する。制御部16は、受信制御部161と、飛行制御部162と、テキストデータ生成部163と、撮像画像データ生成部164と、送信制御部165とを有する。
[Configuration of the flying device 1]
FIG. 2 is a diagram illustrating a configuration of the flying device 1. The flying device 1 includes a
検出部11は、例えば加速度センサ及びGPS(Global Positioning System)受信機を含み、飛行装置1の飛行速度、傾き及び飛行位置等のような飛行装置1の状態を特定するために用いられる情報をテキストデータ生成部163へと出力する。
カメラ12は、飛行装置1の周囲を撮影して撮像画像データを生成する。カメラ12は、生成した撮像画像データを撮像画像データ生成部164へと出力する。
The
The
通信部13は、無線通信回線W11で通信するための電波を送受信する通信モジュールである。通信部13は、送信制御部165から入力される送信データを変調する変調器、及び変調後のデータを、LTE回線に割り当てられている周波数帯の高周波信号として送信する高周波部を有する。また、通信部13は、高周波部が基地局3から受信した高周波信号を復調する復調器を有する。復調器は、復調後の受信データを受信制御部161に入力する。
The
飛行機構14は、プロペラ、プロペラを回転させるモーター及び方向舵等を含む。飛行機構14は、飛行制御部162の制御に基づいてこれらの機構を動作させることで、飛行速度及び飛行方向を変化させることができる。
The
記憶部15は、ROM(Read Only Memory)及びRAM(Random Access Memory)等を含む記憶媒体である。記憶部15は、制御部16が実行するプログラムを記憶している。また、記憶部15は、制御部16のワークメモリとして使用され、例えば操縦装置2から受信した制御情報を一時的に記憶する。
The
制御部16は、例えばCPU(Central Processing Unit)である。制御部16は、記憶部15に記憶されたプログラムを実行することにより、受信制御部161、飛行制御部162、テキストデータ生成部163、撮像画像データ生成部164及び送信制御部165として機能する。
The
受信制御部161は、無線通信回線W11を介して制御情報を受信する。受信制御部161は、通信部13が無線通信回線W11を介して受信した制御情報を記憶部15に記憶させ、制御情報を受信したことを飛行制御部162に通知する。
The
飛行制御部162は、操縦装置2から受信した制御情報に基づいて飛行機構14を制御することにより、飛行状態を制御する。飛行制御部162は、操縦装置2から受信した制御情報が、制御情報が生成された時刻を含んでいる場合、最新の時刻を含む制御情報に基づいて飛行状態を制御する。
The
テキストデータ生成部163は、飛行中の飛行装置1の状態に関するテキストデータを生成する。具体的には、テキストデータ生成部163は、検出部11が有する各種のセンサの出力値を示すテキストデータ、又は出力値に関連付けて予め定められた内容のテキストデータを生成する。テキストデータ生成部163は、例えば加速度センサの出力値に基づいて、飛行装置1の飛行速度、傾き及び飛行位置等を示すテキストデータを生成する。テキストデータ生成部163は、通信部13において検出された無線通信回線W11の電波強度を示す情報を含むテキストデータを生成してもよい。テキストデータ生成部163は、生成したテキストデータを送信制御部165に入力する。
The text
撮像画像データ生成部164は、飛行装置1が飛行している位置の周辺をカメラ12に撮影させて撮像画像データを生成する。撮像画像データ生成部164は、カメラ12から入力される画像信号に基づいて撮像画像データを生成する。撮像画像データ生成部164は、例えば、所定の時間ごとに、飛行している位置の周辺をカメラ12に周囲の画像を撮影するように指示し、カメラ12が出力した画像信号を取得して、撮影した時刻及び位置を示す情報を付加した撮像画像データを生成する。撮像画像データ生成部164は、生成した撮像画像データを送信制御部165に入力する。
The captured image
送信制御部165は、テキストデータ生成部163から入力されたテキストデータ、及び撮像画像データ生成部164から入力された撮像画像データを、通信部13を介して操縦装置2に送信する。送信制御部165は、撮像画像データの送信よりも優先して、飛行装置を操縦するための操縦装置にテキストデータを送信する。
The
送信制御部165は、例えば、撮像画像データ及びテキストデータの送信に用いる無線通信回線W11の通信品質が所定の閾値以下に低下していることを条件として、撮像画像データの送信よりも優先して、飛行装置を操縦するための操縦装置2にテキストデータを送信する優先制御を実行する。通信品質は、例えば、通信部13が基地局3から受信した無線通信回線W11の電波の強度、操縦装置2との間でデータを送受信する際のビット誤り率、及び操縦装置2との間でデータを送受信する際の再送回数等によって定められる。
For example, the
送信制御部165が通信品質に基づいて優先制御を実行することで、無線通信回線W11の通信品質が良好な間は、テキストデータ及び撮像画像データを操縦装置2に送信し、通信品質が低下した場合に、重要性が高いテキストデータが確実に操縦装置2に届くようにすることができる。このようにすることで、飛行装置1を操縦するユーザは、通常状態においては、テキストデータとともに撮像画像データも用いて快適に操縦し、撮像画像データの通信に適していない状況においても、操縦に重要なテキストデータを用いて、安全な操縦を継続することができる。
As the
送信制御部165は、無線通信回線W11の電波の強度を実測することにより通信品質を特定する代わりに、受信制御部161が取得した、電波の強度分布を示す電波状態情報に基づいて、無線通信回線W11の電波の強度を特定してもよい。電波状態情報は、多数の他の飛行装置が実測した電波強度に基づいて、予め作成された情報である。
Instead of specifying the communication quality by actually measuring the radio wave intensity of the radio communication line W11, the
図3は、電波状態情報を模式的に示す図である。図3においては、電波強度が強い領域、電波強度が中程度の領域、及び電波強度が弱い領域を示している。図3における位置P1は、飛行装置1の現在位置であり、電波強度が強い位置に飛行装置1がいるものとする。図3における矢印は、飛行装置1の飛行予定経路を示している。図3によれば、飛行装置1が飛行予定経路に沿って飛行する間に電波強度が弱くなり、位置P2において、電波強度が弱い領域に入る。送信制御部165は、飛行装置1の飛行予定位置と電波状態情報とに基づいて、飛行を予定している位置における電波の強度を推定する。送信制御部165は、推定した電波の強度に基づいて特定される、飛行予定位置における通信品質に基づいて、優先制御を実行する。
FIG. 3 is a diagram schematically showing the radio wave state information. FIG. 3 shows a region where the radio wave intensity is strong, a region where the radio wave intensity is medium, and a region where the radio wave intensity is weak. The position P1 in FIG. 3 is the current position of the flying device 1, and it is assumed that the flying device 1 is at a position where the radio wave intensity is strong. The arrows in FIG. 3 indicate the planned flight route of the flying device 1. According to FIG. 3, the radio wave intensity becomes weak while the flying device 1 flies along the planned flight path, and enters a region where the radio wave intensity is weak at the position P2. The
このようにすることで、送信制御部165は、飛行予定経路に沿って飛行を継続すると通信品質が劣化する可能性が高い場合に、早めに優先制御を開始することができる。この結果、通信品質が急に低下した場合であっても、事前に優先制御を開始しておくことで、重要なテキストデータが操縦装置2に届く確率を向上させることが可能になる。
By doing in this way, the
送信制御部165が優先制御を実行する条件は、無線通信回線W11の通信品質が低下した場合の代わりに、又は無線通信回線W11の通信品質が低下した場合に加えて、他の条件が満たされた場合に優先制御を実行してもよい。例えば、送信制御部165は、位置検出部として機能する検出部11が検出した飛行装置1の飛行位置が所定のエリアに含まれることを条件として、撮像画像データの送信よりも優先してテキストデータを操縦装置2に送信してもよい。
The conditions under which the
具体的には、送信制御部165は、市街地のように、墜落した場合の影響が大きいエリア、又は多数の他の飛行装置が飛行している地域のように衝突事故が発生しやすいエリアでは、テキストデータを優先的に送信して、飛行情報がより確実に操縦装置2に届くようにする。このようにすることで、飛行装置1が飛行する間の安全性を向上させることができる。
Specifically, the
なお、過疎地や他の飛行装置がほとんど飛んでいない地域では、テキストデータを優先的に送信することの重要性が比較的低い。そこで、送信制御部165は、人口密度や飛行装置の飛行台数等のように、安全性の高い飛行に対する要求度の強さを示す地図情報に基づいて、優先制御を実行するか否かを判定してもよい。また、送信制御部165は、操縦装置2又は管制局からの指示に基づいて、優先制御を実行するか否かを判定してもよい。
It should be noted that it is relatively less important to preferentially transmit text data in a depopulated area or an area where other flying devices are hardly flying. Therefore, the
[優先制御の方法]
送信制御部165は、さまざまな優先制御の方法を用いることができる。
送信制御部165は、データを操縦装置2に送信してから所定の時間が経過するまでの間に操縦装置2から応答を受信しない場合、同じデータを操縦装置2に再送する再送制御を行う。この際、データ容量が大きい撮像画像データを多数繰り返して再送すると、撮像画像データの再送のために無線通信回線W11が使用されることで、テキストデータの実効伝送速度が低下してしまう。
[Priority control method]
The
The
そこで、送信制御部165は、テキストデータを送信する際に再送処理を継続する時間を、撮像画像データを送信する際に再送処理を継続する時間よりも長くする。例えば、送信制御部165は、所定の再送許可時間が経過した時点で撮像画像データの再送を中止し、再送許可時間が経過した後にもテキストデータの再送を継続する。このようにすることにより、送信制御部165は、テキストデータが、より確実に操縦装置2に届くようにすることができる。
Therefore, the
また、送信制御部165は、テキストデータを送信するタイミングの前の所定の時間において、撮像画像データの量を減少させてもよい。例えば、送信制御部165は、テキストデータを送信するタイミングの前の所定の期間内においては撮像画像データを分割し、分割により小容量化された撮像画像データを送信するようにする。送信制御部165は、テキストデータを送信するタイミングの前の所定の時間において、撮像画像データの圧縮率を高くしたり、撮像画像データを間引きしたりすることにより、撮像画像データの容量を削減してもよい。
In addition, the
さらに、送信制御部165は、テキストデータの送信を開始するタイミングの前の所定の時間において、撮像画像データの送信を停止してもよい。例えば、送信制御部165は、テキストデータの送信を開始するタイミングよりも、撮像画像データの送信開始から送信完了までに要する時間以上前の時点で、撮像画像データの送信を停止する。このように、送信制御部165は、テキストデータを送信するタイミングにおいて、撮像画像データの送信を停止することで、テキストデータを送信するタイミングにおいて、撮像画像データを送信していることによりテキストデータを送信できないという状況が発生することを防止できる。
Further, the
[飛行装置1の動作フローチャート]
図4は、飛行装置1の動作について説明するためのフローチャートである。飛行装置1においては、撮像画像データ生成部164が撮像画像データを生成し(S11)、テキストデータ生成部163がテキストデータを生成する(S12)。撮像画像データ生成部164が撮像画像データを生成するタイミングと、テキストデータ生成部163がテキストデータを生成するタイミングとの関係は任意であるが、本例では、撮像画像データがテキストデータよりも先に生成されるものとする。
[Operation Flowchart of Flying Device 1]
FIG. 4 is a flowchart for explaining the operation of the flying device 1. In the flying device 1, the captured image
送信制御部165は、定期的に無線通信回線W11の通信品質を監視している(S13)。送信制御部165は、通信品質が所定の閾値以下に低下したと判定すると(S13においてYES)、優先制御を実行し、テキストデータを撮像画像データよりも優先的に送信する(S14)。
The
送信制御部165は、ステップS13において、通信品質が劣化していないと判定した場合(S13においてNO)、飛行装置1が、市街地等のように安全に飛行することの重要性が高い所定のエリアを飛行中であるか否かを判定する(S15)。送信制御部165は、所定のエリアを飛行中であると判定すると(S15においてYES)、ステップS14に進んで優先制御を実行する(S14)。
When it is determined in step S13 that the communication quality has not deteriorated (NO in S13), the
一方、送信制御部165は、ステップS15において所定のエリアを飛行中でないと判定すると(S15においてNO)、データが生成された順に送信する(S16)。すなわち、図4に示す例においては、送信制御部165は、ステップS11において撮像画像データ生成部164が生成した撮像画像データを送信した後に、ステップS12においてテキストデータ生成部163が生成したテキストデータを送信する。
On the other hand, if it determines with the
[第1の実施形態の飛行装置1による効果]
以上説明したように、飛行装置1においては、優先制御を実行する条件が満たされた場合に、撮像画像データの送信よりも優先して、操縦装置2において飛行装置1の制御に用いられる飛行装置1の位置、向き、速度等に関する飛行情報を含むテキストデータを操縦装置2に送信する。このようにすることで、飛行装置1の制御に用いられる飛行情報が操縦装置2に届く確率が向上するとともに、飛行情報が操縦装置2に届くまでの遅延時間が小さくなる。その結果、ユーザが、操縦に役立つ飛行情報を参照しながら操縦することができるので、飛行装置1は、飛行の安全性を向上させることができる。
[Effects of the flying device 1 of the first embodiment]
As described above, in the flying device 1, when the condition for executing the priority control is satisfied, the flying device used in the control device 2 for controlling the flying device 1 in preference to the transmission of the captured image data. Text data including flight information regarding the position, orientation, speed, etc. of 1 is transmitted to the control device 2. By doing so, the probability that flight information used for controlling the flying device 1 reaches the control device 2 is improved, and the delay time until the flight information reaches the control device 2 is reduced. As a result, the user can control the flight while referring to flight information useful for control, and thus the flying device 1 can improve flight safety.
送信制御部165は、例えば、無線通信回線W11の通信品質が低下した場合に、テキストデータを優先的に送信する。このようにすることで、無線通信回線W11における実効伝送速度が低下した場合であっても、飛行の安全性を確保するために重要なテキストデータが操縦装置2に届く確率を向上させることができる。
For example, when the communication quality of the wireless communication line W11 is lowered, the
また、送信制御部165は、飛行装置1が飛行している位置が安全性の要求度が高いエリアである場合に、テキストデータを優先的に送信する。このようにすることで、墜落事故が許されないエリアにおいて、飛行制御に重要な情報を含むテキストデータが操縦装置2に迅速に届く確率が高まるので、安全性が要求されるエリアにおける飛行の安全性を向上させることができる。
Moreover, the
(変形例1)
周囲に高い建物や他の飛行装置がなく、飛行禁止エリアが周辺にない場合、操縦するユーザは、カメラで撮影された撮像画像を見ながら注意深く操作をする必要がない。そこで、このような場合、送信制御部165は、撮像画像データを送信することなく、操縦装置2において、地図上に飛行位置が示されるように、飛行位置を示す位置情報を含むテキストデータを優先的に送信してもよい。
(Modification 1)
If there are no tall buildings or other flying devices in the surrounding area and there is no flight prohibition area in the vicinity, the user who controls the vehicle does not need to carefully operate while looking at the captured image captured by the camera. Therefore, in such a case, the
また、送信制御部165は、周囲の状況に応じてテキストデータの送信を優先する第1モードと、テキストデータの送信を優先しない第2モードとを切り替えてもよい。例えば、送信制御部165は、第1モードで飛行中に周囲に高い建物や他の飛行装置があることを検出した場合に、撮像画像データを送信する第2モードに切り替える。
Further, the
(変形例2)
送信制御部165は、飛行するための電力を提供する電池の残量に基づいて、テキストデータを優先的に送信するかどうかを切り替えてもよい。送信制御部165は、例えば、電池の残量が所定の閾値よりも少なくなった場合に、撮像画像データを何度も繰り返して送信することなく、飛行情報を含むテキストデータを優先的に送信する。送信制御部165は、電池の残量が所定の閾値よりも少なくなった場合に、飛行情報の中でも重要な情報として、飛行位置・飛行高度を示す情報に限定して送信してもよい。
(Modification 2)
The
<第2の実施形態>
第1の実施形態においては、飛行装置1が無線通信回線W11、基地局3及び無線通信回線W12を介して操縦装置2とデータを送受信した。第2の実施形態においては、飛行装置1が、複数の無線通信回線を介して操縦装置2とデータを送受信できる点で、第1の実施形態と異なる。
<Second Embodiment>
In the first embodiment, the flying device 1 transmits / receives data to / from the control device 2 via the wireless communication line W11, the base station 3, and the wireless communication line W12. The second embodiment differs from the first embodiment in that the flying device 1 can transmit and receive data to and from the control device 2 via a plurality of wireless communication lines.
図5は、第2の実施形態に係る飛行システムSの構成を示す図である。図5に示すように、飛行装置1は、無線通信回線W2を介して、操縦装置2と直接データを送受信することができる。無線通信回線W2は、携帯電話網の基地局3を介さず操縦装置2にデータを送信可能な回線であり、例えばWi−Fi(登録商標)回線である。 FIG. 5 is a diagram showing a configuration of a flight system S according to the second embodiment. As shown in FIG. 5, the flying device 1 can directly transmit and receive data to and from the control device 2 via the wireless communication line W2. The wireless communication line W2 is a line that can transmit data to the control device 2 without going through the base station 3 of the mobile phone network, and is, for example, a Wi-Fi (registered trademark) line.
図6は、第2の実施形態に係る飛行装置1の構成を示す図である。図6に示す飛行装置1は、通信部13が、第1通信部131及び第2通信部132を有する点で、図2に示した飛行装置1と異なり、他の点で同じである。第1通信部131は、LTE回線用の通信モジュールを有しており、第2通信部132は、Wi−Fi回線用の通信モジュールを有する。
FIG. 6 is a diagram illustrating a configuration of the flying device 1 according to the second embodiment. 6 differs from the flying device 1 shown in FIG. 2 in that the
送信制御部165は、無線通信回線W11(第1無線通信回線)及び無線通信回線W2(第2無線通信回線)のうち、伝搬遅延時間が小さい無線通信回線を用いてテキストデータを送信する。また、送信制御部165は、無線通信回線W11及び無線通信回線W2のうち、伝搬遅延時間が大きい無線通信回線を用いて撮像画像データを送信する。このようにすることで、送信制御部165は、飛行情報等の重要なテキストデータを、できるだけ遅延を発生させないで操縦装置2に送信することができる。送信制御部165は、無線通信回線W11の通信品質が低下したことを条件にして、無線通信回線W2を用いて撮像画像データを送信するようにしてもよい。
The
また、送信制御部165は、無線通信回線W11の第1電波及び無線通信回線W2の第2電波のうち、強度が大きい電波を用いてテキストデータを送信し、第1電波及び第2電波のうち、強度が小さい電波を用いて撮像画像データを送信してもよい。このようにすることで、送信制御部165は、テキストデータが誤りなく操縦装置2に到達する確率を高めることができる。
In addition, the
送信制御部165は、実測した第1電波の強度の代わりに、例えば取得部として機能する受信制御部161が取得した第1電波の強度分布を示す電波状態情報に基づいて、第1電波の強度を特定してもよい。送信制御部165は、電波状態情報に基づいて特定した飛行経路上の第1電波の強度と、測定した第2電波の強度とに基づいて、テキストデータ及び撮像画像データを送信する電波を決定してもよい。送信制御部165は、例えば、電波状態情報に基づいて、次にテキストデータを送信する予定の時刻における飛行予定位置での第1電波の強度を特定する。
Instead of the actually measured first radio wave intensity, the
具体的には、送信制御部165は、電波状態情報に基づいて、テキストデータを送信するタイミングと飛行速度とに基づいて特定されるテキストデータを送信する位置を特定する。そして、送信制御部165は、特定した位置における第1電波の強度に基づいて、テキストデータを送信する間に撮像画像データを送信する電波を決定する。送信制御部165は、第1電波の強度が十分に大きい場合、テキストデータを、無線通信回線W11を介して送信するとともに、撮像画像データも無線通信回線W11を介して送信する。送信制御部165は、第1電波の強度が、テキストデータを送信するには十分大きいながらも、テキストデータと撮像画像データとを同時に送信するには不十分である場合、無線通信回線W2を介して撮像画像データを送信する。このようにすることで、第1電波の強度が小さい場合に、テキストデータと撮像画像データとを並行して同じ電波を使って送信する必要がなくなるので、テキストデータをより確実に操縦装置2に送信することができる。
Specifically, the
送信制御部165は、特定した第1電波の強度が、実測した第2電波の強度よりも大きい場合、無線通信回線W11でテキストデータを送信し、無線通信回線W2で撮像画像データを送信する。これに対して、送信制御部165は、特定した第1電波の強度が、実測した第2電波の強度以下である場合、無線通信回線W11で撮像画像データを送信し、無線通信回線W2でテキストデータを送信する。なお、送信制御部165は、無線通信回線W11及び無線通信回線W2のいずれかの実効伝送速度が、撮像画像データとテキストデータとを同時に送信することが可能な状態である場合、十分な実効伝送速度の無線通信回線を用いてテキストデータと撮像画像データとを同時に送信してもよい。
When the intensity of the identified first radio wave is greater than the actually measured second radio wave intensity, the
[第2の実施形態の飛行装置1による効果]
以上説明したように、第2の実施形態の飛行装置1は、無線通信回線W11の通信品質が低下した場合に、無線通信回線W2を用いて飛行情報を含むテキストデータを送信することができる。また、送信制御部165は、テキストデータのみを無線通信回線W11を用いて送信し、撮像画像データを、無線通信回線W2を用いて送信することもできる。このように、送信制御部165が無線通信回線W11及び無線通信回線W2を用いることで、飛行情報等のテキストデータをより確実に操縦装置2に送信することが可能になる。
[Effects of the flying device 1 of the second embodiment]
As described above, the flying device 1 according to the second embodiment can transmit text data including flight information using the wireless communication line W2 when the communication quality of the wireless communication line W11 decreases. In addition, the
以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更又は改良を加えることが可能であることが当業者に明らかである。特に、装置の分散・統合の具体的な実施形態は以上に図示するものに限られず、その全部又は一部について、種々の付加等に応じて、又は、機能負荷に応じて、任意の単位で機能的又は物理的に分散・統合して構成することができる。 As mentioned above, although this invention was demonstrated using embodiment, the technical scope of this invention is not limited to the range as described in the said embodiment. It will be apparent to those skilled in the art that various modifications or improvements can be added to the above embodiment. In particular, the specific embodiments of the distribution / integration of the devices are not limited to those illustrated above, and all or a part thereof may be added in arbitrary units according to various additions or according to functional loads. It can be configured functionally or physically distributed and integrated.
1 飛行装置
2 操縦装置
3 基地局
11 検出部
12 カメラ
13 通信部
14 飛行機構
15 記憶部
16 制御部
131 第1通信部
132 第2通信部
161 受信制御部
162 飛行制御部
163 テキストデータ生成部
164 撮像画像データ生成部
165 送信制御部
DESCRIPTION OF SYMBOLS 1 Flight apparatus 2 Control apparatus 3
Claims (12)
飛行中の前記飛行装置の状態に関するテキストデータを生成するテキストデータ生成部と、
飛行している位置の周辺を撮影して撮像画像データを生成する画像データ生成部と、
前記撮像画像データの送信よりも優先して、前記飛行装置を操縦するための操縦装置に前記テキストデータを送信する送信制御部と、
を有する飛行装置。 A flying device that flies based on external control,
A text data generator for generating text data relating to the state of the flying device during flight;
An image data generation unit that shoots the vicinity of the flying position and generates captured image data;
Prior to the transmission of the captured image data, a transmission control unit that transmits the text data to a control device for controlling the flying device;
Having a flying device.
請求項1に記載の飛行装置。 The transmission control unit makes the time for continuing the retransmission process when transmitting the text data longer than the time for continuing the retransmission process when transmitting the captured image data,
The flying device according to claim 1.
請求項1又は2に記載の飛行装置。 The transmission control unit reduces the amount of the captured image data at a predetermined time before the transmission timing of the text data;
The flying device according to claim 1 or 2.
請求項1から3のいずれか一項に記載の飛行装置。 The transmission control unit stops transmission of the captured image data while transmitting the text data.
The flying device according to any one of claims 1 to 3.
請求項4に記載の飛行装置。 The transmission control unit stops transmission of the captured image data at a predetermined time before the timing of starting transmission of the text data;
The flying device according to claim 4.
請求項1から4のいずれか一項に記載の飛行装置。 The transmission control unit has priority over the transmission of the captured image data on the condition that the communication quality of the wireless communication line used for transmitting the captured image data and the text data has decreased to a predetermined threshold value or less. Sending the text data to a maneuvering device for maneuvering the device;
The flying device according to any one of claims 1 to 4.
前記送信制御部は、前記位置検出部が検出した位置が所定のエリアに含まれることを条件として、撮像画像データの送信よりも優先して、前記飛行装置を操縦するための操縦装置に前記テキストデータを送信する、
請求項1から4のいずれか一項に記載の飛行装置。 It further has a position detector for detecting the position during the flight,
The transmission control unit gives the text to the control device for operating the flying device in preference to the transmission of the captured image data on condition that the position detected by the position detection unit is included in a predetermined area. Send data,
The flying device according to any one of claims 1 to 4.
請求項1から7のいずれか一項に記載の飛行装置。 The transmission control unit is capable of transmitting data to the control device without passing through a first wireless communication line capable of transmitting data to the control device via a base station of a mobile phone network and a base station of a mobile phone network. The text data can be transmitted using a wireless communication line, and the text data is transmitted using a wireless communication line having a small propagation delay time among the first wireless communication line and the second wireless communication line, The captured image data is transmitted using a wireless communication line having a large propagation delay time among the first wireless communication line and the second wireless communication line.
The flying device according to any one of claims 1 to 7.
請求項1から7のいずれか一項に記載の飛行装置。 The transmission control unit generates a first radio wave that can transmit data to the control device via a base station of a mobile phone network and a second radio wave that can transmit data to the control device without going through a base station of a mobile phone network. The text data can be transmitted using the first radio wave and the second radio wave, and the text data is transmitted using a radio wave having a high intensity, and the first radio wave and the second radio wave have an intensity. Transmitting the captured image data using a small radio wave,
The flying device according to any one of claims 1 to 7.
前記送信制御部は、前記電波状態情報に基づいて特定した飛行経路上の前記第1電波の強度と、測定した前記第2電波の電波強度とに基づいて、前記テキストデータ及び前記撮像画像データを送信する電波を決定する、
請求項9に記載の飛行装置。 An acquisition unit for acquiring radio wave state information indicating an intensity distribution of the first radio wave used for data communication;
The transmission control unit is configured to transmit the text data and the captured image data based on the intensity of the first radio wave on the flight path specified based on the radio wave state information and the measured radio wave intensity of the second radio wave. Determine the radio wave to send,
The flying device according to claim 9.
請求項10に記載の飛行装置。 The transmission control unit is based on the intensity of the first radio wave at a position for transmitting the text data specified based on the timing of transmitting the text data specified based on the radio wave state information and the flight speed. Determining radio waves for transmitting the captured image data while transmitting the text data,
The flying device according to claim 10.
外部からの制御に基づいて空中を飛行する飛行装置の飛行中の状態に関するテキストデータを生成するステップと、
飛行している位置の周辺を撮影して撮像画像データを生成するステップと、
前記撮像画像データの送信よりも優先して、前記飛行装置を操縦するための操縦装置に前記テキストデータを送信するステップと、
を有する通信方法。
The computer runs,
Generating text data relating to the in-flight state of the flying device flying in the air based on external control;
Photographing the vicinity of the flying position and generating captured image data; and
Prioritizing transmission of the captured image data, transmitting the text data to a control device for operating the flying device;
A communication method comprising:
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016236240A JP6452665B2 (en) | 2016-12-05 | 2016-12-05 | Flight apparatus and communication method |
CN201780074930.3A CN110036648B (en) | 2016-12-05 | 2017-12-05 | Flight device, control device, communication control method, and control method |
PCT/JP2017/043551 WO2018105576A1 (en) | 2016-12-05 | 2017-12-05 | Flying device, control device, communication control method, and control method |
US16/466,247 US11212816B2 (en) | 2016-12-05 | 2017-12-05 | Flying device, control device, communication control method, and control method |
US17/515,665 US12028892B2 (en) | 2016-12-05 | 2021-11-01 | Flying device, control device, communication control method, and control method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016236240A JP6452665B2 (en) | 2016-12-05 | 2016-12-05 | Flight apparatus and communication method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018093404A JP2018093404A (en) | 2018-06-14 |
JP6452665B2 true JP6452665B2 (en) | 2019-01-16 |
Family
ID=62565766
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016236240A Active JP6452665B2 (en) | 2016-12-05 | 2016-12-05 | Flight apparatus and communication method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6452665B2 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019216340A1 (en) * | 2018-05-09 | 2019-11-14 | 株式会社Nttドコモ | Transmission device and program |
TWI722338B (en) * | 2018-11-19 | 2021-03-21 | 奇邑科技股份有限公司 | Intelligent information reading method, intelligent reader and system thereof |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5312161B2 (en) * | 2009-04-09 | 2013-10-09 | 京セラ株式会社 | Radio base station, radio resource allocation method, and radio communication system |
JP2012209744A (en) * | 2011-03-29 | 2012-10-25 | Casio Comput Co Ltd | Information processing terminal and information processing method, and program |
JP2013021540A (en) * | 2011-07-12 | 2013-01-31 | Hitachi Ltd | Radio communication system |
JP6201214B2 (en) * | 2013-12-25 | 2017-09-27 | 株式会社Kddi総合研究所 | Flight altitude control apparatus, flight altitude control method and program |
WO2016121676A1 (en) * | 2015-01-26 | 2016-08-04 | 日本電気株式会社 | Radio base station, radio communication system, radio communication control method, and program |
-
2016
- 2016-12-05 JP JP2016236240A patent/JP6452665B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2018093404A (en) | 2018-06-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110850442B (en) | Radar object detection and data communication | |
US11449054B2 (en) | Method for controlling flight of unmanned aerial robot by unmanned aerial system and apparatus supporting the same | |
US10059459B2 (en) | Unmanned aerial vehicle recovery system | |
US20220053506A1 (en) | Flying device, control device, communication control method, and control method | |
US11292602B2 (en) | Circuit, base station, method, and recording medium | |
CN113574926B (en) | SL CSI reporting | |
CN111630933A (en) | Method and apparatus for performing sidelink communications by a UE in NR V2X | |
WO2018110382A1 (en) | Flying device, flying control device and flying control method | |
JP2017195493A (en) | Mobile communication system | |
KR101882418B1 (en) | UAS Monitoring and Control system having Black Box | |
CN113298973B (en) | Unmanned aerial vehicle power inspection method and device based on 5G communication | |
CN106325300A (en) | Remote condition monitoring and controlling system of unmanned aerial vehicle based on GSM-4G communication | |
US20200142432A1 (en) | Method of landing unmanned aerial robot using posture control thereof in unmanned aerial system and apparatus for supporting the same | |
JP6452665B2 (en) | Flight apparatus and communication method | |
KR20210129055A (en) | Method and apparatus for switching resource allocation mode in a wireless communication system | |
JP2006065391A (en) | Vehicle information transmitting device and vehicle | |
JP6452664B2 (en) | Flight apparatus and communication control method | |
CN105898099A (en) | Unmanned plane image transmission mode switching method and device, and unmanned plane | |
JP6539636B2 (en) | Flight system, flight device, control device and flight control method | |
JP6330597B2 (en) | Communication control system, server, and communication control method | |
KR101293881B1 (en) | System for transferring rescue message, and a method for transferring rescue messageusing the same | |
CN113950799B (en) | Vehicle monitoring device, repeater, emergency arbitration device, and vehicle emergency monitoring system | |
KR102516126B1 (en) | Method and apparatus for determining sidelink resources in NR V2X | |
US20170215035A1 (en) | Movable object management system and base station | |
JP5167902B2 (en) | Information transmission system, antenna control method and antenna control program used in the information transmission system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181120 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181211 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6452665 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |