JP2016174360A - 飛行型または転動型ドローンに対する遠隔制御デバイスの向きを最適化する方法 - Google Patents

飛行型または転動型ドローンに対する遠隔制御デバイスの向きを最適化する方法 Download PDF

Info

Publication number
JP2016174360A
JP2016174360A JP2016050676A JP2016050676A JP2016174360A JP 2016174360 A JP2016174360 A JP 2016174360A JP 2016050676 A JP2016050676 A JP 2016050676A JP 2016050676 A JP2016050676 A JP 2016050676A JP 2016174360 A JP2016174360 A JP 2016174360A
Authority
JP
Japan
Prior art keywords
drone
user
antenna
orientation
respect
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2016050676A
Other languages
English (en)
Inventor
バンダ ルク
Banda Luc
バンダ ルク
セドゥ アンリ
Seydoux Henri
セドゥ アンリ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Parrot SA
Original Assignee
Parrot SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Parrot SA filed Critical Parrot SA
Publication of JP2016174360A publication Critical patent/JP2016174360A/ja
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/10Simultaneous control of position or course in three dimensions
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0038Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with simple or augmented images from one or more cameras located onboard the vehicle, e.g. tele-operation
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63HTOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
    • A63H27/00Toy aircraft; Other flying toys
    • A63H27/12Helicopters ; Flying tops
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63HTOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
    • A63H30/00Remote-control arrangements specially adapted for toys, e.g. for toy vehicles
    • A63H30/02Electrical arrangements
    • A63H30/04Electrical arrangements using wireless transmission
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64CAEROPLANES; HELICOPTERS
    • B64C39/00Aircraft not otherwise provided for
    • B64C39/02Aircraft not otherwise provided for characterised by special use
    • B64C39/024Aircraft not otherwise provided for characterised by special use of the remote controlled vehicle type, i.e. RPV
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0016Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement characterised by the operator's input device
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0022Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement characterised by the communication link
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/025Services making use of location information using location based information parameters
    • H04W4/026Services making use of location information using location based information parameters using orientation information, e.g. compass
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00UAVs specially adapted for particular uses or applications
    • B64U2101/30UAVs specially adapted for particular uses or applications for imaging, photography or videography
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2201/00UAVs characterised by their flight controls
    • B64U2201/20Remote controls
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/30User interface
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/90Additional features
    • G08C2201/93Remote control using other portable devices, e.g. mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72415User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories for remote control of appliances

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Automation & Control Theory (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Theoretical Computer Science (AREA)
  • Toys (AREA)
  • Selective Calling Equipment (AREA)

Abstract

【課題】飛行型または転動型ドローンに対する遠隔制御デバイスの向きを最適化する方法を提供する。【解決手段】遠隔制御デバイス16は、ドローンとの無線リンクのためのアンテナと、ドローンのカメラによって撮像された画像を表示するタッチスクリーン20とを含む。この方法は、アクティブアンテナ28bを決定するステップと、使用されるデバイスのモデルを決定するステップと、デバイス本体に対するアクティブアンテナの相対的な向きの情報を、操縦アプリケーションソフトウェアのテーブル内で検索するステップと、デバイス本体に対するアンテナの向きがドローンの方向Dに対応しない場合には、ドローンのカメラによって撮像された画像をタッチスクリーンに表示して、不自然表示(A)を生成してユーザにデバイスを回転させて(A’)、それによりアンテナをドローンの方向に配置させるステップとを含む。【選択図】図3

Description

本発明は、以下では一般に「ドローン」と呼ばれる電動式デバイスの遠隔操縦に関する。
これらは、飛行型ドローン、特にヘリコプタおよびクアドリコプタなどの回転翼ドローンであり得る。ただし、本発明は、飛行型デバイスの操縦および飛行型デバイスとのデータ交換に限定されるわけではなく、遠隔の操作者の制御下で地上を進行する転動型デバイスにも適用され、「ドローン」という用語は、その最も一般的な意味で理解されるものとする。
飛行型ドローンの代表例は、フランスのパリに本社を置くParrot社製のAR.Drone2.0またはBebop(登録商標)であり、これらは、一連のセンサ(加速度計、ジャイロメータ、高度計)と、ドローンが向けられている方向の光景の画像を撮像する前方ビデオカメラと、眼下の地面の画像を撮像する鉛直視カメラとを備えたクアドリコプタである。本発明を適用することができる別のタイプのドローンは、やはりParrot社製のJumping Sumoである。これは、加速度計およびジャイロメータといったセンサと、前方ビデオカメラとを備えた、遠隔制御式の転動および跳躍玩具である。
WO2010/061099A2、EP2 364 757A1、EP2 450 862A1およびEP2 613 213A1(Parrot社)には、例えばiPhoneタイプのスマートフォンまたはiPad(登録商標)タイプのタブレットなど加速度計が一体化されたタッチスクリーン式マルチメディア電話またはタブレットにより、例えば上記の例では移動アプリケーションAR Free Flight(登録商標)など特定の遠隔制御アプリケーションソフトウェアを実行することによって、ドローンを操縦する原理が記載されている。
以下では、「遠隔制御装置」または「デバイス」という用語を、この遠隔制御手段を指すものとして総称的に使用するが、この用語は、この狭い意味で理解してはならない。逆に、この用語は、機能的に等価なデバイス、特に、スマートフォン、電話機能を備えないマルチメディアプレイヤ、ゲームコンソールなど、少なくとも1つの視覚表示スクリーンおよびワイヤレスデータ交換手段を備えた全ての携帯型デバイスも含む。
前方ビデオカメラは、ドローンの「没入モード」の操縦に使用する、すなわち操作者自身がドローンに乗っているかのようにカメラの画像を使用する操縦に使用することができる。また、前方ビデオカメラは、ドローンが向けられている方向の光景の複数の連続した画像を撮像するように機能して、操作者が、手に保持される代わりにドローンに搭載されたカメラと同様に、このドローンを使用することもできる。収集された画像は、記録されたり、オンラインでウェブサイトに掲載されたり、他のインターネットユーザに送信されたり、ソーシャルネットワークで共有されたりすることができる。
このデバイスは、ドローンとの間に直接確立されるWi−Fi(IEEE802.11)またはBluetoothのワイヤレスローカルネットワークのタイプの無線リンクを介した操縦コマンドの検出およびデータの双方向交換に必要な様々な制御要素を内蔵している。このデバイスのタッチスクリーンは、ドローンの前方カメラによって撮像された画像を、単にユーザの指がタッチスクリーンに接触するだけで飛行の制御およびコマンドの起動を行うことができるようにする特定数のシンボルを重畳して表示する。この双方向無線リンクは、カメラからのビデオフロー、およびドローン飛行データまたは状態インジケータを含むデータフレームを伝送するためのダウンリンク(ドローンからデバイス)、および操縦コマンドを伝送するためのアップリンク(デバイスからドローン)を含む。
遠隔制御装置とドローンとの間の無線リンクの品質が、特に可能な限り短い待ち時間で十分なレンジを保証するために重要なパラメータであることは理解されるであろう。伝送されるデータの量は、特にダウンリンクのビデオフローにおける非常に高い必要(通常は2.5〜3Mbit/秒程度)により実際にかなりの量であり、無線リンクの品質が低下すると、アップリンクがコマンドに割り当てるフレームレートが影響を受け、これによりアップリンクの伝送の品質が低下し、また無線範囲が減少して、デバイスが生成するコマンドを含むフレームが突発的に喪失する危険性が生じ、その結果としてドローンの制御が極めて困難になる。
遠隔制御デバイスでは、無線リンクは、発信時にはアップリンクをサポートするHF発信回路のパワーを放射し、受信時にはドローンから発信された信号、特にビデオフローおよび飛行データ信号を受信する、デバイスに内蔵されたアンテナを使用する。
このタイプの遠隔制御デバイスでは、ユーザは、ピッチ軸およびロール軸に応じてデバイスを多少傾けてドローンが同じ動きをするようにし、かつデバイスのタッチスクリーン上に表示される移動アイコンまたはボタンを指で触れることによって様々なパラメータを制御することによりドローンを操縦することができるように、親指をスクリーンの上に置いた状態で手のひらと親指との間または人差し指と親指との間でデバイスの両側を把持することによって、このデバイスを通常は両手で保持することによってドローンを操縦する。
この状態では、両手は自然とデバイスケースの両側の角部に配置され、両縁部をある程度覆うことになることは理解されるであろう。また、デバイスのWiFiおよび/またはBluetoothアンテナ(互いに別個のWiFiアンテナおよびBluetoothアンテナ、これらは必ずしも同じ位置になくてもよい)も、概ねこの位置に配置される。
BluetoothおよびWiFiリンクの無線波は、非常に高い周波数帯域(それぞれ2.4GHz程度および5.1〜5.7GHz程度)に位置しており、人体によって非常に強く減衰し、この場合は、デバイスがドローンと通信するために使用するアンテナの付近にユーザの両手があると、この両手によって非常に強く減衰する。
実際には、これらのアンテナの位置は、デバイスのモデルごとに大きく異なる可能性があるので、デバイスからドローンに向けて放射される信号のパワー、およびドローンから受信する信号の受信感度は、ユーザが自分の手で保持しているデバイスの位置および向きに非常に大きく依存することになる。さらに詳細には、デバイスは一般にそのスクリーンを「横置き」位置にして保持されるので、アンテナがデバイスの長辺に配置され、ドローンに向けられる側に位置している場合には、この姿勢が最適となる。一方、デバイスが逆向きに保持される場合、すなわちアンテナがユーザ側に位置する場合には、アンテナがユーザの方に向けられ、ドローンの方に向けられていないだけでなく、ユーザの身体がマススクリーン効果によって無線波の伝搬を強く妨害し、無線リンクの品質を大きく低下させるので、この構成は特に望ましくない。
同様に、ユーザによるデバイスの保持の仕方によってアンテナがデバイスの1つの角部に近い領域に配置されている場合には、このアンテナが、まさにユーザの親指のところに配置されることもあり、その場合には親指がスクリーンの働きをして、アンテナの領域における無線波の伝搬を大きく阻害することになる。
したがって、ドローンに向けて放射される信号のパワー、および受信信号の感度(したがって、結果として、無線リンクのレンジおよび待ち時間)は、ユーザによる遠隔制御デバイスの保持の仕方、特にデバイスの方向付けの仕方および手の中での保持の仕方に非常に大きく依存することが分かる。
本発明の目的は、ドローンに対する遠隔制御デバイスの向きを最適化し、その結果として遠隔制御装置から放射される無線エネルギー(発信時)および受信される無線信号のレベル(受信時)を最大にする手段を提案することによって、この問題を解決することである。
本発明の基本概念は、使用される遠隔制御装置のモデルを認識した後で(それにより、このモデルとともに使用されるアクティブアンテナの位置が与えられる)、アンテナの位置が最良の無線リンクを実現する位置になるように、すなわちアクティブアンテナの放射パターンの主ローブが前方に(すなわちユーザの方ではなくドローンの方に)向けられるようにし、かつ/またはデバイスケースの角部に配置されたアンテナが親指または手のひらで覆われないようにすることにある。
この問題は、特に、アンテナ構成のパラメータに関連する条件のテーブルに基づいて、場合によってはドローンの遠隔制御装置に使用することができる携帯電話を方向付けし直す指示をユーザに与えることを提案するWO2014/143678A1で扱われている。
本発明が提案する解決策では、デバイスは、厳密に言えば、デバイスの方向付けし直しの指示をユーザに送るのではなく、ドローンのカメラによって撮像された光景の上部が、ユーザから見て、
アクティブアンテナの向きが、ドローンが方向付けられている向きに対応しない場合には、スクリーンの下部に現れ、
アクティブアンテナの向きが、ドローンが方向付けられている向きに対応する場合には、スクリーンの上部に現れるように、
タッチスクリーン上の画像の表示を制御する。
その後、
前者の場合には、画像は上下逆向きに表示され、ユーザは、自然に遠隔制御デバイスを回転させて正しい画像を復元することになり、この反転により、正確に、アンテナが最適位置に方向付けられ、前方に、したがってユーザの方には向けられず、ドローンの方に向けられることになり、
後者の場合には、ユーザ(何をすることも求められず、特に何にも気付いていない)は、通常通りにデバイスを使用して、ドローンを遠隔制御することになる。
さらに詳細には、本発明は、遠隔制御デバイスによって遠隔制御される飛行型または転動型ドローンに対する遠隔制御デバイスの向きを最適化する方法であって、遠隔制御デバイスとドローンとは無線リンクによって互いに通信している方法を提案する。
既知の通り、特に上述のEP2 613 213 A1によれば、ドローンは、搭載ビデオカメラと、前記無線リンクのための発信/受信手段とを含む。遠隔制御デバイスは、ユーザにより手で保持されるように適合されたデバイス本体と、デバイス本体に対して予め定められた位置に配置された少なくとも1つの発信/受信アンテナを含む前記無線リンクのための発信/受信手段と、ドローンのカメラによって撮像されて前記無線リンクを介してデバイスに伝送された画像を表示するとともに、デバイス本体を保持している少なくとも1本のユーザの指のスクリーンの表面との接触を検出するように適合されたタッチスクリーンとを含む。
本発明の特徴として、この方法は、
a)前記無線リンクのためにデバイスの発信/受信手段によって使用されるアクティブアンテナを決定するステップと、
b)使用されるデバイスのモデルを決定するステップと、
c)デバイス本体に対するアクティブアンテナの相対的な向きの情報を、テーブル内で検索するステップであり、前記テーブルは、前記デバイスに予めロードおよび記憶された操縦ソフトウェアのテーブルであり、
前記テーブルの各エントリは、ドローンを遠隔制御するために使用される可能性がある各デバイスのモデルについて、当該モデルのアンテナの相対的な向きの対応する情報を与える、ステップと、
d)デバイス本体に対するアクティブアンテナの相対的な向きが、ドローンが方向付けられた向きに対応しない場合には、ドローンのカメラによって撮像された光景の上部がユーザから見てスクリーンの下部に現れ、デバイス本体に対するアクティブアンテナの相対的な向きが、ドローンが方向付けられた向きに対応する場合には、ドローンのカメラによって撮像された光景の上部がユーザから見てスクリーンの上部に現れるように、画像をタッチスクリーンに表示するステップと
を含む。
デバイス本体に対するアクティブアンテナの向きの情報は、アンテナがデバイス本体の中央軸を基準としてどちら側に位置するかを示すブール情報であると有利であり、中央軸は、ユーザのそれぞれの手により各々保持されるように適合されたデバイスの2つの対向する側部の間を延びている。
この場合には、本発明の好ましい実施形態では、ステップd)は、タッチスクリーン上の画像の表示の向きを、無条件で強制的に、中央軸を基準として、ドローンのカメラによって撮像された光景の上部が、スクリーンのアクティブアンテナが配置された側と同じ側に配置されるようにすることを含む。
全ての場合に、検索ステップc)がデバイスのモデルの識別子に対応するエントリを発見することを許容しない場合には、ステップd)は実行されず、デバイスのスクリーンに警告メッセージが表示される。
デバイスの発信/受信手段は、複数の異なるアンテナにそれぞれ対応する複数の異なる無線帯域で動作するように適合された発信/受信手段を有するときには、前記テーブルの各エントリは、そのように使用される可能性がある各デバイスのモデルについて、与えられたモデルによって使用される可能性がある各無線帯域について、アクティブアンテナの相対的な向きの情報を与え、アクティブアンテナを決定するステップa)は、デバイスの複数のアンテナの中から、ドローンの発信/受信手段によって使用される無線帯域と適合性のあるアンテナを選択することを含む。
この方法の別の実施形態では、ユーザに対するデバイスの相対的な向きの情報を決定する事前ステップがさらに設けられ、ステップd)は、ユーザに対するデバイスの相対的な向きの情報に応じて条件付きで実行される。ユーザに対するデバイスの相対的な向きの情報の決定は、特に、加速度計または傾斜計によりデバイス本体の絶対的な向きを測定することによって、あるいはデバイス本体を保持しているユーザの指と接触しているスクリーンの表面の領域を検出することによって、実施することができる。
次に、添付の図面を参照して、本発明の例示的な実施形態について説明する。これら全ての図面を通じて、同じ参照番号は、全く同じ要素、または機能的に同様の要素を指している。
遠隔制御デバイスによって操縦されるドローンを示す全体図である。 ドローンの操縦中にユーザの手に保持される遠隔制御デバイスを示す図である。 本発明の方法を実施することによって行われるアクションを示す図である。 様々なデバイスのモデルのアンテナの位置を与えるテーブルの一例である。 好ましい実施形態における本発明の方法の連続したステップを示す全体的なフロー図である。 本発明の実施態様の変形形態を示す全体的なフロー図である。
図1において、参照番号10は、一般にドローンを示し、このドローンは、例えば、フランスのパリに本社を置くParrot社製のBebop Droneモデルなどのクアドリコプタである。このドローンは4つの同一平面ロータ12を含み、それらのモータが一体型ナビゲーションおよび姿勢制御システムによって互いに独立して操縦される。このドローンは、例えば30fps(フレーム/秒)のビデオフローのリフレッシュ周波数を有する1920×1080画素の解像度のCMOSセンサを備えた高精細度広角カメラなど、ドローンが向けられている方向の光景の画像を撮像することを可能にする前方視カメラ14を備える。
ドローン10は、例えばiPhone(登録商標)タイプなどのスマートフォンまたはiPad(登録商標)タイプなどのタブレットなど、加速度計が一体化されたタッチスクリーン式マルチメディア電話またはタブレットなどの遠隔の遠隔制御デバイス16によって操縦される。これは、ドローン10の操縦および搭載カメラ14によって撮影された画像の視覚化を制御するための移動アプリケーションAR Free Flight(登録商標)など特定のアプリケーションソフトウェアがロードされていることを除けば改変されていない、標準的なデバイスである。
デバイス16は、本体18と、ドローン14の搭載カメラによって撮像された光景の画像を、単にユーザの指22がスクリーンに表示されたシンボルに触れるだけで操縦コマンド(上昇/下降など)を起動できるようにする特定数のシンボルを重畳して表示するタッチスクリーン20とを含む。デバイス16は、ロール軸およびピッチ軸に応じて対応する傾きをデバイスに付与してドローンを前進または後退させることによってドローンの姿勢を制御することを可能にする傾きセンサも備える。ユーザによってデバイスに付与されるアクションは、それらをドローンへのコマンド信号に変換するアプリケーションソフトウェアによって解釈される。
ユーザの手に保持されたデバイス16を示す図2から分かるように、ユーザは、通常はデバイスを「横置き」モードで保持する。「横置き」モードは、ドローンのカメラ14のフォーマットに対応し、したがってスクリーン20上に再生される画像のフォーマットに対応している。この目的のために、デバイス16は、一般に両手で親指24、24’と人差し指または手のひら26、26’との間に強く保持されて、デバイスをピッチおよびロールにおいて傾けると、ドローンがこれらの傾きを再現し、対応する前方、後方または側方への変位を生じることができるようになっている。
参照番号28a〜28dは、デバイスの本体18に内蔵された、無線リンクによってドローンとデータ交換するためのアクティブアンテナの様々な可能な構成を示している。
アンテナが図示の位置28aにある場合には、アンテナがドローンの方に向けられ(ドローンは方向Dにある)、ユーザの指によって隠されていないので、この構成は最適である。
一方、アクティブアンテナが、デバイス16の中央長手方向軸Δを基準として反対側の位置28bに配置されている場合には、このアンテナは、ユーザに向かって放射することになるので、効率は大幅に低下する。
ここで考慮しているデバイスのモデルでは、アンテナが、デバイス本体18の1つの角部の28cに示す位置に配置されている場合には、アンテナがドローンの方に向けられ(ドローンは方向Dにある)、ユーザの指によって隠されていないので、この位置は最適である。
一方、アンテナが28dに示す反対側の角部にある場合には、アンテナがドローンの方には向けられずユーザの方に向けられているだけでなく、ユーザの指24、26がアンテナを隠して、無線波の伝搬を強く妨害しているので、この構成は特に望ましくない。
本発明の基本概念は、アンテナが望ましくない構成(28bおよび28dなど)にある場合に、この後者の場合には、最適な構成を復元するのに、デバイス16の本体18を水平に180度回転させるだけでよい、すなわち、この単純な動作によって、位置28bから位置28aに切り替える、または位置28dから位置28cに切り替えることができるということにある。
もちろん、例えばアンテナが受信する信号のレベル(RSSIレベル)を測定し、可能な複数の位置をテストして最良の受信レベルが得られる位置を選択するようにユーザに求めることもできる。
本発明は、この問題に対する別の解決策も提案する。この解決策は、受信信号のレベルを測定することを含まず、したがって、無線データがデバイスとドローンとの間で交換される前に使用することができるものである。
基本概念は、デバイス本体内でアクティブアンテナが配置された位置がアプリオリに既知である場合には、デバイス本体に対するアクティブアンテナの相対的な向きの情報を、デバイスのモデルに応じてそのような情報を与えるテーブルから決定し、
アンテナが「不適切な側」に方向付けられている、すなわちユーザの方に向けられている場合には、画像の表示が反転(上下)されるようにして、ユーザが自発的に手に保持しているデバイスを180度回転させて、自分に対して提示される画像の正しい向きを復元するようにし、
アンテナが「適切な側」にある、すなわちユーザの手と接触しない領域でドローンの方に向けられている場合には、表示が反転しないようにして、ユーザがそのままデバイスの使用を続けられるようにすることにある。
具体的には、好ましい解決策は、表示されている画像の「上部」が、(デバイスの中央水平軸を基準として)使用するアンテナと系統的に同じ側に配置されるように、表示を管理することにある。これにより、アンテナが「不適切な側」に配置される場合には、表示はユーザの視点から見ると「上下逆向き」に示されることになる一方、そうでない場合には、「上下正しい向き」に示されることになる。この原理を、図3に示す。(A)に示すのは、アンテナ28bが、デバイスの長手方向軸Δを基準として、ドローンの方(方向D)に向けられた側ではなく、ユーザの方に向く側に配置されている場合である。この場合には、表示は強制的に、画像を反転する「不自然モード」になる。その後、ユーザは自発的に、デバイスをアンテナ28bがドローンの方向Dに向けて適切に方向付けられる位置(A’)まで、(水平に180度)回転させる。この位置では、表示は、再びユーザにとって「自然な」ものになる。
反対の場合、すなわち、プロセスの開始時に、アンテナ28bが長手方向軸Δを基準としてユーザと反対側、すなわちドローンの方(方向D)に向く側にある場合には、この構成(B)は、最適であると考えられ、特にアクションは行われず、スクリーン20の表示は「自然な」まま保たれる。
この方法を実施するためには、考えられるそれぞれのデバイスのモデルについて、デバイス本体18に対するアンテナの相対的な向きがアプリオリに分かっていることが必要である。
この目的のために、遠隔制御デバイスに予めロードされて記憶された操縦アプリケーションソフトウェアに、テーブルが記憶される。
このソフトウェアは複数のデバイスのモデルと互換性のある汎用ソフトウェアであるので、テーブルは、図4に示すように、モデルの識別子からなるエントリをそれぞれ有する複数の見出しと、各モデルごとにWiFiアンテナの位置およびBluetoothアンテナの位置を与える欄とを含む。位置情報は、デバイス本体に対するアンテナの相対的な向きを与えるものであり、アンテナがデバイス本体の中央軸Δを基準としてどちら側に位置するかを示す単純なブールデータとすることができる。ここで、この軸は、スクリーンを「横置き」モードで見ているユーザがデバイスを手に保持している2つの側部の間を延びる軸として定義される。
図5は、好ましい実施形態における、この方法を実施する様々なステップのチェーニング100を説明する流れ図である。
第1のステップ(ブロック102)は、操縦しようとするドローンのタイプに従って(一部のドローンはBluetoothで動作し、一部のドローンはWiFiで動作する)、WiFiまたはBluetoothのアンテナのうちのどのアンテナが遠隔制御装置によって使用されるかを決定することにある。
このようにして使用されるアクティブアンテナが分かったら、デバイスのモデルに応じてこのアンテナのデバイス本体に対する位置を与えるメモリに記憶されたテーブルに基づいて、このアクティブアンテナのデバイス本体に対する相対的な向きを、決定することができる(ブロック104)。
デバイスのモデルがテーブルに載っていない特定の場合(ブロック106)には、特にアクションは行われないが、場合によっては、ユーザに対してメッセージを表示して(ブロック108)、ユーザが2つの可能な向きをテストして、例えばスクリーンに表示される受信信号レベルインジケータを観察することによって最適動作位置を自分で決定するようにすることもある。
その他の全ての場合には、単に強制的に、スクリーン上の画像の表示方向を、デバイス本体の中央軸Δを基準として、ドローンのカメラによって撮像された光景の上部が、全ての場合にアクティブアンテナが位置する側と同じスクリーンの側に配置されるようにする(ブロック110)。
その後、デバイスがドローンに対して「良好に方向付けられている」(すなわちアクティブアンテナがユーザの方ではなくドローンの方を向いている)場合には、画像は、ユーザに対して上下正しい向きで示されるが、そうでない場合には、画像は、ユーザに対して上下逆向きに示される。この反転は、上記に示したように、不適切な向きの視覚メッセージを構成し、ユーザがデバイスを水平に180度回転させて自分の視点から見て正しい画像を復元することによって自発的にこの状況を正すようにする。
図6は、本発明の別の実施形態における、この方法を実施する様々なステップのチェーニング200を説明する流れ図である。
この場合には、デバイス本体に対するユーザの相対的な位置を決定する第1のステップ(ブロック202)が設けられる。
この位置は、デバイス本体に対する鉛直線(重力)の方向を与える、デバイスに内蔵された傾斜計または加速度計といった手段によって決定することができる。ユーザはスクリーンを見ていると仮定するので、デバイス本体の向きを測定することにより、ユーザが長手方向軸Δを基準としてどちら側にいるのかを決定することができる。
例えばユーザの指がタッチスクリーン20に接触していることを検出するといった、他の手段を使用することもできる。軸Δを基準として、指と接触する表面が最も重要となる側は、ユーザに対するデバイスの相対的な向きを決定することを許容することになる。
次のステップ(ブロック204)は、操縦しようとするドローンのタイプに従って(一部のドローンはBluetoothで動作し、一部のドローンはWiFiで動作する)、WiFiまたはBluetoothのアンテナのうちのどのアンテナが遠隔制御装置によって使用されるかを決定することにある。
このようにして使用されるアクティブアンテナが分かったら、デバイスのモデルに応じてこのアンテナのデバイス本体に対する位置を与えるメモリに記憶されたテーブルに基づいて、このアクティブアンテナのデバイス本体に対する相対的な向きを、決定することができる(ブロック206)。
デバイスのモデルがテーブルに載っていない特定の場合(ブロック208)には、特にアクションは行われないが、場合によっては、ユーザに対してメッセージを表示して(ブロック210)、ユーザが2つの可能な向きをテストして、例えばスクリーンに表示される受信信号レベルインジケータを観察することによって最適動作位置を自分で決定するようにすることもある。
その他の全ての場合には、ユーザに対するデバイスの相対的な向きを、デバイス本体に対するアクティブアンテナの相対的な向きと比較し(ブロック212)、
アンテナとユーザとが同じ側にある場合(図2のアンテナ28bおよび28dの場合)には、画像の表示方向の反転を強制的に行って(ブロック214)、ユーザが何も考えずにデバイスを回転させてこの「不自然」表示が消えるようにし、
そうでない場合には、この構成は最適と考えられ、特にアクションは行われない(図2のアンテナ28aまたは28cに対応する構成)。

Claims (8)

  1. 遠隔制御デバイスによって遠隔制御される飛行型または転動型ドローンに対する遠隔制御デバイスの向きを最適化する方法であり、前記遠隔制御デバイスと前記ドローンとは無線リンクによって互いに通信しており、
    前記ドローン(10)は、
    搭載ビデオカメラ(14)と、
    前記無線リンクのための発信/受信手段とを有し、
    前記遠隔制御デバイス(10)は、
    ユーザにより手で保持されるように適合されたデバイス本体(18)と、
    前記デバイス本体に対して予め定められた位置に配置された少なくとも1つの発信/受信アンテナ(28a、28b、28c、28d)を含む前記無線リンクのための発信/受信手段と、
    前記ドローンの前記カメラによって撮像されて前記無線リンクを介して前記デバイスに伝送された画像を表示するとともに、前記デバイス本体を保持している少なくとも1本のユーザの指の前記スクリーンの表面との接触を検出するように適合されたタッチスクリーン(20)とを有する、方法であって、
    a)前記無線リンクのために前記デバイスの発信/受信手段によって使用されるアクティブアンテナを決定するステップ(104)と、
    b)使用されるデバイスのモデルを決定するステップと、
    c)前記デバイス本体に対する前記アクティブアンテナの相対的な向きの情報を、テーブル内で検索するステップ(106)であり、前記テーブルが、前記デバイスに予めロードおよび記憶された操縦ソフトウェアのテーブルであり、
    前記テーブルの各エントリは、前記ドローンを遠隔制御するために使用される可能性がある各デバイスのモデルについて、当該モデルのアンテナの相対的な向きの対応する情報を与える、ステップ(106)と、
    d)前記デバイス本体に対する前記アクティブアンテナの相対的な向きが、前記ドローンが方向付けられている向きに対応しない場合には、前記ドローンの前記カメラによって撮像された光景の上部がユーザから見て前記スクリーンの下部に現れ、前記デバイス本体に対する前記アクティブアンテナの相対的な向きが、前記ドローンが方向付けられている向きに対応する場合には、前記ドローンの前記カメラによって撮像された光景の上部がユーザから見て前記スクリーンの上部に現れるように、前記画像を前記タッチスクリーンに表示するステップと
    を備えたことを特徴とする、方法。
  2. 前記デバイス本体に対する前記アクティブアンテナの向きの情報は、前記アンテナが前記デバイス本体の中央軸(Δ)を基準としてどちら側に位置するかを示すブール情報であり、前記中央軸は、前記ユーザのそれぞれの手(24、26;24’、28’)により各々保持されるように適合された前記デバイスの2つの対向する側部の間を延びている、請求項1に記載の方法。
  3. 前記ステップd)は、前記タッチスクリーン上の前記画像の表示の向きを、無条件で強制的に、前記中央軸を基準として、前記ドローンの前記カメラによって撮像された光景の上部が、前記スクリーンの前記アクティブアンテナが配置された側と同じ側に配置されるようにすることを含む、請求項2に記載の方法。
  4. 前記検索ステップc)が前記デバイスのモデルの識別子に対応するエントリを発見することを許容しない場合には、前記ステップd)が実行されず、前記デバイスの前記スクリーンに警告メッセージが表示される(110)、請求項1に記載の方法。
  5. 前記デバイスの前記発信/受信手段は、複数の異なるアンテナにそれぞれ対応する複数の異なる無線帯域で動作するように適合された発信/受信手段を含み、
    前記テーブルの各エントリは、そのように使用される可能性がある各デバイスのモデルについて、与えられたモデルによって使用される可能性がある各無線帯域について、前記アクティブアンテナの相対的な向きの情報を与え、
    前記アクティブアンテナを決定する前記ステップa)は、前記デバイスの前記複数のアンテナの中から、前記ドローンの前記発信/受信手段によって使用される無線帯域と適合性のあるアンテナを選択することを含む、請求項1に記載の方法。
  6. 前記ユーザに対する前記デバイスの相対的な向きの情報を決定する事前ステップがさらに設けられ、前記ステップd)は、前記ユーザに対する前記デバイスの相対的な向きの情報に応じて条件付きで実行される、請求項1に記載の方法。
  7. 前記ユーザに対する前記デバイスの相対的な向きの情報を決定する前記事前ステップは、加速度計または傾斜計により前記デバイス本体の絶対的な向きを測定することによって実施される、請求項6に記載の方法。
  8. 前記ユーザに対する前記デバイスの相対的な向きの情報を決定する前記事前ステップは、前記デバイス本体を保持している前記ユーザの指と接触している前記スクリーンの表面の領域を検出することによって実施される、請求項6に記載の方法。
JP2016050676A 2015-03-16 2016-03-15 飛行型または転動型ドローンに対する遠隔制御デバイスの向きを最適化する方法 Withdrawn JP2016174360A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR1552124 2015-03-16
FR1552124A FR3033712B1 (fr) 2015-03-16 2015-03-16 Procede d'optimisation de l'orientation d'un appareil de telecommande par rapport a un drone volant ou roulant

Publications (1)

Publication Number Publication Date
JP2016174360A true JP2016174360A (ja) 2016-09-29

Family

ID=53404701

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016050676A Withdrawn JP2016174360A (ja) 2015-03-16 2016-03-15 飛行型または転動型ドローンに対する遠隔制御デバイスの向きを最適化する方法

Country Status (5)

Country Link
US (1) US20160274582A1 (ja)
EP (1) EP3069767B1 (ja)
JP (1) JP2016174360A (ja)
CN (1) CN105988479A (ja)
FR (1) FR3033712B1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6343366B1 (ja) * 2017-04-21 2018-06-13 株式会社Aerial Lab Industries 災害時における情報伝達方法
JP2018093435A (ja) * 2016-12-06 2018-06-14 Kddi株式会社 操縦装置、プログラム及び通信方法
WO2019181819A1 (ja) * 2018-03-23 2019-09-26 日本電気株式会社 移動体、遠隔制御装置、遠隔制御システム、遠隔制御方法、および遠隔制御プログラムが記録された記録媒体
US11212816B2 (en) 2016-12-05 2021-12-28 Kddi Corporation Flying device, control device, communication control method, and control method
US11860644B2 (en) 2016-12-12 2024-01-02 Kddi Corporation Flying device, flight control device, and flying control method

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6293304B2 (ja) * 2014-05-21 2018-03-14 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd 遠隔制御装置、制御システム及び制御方法
EP3283930A2 (en) * 2015-04-14 2018-02-21 Tobin Fisher System for authoring, executing, and distributing unmanned aerial vehicle flight-behavior profiles
US9681111B1 (en) 2015-10-22 2017-06-13 Gopro, Inc. Apparatus and methods for embedding metadata into video stream
US9667859B1 (en) 2015-12-28 2017-05-30 Gopro, Inc. Systems and methods for determining preferences for capture settings of an image capturing device
US9922387B1 (en) 2016-01-19 2018-03-20 Gopro, Inc. Storage of metadata and images
US9967457B1 (en) 2016-01-22 2018-05-08 Gopro, Inc. Systems and methods for determining preferences for capture settings of an image capturing device
US9665098B1 (en) * 2016-02-16 2017-05-30 Gopro, Inc. Systems and methods for determining preferences for flight control settings of an unmanned aerial vehicle
US9973792B1 (en) 2016-10-27 2018-05-15 Gopro, Inc. Systems and methods for presenting visual information during presentation of a video segment
US10187607B1 (en) 2017-04-04 2019-01-22 Gopro, Inc. Systems and methods for using a variable capture frame rate for video capture
CN108879084A (zh) * 2017-05-12 2018-11-23 深圳市道通智能航空技术有限公司 天线组件及具有此天线组件的无线通信电子设备
CN107357307A (zh) * 2017-07-05 2017-11-17 李奕铭 基于手掌识别的无人飞行器控制方法、控制装置和无人飞行器
KR20200093922A (ko) * 2019-01-29 2020-08-06 삼성전자주식회사 전자 장치의 외부 전자 장치를 제어하는 방법, 전자 장치 및 저장 매체
US20220189322A1 (en) * 2020-12-15 2022-06-16 The Boeing Company Functionality enhancements for e-enabled airplanes over internet protocol
US11380208B1 (en) * 2021-07-13 2022-07-05 Beta Air, Llc System and method for automated air traffic control

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8977284B2 (en) * 2001-10-04 2015-03-10 Traxcell Technologies, LLC Machine for providing a dynamic data base of geographic location information for a plurality of wireless devices and process for making same
JP4566825B2 (ja) * 2005-06-03 2010-10-20 レノボ・シンガポール・プライベート・リミテッド 携帯端末装置のアンテナの制御方法及び当該携帯端末装置
FR2898007B1 (fr) * 2006-02-27 2008-09-19 Sagem Comm Procede d'adaptation de l'interface homme/machine d'un telephone et telephone selon le procede
FR2938774A1 (fr) 2008-11-27 2010-05-28 Parrot Dispositif de pilotage d'un drone
FR2957266B1 (fr) 2010-03-11 2012-04-20 Parrot Procede et appareil de telecommande d'un drone, notamment d'un drone a voilure tournante.
FR2967321B1 (fr) 2010-11-05 2013-06-14 Parrot Procede de transmission de commandes et d'un flux video entre un drone et une telecommande par une liaison de type reseau sans fil.
US9270804B2 (en) * 2011-12-01 2016-02-23 Koninklijke Philips N.V. Method, wireless device and wireless communications system to guide a user of a wireless device to establish an optimal wireless direct link to another wireless device
US8515496B2 (en) * 2011-12-15 2013-08-20 Amazon Technologies, Inc. Antenna deployment switching for data communication of a user device
FR2985329B1 (fr) * 2012-01-04 2015-01-30 Parrot Procede de pilotage intuitif d'un drone au moyen d'un appareil de telecommande.
US20140349637A1 (en) * 2013-03-15 2014-11-27 Elwha LLC, a limited liability corporation of the State of Delaware Facilitating wireless communication in conjunction with orientation position
EP2987353A4 (en) * 2013-03-15 2016-11-16 Roderick A Hyde ALIGNMENT CONTROL FOR PORTABLE WIRELESS KNOTS
US8903568B1 (en) * 2013-07-31 2014-12-02 SZ DJI Technology Co., Ltd Remote control method and terminal

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11212816B2 (en) 2016-12-05 2021-12-28 Kddi Corporation Flying device, control device, communication control method, and control method
JP2018093435A (ja) * 2016-12-06 2018-06-14 Kddi株式会社 操縦装置、プログラム及び通信方法
US11860644B2 (en) 2016-12-12 2024-01-02 Kddi Corporation Flying device, flight control device, and flying control method
JP6343366B1 (ja) * 2017-04-21 2018-06-13 株式会社Aerial Lab Industries 災害時における情報伝達方法
JP2018182703A (ja) * 2017-04-21 2018-11-15 株式会社Aerial Lab Industries 災害時における情報伝達方法
WO2019181819A1 (ja) * 2018-03-23 2019-09-26 日本電気株式会社 移動体、遠隔制御装置、遠隔制御システム、遠隔制御方法、および遠隔制御プログラムが記録された記録媒体
JPWO2019181819A1 (ja) * 2018-03-23 2021-02-04 日本電気株式会社 移動体、遠隔制御装置、遠隔制御システム、遠隔制御方法、および遠隔制御プログラム
JP7031733B2 (ja) 2018-03-23 2022-03-08 日本電気株式会社 遠隔制御装置、遠隔制御システム、遠隔制御方法、および遠隔制御プログラム

Also Published As

Publication number Publication date
FR3033712A1 (fr) 2016-09-23
EP3069767B1 (fr) 2017-09-13
EP3069767A1 (fr) 2016-09-21
FR3033712B1 (fr) 2017-03-03
US20160274582A1 (en) 2016-09-22
CN105988479A (zh) 2016-10-05

Similar Documents

Publication Publication Date Title
JP2016174360A (ja) 飛行型または転動型ドローンに対する遠隔制御デバイスの向きを最適化する方法
JP7098001B2 (ja) 仮想シーンにおける距離情報表示方法並びにその、端末コンピュータ装置及びコンピュータプログラム
US9738382B2 (en) Drone immersion-piloting system
US9886033B2 (en) System for piloting a drone in immersion
US11798402B2 (en) Mobile computing device for use in controlling wirelessly controlled vehicles
US9098130B2 (en) Computer-readable storage medium having stored thereon input processing program, input processing apparatus, input processing method, and input processing system
US11691079B2 (en) Virtual vehicle control method in virtual scene, computer device, and storage medium
US20180181119A1 (en) Method and electronic device for controlling unmanned aerial vehicle
US20140008496A1 (en) Using handheld device to control flying object
US9904982B2 (en) System and methods for displaying panoramic content
CN107707817B (zh) 一种视频拍摄方法及移动终端
JP2011189929A (ja) 無人機、特に回転翼無人機を遠隔制御するための方法および機器
KR20170105071A (ko) 컴퓨터 엔터테인먼트 시스템용 컨트롤러
JP6744033B2 (ja) 移動体操縦システム、操縦シグナル送信システム、移動体操縦方法、プログラム、および記録媒体
CN113041619B (zh) 虚拟车辆的控制方法、装置、设备及介质
US20220184506A1 (en) Method and apparatus for driving vehicle in virtual environment, terminal, and storage medium
JP6891319B2 (ja) 表示制御装置及び表示制御方法
US11632529B2 (en) Projecting content onto water to enhance computer simulation
US11771993B2 (en) Changing response window for interactive content using user's reaction time
JP2019020829A (ja) 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム
US20240070929A1 (en) Augmented reality system with tangible recognizable user-configured substrates
JP2021152665A (ja) 表示制御装置及び表示制御方法
CN112245913A (zh) 一种游戏视角控制方法、移动终端以及计算机存储介质

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20170222

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170425

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190218

A761 Written withdrawal of application

Free format text: JAPANESE INTERMEDIATE CODE: A761

Effective date: 20190627