JP2017185928A - 飛行型カメラ装置、飛行型カメラシステム、端末装置、飛行型カメラ装置の制御方法およびプログラム - Google Patents

飛行型カメラ装置、飛行型カメラシステム、端末装置、飛行型カメラ装置の制御方法およびプログラム Download PDF

Info

Publication number
JP2017185928A
JP2017185928A JP2016076961A JP2016076961A JP2017185928A JP 2017185928 A JP2017185928 A JP 2017185928A JP 2016076961 A JP2016076961 A JP 2016076961A JP 2016076961 A JP2016076961 A JP 2016076961A JP 2017185928 A JP2017185928 A JP 2017185928A
Authority
JP
Japan
Prior art keywords
terminal device
camera
flying
current position
visible light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016076961A
Other languages
English (en)
Other versions
JP6308238B2 (ja
JP2017185928A5 (ja
Inventor
岡田 健
Ken Okada
岡田  健
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Priority to JP2016076961A priority Critical patent/JP6308238B2/ja
Priority to CN201710172051.6A priority patent/CN107277739A/zh
Priority to US15/469,214 priority patent/US20170293795A1/en
Publication of JP2017185928A publication Critical patent/JP2017185928A/ja
Publication of JP2017185928A5 publication Critical patent/JP2017185928A5/ja
Application granted granted Critical
Publication of JP6308238B2 publication Critical patent/JP6308238B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/56Accessories
    • G03B17/561Support related camera accessories
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/025Services making use of location information using location based information parameters
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64CAEROPLANES; HELICOPTERS
    • B64C27/00Rotorcraft; Rotors peculiar thereto
    • B64C27/04Helicopters
    • B64C27/08Helicopters with two or more rotors
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64CAEROPLANES; HELICOPTERS
    • B64C39/00Aircraft not otherwise provided for
    • B64C39/02Aircraft not otherwise provided for characterised by special use
    • B64C39/024Aircraft not otherwise provided for characterised by special use of the remote controlled vehicle type, i.e. RPV
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64DEQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
    • B64D47/00Equipment not otherwise provided for
    • B64D47/08Arrangements of cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U10/00Type of UAV
    • B64U10/10Rotorcrafts
    • B64U10/13Flying platforms
    • B64U10/14Flying platforms with four distinct rotor axes, e.g. quadcopters
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/13Receivers
    • G01S19/14Receivers specially adapted for specific applications
    • G01S19/15Aircraft landing systems
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • G03B15/006Apparatus mounted on flying objects
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0094Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots involving pointing a payload, e.g. camera, weapon, sensor, towards a fixed or moving target
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • G06V20/13Satellite images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • G06V20/17Terrestrial scenes taken from planes or by drones
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B5/00Near-field transmission systems, e.g. inductive or capacitive transmission systems
    • H04B5/70Near-field transmission systems, e.g. inductive or capacitive transmission systems specially adapted for specific purposes
    • H04B5/72Near-field transmission systems, e.g. inductive or capacitive transmission systems specially adapted for specific purposes for local intradevice communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72415User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories for remote control of appliances
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U10/00Type of UAV
    • B64U10/10Rotorcrafts
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00UAVs specially adapted for particular uses or applications
    • B64U2101/30UAVs specially adapted for particular uses or applications for imaging, photography or videography
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2201/00UAVs characterised by their flight controls
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U30/00Means for producing lift; Empennages; Arrangements thereof
    • B64U30/20Rotors; Rotor supports
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U50/00Propulsion; Power supply
    • B64U50/10Propulsion
    • B64U50/13Propulsion using external fans or propellers

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Remote Sensing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Astronomy & Astrophysics (AREA)
  • Automation & Control Theory (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Studio Devices (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Selective Calling Equipment (AREA)
  • Image Analysis (AREA)

Abstract

【課題】飛行可能な駆動装置を備えたカメラの技術に関し、飛行型カメラが被追尾対象を捕捉できないような場所に存在する場合であってもそこから追尾可能とする。【解決手段】ウェアラブルデバイス110は、ユーザによる呼出し指示の操作に基づき、GPSセンサで検出した自装置の現在位置を飛行型カメラ装置100に送信する(201)。飛行型カメラ装置100は、受信したウェアラブルデバイス110の現在位置に向けて飛行し(図2の202)、近づいたら、可視光点滅物体111が例えば点滅発光する可視光を検索しながら(図2の203、204)、顔認識処理と、認識した顔に合焦させて撮影を行わせる撮影実行処理とを実行する(図2の205)。飛行型カメラ装置100は、撮影を終了すると、記憶している飛行開始位置に向けて飛行して帰還する処理を実行する(図2の206)。【選択図】図2

Description

本発明は、飛行型カメラ装置を移動制御する技術に関する。
いわゆるドローンなど空撮を行う飛行型カメラが普及しつつある。また工業製品、セキュリティ製品として被写体を追尾して撮影を行う技術も知られている。
追尾機能を有する飛行型カメラの従来技術として、次のような技術が知られている(例えば特許文献1に記載の技術)。カメラを搭載した飛行ユニットは、作業者に付された標識を画像認識等により識別し、作業者が移動すると、標識に追従して飛行し、作業者の周辺を撮像する。飛行ユニットにより撮像された画像は基地装置に送信され、基地装置から監視センタにリアルタイムで中継される。このため、監視センタでは作業者の移動や作業内容を画像にて確認することができる。これにより、警備対象が移動する場合や、常設式の監視カメラを設置することが困難な場合であっても、対象を柔軟に撮像することを可能にする。
追尾機能を有する飛行型カメラの従来技術として、次のような技術も知られている(例えば特許文献2に記載の技術)。防御装置1は移動対象物25の上空を覆うことにより、所定の外乱から防御するための傘部と、傘部を空中移動させるようにするための空中移動機構と、その空中移動駆動部と、起動情報受信部と、撮像部と、制御部とを備える。制御部は、起動情報受信部で起動情報を受信したことに基づき自装置を起動して、撮像部による撮像を開始させ、その起動後、追従開始位置において、撮像部の撮像画像に基づいて移動対象物を認識する。また、制御部は、撮像部の撮像画像に基づいて、移動対象物の移動を検出したときに、空中移動駆動部を、自装置の空中の移動が、認識手段で認識した移動対象物の移動に追従するように制御して、傘部により移動対象物を移動中においても所定の外乱から防御する。
特開2014−53821号公報 特開2015−48025号公報
しかしながら、個人ユーザがいわゆる自分撮りで使うような商品は従来なく、また個人ユーザが使うためには、いつでも、どこでも、誰にでも、簡単に使える必要がある。特に、上述した従来技術では、飛行型カメラと被追尾対象の位置が離れていたり複数人の中に埋もれたりすると、被追尾対象を特定できず追尾を行うことができないという課題があった。
そこで、本発明は、飛行型カメラが被追尾対象を特定できないような場所または環境であっても、そこから被追尾対象を特定し追尾可能とすることを目的とする。
態様の一例では、端末装置を追尾して飛行する飛行型カメラ装置であって、端末装置の遠方においては端末装置の現在位置を基にその端末装置の近傍まで飛行する第1の制御手段と、端末装置の現在位置の近傍においてはその端末装置又はその端末装置のユーザを識別する第2の制御手段と、を備える。
本発明によれば、飛行型カメラが被追尾対象を特定できないような場所または環境であっても、そこから被追尾対象を特定し追尾することが可能となる。
本発明による飛行型カメラシステムの実施形態の構成例を示す図である。 飛行型カメラシステムの動作説明図である。 飛行型カメラ装置の構成例を示すブロック図である。 ウェアラブルデバイスの構成例を示すブロック図である。 ウェアラブルデバイスの制御処理例を示すフローチャートである。 飛行型カメラ装置の制御処理例を示すフローチャート(その1)である。 飛行型カメラ装置の制御処理例を示すフローチャート(その1)である。 帰還処理の詳細例を示すフローチャートである。
以下、本発明を実施するための形態について図面を参照しながら詳細に説明する。図1は、本発明による飛行型カメラシステムの実施形態の構成例を示す図である。本実施形態は、飛行型カメラ装置100と、端末装置であるウェアラブルデバイス110と、このウェアラブルデバイス110と一体又は別体として構成される可視光点滅物体111とから成る。
飛行型カメラ装置100では、メインフレーム101に4つのモーターフレーム102(支持部)が取り付けられている。モーターフレーム102は、モータ104を支持できるようになっていて、モータ104のモータ軸にはロータブレード103が固定されている。各ロータブレード103には一定の迎え角が形成されており、回転により揚力が発生させられるようになっている。4組のモータ104とロータブレード103は、駆動推進部を構成している。
メインフレーム101の下部には、カメラ部であるカメラ105が取り付けられている。このカメラ105は、例えば半天周カメラであり、飛行型カメラ装置100から下方360度の範囲を同時又は順次撮影することができる。カメラ105の周囲には、着陸用脚107が設置されている。メインフレーム101の内部のコントロールボックス106には、図3で後述する各種制御機器が収められている。その一つとして、飛行型カメラ装置100は、GPS(Global Positioning System:全地球測位システム)の電波を受信するセンサ(カメラ側位置検出部)を備えており、図1の121として示されるように、GPS衛星130からの電波を受信することにより、自装置の全地球範囲での現在位置を測位することができる。これに加えて、飛行型カメラ装置100は、例えば無線LAN(ローカルエリアネットワーク)やBluetoothとビーコン技術とを組み合わせた屋内測位システムの電波を受信するセンサを備えてもよく、自装置の特定の屋内での現在位置を測位することができる。
端末装置である例えば腕時計型のウェアラブルデバイス110(端末側通信制御部)と飛行型カメラ装置100(カメラ側通信制御部)は、図1の122として示されるように、例えばLTE(Long Term Evolution、「LTE」は登録商標)等の携帯電話通信規格やBLE(Bluetooth Low Energy、「Bluetooth」は登録商標) Class1等の近距離無線規格に基づいてデータ通信を実行することができる。また、ウェアラブルデバイス110は、GPSの電波を受信するセンサ(端末側位置検出部)を備えており、図1の123として示されるように、GPS衛星130からの電波を受信することにより、自装置の全地球範囲での現在位置を測位することができる。これに加えて、ウェアラブルデバイス110は、例えば前述した無線LAN(ローカルエリアネットワーク)やBluetoothとビーコン技術とを組み合わせた屋内測位システムの電波を受信するセンサを備えてもよく、自装置の特定の屋内での現在位置を測位することができる。
可視光点滅物体111(可視光発光部)は、例えばLED(Light Emitting Diode:発光ダイオード)を点滅駆動可能なデバイスであり、可視光を例えば点滅させながら発光することができる。この可視光点滅物体111は、ウェアラブルデバイス110の一部に設置されてもよいし、ウェアラブルデバイス110からは独立して、ブレスレット、ブローチ、またはペンダントに組み込まれてもよい。
飛行型カメラ装置100は、図1の124として示されるように、ウェアラブルデバイス110の現在位置に近づいたときに、その近くにある可視光点滅物体111が点滅発光する光をカメラ105によって捕捉することができ、続いて、図1の125として示されるように、その可視光点滅物体111を装着しているユーザの顔を認識することができる。
図2は、図1の飛行型カメラシステムの動作説明図である。例えば、親の腕にウェアラブルデバイス110が装着されており、子の腕には可視光点滅物体111が装着されている。最初、飛行型カメラ装置100は親や子から離れた任意の位置に置かれている。
この状態で、親が、ウェアラブルデバイス110において、呼出し指示の操作を行うと、ウェアラブルデバイス110は、その呼出し指示に基づいて、GPSセンサにて自装置の現在位置を検出し、その現在位置を飛行型カメラ装置100に送信する現在位置送信処理を実行する(図2の201)。
飛行型カメラ装置100は、ウェアラブルデバイス110からその現在位置を受信したときに、その受信した現在位置とGPSセンサにて順次検出される自装置の現在位置とを順次比較しながら、モータ104およびロータブレード103を含む駆動推進部を制御することにより、受信したウェアラブルデバイス110の現在位置に向けて飛行する処理を実行する(図2の202)。
飛行型カメラ装置100は、受信したウェアラブルデバイス110の現在位置に近づいたら、親が装着しているウェアラブルデバイス110の近くにいる子が装着している可視光点滅物体111が例えば点滅発光する可視光を検索しながら(図2の203、204)、子の顔を認識する顔認識処理と、カメラ105に対してその認識した顔に合焦させて撮影を行わせる撮影実行処理と、を実行する(図2の205)。
ここで、飛行型カメラ装置100は、飛行開始時に、GPSセンサから自装置の位置を取得して飛行開始位置として記憶する処理を実行する。そして、飛行型カメラ装置100は、撮影を終了すると、記憶している飛行開始位置とGPSセンサにて順次検出される自装置の現在位置とを順次比較しながら、モータ104とロータブレード103を含む駆動推進部を制御することにより、飛行開始位置に向けて飛行して帰還する処理を実行する(図2の206)。
このようにして、本実施形態では、親が操作するウェアラブルデバイス110からの呼出し指示に基づいて、飛行型カメラ装置100が子の上空まで飛行してきて、子を自動的に認識して撮影し、撮影が終わったら再び元の飛行型カメラに戻るという、一連の自動撮影動作を実行することができる。本実施形態のその他の利用シーンとして、例えば、可視光点滅物体111が一体に備えられているウェアラブルデバイス110を装着したユーザが、海岸の沖でサーフィンをするようなときに、海岸に置いておいた飛行型カメラ装置100をウェアラブルデバイス110から呼び出して自分の上空まで飛行させ、サーフィンをしている自分を自動的に撮影させ、撮影が終わったら再び海岸に帰還させるという、一連の自動撮影動作を実行できる。本実施形態のさらに他の利用シーンとして、例えば、可視光点滅物体111が一体に備えられているウェアラブルデバイス110を装着したユーザが、釣りをするようなときに、魚がヒットしたら岩場に置いておいた飛行型カメラ装置100をウェアラブルデバイス110から呼び出して自分の上空まで飛行させ、釣りをしている自分を自動的に撮影させ、撮影が終わったら再び岩場に帰還させるという、一連の自動撮影動作を実行できる。この場合、ウェアラブルデバイス110は例えば携帯電話通信規格に従って自分の現在位置を飛行型カメラ装置100に知らせることができ、飛行型カメラ装置100は例えばGPSまたは前述したビーコンなどに従ってウェアラブルデバイス110の上空まで飛行することができる。このため、飛行型カメラ装置100は、最初はユーザをカメラ105での撮像により特定できないような場所または環境であっても、そこからユーザを特定し追尾することが可能となる。
図3は、図1の飛行型カメラ装置100の構成例を示すブロック図である。コントローラ301には、カメラ105(図1参照)を含むカメラシステム302、例えばGPSセンサ(カメラ側位置検出部)、加速度センサ、ジャイロなどから構成されるフライトセンサ303、それぞれ#1から#4の各モータ105(図1参照)を駆動する#1から#4のモータドライバ304、図1のウェアラブルデバイス110との間で通信を行う通信制御部305(カメラ側通信制御部)、バッテリ307の電圧をモニタしながら各モータドライバ304に電力を供給するパワーセンサ306が接続される。なお、特には図示しないが、バッテリ307の電力は、301〜306の各ユニットにも供給される。コントローラ301は、通信制御部305を介して、図1のウェアラブルデバイス110との間で各種制御情報を通信する。通信制御部305は、例えばLTE規格やBLE Class1規格による無線通信を制御する集積回路である。また、コントローラ301は、フライトセンサ303から、飛行型カメラ装置100の機体の姿勢に関する情報をリアルタイムで取得する。さらに、コントローラ301は、パワーセンサ306を介して、バッテリ307の電圧をモニタしながら、#1から#4の各モータドライバ304に、それぞれパルス幅変調に基づくデューティ比による電力指示信号を送信する。これにより、#1から#4のモータドライバ304はそれぞれ、#1から#4のモータ105の回転速度を独立して制御することができる。また、コントローラ301は、カメラシステム302を制御して、カメラ105(図1)による撮影動作を制御する。
図2のコントローラ301、カメラシステム302、フライトセンサ303、モータドライバ304、通信制御部305、パワーセンサ306、およびバッテリ307は、図1のメインフレーム101内のコントロールボックス106の部分に搭載される。
図4は、図1のウェアラブルデバイス110の構成例を示すブロック図である。ウェアラブルデバイス110は、CPU401、メモリ402、センサ部403、タッチパネルディスプレイ404、操作部405、および通信制御部406(端末側通信制御部)を備える。通信制御部406は、飛行型カメラ装置100内の通信制御部305との例えばLTE規格やBLE Class1規格による無線通信を制御する集積回路である。メモリ302は、制御処理プログラム実行時のワークメモリとしても使用される。タッチパネルディスプレイ404は、ユーザが飛行型カメラ装置100を呼び出す装置を行うときの各種メニューを液晶ディスプレイに表示するとともに、ユーザによるタッチ入力指示を受け付けるデバイスである。操作部405は、各種操作入力を行うハードウェアであり、例えばウェアラブルデバイス110のケース横側に設置された操作ボタン類である。CPU401は、ウェアラブルデバイス110の全体動作を制御し、CPUと制御処理プログラムを記憶したROM(リードオンリーメモリ)を内蔵する集積回路である。センサ部403は、少なくともGPSセンサ(端末側位置検出部)のほか、加速度センサなどを備える。
ウェアラブルデバイス110にはまた、可視光点滅物体111が接続される。前述したように、この可視光点滅物体111はウェアラブルデバイス110と一体として構成されてもよいし、別体として構成されてもよい。別体の場合には、ウェアラブルデバイス110と可視光点滅物体111は、例えば近距離無線通信規格Bluetoothにより無線接続されてよい。
図5は、図4に示されるウェアラブルデバイス110のCPU401が実行する制御処理例を示すフローチャートである。この処理は、CPU401が、内蔵するROMに記憶された制御処理プログラムを、メモリ402をワークメモリとして使用しながら実行する動作である。CPU401は、例えばユーザが操作部405の特定の操作ボタンを押すことにより、この制御処理を開始する。
CPU401はまず、操作部405(図4)の操作ボタンが押されたか否かを判定し待機する(ステップS501の判定がNOの繰返し)。
ステップS501の判定がYESになると、CPU401は、センサ部403内のGPSセンサにて現在位置を取得させる(ステップS502)。
CPU401は、GPSセンサにて現在位置が取得できたか否かを判定する(ステップS503)。
ステップS503の判定がYESならば、CPU401は、ステップS502で取得した現在位置を、通信制御部406を介して飛行型カメラ装置100に送信する(ステップS505)。
次に、CPU401は、通信制御部406を介して飛行型カメラ装置100から検索開始通知を受信するまで、上述のステップS502、S503、S505の一連の処理を繰り返し実行する(ステップS5506の判定がNO)。
通信制御部406を介して飛行型カメラ装置100から検索開始通知を受信することによりステップS506の判定がYESになると、CPU401は、可視光点滅物体111に点滅を開始させる(ステップS507)。
さらに、CPU401は、ユーザに可視光点滅物体111を飛んでくる飛行型カメラ装置100の方に向けるように促すメッセージを、タッチパネルディスプレイ404のディスプレイに表示する(ステップS508)。
次に、CPU401は、静止画撮影、動画撮影、またはタイムラプス撮影などの撮影形態をユーザに指示させるための撮影形態メニューを、タッチパネルディスプレイ404のディスプレイに表示する(ステップS509)。
続いて、CPU401は、ユーザがタッチパネルディスプレイ404上でいずれかの撮影形態を指示したか否かを判定する(ステップS510)。
ステップS510の判定がYESならば、CPU401は、ユーザが指示した撮影形態を、通信制御部406を介して飛行型カメラ装置100に送信する(ステップS511)。
ステップS510の判定がNOならば、CPU401は、ステップS511の処理はスキップする。
その後、CPU401は、ユーザが、操作部405の操作ボタンを操作して撮影終了を指示したか否かを判定する(ステップS512)。
ステップS512の判定がNOならば、CPU401は、ステップS510の判定処理に戻り、ステップS510からS512の一連の処理を繰り返し実行する。
ステップS512の判定がYESになると、CPU401は、撮影終了を、通信制御部406を介して飛行型カメラ装置100に送信する。その後、CPU401は、図5のフローチャートで示される制御処理を終了する。
ステップS502の処理の結果、GPSセンサにて現在位置を取得できなかったことによりステップS503の判定がNOとなったときには、飛行型カメラ装置100はウェアラブルデバイス110の現在位置がわからないため、CPU401は、通信制御部406を介して飛行型カメラ装置100に、終了指示を送信する(ステップS504)。その後、CPU401は、ステップS501の処理に戻る。
図6および図7は、飛行型カメラ装置100の図3に示されるコントローラ301が実行する制御処理例を示すフローチャートである。この処理は、コントローラ301が、内蔵するROMに記憶された制御処理プログラムを実行する動作である。コントローラ301は、例えばユーザが特には図示しない電源スイッチをオンすることにより、この制御処理を開始する。
コントローラ301はまず、フライトセンサ303内のGPSセンサにて現在位置を取得させる(図6のステップS601)。
コントローラ301は、GPSセンサにて現在位置が取得できたか否かを判定する(図6のステップS602)。
ステップS602の判定がNOならば、飛行ができないため、コントローラ301は、そのまま図6および図7のフローチャートで示される制御処理を終了する。
ステップS602の判定がYESならば、コントローラ301は、ステップS601で取得した現在位置を飛行開始位置としてコントローラ301内の特には図示しないメモリに記憶する(図6のステップS603)。
次に、コントローラ301は、通信制御部305が、ウェアラブルデバイス110のCPU401が図5のステップS505で送信した現在位置の情報を受信したか否かを判定する(図6のステップS604)。
ステップS604の判定がNOならば、コントローラ301は、通信制御部305が、上記CPU401が図5のステップS504で送信した終了指示を受信したか否かを判定する(図6のステップS605)。
ステップS605の判定もNOならば、コントローラ301は、ステップS604に戻る。
ステップS605の判定がYESとなった場合、ウェアラブルデバイス110の位置がわからず飛行を行えないので、コントローラ301は、そのまま図6および図7のフローチャートで示される制御処理を終了する。
ステップS604の判定がYESになると、コントローラ301は、#1から#4のモータドライバ304を制御することにより、離陸して、受信したウェアラブルデバイス110の現在位置に対応する目的地に向けて飛行を開始する(図6のステップS606)。
飛行中、コントローラ301は、フライトセンサ303内のGPSセンサにて現在位置を取得する(図6のステップS607)。
コントローラ301は、GPSセンサにて現在位置が取得できたか否かを判定する(図6のステップS608)。
ステップS608の判定がNOならば、それ以上飛行ができないため、コントローラ301は、#1から#4のモータドライバ304を制御してその場に着陸する(図6のステップS609)。その後、コントローラ301は、図6および図7のフローチャートで示される制御処理を終了する。
ステップS608の判定がYESならば、コントローラ301は、ステップS607で取得した自装置の現在位置を、ステップS604受信したウェアラブルデバイス110の現在位置と比較することにより、目的地に到着したか否かを判定する(図6のステップS610)。
ステップS610の判定がNOならば、コントローラ301は、ステップS606の処理に移行し、飛行を続行する。
ステップS610の判定がYESになると、コントローラ301は、図7のステップS611の処理に移行する。ステップS611において、コントローラ301は、図3のフライトセンサ303の出力に基づいて#1から#4のモータドライバ304を制御することにより、図1の可視光点滅物体111を検索できる高度まで降下する。
次に、コントローラ301は、通信制御部305を介してウェアラブルデバイス110に、可視光点滅物体111の検索開始を通知する(図7のステップS612)。
その後、コントローラ301は、図3のカメラシステム302を介して図1の半天周カメラ105にて撮像を行いながら、可視光点滅物体111からの可視光の点滅を検索して可視光点滅物体111を検索する(図7のステップS613)。
コントローラ301は、可視光点滅物体111が見つかったか否かを判定する(図7のステップS614)。
ステップS614の判定がNOならば、コントローラ301は、ステップS612の通知の後一定時間が経過したか否かを判定する(図7のステップS615)。
ステップS615の判定がNOならば、コントローラ301は、ステップS613の処理に戻って、可視光点滅物体111の検索を続行する。
ステップS615の判定がYESになったら、コントローラ301は、図7のステップS627からS630の一連の処理を実行する。これらの処理については後述する。
ステップ613からS615の繰り返し処理において、可視光点滅物体111が見つかったことによりステップS614の判定がYESになると、コントローラ301は、図3のフライトセンサ303の出力に基づいて#1から#4のモータドライバ304を制御することにより、可視光点滅物体111を保持しているユーザの顔認識ができる距離まで近づく(図7のステップS616)。
次に、コントローラ301は、電力消費を抑えるために、図3のフライトセンサ303内のGPSセンサを停止させる(図7のステップS617)。
次に、コントローラ301は、図3のフライトセンサ303の出力に基づいて#1から#4のモータドライバ304を制御することにより、ユーザとの距離をキープしながら、ユーザの顔を認識する顔認識処理を実行する(図7のステップS618)。
コントローラ301は、ユーザの顔が認識できたか否かを判定する(図7のステップS619)。
ステップS619の判定がNOならば、コントローラ301は、図3のフライトセンサ303の出力に基づいて#1から#4のモータドライバ304を制御することにより、少し高度を上げ留(ステップS620)。
その後、コントローラ301は、ステップS613の処理に戻り、再度可視光点滅物体111の検索を行う。
顔認識に成功することによりステップS619の判定がYESになると、コントローラ301は、ウェアラブルデバイス110内のCPU401が図5のステップS511により送信した撮影形態を、通信制御部305を介して受信しているか否かを判定する(図7のステップS621)。
ステップS621の判定がYESならば、コントローラ301は、受信した撮影形態で、カメラシステム302に対してカメラ105によるユーザの撮影を実行させる(図7のステップS622)。
ステップS621の判定がNOならば、コントローラ301は、予め初期設定された撮影形態で、カメラシステム302に対してカメラ105によるユーザの撮影を実行させる(図7のステップS623)。
コントローラ301は、撮影形態によって設定された撮影が終了したか否かを判定する(図7のステップS624)。
ステップS624の判定がNOならば、コントローラ301は、ウェアラブルデバイス110内のCPU401が図5のステップS513で送信した撮影終了の指示を受信したか否かを判定する(図7のステップS625)。
ステップS625の判定もNOならば、コントローラ301は、ステップS621の処理に戻ってカメラシステム302にカメラ105による撮影を続行させる。
撮影が終了しまたは撮影終了が指示されたことによりステップS624またはステップS625の判定がYESとなった場合には、コントローラ301は、フライトセンサ303内のGPSセンサを起動する(図7のステップS626)。
コントローラ301は、フライトセンサ303内のGPSセンサにて現在位置を取得する(図7のステップS627)。
コントローラ301は、GPSセンサにて現在位置が取得できたか否かを判定する(図7のステップS628)。
ステップS628の判定がNOならば、それ以上飛行ができないため、コントローラ301は、#1から#4のモータドライバ304を制御してその場に着陸する(図7のステップS629)。その後、コントローラ301は、図6および図7のフローチャートで示される制御処理を終了する。
ステップS628の判定がYESならば、コントローラ301は、帰還処理を実行する(ステップS630)。図8は、ステップS630の帰還処理の詳細例を示すフローチャートである。
コントローラ301はまず、#1から#4のモータドライバ304を制御することにより、図6のステップS603で記憶していた飛行開始位置に対応する帰還地に向けて飛行を開始する(ステップS801)。
飛行中、コントローラ301は、フライトセンサ303内のGPSセンサにて現在位置を取得する(ステップS802)。
コントローラ301は、GPSセンサにて現在位置が取得できたか否かを判定する(ステップS803)。
ステップS803の判定がNOならば、それ以上飛行ができないため、コントローラ301は、#1から#4のモータドライバ304を制御してその場に着陸する(ステップS804)。その後、コントローラ301は、図8のフローチャートで示される図7のステップS630の処理を終了し、図6および図7のフローチャートで示される制御処理を終了する。
ステップS803の判定がYESならば、コントローラ301は、ステップS802で取得した自装置の現在位置を、図6のステップS603で記憶した飛行開始位置と比較することにより、帰還地に到着したか否かを判定する(ステップS805)。
ステップS805の判定がNOならば、コントローラ301は、ステップS801の処理に移行し、帰還の飛行を続行する。
ステップS805の判定がYESになると、コントローラ301は、#1から#4のモータドライバ304を制御して帰還地に着陸する(ステップS806)。その後、コントローラ301は、図8のフローチャートで示される図7のステップS630の処理を終了し、図6および図7のフローチャートで示される制御処理を終了する。
可視光点滅物体111が見つからず一定時間が経過することにより図7のステップS615の判定がYESになった場合も、上述した図7のステップS627からS630の一連の処理(図8のフローチャートも含む)が実行されることにより、飛行型カメラ装置100は帰還地へ帰還するかまたはその場に着陸する。
以上説明した実施形態によれば、飛行型カメラ装置100は、最初はユーザをカメラ105での撮像により特定できないような場所または環境であっても、そこからユーザを特定し追尾可能することが可能となり、撮影が終了したら自動的に飛行開始位置に帰還させることが可能となる。
なお、撮影が終了したら飛行開始位置に帰還させるのではなく、ユーザの指示に基づくウェアラブルデバイス110からの通知に基づいて、その場に着陸させたり、上空でホバリングをさせたりするようにしてもよい。
以上の実施形態に関して、さらに以下の付記を開示する。
(付記1)
端末装置を追尾して飛行する飛行型カメラ装置であって、
前記端末装置の遠方において前記端末装置の現在位置を基に該端末装置の近傍まで飛行する第1の制御手段と、
前記端末装置の現在位置の近傍において該端末装置又は該端末装置のユーザを識別する第2の制御手段と、
を備える飛行型カメラ装置。
(付記2)
前記第1の制御手段は、全地球測位システムからの電波を受信して位置を算出するGPS受信手段を含み、該GPS受信手段により取得した該飛行型カメラ装置の位置と前記端末装置の現在位置とを順次比較しながら前記端末装置の現在位置の近傍まで飛行する、付記1記載の飛行型カメラ装置。
(付記3)
前記第2の制御手段は、可視光受信手段、通信屋内測位システムからのビーコン電波を受信する手段、携帯電話通信規格によるデータ通信を受信する手段、近距離無線通信規格によるデータ通信を受信する手段、のいずれかを含む付記1又は2記載の飛行型カメラ装置。
(付記4)
前記第2の制御手段は、顔認識手段をさらに含む、付記1ないし3のいずれかに記載の飛行型カメラ装置。
(付記5)
前記第2の制御手段は、前記端末装置と連動する可視光発光装置が発光する可視光を検索する可視光検索処理と、該可視光の検索に成功した後前記ユーザの顔を認識する顔認識処理を実行する、付記4に記載の飛行型カメラ装置。
(付記6)
前記第2の制御手段は、前記認識した顔に合焦させて撮影を行わせる撮影処理を実行する、付記5に記載の飛行型カメラ装置。
(付記7)
撮影を行うカメラ部と、
空中を飛行する駆動推進部と、
自装置の位置を検出するカメラ側位置検出部と、
前記端末装置と通信を行うカメラ側通信制御部と、
をさらに備え、
前記第1の制御手段は、前記カメラ側通信制御部を介して前記端末装置から前記端末装置の現在位置を受信して、該受信した前記端末装置の現在位置と前記カメラ側位置検出部にて順次検出される自装置の現在位置とを順次比較しながら、前記駆動推進部を制御することにより前記受信した前記端末装置の現在位置の近傍まで飛行する処理を実行する、付記1ないし6のいずれかに記載の飛行型カメラ装置。
(付記8)
飛行型カメラ装置が端末装置と通信することにより飛行するシステムであって、
前記端末装置は、現在位置を前記飛行型カメラ装置に送信し、
前記飛行型カメラ装置は、前記端末装置の現在位置を受信して前記端末装置の現在位置に向けて飛行する第1の処理部と、前記受信した前記端末装置の現在位置に近づいたら該端末装置又は該端末装置のユーザを識別する第2の処理部と、
を有する飛行型カメラシステム。
(付記9)
前記端末装置は、ユーザによって保持され前記端末装置と一体又は別体であって可視光を発光する可視光発光装置を更に有する、付記8に記載の飛行型カメラシステム。
(付記10)
前記飛行型カメラ装置は、
前記受信した前記端末装置の現在位置に近づいたら前記可視光発光装置が発光する可視光を検索する可視光検索処理と、該可視光の検索に成功した後ユーザの顔を認識する顔認識処理と、前記カメラ部に該認識した顔の撮影を行わせる撮影処理を実行するカメラ側制御部を有する、付記8または9記載の飛行型カメラシステム。
(付記11)
前記飛行型カメラ装置は、前記可視光の検索を開始した旨を前記端末装置に送信する処理を更に実行し、
前記端装置は、前記飛行型カメラ装置から前記可視光の検索を開始した旨を受信したら、前記可視光発光装置に対して前記可視光を点滅させて発光させる処理を更に実行し、
前記飛行型カメラ装置は、前記可視光の点滅を検出したら、前記検出した可視光の点滅に向かって近づき、前記顔認識処理を実行する、付記10に記載の飛行型カメラシステム。
(付記12)
前記端末装置は、前記ユーザが指示した撮影形態を、前記飛行型カメラ装置に送信する処理を更に実行し、
前記飛行型カメラ装置は、受信した前記撮影形態に応じた撮影を前記カメラ部に実行させる、付記8ないし11のいずれかに記載の飛行型カメラシステム。
(付記13)
前記飛行型カメラ装置は、
飛行開始時に自装置の位置を取得して飛行開始位置として記憶する処理と、
前記撮影の終了時に、記憶している前記飛行開始位置と順次検出される自装置の現在位置とを順次比較しながら、前記飛行開始位置に向けて飛行して帰還する処理とを更に実行する、付記8ないし12のいずれかに記載の飛行型カメラシステム。
(付記14)
前記カメラ側制御部は、所定時間または所定過程の撮影を行った時点で前記撮影を終了する、付記13に記載の飛行型カメラシステム。
(付記15)
前記端末側制御部は、ユーザが撮影終了を指示したときに、前記端末側通信制御部を介して前記飛行型カメラ装置に撮影終了を送信し、
前記カメラ側制御部は、前記カメラ側通信制御部を介して前記撮影終了を受信した時点で前記撮影を終了する、付記13または14記載の飛行型カメラシステム。
(付記16)
飛行型カメラ装置と通信することにより該飛行型カメラ装置を被写体の上空まで飛行させて該被写体の撮影を行わせる端末装置であって、
自装置の位置を検出する端末側位置検出部と、
ユーザの呼出し指示に基づいて、前記端末側位置検出部にて自装置の現在位置を検出し、該現在位置を前記飛行型カメラ装置に送信する現在位置送信処理を実行する端末側制御部と、
を有する端末装置。
(付記17)
前記飛行型カメラ装置に対して撮影制御を行わせる撮影制御部をさらに有する、付記15記載の端末装置。
(付記18)
飛行型カメラ装置が端末装置の上空へ到達するまでは、前記端末装置の現在位置と測位システムからの電波を受信して前記飛行体カメラ装置を位置制御し、
前記端末装置の上空へ到達後は、前記端末装置又は該端末装置のユーザを識別する、
飛行型カメラ装置の制御方法。
(付記19)
端末装置を追尾して飛行する飛行型カメラ装置を制御するコンピュータに、
前記端末装置の遠方においては前記端末装置の現在位置を基に該端末装置の近傍まで飛行するステップと、
前記端末装置の現在位置の近傍では該端末装置又は該端末装置のユーザを識別するステップと、
を実行させるためのプログラム。
100 飛行型カメラ装置
101 メインフレーム
102 モーターフレーム
103 ロータブレード
104 モータ
105 カメラ
106 コントロールボックス
107 着陸用脚
110 ウェアラブルデバイス
111 可視光点滅物体
301 コントローラ
302 カメラシステム
303 フライトセンサ
304 モータドライバ
305、406 通信制御部
306 パワーセンサ
307 バッテリ
401 CPU
402 メモリ
403 センサ部
404 タッチパネル
405 操作部

Claims (19)

  1. 端末装置を追尾して飛行する飛行型カメラ装置であって、
    前記端末装置の遠方において前記端末装置の現在位置を基に該端末装置の近傍まで飛行する第1の制御手段と、
    前記端末装置の現在位置の近傍において該端末装置又は該端末装置のユーザを識別する第2の制御手段と、
    を備える飛行型カメラ装置。
  2. 前記第1の制御手段は、全地球測位システムからの電波を受信して位置を算出するGPS受信手段を含み、該GPS受信手段により取得した該飛行型カメラ装置の位置と前記端末装置の現在位置とを順次比較しながら前記端末装置の現在位置の近傍まで飛行する、請求項1記載の飛行型カメラ装置。
  3. 前記第2の制御手段は、可視光受信手段、通信屋内測位システムからのビーコン電波を受信する手段、携帯電話通信規格によるデータ通信を受信する手段、近距離無線通信規格によるデータ通信を受信する手段、のいずれかを含む請求項1又は2記載の飛行型カメラ装置。
  4. 前記第2の制御手段は、顔認識手段をさらに含む、請求項1ないし3のいずれかに記載の飛行型カメラ装置。
  5. 前記第2の制御手段は、前記端末装置と連動する可視光発光装置が発光する可視光を検索する可視光検索処理と、該可視光の検索に成功した後前記ユーザの顔を認識する顔認識処理を実行する、請求項4に記載の飛行型カメラ装置。
  6. 前記第2の制御手段は、前記認識した顔に合焦させて撮影を行わせる撮影処理を実行する、請求項5に記載の飛行型カメラ装置。
  7. 撮影を行うカメラ部と、
    空中を飛行する駆動推進部と、
    自装置の位置を検出するカメラ側位置検出部と、
    前記端末装置と通信を行うカメラ側通信制御部と、
    をさらに備え、
    前記第1の制御手段は、前記カメラ側通信制御部を介して前記端末装置から前記端末装置の現在位置を受信して、該受信した前記端末装置の現在位置と前記カメラ側位置検出部にて順次検出される自装置の現在位置とを順次比較しながら、前記駆動推進部を制御することにより前記受信した前記端末装置の現在位置の近傍まで飛行する処理を実行する、請求項1ないし6のいずれかに記載の飛行型カメラ装置。
  8. 飛行型カメラ装置が端末装置と通信することにより飛行するシステムであって、
    前記端末装置は、現在位置を前記飛行型カメラ装置に送信し、
    前記飛行型カメラ装置は、前記端末装置の現在位置を受信して前記端末装置の現在位置に向けて飛行する第1の処理部と、前記受信した前記端末装置の現在位置に近づいたら該端末装置又は該端末装置のユーザを識別する第2の処理部と、
    を有する飛行型カメラシステム。
  9. 前記端末装置は、ユーザによって保持され前記端末装置と一体又は別体であって可視光を発光する可視光発光装置を更に有する、請求項8に記載の飛行型カメラシステム。
  10. 前記飛行型カメラ装置は、
    前記受信した前記端末装置の現在位置に近づいたら前記可視光発光装置が発光する可視光を検索する可視光検索処理と、該可視光の検索に成功した後ユーザの顔を認識する顔認識処理と、前記カメラ部に該認識した顔の撮影を行わせる撮影処理を実行するカメラ側制御部を有する、請求項8または9記載の飛行型カメラシステム。
  11. 前記飛行型カメラ装置は、前記可視光の検索を開始した旨を前記端末装置に送信する処理を更に実行し、
    前記端装置は、前記飛行型カメラ装置から前記可視光の検索を開始した旨を受信したら、前記可視光発光装置に対して前記可視光を点滅させて発光させる処理を更に実行し、
    前記飛行型カメラ装置は、前記可視光の点滅を検出したら、前記検出した可視光の点滅に向かって近づき、前記顔認識処理を実行する、請求項10に記載の飛行型カメラシステム。
  12. 前記端末装置は、前記ユーザが指示した撮影形態を、前記飛行型カメラ装置に送信する処理を更に実行し、
    前記飛行型カメラ装置は、受信した前記撮影形態に応じた撮影を前記カメラ部に実行させる、請求項8ないし11のいずれかに記載の飛行型カメラシステム。
  13. 前記飛行型カメラ装置は、
    飛行開始時に自装置の位置を取得して飛行開始位置として記憶する処理と、
    前記撮影の終了時に、記憶している前記飛行開始位置と順次検出される自装置の現在位置とを順次比較しながら、前記飛行開始位置に向けて飛行して帰還する処理とを更に実行する、請求項8ないし12のいずれかに記載の飛行型カメラシステム。
  14. 前記カメラ側制御部は、所定時間または所定過程の撮影を行った時点で前記撮影を終了する、請求項13に記載の飛行型カメラシステム。
  15. 前記端末側制御部は、ユーザが撮影終了を指示したときに、前記端末側通信制御部を介して前記飛行型カメラ装置に撮影終了を送信し、
    前記カメラ側制御部は、前記カメラ側通信制御部を介して前記撮影終了を受信した時点で前記撮影を終了する、請求項13または14記載の飛行型カメラシステム。
  16. 飛行型カメラ装置と通信することにより該飛行型カメラ装置を被写体の上空まで飛行させて該被写体の撮影を行わせる端末装置であって、
    自装置の位置を検出する端末側位置検出部と、
    ユーザの呼出し指示に基づいて、前記端末側位置検出部にて自装置の現在位置を検出し、該現在位置を前記飛行型カメラ装置に送信する現在位置送信処理を実行する端末側制御部と、
    を有する端末装置。
  17. 前記飛行型カメラ装置に対して撮影制御を行わせる撮影制御部をさらに有する、請求項15記載の端末装置。
  18. 飛行型カメラ装置が端末装置の上空へ到達するまでは、前記端末装置の現在位置と測位システムからの電波を受信して前記飛行体カメラ装置を位置制御し、
    前記端末装置の上空へ到達後は、前記端末装置又は該端末装置のユーザを識別する、
    飛行型カメラ装置の制御方法。
  19. 端末装置を追尾して飛行する飛行型カメラ装置を制御するコンピュータに、
    前記端末装置の遠方においては前記端末装置の現在位置を基に該端末装置の近傍まで飛行するステップと、
    前記端末装置の現在位置の近傍では該端末装置又は該端末装置のユーザを識別するステップと、
    を実行させるためのプログラム。
JP2016076961A 2016-04-07 2016-04-07 飛行型カメラ装置、飛行型カメラシステム、端末装置、飛行型カメラ装置の制御方法およびプログラム Active JP6308238B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2016076961A JP6308238B2 (ja) 2016-04-07 2016-04-07 飛行型カメラ装置、飛行型カメラシステム、端末装置、飛行型カメラ装置の制御方法およびプログラム
CN201710172051.6A CN107277739A (zh) 2016-04-07 2017-03-21 移动装置、移动系统、终端装置、移动装置的控制方法
US15/469,214 US20170293795A1 (en) 2016-04-07 2017-03-24 Moving device, moving system, terminal device and method of controlling moving device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016076961A JP6308238B2 (ja) 2016-04-07 2016-04-07 飛行型カメラ装置、飛行型カメラシステム、端末装置、飛行型カメラ装置の制御方法およびプログラム

Publications (3)

Publication Number Publication Date
JP2017185928A true JP2017185928A (ja) 2017-10-12
JP2017185928A5 JP2017185928A5 (ja) 2017-11-24
JP6308238B2 JP6308238B2 (ja) 2018-04-11

Family

ID=59999504

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016076961A Active JP6308238B2 (ja) 2016-04-07 2016-04-07 飛行型カメラ装置、飛行型カメラシステム、端末装置、飛行型カメラ装置の制御方法およびプログラム

Country Status (3)

Country Link
US (1) US20170293795A1 (ja)
JP (1) JP6308238B2 (ja)
CN (1) CN107277739A (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6452183B1 (ja) * 2018-03-30 2019-01-16 株式会社amuse oneself 釣り動画撮像システム
WO2019175982A1 (ja) * 2018-03-13 2019-09-19 株式会社ドローンネット 小型無人飛行体
KR102050642B1 (ko) * 2017-12-06 2019-12-16 주식회사 아세스 승무원 및 승객 위치 모니터 시스템 및 방법
JP2020016703A (ja) * 2018-07-23 2020-01-30 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd 制御装置、移動体、制御方法、及びプログラム
JP7325264B2 (ja) 2019-05-09 2023-08-14 經緯航太科技股▲ふん▼有限公司 無人航空機を着地させる装置および方法
WO2024004162A1 (ja) * 2022-06-30 2024-01-04 株式会社Acsl 無人航空機

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180186472A1 (en) * 2016-12-30 2018-07-05 Airmada Technology Inc. Method and apparatus for an unmanned aerial vehicle with a 360-degree camera system
CN109144106A (zh) * 2017-06-28 2019-01-04 北京天龙智控科技有限公司 无人机跟随飞行系统、跟随飞行方法
CN107968906A (zh) * 2017-12-12 2018-04-27 成都合能智发科技有限公司 警用综合交通巡逻执法终端
CN111615486A (zh) * 2018-01-10 2020-09-01 福特全球技术公司 用于无人机的可移动安装结构
CN108492569A (zh) * 2018-05-02 2018-09-04 苏州诺登德智能科技有限公司 一种基于无人机的交通追踪控制系统
WO2019227289A1 (zh) * 2018-05-28 2019-12-05 深圳市大疆创新科技有限公司 延时拍摄控制方法和设备
CN109905663B (zh) * 2019-01-21 2020-09-11 广东精标科技股份有限公司 一种儿童活动监控平台
US11703863B2 (en) 2019-04-16 2023-07-18 LGS Innovations LLC Methods and systems for operating a moving platform to determine data associated with a target person or object

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004101616A (ja) * 2002-09-05 2004-04-02 Sony Corp 移動撮影システム、移動撮影方法、移動体、及び信号発生装置
US20130287261A1 (en) * 2012-04-25 2013-10-31 Hon Hai Precision Industry Co., Ltd. Electronic device and method for managing traffic flow
JP2014119828A (ja) * 2012-12-13 2014-06-30 Secom Co Ltd 自律飛行ロボット
JP2015207149A (ja) * 2014-04-21 2015-11-19 薫 渡部 監視システム及び監視方法
CN105138126A (zh) * 2015-08-26 2015-12-09 小米科技有限责任公司 无人机的拍摄控制方法及装置、电子设备
US20160031559A1 (en) * 2014-07-30 2016-02-04 SZ DJI Technology Co., Ltd Systems and methods for target tracking
WO2016039882A1 (en) * 2014-09-08 2016-03-17 Qualcomm Incorporated Methods, systems and devices for delivery drone security
JP2016101774A (ja) * 2014-11-27 2016-06-02 みこらった株式会社 浮揚移動台
WO2016162899A1 (ja) * 2015-04-06 2016-10-13 株式会社ベイビッグ 位置検知システム及び位置検知方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7374106B1 (en) * 2001-05-15 2008-05-20 Nicholas Sheppard Bromer Triggered flickering tag
CN105096346B (zh) * 2015-09-17 2018-02-02 国家电网公司 一种防抖的运动目标拍摄处理系统

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004101616A (ja) * 2002-09-05 2004-04-02 Sony Corp 移動撮影システム、移動撮影方法、移動体、及び信号発生装置
US20130287261A1 (en) * 2012-04-25 2013-10-31 Hon Hai Precision Industry Co., Ltd. Electronic device and method for managing traffic flow
JP2014119828A (ja) * 2012-12-13 2014-06-30 Secom Co Ltd 自律飛行ロボット
JP2015207149A (ja) * 2014-04-21 2015-11-19 薫 渡部 監視システム及び監視方法
US20160031559A1 (en) * 2014-07-30 2016-02-04 SZ DJI Technology Co., Ltd Systems and methods for target tracking
WO2016015251A1 (en) * 2014-07-30 2016-02-04 SZ DJI Technology Co., Ltd. Systems and methods for target tracking
WO2016039882A1 (en) * 2014-09-08 2016-03-17 Qualcomm Incorporated Methods, systems and devices for delivery drone security
JP2016101774A (ja) * 2014-11-27 2016-06-02 みこらった株式会社 浮揚移動台
WO2016162899A1 (ja) * 2015-04-06 2016-10-13 株式会社ベイビッグ 位置検知システム及び位置検知方法
CN105138126A (zh) * 2015-08-26 2015-12-09 小米科技有限责任公司 无人机的拍摄控制方法及装置、电子设备

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102050642B1 (ko) * 2017-12-06 2019-12-16 주식회사 아세스 승무원 및 승객 위치 모니터 시스템 및 방법
WO2019175982A1 (ja) * 2018-03-13 2019-09-19 株式会社ドローンネット 小型無人飛行体
JPWO2019175982A1 (ja) * 2018-03-13 2021-03-25 株式会社ドローンネット 小型無人飛行体
JP7011040B2 (ja) 2018-03-13 2022-01-26 株式会社ドローンネット 小型無人飛行体
JP6452183B1 (ja) * 2018-03-30 2019-01-16 株式会社amuse oneself 釣り動画撮像システム
JP2019176771A (ja) * 2018-03-30 2019-10-17 株式会社amuse oneself 釣り動画撮像システム
JP2020016703A (ja) * 2018-07-23 2020-01-30 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd 制御装置、移動体、制御方法、及びプログラム
JP7325264B2 (ja) 2019-05-09 2023-08-14 經緯航太科技股▲ふん▼有限公司 無人航空機を着地させる装置および方法
WO2024004162A1 (ja) * 2022-06-30 2024-01-04 株式会社Acsl 無人航空機

Also Published As

Publication number Publication date
CN107277739A (zh) 2017-10-20
JP6308238B2 (ja) 2018-04-11
US20170293795A1 (en) 2017-10-12

Similar Documents

Publication Publication Date Title
JP6308238B2 (ja) 飛行型カメラ装置、飛行型カメラシステム、端末装置、飛行型カメラ装置の制御方法およびプログラム
JP6696118B2 (ja) 電子機器
EP3452881B1 (en) Imaging using multiple unmanned aerial vehicles
CN106444843B (zh) 无人机相对方位控制方法及装置
EP3299925B1 (en) Method, apparatus and system for controlling unmanned aerial vehicle
CN107205111B (zh) 摄像装置、移动装置、摄像系统、摄像方法和记录介质
JP2017185928A5 (ja)
US20200150662A1 (en) Flying body, living body detection system, living body detection method, program and recording medium
US20200097027A1 (en) Method and apparatus for controlling an unmanned aerial vehicle and an unmanned aerial vehicle system
US20150207976A1 (en) Control apparatus and storage medium
EP3989118A1 (en) Target tracking method and system, readable storage medium and moving platform
TW201816546A (zh) 陪伴型機器人及機器人控制方法
JP2018070010A (ja) 無人航空機制御システム、その制御方法、及びプログラム
JP2017011469A (ja) 撮影装置、撮影方法、およびプログラム
JP2018070011A (ja) 無人航空機制御システム、その制御方法、及びプログラム
JP6671078B2 (ja) 移動体
CN114994712A (zh) 一种搜索无人机的方法、系统及无人机
JP6533802B2 (ja) 移動体システム及びゲームアプリケーション
JP2018070013A (ja) 無人航空機制御システム、その制御方法、及びプログラム
JP6475568B2 (ja) 撮像装置および飛行制御方法
CN116762354A (zh) 影像拍摄方法、控制装置、可移动平台和计算机存储介质
JP2019182423A (ja) 無人航空機制御システム、その制御方法、及びプログラム
JP2019125833A (ja) 撮影システム
US20230224571A1 (en) Imaging assistance control apparatus, imaging assistance control method, and imaging assistance system
JP2019145947A (ja) 撮影システム及び撮影制御装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170919

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170922

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20170922

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20171006

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171121

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180117

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180213

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180226

R150 Certificate of patent or registration of utility model

Ref document number: 6308238

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150