JP2006180326A - Status monitoring system for vehicle - Google Patents

Status monitoring system for vehicle Download PDF

Info

Publication number
JP2006180326A
JP2006180326A JP2004372964A JP2004372964A JP2006180326A JP 2006180326 A JP2006180326 A JP 2006180326A JP 2004372964 A JP2004372964 A JP 2004372964A JP 2004372964 A JP2004372964 A JP 2004372964A JP 2006180326 A JP2006180326 A JP 2006180326A
Authority
JP
Japan
Prior art keywords
vehicle
flying object
image
imaging device
monitoring system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2004372964A
Other languages
Japanese (ja)
Inventor
Nobuaki Miki
修昭 三木
Shoji Yokoyama
昭二 横山
Munehisa Horiguchi
宗久 堀口
Yasutaka Ono
泰孝 大野
Takashi Naito
貴 内藤
Yoko Takarada
葉子 寶田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Equos Research Co Ltd
Original Assignee
Equos Research Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Equos Research Co Ltd filed Critical Equos Research Co Ltd
Priority to JP2004372964A priority Critical patent/JP2006180326A/en
Publication of JP2006180326A publication Critical patent/JP2006180326A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a status monitoring system for a vehicle capable of exactly grasping a status around the vehicle in a case such as parking; passing each other with an oncoming car at a narrow road; avoiding an obstacle; exactly grasping a front road surface status, a traffic light status, an intersection status, and a traffic status etc.; and allowing a driver to perform operation of the vehicle easily and safely without feeling uneasy, by photographing and displaying images around and in front of the vehicle from sky using an imaging apparatus mounted on a flight object. <P>SOLUTION: The status monitoring system comprises a flight object carrying an imaging apparatus and launched from and collected by a vehicle, a remote control unit mounted on the vehicle and capable of controlling operation of the flight object and the imaging apparatus, and a display device mounted on the vehicle for displaying images photographed by the imaging apparatus. The remote control unit has a means for selecting a mode in which images photographed from above for a range of the vehicle and its surroundings are displayed on the display device. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、車両用状況監視システムに関するものである。   The present invention relates to a vehicle situation monitoring system.

従来、自動車等の車両に搭載したカメラによって車両周辺の画像を撮影して、前記車両の運転を補助するための監視装置が提案されている(例えば、特許文献1参照。)。この場合、潜水艦の潜望鏡のように、伸縮自在な棒状部材を車両の中央に取り付け、後部座席の乗員がハンドルを操作することによって前記棒状部材を伸縮又は回転させ、該棒状部材の上端に装着された監視カメラによって画像を撮影するようになっている。
実開平5−86686号公報
2. Description of the Related Art Conventionally, there has been proposed a monitoring device for taking an image around a vehicle with a camera mounted on a vehicle such as an automobile and assisting the driving of the vehicle (for example, see Patent Document 1). In this case, like the submarine of a submarine, a telescopic rod-like member is attached to the center of the vehicle, and a passenger in the rear seat operates the handle to expand or contract or rotate the rod-like member, which is attached to the upper end of the rod-like member. An image is taken by a surveillance camera.
Japanese Utility Model Publication No. 5-86686

しかしながら、前記従来の監視装置においては、操作性が悪く、また、後部座席の乗員がハンドルを操作する必要があるので、車両の運転者が必要とする画像を迅速に運転者に提供することが困難であり、運転者は車両周辺の状況を的確に把握することができなかった。そのため、渋滞中の区間を走行中においては、渋滞の理由や程度を把握することができず、運転者は不安や不快感を感じてしまう。また、前方を走行中の車両がトラック、バス、ワンボックスカー等のように、車高の高い車両である場合には、前方の路面状況、交通信号の状況、交通状況等の把握が困難になり、運転者は不安を感じてしまう。特に、交差点への進入時に該交差点に進入する他車の状況や交通信号の状況が把握することができない場合には不安が大きくなる。さらに、通常の車両の場合、運転者からの死角となる範囲が広く、駐車、狭い道路での対向車とのすれ違い、障害物の回避等の際に、スムーズに車両を運転することが難しい。特に、サイズの大きい車両を運転している場合には、車両のサイズを的確に把握することが困難であるので、運転がより難しくなってしまう。   However, in the conventional monitoring device, the operability is poor, and it is necessary for the passenger in the rear seat to operate the steering wheel, so that the image required by the driver of the vehicle can be quickly provided to the driver. It was difficult, and the driver could not accurately grasp the situation around the vehicle. Therefore, while traveling in a traffic jam section, the reason and degree of the traffic jam cannot be grasped, and the driver feels anxiety and discomfort. Also, if the vehicle traveling ahead is a vehicle with a high vehicle height, such as a truck, bus, or one box car, it will be difficult to grasp the road surface conditions, traffic signal conditions, traffic conditions, etc. As a result, the driver feels uneasy. In particular, anxiety increases when it is impossible to grasp the situation of other vehicles entering the intersection and the situation of traffic signals when entering the intersection. Furthermore, in the case of a normal vehicle, the range of blind spots from the driver is wide, and it is difficult to drive the vehicle smoothly when parking, passing the oncoming vehicle on a narrow road, avoiding obstacles, and the like. In particular, when driving a large vehicle, it is difficult to accurately grasp the size of the vehicle, which makes driving more difficult.

本発明は、前記従来の監視装置の問題点を解決して、リモートコントロール可能な飛行物体等に搭載した撮像装置によって、上空から車両の周囲及び前方の画像を撮影して表示することによって、駐車、狭い道路での対向車とのすれ違い、障害物の回避等の際に車両の周囲の状況を的確に把握することができ、また、前方の路面状況、交通信号の状況、交差点の状況、交通状況等を的確に把握することができ、運転者が不安を感じることなく、容易に、安全に車両の運転を行うことができる車両用状況監視システムを提供することを目的とする。   The present invention solves the problems of the conventional monitoring device and captures and displays images around and forward of the vehicle from above by an imaging device mounted on a remotely-controllable flying object or the like. It is possible to accurately grasp the situation around the vehicle when passing with an oncoming vehicle on a narrow road, avoiding obstacles, etc. Also, the road surface condition ahead, traffic signal situation, intersection situation, traffic It is an object of the present invention to provide a vehicle situation monitoring system that can accurately grasp the situation and the like, and can easily and safely drive the vehicle without feeling uneasy by the driver.

そのために、本発明の車両用状況監視システムにおいては、撮像装置を搭載し、車両から発進して該車両に回収される飛行物体と、前記車両に搭載され、前記飛行物体及び撮像装置の動作を制御するリモートコントロールユニットと、前記車両に搭載され、前記撮像装置が撮影した画像を表示する表示装置とを有し、前記リモートコントロールユニットは、前記車両及びその周囲を含む範囲を前記車両の上方から撮影した画像を前記表示装置に表示させるモードを選択する手段を備える。   Therefore, in the vehicle situation monitoring system of the present invention, an imaging device is mounted, a flying object that starts from the vehicle and is collected by the vehicle, and is mounted on the vehicle, and the operations of the flying object and the imaging device are performed. A remote control unit for controlling, and a display device that is mounted on the vehicle and displays an image captured by the imaging device. The remote control unit has a range including the vehicle and its surroundings from above the vehicle. Means for selecting a mode for displaying a photographed image on the display device.

本発明の他の車両用状況監視システムにおいては、さらに、前記リモートコントロールユニットは、前記車両の前方の他の車両よりも高い位置から撮影した前方の画像を前記表示装置に表示させるモードを選択する手段を備える。   In another vehicle situation monitoring system of the present invention, the remote control unit further selects a mode for causing the display device to display a forward image taken from a position higher than the other vehicles ahead of the vehicle. Means.

本発明の更に他の車両用状況監視システムにおいては、さらに、前記リモートコントロールユニットは、障害物と接触しないように前記飛行物体の動作を制御する。   In still another vehicular situation monitoring system according to the present invention, the remote control unit controls the operation of the flying object so as not to contact an obstacle.

本発明の更に他の車両用状況監視システムにおいては、撮像装置を搭載し、車両の上方に向けて伸長可能な伸縮部材と、前記車両に搭載され、前記伸縮部材及び撮像装置の動作を制御するリモートコントロールユニットと、前記車両に搭載され、前記撮像装置が撮影した画像を表示する表示装置とを有し、前記リモートコントロールユニットは、前記車両及びその周囲を含む範囲を前記車両の上方から撮影した画像を前記表示装置に表示させるモードを選択する手段を備える。   In still another vehicle situation monitoring system according to the present invention, an image pickup device is mounted, and a telescopic member that can be extended toward the upper side of the vehicle, and the vehicle mounted on the vehicle to control operations of the telescopic member and the image pickup device. A remote control unit; and a display device that is mounted on the vehicle and displays an image captured by the imaging device. The remote control unit captures the vehicle and a range including the periphery from above the vehicle. Means for selecting a mode for displaying an image on the display device.

本発明によれば、車両用状況監視システムにおいては、撮像装置を搭載し、車両から発進して該車両に回収される飛行物体と、前記車両に搭載され、前記飛行物体及び撮像装置の動作を制御するリモートコントロールユニットと、前記車両に搭載され、前記撮像装置が撮影した画像を表示する表示装置とを有し、前記リモートコントロールユニットは、前記車両及びその周囲を含む範囲を前記車両の上方から撮影した画像を前記表示装置に表示させるモードを選択する手段を備える。   According to the present invention, in the vehicle situation monitoring system, an imaging device is mounted, a flying object that starts from the vehicle and is collected by the vehicle, and is mounted on the vehicle, and the operations of the flying object and the imaging device are performed. A remote control unit for controlling, and a display device that is mounted on the vehicle and displays an image captured by the imaging device. The remote control unit has a range including the vehicle and its surroundings from above the vehicle. Means for selecting a mode for displaying a photographed image on the display device.

この場合、駐車、狭い道路での対向車とのすれ違い、障害物の回避等の際に車両の周囲の状況を的確に把握することができ、安全に車両の運転を行うことができる。   In this case, the situation around the vehicle can be accurately grasped when parking, passing with an oncoming vehicle on a narrow road, avoiding an obstacle, etc., and the vehicle can be driven safely.

他の車両用状況監視システムにおいては、さらに、前記リモートコントロールユニットは、前記車両の前方の他の車両よりも高い位置から撮影した前方の画像を前記表示装置に表示させるモードを選択する手段を備える。   In another vehicle status monitoring system, the remote control unit further includes means for selecting a mode for causing the display device to display a front image taken from a position higher than the other vehicles ahead of the vehicle. .

この場合、前方の他の車両よりも前方における路面状況、交通信号の状況、交差点の状況、交通状況等を的確に把握することができるので、運転者が不安を感じることなく、容易に、安全に車両の運転を行うことができる。   In this case, it is possible to accurately grasp the road surface condition, traffic signal condition, intersection condition, traffic condition, etc. ahead of other vehicles ahead, so that the driver can easily and safely do not feel anxious. It is possible to drive the vehicle.

更に他の車両用状況監視システムにおいては、さらに、前記リモートコントロールユニットは、障害物と接触しないように前記飛行物体の動作を制御する。   In still another vehicle situation monitoring system, the remote control unit controls the operation of the flying object so as not to contact an obstacle.

この場合、例えば、走行中の車両の前方に位置する看板、トンネル、立体交差におけるアンダーパス等の障害物、駐車場に進入する際の屋内駐車場や立体駐車場の天井等の障害物に飛行物体が接触することを防止することができる。   In this case, for example, a signboard located in front of a running vehicle, a tunnel, an obstacle such as an underpass at a three-dimensional intersection, or an obstacle such as an indoor parking lot or a parking lot ceiling when entering a parking lot It is possible to prevent the object from coming into contact.

更に他の車両用状況監視システムにおいては、撮像装置を搭載し、車両の上方に向けて伸長可能な伸縮部材と、前記車両に搭載され、前記伸縮部材及び撮像装置の動作を制御するリモートコントロールユニットと、前記車両に搭載され、前記撮像装置が撮影した画像を表示する表示装置とを有し、前記リモートコントロールユニットは、前記車両及びその周囲を含む範囲を前記車両の上方から撮影した画像を前記表示装置に表示させるモードを選択する手段を備える。   In still another vehicle situation monitoring system, an image pickup device is mounted and an extendable member that can be extended upward of the vehicle, and a remote control unit that is mounted on the vehicle and controls the operation of the extendable member and the image pickup device. And a display device that is mounted on the vehicle and displays an image captured by the imaging device, wherein the remote control unit captures an image of the vehicle and a range including the surroundings from above the vehicle. Means for selecting a mode to be displayed on the display device.

この場合、駐車、狭い道路での対向車とのすれ違い、障害物の回避等の際に車両の周囲の状況を的確に把握することができ、安全に車両の運転を行うことができる。   In this case, the situation around the vehicle can be accurately grasped when parking, passing with an oncoming vehicle on a narrow road, avoiding an obstacle, etc., and the vehicle can be driven safely.

以下、本発明の実施の形態について図面を参照しながら詳細に説明する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

図1は本発明の実施の形態における車両用状況監視システムが取得する画像の例を示す図、図2は本発明の実施の形態における車両用状況監視システムの構成の概略を示す図である。   FIG. 1 is a diagram showing an example of an image acquired by the vehicle situation monitoring system in the embodiment of the present invention, and FIG. 2 is a diagram showing an outline of the configuration of the vehicle situation monitoring system in the embodiment of the present invention.

図1及び2において、11は本実施の形態における車両用状況監視システムの車両であり、乗用車、トラック、バス、二輪車等道路を走行可能なものであればいかなる種類のものであってもよいが、本実施の形態においては、説明の都合上、前記車両が四つの車輪を備える乗用車であるものとして説明する。   1 and 2, reference numeral 11 denotes a vehicle of the vehicle situation monitoring system according to the present embodiment, which may be of any type as long as it can travel on a road such as a passenger car, a truck, a bus, and a two-wheeled vehicle. In the present embodiment, for convenience of explanation, the vehicle will be described as a passenger car having four wheels.

また、12は車両用状況監視システムの飛行物体であり、後述される撮像装置34を搭載して空中を飛行する。前記飛行物体12は、例えば、図2に示されるようなエアジェット推進飛行物12a、小型ヘリコプタ12b、小型飛行船12c等であるが、撮像装置34を搭載して空中を飛行することができる装置であれば、いかなる装置であってもよい。なお、前記エアジェット推進飛行物12aは、空気を下方向に向けて噴出することによって浮遊力を得る装置であり、小型ヘリコプタ12bはプロペラを回転させて空気を下方向に向けて送ることによって浮遊力を得る装置であり、小型飛行船12cは水素ガス、ヘリウムガス等の空気より軽いガスが充填(てん)された風船によって浮遊力を得る装置である。なお、前記飛行物体12は、空中を前後左右上下に移動して位置を変更することができ、かつ、姿勢を変更することもできる。   Reference numeral 12 denotes a flying object of the vehicle situation monitoring system, which carries an imaging device 34 described later and flies in the air. The flying object 12 is, for example, an air jet propelled flying object 12a, a small helicopter 12b, a small airship 12c, or the like as shown in FIG. 2, and is an apparatus that can fly in the air with an imaging device 34 mounted thereon. Any device may be used. The air jet propelled projectile 12a is a device that obtains floating force by jetting air downward, and the small helicopter 12b floats by rotating the propeller and sending air downward. The small airship 12c is a device that obtains floating force by a balloon filled with a gas lighter than air such as hydrogen gas or helium gas. The flying object 12 can be moved in the air up and down, left and right and up and down to change its position, and its posture can be changed.

そして、前記車両11の運転者、同乗者等の車両用状況監視システムのユーザは、後述される飛行物体用操縦装置15を操作して前記飛行物体12の位置及び姿勢を制御し、また、後述される撮像装置用操縦装置16を操作して撮像装置34の向き及び撮像倍率を制御して、所望の画像を撮影し、図1に示されるように、後述される表示装置24に表示させることができる。   Then, a user of the vehicle situation monitoring system such as a driver or a passenger of the vehicle 11 controls a position and posture of the flying object 12 by operating a flying object control device 15 which will be described later. The imaging device control device 16 is operated to control the orientation and imaging magnification of the imaging device 34 so that a desired image is taken and displayed on the display device 24 described later as shown in FIG. Can do.

図1において、13aは表示装置24に表示された撮像装置34の撮影した画像であり、車両11の前方における交通状況である渋滞の状況を示す画像である。画像13aにおける範囲Aは、前方を走行中の他の車両であるトラックのさらに前方における渋滞の状況を示している。これにより、車両11の運転者は、前方の渋滞状況を的確に把握することができ、不安や不快感を感じることがない。また、13bは表示装置24に表示された撮像装置34の撮影した画像であり、車両11の前方における交差点の状況を示す画像である。画像13bにおける範囲Bは、前方を走行中の他の車両であるトラックのさらに前方における交差点に進入してくる他車の状況を示している。これにより、車両11の運転者は、前記トラックの死角になっている前方の交差点に進入する他車の状況を的確に把握することができ、不安を感じることがない。   In FIG. 1, 13 a is an image taken by the imaging device 34 displayed on the display device 24, and is an image showing a traffic situation that is a traffic situation in front of the vehicle 11. A range A in the image 13a shows a traffic jam situation further ahead of a truck which is another vehicle traveling ahead. As a result, the driver of the vehicle 11 can accurately grasp the traffic jam ahead and does not feel uneasy or uncomfortable. Reference numeral 13 b denotes an image taken by the imaging device 34 displayed on the display device 24, and is an image showing the situation of an intersection in front of the vehicle 11. A range B in the image 13b shows the situation of another vehicle entering the intersection further ahead of the truck, which is another vehicle traveling ahead. As a result, the driver of the vehicle 11 can accurately grasp the situation of the other vehicle entering the intersection at the front that is the blind spot of the truck, and does not feel uneasy.

なお、前方を走行中の他の車両のさらに前方の画像を撮影する場合には、飛行物体12を車両の車高規制値よりも高い位置にまで上昇させることが望ましい。これにより、前方を走行中の他の車両がトラックのように車高の高いものであっても、確実に前方の画像を撮影することができる。なお、現在の車両の車高規制値は、4.1〔m〕であるので、例えば、地上から5〔m〕程度の高さに、飛行物体12を上昇させることが望ましい。   It should be noted that when taking a further forward image of another vehicle traveling ahead, it is desirable to raise the flying object 12 to a position higher than the vehicle height regulation value of the vehicle. Thereby, even if the other vehicle traveling ahead has a high vehicle height such as a truck, a forward image can be reliably captured. In addition, since the vehicle height regulation value of the current vehicle is 4.1 [m], for example, it is desirable to raise the flying object 12 to a height of about 5 [m] from the ground.

さらに、13cは表示装置24に表示された撮像装置34の撮影した画像であり、例えば、駐車する際における車両11の周囲の状況を上方から示す画像であり、車両11及びその周囲を含む範囲の画像である。画像13cにおける範囲C1は車両11自体、すなわち、自車を示し、範囲C2は車両11の死角となっている後方に存在する歩行者を示し、範囲C3は車両11の死角となっている側方に存在する歩行者を示し、範囲C4は車両11の死角となっている側方を通過する対向車を示し、範囲C5は車両11の死角となっている側方に存在する側溝を示している。これにより、車両11の運転者は、自車の死角になっている範囲に存在する歩行者、他車、障害物等の状況を的確に把握することができ、不安を感じることがない。   Furthermore, 13c is an image taken by the imaging device 34 displayed on the display device 24, for example, an image showing the situation around the vehicle 11 when parked from above, and in a range including the vehicle 11 and its surroundings. It is an image. A range C1 in the image 13c represents the vehicle 11 itself, that is, the own vehicle, a range C2 represents a pedestrian existing behind the blind spot of the vehicle 11, and a range C3 is a lateral side serving as the blind spot of the vehicle 11. A range C4 indicates an oncoming vehicle that passes the side that is the blind spot of the vehicle 11, and a range C5 indicates a side groove that is present on the side that is the blind spot of the vehicle 11. . As a result, the driver of the vehicle 11 can accurately grasp the situation of pedestrians, other vehicles, obstacles, etc. existing in the blind spot of the own vehicle, and does not feel uneasy.

なお、図2に示される例において、エアジェット推進飛行物12a、小型ヘリコプタ12b及び小型飛行船12cは線によって車両11と接続されているが、飛行物体12は車両11に搭乗しているユーザが制御することができるのであれば、必ずしも線によって車両11と接続されている必要はない。すなわち、飛行物体12及び該飛行物体12が搭載する撮像装置34は、有線制御されるものであってもよいし、無線制御されるものであってもよい。また、前記撮像装置34は、車両11の上方から前方や車両11及びその周囲を含む範囲を撮影できるのであれば、必ずしも飛行物体12に搭載される必要はなく、例えば、車両11に装着され、車両の上方に向けて伸長可能な伸縮部材としての伸縮ロッド14の先端に取り付けられたものであってもよい。   In the example shown in FIG. 2, the air jet propelled vehicle 12 a, the small helicopter 12 b, and the small airship 12 c are connected to the vehicle 11 by lines, but the flying object 12 is controlled by the user who is on the vehicle 11. If it is possible, it is not always necessary to be connected to the vehicle 11 by a line. That is, the flying object 12 and the imaging device 34 mounted on the flying object 12 may be wired-controlled or wirelessly controlled. Further, the imaging device 34 does not necessarily have to be mounted on the flying object 12 as long as the range including the front and the vehicle 11 and its surroundings can be taken from above the vehicle 11, for example, mounted on the vehicle 11, What was attached to the front-end | tip of the expansion-contraction rod 14 as an expansion-contraction member which can be extended toward the upper direction of a vehicle may be used.

次に、車両用状況監視システムの構成について詳細に説明する。   Next, the configuration of the vehicle situation monitoring system will be described in detail.

図3は本発明の実施の形態における車両用状況監視システムの構成の詳細を示す図である。   FIG. 3 is a diagram showing details of the configuration of the vehicle situation monitoring system according to the embodiment of the present invention.

図3に示されるように、車両用状況監視システムは、車両11に搭載される部分と飛行物体12に搭載される部分とから成る。そして、車両11には、飛行物体用操縦装置15、撮像装置用操縦装置16、モードを選択する手段としてのモード選択装置17、記憶装置としてのメモリ18、車両側中央制御装置(ECU:Electronic Control Unit)21、障害物検出センサ22、車両情報取得装置23、表示装置24及び車両側送受信機25が搭載される。また、飛行物体12には、飛行物体側中央制御装置(ECU)31、飛行物体制御装置32、電源33、撮像装置34及び飛行物体側送受信機35が搭載される。   As shown in FIG. 3, the vehicle situation monitoring system includes a part mounted on the vehicle 11 and a part mounted on the flying object 12. The vehicle 11 includes a flying object control device 15, an imaging device control device 16, a mode selection device 17 as a mode selection unit, a memory 18 as a storage device, and a vehicle-side central control device (ECU: Electronic Control). Unit) 21, an obstacle detection sensor 22, a vehicle information acquisition device 23, a display device 24, and a vehicle-side transceiver 25 are mounted. The flying object 12 includes a flying object side central control unit (ECU) 31, a flying object control device 32, a power source 33, an imaging device 34, and a flying object side transceiver 35.

ここで、前記飛行物体用操縦装置15は、飛行物体12を発進させたり回収したりするとともに、飛行物体12を操縦して前後上下左右に移動させて位置を制御し、また、姿勢を制御するためのコントローラであり、例えば、ジョイスティック、ハンドル、ダイヤル、タッチパネル、ボタン等を備える。また、前記撮像装置用操縦装置16は、撮像装置34の向きを上下左右に変更したり、撮像倍率を変更、すなわち、ズームイン又はズームアウトさせたりするためのコントローラであり、例えば、ジョイスティック、ハンドル、ダイヤル、タッチパネル、ボタン等を備える。なお、前記飛行物体用操縦装置15及び撮像装置用操縦装置16はリモートコントロールユニットとして機能する。   Here, the flying object control device 15 starts and collects the flying object 12, controls the position by maneuvering the flying object 12 and moving it forward, backward, up, down, left and right, and also controls the posture. For example, the controller includes a joystick, a handle, a dial, a touch panel, buttons, and the like. The imaging device control device 16 is a controller for changing the orientation of the imaging device 34 up, down, left, and right, or changing the imaging magnification, that is, zooming in or out, for example, a joystick, a handle, A dial, touch panel, buttons, etc. are provided. The flying object control device 15 and the imaging device control device 16 function as a remote control unit.

さらに、前記モード選択装置17は、飛行物体用操縦装置15及び撮像装置用操縦装置16を使用することなく、飛行物体12及び撮像装置34にあらかじめ定められた所定の動作を行わせて所定の範囲の画像を撮影させるための装置であり、初期(デフォルト)設定のモードを選択するために、例えば、ジョイスティック、ダイヤル、タッチパネル、ボタン等を備える。なお、初期設定のモードには、あらかじめ設定されたモードとして、例えば、図1における画面13cのような画像を撮影させるための自車と周辺を見るモード、図1における画面13a及び画面13bのような画像を撮影させるための前方を見るモード等がある。さらに、前記モード選択装置17は、ユーザがマニュアルに初期設定の内容を決めるためのマニュアルモードを選択することができるようになっている。該マニュアルモードを選択した場合、ユーザは、飛行物体12の位置及び姿勢並びに撮像装置34の向き及び撮像倍率を制御するための初期設定の情報を入力し、所望の方向における所望の範囲の画像を撮影させることができる。   Further, the mode selection device 17 causes the flying object 12 and the imaging device 34 to perform a predetermined operation without using the flying object control device 15 and the imaging device control device 16, and thereby a predetermined range. For example, a joystick, a dial, a touch panel, buttons, and the like are provided to select an initial (default) setting mode. Note that the initial setting mode includes preset modes, for example, a mode for viewing the vehicle and the periphery for capturing an image such as the screen 13c in FIG. 1, and a screen 13a and a screen 13b in FIG. There is a mode to look forward for taking a good image. Further, the mode selection device 17 can select a manual mode for the user to determine the contents of the initial setting manually. When the manual mode is selected, the user inputs information on initial settings for controlling the position and orientation of the flying object 12, the orientation of the imaging device 34, and the imaging magnification, and displays an image in a desired range in a desired direction. It can be taken.

そして、前記メモリ18は、モード選択装置17に接続され、飛行物体12及び撮像装置34が初期設定のモードに該当する状態になるように制御するための情報としての設定情報を格納する。前記初期設定のモードに該当する状態とは、例えば、自車と周辺を見る状態、前方を見る状態等であり、自車と周辺を見る状態、前方を見る状態等となるように飛行物体12の位置及び姿勢並びに撮像装置34の向き及び撮像倍率を制御するための情報としての飛行設定情報が前記メモリ18に格納されている。この場合、前方を見る状態においては、飛行物体12の高さが現在の車両の車高規制値以上、例えば、地上から5〔m〕程度となるようにして、前方を走行中の他の車両がトラックのように車高の高いものであっても、確実に前方の画像を撮影することができるような飛行設定情報をメモリ18に格納することができる。そして、前記モード選択装置17は、前記メモリ18に格納されている飛行設定情報に従った制御指令を飛行物体12及び該飛行物体12に搭載された撮像装置34に送信する。   The memory 18 is connected to the mode selection device 17 and stores setting information as information for controlling the flying object 12 and the imaging device 34 to be in a state corresponding to the initial setting mode. The state corresponding to the initial setting mode is, for example, a state of looking at the vehicle and the surroundings, a state of looking at the front, and the like. Flight setting information is stored in the memory 18 as information for controlling the position and orientation, the orientation of the imaging device 34, and the imaging magnification. In this case, in the state of looking forward, another vehicle that is traveling ahead is set so that the height of the flying object 12 is equal to or higher than the current vehicle height limit value, for example, about 5 m from the ground. Even when the vehicle height is high such as a truck, flight setting information that can reliably capture a forward image can be stored in the memory 18. Then, the mode selection device 17 transmits a control command according to the flight setting information stored in the memory 18 to the flying object 12 and the imaging device 34 mounted on the flying object 12.

また、前記障害物検出センサ22は、前記飛行物体12の障害物を検出するセンサであり、例えば、CCD(Charge Coupled Device:電荷結合素子)、CMOS(Complementary Metal Oxide Semiconductor)等の撮像素子、ミリ波レーダ装置等を備え、車両11の前方に存在する看板、トンネル、立体交差におけるアンダーパス、屋内駐車場や立体駐車場の天井等のように、前記飛行物体12が飛行するための障害となるものの存在を検出する。また、車両11が車両用ナビゲーション装置を搭載している場合には、該車両用ナビゲーション装置の備える地図データを参照することもできる。この場合、車両用ナビゲーション装置の備えるGPS(Global Positioning System)センサ等を含む現在位置検出手段から車両11の現在位置を取得し、車両11が走行している道路上における進行方向前方に存在するトンネル、立体交差におけるアンダーパス等の障害物の位置を検出することができる。これにより、前記飛行物体12は、障害物に妨げられることなく飛行することができる。   The obstacle detection sensor 22 is a sensor that detects an obstacle of the flying object 12. For example, the obstacle detection sensor 22 is an imaging element such as a charge coupled device (CCD) or a complementary metal oxide semiconductor (CMOS). It is equipped with a wave radar device or the like, and becomes an obstacle for the flying object 12 to fly, such as a signboard, a tunnel, an underpass at a three-dimensional intersection, a ceiling of an indoor parking lot or a three-dimensional parking lot that exists in front of the vehicle 11. Detect the presence of things. Further, when the vehicle 11 is equipped with a vehicle navigation device, map data provided in the vehicle navigation device can be referred to. In this case, the current position of the vehicle 11 is acquired from current position detection means including a GPS (Global Positioning System) sensor or the like provided in the vehicle navigation device, and the tunnel exists ahead in the traveling direction on the road on which the vehicle 11 is traveling. The position of an obstacle such as an underpass at a three-dimensional intersection can be detected. Thereby, the flying object 12 can fly without being obstructed by an obstacle.

さらに、前記車両情報取得装置23は、車両11の姿勢、動作等に関する情報としての車両情報を取得する装置である。そして、前記車両情報取得装置23には、運転者が操作する車両11のアクセル開閉状態を検出するアクセルセンサ、運転者が操作する車両11のブレーキペダルの動きを検出するブレーキスイッチ、運転者が操作する車両11のステアリングの舵(だ)角を検出するステアリングセンサ、車両11の方向指示器としてのウィンカの動作を検出するウィンカセンサ、車両11の変速機のシフトポジションを検出するシフトレバーセンサ、車両11の速度を検出する車速センサ、車両11の加速度を検出するGセンサ等の加速度センサ、車両11のヨーレートを検出するヨーレートセンサ、車両11の原動機のスロットル開度を検出するスロットル開度センサ等が含まれる。   Further, the vehicle information acquisition device 23 is a device that acquires vehicle information as information related to the attitude, operation, and the like of the vehicle 11. The vehicle information acquisition device 23 includes an accelerator sensor for detecting an accelerator opening / closing state of the vehicle 11 operated by the driver, a brake switch for detecting movement of a brake pedal of the vehicle 11 operated by the driver, and an operation performed by the driver. Steering sensor for detecting the steering angle of the vehicle 11, the winker sensor for detecting the operation of the winker as the direction indicator of the vehicle 11, the shift lever sensor for detecting the shift position of the transmission of the vehicle 11, the vehicle A vehicle speed sensor that detects the speed of the vehicle 11, an acceleration sensor such as a G sensor that detects the acceleration of the vehicle 11, a yaw rate sensor that detects the yaw rate of the vehicle 11, a throttle opening sensor that detects the throttle opening of the prime mover of the vehicle 11, and the like. included.

また、前記表示装置24は、CRTディスプレイ、液晶ディスプレイ、LED(Light Emitting Diode)ディスプレイ、プラズマディスプレイ、フロントガラスにホログラムを投影するホログラム装置等から成り、撮像装置34の撮影した画像を表示するとともに、飛行物体12の位置や状態、撮像装置34の向き及び撮像倍率、飛行物体12の電源33のSOC(State of Charge)等の情報も表示することができる。なお、車両11が車両用ナビゲーション装置、車両用テレビ受像器、DVD表示装置等を搭載している場合には、これら装置の表示装置を前記表示装置24として使用することもできる。   The display device 24 includes a CRT display, a liquid crystal display, an LED (Light Emitting Diode) display, a plasma display, a hologram device that projects a hologram on a windshield, and the like, and displays an image taken by the imaging device 34. Information such as the position and state of the flying object 12, the orientation and imaging magnification of the imaging device 34, and the SOC (State of Charge) of the power supply 33 of the flying object 12 can also be displayed. When the vehicle 11 is equipped with a vehicle navigation device, a vehicle television receiver, a DVD display device, or the like, the display device of these devices can also be used as the display device 24.

さらに、前記車両側中央制御装置21は、飛行物体用操縦装置15、撮像装置用操縦装置16、モード選択装置17、障害物検出センサ22、車両情報取得装置23、表示装置24及び車両側送受信機25と接続され、車両用状況監視システム全体の制御を行う装置である。そして、前記車両側中央制御装置21は、CPU、MPU等の演算手段、半導体メモリ、磁気ディスク等の記憶手段、入出力インターフェイス等を備え、プログラムに従って動作を行う一種のコンピュータである。また、前記車両側送受信機25は、飛行物体12に搭載された飛行物体側送受信機35と有線又は無線によって通信を行うための通信インターフェイスである。   Further, the vehicle-side central control device 21 includes a flying object control device 15, an imaging device control device 16, a mode selection device 17, an obstacle detection sensor 22, a vehicle information acquisition device 23, a display device 24, and a vehicle-side transceiver. 25 is a device that controls the entire vehicle situation monitoring system. The vehicle-side central control device 21 is a kind of computer that includes arithmetic means such as a CPU and MPU, storage means such as a semiconductor memory and a magnetic disk, an input / output interface, and the like, and operates according to a program. The vehicle-side transceiver 25 is a communication interface for performing wired or wireless communication with the flying object-side transceiver 35 mounted on the flying object 12.

そして、前記飛行物体側中央制御装置31は、飛行物体制御装置32、電源33、撮像装置34及び飛行物体側送受信機35と接続され、前記車両側中央制御装置21からの指令に従って飛行物体11及び撮像装置34の動作を制御するとともに、飛行物体11及び撮像装置34の状態に関する情報、並びに、撮像装置34の撮影した画像を車両側中央制御装置21に送信する装置である。なお、前記飛行物体側中央制御装置31は、CPU、MPU等の演算手段、半導体メモリ、磁気ディスク等の記憶手段、入出力インターフェイス等を備え、プログラムに従って動作を行う一種のコンピュータである。   The flying object side central control device 31 is connected to the flying object control device 32, the power source 33, the imaging device 34, and the flying object side transmitter / receiver 35, and the flying object 11 and the central control device 31 according to instructions from the vehicle side central control device 21. In addition to controlling the operation of the imaging device 34, the device transmits information related to the states of the flying object 11 and the imaging device 34 and images captured by the imaging device 34 to the vehicle-side central control device 21. The flying object side central control device 31 is a kind of computer that includes arithmetic means such as a CPU and MPU, storage means such as a semiconductor memory and a magnetic disk, an input / output interface, and the like, and operates according to a program.

また、前記飛行物体制御装置32は、飛行物体12の動作を制御する装置であり、飛行物体12の姿勢を安定させたり、飛行物体12の位置を検出、すなわち、X座標、Y座標及びZ座標を検出したり、飛行物体12を移動させたりするための制御を行う。この場合、前記飛行物体制御装置32は、飛行物体側中央制御装置31を介して車両側中央制御装置21から受け取った移動指示、障害物回避指示等に従って制御を行う。また、飛行物体12の現在位置や姿勢状態に関する情報を飛行物体側中央制御装置31を介して車両側中央制御装置21に送信する。   The flying object control device 32 is a device that controls the operation of the flying object 12 and stabilizes the posture of the flying object 12 or detects the position of the flying object 12, that is, the X coordinate, the Y coordinate, and the Z coordinate. And control for moving the flying object 12 is performed. In this case, the flying object control device 32 performs control according to the movement instruction, the obstacle avoidance instruction, etc. received from the vehicle side central control device 21 via the flying object side central control device 31. In addition, information regarding the current position and posture state of the flying object 12 is transmitted to the vehicle-side central control device 21 via the flying object-side central control device 31.

さらに、前記撮像装置34は、CCD、CMOS等の撮像素子、レンズ、プリズム等の光学素子等を備え、指定された方向の画像を指定された倍率で撮影するための装置である。この場合、前記撮像装置34は、向きを上下左右に変更したり、撮像倍率を変更、すなわち、ズームイン又はズームアウトさせたり、画像の撮影の開始及び停止を行ったりすることができる。なお、前記撮像装置34の撮影する画像は、動画であり、カラー画像であることが望ましいが、静止画であり、モノクロ画像であってもよい。また、前記撮像装置34は、飛行物体側中央制御装置31を介して車両側中央制御装置21から受け取った向きに関する指示、ズーム指示等に従って画像の撮影を行い、向きやズームに関する情報及び撮影した画像を飛行物体側中央制御装置31を介して車両側中央制御装置21に送信する。   Further, the imaging device 34 includes an imaging element such as a CCD or CMOS, an optical element such as a lens or a prism, and the like, and is an apparatus for taking an image in a designated direction at a designated magnification. In this case, the imaging device 34 can change the orientation to up, down, left, and right, change the imaging magnification, that is, zoom in or zoom out, and start and stop shooting of an image. The image captured by the imaging device 34 is a moving image and is preferably a color image, but may be a still image or a monochrome image. Further, the imaging device 34 captures an image according to an orientation instruction, a zoom instruction, and the like received from the vehicle-side central control device 21 via the flying object-side central control device 31, and information about the orientation and zoom and the captured image are captured. Is transmitted to the vehicle-side central control device 21 via the flying object-side central control device 31.

そして、前記電源33は、乾電池、蓄電池、キャパシタ(コンデンサ)、太陽電池、燃料電池等から成り、飛行物体側中央制御装置31、飛行物体制御装置32、撮像装置34及び飛行物体側送受信機35に駆動用電流を供給するとともに、飛行物体12の図示されない推力装置にも駆動量電流を供給する。なお、前記電源33が蓄電池、キャパシタ等のように、充電可能なものである場合には、車両11から電流を供給することによって、前記電源33を適宜充電することができる。また、前記電源33を省略して、車両11から供給される電流を前記駆動用電流として利用することもできる。前記車両側送受信機25と飛行物体側送受信機35とが有線によって通信を行うものである場合、すなわち、飛行物体12及び撮像装置34が有線制御されるものである場合、車両11と飛行物体12とを結ぶラインとして電力ラインを含むものを使用し、該電力ラインを通して車両11から電流を供給することができる。また、前記車両側送受信機25と飛行物体側送受信機35とが無線によって通信を行うものである場合、すなわち、飛行物体12及び撮像装置34が無線制御されるものである場合、マイクロ波によって車両11から電流を供給することができる。なお、前記電源33のSOCは、飛行物体側中央制御装置31を介して車両側中央制御装置21に送信される。   The power source 33 includes a dry battery, a storage battery, a capacitor (capacitor), a solar cell, a fuel cell, and the like, and is connected to the flying object side central control device 31, the flying object control device 32, the imaging device 34, and the flying object side transceiver 35. A driving current is supplied, and a driving amount current is also supplied to a thrust device (not shown) of the flying object 12. When the power source 33 is rechargeable, such as a storage battery or a capacitor, the power source 33 can be appropriately charged by supplying current from the vehicle 11. Further, the power supply 33 can be omitted, and the current supplied from the vehicle 11 can be used as the driving current. When the vehicle-side transceiver 25 and the flying object-side transceiver 35 communicate with each other by wire, that is, when the flying object 12 and the imaging device 34 are wired-controlled, the vehicle 11 and the flying object 12 A line including an electric power line is used as a line connecting the two and a current can be supplied from the vehicle 11 through the electric power line. In addition, when the vehicle-side transceiver 25 and the flying object-side transceiver 35 communicate with each other wirelessly, that is, when the flying object 12 and the imaging device 34 are wirelessly controlled, the vehicle is transmitted by microwaves. 11 can supply current. The SOC of the power source 33 is transmitted to the vehicle-side central control device 21 via the flying object-side central control device 31.

また、前記飛行物体側送受信機35は、車両11に搭載された車両側送受信機25と有線又は無線によって通信を行うための通信インターフェイスである。ここで、前記車両側中央制御装置21からは、車両側送受信機25及び飛行物体側送受信機35を介して、飛行物体12の移動、撮像装置34の向きやズームに関する指示が飛行物体側中央制御装置31に送信される。また、飛行物体側中央制御装置31からは、車両側送受信機25及び飛行物体側送受信機35を介して、飛行物体12の位置や状態に関する情報、撮像装置34の向きやズームに関する情報及び撮影した画像、電源33のSOC等が飛行物体側送受信機35に送信される。   The flying object side transceiver 35 is a communication interface for performing wired or wireless communication with the vehicle side transceiver 25 mounted on the vehicle 11. Here, the vehicle-side central control device 21 gives instructions regarding the movement of the flying object 12, the orientation of the imaging device 34, and the zoom via the vehicle-side transceiver 25 and the flying object-side transceiver 35. It is transmitted to the device 31. In addition, the flying object side central control device 31 has taken information about the position and state of the flying object 12, information about the orientation and zoom of the imaging device 34, and the image via the vehicle side transceiver 25 and the flying object side transceiver 35. The image, the SOC of the power source 33, and the like are transmitted to the flying object side transceiver 35.

次に、前記構成の車両用状況監視システムの動作について説明する。   Next, the operation of the vehicle situation monitoring system having the above-described configuration will be described.

図4は本発明の実施の形態における車両用状況監視システムの動作を示すフローチャートである。   FIG. 4 is a flowchart showing the operation of the vehicle situation monitoring system according to the embodiment of the present invention.

まず、車両用状況監視システムは、飛行物体12を飛ばして画像を見るか否か、すなわち、ユーザが飛行物体12が搭載する撮像装置34によって画像を撮影することを選択したか否かを判断する(ステップS1)。そして、画像を見ない場合にはそのまま処理を終了する。また、画像を見る場合には、ユーザがモード選択装置17を操作することによって、初期設定が行われる(ステップS2)。この場合、ユーザが選択したモードに基づいて、初期設定が行われる。続いて、飛行物体12による飛行が行われる(ステップS3)。この場合、飛行物体12は初期設定に従って飛行する。そして、飛行物体12に搭載された撮像装置34によって撮影が行われる(ステップS4)。これにより、車両11の前方又は車両11の周囲の画像が撮影される。   First, the vehicle situation monitoring system determines whether or not to fly the flying object 12 and view an image, that is, whether or not the user has selected to capture an image with the imaging device 34 mounted on the flying object 12. (Step S1). If the image is not viewed, the process is terminated as it is. Further, when viewing an image, initial setting is performed by the user operating the mode selection device 17 (step S2). In this case, initial setting is performed based on the mode selected by the user. Subsequently, the flight by the flying object 12 is performed (step S3). In this case, the flying object 12 flies according to the initial setting. And imaging | photography is performed by the imaging device 34 mounted in the flying object 12 (step S4). Thereby, an image in front of the vehicle 11 or around the vehicle 11 is taken.

続いて、撮像装置34によって撮影された画像が表示装置24の画面に表示される(ステップS5)。これにより、ユーザは車両11の前方又は車両11の周囲の状況を的確に把握することができる。続いて、飛行設定情報変更の指示があるか否かが判断される(ステップS6)。この場合、ユーザがモード選択装置17を操作することによって飛行設定情報を変更することを指示したか否かが判断される。なお、飛行設定情報は、飛行物体12の位置及び姿勢並びに撮像装置34の向き及び撮像倍率を制御するための情報であり、飛行物体12及び撮像装置34は設定された飛行設定情報に従って動作を行う。そして、飛行設定情報変更の指示がある場合、飛行設定情報の再設定が行われる(ステップS7)。飛行設定情報の再設定は、ユーザがモード選択装置17を操作することによって他のモードを選択することによって行われる。そして、ステップS3に戻り、再び飛行が行われる。この場合、飛行物体12は再設定された飛行設定情報に従って飛行する。   Subsequently, an image photographed by the imaging device 34 is displayed on the screen of the display device 24 (step S5). Accordingly, the user can accurately grasp the situation in front of the vehicle 11 or around the vehicle 11. Subsequently, it is determined whether or not there is an instruction to change the flight setting information (step S6). In this case, it is determined whether or not the user has instructed to change the flight setting information by operating the mode selection device 17. The flight setting information is information for controlling the position and orientation of the flying object 12, the orientation of the imaging device 34, and the imaging magnification. The flying object 12 and the imaging device 34 operate according to the set flight setting information. . If there is an instruction to change the flight setting information, the flight setting information is reset (step S7). The resetting of the flight setting information is performed by the user selecting another mode by operating the mode selection device 17. And it returns to step S3 and flight is performed again. In this case, the flying object 12 flies according to the reset flight setting information.

また、飛行設定情報変更の指示がない場合、撮影が終了したか否かが判断される(ステップS8)。そして、撮影が終了していない場合には、ステップS3に戻り、再び飛行が行われる。また、撮影が終了された場合には、飛行物体12の回収が行われ(ステップS9)、処理が終了される。回収された飛行物体12は車両11内に収納される。   If there is no instruction to change the flight setting information, it is determined whether or not shooting has been completed (step S8). If shooting has not been completed, the process returns to step S3 and the flight is performed again. In addition, when shooting is finished, the flying object 12 is collected (step S9), and the process is finished. The collected flying object 12 is stored in the vehicle 11.

次に、ステップS2のサブルーチンについて説明する。   Next, the subroutine of step S2 will be described.

図5は本発明の実施の形態における車両用状況監視システムの初期設定のサブルーチンを示すフローチャートである。   FIG. 5 is a flowchart showing an initial setting subroutine of the vehicle situation monitoring system according to the embodiment of the present invention.

初期設定においては、ユーザがモード選択装置17を操作することによって、初期設定のモードとしての画像取得モードの選択が行われる(ステップS2−1)。なお、初期設定モードの数及びその内容は任意に設定することができるが、ここでは、自車と周辺を見るモード、前方を見るモード及びマニュアルモードの3つが選択可能であるものとして説明する。   In the initial setting, the user operates the mode selection device 17 to select an image acquisition mode as an initial setting mode (step S2-1). Although the number of initial setting modes and the contents thereof can be arbitrarily set, here, description will be made assuming that three modes can be selected: a mode in which the host vehicle and the vicinity are viewed, a mode in which the vehicle is viewed in front, and a manual mode.

まず、初期設定モードとして、自車と周辺を見るモードが選択されると、モード選択装置17はメモリ18から第1の飛行設定情報の読み込みを行って(ステップS2−2)、処理を終了する。ここで、第1の飛行設定情報は、自車と周辺を見る状態となるように飛行物体12の位置及び姿勢並びに撮像装置34の向き及び撮像倍率を制御するための情報であり、あらかじめ入力されてメモリ18に格納されている。   First, when the mode for viewing the host vehicle and its surroundings is selected as the initial setting mode, the mode selection device 17 reads the first flight setting information from the memory 18 (step S2-2) and ends the processing. . Here, the first flight setting information is information for controlling the position and orientation of the flying object 12 and the direction and imaging magnification of the imaging device 34 so that the vehicle and the surroundings can be seen. Stored in the memory 18.

また、初期設定モードとして、前方を見るモードが選択されると、モード選択装置17はメモリ18から第2の飛行設定情報の読み込みを行って(ステップS2−3)、処理を終了する。ここで、第2の飛行設定情報は、自車の前方を見る状態となるように飛行物体12の位置及び姿勢並びに撮像装置34の向き及び撮像倍率を制御するための情報であり、あらかじめ入力されてメモリ18に格納されている。   Further, when the forward viewing mode is selected as the initial setting mode, the mode selection device 17 reads the second flight setting information from the memory 18 (step S2-3) and ends the process. Here, the second flight setting information is information for controlling the position and orientation of the flying object 12, the orientation of the imaging device 34, and the imaging magnification so as to be in front of the host vehicle. Stored in the memory 18.

さらに、初期設定モードとして、マニュアルモードが選択されると、ユーザが飛行設定情報の入力を行って(ステップS2−4)、処理を終了する。この場合、ユーザは、飛行物体12の位置及び姿勢並びに撮像装置34の向き及び撮像倍率を制御するための初期設定の情報を入力し、所望の方向における所望の範囲の画像を撮影させることができる。   Further, when the manual mode is selected as the initial setting mode, the user inputs flight setting information (step S2-4), and the process ends. In this case, the user can input information on initial settings for controlling the position and orientation of the flying object 12, the orientation of the imaging device 34, and the imaging magnification, and can capture an image in a desired range in a desired direction. .

次に、ステップS3のサブルーチンについて説明する。   Next, the subroutine of step S3 will be described.

図6は本発明の実施の形態における車両用状況監視システムの飛行のサブルーチンを示すフローチャートである。   FIG. 6 is a flowchart showing a flight subroutine of the vehicle situation monitoring system according to the embodiment of the present invention.

まず、障害物の検出が行われ(ステップS3−1)、障害物検出センサ22によって検出された看板、トンネル等のような飛行物体12の障害物についての情報、すなわち、障害物検出情報が取得される。続いて、飛行物体12が発進済みであるか否かが判断され(ステップS3−2)、発進済みである場合には、飛行設定情報の検出が行われ(ステップS3−3)、初期設定において選択されたモードに対応する飛行設定情報、すなわち、現在の飛行設定情報が取得される。そして、取得された障害物検出情報及び飛行設定情報に基づいて、飛行物体12が障害物に接触するか否かが判断される(ステップS3−4)。ここで、飛行物体12が障害物に接触しない場合、飛行物体12は飛行設定情報に基づいて飛行し(ステップS3−5)、処理が終了される。   First, an obstacle is detected (step S3-1), and information about the obstacle of the flying object 12 such as a signboard or a tunnel detected by the obstacle detection sensor 22, that is, obstacle detection information is acquired. Is done. Subsequently, it is determined whether or not the flying object 12 has started (step S3-2). If the flying object 12 has started, flight setting information is detected (step S3-3). Flight setting information corresponding to the selected mode, that is, current flight setting information is acquired. Then, based on the acquired obstacle detection information and flight setting information, it is determined whether or not the flying object 12 contacts the obstacle (step S3-4). Here, when the flying object 12 does not contact the obstacle, the flying object 12 flies based on the flight setting information (step S3-5), and the process is terminated.

一方、飛行物体12が障害物に接触する場合、障害物を回避することができるか否かが判断される(ステップS3−6)。そして、障害物を回避することができる場合、飛行物体12は障害物を回避するように飛行し(ステップS3−7)、処理が終了される。この場合、飛行物体12の新たな位置、すなわち、新たなX座標、Y座標及びZ座標が指示される。また、障害物を回避することができない場合には、飛行物体12の回収が行われる(ステップS3−8)。この場合、例えば、飛行物体12及び撮像装置34が有線制御されるものであるときには、車両11と飛行物体12とを結ぶラインが回収され、また、X座標、Y座標及びZ座標が各々0となるように指示される。そして、図4に示されるフローチャートの(1)へ進み、車両用状況監視システムの処理が終了される。   On the other hand, when the flying object 12 contacts the obstacle, it is determined whether or not the obstacle can be avoided (step S3-6). If the obstacle can be avoided, the flying object 12 flies so as to avoid the obstacle (step S3-7), and the process is terminated. In this case, a new position of the flying object 12, that is, a new X coordinate, Y coordinate, and Z coordinate are designated. If the obstacle cannot be avoided, the flying object 12 is collected (step S3-8). In this case, for example, when the flying object 12 and the imaging device 34 are controlled by wire, the line connecting the vehicle 11 and the flying object 12 is collected, and the X coordinate, Y coordinate, and Z coordinate are each 0. Be instructed to be. And it progresses to (1) of the flowchart shown by FIG. 4, and the process of the condition monitoring system for vehicles is complete | finished.

また、飛行物体12が発進済みであるか否かが判断されて発進済みでない場合、取得された障害物検出情報により発進処理が行われる(ステップS3−9)。該発進処理は、障害物検出情報に基づいて、飛行物体12を飛行させるだけのスペースがあるか否かを判断するための処理である。そして、飛行物体12の発進が可能であるか否かが判断される(ステップS3−10)。ここで、発進が可能である場合、飛行物体12が発進し(ステップS3−11)、飛行設定情報に基づいて飛行する。そして、ステップS3−3に進み、飛行設定情報の検出が行われる。また、発進が可能でない場合には、図4に示されるフローチャートの(1)へ進み、車両用状況監視システムの処理が終了される。   If it is determined whether or not the flying object 12 has already started, the starting process is performed based on the acquired obstacle detection information (step S3-9). The starting process is a process for determining whether or not there is a space for flying the flying object 12 based on the obstacle detection information. Then, it is determined whether or not the flying object 12 can be started (step S3-10). Here, when it is possible to start, the flying object 12 starts (step S3-11) and flies based on the flight setting information. In step S3-3, flight setting information is detected. If the vehicle cannot be started, the process proceeds to (1) in the flowchart shown in FIG. 4 and the processing of the vehicle situation monitoring system is terminated.

このように、本実施の形態においては、リモートコントロール可能な飛行物体12に搭載された撮像装置34によって、上空から車両11の周囲及び前方の画像を撮影して表示するようになっている。そのため、駐車、狭い道路での対向車とのすれ違い、障害物の回避等の際に車両11の周囲の状況を的確に把握することができ、安全に車両11の運転を行うことができる。また、車両11の前方の路面状況、交通信号の状況、交差点の状況、交通状況等を的確に把握することができるので、運転者が不安を感じることなく、容易に、安全に車両11の運転を行うことができる。   Thus, in the present embodiment, the imaging device 34 mounted on the remotely controllable flying object 12 captures and displays images around and ahead of the vehicle 11 from above. Therefore, the situation around the vehicle 11 can be accurately grasped when parking, passing with an oncoming vehicle on a narrow road, avoiding an obstacle, etc., and the vehicle 11 can be driven safely. In addition, since the road surface condition in front of the vehicle 11, traffic signal conditions, intersection conditions, traffic conditions, and the like can be accurately grasped, the driver can easily and safely drive the vehicle 11 without feeling uneasy. It can be performed.

なお、本発明は前記実施の形態に限定されるものではなく、本発明の趣旨に基づいて種々変形させることが可能であり、それらを本発明の範囲から排除するものではない。   In addition, this invention is not limited to the said embodiment, It can change variously based on the meaning of this invention, and does not exclude them from the scope of the present invention.

本発明の実施の形態における車両用状況監視システムが取得する画像の例を示す図である。It is a figure which shows the example of the image which the vehicle condition monitoring system in embodiment of this invention acquires. 本発明の実施の形態における車両用状況監視システムの構成の概略を示す図である。It is a figure which shows the outline of a structure of the condition monitoring system for vehicles in embodiment of this invention. 本発明の実施の形態における車両用状況監視システムの構成の詳細を示す図である。It is a figure which shows the detail of a structure of the condition monitoring system for vehicles in embodiment of this invention. 本発明の実施の形態における車両用状況監視システムの動作を示すフローチャートである。It is a flowchart which shows operation | movement of the vehicle condition monitoring system in embodiment of this invention. 本発明の実施の形態における車両用状況監視システムの初期設定のサブルーチンを示すフローチャートである。It is a flowchart which shows the subroutine of the initial setting of the condition monitoring system for vehicles in embodiment of this invention. 本発明の実施の形態における車両用状況監視システムの飛行のサブルーチンを示すフローチャートである。It is a flowchart which shows the subroutine of the flight of the vehicle condition monitoring system in embodiment of this invention.

符号の説明Explanation of symbols

11 車両
12 飛行物体
13a、13b、13c 画像
14 伸縮ロッド
15 飛行物体用操縦装置
16 撮像装置用操縦装置
17 モード選択装置
24 表示装置
34 撮像装置
DESCRIPTION OF SYMBOLS 11 Vehicle 12 Flying object 13a, 13b, 13c Image 14 Telescopic rod 15 Flying object control device 16 Imaging device control device 17 Mode selection device 24 Display device 34 Imaging device

Claims (4)

撮像装置を搭載し、車両から発進して該車両に回収される飛行物体と、
前記車両に搭載され、前記飛行物体及び撮像装置の動作を制御するリモートコントロールユニットと、
前記車両に搭載され、前記撮像装置が撮影した画像を表示する表示装置とを有し、
前記リモートコントロールユニットは、前記車両及びその周囲を含む範囲を前記車両の上方から撮影した画像を前記表示装置に表示させるモードを選択する手段を備えることを特徴とする車両用状況監視システム。
A flying object mounted with an imaging device, launched from the vehicle and collected by the vehicle;
A remote control unit mounted on the vehicle for controlling the operation of the flying object and the imaging device;
A display device mounted on the vehicle and displaying an image captured by the imaging device;
The said remote control unit is provided with the means to select the mode which displays the image which image | photographed the range including the said vehicle and its periphery from the said vehicle on the said display apparatus, The vehicle condition monitoring system characterized by the above-mentioned.
前記リモートコントロールユニットは、前記車両の前方の他の車両よりも高い位置から撮影した前方の画像を前記表示装置に表示させるモードを選択する手段を備える請求項1に記載の車両用状況監視システム。   2. The vehicle status monitoring system according to claim 1, wherein the remote control unit includes means for selecting a mode for causing the display device to display a forward image taken from a position higher than other vehicles ahead of the vehicle. 前記リモートコントロールユニットは、障害物と接触しないように前記飛行物体の動作を制御する請求項1又は2に記載の車両用状況監視システム。   The vehicle status monitoring system according to claim 1, wherein the remote control unit controls the operation of the flying object so as not to contact an obstacle. 撮像装置を搭載し、車両の上方に向けて伸長可能な伸縮部材と、
前記車両に搭載され、前記伸縮部材及び撮像装置の動作を制御するリモートコントロールユニットと、
前記車両に搭載され、前記撮像装置が撮影した画像を表示する表示装置とを有し、
前記リモートコントロールユニットは、前記車両及びその周囲を含む範囲を前記車両の上方から撮影した画像を前記表示装置に表示させるモードを選択する手段を備えることを特徴とする車両用状況監視システム。
A telescopic member that is equipped with an imaging device and that can extend toward the top of the vehicle;
A remote control unit mounted on the vehicle for controlling the operation of the telescopic member and the imaging device;
A display device mounted on the vehicle and displaying an image captured by the imaging device;
The said remote control unit is provided with the means to select the mode which displays the image which image | photographed the range including the said vehicle and its periphery from the said vehicle on the said display apparatus, The vehicle condition monitoring system characterized by the above-mentioned.
JP2004372964A 2004-12-24 2004-12-24 Status monitoring system for vehicle Withdrawn JP2006180326A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004372964A JP2006180326A (en) 2004-12-24 2004-12-24 Status monitoring system for vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004372964A JP2006180326A (en) 2004-12-24 2004-12-24 Status monitoring system for vehicle

Publications (1)

Publication Number Publication Date
JP2006180326A true JP2006180326A (en) 2006-07-06

Family

ID=36733984

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004372964A Withdrawn JP2006180326A (en) 2004-12-24 2004-12-24 Status monitoring system for vehicle

Country Status (1)

Country Link
JP (1) JP2006180326A (en)

Cited By (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2986647A3 (en) * 2012-02-07 2013-08-09 Renault Sas Observation drone and car combination for use in automobile assembly, has control unit adapted to control methods of propulsion and directional control such that sensor continuously acquires images of section of lane
JP5819555B1 (en) * 2015-04-01 2015-11-24 ライトブレインラボ合同会社 Vehicle driving support system
CN105083120A (en) * 2014-04-30 2015-11-25 比亚迪股份有限公司 Detection system and flight apparatus for automobile surrounding environment
JP2016074257A (en) * 2014-10-02 2016-05-12 株式会社フカデン Flight body system and composite cable used for the flight body system
CN105652882A (en) * 2015-12-29 2016-06-08 上海中科深江电动车辆有限公司 Electric vehicle three-dimensional navigation system and electric vehicle three-dimensional navigation method based on quadcopter
JP2016138854A (en) * 2015-01-29 2016-08-04 株式会社ゼンリンデータコム Navigation system, navigation device, flying object, navigation cooperation control method, cooperation control program for navigation device, and cooperation control program for flying object
JP2016138853A (en) * 2015-01-29 2016-08-04 株式会社ゼンリンデータコム Navigation system, on-vehicle navigation device, flying object, navigation method, cooperation program for on-vehicle navigation device, and cooperation program for flying object
US9409644B2 (en) 2014-07-16 2016-08-09 Ford Global Technologies, Llc Automotive drone deployment system
US9457915B2 (en) 2014-05-30 2016-10-04 SZ DJI Technology Co., Ltd Systems and methods for UAV docking
KR20160136957A (en) * 2015-05-21 2016-11-30 경희대학교 산학협력단 The method of ensuring visibility using drone when get on and off and the system of them
CN106184793A (en) * 2016-08-29 2016-12-07 上海理工大学 A kind of overlook image monitoring system in the air for automobile
DE102015007156A1 (en) 2015-06-03 2016-12-08 Audi Ag A method in which an unmanned aerial vehicle interacts with a motor vehicle and motor vehicle
JP2016225983A (en) * 2015-06-01 2016-12-28 株式会社プロドローン Relay system
DE102015008768A1 (en) 2015-07-06 2017-01-12 Audi Ag Method for assessing a motor vehicle and motor vehicle involved in an accident
JP2017010446A (en) * 2015-06-25 2017-01-12 三菱自動車工業株式会社 Driving support control device
JP2017021757A (en) * 2015-07-15 2017-01-26 三菱自動車工業株式会社 Vehicular operation support apparatus
JP2017504983A (en) * 2014-04-28 2017-02-09 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd platform
JP2017036102A (en) * 2015-08-06 2017-02-16 株式会社豊田自動織機 Forklift work assisting system
KR20170022357A (en) * 2015-08-20 2017-03-02 한국과학기술원 Automatic parking method and system
JP2017171291A (en) * 2017-05-15 2017-09-28 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd Platform and system
US9786105B2 (en) 2015-12-08 2017-10-10 Caterpillar Inc. Gathering data from machine operating at worksite
WO2018096760A1 (en) * 2016-11-24 2018-05-31 株式会社デンソー Information provision system, onboard device, and information provision program
KR20180107131A (en) * 2016-01-29 2018-10-01 스미토모 겐키 가부시키가이샤 Autonomous flight vehicle flying around Chopper and Chopper
WO2019034365A1 (en) * 2017-08-15 2019-02-21 Zf Friedrichshafen Ag Control of a transportation vehicle
US10558218B2 (en) 2016-01-28 2020-02-11 Fujitsu Ten Limited Vehicle surroundings monitoring apparatus, monitoring system, remote monitoring apparatus, and monitoring method
WO2020116492A1 (en) * 2018-12-05 2020-06-11 株式会社ナイルワークス Drone system, drone, movable body, drone system control method, and drone system control program
CN111717407A (en) * 2014-04-25 2020-09-29 索尼公司 Control method and control device
WO2020246251A1 (en) * 2019-06-04 2020-12-10 ソニー株式会社 Information processing device, method, and program
JP2021039442A (en) * 2019-08-30 2021-03-11 楽天株式会社 Control device, traveling body, flight vehicle, system, and method
US11006263B2 (en) 2016-07-07 2021-05-11 Ford Global Technologies, Llc Vehicle-integrated drone
JP2021091407A (en) * 2021-02-15 2021-06-17 京セラ株式会社 Flight vehicle and flight vehicle control method
CN113050654A (en) * 2021-03-29 2021-06-29 中车青岛四方车辆研究所有限公司 Obstacle detection method, vehicle-mounted obstacle avoidance system and method for inspection robot
EP3273201B1 (en) 2016-07-21 2021-06-30 Arquus Method of calculating an itinerary for an off-road vehicle
WO2021187698A1 (en) * 2020-03-17 2021-09-23 주식회사 포드론 Manned/unmanned aerial vehicle having device for emergency control through power regulation
CN113682220A (en) * 2020-05-19 2021-11-23 马自达汽车株式会社 Control system for vehicle-mounted flight vehicle
CN113835440A (en) * 2021-09-10 2021-12-24 广州小鹏汽车科技有限公司 Control method and device for flight equipment, vehicle, flight equipment and storage medium
US11807062B2 (en) 2019-11-25 2023-11-07 Ford Global Technologies, Llc Collaborative relationship between a vehicle and a UAV
JP7476661B2 (en) 2020-05-19 2024-05-01 マツダ株式会社 Vehicle Surroundings Monitoring System
US12017797B2 (en) 2022-08-08 2024-06-25 SZ DJI Technology Co., Ltd. Systems and methods for UAV docking

Cited By (73)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2986647A3 (en) * 2012-02-07 2013-08-09 Renault Sas Observation drone and car combination for use in automobile assembly, has control unit adapted to control methods of propulsion and directional control such that sensor continuously acquires images of section of lane
CN111717407A (en) * 2014-04-25 2020-09-29 索尼公司 Control method and control device
CN111717407B (en) * 2014-04-25 2023-09-29 索尼公司 Control method and control device
US11927877B2 (en) 2014-04-28 2024-03-12 SZ DJI Technology Co., Ltd. Interchangeable mounting platform
US10560611B2 (en) 2014-04-28 2020-02-11 SZ DJI Technology Co., Ltd. Interchangeable mounting platform
US9777887B2 (en) 2014-04-28 2017-10-03 SZ DJI Technology Co., Ltd Interchangeable mounting platform
US9781313B2 (en) 2014-04-28 2017-10-03 SZ DJI Technology Co., Ltd Interchangeable mounting assembly
US9781312B2 (en) 2014-04-28 2017-10-03 SZ DJI Technology Co., Ltd Interchangeable mounting platform
JP2017504983A (en) * 2014-04-28 2017-02-09 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd platform
US10136035B2 (en) 2014-04-28 2018-11-20 SZ DJI Technology Co., Ltd. Interchangeable mounting platform
US11029585B2 (en) 2014-04-28 2021-06-08 SZ DJI Technology Co., Ltd. Interchangeable mounting platform
CN105083120A (en) * 2014-04-30 2015-11-25 比亚迪股份有限公司 Detection system and flight apparatus for automobile surrounding environment
US10059467B2 (en) 2014-05-30 2018-08-28 Sz Dji Technology, Co., Ltd Systems and methods for UAV docking
JP2016535879A (en) * 2014-05-30 2016-11-17 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd System and method for UAV docking
US10800548B2 (en) 2014-05-30 2020-10-13 SZ DJI Technology Co., Ltd. Systems and methods for UAV docking
US11407526B2 (en) 2014-05-30 2022-08-09 SZ DJI Technology Co., Ltd. Systems and methods for UAV docking
US9457915B2 (en) 2014-05-30 2016-10-04 SZ DJI Technology Co., Ltd Systems and methods for UAV docking
US10642279B2 (en) 2014-07-16 2020-05-05 Ford Global Technologies, Llc Automotive drone deployment system
US9409644B2 (en) 2014-07-16 2016-08-09 Ford Global Technologies, Llc Automotive drone deployment system
US9977431B2 (en) 2014-07-16 2018-05-22 Ford Global Technologies, Llc Automotive drone deployment system
US9555885B2 (en) 2014-07-16 2017-01-31 Ford Global Technologies, Llc Automotive drone deployment system
JP2016074257A (en) * 2014-10-02 2016-05-12 株式会社フカデン Flight body system and composite cable used for the flight body system
JP2016138854A (en) * 2015-01-29 2016-08-04 株式会社ゼンリンデータコム Navigation system, navigation device, flying object, navigation cooperation control method, cooperation control program for navigation device, and cooperation control program for flying object
JP2016138853A (en) * 2015-01-29 2016-08-04 株式会社ゼンリンデータコム Navigation system, on-vehicle navigation device, flying object, navigation method, cooperation program for on-vehicle navigation device, and cooperation program for flying object
JP5819555B1 (en) * 2015-04-01 2015-11-24 ライトブレインラボ合同会社 Vehicle driving support system
JP2016194844A (en) * 2015-04-01 2016-11-17 ライトブレインラボ合同会社 Vehicle driving support system
KR20160136957A (en) * 2015-05-21 2016-11-30 경희대학교 산학협력단 The method of ensuring visibility using drone when get on and off and the system of them
KR101715300B1 (en) * 2015-05-21 2017-03-10 경희대학교 산학협력단 The method of ensuring visibility using drone when get on and off and the system of them
JP2016225983A (en) * 2015-06-01 2016-12-28 株式会社プロドローン Relay system
DE102015007156A1 (en) 2015-06-03 2016-12-08 Audi Ag A method in which an unmanned aerial vehicle interacts with a motor vehicle and motor vehicle
DE102015007156B4 (en) * 2015-06-03 2020-11-19 Audi Ag Method in which an unmanned aerial vehicle interacts with a motor vehicle, and motor vehicle
JP2017010446A (en) * 2015-06-25 2017-01-12 三菱自動車工業株式会社 Driving support control device
DE102015008768B4 (en) 2015-07-06 2018-12-13 Audi Ag Method for assessing a motor vehicle and motor vehicle involved in an accident
DE102015008768A1 (en) 2015-07-06 2017-01-12 Audi Ag Method for assessing a motor vehicle and motor vehicle involved in an accident
JP2017021757A (en) * 2015-07-15 2017-01-26 三菱自動車工業株式会社 Vehicular operation support apparatus
CN106429992A (en) * 2015-08-06 2017-02-22 株式会社丰田自动织机 Forklift operation assist system
JP2017036102A (en) * 2015-08-06 2017-02-16 株式会社豊田自動織機 Forklift work assisting system
KR101720649B1 (en) * 2015-08-20 2017-03-28 한국과학기술원 Automatic parking method and system
KR20170022357A (en) * 2015-08-20 2017-03-02 한국과학기술원 Automatic parking method and system
US9786105B2 (en) 2015-12-08 2017-10-10 Caterpillar Inc. Gathering data from machine operating at worksite
CN105652882A (en) * 2015-12-29 2016-06-08 上海中科深江电动车辆有限公司 Electric vehicle three-dimensional navigation system and electric vehicle three-dimensional navigation method based on quadcopter
US10558218B2 (en) 2016-01-28 2020-02-11 Fujitsu Ten Limited Vehicle surroundings monitoring apparatus, monitoring system, remote monitoring apparatus, and monitoring method
JPWO2017131194A1 (en) * 2016-01-29 2018-11-15 住友建機株式会社 Autonomous vehicle flying around a shovel and shovel
JP2022000570A (en) * 2016-01-29 2022-01-04 住友建機株式会社 Excavator and autonomous flying vehicle
KR20180107131A (en) * 2016-01-29 2018-10-01 스미토모 겐키 가부시키가이샤 Autonomous flight vehicle flying around Chopper and Chopper
US11492783B2 (en) 2016-01-29 2022-11-08 Sumitomo(S.H.I) Construction Machinery Co., Ltd. Shovel and autonomous aerial vehicle flying around shovel
KR102615981B1 (en) * 2016-01-29 2023-12-19 스미토모 겐키 가부시키가이샤 Autonomous aircraft flying around shovels and shovels
JP7387684B2 (en) 2016-01-29 2023-11-28 住友建機株式会社 Excavators and autonomous flying vehicles
US11006263B2 (en) 2016-07-07 2021-05-11 Ford Global Technologies, Llc Vehicle-integrated drone
EP3273201B1 (en) 2016-07-21 2021-06-30 Arquus Method of calculating an itinerary for an off-road vehicle
CN106184793A (en) * 2016-08-29 2016-12-07 上海理工大学 A kind of overlook image monitoring system in the air for automobile
WO2018096760A1 (en) * 2016-11-24 2018-05-31 株式会社デンソー Information provision system, onboard device, and information provision program
JP2018085630A (en) * 2016-11-24 2018-05-31 株式会社デンソー Information providing system, device for vehicle, and information providing program
CN109997355A (en) * 2016-11-24 2019-07-09 株式会社电装 Information providing system, vehicle device, information provision procedure
JP2017171291A (en) * 2017-05-15 2017-09-28 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd Platform and system
US11507112B2 (en) 2017-08-15 2022-11-22 Zf Friedrichshafen Ag Control of a transportation vehicle
WO2019034365A1 (en) * 2017-08-15 2019-02-21 Zf Friedrichshafen Ag Control of a transportation vehicle
WO2020116492A1 (en) * 2018-12-05 2020-06-11 株式会社ナイルワークス Drone system, drone, movable body, drone system control method, and drone system control program
JP7008997B2 (en) 2018-12-05 2022-01-25 株式会社ナイルワークス Drone system, drone, mobile, drone system control method, and drone system control program
US11873100B2 (en) 2018-12-05 2024-01-16 Nileworks Inc. Drone system, drone, movable body, drone system control method, and drone system control program
JPWO2020116492A1 (en) * 2018-12-05 2021-02-15 株式会社ナイルワークス Drone system, drone, mobile, drone system control method, and drone system control program
WO2020246251A1 (en) * 2019-06-04 2020-12-10 ソニー株式会社 Information processing device, method, and program
JP2021039442A (en) * 2019-08-30 2021-03-11 楽天株式会社 Control device, traveling body, flight vehicle, system, and method
US11807062B2 (en) 2019-11-25 2023-11-07 Ford Global Technologies, Llc Collaborative relationship between a vehicle and a UAV
WO2021187698A1 (en) * 2020-03-17 2021-09-23 주식회사 포드론 Manned/unmanned aerial vehicle having device for emergency control through power regulation
CN113682220A (en) * 2020-05-19 2021-11-23 马自达汽车株式会社 Control system for vehicle-mounted flight vehicle
CN113682220B (en) * 2020-05-19 2024-02-13 马自达汽车株式会社 Control system for vehicle-mounted flying body
JP7476661B2 (en) 2020-05-19 2024-05-01 マツダ株式会社 Vehicle Surroundings Monitoring System
JP2021091407A (en) * 2021-02-15 2021-06-17 京セラ株式会社 Flight vehicle and flight vehicle control method
JP7055909B2 (en) 2021-02-15 2022-04-18 京セラ株式会社 The flying object and the control method of the flying object
CN113050654A (en) * 2021-03-29 2021-06-29 中车青岛四方车辆研究所有限公司 Obstacle detection method, vehicle-mounted obstacle avoidance system and method for inspection robot
CN113835440A (en) * 2021-09-10 2021-12-24 广州小鹏汽车科技有限公司 Control method and device for flight equipment, vehicle, flight equipment and storage medium
US12017797B2 (en) 2022-08-08 2024-06-25 SZ DJI Technology Co., Ltd. Systems and methods for UAV docking

Similar Documents

Publication Publication Date Title
JP2006180326A (en) Status monitoring system for vehicle
CN109760676B (en) Display system, display method, and storage medium
EP3409525B1 (en) User interface apparatus for vehicle and vehicle
CN107415957B (en) Vehicle control system, control method and the storage device for storing vehicle control program
JP7077083B2 (en) Display system, display method, and program
JP6547155B2 (en) Vehicle control system, vehicle control method, and program
US11077862B2 (en) Vehicle control system, vehicle control method, and storage medium
WO2018087828A1 (en) Vehicle control device, vehicle control system, vehicle control method, and vehicle control program
CA3069114C (en) Parking assistance method and parking assistance device
US20180345991A1 (en) Vehicle control system, vehicle control method, and storage medium
US20180348757A1 (en) Vehicle control system, vehicle control method, and storage medium
EP3441725B1 (en) Electronic device for vehicle and associated method
US9987927B2 (en) Method for operating a communication device for a motor vehicle during an autonomous drive mode, communication device as well as motor vehicle
JP7317967B2 (en) User support method for remote control of automobile, computer program product, remote control device and driving support system for automobile
US10503167B2 (en) Vehicle control system, vehicle control method, and storage medium
JP5067169B2 (en) Vehicle parking assistance apparatus and image display method
JP2005186648A (en) Surrounding visualizing device for vehicle and displaying control device
JP5071738B2 (en) Display device
JP7224998B2 (en) Information processing method, information processing device, and information processing system
JP7220734B2 (en) image display system
JP2019125384A (en) Vehicle control system, vehicle control method, and vehicle control program
JP7242386B2 (en) Vehicle remote monitoring system, vehicle remote monitoring device, and vehicle remote monitoring method
JP7296265B2 (en) Driving information control device and driving information control system
JP2010260483A (en) Vehicle driving support device
JP2021181938A (en) Vehicle guide system

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20080304