JP2011111070A - Device, system, and method of detecting approaching object - Google Patents

Device, system, and method of detecting approaching object Download PDF

Info

Publication number
JP2011111070A
JP2011111070A JP2009270122A JP2009270122A JP2011111070A JP 2011111070 A JP2011111070 A JP 2011111070A JP 2009270122 A JP2009270122 A JP 2009270122A JP 2009270122 A JP2009270122 A JP 2009270122A JP 2011111070 A JP2011111070 A JP 2011111070A
Authority
JP
Japan
Prior art keywords
vehicle
approaching object
approaching
door
object detection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2009270122A
Other languages
Japanese (ja)
Inventor
Yukie Sei
幸栄 清
Takechika Kiritani
武親 桐谷
Tetsuo Yamamoto
徹夫 山本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Ten Ltd
Original Assignee
Denso Ten Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Ten Ltd filed Critical Denso Ten Ltd
Priority to JP2009270122A priority Critical patent/JP2011111070A/en
Publication of JP2011111070A publication Critical patent/JP2011111070A/en
Withdrawn legal-status Critical Current

Links

Landscapes

  • Rear-View Mirror Devices That Are Mounted On The Exterior Of The Vehicle (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a technique capable of reliably detecting an approaching object with a possibility of causing a contact or collision to an occupant of a vehicle in opening a vehicle door without a door opening/closing operation such as an operation of moving a door knob upon an exit from the vehicle. <P>SOLUTION: The approaching object approaching to the vehicle is detected based on a photographed image obtained by a camera mounted in the vehicle in a halt condition of the vehicle. A vehicle door which the approaching object approaches is specified out of a plurality of vehicle doors, and the alarm device corresponding to the door is actuated in response to the detection of the approaching object. Thus, the risk of the contact or collision with the approaching object by opening of the door upon the exit from the vehicle, can be avoided. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、車両周辺の接近物を検知する技術に関する。   The present invention relates to a technique for detecting an approaching object around a vehicle.

一般に、車両走行中に当該車両に接近する物体(たとえば車両の左右の後側方に接近する物体)をレーダ装置などを用いて検出し、車両に接近している物体が存在することを車両のユーザである運転者に報知する技術がある。また、特許文献1には車両の乗員が当該車両から降車する際に後方から接近する車両との接触や衝突を防止する、車両のドア開放操作の警報装置に関する技術が開示されている。   In general, an object approaching the vehicle while the vehicle is traveling (for example, an object approaching the left and right rear sides of the vehicle) is detected using a radar device or the like, and the presence of an object approaching the vehicle exists. There is a technique for informing a driver who is a user. Patent Document 1 discloses a technology related to an alarm device for a vehicle door opening operation that prevents a vehicle occupant from contacting or colliding with a vehicle approaching from behind when getting off the vehicle.

特開2001−239832号公報JP 2001-239832 A

しかしながら、上記特許文献1の技術では、車両のドアノブを動かすようなドア開放操作を行った際に車両の後方からの接近物との接触や衝突を防止するための警報装置については開示されているものの、ドア開放操作を行う前の乗員に対する警告については何ら考慮されていない。そのため、車両の乗員は降車する直前のドア開放操作を行った場合にしか接近物の有無を知ることはできず、降車できるタイミングがわかりにくいという問題があった。   However, the technique of Patent Document 1 discloses an alarm device for preventing contact and collision with an approaching object from the rear of the vehicle when a door opening operation is performed such as moving the door knob of the vehicle. However, no warning is given to passengers before opening the door. Therefore, the vehicle occupant can know the presence or absence of an approaching object only when the door opening operation is performed immediately before getting off, and there is a problem that it is difficult to know when to get off.

本発明は、上記課題に鑑みてなされたものであり、車両から降車する際にドアノブを動かすようなドア開閉操作を行わなくとも、車両の乗員に対して、車両のドア開放時に接触や衝突を引き起こす可能性のある接近物を確実に検知できる技術を提供することを目的とする。   The present invention has been made in view of the above-described problems, and makes it possible for a vehicle occupant to contact or collide with a vehicle occupant when the vehicle door is opened without performing a door opening / closing operation such as moving a door knob when getting off the vehicle. An object of the present invention is to provide a technique capable of reliably detecting an approaching object that may cause a problem.

上記課題を解決するため、請求項1の発明は、車両に搭載され、前記車両に接近する接近物を検知する接近物検知装置であって、前記車両には、前記車両の複数のドアのそれぞれに対応して、ユーザに警告を報知する警報装置が設けられ、前記車両の停止状態で、前記車両に搭載されたカメラで得られた撮影画像に基づいて、前記車両に接近する接近物を検知する検知手段と、前記撮影画像に基づいて、前記車両の複数のドアのうち前記接近物が接近している前記車両のドアを特定する特定手段と、前記接近物を検知したことに応答して、前記特定手段に特定された前記ドアに対応する前記警報装置を作動させる装置作動手段と、を備える。   In order to solve the above-mentioned problem, the invention of claim 1 is an approaching object detection device that is mounted on a vehicle and detects an approaching object approaching the vehicle, wherein each of the plurality of doors of the vehicle is included in the vehicle. In response to the above, an alarm device for notifying the user of a warning is provided, and an approaching object approaching the vehicle is detected based on a captured image obtained by a camera mounted on the vehicle when the vehicle is stopped. In response to detecting the approaching object, a detection means for identifying the door of the vehicle that the approaching object is approaching among a plurality of doors of the vehicle based on the captured image And an apparatus operating means for operating the alarm device corresponding to the door specified by the specifying means.

また、請求項2の発明は、請求項1に記載の接近物検知装置において、前記カメラは、前記車両の左右双方の側方に配置され、前記特定手段は、前記接近物の像を含む画像を取得したカメラの左右位置に基づいて、前記接近物が接近している前記車両のドアを特定する。   According to a second aspect of the present invention, in the approaching object detection device according to the first aspect, the camera is disposed on both the left and right sides of the vehicle, and the specifying means includes an image including an image of the approaching object. The door of the vehicle to which the approaching object is approaching is specified based on the left and right positions of the camera that acquired

また、請求項3の発明は、請求項2に記載の接近物検知装置において、前記カメラは、自装置が配置される側の前記車両の側方領域における前方から後方までを撮影可能であり、前記検知手段は、前記車両の前方および後方の少なくともいずれか一方から接近する物体を検知する。   Further, the invention of claim 3 is the approaching object detection device according to claim 2, wherein the camera is capable of photographing from the front to the rear in the side region of the vehicle on the side where the device is disposed, The detection means detects an object approaching from at least one of the front and rear of the vehicle.

また、請求項4の発明は、請求項1ないし3のいずれかに記載の接近物検知装置において、前記接近物の位置及び速度を取得する取得手段と、前記接近物の位置及び速度に基づいて、危険度合を判定する判定手段と、
をさらに備え、前記装置作動手段は、前記危険度合に応じて、前記警報装置を異なる態様で作動させる。
According to a fourth aspect of the present invention, in the approaching object detection device according to any one of the first to third aspects, the acquisition means for acquiring the position and speed of the approaching object, and the position and speed of the approaching object. Determining means for determining the degree of risk;
The device actuating means actuates the alarm device in a different manner according to the degree of risk.

また、請求項5の発明は、車両に搭載される接近物検知システムであって、請求項1ないし4のいずれかに記載の接近物検知装置と、前記車両の複数のドアのそれぞれに対応して、ユーザに警告を報知する警報装置と、を備える。   The invention of claim 5 is an approaching object detection system mounted on a vehicle, corresponding to each of the approaching object detection device according to any one of claims 1 to 4 and the plurality of doors of the vehicle. And an alarm device for informing the user of the warning.

さらに、請求項6の発明は、車両に搭載され、前記車両に接近する接近物を検知する接近物検知方法であって、前記車両には、前記車両の複数のドアのそれぞれに対応して、ユーザに警告を報知する警報装置が設けられ、前記車両の停止状態で、前記車両に搭載されたカメラで得られた撮影画像に基づいて、前記車両に接近する接近物を検知する検知工程と、前記撮影画像に基づいて、前記車両の複数のドアのうち前記接近物が接近している前記車両のドアを特定する特定工程と、前記接近物を検知したことに応答して、前記特定手段に特定された前記ドアに対応する前記警報装置を作動させる装置作動工程と、を備える。   Further, the invention of claim 6 is an approaching object detection method for detecting an approaching object mounted on a vehicle and approaching the vehicle, wherein the vehicle corresponds to each of a plurality of doors of the vehicle, A detection step of detecting an approaching object approaching the vehicle based on a photographed image obtained by a camera mounted on the vehicle in a stopped state of the vehicle, provided with an alarm device for notifying a user; Based on the captured image, in response to detecting the approaching object, a specifying step of specifying the approaching door of the approaching object among the plurality of doors of the vehicle, the specifying means A device actuating step of actuating the alarm device corresponding to the identified door.

請求項1ないし6の発明によれば、接近物を検知したことに応答して、車両の複数のドアのうち接近物が接近している車両のドアに対応する警報装置を作動させるため、車両の乗員が降車する前に自身が降車するドアに接近物が接近しているか否かをドアの開放操作なしに認識できる。また、これにより、車両から降車する際にドアを開放して接近物に接触したり衝突する危険を回避できる。   According to the first to sixth aspects of the invention, in response to the detection of the approaching object, the alarm device corresponding to the door of the vehicle that is approaching among the plurality of doors of the vehicle is operated. It is possible to recognize whether or not an approaching object is approaching the door from which the passenger gets off before the passenger gets off without opening the door. This also avoids the danger of opening a door and touching or colliding with an approaching object when getting off the vehicle.

また、特に請求項2の発明によれば、接近物の像を含む画像を取得したカメラの左右位置に基づいて、接近物が接近している車両のドアを特定することで、車両の乗員は接近物が車両の左右いずれの側面から接近しているかを簡便かつ正確に検知できる。また、これにより、車両から降車する際にドアを開放して接近物に接触したり衝突する危険を回避できる。   According to the invention of claim 2 in particular, the vehicle occupant can identify the vehicle door that the approaching object is approaching based on the left and right positions of the camera that acquired the image including the image of the approaching object. Whether the approaching object is approaching from the left or right side of the vehicle can be detected easily and accurately. This also avoids the danger of opening a door and touching or colliding with an approaching object when getting off the vehicle.

また、特に請求項3の発明によれば、車両の前方および後方の少なくともいずれか一方から接近する物体を検知することで、より危険な前方あるいは後方から近づいてくる接近物に対応して警報装置を作動させられる。   In particular, according to the invention of claim 3, by detecting an object approaching from at least one of the front and rear of the vehicle, an alarm device corresponding to an approaching object approaching from a more dangerous front or rear Is activated.

また、特に請求項4の発明によれば、接近物の位置及び速度に基づいて、危険度合を判定し、その危険度合に応じて、前記警報装置を異なる態様で作動させることで、乗員に車両に接近物が接近中であることを報知し、かつ、降車可能なタイミングを乗員に報知できる。   In particular, according to the invention of claim 4, the degree of danger is determined based on the position and speed of the approaching object, and the warning device is operated in a different manner according to the degree of danger, so that the occupant can It is possible to inform the passenger that the approaching object is approaching, and to inform the occupant when it is possible to get off.

図1は、接近物検知システムのブロック図である。FIG. 1 is a block diagram of an approaching object detection system. 図2は、車両の各カメラの設置位置を示した図である。FIG. 2 is a diagram showing the installation position of each camera in the vehicle. 図3は、接近物検知モードの起動処理のフローチャートである。FIG. 3 is a flowchart of the activation process in the approaching object detection mode. 図4は、接近物検知モードの接近物検知範囲を示した図である。FIG. 4 is a diagram showing an approaching object detection range in the approaching object detection mode. 図5は、接近物検知処理を示した図である。FIG. 5 shows the approaching object detection process. 図6は、接近物検知の具体例1を示した図である。FIG. 6 is a diagram illustrating a specific example 1 of approaching object detection. 図7は、接近物を検知した場合の警告処理を示した図である。FIG. 7 is a diagram illustrating warning processing when an approaching object is detected. 図8は、車両のドアに設けられた警報装置の具体例を示した図である。FIG. 8 is a diagram showing a specific example of an alarm device provided on the door of the vehicle.

以下、図面を参照しつつ本発明の実施形態について説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

<1.構成>
図1は、接近物検知システム1のブロック図である。接近物検知システム1は、車両(本実施の形態では、自動車)に搭載されるものであり、車両の周辺を撮影して画像を生成し、車両に接近する接近物を検知し、この接近物が接近する車両のドアを特定して、接近物を検知したことに応答してそのドアに対応する警報装置を作動させる機能を有している。この接近物検知システム1を利用するユーザとなる車両の乗員は当該車両への接近物をドアの開閉操作を行うことなく容易に把握できる。
<1. Configuration>
FIG. 1 is a block diagram of the approaching object detection system 1. The approaching object detection system 1 is mounted on a vehicle (in this embodiment, an automobile). The approaching object detection system 1 captures an image of the vicinity of the vehicle, generates an image, detects an approaching object approaching the vehicle, and detects the approaching object. The vehicle has a function of operating the alarm device corresponding to the door in response to detecting the approaching object by identifying the door of the vehicle approaching. A vehicle occupant serving as a user who uses the approaching object detection system 1 can easily grasp an approaching object to the vehicle without opening and closing the door.

図1に示すように接近物検知システム1は、撮影部10、接近物検知部20、警報装置30、レーダ装置40、および、ナビゲーション装置50を備えて構成されている。   As shown in FIG. 1, the approaching object detection system 1 includes an imaging unit 10, an approaching object detection unit 20, an alarm device 30, a radar device 40, and a navigation device 50.

撮影部10は車載カメラであり、右サイドカメラ101、左サイドカメラ102、フロントカメラ103、および、リアカメラ104を備えている。これらのカメラはレンズと撮像素子を備えており電子的に画像を取得する。   The photographing unit 10 is an in-vehicle camera, and includes a right side camera 101, a left side camera 102, a front camera 103, and a rear camera 104. These cameras are equipped with a lens and an image sensor and electronically acquire images.

図2は、車両2の各カメラの設置位置を示した図である。車両2は車両のユーザである運転者が車両の側方などを確認するための右ドアミラー4、および、左ドラミラー5を備えている。そして、右ドアミラー4には右サイドカメラ101が備えられ、左ドアミラー5には、左サイドカメラ102が備えられている。各カメラの光軸は車両2の直進方向に対して交差するように車両2の外部方向に向けられている。   FIG. 2 is a diagram showing the installation positions of the cameras of the vehicle 2. The vehicle 2 includes a right door mirror 4 and a left dora mirror 5 for a driver who is a user of the vehicle to confirm the side of the vehicle. The right door mirror 4 is provided with a right side camera 101, and the left door mirror 5 is provided with a left side camera 102. The optical axis of each camera is directed toward the outside of the vehicle 2 so as to intersect the straight traveling direction of the vehicle 2.

また、フロントカメラ103は、車両2の前端となるフロントバンパの左右略中心に設けられ、その光軸は車両2の直進方向に向けられている。さらに、リアカメラ104は、車両2の後端となるリアバンパの左右略中心に設けられ、その光軸は車両2の直進方向の逆方向に設けられている。   Further, the front camera 103 is provided at a substantially right and left center of a front bumper that is a front end of the vehicle 2, and an optical axis thereof is directed in a straight traveling direction of the vehicle 2. Further, the rear camera 104 is provided at a substantially right and left center of a rear bumper that is a rear end of the vehicle 2, and an optical axis thereof is provided in a direction opposite to the straight traveling direction of the vehicle 2.

各カメラのレンズは魚眼レンズなどが採用されており、各カメラは180度以上の画角を有している。このため、4つの車載カメラ101、102、103、および、104を利用することで、車両2の全周囲の撮影が可能である。   A fisheye lens or the like is adopted as the lens of each camera, and each camera has an angle of view of 180 degrees or more. For this reason, by using the four in-vehicle cameras 101, 102, 103, and 104, it is possible to capture the entire periphery of the vehicle 2.

また、車両2は運転席ドアR2、運転席側後部ドアR1、助手席ドアL2、助手席側後部ドアL1を備えている。なお以下、運転席ドアR2、および、運転席側後部ドアR1をあわせて運転席側ドアといい、助手席ドアL2、および、助手席側後部ドアL1を助手席側ドアともいう。   Further, the vehicle 2 includes a driver seat door R2, a driver seat side rear door R1, a passenger seat door L2, and a passenger seat rear door L1. Hereinafter, the driver seat door R2 and the driver seat side rear door R1 are collectively referred to as a driver seat side door, and the passenger seat door L2 and the passenger seat side rear door L1 are also referred to as a passenger seat side door.

なお、本実施の形態では運転席ドア、運転席側後部ドア、助手席ドア、および、助手席側後部ドアの4つのドアを備えている車両について述べるが、車両の種類はこれに限定されることなく、複数のドアを有する車両について本発明は適用され得る。その際、運転席側に備えられるドアを運転席側ドアといい、助手席側に備えられるドアを助手席側ドアという。そして、以下に詳述するように運転席側ドアに対応する接近物検知範囲、助手席側ドアに対応する接近物検知範囲に基づいて、運転席側ドアまたは助手席側ドアのいずれかを特定して接近する物体を検知する。   In the present embodiment, a vehicle including four doors including a driver seat door, a driver seat side rear door, a passenger seat door, and a passenger seat side rear door will be described, but the type of the vehicle is limited to this. The present invention can be applied to a vehicle having a plurality of doors. At that time, the door provided on the driver's seat side is referred to as the driver's seat side door, and the door provided on the passenger seat side is referred to as the passenger seat side door. Then, as described in detail below, either the driver side door or the passenger side door is identified based on the approaching object detection range corresponding to the driver side door and the approaching object detection range corresponding to the passenger side door To detect an approaching object.

また、以下で記載する接近物検知に伴う車両乗員への警告では、右サイドカメラ101、および、左サイドカメラ102を用いた処理を一例として述べる。   In the warning to the vehicle occupant accompanying the approaching object detection described below, processing using the right side camera 101 and the left side camera 102 will be described as an example.

図1に戻り、接近物検知部20は、画像生成部201、制御部202、および不揮発性メモリ203を備えている。   Returning to FIG. 1, the approaching object detection unit 20 includes an image generation unit 201, a control unit 202, and a nonvolatile memory 203.

画像生成部201は、撮影部10で取得されたデータに基づいて、車両2に接近する接近物を含む物体の撮影画像を生成する。なお、物体の車両2への接近は撮影画像の物体を複数フレーム撮影された物体の画像の時間ごとの変化に基づいて判断する。   The image generation unit 201 generates a captured image of an object including an approaching object approaching the vehicle 2 based on the data acquired by the imaging unit 10. Note that the approach of the object to the vehicle 2 is determined based on the change over time of the image of the object in which a plurality of frames of the object in the captured image are captured.

制御部202は画像生成部201で生成された撮影画像の車両2に接近する接近物を検知する。この接近物の検知は、撮影部10の右サイドカメラ101、および、左サイドカメラ102の撮影範囲内で予め設けられた所定領域内の物体を対象とする。なお各カメラの撮影範囲内、および、接近物を検知する所定領域については後述する。   The control unit 202 detects an approaching object approaching the vehicle 2 in the captured image generated by the image generation unit 201. The detection of the approaching object targets an object in a predetermined area provided in advance within the imaging range of the right side camera 101 and the left side camera 102 of the imaging unit 10. In addition, the predetermined area | region which detects the approaching object within the imaging | photography range of each camera is mentioned later.

また、制御部202は取得した撮影画像が右サイドカメラ101、および、左サイドカメラ102のいずれのカメラで撮影されたもので、車両の進行方向の前方または後方に予め設けられた所定領域内のいずれの領域で検知された物体であるかに基づいて、接近物が接近している車両のドアを特定する。   In addition, the control unit 202 captures the acquired captured image with either the right side camera 101 or the left side camera 102, and is within a predetermined area provided in front of or behind the vehicle in the traveling direction. Based on which region the object is detected, the vehicle door to which the approaching object approaches is specified.

そして、接近物を検知すると、その検知に応答して、接近物が接近しているとして特定されたドアの乗員が車両2から降車する際に、注意を促す位置に設けられた後述する警報装置30を作動させる信号を警報装置30へ送信する。さらに、制御部202は接近物検知システム1の各部を統括的に制御する。   When an approaching object is detected, an alarm device described later is provided at a position to call attention when an occupant of the door specified as approaching approaching gets off the vehicle 2 in response to the detection. A signal for operating 30 is transmitted to the alarm device 30. Further, the control unit 202 comprehensively controls each unit of the approaching object detection system 1.

また、制御部202は後述する車速センサ701、シフトセンサ702、イグニッションスイッチ703、および、ブレーキセンサ704からの信号を信号入力部601を介して受信する。これらの信号に基づいて、たとえば車両2が停車状態か否かの車両2の状態を判別して接近物の検知を行う。   The control unit 202 also receives signals from a vehicle speed sensor 701, a shift sensor 702, an ignition switch 703, and a brake sensor 704, which will be described later, via the signal input unit 601. Based on these signals, for example, the state of the vehicle 2 is determined as to whether or not the vehicle 2 is stopped, and an approaching object is detected.

さらに、制御部202は後述するレーダ装置40からの物体の位置(物体の距離、および、角度)と速度との情報を信号入力部601を介して受信する。このレーダ装置40からの物体の位置と速度との情報に基づいて、車両2の接近物がどれくらい離れた位置からどれくらいの速度で接近しているかに応じて、接近物の危険度合を判定する。そして、危険度合の判定に応じて、警報装置30の作動態様を異ならせる。この警報装置30の危険度合に応じた作動態様については後述する。   Further, the control unit 202 receives information on the position (the distance and angle of the object) and the speed of the object from the radar device 40 described later via the signal input unit 601. Based on the information on the position and speed of the object from the radar apparatus 40, the degree of danger of the approaching object is determined according to how far the approaching object of the vehicle 2 is approaching from what position. Then, depending on the determination of the degree of risk, the operation mode of the alarm device 30 is varied. The operation mode according to the degree of risk of the alarm device 30 will be described later.

不揮発性メモリ203は、制御部202の接近物検知を含む各種の制御機能を実現するプログラムが予め記憶されており、制御部202が処理を実行する際にその処理に応じたプログラムが用いられる。   The nonvolatile memory 203 stores in advance programs that realize various control functions including approaching object detection of the control unit 202, and when the control unit 202 executes processing, a program corresponding to the processing is used.

警報装置30はLED(Light Emitting Diode)などの発光体で視覚的に乗員へ危険を報知する。そして、接近物の危険度合に応じて異なる態様で作動する。この警報装置30は、車両が備えるドアR1、R2、L1、および、L2のそれぞれに対応して設けられている。警報装置30は対応するドア自身、および、ドア近傍に配置される。たとえば、警報装置30は、車両2のドア部(たとえば車両2のドアのドアノブ付近)に設けられる。これにより車両2の乗員が降車する前に確実に危険を報知できる。   The warning device 30 visually notifies the passenger of the danger visually by a light emitter such as an LED (Light Emitting Diode). And it operates in a different mode depending on the danger level of the approaching object. The alarm device 30 is provided corresponding to each of the doors R1, R2, L1, and L2 provided in the vehicle. The alarm device 30 is disposed in the corresponding door itself and in the vicinity of the door. For example, alarm device 30 is provided at the door portion of vehicle 2 (for example, near the doorknob of the door of vehicle 2). Thereby, danger can be reliably notified before the passenger | crew of the vehicle 2 gets off.

また、たとえば、警報装置30は車両2のピラー部(運転席や助手席の場合はAピラー、後部座席の場合はBピラー、および、Cピラーなど)に設けてもよい。このように、警報装置30は乗員が車両2から降車する前に注意を促す位置に設けられており、これにより乗員が降車の際にドアを開放して接近物に接触や衝突する危険を回避できる。   Further, for example, the alarm device 30 may be provided in a pillar part of the vehicle 2 (A pillar in the case of a driver seat or a passenger seat, B pillar and C pillar in the case of a rear seat, etc.). As described above, the alarm device 30 is provided at a position where an occupant calls attention before getting out of the vehicle 2, thereby avoiding the danger that the occupant opens the door and contacts or collides with an approaching object when getting off the vehicle. it can.

レーダ装置40は制御部401を備えている。レーダ装置40は、ミリ波などの周波数帯の電波を用いて、車両周囲の物体の位置、および、速度を検知する。レーダ装置40に設けられた制御部401は図示しないアンテナから送信された送信波が物体に反射して、受信波としてアンテナで受信された信号を処理して物体の位置、および、速度を信号入力部701を介して接近物検知部20の制御部202へ送信する。   The radar apparatus 40 includes a control unit 401. The radar device 40 detects the position and speed of an object around the vehicle using radio waves in a frequency band such as a millimeter wave. The control unit 401 provided in the radar device 40 reflects a transmission wave transmitted from an antenna (not shown) to an object, processes a signal received by the antenna as a reception wave, and inputs the position and speed of the object as a signal. It transmits to the control part 202 of the approaching object detection part 20 via the part 701.

ナビゲーション装置50は表示部501、音声出力部502、および、制御部503を備えている。ナビゲーション装置50は車両の乗員が運転する際のナビゲーション機能やオーディオ機能などを有しており、表示部501から地図情報やその他の機能に付随した画像の情報を表示し、音声出力部502ではナビゲーション時の音声案内や、オーディオ使用時の音声出力を行う。   The navigation device 50 includes a display unit 501, an audio output unit 502, and a control unit 503. The navigation device 50 has a navigation function and an audio function when a vehicle occupant drives, displays map information and image information associated with other functions from the display unit 501, and the voice output unit 502 performs navigation. Voice guidance when and audio output when using audio.

また、撮影部10の右サイドカメラ101、および、左サイドカメラ102で撮影され、接近物検知部20の制御部202で接近物として検知された物体に関する画像情報、および、接近物検知に伴い乗員に注意を促す音声案内などをナビ通信部602を介して表示部501、および、音声出力部502を用いて出力する。これにより、車両2の乗員は車両2へ接近している接近物を視覚および聴覚で認識することができ、車両2から降車する際にドアを開放して接近物に接触したり衝突する危険を回避できる。   In addition, the image information related to the object photographed by the right side camera 101 and the left side camera 102 of the photographing unit 10 and detected as an approaching object by the control unit 202 of the approaching object detection unit 20, and an occupant accompanying the approaching object detection A voice guidance or the like that calls attention is output using the display unit 501 and the voice output unit 502 via the navigation communication unit 602. Thereby, the occupant of the vehicle 2 can recognize the approaching object approaching the vehicle 2 by visual and auditory sense, and when getting off the vehicle 2, the door is opened and the danger of contacting or colliding with the approaching object can be avoided. Can be avoided.

制御部503は、ナビゲーション装置の表示部501、および、音声出力部502などの各部の制御や、ナビゲーション機能、および、オーディオ機能などの各種のデータ処理などを行う。   The control unit 503 performs control of each unit such as the display unit 501 and the audio output unit 502 of the navigation device, and various data processing such as a navigation function and an audio function.

信号入力部601は、後述する車速センサ701、シフトセンサ702、イグニッションスイッチ703、および、ブレーキセンサ704の情報を接近物検知部20の制御部202へ送信するインターフェイスである。   The signal input unit 601 is an interface that transmits information on a vehicle speed sensor 701, a shift sensor 702, an ignition switch 703, and a brake sensor 704, which will be described later, to the control unit 202 of the approaching object detection unit 20.

また、ナビ通信部602はナビゲーション装置50と接近物検知部20の制御部202との双方の情報の通信を仲介する。   In addition, the navigation communication unit 602 mediates communication of information between the navigation device 50 and the control unit 202 of the approaching object detection unit 20.

次に、車速センサ701は、車両2の速度を検知して、制御部20へ車速(km/h)の情報を送信する。また、シフトセンサ702は図示しないシフトレバーからの”P”、”D”、”N”、”R”などのシフトポジションが入力される。   Next, the vehicle speed sensor 701 detects the speed of the vehicle 2 and transmits vehicle speed (km / h) information to the control unit 20. The shift sensor 702 receives shift positions such as “P”, “D”, “N”, and “R” from a shift lever (not shown).

イグニッションスイッチ703は車両2のイグニッションOFF、アクセサリON、イグニッションON、および、スタータONの4段階の切替位置を有しており、車両2の乗員により切替が可能である。このイグニッションスイッチ703の信号は信号入力部601を介して、制御部202に入力される。ここで、車両2のイグニッションOFF状態とは、車両2の図示しないエンジンが停止状態であることをいい、イグニッションON状態とは、車両2のエンジンが起動状態にあることをいう。また、アクセサリON状態とは、エンジンを始動させていない状態で、撮影部10、接近物検知部20、レーダ装置40、および、ナビゲーション装置50などの各種装置を使用できる状態をいう。   The ignition switch 703 has four switching positions: ignition OFF, accessory ON, ignition ON, and starter ON of the vehicle 2, and can be switched by a passenger of the vehicle 2. A signal from the ignition switch 703 is input to the control unit 202 via the signal input unit 601. Here, the ignition OFF state of the vehicle 2 means that an engine (not shown) of the vehicle 2 is in a stopped state, and the ignition ON state means that the engine of the vehicle 2 is in an activated state. The accessory ON state refers to a state in which various devices such as the photographing unit 10, the approaching object detection unit 20, the radar device 40, and the navigation device 50 can be used without starting the engine.

ブレーキセンサ704からは運転者がブレーキ操作を行った場合にブレーキ信号が制御部202に入力される。   A brake signal is input from the brake sensor 704 to the control unit 202 when the driver performs a brake operation.

<2.処理>
<2−1.接近物検知モード起動処理>
次に、車両2への接近物を検知して、乗員が降車する際に接近物が検知された場合は車両2の乗員に警告を行う接近物検知モードの起動処理について述べる。なお、この処理は接近物検知部20の制御部202により行われる。
<2. Processing>
<2-1. Approaching object detection mode activation process>
Next, an approaching object detection mode activation process that detects an approaching object to the vehicle 2 and warns the occupant of the vehicle 2 when the approaching object is detected when the occupant gets off the vehicle 2 will be described. This process is performed by the control unit 202 of the approaching object detection unit 20.

図3は、接近物検知モードの起動処理のフローチャートである。運転者のイグニッションスイッチ703の操作によりアクセサリON後、または、イグニッションON後、30秒経過している場合(ステップS301がYes)、シフトレバーがPレンジか否かをシフトセンサ702の信号に基づいて判断する(ステップS302)。なお、アクセサリON後、または、イグニッションON後、30秒経過していない場合(ステップS301がNo)は、処理を終了する。   FIG. 3 is a flowchart of the activation process in the approaching object detection mode. Based on the signal from the shift sensor 702, whether the shift lever is in the P range or not after the accessory is turned on by the driver's operation of the ignition switch 703 or when 30 seconds have elapsed after the ignition is turned on (Yes in step S301). Judgment is made (step S302). If 30 seconds have not elapsed after the accessory is turned on or after the ignition is turned on (No in step S301), the process ends.

シフトレバーがPレンジの場合(ステップS302がYes)、車速が1km/h未満か否かを判断する(ステップS306)。車速が1km/h未満の場合(ステップS306がYes)、接近物検知モードをON状態とする。これにより、車両2の停止状態で乗員が車両2から降車する前に接近物の有無を検知し、接近物が検知された場合は乗員に警告を行うことができ、ドアを開放して接近物に接触したり衝突する危険を回避できる。車速が1km/h未満でない場合(ステップS306がNo)は、処理を終了する。   When the shift lever is in the P range (step S302 is Yes), it is determined whether the vehicle speed is less than 1 km / h (step S306). When the vehicle speed is less than 1 km / h (step S306 is Yes), the approaching object detection mode is turned on. As a result, it is possible to detect the presence of an approaching object before the occupant gets off the vehicle 2 while the vehicle 2 is stopped, and when the approaching object is detected, a warning can be given to the occupant, and the approaching object can be opened by opening the door. You can avoid the danger of touching or colliding. When the vehicle speed is not less than 1 km / h (No in step S306), the process ends.

ステップS302に戻り、シフトレバーがPレンジではない場合(ステップS302がNo)、シフトレバーがDレンジか否かを判断する(ステップS303)。シフトレバーがDレンジでない場合(ステップS303がNo)は、処理を終了する。   Returning to step S302, if the shift lever is not in the P range (step S302 is No), it is determined whether or not the shift lever is in the D range (step S303). If the shift lever is not in the D range (No in step S303), the process ends.

シフトレバーがDレンジの場合(ステップS303がYes)は、ブレーキセンサ704からのブレーキ信号がON状態か否かを判断する(ステップS304)。 ブレーキ信号がON状態の場合(ステップS304がYes)、車速が1km/未満か否かを判断し(ステップS306)、車速が1km/h未満の場合(ステップS306がYes)は、接近物検知モードをON状態とし(ステップS307)、車速が1km/h未満ではない場合(ステップS306がNo)は、処理を終了する。   When the shift lever is in the D range (step S303 is Yes), it is determined whether or not the brake signal from the brake sensor 704 is in an ON state (step S304). When the brake signal is ON (step S304 is Yes), it is determined whether or not the vehicle speed is less than 1 km / h (step S306). If the vehicle speed is less than 1 km / h (step S306 is Yes), the approaching object detection mode Is turned on (step S307), and if the vehicle speed is not less than 1 km / h (step S306: No), the process is terminated.

ステップS304に戻り、ブレーキ信号がONではない場合(ステップS304がNo)は、ブレーキセンサ704からの信号に基づいて、パーキングブレーキ信号がON状態か否かを判断する(ステップS305)。パーキングブレーキ信号がON状態ではない場合(ステップS305)は、処理を終了する。パーキングブレーキ信号がON状態の場合(ステップS305がYes)は、車速が1km/h未満か否かを判断し(ステップS306)、車速が1km/h未満の場合(ステップS306がYes)、接近物検知モードをON状態とする。これにより、車両2の停止状態で乗員が車両2から降車する前に接近物の有無を検知し、接近物が検知された場合は乗員に警告を行うことができ、ドアを開放して接近物に接触したり衝突する危険を回避できる。   Returning to step S304, if the brake signal is not ON (No in step S304), it is determined based on the signal from the brake sensor 704 whether the parking brake signal is in an ON state (step S305). If the parking brake signal is not ON (step S305), the process is terminated. If the parking brake signal is ON (step S305 is Yes), it is determined whether or not the vehicle speed is less than 1 km / h (step S306). If the vehicle speed is less than 1 km / h (step S306 is Yes), the approaching object The detection mode is turned on. As a result, it is possible to detect the presence of an approaching object before the occupant gets off the vehicle 2 while the vehicle 2 is stopped, and when the approaching object is detected, a warning can be given to the occupant, and the approaching object can be opened by opening the door. You can avoid the danger of touching or colliding.

車速が1km/h未満ではない場合(ステップS306がNo)は、処理を終了する。   If the vehicle speed is not less than 1 km / h (No in step S306), the process ends.

図4は接近物検知モードの接近物検知範囲を示した図である。車両2は、右ドアミラー4に右サイドカメラ101、左ドアミラー5に左サイドカメラ102が設けられている。右サイドカメラ101では撮影範囲RB内のB2、および、B1の破線で示す範囲を接近物検知範囲とする。この接近物検知範囲内での接近物の検出は、撮影画像の複数フレームにおける物体の時間ごとの変化に基づいて車両2への接近を判断する。また、左サイドカメラ102では撮影範囲RA内のA2、および、A1の破線で示す範囲を接近物検知範囲とする。この接近物検知範囲内での接近物の検出は、撮影画像の複数フレームにおける物体の時間ごとの変化に基づいて車両2への接近を判断する。   FIG. 4 is a diagram showing an approaching object detection range in the approaching object detection mode. In the vehicle 2, a right side camera 101 is provided on the right door mirror 4, and a left side camera 102 is provided on the left door mirror 5. In the right side camera 101, the range indicated by the broken line B2 and B1 in the shooting range RB is set as the approaching object detection range. In the approaching object detection within the approaching object detection range, the approach to the vehicle 2 is determined based on the change of the object with time in a plurality of frames of the captured image. In the left side camera 102, the range indicated by the broken lines A2 and A1 in the shooting range RA is set as the approaching object detection range. In the approaching object detection within the approaching object detection range, the approach to the vehicle 2 is determined based on the change of the object with time in a plurality of frames of the captured image.

なおこれらの処理は、撮影部10の右サイドカメラ101、および、左サイドカメラ102で撮影された画像情報に基づいて、接近物検知部20の制御部202により行われる。   These processes are performed by the control unit 202 of the approaching object detection unit 20 based on image information captured by the right side camera 101 and the left side camera 102 of the imaging unit 10.

また、各サイドカメラの破線で示す接近物検知範囲は車両の前後約20m〜30mの位置の物体を検知でき、車両2から左右約1m以内の距離で接近する物体を接近物として検知する。これにより、車両2から20m〜30m離れた位置の接近物でも早期に検知して、乗員が降車の際にドアを開放して接近物に接触や衝突する危険を回避できる。   Moreover, the approaching object detection range shown by the broken line of each side camera can detect an object at a position of about 20 m to 30 m before and after the vehicle, and detects an object approaching from the vehicle 2 within a distance of about 1 m to the left and right as an approaching object. Thereby, even an approaching object at a position 20 m to 30 m away from the vehicle 2 can be detected at an early stage, and the danger of the passenger opening the door when getting off and contacting or colliding with the approaching object can be avoided.

<2−2.接近物検知処理>
図5は、接近物検知処理を示したフローチャートである。なお、図5で述べる処理は接近物検知部20の制御部202により行われる。車両2の接近物検知モードがON状態の場合(ステップS501がYes)、接近物検知範囲(以下、「検知範囲」という。)A1内に車両2への接近物が検知された場合(ステップS502がYes)、検知範囲B1内に車両2への接近物が検知されたか否かを判定する(ステップS506)。検知範囲B1内に接近物が検知された場合(ステップS506がYes)は、検知範囲A1および検知範囲B1の車両の左右両側で接近物を検知したこととなり、運転席側ドアと、助手席側ドアの車両2の両側のドアに接近する物体があると判定する(ステップS508)。
<2-2. Approaching object detection processing>
FIG. 5 is a flowchart showing the approaching object detection process. The processing described in FIG. 5 is performed by the control unit 202 of the approaching object detection unit 20. When the approaching object detection mode of the vehicle 2 is ON (step S501 is Yes), when an approaching object to the vehicle 2 is detected in the approaching object detection range (hereinafter referred to as “detection range”) A1 (step S502). Is Yes), it is determined whether or not an approaching object to the vehicle 2 is detected within the detection range B1 (step S506). When an approaching object is detected in the detection range B1 (Yes in step S506), the approaching object is detected on both the left and right sides of the vehicle in the detection range A1 and the detection range B1, and the driver side door and the passenger seat side It is determined that there is an object approaching the doors on both sides of the door vehicle 2 (step S508).

このような接近物の状況を図6に示す。図6では検知範囲A1にバイク61aが検知された時点から所定時間経過後のバイク61bが検知されるまでの車両2へのバイク61の接近状態に基づいて、バイク61が車両2への接近物であると判定する。その結果、助手席側ドア(助手席ドアL2、および、助手席側後部ドアL1)に接近する物体があると判定する。   The situation of such an approaching object is shown in FIG. In FIG. 6, the motorcycle 61 approaches the vehicle 2 based on the approaching state of the motorcycle 61 to the vehicle 2 from the time when the motorcycle 61a is detected in the detection range A1 until the motorcycle 61b is detected after a predetermined time has elapsed. It is determined that As a result, it is determined that there is an object approaching the passenger seat side door (passenger seat door L2 and passenger seat side rear door L1).

また、検知範囲B1では車両62aが検知された時点から所定時間経過後の車両62bが検知されるまでの車両2への車両62の接近状態に基づいて、車両62が車両2への接近物であると判定する。その結果、運転席側ドア(運転席ドアR2、および、運転席側後部ドアR1)に接近する物体があると判定する。   In the detection range B1, the vehicle 62 is an approaching object to the vehicle 2 based on the approaching state of the vehicle 62 to the vehicle 2 from the time when the vehicle 62a is detected until the vehicle 62b after a predetermined time has elapsed. Judge that there is. As a result, it is determined that there is an object approaching the driver seat side door (driver seat door R2 and driver seat side rear door R1).

図5のステップS506に戻って、検知範囲B1内に車両2への接近物が検知されなかった場合(ステップS506がNo)は、検知範囲B2内に車両2への接近物が検知されたか否かを判定し(ステップS507)、検知範囲B2内に接近物が検知された場合(ステップS507がYes)は、車両2の左右両側のドアに接近する物体があると判定する(ステップS508)。また、検知範囲B2内に車両2への接近物が検知されなかった場合(ステップS507がNo)は、車両2の左ドアである助手席側ドアに接近する物体があると判定する(ステップS509)。   Returning to step S506 of FIG. 5, if no approaching object to the vehicle 2 is detected in the detection range B1 (No in step S506), whether an approaching object to the vehicle 2 is detected in the detection range B2 or not. If an approaching object is detected in the detection range B2 (Yes in Step S507), it is determined that there is an object approaching the doors on both the left and right sides of the vehicle 2 (Step S508). If no approaching object to the vehicle 2 is detected in the detection range B2 (No in step S507), it is determined that there is an object approaching the passenger seat side door that is the left door of the vehicle 2 (step S509). ).

次に、ステップS502に戻って、検知範囲A1内に車両2への接近物が検知されなかった場合(ステップS502がNo)は、検知範囲A2内に車両2への接近物が検知されたか否かを判定する(ステップS503)。   Next, returning to step S502, if no approaching object to the vehicle 2 is detected in the detection range A1 (No in step S502), whether or not an approaching object to the vehicle 2 is detected in the detection range A2. Is determined (step S503).

検知範囲A2内に車両2への接近物が検知された場合(ステップS503がYes)は、検知範囲B1内に車両2への接近物が検知されたか否かを判断し(ステップS506)、検知範囲B1内に接近物が検知された場合(ステップS506がYes)は、検知範囲A1および検知範囲B1の車両の左右両側で接近物を検知したこととなり、運転席側ドアと、助手席側ドアの車両2の両側のドアに接近する物体があると判定する(ステップS508)。   When an approaching object to the vehicle 2 is detected in the detection range A2 (step S503: Yes), it is determined whether an approaching object to the vehicle 2 is detected in the detection range B1 (step S506). If an approaching object is detected in the range B1 (Yes in step S506), the approaching object is detected on both the left and right sides of the vehicle in the detection range A1 and the detection range B1, and the driver side door and the passenger side door are detected. It is determined that there is an object approaching the doors on both sides of the vehicle 2 (step S508).

また、検知範囲B1内に車両2への接近物が検知されなかった場合(ステップS506がNo)は、検知範囲B2内に車両2への接近物が検知されたか否かを判定し(ステップS507)、検知範囲B2内に接近物が検知された場合(ステップS507がYes)は、車両2の左右両側のドアに接近する物体があると判定する(ステップS508)。また、検知範囲B2内に車両2への接近物が検知されない場合(ステップS507がNo)は、車両2の左ドアである助手席側ドアに接近する物体があると判定する(ステップS509)。   If no approaching object to the vehicle 2 is detected in the detection range B1 (No in step S506), it is determined whether an approaching object to the vehicle 2 is detected in the detection range B2 (step S507). ), When an approaching object is detected within the detection range B2 (step S507 is Yes), it is determined that there is an object approaching the doors on both the left and right sides of the vehicle 2 (step S508). If no approaching object to the vehicle 2 is detected in the detection range B2 (No in step S507), it is determined that there is an object approaching the passenger seat side door that is the left door of the vehicle 2 (step S509).

ステップS503に戻って、検知範囲A2内に車両2への接近物が検知されなかった場合(ステップS503がNo)は、検知範囲B1内に車両2への接近物が検知されたか否かを判定する(ステップS504)。検知範囲B1内に車両2への接近物が検知された場合(ステップS504がYes)、車両2の右ドアである運転席側ドアに接近する物体があると判定する(ステップS510)。   Returning to step S503, if no approaching object to the vehicle 2 is detected in the detection range A2 (No in step S503), it is determined whether an approaching object to the vehicle 2 is detected in the detection range B1. (Step S504). When an approaching object to the vehicle 2 is detected in the detection range B1 (Yes in step S504), it is determined that there is an object approaching the driver seat side door that is the right door of the vehicle 2 (step S510).

ステップS504で検知範囲B1内に車両2への接近物が検知されない場合(ステップS504がNo)は、検知範囲B2内に車両2への接近物が検知されたか否かを判定する(ステップS505)。検知範囲B2内に車両2への接近物が検知された場合(ステップS505がYes)、車両2の右ドアである運転席側ドアに接近する物体があると判定する(ステップS510)。検知範囲B2内に車両2への接近物が検知されない場合(ステップS505がNo)は、処理を終了する。   If no approaching object to the vehicle 2 is detected in the detection range B1 in step S504 (No in step S504), it is determined whether an approaching object to the vehicle 2 is detected in the detection range B2 (step S505). . When an approaching object to the vehicle 2 is detected in the detection range B2 (Yes in step S505), it is determined that there is an object approaching the driver seat side door that is the right door of the vehicle 2 (step S510). If no approaching object to the vehicle 2 is detected in the detection range B2 (No in step S505), the process ends.

これにより、接近物検知範囲で検知された接近物の情報に基づいて、乗員が車両2から降車する前に警告を行うことができ、ドアを開放して接近物に接触したり衝突する危険を回避できる。   Thereby, based on the information of the approaching object detected in the approaching object detection range, a warning can be given before the occupant gets off the vehicle 2, and there is a risk that the door may be opened to contact or collide with the approaching object. Can be avoided.

<2−3.警告処理>
図7は、接近物を検知した場合の警告処理を示したフローチャートである。なお、図7で述べる処理は接近物検知部20の制御部202により行われる。車両2の接近物検知モードがON状態の場合(ステップS701がYes)、車両2の接近物検知範囲において、接近物が検知されたか否かを判定する(ステップS702)。なお、接近物検知モードがON状態ではない場合(ステップS701がNo)は、処理を終了する。
<2-3. Warning processing>
FIG. 7 is a flowchart showing warning processing when an approaching object is detected. The processing described in FIG. 7 is performed by the control unit 202 of the approaching object detection unit 20. When the approaching object detection mode of the vehicle 2 is in the ON state (step S701 is Yes), it is determined whether or not an approaching object is detected in the approaching object detection range of the vehicle 2 (step S702). If the approaching object detection mode is not in the ON state (No in step S701), the process ends.

ステップS702に戻って、接近物を検知した場合(ステップS702がYes)は、車両2の接近物が検知された側のドアのドアロックがON状態か否かを判定する(ステップS703)。なお、接近物が検知されていない場合(ステップS702がNo)は、処理を終了する。   Returning to step S702, when an approaching object is detected (Yes in step S702), it is determined whether or not the door lock of the door on the side where the approaching object of the vehicle 2 is detected is ON (step S703). If no approaching object is detected (No in step S702), the process ends.

ステップ703に戻って、車両2の接近物が検知された側のドアのドアロックがON状態の場合(ステップS703がYes)、接近物は接近しているが、ドアロックがONの状態であり降車できない状態にあることを乗員に報知するために、車両2のドア部、および、ピラー部に設けられた警報装置30のLEDを緑色に点灯させる(ステップS706)。これにより、車両2への接近物存在とドアロックがON状態のため乗員が降車できない状態であることを報知できる。   Returning to Step 703, when the door lock of the door on which the approaching object of the vehicle 2 is detected is ON (Step S703: Yes), the approaching object is approaching, but the door lock is ON. In order to notify the occupant that it is not possible to get off, the LED of the alarm device 30 provided on the door portion and the pillar portion of the vehicle 2 is lit in green (step S706). Thereby, it can be notified that the occupant cannot get off because the approaching object to the vehicle 2 and the door lock are ON.

車両2の接近物が検知された側のドアロックがON状態でない場合(ステップS703がNo)は、接近物の距離が車両2から所定距離範囲内、および、接近物が所定速度以上の場合(ステップS704がYes)は、危険度合いが高いと判定される。このため、乗員に警告を報知するために車両2のドア部、および、ピラー部に設けられた警報装置30のLEDを赤色に点灯させる(ステップS705)。これにより、車両2への接近物の存在により乗員が降車すると車両2のドアと接近物が接触または衝突する危険があることを乗員に報知できる。   When the door lock on the side where the approaching object of the vehicle 2 is detected is not in the ON state (No in step S703), the distance of the approaching object is within a predetermined distance range from the vehicle 2 and the approaching object is equal to or higher than the predetermined speed ( If step S704 is Yes), it is determined that the degree of danger is high. For this reason, in order to alert | report a warning to a passenger | crew, LED of the alarm device 30 provided in the door part of the vehicle 2 and the pillar part is lighted red (step S705). Thereby, when an occupant gets off due to the presence of an approaching object to the vehicle 2, it is possible to notify the occupant that there is a risk that the approaching object contacts or collides with the door of the vehicle 2.

ステップS704に戻って、接近物の距離が車両2から所定距離範囲内、および、接近物が所定速度以上ではない場合(ステップS704がNo)は、危険度合いが低いと判定される。このため、乗員に注意を促すために車両2のドア部、および、ピラー部に設けられた警報装置30のLEDを黄色に点灯させる(ステップS707)。これにより、車両2から接近物が所定の距離(たとえば15m以上)離れており、かつ、接近物の速度が所定の速度以下(たとえば10km/h以下)である場合において、接近物が検知されていた場合でも乗員の判断で安全を確認した後に車両2から降車できる。このように接近物の状況に応じて乗員が降車をスムーズに行うことができる。   Returning to step S704, when the distance of the approaching object is within the predetermined distance range from the vehicle 2 and the approaching object is not equal to or higher than the predetermined speed (step S704: No), it is determined that the degree of danger is low. For this reason, in order to alert a passenger | crew, LED of the alarm device 30 provided in the door part of the vehicle 2 and the pillar part is lighted in yellow (step S707). Thereby, when the approaching object is separated from the vehicle 2 by a predetermined distance (for example, 15 m or more) and the speed of the approaching object is equal to or less than the predetermined speed (for example, 10 km / h or less), the approaching object is detected. Even in the case of the vehicle, it is possible to get off the vehicle 2 after confirming the safety by the passenger's judgment. In this way, the occupant can get off smoothly according to the situation of the approaching object.

図8はドア部およびピラー部に設けられた警報装置の具体例を示した図である。車両2の運転席ドアR2には、ドアR2を開閉する際のドアノブ901が設けられている。そして、ドアノブ付近にはドアR2のロックON、および、ロックOFFを行うドアロック902が設けられている。そしてドアノブ901の付近に、車両2への接近物が検知された際に乗員に報知する警報装置30aが設けられている。これにより、乗員が車両2から降車するためにドアノブを用いてドア開閉操作を行う前に警報装置30aにより接近物の検知を乗員に報知できる。   FIG. 8 is a view showing a specific example of an alarm device provided in the door portion and the pillar portion. The driver's seat door R2 of the vehicle 2 is provided with a door knob 901 for opening and closing the door R2. In the vicinity of the door knob, a door lock 902 is provided to lock the door R2 on and off. An alarm device 30a is provided in the vicinity of the door knob 901 to notify the occupant when an object approaching the vehicle 2 is detected. Thereby, the detection of the approaching object can be notified to the occupant by the alarm device 30a before the occupant gets out of the vehicle 2 and performs the door opening / closing operation using the door knob.

また、警報装置30は車両2のピラー部に設けてもよく、車両2のAピラーに警報装置30bを設けたり、車両2のBピラーに警報装置30cを設けることで車両2の乗員が車両2から降車するためのドア開閉操作を行う前に乗員へ接近物の検知を報知できる。   Further, the alarm device 30 may be provided in the pillar portion of the vehicle 2, and the occupant of the vehicle 2 can provide the vehicle 2 by providing the alarm device 30 b in the A pillar of the vehicle 2 or providing the alarm device 30 c in the B pillar of the vehicle 2. It is possible to notify the occupant of the detection of an approaching object before performing a door opening / closing operation for getting off the vehicle.

なお、このような警報装置30a、30b、30cは組み合わせて設けてもよいし、別々に設けてもよい。さらに、車両2への接近物の検知はこのような警報装置30のLEDによる報知とあわせて、ナビゲーション装置50の表示部を用いた報知を行ってもよいし、音声出力部502を用いて音声による接近物検知の報知を行ってもよく、警告部30のLEDの色の変化に合わせてナビゲーション装置に表示内容や音声出力のパターンを変更してもよい。これにより、乗員に対して接近物検知の報知を詳細に、かつ、確実に行うことができる。   Such alarm devices 30a, 30b, and 30c may be provided in combination, or may be provided separately. Furthermore, detection of an approaching object to the vehicle 2 may be performed using the display unit of the navigation device 50 in combination with the notification by the LED of the alarm device 30 or by using the audio output unit 502. Notification of approaching object detection may be performed, and the display content and sound output pattern may be changed on the navigation device in accordance with the change in the color of the LED of the warning unit 30. Thereby, the notification of the approaching object detection to the occupant can be performed in detail and reliably.

また、警報装置30は音声のみの出力装置であってもよい。   Further, the alarm device 30 may be an audio-only output device.

また、上記実施の形態では車両2のドアは開閉式のドアを例に述べたが、車両2のドアはスライド式のドアであってもよく、車両2への接近物検知を警報装置30により乗員に報知することでスライド式のドアを開けて乗員が降車した後に接近物との接触や衝突することを回避できる。   In the above embodiment, the door of the vehicle 2 is described as an example of an openable door. However, the door of the vehicle 2 may be a sliding door, and an alarm device 30 detects an approaching object to the vehicle 2. By notifying the occupant, it is possible to avoid contact or collision with an approaching object after the slidable door is opened and the occupant gets off.

1・・・・・接近物検知システム
2・・・・・車両
10・・・・撮影部
20・・・・接近物検知部
30・・・・警報装置
40・・・・レーダ装置
50・・・・ナビゲーション装置
DESCRIPTION OF SYMBOLS 1 ... Approaching object detection system 2 ... Vehicle 10 ... Imaging part 20 ... Approaching object detection part 30 ... Alarm device 40 ... Radar device 50 ... ..Navigation device

Claims (6)

車両に搭載され、前記車両に接近する接近物を検知する接近物検知装置であって、
前記車両には、前記車両の複数のドアのそれぞれに対応して、ユーザに警告を報知する警報装置が設けられ、
前記車両の停止状態で、前記車両に搭載されたカメラで得られた撮影画像に基づいて、前記車両に接近する接近物を検知する検知手段と、
前記撮影画像に基づいて、前記車両の複数のドアのうち前記接近物が接近している前記車両のドアを特定する特定手段と、
前記接近物を検知したことに応答して、前記特定手段に特定された前記ドアに対応する前記警報装置を作動させる装置作動手段と、
を備えることを特徴とする接近物検知装置。
An approaching object detection device that is mounted on a vehicle and detects an approaching object approaching the vehicle,
The vehicle is provided with an alarm device that notifies a user of a warning corresponding to each of the plurality of doors of the vehicle,
Detecting means for detecting an approaching object approaching the vehicle based on a captured image obtained by a camera mounted on the vehicle in a stopped state of the vehicle;
Based on the captured image, a specifying unit that specifies a door of the vehicle that the approaching object is approaching among a plurality of doors of the vehicle;
In response to detecting the approaching object, device operating means for operating the alarm device corresponding to the door specified by the specifying means;
An approaching object detection device comprising:
請求項1に記載の接近物検知装置において、
前記カメラは、前記車両の左右双方の側方に配置され、
前記特定手段は、前記接近物の像を含む画像を取得したカメラの左右位置に基づいて、前記接近物が接近している前記車両のドアを特定すること、
を特徴とする接近物検知装置。
In the approaching object detection device according to claim 1,
The cameras are arranged on both the left and right sides of the vehicle,
The specifying means specifies the door of the vehicle that the approaching object is approaching based on the left and right positions of the camera that acquired the image including the image of the approaching object;
An approaching object detection device characterized by.
請求項2に記載の接近物検知装置において、
前記カメラは、自装置が配置される側の前記車両の側方領域における前方から後方までを撮影可能であり、
前記検知手段は、前記車両の前方および後方の少なくともいずれか一方から接近する物体を検知すること、
を特徴とする接近物検知装置。
In the approaching object detection device according to claim 2,
The camera is capable of photographing from the front to the rear in the side region of the vehicle on the side where the device is disposed,
The detecting means detects an object approaching from at least one of the front and rear of the vehicle;
An approaching object detection device characterized by.
請求項1ないし3のいずれかに記載の接近物検知装置において、
前記接近物の位置及び速度を取得する取得手段と、
前記接近物の位置及び速度に基づいて、危険度合を判定する判定手段と、
をさらに備え、
前記装置作動手段は、前記危険度合に応じて、前記警報装置を異なる態様で作動させること、
を特徴とする接近物検知装置。
In the approaching object detection device according to any one of claims 1 to 3,
Obtaining means for obtaining the position and speed of the approaching object;
Determination means for determining the degree of danger based on the position and speed of the approaching object;
Further comprising
The device actuating means actuates the alarm device in a different manner according to the degree of risk;
An approaching object detection device characterized by.
車両に搭載される接近物検知システムであって、
請求項1ないし4のいずれかに記載の接近物検知装置と、
前記車両の複数のドアのそれぞれに対応して、ユーザに警告を報知する警報装置と、
を備えることを特徴とする接近物検知システム。
An approaching object detection system mounted on a vehicle,
An approaching object detection device according to any one of claims 1 to 4,
In response to each of the plurality of doors of the vehicle, an alarm device that notifies the user of a warning,
An approaching object detection system comprising:
車両に搭載され、前記車両に接近する接近物を検知する接近物検知方法であって、
前記車両には、前記車両の複数のドアのそれぞれに対応して、ユーザに警告を報知する警報装置が設けられ、
前記車両の停止状態で、前記車両に搭載されたカメラで得られた撮影画像に基づいて、前記車両に接近する接近物を検知する検知工程と、
前記撮影画像に基づいて、前記車両の複数のドアのうち前記接近物が接近している前記車両のドアを特定する特定工程と、
前記接近物を検知したことに応答して、前記特定手段に特定された前記ドアに対応する前記警報装置を作動させる装置作動工程と、
を備えることを特徴とする接近物検知方法。
An approaching object detection method for detecting an approaching object mounted on a vehicle and approaching the vehicle,
The vehicle is provided with an alarm device that notifies a user of a warning corresponding to each of the plurality of doors of the vehicle,
A detection step of detecting an approaching object approaching the vehicle based on a captured image obtained by a camera mounted on the vehicle in a stopped state of the vehicle;
Based on the captured image, a specifying step for specifying the door of the vehicle that the approaching object is approaching among the plurality of doors of the vehicle;
In response to detecting the approaching object, an apparatus operating step of operating the alarm device corresponding to the door specified by the specifying means;
An approaching object detection method comprising:
JP2009270122A 2009-11-27 2009-11-27 Device, system, and method of detecting approaching object Withdrawn JP2011111070A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009270122A JP2011111070A (en) 2009-11-27 2009-11-27 Device, system, and method of detecting approaching object

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009270122A JP2011111070A (en) 2009-11-27 2009-11-27 Device, system, and method of detecting approaching object

Publications (1)

Publication Number Publication Date
JP2011111070A true JP2011111070A (en) 2011-06-09

Family

ID=44233727

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009270122A Withdrawn JP2011111070A (en) 2009-11-27 2009-11-27 Device, system, and method of detecting approaching object

Country Status (1)

Country Link
JP (1) JP2011111070A (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013180450A1 (en) * 2012-06-01 2013-12-05 영남대학교 산학협력단 System for detecting safe disembarking of passengers by using a camera and a method thereof
CN105818743A (en) * 2015-01-05 2016-08-03 上海纵目科技有限公司 Anticollision method and system used when vehicle doors are opened
CN107650640A (en) * 2017-09-20 2018-02-02 上海工程技术大学 The method for early warning and early warning system that a kind of automobile parking based on image procossing opens the door
KR20190089536A (en) * 2018-01-23 2019-07-31 현대자동차주식회사 Apparatus and method for passenger safety using the camera door
US11040656B2 (en) 2018-10-09 2021-06-22 Toyota Jidosha Kabushiki Kaisha Alert apparatus for vehicle
KR20220093954A (en) * 2020-12-28 2022-07-05 (주)디 넷 Apparatus for assisting exit of vehicle
KR20220118702A (en) * 2021-02-19 2022-08-26 주식회사 마노 Safety assistance system for getting on and off vehicle

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013180450A1 (en) * 2012-06-01 2013-12-05 영남대학교 산학협력단 System for detecting safe disembarking of passengers by using a camera and a method thereof
KR101410182B1 (en) 2012-06-01 2014-06-20 영남대학교 산학협력단 Sensing system for safety alight of passenger using camera and method thereof
CN105818743A (en) * 2015-01-05 2016-08-03 上海纵目科技有限公司 Anticollision method and system used when vehicle doors are opened
CN107650640A (en) * 2017-09-20 2018-02-02 上海工程技术大学 The method for early warning and early warning system that a kind of automobile parking based on image procossing opens the door
KR20190089536A (en) * 2018-01-23 2019-07-31 현대자동차주식회사 Apparatus and method for passenger safety using the camera door
KR102471006B1 (en) * 2018-01-23 2022-11-25 현대자동차주식회사 Apparatus and method for passenger safety using the camera door
US11040656B2 (en) 2018-10-09 2021-06-22 Toyota Jidosha Kabushiki Kaisha Alert apparatus for vehicle
US11731556B2 (en) 2018-10-09 2023-08-22 Toyota Jidosha Kabushiki Kaisha Alert apparatus for vehicle
KR20220093954A (en) * 2020-12-28 2022-07-05 (주)디 넷 Apparatus for assisting exit of vehicle
KR102533680B1 (en) * 2020-12-28 2023-05-16 (주)디 넷 Apparatus for assisting exit of vehicle
KR20220118702A (en) * 2021-02-19 2022-08-26 주식회사 마노 Safety assistance system for getting on and off vehicle
KR102493296B1 (en) 2021-02-19 2023-01-31 주식회사 마노 Safety assistance system for getting on and off vehicle

Similar Documents

Publication Publication Date Title
JP2011111070A (en) Device, system, and method of detecting approaching object
JP4720386B2 (en) Driving assistance device
US11008783B2 (en) Vehicle periphery monitoring apparatus
JP5327149B2 (en) In-vehicle communication device
CN105620354A (en) System and method for notifying a driver of possible rear seat passengers or objects
CN107298051A (en) Improve the system and method for context aware when operating motor vehicles
JP2007295043A (en) Vehicle periphery monitoring apparatus
US10354525B2 (en) Alerting system and method thereof
JP2011113366A (en) Device, system and method for detecting approaching object
JP2012038138A (en) Display device for vehicle
JPH08124069A (en) Vehicle accident information transmitter
CN103481821B (en) For confirming to give the system and method for the potential unexpected order of vehicle
JP6385710B2 (en) Signal control system
JP4984521B2 (en) In-vehicle camera control device
CN218287576U (en) Door opening early warning system of vehicle and vehicle with same
JP2020093567A (en) Disembarkation support apparatus
JP2008052341A (en) Emergency vehicle approach warning system
JP2017102840A (en) Vehicle monitoring device
JP4211562B2 (en) Vehicle periphery monitoring device
JP2005327177A (en) System and device for supporting inter-vehicle collision prevention
JP6344105B2 (en) Vehicle warning system
JP2008046862A (en) Vehicle alarm device and alarm sound output method
JP5550949B2 (en) Vehicle locking device
JP2011111069A (en) Device, system, and method of detecting approaching object
JP2019067242A (en) Driving assistance device

Legal Events

Date Code Title Description
A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20130205