JP2016085712A - Travel support device, travel support program, and travel support method - Google Patents

Travel support device, travel support program, and travel support method Download PDF

Info

Publication number
JP2016085712A
JP2016085712A JP2014220153A JP2014220153A JP2016085712A JP 2016085712 A JP2016085712 A JP 2016085712A JP 2014220153 A JP2014220153 A JP 2014220153A JP 2014220153 A JP2014220153 A JP 2014220153A JP 2016085712 A JP2016085712 A JP 2016085712A
Authority
JP
Japan
Prior art keywords
imaging data
unit
driving support
vehicle
host vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014220153A
Other languages
Japanese (ja)
Other versions
JP6367081B2 (en
Inventor
田部田 隆行
Takayuki Tabeta
隆行 田部田
森 大志
Hiroshi Mori
大志 森
浩輔 三谷
Kosuke Mitani
浩輔 三谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alpine Electronics Inc
Original Assignee
Alpine Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alpine Electronics Inc filed Critical Alpine Electronics Inc
Priority to JP2014220153A priority Critical patent/JP6367081B2/en
Publication of JP2016085712A publication Critical patent/JP2016085712A/en
Application granted granted Critical
Publication of JP6367081B2 publication Critical patent/JP6367081B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a travel support device that appropriately controls a timing for switching imaging data in which the front side and rear side of a vehicle is photographed.SOLUTION: An on-vehicle device 10 includes an input part 100, processing unit 110, navigation part 120, in-vehicle bus I/F 140, and display part 150. The processing unit 110 includes a selection part that receives input of imaging data D1 from a front camera installed on the front side of a vehicle and imaging data D2 from a rear camera installed on the rear side of the vehicle and selects either one of the pieces of imaging data on the basis of a selection signal from the control part 180. The control part 180 determines which image data to select on the basis of the number lanes on the road on which the vehicle is traveling.SELECTED DRAWING: Figure 2

Description

本発明は、撮像カメラによって撮像された撮像データを用いた走行支援装置に関し、特に、車線逸脱の有無の判定および後方の障害物の有無の判定等を行う機能を備えた走行支援に関する。   The present invention relates to a driving support apparatus using image data captured by an imaging camera, and more particularly to driving support having functions for determining whether or not there is a lane departure and whether or not there is an obstacle behind the vehicle.

車両に撮像カメラを搭載し、撮像された画像を用いて車両周辺の障害物や道路環境を監視する走行支援システムが利用されている。このようなシステムの中には、例えば、車両の前方を撮像するフロントカメラを使用した前方衝突警告(FCW:Forward collision warning)、信号検出機能、また、車両の後方を撮像するリアカメラを使用した車、自転車、歩行者等の警告(CTA:cross traffic alert)、後側方(死角)警告(BSW:Blind Spot Information Warning)などがある。また、フロントカメラおよびリアカメラのいずれの撮像データにより実現可能な車線逸脱警告(LDW:Lane Departure Warning)などがある。   2. Description of the Related Art A driving support system is used in which an imaging camera is mounted on a vehicle and an obstacle and road environment around the vehicle are monitored using the captured image. In such a system, for example, a forward collision warning (FCW) using a front camera that images the front of the vehicle, a signal detection function, and a rear camera that images the rear of the vehicle are used. There are warnings for cars, bicycles, pedestrians, etc. (CTA: cross traffic alert), rear side (blind spot information) warnings (BSW: Blind Spot Information Warning), and the like. In addition, there is a lane departure warning (LDW) that can be realized by imaging data of either the front camera or the rear camera.

撮像データを元に様々な画像処理を行うことが可能であるが、その反面、画像処理装置には大きな負担がかかる。特許文献1では、幹線道路のような車両の往来が多い交差点では、撮像データを高速で処理し、道路幅員が狭く車両の往来が少ない交差点では画像処理速度を落とし、画像処理装置の余った処理能力を他の処理に振り分ける技術が開示されている。特許文献2は、前方を撮像する撮像データから得られる信号機までの距離とナビゲーション装置から得られる信号機までの距離とを比較して信号機の有無を判定し、この判定結果に基づき側方カメラのオン/オフおよびその画像の表示/非表示の切替る技術を開示している。   Various image processing can be performed based on the imaging data, but on the other hand, the image processing apparatus is burdened heavily. In Patent Document 1, imaging data is processed at high speed at intersections such as main roads where traffic of vehicles is high, and image processing speed is reduced at intersections where road width is narrow and traffic of vehicles is low. A technique for distributing capabilities to other processes is disclosed. Patent Document 2 compares the distance to the traffic light obtained from the imaging data for imaging the front and the distance to the traffic light obtained from the navigation device to determine the presence or absence of the traffic signal, and based on the determination result, the side camera is turned on. Disclosed is a technique for switching between / off and display / non-display of the image.

特開2006−185045号公報JP 2006-185045 A 特開2008−132894号公報JP 2008-132894 A

上記したように、フロントカメラやリアカメラからの撮像データを利用して走行支援を行う場合、撮像データの画像処理が必要となる。図1は、リアカメラおよびフロントカメラからの撮像データを画像処理する従来の処理ユニットの構成例を示している。図1(A)に示す処理ユニット1Aは、画像入力を2系統有し、リアカメラRCで撮像データを入力するビデオデコーダ2Aと、フロントカメラFCで撮像された撮像データを入力するビデオデコーダ2Bと、2つのビデオデコーダ2A、2Bで復号された画像データを処理または認識する画像認識部3Aと、画像処理された画像データを符号化するビデオエンコーダ4と、ビデオアンプ5等を備えている。この場合、画像認識部3Aは、リアカメラRCとフロントカメラFCからの画像データを処理するため、処理能力の高いシステムLSIやDSP(Digital Signal Processor)を使用する必要がある。   As described above, when running support is performed using imaging data from the front camera and rear camera, image processing of imaging data is required. FIG. 1 shows a configuration example of a conventional processing unit that performs image processing on imaging data from a rear camera and a front camera. A processing unit 1A shown in FIG. 1A has two image inputs, a video decoder 2A that inputs imaging data by the rear camera RC, and a video decoder 2B that inputs imaging data captured by the front camera FC. An image recognition unit 3A that processes or recognizes image data decoded by the two video decoders 2A and 2B, a video encoder 4 that encodes the image data that has undergone image processing, a video amplifier 5, and the like are provided. In this case, since the image recognition unit 3A processes image data from the rear camera RC and the front camera FC, it is necessary to use a system LSI or DSP (Digital Signal Processor) having a high processing capability.

一方、図1(B)は、画像入力が1系統の処理ユニットを示している。処理ユニット1Bは、リアカメラRCからの撮像データとフロントカメラFCからの撮像データを入力し、そのいずれか一方を出力する選択部6と、選択部6から出力された撮像データを入力するビデオデコーダ2と、ビデオデコーダ2で復号された画像データを処理する画像認識部3Bと、画像処理された画像データを符号化するビデオエンコーダ4と、ビデオアンプ5等を備えている。処理ユニット1Bは、入力系統が1系統しかないため、撮像データを選択する選択部6が必要となるが、画像認識部3Bは、画像認識部3Aのような処理能力を必要としないため、より安価なシステムLSIまたはDSPを使用することができる。   On the other hand, FIG. 1B shows a processing unit having one system of image input. The processing unit 1B inputs imaging data from the rear camera RC and imaging data from the front camera FC, outputs either one of them, and a video decoder that inputs the imaging data output from the selection unit 6 2, an image recognition unit 3B that processes the image data decoded by the video decoder 2, a video encoder 4 that encodes the image processed image data, a video amplifier 5, and the like. Since the processing unit 1B has only one input system, the selection unit 6 for selecting imaging data is necessary. However, the image recognition unit 3B does not require processing ability like the image recognition unit 3A. An inexpensive system LSI or DSP can be used.

しかしながら、リアカメラRCからの撮像データまたはフロントカメラFCからの撮像データの切り替えを選択部6によって行う必要があり、その切り替えタイミングを適切に制御しなければならず、切り替えが不適切であると、不必要な画像処理の実行によりシステムLSI等への処理負荷が高くなってしまい、残りのリソースを他の処理に適切に割り当てることができない等の不具合がある。さらに、撮像データは、運転者にとっての走行支援となるように適切に提供されなければならない。   However, it is necessary to switch the imaging data from the rear camera RC or the imaging data from the front camera FC by the selection unit 6, the switching timing must be controlled appropriately, and switching is inappropriate. Unnecessary execution of image processing increases the processing load on the system LSI and the like, and the remaining resources cannot be appropriately allocated to other processing. Furthermore, the imaging data must be provided appropriately so as to provide driving support for the driver.

本発明は、このような従来の課題を解決するものであり、自車の前方および後方を撮像した撮像データの切り替えのタイミングを適切に制御することができる走行支援装置、走行支援プログラムおよび走行支援方法を提供することを目的とする。   The present invention solves such a conventional problem, and a driving support device, a driving support program, and a driving support that can appropriately control the timing of switching of imaging data obtained by imaging the front and rear of the host vehicle. It aims to provide a method.

本発明に係る走行支援装置は、自車の前方を撮像した第1の撮像データまたは自車の後方を撮像した第2の撮像データを選択する選択手段と、自車の走行状況に関する走行状況情報を取得する取得手段と、前記選択手段により選択された第1の撮像データまたは第2の撮像データに基づき走行の安全性を判定する判定手段と、前記走行状況情報に基づき前記選択手段の選択を制御する選択制御手段とを有する。   The driving support device according to the present invention includes selection means for selecting first imaging data that images the front of the host vehicle or second imaging data that images the rear of the host vehicle, and driving status information related to the driving status of the host vehicle. Acquisition means for acquiring the vehicle, determination means for determining the safety of traveling based on the first imaging data or the second imaging data selected by the selection means, and selection of the selection means based on the traveling situation information. Selection control means for controlling.

好ましくは前記走行状況情報は、自車が走行している道路の車線数を含み、前記選択制御手段は、車線数が1車線のとき第1の撮像データを選択させ、2車線以上のとき第2の撮像データを選択させる。好ましくは前記走行状況情報は、自車が走行している道路属性を含み、前記選択制御手段は、車線数が1車線であっても道路の直線区間が一定距離以上である場合には、第2の撮像データを選択させる。好ましくは前記走行状況情報は、自車が走行している道路属性を含み、前記選択制御手段は、道路が追い越し区間であるとき第2の撮像データを選択させ、道路が追い越しのない区間であるとき第1の撮像データを選択させる。好ましくは前記追い越しのない区間は、曲率が一定以上のカーブ区間である。好ましくは前記追い越しのない区間は、幅員が一定値以下の1車線の区間である。好ましくは走行支援装置はさらに、前記判定手段の判定結果に基づき警告を出力する警告出力手段を含む。好ましくは走行支援装置はさらに、前記選択手段により選択された第1の撮像データまたは第2の撮像データを表示する表示手段を含む。好ましくは前記判定手段は、前記選択手段により選択された第1または第2の撮像データを解析する解析手段と、前記解析手段の解析結果に基づき車線逸脱の有無を判定する車線逸脱判定手段と、前記解析結果に基づき自車の後方の障害物の有無を判定する障害物判定手段とを含む。好ましくは前記選択手段によって第1の撮像データが選択されているとき、前記車線逸脱判定手段が実行され、前記選択手段によって第2の撮像データが選択されているとき、前記車線逸脱判定手段および前記障害物判定手段が実行される。好ましくは前記車線逸脱判定手段は、撮像データから検出された白線情報に基づき車線逸脱を判定する。好ましくは前記選択制御手段は、第2の撮像データが選択されている間に、前記車線逸脱判定手段により車線逸脱がないと判定され、かつ障害物判定手段により障害物がないと判定されたとき、第1の撮像データへ選択を切替えさせる。好ましくは前記選択制御手段は、前記車線逸脱判定手段により車線逸脱が有りと判定されたとき、第2の撮像データへ選択を切替えさせる。好ましくは前記走行状況情報は、自車のウィンカー情報を含み、前記選択制御手段は、前記ウィンカーが出されたとき、第2の撮像データへ選択を切替えさせる。好ましくは前記走行状況情報は、自車の速度情報を含み、前記選択制御手段は、自車の速度が一定速度未満である場合には、車線数に関わらず第2の撮像データを選択させる。好ましくは前記走行状況情報は、自車の速度情報を含み、前記選択制御手段は、自車の速度が一定速度未満である場合には、車線数に関わらず第1の撮像データを選択させる。好ましくは走行支援装置はさらに、ユーザーからの入力を受け取る入力手段と、前記入力手段に基づいて前記選択手段の動作モードを設定する設定手段を含み、前記選択制御手段は、前記動作モードに基づき第1の撮像データまたは第2の撮像データを選択させる。   Preferably, the travel status information includes the number of lanes of the road on which the host vehicle is traveling, and the selection control means selects the first imaging data when the number of lanes is one lane, and the number of lanes when the number of lanes is two or more. 2 image data is selected. Preferably, the travel status information includes a road attribute on which the host vehicle is traveling, and the selection control means determines that the first section is equal to or more than a certain distance even if the number of lanes is one lane. 2 image data is selected. Preferably, the traveling status information includes a road attribute on which the host vehicle is traveling, and the selection control means is a section in which the road is not overtaken by causing the second imaging data to be selected when the road is an overtaking section. At this time, the first imaging data is selected. Preferably, the section without overtaking is a curve section having a curvature of a certain value or more. Preferably, the section without overtaking is a section of one lane whose width is a certain value or less. Preferably, the driving support device further includes warning output means for outputting a warning based on the determination result of the determination means. Preferably, the driving support apparatus further includes display means for displaying the first imaging data or the second imaging data selected by the selection means. Preferably, the determination unit includes an analysis unit that analyzes the first or second imaging data selected by the selection unit, a lane departure determination unit that determines presence or absence of a lane departure based on an analysis result of the analysis unit, Obstacle determination means for determining the presence or absence of an obstacle behind the host vehicle based on the analysis result. Preferably, when the first imaging data is selected by the selection unit, the lane departure determination unit is executed, and when the second imaging data is selected by the selection unit, the lane departure determination unit and the lane departure determination unit Obstacle determining means is executed. Preferably, the lane departure determining means determines the lane departure based on white line information detected from the imaging data. Preferably, the selection control unit determines that there is no lane departure by the lane departure determination unit and the obstacle determination unit determines that there is no obstacle while the second imaging data is selected. The selection is switched to the first imaging data. Preferably, the selection control unit switches the selection to the second imaging data when the lane departure determining unit determines that there is a lane departure. Preferably, the traveling state information includes turn signal information of the own vehicle, and the selection control means switches the selection to the second imaging data when the turn signal is issued. Preferably, the traveling state information includes speed information of the own vehicle, and the selection control unit causes the second imaging data to be selected regardless of the number of lanes when the speed of the own vehicle is less than a certain speed. Preferably, the traveling state information includes speed information of the own vehicle, and the selection control means causes the first imaging data to be selected regardless of the number of lanes when the speed of the own vehicle is less than a certain speed. Preferably, the driving support apparatus further includes an input unit that receives an input from a user, and a setting unit that sets an operation mode of the selection unit based on the input unit. One imaging data or second imaging data is selected.

本発明の走行支援プログラムは、自車の前方を撮像する第1の撮像データまたは自車の後方を撮像する第2の撮像データを選択し、選択された第1の撮像データまたは第2の撮像データを表示する手段を備えた走行支援装置が実行するものであって、自車が走行している道路が1車線のとき第1の撮像データを選択させ、2車線以上のとき第2の撮像データを選択させる。   The driving support program of the present invention selects first imaging data for imaging the front of the host vehicle or second imaging data for imaging the rear of the host vehicle, and the selected first imaging data or second imaging. When the road on which the vehicle is traveling is one lane, the first imaging data is selected, and the second imaging is performed when there are two or more lanes. Let the data be selected.

本発明の走行支援方法は、自車の前方を撮像する第1の撮像データまたは自車の後方を撮像する第2の撮像データを選択し、選択された第1の撮像データまたは第2の撮像データを表示する手段を備えた走行支援装置におけるものであって、自車が走行している道路が1車線のとき第1の撮像データを選択させ、2車線以上のとき第2の撮像データを選択させる。   In the driving support method of the present invention, the first imaging data for imaging the front of the host vehicle or the second imaging data for imaging the rear of the host vehicle is selected, and the selected first imaging data or second imaging is selected. In a driving support apparatus having means for displaying data, the first imaging data is selected when the road on which the vehicle is traveling is one lane, and the second imaging data is selected when the road is two or more lanes. Let them choose.

本発明によれば、自車の走行状況情報に基づき第1の撮像データまたは第2の撮像データを選択するようにしたので、より適切なタイミングでの撮像データを表示させ、走行支援を行うことができる。また、第1の撮像データと第2の撮像データのいずれか選択することで、撮像データを処理する処理装置の負荷を軽減させ、より安価な処理装置を用いることができる。   According to the present invention, since the first imaging data or the second imaging data is selected based on the traveling state information of the own vehicle, the imaging data at a more appropriate timing is displayed and driving support is performed. Can do. Further, by selecting one of the first imaging data and the second imaging data, it is possible to reduce the load on the processing device that processes the imaging data, and to use a cheaper processing device.

リアカメラおよびフロントカメラで撮像された撮像データを処理する従来の処理ユニットの構成例を示す図である。It is a figure which shows the structural example of the conventional processing unit which processes the imaging data imaged with the rear camera and the front camera. 本発明に係る第1の実施例の車載装置の構成例を示すブロック図である。It is a block diagram which shows the structural example of the vehicle-mounted apparatus of 1st Example which concerns on this invention. 車両に搭載された撮像カメラを説明する図である。It is a figure explaining the imaging camera mounted in the vehicle. 図2に示す処理ユニットの構成を説明する図である。It is a figure explaining the structure of the processing unit shown in FIG. 本発明の第1の実施例に係る選択制御プログラムの機能的な構成を示す図である。It is a figure which shows the functional structure of the selection control program which concerns on 1st Example of this invention. 本発明の第1の実施例に係る走行支援動作を説明するフローチャートである。It is a flowchart explaining the driving | running | working assistance operation | movement which concerns on 1st Example of this invention. 図7(A)は、自車が2車線の道路を走行しているときにリアカメラが選択された状態を示し、図7(B)は、自車が1車線の道路を走行しているときにフロントカメラが選択された状態を示す。FIG. 7A shows a state where the rear camera is selected when the vehicle is traveling on a two-lane road, and FIG. 7B is a diagram showing that the vehicle is traveling on a one-lane road. Sometimes the front camera is selected. 本発明の第3の実施例に係る走行支援動作を説明するフローチャートである。It is a flowchart explaining the driving | operation assistance operation | movement which concerns on 3rd Example of this invention. 本発明の第4の実施例に係る走行支援動作を説明するフローチャートである。It is a flowchart explaining the driving | operation assistance operation | movement which concerns on the 4th Example of this invention.

本発明の走行支援装置は、好ましい態様では、車両に搭載された電子装置(以下、車載装置)または車載システムによって実現される。走行支援装置を実現する車載装置は、自車の前方を撮像した撮像データと、自車の後方を撮像した撮像データとのいずれかを選択し、選択された撮像データをディスプレイに表示し、さらには選択された撮像データに基づき車線逸脱の判定や後方障害物の判定を行い、必要に応じて運転者に警告を発する。車載装置は、上記のような走行支援機能に加えて、ナビゲーション機能、オーディオ・ビデオデータの再生機能、テレビ・ラジオを受信する機能などを備えることが可能である。   In a preferred embodiment, the driving support device of the present invention is realized by an electronic device (hereinafter referred to as an in-vehicle device) or an in-vehicle system mounted on the vehicle. The in-vehicle device that realizes the driving support device selects either imaging data obtained by imaging the front of the own vehicle or imaging data obtained by imaging the rear of the own vehicle, and displays the selected imaging data on the display. Based on the selected imaging data, the vehicle makes a lane departure determination or a rear obstacle determination, and issues a warning to the driver if necessary. The in-vehicle device can be provided with a navigation function, an audio / video data reproduction function, a TV / radio reception function, and the like in addition to the above-described driving support function.

次に、本発明の実施例について説明する。図2は、本発明の第1の実施例に係る車載装置の構成を示すブロック図であり、当該車載装置が走行支援装置を実現する。同図に示すように、車載装置10は、入力部100、処理ユニット110、ナビゲーション部120、データ通信部130、車内バスインターフェース140、表示部150、音声出力部160、記憶部170、制御部180等を含んで構成される。このような構成は、一例であって、車載装置10は、これ以外にも他の機能を包含するものであってもよい。   Next, examples of the present invention will be described. FIG. 2 is a block diagram showing the configuration of the in-vehicle device according to the first embodiment of the present invention, and the in-vehicle device implements a travel support device. As shown in the figure, the in-vehicle device 10 includes an input unit 100, a processing unit 110, a navigation unit 120, a data communication unit 130, an in-vehicle bus interface 140, a display unit 150, an audio output unit 160, a storage unit 170, and a control unit 180. Etc. are configured. Such a configuration is an example, and the in-vehicle device 10 may include other functions besides this.

入力部100は、入力キーデバイス、音声入力認識装置、タッチパネル等を含み、ユーザーからの指示を受け取る。処理ユニット110は、車両に搭載された撮像カメラから撮像データを受け取り、撮像データの画像処理等を実行する。本例では、処理ユニット110は、車両の前方に搭載されたフロントカメラFCからの撮像データD1と、車両の後方に搭載されたリアカメラRCからの撮像データをD2とを受け取る。   The input unit 100 includes an input key device, a voice input recognition device, a touch panel, and the like, and receives instructions from the user. The processing unit 110 receives imaging data from an imaging camera mounted on the vehicle, and executes image processing of the imaging data. In this example, the processing unit 110 receives imaging data D1 from the front camera FC mounted in front of the vehicle and D2 from imaging data from the rear camera RC mounted in the rear of the vehicle.

図3は、フロントカメラとリアカメラの撮像範囲を説明する図である。同図に示すように、フロントカメラFCは、自車Mの前方に取付けられ、自車Mの前方を撮像する。フロントカメラFCによる撮像範囲すなわち視野角θは、少なくとも自車の前方の白線L1、L2を撮像し、白線L1、L2の画像認識が可能となる角度に調整される。リアカメラRCは、自車Mの後方に取付けられ、自車Mの後方を撮像する。リアカメラRCによる撮像範囲すなわち視野角θRは、自車の後方の白線L1、L2を撮像し、白線L1、L2の画像認識が可能となる角度の要件を満足し、かつ自車Mの後側方の死角となる領域を撮像可能な角度の要件を満足する。それ故、1つの好ましい態様では、リアカメラRCには、視野角θが視野角θよりも大きくなるようなレンズが用いられる。但し、視野角θと視野角θとの関係はこれに限らず、同じであってもよいし、反対に視野角θが視野角θよりも小さくてもよい。 FIG. 3 is a diagram illustrating the imaging range of the front camera and the rear camera. As shown in the figure, the front camera FC is attached in front of the host vehicle M and images the front of the host vehicle M. The imaging range by the front camera FC, that is, the viewing angle θ F is adjusted to an angle at which at least the white lines L1 and L2 ahead of the host vehicle are imaged and the white lines L1 and L2 can be recognized. The rear camera RC is attached to the rear of the host vehicle M and images the rear of the host vehicle M. The imaging range of the rear camera RC, that is, the viewing angle θR, satisfies the requirements of an angle that allows the white lines L1 and L2 behind the host vehicle to be captured and allows the white lines L1 and L2 to be recognized, and This satisfies the requirement of an angle at which an area that becomes a blind spot can be imaged. Therefore, in one preferred embodiment, the rear camera RC uses a lens whose viewing angle θ R is larger than the viewing angle θ F. However, the relationship between the viewing angle theta R and the viewing angle theta F is not limited thereto, may be the same, the viewing angle theta R opposite may be smaller than the viewing angle theta F.

処理ユニット110は、図4に示すように、フロントカメラFCからの撮像データD1とリアカメラRCからの撮像データD1を入力し、いずれか一方の撮像データを選択する選択部112と、選択部112によって選択された撮像データの画像処理等を行う信号処理部114とを有する。選択部112は、制御部180からの選択信号SELによって入力の切換えを行う。信号処理部114は、例えば、システムLSIやDSPなどのチップを含み、撮像データの画像処理を行う。1つの好ましい態様では、撮像データの中から道路の白線(追い越し禁止の黄色線なども含む)を検出したり、撮像データの中から、人、自転車、二輪車、車等の障害物を検出する。検出方法は、公知の画像解析技術を用いて行うことができる。信号処理部114で処理された結果は、制御部180へ提供され、制御部180は、処理された結果を利用して、車線逸脱の判定や後方の障害物の判定を行う。   As illustrated in FIG. 4, the processing unit 110 receives the imaging data D1 from the front camera FC and the imaging data D1 from the rear camera RC, and selects a selection unit 112 that selects one of the imaging data, and the selection unit 112. And a signal processing unit 114 that performs image processing and the like of the imaging data selected by. The selection unit 112 performs input switching according to a selection signal SEL from the control unit 180. The signal processing unit 114 includes, for example, a chip such as a system LSI or DSP, and performs image processing on the captured data. In one preferable aspect, a white line of a road (including a yellow line that is not allowed to be overtaken) is detected from the image data, and an obstacle such as a person, a bicycle, a two-wheeled vehicle, or a car is detected from the image data. The detection method can be performed using a known image analysis technique. The result processed by the signal processing unit 114 is provided to the control unit 180, and the control unit 180 uses the processed result to determine lane departure or a rear obstacle.

ナビゲーション部120は、自車位置周辺の道路地図を表示したり、目的地までの経路を探索し、経路案内等を行う。ナビゲーション部120に必要とされる自車位置は、GPS衛星を利用した測位情報および/または車両に搭載されたジャイロセンサや加速度センサ等を利用した測位情報から算出される。道路地図データや施設データ等は、記憶部170から読み出すことも可能であるし、データ通信部130を介して、道路地図データを配信するサーバーにアクセスし、そこから取得するようにしもてよい。また、ナビゲーション部120は、ナビゲーション機能を実行している間に、フロントカメラFCやリアカメラRCによって撮像された撮像データを表示させることも可能である。例えば、ディスプレイを2画面に分割し、一方の画面に自車位置周辺等の道路地図を表示させ、他方の画面に撮像された画像を表示させることができる。   The navigation unit 120 displays a road map around the vehicle position, searches for a route to the destination, and provides route guidance. The own vehicle position required for the navigation unit 120 is calculated from positioning information using a GPS satellite and / or positioning information using a gyro sensor or an acceleration sensor mounted on the vehicle. The road map data, facility data, and the like can be read from the storage unit 170, or the server that distributes the road map data may be accessed via the data communication unit 130 and acquired from there. The navigation unit 120 can also display image data captured by the front camera FC and the rear camera RC while executing the navigation function. For example, the display can be divided into two screens, a road map around the vehicle position can be displayed on one screen, and a captured image can be displayed on the other screen.

データ通信部130は、外部と無線または有線によるデータ通信の送受を可能にする。例えば、ネットワークを介してサーバーに接続したり、車内に持ち込まれたスマートフォンなどの携帯端末などの外部機器との接続も可能にする。通信機能を有する携帯端末が接続された場合には、その携帯端末自身が保持するデータ通信機能を利用することも可能である。   The data communication unit 130 enables transmission / reception of data communication with the outside by wireless or wired. For example, it is possible to connect to a server via a network or to connect to an external device such as a mobile terminal such as a smartphone brought into the vehicle. When a mobile terminal having a communication function is connected, the data communication function held by the mobile terminal itself can be used.

車内バスI/F140は、車内バスに接続され、車両の種々の情報を取得する。例えば、車両の速度情報、車両のウィンカー情報、車両のギアポジション情報などを取得する。取得された情報は、後述するようにフロントカメラFCからの撮像データD1とリアカメラRCからの撮像データD2の切替制御に利用される。さらに取得された情報は、ナビゲーション部120においても利用される。   The in-vehicle bus I / F 140 is connected to the in-vehicle bus and acquires various types of vehicle information. For example, vehicle speed information, vehicle blinker information, vehicle gear position information, and the like are acquired. The acquired information is used for switching control of imaging data D1 from the front camera FC and imaging data D2 from the rear camera RC, as will be described later. Further, the acquired information is also used in the navigation unit 120.

表示部150は、受け取った画像データを処理し、ディスプレイに表示する。例えば、処理ユニット110で処理された画像データを受け取り、自車の前方画像または自車の後方画像を表示する。さらに表示部150は、ナビゲーション部120からの画像データを受け取り、ナビゲーション画像とともにフロントカメラ/リアカメラで撮像された画像を表示させる。   The display unit 150 processes the received image data and displays it on the display. For example, the image data processed by the processing unit 110 is received, and a front image of the own vehicle or a rear image of the own vehicle is displayed. Further, the display unit 150 receives the image data from the navigation unit 120 and displays an image captured by the front camera / rear camera together with the navigation image.

音声出力部160は、ナビゲーション部120による音声案内やその他記憶部170から読み出された音声データ等を出力する。さらに、フロントカメラFCやリアカメラRCで撮像された撮像データに基づき、車線逸脱や後方障害物があると判定された場合に、警報を出力することができる。   The voice output unit 160 outputs voice guidance by the navigation unit 120, voice data read from the other storage unit 170, and the like. Furthermore, an alarm can be output when it is determined that there is a lane departure or a rear obstacle based on image data captured by the front camera FC or the rear camera RC.

記憶部170は、車載装置で使用されるデータやアプリケーション等のプログラムデータ等を記憶することができる。1つの態様では、記憶部170は、ナビゲーション部120で利用される地図データベースや施設データベースを記憶する。地図データベースには、リンク情報(道路)やノード情報(交差点)が記憶される。ノード情報には、道路を識別する情報に加えて、道路の属性を表す情報が含まれる。例えば、道路の車線数、道路の幅員、追い越し禁止区間の設定、制限速度、カーブ区間(曲率を含む)などである   The storage unit 170 can store data used in the in-vehicle device, program data such as applications, and the like. In one aspect, the storage unit 170 stores a map database or facility database used by the navigation unit 120. The map database stores link information (roads) and node information (intersections). The node information includes information representing road attributes in addition to information for identifying roads. For example, the number of road lanes, the width of the road, setting of overtaking prohibited sections, speed limit, curve sections (including curvature), etc.

制御部180は、例えば、マイクロプロセッサやマイクロコントローラを含み、ROM/RAMあるいは記憶部170に記憶されたプログラム等を実行することにより各部を制御する。本実施例では、制御部180は、自車の走行支援を行うための走行支援プログラムを実行する。当該走行支援プログラムは、フロントカメラFCとリアカメラRCの撮像データの切換制御や、安全運転を損なうような場合に警報等を発する。   The control unit 180 includes, for example, a microprocessor and a microcontroller, and controls each unit by executing a program or the like stored in the ROM / RAM or the storage unit 170. In the present embodiment, the control unit 180 executes a driving support program for supporting driving of the host vehicle. The driving support program issues an alarm or the like when switching control of imaging data of the front camera FC and the rear camera RC or when safe driving is impaired.

本実施例の走行支援プログラムの機能的な構成を図5に示す。本実施例の走行支援プログラム200は、車線数取得部210、属性情報取得部220、速度情報取得部230、車両状態取得部240、車線逸脱判定部250、後方障害物判定部260、選択決定部270および警報出力部280等含む。   FIG. 5 shows a functional configuration of the driving support program of this embodiment. The driving support program 200 of this embodiment includes a lane number acquisition unit 210, an attribute information acquisition unit 220, a speed information acquisition unit 230, a vehicle state acquisition unit 240, a lane departure determination unit 250, a rear obstacle determination unit 260, and a selection determination unit. 270 and alarm output unit 280 and the like.

車線数取得部210は、自車が走行している道路の車線数を含む車線情報を取得する。1つの態様では、ナビゲーション部120によって自車位置がマップマッチングされている道路の車線情報を、記憶部170の道路データベースから取得する。他の態様では、フロントカメラまたはリアカメラで撮像された撮像データから車線数を検知できる場合には、この車線数を取得するようにしてもよい。さらに他の態様では、自車が走行している道路の車線数を、データ通信手段を介して外部のサーバーから取得するようにしてもよい。   The lane number acquisition unit 210 acquires lane information including the lane number of the road on which the host vehicle is traveling. In one aspect, the lane information of the road whose vehicle position is map-matched by the navigation unit 120 is acquired from the road database of the storage unit 170. In another aspect, when the number of lanes can be detected from image data captured by the front camera or the rear camera, the number of lanes may be acquired. In yet another aspect, the number of lanes on the road on which the vehicle is traveling may be acquired from an external server via the data communication means.

属性情報取得部220は、自車が走行している道路の属性情報を取得する。属性情報には、上記したように例えば、道路の幅員、追い越し禁止区間の設定、制限速度、カーブ区間(曲率を含む)などが含まれる。   The attribute information acquisition unit 220 acquires attribute information of the road on which the host vehicle is traveling. As described above, the attribute information includes, for example, the width of the road, the setting of the overtaking prohibited section, the speed limit, the curve section (including the curvature), and the like.

速度情報取得部230は、車内バスI/F140を介して自車の速度情報を取得する。車両状態取得部240は、車内バスI/F140を介して、例えば、ギアポジションやウィンカー情報を取得する。なお、本実施例では、道路の車線数、属性情報、速度情報、車両状態を含む情報を総括して、自車の走行状況情報と定義している。   The speed information acquisition unit 230 acquires the speed information of the host vehicle via the in-vehicle bus I / F 140. The vehicle state acquisition unit 240 acquires, for example, gear position and winker information via the in-vehicle bus I / F 140. In this embodiment, information including the number of road lanes, attribute information, speed information, and vehicle state is collectively defined as traveling state information of the own vehicle.

車線逸脱判定部250は、信号処理部114からの撮像データの解析結果に基づき、自車が車線を逸脱しているか否かを判定する。好ましい例では、自車と白線との距離が一定値よりも小さくなったとき、車線逸脱と判定することができる。あるいは他の例では、一定期間内に、自車と白線との距離が減少傾向にあるとき、車線逸脱と判定することができる。車線逸脱に利用される白線は、フロントカメラFCによる撮像データ、またはリアカメラRCによる撮像データのいずれであってもよい。つまり、双方の撮像データに基づき車線逸脱の判定を行うことができる。但し、夜間は、自車のヘッドライトにより前方の白線が照射され、その結果、リアカメラによる白線の検出精度よりもフロントカメラによる白線の検出精度が高くなる。それ故、車線逸脱の判定精度も、フロントカメラの撮像データを利用した方が高くなる。   The lane departure determination unit 250 determines whether or not the own vehicle has deviated from the lane based on the analysis result of the imaging data from the signal processing unit 114. In a preferred example, when the distance between the host vehicle and the white line is smaller than a certain value, it can be determined that the vehicle is departing from the lane. Alternatively, in another example, when the distance between the vehicle and the white line tends to decrease within a certain period, it can be determined that the vehicle has deviated from the lane. The white line used for lane departure may be either image data captured by the front camera FC or image data captured by the rear camera RC. That is, it is possible to determine lane departure based on both imaging data. However, at night, a white line ahead is emitted by the headlight of the own vehicle, and as a result, the white line detection accuracy by the front camera is higher than the white line detection accuracy by the rear camera. Therefore, the accuracy of determining the lane departure is higher when the image data of the front camera is used.

後方障害物判定部260は、信号処理部114からの撮像データの解析結果に基づき、後方の障害物の有無を判定する。後方障害物判定は、リアカメラRCからの撮像データが選択されているときに行われる。   The rear obstacle determination unit 260 determines whether there is a rear obstacle based on the analysis result of the imaging data from the signal processing unit 114. The rear obstacle determination is performed when imaging data from the rear camera RC is selected.

選択決定部270は、フロントカメラFCまたはリアカメラRCのいずれの撮像データを選択するのかを決定し、その決定結果に従い選択信号SELを選択部112へ出力する。選択決定部270は、上記した走行状況情報に基づき選択を決定する。選択決定部270は、例えば、自車が走行している道路の車線数が2車線以上(追い越し可能区間)である場合は、リアカメラRCを選択させ、車線数が1車線(追い越し禁止区間)である場合には、フロントカメラFCを選択させる。選択決定部270の詳細の動作については後述する。   The selection determining unit 270 determines which imaging data of the front camera FC or the rear camera RC is to be selected, and outputs a selection signal SEL to the selecting unit 112 according to the determination result. The selection determination unit 270 determines the selection based on the above-described traveling state information. For example, when the number of lanes on the road on which the vehicle is traveling is two or more lanes (passable section), the selection determining unit 270 selects the rear camera RC, and the number of lanes is one lane (passing prohibited section). If so, the front camera FC is selected. The detailed operation of the selection determination unit 270 will be described later.

警報出力部280は、車線逸脱判定部250により車線逸脱があると判定されたとき、および/または後方障害物判定部260により死角を含む後方に障害物があると判定されたとき、表示部150または音声出力部160から警報を出力させる。   When the lane departure determining unit 250 determines that there is a lane departure and / or the rear obstacle determining unit 260 determines that there is an obstacle behind the blind spot, the warning output unit 280 displays the display unit 150. Alternatively, an alarm is output from the audio output unit 160.

次に、本発明の第1の実施例に係る走行支援動作について、図6のフローチャート参照して説明する。自車の走行開始に伴い、走行支援プログラムが起動される。好ましい態様では、ナビゲーション部120も起動され、表示部150に自車位置周辺の道路地図が表示されるものとする。   Next, the driving support operation according to the first embodiment of the present invention will be described with reference to the flowchart of FIG. A driving support program is started when the host vehicle starts driving. In a preferred embodiment, the navigation unit 120 is also activated, and a road map around the vehicle position is displayed on the display unit 150.

まず、車線数取得部210によって自車が走行している道路の車線数が取得される(S100)。選択決定部270は、車線数に基づきフロントカメラFCまたはリアカメラRCの選択を行う。具体的には、車線数が1車線であるか否かを判定し(S102)、車線数が1車線である場合には、フロントカメラFCを選択させ(S104)、車線数が2車線以上である場合には、リアカメラRCを選択させる(S106)。選択部112は、選択決定部270で決定された選択信号SELに応じて撮像データを選択する。   First, the number of lanes of the road on which the host vehicle is traveling is acquired by the lane number acquisition unit 210 (S100). The selection determination unit 270 selects the front camera FC or the rear camera RC based on the number of lanes. Specifically, it is determined whether or not the number of lanes is one lane (S102). If the number of lanes is one lane, the front camera FC is selected (S104), and the number of lanes is two or more lanes. If there is, the rear camera RC is selected (S106). The selection unit 112 selects imaging data in accordance with the selection signal SEL determined by the selection determination unit 270.

図7(A)は、自車が2車線の道路を走行している状態を示し、図7(B)は、自車が1車線の道路を走行している状態を示す。自車が2車線の道路を走行している場合、後側方(死角)から自車Mに接近する他車Pを監視する必要がある。このため、リアカメラRCが選択される。一方、自車が1車線の道路を走行している場合、後側方(死角)から自車Mに接近する他車は、原則的に少ないと考えられる。このため、フロントカメラFCが選択される。   FIG. 7A shows a state where the host vehicle is traveling on a two-lane road, and FIG. 7B shows a state where the host vehicle is traveling on a one-lane road. When the host vehicle is traveling on a two-lane road, it is necessary to monitor the other vehicle P approaching the host vehicle M from the rear side (dead angle). For this reason, the rear camera RC is selected. On the other hand, when the host vehicle is traveling on a one-lane road, in principle, there are few other vehicles approaching the host vehicle M from the rear side (dead angle). For this reason, the front camera FC is selected.

次に、処理ユニットの信号処理部114は、選択された撮像データを画像処理することで、白線を検出する(S108)。白線情報は、フロントカメラFCまたはリアカメラRCのいずれが選択された場合であっても、検出が可能である。次に、車線逸脱判定部250は、検出された白線情報に基づき自車が車線を逸脱するか否かを判定する(S110)。車線逸脱であると判定された場合には、警報出力部280は、表示部150や音声出力部160に警報を出力させる(S112)。また、選択された撮像データは、ナビゲーション画面とともに表示部150に表示されるようにしてもよい。   Next, the signal processing unit 114 of the processing unit detects a white line by performing image processing on the selected imaging data (S108). The white line information can be detected regardless of whether the front camera FC or the rear camera RC is selected. Next, the lane departure determination unit 250 determines whether or not the vehicle departs from the lane based on the detected white line information (S110). If it is determined that the vehicle is departing from the lane, the alarm output unit 280 causes the display unit 150 and the audio output unit 160 to output an alarm (S112). The selected imaging data may be displayed on the display unit 150 together with the navigation screen.

フロントカメラFCおよびリアカメラRCのいずれからの撮像データを使用しても白線検知をすることが可能であり、リアカメラRCを選択すれば、車線逸脱判定と後方障害物判定を同時に行うことができるが、夜間走行時には、リアカメラRCによる白線検出の性能が劣化する。そこで本実施例は、後方からの危険性が少ないような場合には、フロントカメラFCを選択することで、車線逸脱判定の精度を高めている。   It is possible to detect a white line by using imaging data from either the front camera FC or the rear camera RC. If the rear camera RC is selected, the lane departure determination and the rear obstacle determination can be performed simultaneously. However, the performance of white line detection by the rear camera RC deteriorates during night driving. Therefore, in this embodiment, when the risk from the rear is small, the accuracy of the lane departure determination is improved by selecting the front camera FC.

次に、本発明の第2の実施例について説明する。第1の実施例では、選択決定部270は、車線数に基づきフロントカメラFCまたはリアカメラRCを選択するようにしたが、第2の実施例では、自車が走行している道路の属性情報を加味してカメラの選択を行う。   Next, a second embodiment of the present invention will be described. In the first embodiment, the selection determining unit 270 selects the front camera FC or the rear camera RC based on the number of lanes, but in the second embodiment, the attribute information of the road on which the vehicle is traveling is selected. To select the camera.

属性情報取得部220は、自車が走行している道路の属性情報を記憶部170の地図データベースから取得する。選択決定部270は、取得された属性情報から、車線数が1車線であっても、道路の直線区間が一定距離以上ある場合には、リアカメラRCを選択させる。直線区間が長い場合には、後側方から追い越し車両が接近する可能性があるためである。リンク情報に直線区間の距離情報が含まれていない場合には、リンクの始点から終点までの形状から適宜直線区間を判定するようにしてもよい。   The attribute information acquisition unit 220 acquires attribute information of the road on which the vehicle is traveling from the map database in the storage unit 170. The selection determining unit 270 selects the rear camera RC from the acquired attribute information even if the number of lanes is one lane and the straight section of the road is more than a certain distance. This is because, when the straight section is long, the passing vehicle may approach from the rear side. When the link information does not include the distance information of the straight section, the straight section may be appropriately determined from the shape from the start point to the end point of the link.

他の態様として、選択決定部270は、取得された属性情報から、追い越し区間であるか否かを判定し、追い越し区間であれば、リアカメラRCを選択させ、追い越し区間でなければ、フロントカメラカメラFCを選択させる。追い越し区間であるか否かは、例えば、法定により追い越し禁止(黄色線)が設定されているか否かによって決定される。但し、そのような追い越し禁止が設定されていない場合であっても、カーブ区間である場合や、道路の幅員が一定値以下であれば、事実上、追い越すことは難しいので、追い越しがないと判定してもよい。カーブ区間か否かは、リンク情報に道路の曲率が含まれていれば、当該曲率が一定値以上か否かによって決定し、曲率が含まれていない場合には、道路形状から推定するようにしてもよい。   As another aspect, the selection determination unit 270 determines whether or not it is an overtaking section from the acquired attribute information. If it is an overtaking section, the rear camera RC is selected. The camera FC is selected. Whether or not it is an overtaking section is determined, for example, by whether or not overtaking prohibition (yellow line) is set by law. However, even if such overtaking prohibition is not set, if it is a curve section or if the width of the road is below a certain value, it is actually difficult to overtake, so it is determined that there is no overtaking May be. Whether or not it is a curved section is determined by whether or not the curvature of the road is included in the link information, whether or not the curvature is greater than a certain value. If the curvature is not included, it is estimated from the road shape. May be.

次に、本発明の第3の実施例について説明する。第3の実施例では、車線情報や属性情報に加え、自車の速度情報に基づきカメラの選択を行う。速度情報取得部230は、車内バスI/F140を介して自車の速度情報を取得する。本実施例では、選択決定部270は、速度情報が一定速度以上であるか否かを判定し、一定速度以上の場合のみフロントカメラFCまたはリアカメラRCの選択を行い、一定速度未満の場合には、車線情報や属性情報に関係なくリアカメラRCを選択する。   Next, a third embodiment of the present invention will be described. In the third embodiment, the camera is selected based on the speed information of the own vehicle in addition to the lane information and attribute information. The speed information acquisition unit 230 acquires the speed information of the host vehicle via the in-vehicle bus I / F 140. In this embodiment, the selection determination unit 270 determines whether or not the speed information is equal to or higher than a certain speed, and selects the front camera FC or the rear camera RC only when the speed information is equal to or higher than the certain speed. Selects the rear camera RC regardless of lane information or attribute information.

図8は、本発明の第3の実施例の動作を説明するフローチャートである。先ず、速度情報取得部230により、自車の速度情報が取得される(S200)。次に、選択決定部270は、速度情報が一定速度以上(例えば、60km/h)であるか否かを判定する(S202)。一定速度未満と判定された場合には、選択決定部270は、車線情報や属性情報による判定を行わず、リアカメラRCを選択させる(S106)。一定速度以上と判定された場合は、第1の実施例で示したように、ステップS100〜S112のフローに従いカメラの選択が行われる。   FIG. 8 is a flowchart for explaining the operation of the third embodiment of the present invention. First, the vehicle speed information is acquired by the speed information acquisition unit 230 (S200). Next, the selection determination unit 270 determines whether or not the speed information is equal to or higher than a certain speed (for example, 60 km / h) (S202). When it is determined that the speed is less than the predetermined speed, the selection determination unit 270 selects the rear camera RC without performing determination based on the lane information or attribute information (S106). If it is determined that the speed is equal to or higher than a certain speed, the camera is selected according to the flow of steps S100 to S112 as shown in the first embodiment.

第3の実施例では、自車の走行速度が一定速度未満の場合は、車線情報に関わらず、車線逸脱の判定性能が低いリアカメラRCを選択している。これは、低速時では、高性能な車線逸脱判定が重要でなくなり、後側方の障害物の監視が重要になるためである。例えば、渋滞時や交差点近傍において低速走行をしているとき、後側方の死角から二輪車等の追い越し等が生じることがあり、これに的確に対処することができる。   In the third embodiment, when the traveling speed of the host vehicle is less than a certain speed, the rear camera RC having a low lane departure determination performance is selected regardless of the lane information. This is because, at low speeds, high-performance lane departure judgment is not important, and monitoring of obstacles on the rear side becomes important. For example, when the vehicle is traveling at a low speed near a traffic jam or near an intersection, overtaking of a motorcycle or the like may occur from the blind spot on the rear side, and this can be dealt with accurately.

さらに第3の実施例では、自車の速度が一定速度未満の場合にリアカメラを選択させているが、例外を設定しても良い。例えば、入力部100からのユーザー設定によって、低速走行時の動作モードを実行させることも可能である。低速走行時の動作モードは、例えば、フロントカメラFCからの撮像データにより信号機を認識すること、あるいはフロントカメラFCからの撮像データにより前方障害物の有無を判定することなどである。低速走行時に、このような動作モードを実行させたい場合には、自車の速度が一定速度未満になった場合には、常にフロントカメラを選択させるようにしてもよい。   Furthermore, in the third embodiment, the rear camera is selected when the speed of the host vehicle is less than a certain speed, but an exception may be set. For example, it is possible to execute an operation mode during low-speed traveling by user settings from the input unit 100. The operation mode during low-speed traveling is, for example, recognizing a traffic light from image data from the front camera FC or determining the presence or absence of a front obstacle from image data from the front camera FC. When it is desired to execute such an operation mode when traveling at a low speed, the front camera may be always selected when the speed of the host vehicle is less than a certain speed.

さらに第3の実施例では、自車の速度が一定速度未満の場合にリアカメラを選択させているが、低速走行時のみならず、停車時や後退時においても常にリアカメラを選択させるようにしても良い。この場合、車両状態取得部240は、車内バスI/F140を介してギアポジションやサイドブレーキの情報を取得し、選択決定部270は、ギアポジションが後退であるとき、あるいはサイドブレーキがオンしているとき、リアカメラRCを選択させる。停車時、後退時には、車線逸脱判定は不要であることが多く、反面、そのような場合には、後側方の死角に、歩行者、自転車、その他物体などの障害物が存在することが多く、それらの監視が必要になる。それ故、リアカメラRCを選択させることが望ましい。   Further, in the third embodiment, the rear camera is selected when the speed of the host vehicle is less than a certain speed. However, the rear camera is always selected not only when driving at a low speed but also when stopping or moving backward. May be. In this case, the vehicle state acquisition unit 240 acquires information on the gear position and the side brake via the in-vehicle bus I / F 140, and the selection determination unit 270 determines that the gear position is reverse or the side brake is turned on. When it is, the rear camera RC is selected. When stopping or retreating, lane departure judgment is often unnecessary, but in such cases, there are many obstacles such as pedestrians, bicycles, and other objects in the blind spots on the rear side. And monitoring them. Therefore, it is desirable to select the rear camera RC.

次に、本発明の第4の実施例について説明する。第4の実施例では、車線情報、属性情報等に加え、後方障害物の判定および車線逸脱の判定を考慮して、より的確なカメラの選択を行う。図9は、第4の実施例に係る走行支援の動作フローである。第1の実施例のときと同様に、車線数取得部210によって自車が走行している道路の車線数が取得され(S300)、選択決定部270によって車線が1車線か2車線以上かが判定される(S302)。1車線である場合には、選択決定部270は、フロントカメラFCを選択させ(S304)、2車線以上である場合には、選択決定部270は、リアカメラRCを選択させる(S306)。   Next, a fourth embodiment of the present invention will be described. In the fourth embodiment, in addition to lane information, attribute information, and the like, more accurate camera selection is performed in consideration of the determination of a rear obstacle and the determination of lane departure. FIG. 9 is an operational flow of driving support according to the fourth embodiment. As in the first embodiment, the number of lanes of the road on which the vehicle is traveling is acquired by the lane number acquisition unit 210 (S300), and the selection determination unit 270 determines whether the lane is one lane or two lanes or more. It is determined (S302). If it is one lane, the selection determining unit 270 selects the front camera FC (S304), and if it is two or more lanes, the selection determining unit 270 selects the rear camera RC (S306).

次に、選択決定部270は、車線逸脱判定部250および後方障害物判定部260の判定結果を監視し、後方から障害物の接近がなく(S308)、かつ車線逸脱がないと判定されたとき(S310)、選択決定部270は、フロントカメラFCを選択させる(S304)。なお、この判定基準は、警報出力部280による警報を出力する判定基準と異なるものであってもよく、例えば、警報出力部280による判定基準よりもより厳しい基準としてもよい。なぜなら、自車の後方を全く監視しない期間が発生することになるためである。   Next, the selection determination unit 270 monitors the determination results of the lane departure determination unit 250 and the rear obstacle determination unit 260, and when it is determined that there is no obstacle approaching from the rear (S308) and there is no lane departure. (S310), the selection determination unit 270 selects the front camera FC (S304). Note that this determination criterion may be different from the determination criterion for outputting an alarm by the alarm output unit 280, and may be a stricter criterion than the determination criterion by the alarm output unit 280, for example. This is because a period in which the back of the vehicle is not monitored at all occurs.

フロントカメラFCへの切り替え後、選択決定部270は、フロントカメラFCからの撮像データに基づく車線逸脱の判定を監視し、車線逸脱がありと判定された場合には、リアカメラRCを選択させる(S306)。さらに選択決定部270は、車両状態取得部240からウィンカーを出したことが検出された場合にも、リアカメラRCを選択させる(S306)。これらの2つの動作は、いずれも自車の後側方の監視または確認を必要とするものであるからである。リアカメラRCが選択された後、後方障害物がなく(S308)、車線逸脱がなければ(S310)、再び、フロントカメラFCへ切り替えられる。   After switching to the front camera FC, the selection determination unit 270 monitors the determination of lane departure based on the imaging data from the front camera FC, and when it is determined that there is a lane departure, the rear camera RC is selected ( S306). Furthermore, the selection determination unit 270 also selects the rear camera RC when it is detected that the winker has been issued from the vehicle state acquisition unit 240 (S306). This is because both of these two operations require monitoring or confirmation on the rear side of the vehicle. After the rear camera RC is selected, if there is no rear obstacle (S308) and there is no lane departure (S310), the camera is switched to the front camera FC again.

このように第4の実施例は、2車線以上の車線を走行中であっても一時的にフロントカメラFCに切り替え可能とし、切り替え後、自車後方の安全確認が必要となった場合には、再びリアカメラRCに切り替えることで、フロントカメラFCとリアカメラRCの切り換えタイミングを走行状態に応じてフレキシブルに制御することができる。   As described above, the fourth embodiment can temporarily switch to the front camera FC even when traveling in two or more lanes, and after switching, when safety confirmation is required behind the vehicle. By switching to the rear camera RC again, the switching timing of the front camera FC and the rear camera RC can be flexibly controlled according to the traveling state.

以上、本発明の好ましい実施の形態について詳述したが、本発明は、特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。   The preferred embodiment of the present invention has been described in detail above, but the present invention is not limited to the specific embodiment, and various modifications can be made within the scope of the present invention described in the claims. Deformation / change is possible.

10:車載装置 100:入力部
110:処理ユニット 112:選択部
114:信号処理部 120:ナビゲーション部
130:データ通信部 140:車内バスI/F
150:表示部 160:音声出力部
170:記憶部 180:制御部
200:走行支援プログラム 210:車線数取得部
220:属性情報取得部 230:速度情報取得部
240:車両状態取得部 250:車線逸脱判定部
260:後方障害物判定部 270:選択決定部
280:警報出力部
FC:フロントカメラ RC:リアカメラ
M:自車 P:他車
10: In-vehicle device 100: Input unit 110: Processing unit 112: Selection unit 114: Signal processing unit 120: Navigation unit 130: Data communication unit 140: In-vehicle bus I / F
150: Display unit 160: Audio output unit 170: Storage unit 180: Control unit 200: Driving support program 210: Lane number acquisition unit 220: Attribute information acquisition unit 230: Speed information acquisition unit 240: Vehicle state acquisition unit 250: Lane departure Determination unit 260: Rear obstacle determination unit 270: Selection determination unit 280: Alarm output unit FC: Front camera RC: Rear camera M: Own vehicle P: Other vehicle

Claims (21)

自車の前方を撮像した第1の撮像データまたは自車の後方を撮像した第2の撮像データを選択する選択手段と、
自車の走行状況に関する走行状況情報を取得する取得手段と、
前記選択手段により選択された第1の撮像データまたは第2の撮像データに基づき走行の安全性を判定する判定手段と、
前記走行状況情報に基づき前記選択手段の選択を制御する選択制御手段と、
を有する走行支援装置。
Selection means for selecting first imaging data that images the front of the host vehicle or second imaging data that images the rear of the host vehicle;
An acquisition means for acquiring driving situation information relating to the driving situation of the vehicle;
Determination means for determining safety of traveling based on the first imaging data or the second imaging data selected by the selection means;
Selection control means for controlling the selection of the selection means based on the traveling state information;
A driving support device having
前記走行状況情報は、自車が走行している道路の車線数を含み、前記選択制御手段は、車線数が1車線のとき第1の撮像データを選択させ、2車線以上のとき第2の撮像データを選択させる、請求項1に記載の走行支援装置。 The traveling status information includes the number of lanes of the road on which the vehicle is traveling, and the selection control means selects the first imaging data when the number of lanes is one lane, and the second when the number of lanes is two or more. The driving support apparatus according to claim 1, wherein imaging data is selected. 前記走行状況情報は、自車が走行している道路属性を含み、前記選択制御手段は、車線数が1車線であっても道路の直線区間が一定距離以上である場合には、第2の撮像データを選択させる、請求項2に記載の走行支援装置。 The travel status information includes a road attribute on which the host vehicle is traveling, and the selection control means includes a second attribute if the straight section of the road is a certain distance or more even if the number of lanes is one lane. The driving support apparatus according to claim 2, wherein imaging data is selected. 前記走行状況情報は、自車が走行している道路属性を含み、前記選択制御手段は、道路が追い越し区間であるとき第2の撮像データを選択させ、道路が追い越しのない区間であるとき第1の撮像データを選択させる、請求項1または2に記載の走行支援装置。 The travel status information includes a road attribute on which the host vehicle is traveling, and the selection control means causes the second imaging data to be selected when the road is an overtaking section, and is selected when the road is a section without overtaking. The driving support device according to claim 1, wherein one driving data is selected. 前記追い越しのない区間は、曲率が一定以上のカーブ区間である、請求項4に記載の走行支援装置。 The travel support device according to claim 4, wherein the section without overtaking is a curved section having a certain curvature or more. 前記追い越しのない区間は、幅員が一定値以下の1車線の区間である、請求項4に記載の走行支援装置。 The travel support device according to claim 4, wherein the section without overtaking is a section of one lane whose width is a predetermined value or less. 走行支援装置はさらに、前記判定手段の判定結果に基づき警告を出力する警告出力手段を含む、請求項1に記載の走行支援装置。 The travel support apparatus according to claim 1, further comprising a warning output unit that outputs a warning based on a determination result of the determination unit. 走行支援装置はさらに、前記選択手段により選択された第1の撮像データまたは第2の撮像データを表示する表示手段を含む、請求項1ないし7いずれか1つに記載の走行支援装置。 The driving support apparatus according to any one of claims 1 to 7, further comprising a display unit that displays the first imaging data or the second imaging data selected by the selection unit. 前記判定手段は、前記選択手段により選択された第1または第2の撮像データを解析する解析手段と、前記解析手段の解析結果に基づき車線逸脱の有無を判定する車線逸脱判定手段と、前記解析結果に基づき自車の後方の障害物の有無を判定する障害物判定手段とを含む、請求項1ないし8いずれか1つに記載の走行支援装置。 The determination unit includes an analysis unit that analyzes the first or second imaging data selected by the selection unit, a lane departure determination unit that determines whether there is a lane departure based on an analysis result of the analysis unit, and the analysis The driving support device according to any one of claims 1 to 8, further comprising an obstacle determination unit that determines whether there is an obstacle behind the host vehicle based on the result. 前記選択手段によって第1の撮像データが選択されているとき、前記車線逸脱判定手段が実行され、前記選択手段によって第2の撮像データが選択されているとき、前記車線逸脱判定手段および前記障害物判定手段が実行される、請求項9に記載の走行支援装置。 When the first imaging data is selected by the selection means, the lane departure determination means is executed, and when the second imaging data is selected by the selection means, the lane departure determination means and the obstacle The travel support apparatus according to claim 9, wherein the determination unit is executed. 前記車線逸脱判定手段は、撮像データから検出された白線情報に基づき車線逸脱を判定する、請求項9に記載の走行支援装置。 The driving assistance device according to claim 9, wherein the lane departure determination unit determines lane departure based on white line information detected from imaging data. 前記選択制御手段は、第2の撮像データが選択されている間に、前記車線逸脱判定手段により車線逸脱がないと判定され、かつ障害物判定手段により障害物がないと判定されたとき、第1の撮像データへ選択を切替えさせる、請求項9ないし11いずれか1つに記載の走行支援装置。 When the second imaging data is selected, the selection control means determines that there is no lane departure by the lane departure determination means and the obstacle determination means determines that there is no obstacle. The driving support device according to claim 9, wherein the selection is switched to one imaging data. 前記選択制御手段は、前記車線逸脱判定手段により車線逸脱が有りと判定されたとき、第2の撮像データへ選択を切替えさせる、請求項12に記載の走行支援装置。 The travel support apparatus according to claim 12, wherein the selection control means switches the selection to the second imaging data when the lane departure determination means determines that there is a lane departure. 前記走行状況情報は、自車のウィンカー情報を含み、前記選択制御手段は、前記ウィンカーが出されたとき、第2の撮像データへ選択を切替えさせる、請求項12に記載の走行支援装置。 The travel support apparatus according to claim 12, wherein the travel status information includes winker information of the host vehicle, and the selection control unit switches the selection to second imaging data when the winker is issued. 前記走行状況情報は、自車の速度情報を含み、前記選択制御手段は、自車の速度が一定速度未満である場合には、車線数に関わらず第2の撮像データを選択させる、請求項1ないし14いずれか1つに記載の走行支援装置。 The driving condition information includes speed information of the host vehicle, and the selection control unit causes the second imaging data to be selected regardless of the number of lanes when the speed of the host vehicle is less than a predetermined speed. The driving support device according to any one of 1 to 14. 前記走行状況情報は、自車の速度情報を含み、前記選択制御手段は、自車の速度が一定速度未満である場合には、車線数に関わらず第1の撮像データを選択させる、請求項1ないし14いずれか1つに記載の走行支援装置。 The travel status information includes speed information of the host vehicle, and the selection control unit causes the first imaging data to be selected regardless of the number of lanes when the speed of the host vehicle is less than a predetermined speed. The driving support device according to any one of 1 to 14. 走行支援装置はさらに、ユーザーからの入力を受け取る入力手段と、前記入力手段に基づいて前記選択手段の動作モードを設定する設定手段を含み、前記選択制御手段は、前記動作モードに基づき第1の撮像データまたは第2の撮像データを選択させる、請求項1ないし16いずれか1つに記載の走行支援装置。 The driving support device further includes an input unit that receives an input from a user, and a setting unit that sets an operation mode of the selection unit based on the input unit. The selection control unit includes a first unit based on the operation mode. The driving support device according to any one of claims 1 to 16, wherein the imaging data or the second imaging data is selected. 自車の前方を撮像する第1の撮像データまたは自車の後方を撮像する第2の撮像データを選択し、選択された第1の撮像データまたは第2の撮像データを表示する手段を備えた走行支援装置が実行する走行支援プログラムであって、
自車が走行している道路が1車線のとき第1の撮像データを選択させ、2車線以上のとき第2の撮像データを選択させる、走行支援プログラム。
There is provided means for selecting first imaging data for imaging the front of the host vehicle or second imaging data for imaging the rear of the host vehicle, and displaying the selected first imaging data or second imaging data. A driving support program executed by the driving support device,
A driving support program for selecting first imaging data when the road on which the vehicle is traveling is one lane, and selecting second imaging data when the road is two or more lanes.
自車の前方を撮像する第1の撮像データまたは自車の後方を撮像する第2の撮像データを選択し、選択された第1の撮像データまたは第2の撮像データを表示する手段を備えた走行支援装置が実行する走行支援プログラムであって、
自車が走行している道路が追い越し区間であるとき第2の撮像データを選択させ、追い越しのない区間であるとき第1の撮像データを選択させる、走行支援プログラム。
There is provided means for selecting first imaging data for imaging the front of the host vehicle or second imaging data for imaging the rear of the host vehicle, and displaying the selected first imaging data or second imaging data. A driving support program executed by the driving support device,
A driving support program that causes the second imaging data to be selected when the road on which the host vehicle is traveling is an overtaking section, and the first imaging data to be selected when the road is not overtaking.
自車の前方を撮像する第1の撮像データまたは自車の後方を撮像する第2の撮像データを選択し、選択された第1の撮像データまたは第2の撮像データを表示する手段を備えた走行支援装置における走行支援方法であって、
自車が走行している道路が1車線のとき第1の撮像データを選択させ、2車線以上のとき第2の撮像データを選択させる、走行支援方法。
There is provided means for selecting first imaging data for imaging the front of the host vehicle or second imaging data for imaging the rear of the host vehicle, and displaying the selected first imaging data or second imaging data. A driving support method in the driving support device,
A driving support method for selecting first imaging data when the road on which the vehicle is traveling is one lane, and selecting second imaging data when the road is two or more lanes.
自車の前方を撮像する第1の撮像データまたは自車の後方を撮像する第2の撮像データを選択し、選択された第1の撮像データまたは第2の撮像データを表示する手段を備えた走行支援装置における走行支援方法であって、
自車が走行している道路が追い越し区間であるとき第2の撮像データを選択させ、追い越しのない区間であるとき第1の撮像データを選択させる、走行支援方法。
There is provided means for selecting first imaging data for imaging the front of the host vehicle or second imaging data for imaging the rear of the host vehicle, and displaying the selected first imaging data or second imaging data. A driving support method in the driving support device,
A driving support method in which the second imaging data is selected when the road on which the vehicle is traveling is an overtaking section, and the first imaging data is selected when the road is not overtaking.
JP2014220153A 2014-10-29 2014-10-29 Driving support device, driving support program, and driving support method Active JP6367081B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014220153A JP6367081B2 (en) 2014-10-29 2014-10-29 Driving support device, driving support program, and driving support method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014220153A JP6367081B2 (en) 2014-10-29 2014-10-29 Driving support device, driving support program, and driving support method

Publications (2)

Publication Number Publication Date
JP2016085712A true JP2016085712A (en) 2016-05-19
JP6367081B2 JP6367081B2 (en) 2018-08-01

Family

ID=55973774

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014220153A Active JP6367081B2 (en) 2014-10-29 2014-10-29 Driving support device, driving support program, and driving support method

Country Status (1)

Country Link
JP (1) JP6367081B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018070077A (en) * 2016-11-02 2018-05-10 株式会社東海理化電機製作所 Imaging system and drive support system
JP2019040279A (en) * 2017-08-23 2019-03-14 クラリオン株式会社 Information output device and information output method
WO2020179750A1 (en) * 2019-03-06 2020-09-10 株式会社デンソー Driving assistance device

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05205196A (en) * 1992-01-24 1993-08-13 Nissan Motor Co Ltd Travel path recognition device for vehicle
JP2003063273A (en) * 2001-08-30 2003-03-05 Hitachi Ltd Vehicle running controller
JP2005309812A (en) * 2004-04-22 2005-11-04 Denso Corp Vehicle periphery display controller
JP2009074888A (en) * 2007-09-20 2009-04-09 Alpine Electronics Inc Inter-vehicle distance measuring device
JP2012113672A (en) * 2010-11-29 2012-06-14 Pioneer Electronic Corp Vehicle display device and sight line guide device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05205196A (en) * 1992-01-24 1993-08-13 Nissan Motor Co Ltd Travel path recognition device for vehicle
JP2003063273A (en) * 2001-08-30 2003-03-05 Hitachi Ltd Vehicle running controller
JP2005309812A (en) * 2004-04-22 2005-11-04 Denso Corp Vehicle periphery display controller
JP2009074888A (en) * 2007-09-20 2009-04-09 Alpine Electronics Inc Inter-vehicle distance measuring device
JP2012113672A (en) * 2010-11-29 2012-06-14 Pioneer Electronic Corp Vehicle display device and sight line guide device

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018070077A (en) * 2016-11-02 2018-05-10 株式会社東海理化電機製作所 Imaging system and drive support system
JP2019040279A (en) * 2017-08-23 2019-03-14 クラリオン株式会社 Information output device and information output method
WO2020179750A1 (en) * 2019-03-06 2020-09-10 株式会社デンソー Driving assistance device
JP2020142665A (en) * 2019-03-06 2020-09-10 株式会社デンソー Operation support device
JP7255240B2 (en) 2019-03-06 2023-04-11 株式会社デンソー Driving support device

Also Published As

Publication number Publication date
JP6367081B2 (en) 2018-08-01

Similar Documents

Publication Publication Date Title
CN108068825B (en) Visual communication system for unmanned vehicles (ADV)
US8712683B2 (en) Sensor controller, navigation device, and sensor control method
US9898006B2 (en) Drive assist device
JP6065889B2 (en) Driving assistance device
JP2006085285A (en) Dangerous vehicle prediction device
JP7112347B2 (en) VEHICLE CONTROL DEVICE, VEHICLE CONTROL METHOD, VEHICLE AND PROGRAM
US20190244515A1 (en) Augmented reality dsrc data visualization
US20170178591A1 (en) Sign display apparatus and method for vehicle
JP2017138887A (en) Automatic driving continuation propriety determination device in merging with lane, and method for determining automatic driving continuation propriety
JP4548154B2 (en) Driving support device and driving support method
JP4561338B2 (en) Driving support device
WO2017104209A1 (en) Driving assistance device
JP2019049812A (en) Traveling position evaluation system
JP2010146459A (en) Driving support device
JP7215596B2 (en) Operation control method and operation control device
JP6367081B2 (en) Driving support device, driving support program, and driving support method
JP2019139401A (en) Collision avoidance support device, program, and collision avoidance support method
JP6654440B2 (en) Vehicle recognition device and vehicle recognition method
JP2008090654A (en) Driving operation support device
EP2797027A1 (en) A vehicle driver alert arrangement, a vehicle and a method for alerting a vehicle driver
JP5218174B2 (en) Vehicle control apparatus and vehicle control system
JP7424327B2 (en) Vehicle display control device, vehicle display control system, and vehicle display control method
JP6650635B2 (en) Determination apparatus, determination method, and determination program
JP2006306164A (en) Running control device of vehicle
JP2013254296A (en) Driving support device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170718

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180425

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180508

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180618

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180703

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180704

R150 Certificate of patent or registration of utility model

Ref document number: 6367081

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150