JP2008149786A - Vehicle driving assistance device and vehicle driving assistance system - Google Patents

Vehicle driving assistance device and vehicle driving assistance system Download PDF

Info

Publication number
JP2008149786A
JP2008149786A JP2006337445A JP2006337445A JP2008149786A JP 2008149786 A JP2008149786 A JP 2008149786A JP 2006337445 A JP2006337445 A JP 2006337445A JP 2006337445 A JP2006337445 A JP 2006337445A JP 2008149786 A JP2008149786 A JP 2008149786A
Authority
JP
Japan
Prior art keywords
vehicle
image
specific object
driver
driving support
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2006337445A
Other languages
Japanese (ja)
Inventor
Takanori Kume
孝則 久米
Teru Iyoda
輝 伊与田
Toshihiro Ishikawa
敏弘 石川
Haruhisa Kore
治久 是
Shota Kawamata
正太 川又
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mazda Motor Corp
Original Assignee
Mazda Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mazda Motor Corp filed Critical Mazda Motor Corp
Priority to JP2006337445A priority Critical patent/JP2008149786A/en
Publication of JP2008149786A publication Critical patent/JP2008149786A/en
Pending legal-status Critical Current

Links

Landscapes

  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To maintain safety in driving a vehicle at a high level by recognizing a specific object easily from an indicated image. <P>SOLUTION: A vehicle driving assistance device 10 is equipped with a view field interception determining unit 16a to determine whether a front view field of the driver of the own vehicle 1 is intercepted by the other forward vehicle 2, an image acquiring unit 16b to acquire an image including a frontal image of the vehicle ahead 2 when the front view field is determined to be intercepted by the forward vehicle 2, a specific object recognition unit 16c to recognize out of the acquired image the specific object which is not visible to the driver because of interception by the forward vehicle 2 and which nevertheless the driver should recognize visually, an image reading unit 16e to read a simplified image obtained by the simplification of the recognized specific object, and a head-up display indicating unit 17 to indicate only the simplified image which is read out. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、車両用運転支援装置及び車両用運転支援システムに関するものである。   The present invention relates to a vehicle driving support device and a vehicle driving support system.

従来から、車載画像表示装置が知られている(例えば特許文献1参照)。この車載画像表示装置では、自車両の運転者の前方視界が前方車両(例えばトラック、バス等)に遮られているときに、その前方車両に遮られてその運転者が視認不可能な、前方車両の前方を撮影した前方画像を取得し、その画像を表示するようになっている。これにより、運転の安全性を維持することができる。
特開2004−114709号公報
Conventionally, an in-vehicle image display device is known (for example, see Patent Document 1). In this in-vehicle image display device, when the forward view of the driver of the host vehicle is blocked by a forward vehicle (for example, a truck, a bus, etc.), the forward vehicle is blocked by the forward vehicle and the driver cannot see the front. A front image obtained by photographing the front of the vehicle is acquired and the image is displayed. Thereby, driving safety can be maintained.
JP 2004-114709 A

しかしながら、上記車載画像表示装置では、前方画像をそのまま表示するので、その表示画像には、運転者が視認する必要がないものが多く含まれている。したがって、運転者は、その表示画像から運転者が視認すべき特定物(例えば車両、歩行者、信号機、交差点等)を認識しにくくなり、運転の安全性を高いレベルで維持することができないおそれがある。   However, since the in-vehicle image display device displays the front image as it is, the display image includes many images that the driver does not need to visually recognize. Therefore, it becomes difficult for the driver to recognize a specific object (for example, a vehicle, a pedestrian, a traffic light, an intersection, etc.) that the driver should visually recognize from the display image, and the driver's safety may not be maintained at a high level. There is.

本発明は、かかる点に鑑みてなされたものであり、その目的とするところは、運転の安全性を高いレベルで維持することにある。   This invention is made | formed in view of this point, The place made into the objective is to maintain the safety | security of a driving | operation at a high level.

第1の発明は、車両の運転を支援するための車両用運転支援装置であって、自車両の運転者の前方視界が前方車両に遮られているかを判定する視界遮断判定手段と、上記前方視界が上記前方車両に遮られていると判定されたときに、該前方車両の前方画像を含む画像を取得する画像取得手段と、上記取得された画像から、上記前方車両に遮られて上記運転者が視認不可能でかつ該運転者が視認すべき特定物を認識する特定物認識手段と、上記認識された特定物を簡略化した簡略画像を読み出す画像読出し手段と、上記読み出された簡略画像のみ表示する画像表示手段とを備えたことを特徴とするものである。   A first aspect of the present invention is a vehicle driving support device for supporting driving of a vehicle, wherein a visibility blockage determining means for determining whether a forward view of a driver of the host vehicle is blocked by a forward vehicle, and the front When it is determined that the field of view is obstructed by the preceding vehicle, the image obtaining means for obtaining an image including a forward image of the preceding vehicle, and the driving performed by being obstructed by the preceding vehicle from the obtained image. A specific object recognizing unit that recognizes a specific object that the driver cannot visually recognize and that the driver should visually recognize, an image reading unit that reads out a simplified image obtained by simplifying the recognized specific object, and the read-out simplified unit An image display means for displaying only an image is provided.

これにより、取得された、前方車両の前方画像を含む画像から、前方車両に遮られて自車両の運転者が視認不可能でかつその運転者が視認すべき特定物を認識し、その認識された特定物を簡略化した簡略画像を読み出し、その読み出された簡略画像のみ表示するので、運転者は、その表示画像からその特定物を容易に認識することができ、運転の安全性を高いレベルで維持することができる。   As a result, from the acquired image including the forward image of the preceding vehicle, a specific object that is blocked by the preceding vehicle and cannot be visually recognized by the driver of the host vehicle and that the driver should visually recognize is recognized and recognized. Therefore, the driver can easily recognize the specific object from the display image, and the driving safety is high. Can be maintained at a level.

第2の発明は、上記第1の発明において、上記認識された特定物のうち上記自車両の最も近くに存在するものを抽出する特定物抽出手段をさらに備え、上記画像読出し手段は、上記抽出された特定物を簡略化した簡略画像を読み出すように構成されていることを特徴とするものである。   According to a second aspect of the present invention, in the first aspect of the present invention, the second aspect of the invention further comprises specific object extraction means for extracting the recognized specific object that is closest to the host vehicle, and the image reading means is the extraction section. It is configured to read out a simplified image obtained by simplifying the specified object.

これにより、認識された特定物のうち自車両の最も近くに存在するものを抽出し、その抽出された特定物を簡略化した簡略画像を読み出し、その読み出された簡略画像のみ表示するので、運転者は、その表示画像からその特定物をより一層容易に認識することができ、運転の安全性をより一層高いレベルで維持することができる。   As a result, the recognized specific object that is closest to the host vehicle is extracted, a simplified image obtained by simplifying the extracted specific object is read, and only the read simplified image is displayed. The driver can more easily recognize the specific object from the display image, and can maintain driving safety at a higher level.

第3の発明は、上記第1の発明において、上記認識された特定物のうち上記自車両の周囲の所定範囲内に存在するものを抽出する特定物抽出手段をさらに備え、上記画像読出し手段は、上記抽出された特定物を簡略化した簡略画像を読み出すように構成されていることを特徴とするものである。   According to a third aspect of the present invention, in the first aspect of the present invention, the image reading means further comprises specific object extracting means for extracting the recognized specific objects existing within a predetermined range around the host vehicle. A simple image obtained by simplifying the extracted specific object is read out.

これにより、認識された特定物のうち自車両の周囲の所定範囲内に存在するものを抽出し、その抽出された特定物を簡略化した簡略画像を読み出し、その読み出された簡略画像のみ表示するので、運転者は、その表示画像からその特定物をより一層容易に認識することができ、運転の安全性をより一層高いレベルで維持することができる。   As a result, among the recognized specific objects, those existing within a predetermined range around the host vehicle are extracted, a simplified image obtained by simplifying the extracted specific objects is read, and only the read simplified image is displayed. Thus, the driver can more easily recognize the specific object from the display image, and can maintain driving safety at a higher level.

第4の発明は、上記第1〜3のいずれか1つの発明において、上記認識された特定物の状態に応じて上記簡略画像を変更する画像変更手段をさらに備えたことを特徴とするものである。   According to a fourth aspect of the present invention, in any one of the first to third aspects, the image processing device further includes image changing means for changing the simplified image according to the recognized state of the specific object. is there.

これにより、認識された特定物の状態に応じて簡略画像を変更するので、簡略画像を認識された特定物の状態に応じたものにすることができる。このため、運転者は、認識された特定物の状態を正確に認識することができる。   Thereby, since a simple image is changed according to the state of the recognized specific thing, a simple image can be used according to the state of the recognized specific thing. For this reason, the driver can accurately recognize the state of the recognized specific object.

第5の発明は、上記第1〜4のいずれか1つの発明において、上記画像表示手段は、フロントウィンドウ上に表示するように構成されていることを特徴とするものである。   According to a fifth invention, in any one of the first to fourth inventions, the image display means is configured to display on a front window.

これにより、フロントウィンドウ上に表示するので、運転者の視認動作量を低減することができ、その負担を軽減することができる。   Thereby, since it displays on a front window, a driver | operator's visual recognition operation amount can be reduced and the burden can be eased.

第6の発明は、上記第5の発明において、上記前方車両の背面の色に応じて上記簡略画像の色を変更する画像色補正手段をさらに備えたことを特徴とするものである。   According to a sixth aspect, in the fifth aspect, the apparatus further comprises image color correction means for changing the color of the simplified image in accordance with the color of the back surface of the preceding vehicle.

これにより、前方車両の背面の色に応じて簡略画像の色を変更するので、簡略画像の色を前方車両の背面の色に応じたものにすることができる。このため、運転者は、簡略画像を容易に視認することができる。   Thereby, since the color of a simple image is changed according to the color of the back surface of a front vehicle, the color of a simple image can be made according to the color of the back surface of a front vehicle. For this reason, the driver | operator can visually recognize a simple image easily.

第7の発明は、上記第1〜6のいずれか1つの発明において、上記画像取得手段は、上記画像を上記前方車両から車車間通信で取得するように構成されていることを特徴とするものである。   According to a seventh invention, in any one of the first to sixth inventions, the image acquisition means is configured to acquire the image from the preceding vehicle through inter-vehicle communication. It is.

これにより、前方車両の前方画像を含む画像を前方車両から車車間通信で取得するので、その画像を容易に取得することができる。   Thereby, since the image containing the front image of a front vehicle is acquired from a front vehicle by vehicle-to-vehicle communication, the image can be acquired easily.

第8の発明は、上記第1〜6のいずれか1つの発明において、上記画像取得手段は、上記画像を路側カメラから路車間通信で取得するように構成されていることを特徴とするものである。   An eighth invention is characterized in that, in any one of the first to sixth inventions, the image acquisition means is configured to acquire the image from a roadside camera by road-to-vehicle communication. is there.

これにより、前方車両の前方画像を含む画像を路側カメラから路車間通信で取得するので、その画像を容易に取得することができる。   Thereby, since the image containing the front image of a front vehicle is acquired from roadside camera by road-to-vehicle communication, the image can be acquired easily.

第9の発明は、車両の運転を支援するための車両用運転支援システムであって、自車両の運転者の前方視界が前方車両に遮られているかを判定する視界遮断判定手段と、上記前方視界が上記前方車両に遮られていると判定されたときに、該前方車両の前方画像を含む画像を取得する画像取得手段と、上記取得された画像から、上記前方車両に遮られて上記運転者が視認不可能でかつ該運転者が視認すべき特定物を認識する特定物認識手段と、上記認識された特定物を簡略化した簡略画像を読み出す画像読出し手段と、上記読み出された簡略画像のみ表示する画像表示手段とを備えたことを特徴とするものである。   A ninth aspect of the present invention is a vehicle driving support system for supporting driving of a vehicle, the visibility blocking determining means for determining whether the forward visibility of the driver of the host vehicle is blocked by the forward vehicle, and the front When it is determined that the field of view is obstructed by the preceding vehicle, the image obtaining means for obtaining an image including a forward image of the preceding vehicle, and the driving performed by being obstructed by the preceding vehicle from the obtained image. A specific object recognizing unit that recognizes a specific object that the driver cannot visually recognize and that the driver should visually recognize, an image reading unit that reads out a simplified image obtained by simplifying the recognized specific object, and the read-out simplified unit An image display means for displaying only an image is provided.

第10の発明は、車両の運転を支援するための車両用運転支援装置であって、自車両の運転者の前方視界が前方車両に遮られているかを判定する視界遮断判定手段と、上記前方視界が上記前方車両に遮られていると判定されたときに、該前方車両の前方画像を含む画像を取得する画像取得手段と、上記取得された画像から、上記前方車両に遮られて上記運転者が視認不可能でかつ該運転者が視認すべき特定物を認識する特定物認識手段と、上記認識された特定物の画像のみ表示する画像表示手段とを備えたことを特徴とするものである。   A tenth aspect of the invention is a vehicular driving support apparatus for supporting driving of a vehicle, the visibility blocking determining means for determining whether the forward visibility of the driver of the host vehicle is blocked by the forward vehicle, and the front When it is determined that the field of view is obstructed by the preceding vehicle, the image obtaining means for obtaining an image including a forward image of the preceding vehicle, and the driving performed by being obstructed by the preceding vehicle from the obtained image. A specific object recognizing means for recognizing a specific object that cannot be visually recognized by the driver and an image display means for displaying only an image of the recognized specific object. is there.

これにより、取得された、前方車両の前方画像を含む画像から、前方車両に遮られて自車両の運転者が視認不可能でかつその運転者が視認すべき特定物を認識し、その認識された特定物の画像のみ表示するので、運転者は、その表示画像からその特定物を容易に認識することができ、運転の安全性を高いレベルで維持することができる。   As a result, from the acquired image including the forward image of the preceding vehicle, a specific object that is blocked by the preceding vehicle and cannot be visually recognized by the driver of the host vehicle and that the driver should visually recognize is recognized and recognized. Since only the image of the specific object is displayed, the driver can easily recognize the specific object from the display image, and can maintain the driving safety at a high level.

第11の発明は、車両の運転を支援するための車両用運転支援システムであって、自車両の運転者の前方視界が前方車両に遮られているかを判定する視界遮断判定手段と、上記前方視界が上記前方車両に遮られていると判定されたときに、該前方車両の前方画像を含む画像を取得する画像取得手段と、上記取得された画像から、上記前方車両に遮られて上記運転者が視認不可能でかつ該運転者が視認すべき特定物を認識する特定物認識手段と、上記認識された特定物の画像のみ表示する画像表示手段とを備えたことを特徴とするものである。   An eleventh aspect of the present invention is a vehicle driving support system for supporting driving of a vehicle, the visibility blocking determining means for determining whether the forward visibility of the driver of the host vehicle is blocked by the forward vehicle, and the front When it is determined that the field of view is obstructed by the preceding vehicle, the image obtaining means for obtaining an image including a forward image of the preceding vehicle, and the driving performed by being obstructed by the preceding vehicle from the obtained image. A specific object recognizing means for recognizing a specific object that cannot be visually recognized by the driver and an image display means for displaying only an image of the recognized specific object. is there.

本発明によれば、取得された、前方車両の前方画像を含む画像から、前方車両に遮られて自車両の運転者が視認不可能でかつその運転者が視認すべき特定物を認識し、その認識された特定物を簡略化した簡略画像を読み出し、その読み出された簡略画像のみ表示するので、運転者は、その表示画像からその特定物を容易に認識することができ、運転の安全性を高いレベルで維持することができる。   According to the present invention, from the acquired image including the forward image of the preceding vehicle, the driver recognizes a specific object that is blocked by the preceding vehicle and cannot be visually recognized by the driver of the host vehicle, and that the driver should visually recognize, Since the simplified image obtained by simplifying the recognized specific object is read and only the read simplified image is displayed, the driver can easily recognize the specific object from the displayed image, and driving safety. Sex can be maintained at a high level.

別の発明によれば、取得された、前方車両の前方画像を含む画像から、前方車両に遮られて自車両の運転者が視認不可能でかつその運転者が視認すべき特定物を認識し、その認識された特定物の画像のみ表示するので、運転者は、その表示画像からその特定物を容易に認識することができ、運転の安全性を高いレベルで維持することができる。   According to another invention, from the acquired image including the forward image of the preceding vehicle, a specific object that is blocked by the preceding vehicle and cannot be visually recognized by the driver of the host vehicle and that the driver should visually recognize is recognized. Since only the image of the recognized specific object is displayed, the driver can easily recognize the specific object from the display image, and can maintain the driving safety at a high level.

以下、本発明の実施形態を図面に基づいて詳細に説明する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

(実施形態1)
図1は、本発明の実施形態に係る車両用運転支援装置10のブロック図であり、図2は、車両用運転支援装置10が搭載された車両1の概略平面図であり、図3は、車両用運転支援装置10が搭載された車両1の周辺の様子を示す側面図である。図3では、車両1の周辺車両を符号a、歩行者を符号h、信号機を符号s、各カメラ2a,3,11の撮影範囲を一点鎖線で表している。車両用運転支援装置10は、車両1の運転を支援するためのものであって、図1〜図3に示すように、カメラ11、車速センサ12、通信アンテナ13、GPSアンテナ14、記憶装置15、画像処理装置16、及びヘッドアップディスプレイ表示用装置17(画像表示手段に相当)を備えている。この画像処理装置16には、カメラ11、車速センサ12、通信アンテナ13、GPSアンテナ14、記憶装置15、及びヘッドアップディスプレイ表示用装置17が、信号の授受可能に接続されている。
(Embodiment 1)
FIG. 1 is a block diagram of a vehicle driving support apparatus 10 according to an embodiment of the present invention, FIG. 2 is a schematic plan view of a vehicle 1 on which the vehicle driving support apparatus 10 is mounted, and FIG. It is a side view which shows the mode of the periphery of the vehicle 1 by which the driving assistance device 10 for vehicles is mounted. In FIG. 3, a vehicle around the vehicle 1 is indicated by a symbol a, a pedestrian is indicated by a symbol h, a traffic light is indicated by a symbol s, and a shooting range of each of the cameras 2a, 3 and 11 is indicated by a dashed line. The vehicle driving support device 10 is for supporting the driving of the vehicle 1 and, as shown in FIGS. 1 to 3, a camera 11, a vehicle speed sensor 12, a communication antenna 13, a GPS antenna 14, and a storage device 15. , An image processing device 16 and a head-up display display device 17 (corresponding to image display means). A camera 11, a vehicle speed sensor 12, a communication antenna 13, a GPS antenna 14, a storage device 15, and a head-up display display device 17 are connected to the image processing device 16 so as to be able to exchange signals.

上記カメラ11は、ステレオカメラからなり、自車両1の前方を撮影し、その前方画像を画像処理装置16へと発信する。   The camera 11 is a stereo camera, photographs the front of the host vehicle 1, and transmits the front image to the image processing device 16.

上記画像処理装置16は、視界遮断判定器16a(視界遮断判定手段に相当)、画像取得器16b(画像取得手段に相当)、特定物認識器16c(特定物認識手段に相当)、特定物抽出器16d(特定物抽出手段に相当)、画像読出し器16e(画像読出し手段に相当)、画像変更器16f(画像変更手段に相当)、及び画像色補正器16g(画像色補正手段に相当)を有している。   The image processing device 16 includes a visual field interruption determination unit 16a (corresponding to visual field interruption determination unit), an image acquisition unit 16b (corresponding to image acquisition unit), a specific object recognition unit 16c (corresponding to specific object recognition unit), and a specific object extraction. A device 16d (corresponding to the specific object extracting means), an image reader 16e (corresponding to the image reading means), an image changing device 16f (corresponding to the image changing means), and an image color correcting device 16g (corresponding to the image color correcting means). Have.

視界遮断判定器16aは、自車両1の運転者の前方視界が前方車両2(自車両1のすぐ前の車両。図3ではトラック)に遮られているかを判定する。具体的には、視界遮断判定器16aは、図4に示すように、カメラ11からの画像から自車両1の運転者の前方視界画像Vを抽出し、その前方視界画像Vから等距離面D(図4では斜線部分)を抽出し、その等距離面Dのその前方視界画像Vに対する面積占有率が所定値α(例えば80%)以上であるときに、自車両1の運転者の前方視界が前方車両2に遮られていると判定するようになっている。なお、自車両1の運転者の前方視界は、予め決められた範囲であったり、アイカメラ(図示せず)により検出された自車両1の運転者の視線に応じて決められた範囲であったりする。また、等距離面Dは、自車両1との距離が等しい前方車両2の背面であり、この距離は、カメラ11からの画像に基づき算出される。   The visibility cut-off determination device 16a determines whether the front view of the driver of the host vehicle 1 is blocked by the front vehicle 2 (a vehicle immediately in front of the host vehicle 1, a truck in FIG. 3). Specifically, as shown in FIG. 4, the visual field cut-off determination unit 16 a extracts the front view image V of the driver of the host vehicle 1 from the image from the camera 11 and equidistant plane D from the front view image V. (The hatched portion in FIG. 4) is extracted, and when the area occupancy ratio of the equidistant surface D with respect to the forward view image V is equal to or greater than a predetermined value α (for example, 80%), the forward view of the driver of the host vehicle 1 Is determined to be blocked by the forward vehicle 2. The forward view of the driver of the host vehicle 1 is a predetermined range or a range determined according to the driver's line of sight detected by an eye camera (not shown). Or The equidistant surface D is the back surface of the front vehicle 2 having the same distance from the host vehicle 1, and this distance is calculated based on the image from the camera 11.

上記画像取得器16bは、自車両1の運転者の前方視界が前方車両2に遮られていると判定されたときに、画像要求信号を通信アンテナ13を介して車外へと発信し、前方車両2の前方を撮影した前方画像を含む画像を取得する。画像取得器16bは、その画像を、その画像要求信号を受信した前方車両2から車車間通信で取得したり、その画像要求信号を受信した、道路上に設置された路側カメラ3(本実施形態ではステレオカメラ)から路車間通信で取得したりするようになっている。具体的には、前方車両2のカメラ2a(本実施形態ではステレオカメラ)によりその前方を撮影した画像(図3及び図5(a)参照。図5(a)の一点鎖線は撮影範囲)を、前方車両2及び自車両1の通信アンテナ2b,13を介して手に入れたり、路側カメラ3によりその後方を撮影した画像(図3及び図5(b)参照。図5(b)の一点鎖線は撮影範囲)を、路側カメラ3及び自車両1の通信アンテナ3a,13を介して手に入れたりする。なお、図5では、車両1の周辺車両を符号a、歩行者を符号h、信号機を符号s、交差点を符号iで表している。   When it is determined that the forward view of the driver of the host vehicle 1 is blocked by the forward vehicle 2, the image acquisition unit 16b transmits an image request signal to the outside of the vehicle via the communication antenna 13, and the forward vehicle An image including a front image obtained by photographing the front of 2 is acquired. The image acquisition unit 16b acquires the image by vehicle-to-vehicle communication from the preceding vehicle 2 that has received the image request signal, or receives the image request signal from the roadside camera 3 (this embodiment). In this case, it is obtained by road-to-vehicle communication from a stereo camera). Specifically, an image (see FIG. 3 and FIG. 5A) taken in front of the front vehicle 2 by a camera 2a (stereo camera in the present embodiment). A one-dot chain line in FIG. Images obtained through the communication antennas 2b and 13 of the front vehicle 2 and the host vehicle 1 or taken from behind by the roadside camera 3 (see FIG. 3 and FIG. 5B. One point of FIG. 5B) The chain line indicates the shooting range) through the roadside camera 3 and the communication antennas 3a and 13 of the host vehicle 1. In FIG. 5, a vehicle around the vehicle 1 is denoted by a, a pedestrian is denoted by h, a traffic light is denoted by s, and an intersection is denoted by i.

上記特定物認識器16cは、画像取得器16bにより取得された画像から、前方車両2に遮られて自車両1の運転者がその一部又は全部を視認不可能でかつその運転者が運転中に視認すべき特定物をパターンマッチングで認識する。この特定物として、車両1の周辺車両a(二輪車を含む)、歩行者h、信号機s、及び交差点iがある。パターンマッチングは、記憶装置15に予め記憶されている、各特定物の基準パターンに基づき行われる。   The specific object recognizer 16c is blocked by the preceding vehicle 2 from the image acquired by the image acquirer 16b, and the driver of the host vehicle 1 cannot visually recognize part or all thereof, and the driver is driving. A specific object to be visually recognized is recognized by pattern matching. As this specific object, there are a surrounding vehicle a (including a two-wheeled vehicle), a pedestrian h, a traffic light s, and an intersection i. The pattern matching is performed based on the reference pattern of each specific object stored in advance in the storage device 15.

上記特定物抽出器16dは、特定物認識器16cにより認識された各特定物のうち自車両1の最も近くに存在するものを抽出する。上記画像読出し器16eは、特定物抽出器16dにより抽出された各特定物を簡略化した簡略画像を読み出す。この簡略画像は、各特定物毎に記憶装置15に予め記憶されている。   The specific object extractor 16d extracts a specific object recognized by the specific object recognizer 16c, which is present closest to the host vehicle 1. The image reader 16e reads a simplified image obtained by simplifying each specific object extracted by the specific object extractor 16d. This simplified image is stored in advance in the storage device 15 for each specific object.

上記画像変更器16fは、抽出された各特定物の実際の状態に応じて画像読出し器16eにより読み出された各簡略画像を変更する。上記画像色補正器16gは、前方車両2の背面の色に応じて、読み出された各簡略画像の色を変更する。具体的には、画像色補正器16gは、前方車両2の背面の色に応じて、各簡略画像の色を車両1の運転者が視認しやすいような色に変更する。   The image changer 16f changes each simplified image read by the image reader 16e in accordance with the actual state of each extracted specific object. The image color corrector 16g changes the color of each read-out simple image according to the color of the back surface of the vehicle 2 ahead. Specifically, the image color corrector 16g changes the color of each simplified image to a color that is easy for the driver of the vehicle 1 to visually recognize according to the color of the back surface of the vehicle 2 ahead.

上記ヘッドアップディスプレイ表示用装置17は、各簡略画像のみフロントウィンドウ1a上における前方車両2の背面に対応(対向)する部分に表示する。ここで、各特定物を実画像で表示するのではなく、簡略画像で表示するので、たとえヘッドアップディスプレイ表示用装置17が低性能のものであっても、運転者は、その表示画像からそれらの各特定物を容易に認識することができ、ヘッドアップディスプレイ表示用装置17の低コスト化を図ることができる。簡略画像の表示位置は、その簡略画像に対応する特定物の実際の位置に応じて決定される。   The head-up display display device 17 displays only each simplified image on a portion corresponding to (opposed to) the rear surface of the front vehicle 2 on the front window 1a. Here, since each specific object is displayed not as a real image but as a simple image, even if the head-up display display device 17 has a low performance, the driver can These specific items can be easily recognized, and the cost of the head-up display display device 17 can be reduced. The display position of the simplified image is determined according to the actual position of the specific object corresponding to the simplified image.

−車両用運転支援装置の画像処理制御−
(全体)
以下、図6のフローチャートを参照しながら、車両用運転支援装置10の画像処理制御の全体について説明する。
-Image processing control of vehicle driving support device-
(The entire)
Hereinafter, the overall image processing control of the vehicle driving support apparatus 10 will be described with reference to the flowchart of FIG. 6.

ステップSA1では、車速センサ12を含む各種センサからの信号が入力される。ステップSA2では、自車1の前方画像を自車1のカメラ11から取得する。ステップSA3では、その自車1の前方画像から自車ドライバの視野領域画像V(図4参照)を切り出す。ステップSA4では、その自車ドライバの視野領域画像Vから等距離面D(図4参照)を抽出する。ステップSA5では、その等距離面Dのその視野領域画像Vに対する面積占有率を算出する。ステップSA6では、その面積占有率が所定値αよりも大きいか否かを判定する。ステップSA6の判定結果がYESの場合はステップSA7に進み、NOの場合はステップSA1にリターンする。   In step SA1, signals from various sensors including the vehicle speed sensor 12 are input. In step SA2, a front image of the host vehicle 1 is acquired from the camera 11 of the host vehicle 1. In step SA3, a field-of-view image V (see FIG. 4) of the vehicle driver is cut out from the front image of the vehicle 1. In step SA4, an equidistant surface D (see FIG. 4) is extracted from the field-of-view image V of the vehicle driver. In step SA5, the area occupation ratio of the equidistant surface D with respect to the visual field region image V is calculated. In step SA6, it is determined whether or not the area occupation ratio is larger than a predetermined value α. If the determination result in step SA6 is YES, the process proceeds to step SA7, and if NO, the process returns to step SA1.

ステップSA7では、前方車両2の前方画像を含む画像を車車間通信又は路車間通信で取得する。ステップSA8では、その画像から、前方車両2に遮られて自車1の運転者が視認しにくくかつその運転者が運転中に視認する必要がある、前方車両2の向こう側に位置する特定物を認識できたか否かを判定する。ステップSA8の判定結果がYESの場合はステップSA9に進み、NOの場合はステップSA1にリターンする。   In step SA7, an image including a front image of the front vehicle 2 is acquired by vehicle-to-vehicle communication or road-to-vehicle communication. In step SA8, a specific object located on the other side of the forward vehicle 2 that is obstructed by the forward vehicle 2 and is difficult for the driver of the host vehicle 1 to view while the driver needs to visually recognize while driving. It is determined whether or not it was recognized. If the determination result in step SA8 is YES, the process proceeds to step SA9, and if NO, the process returns to step SA1.

ステップSA9では、その認識された特定物から表示対象を抽出する。ステップSA10では、その表示対象の簡略画像をフロントウィンドウ1a上に表示する。その後、エンドする。   In step SA9, a display target is extracted from the recognized specific object. In step SA10, the simplified image to be displayed is displayed on the front window 1a. Then end.

(表示対象抽出)
以下、図7のフローチャートを参照しながら、車両用運転支援装置10の表示対象抽出制御について説明する。
(Display target extraction)
Hereinafter, the display target extraction control of the vehicle driving support apparatus 10 will be described with reference to the flowchart of FIG.

ステップSB1では、自車1の位置情報をGPSアンテナ14を介して取得する。ステップSB2では、ステップSA7で取得された画像が前方車両2からの画像であるか否かを判定する。ステップSB2の判定結果がYESの場合(つまり、前方車両2からの画像である場合)はステップSB3に進み、NOの場合(つまり、路側カメラ3からの画像である場合)はステップSB6に進む。   In step SB 1, the position information of the host vehicle 1 is acquired via the GPS antenna 14. In step SB2, it is determined whether or not the image acquired in step SA7 is an image from the preceding vehicle 2. If the determination result in step SB2 is YES (that is, if it is an image from the preceding vehicle 2), the process proceeds to step SB3, and if NO (that is, if it is an image from the roadside camera 3), the process proceeds to step SB6.

ステップSB3では、ステップSA8で認識された特定物の前方車両2との距離をステップSA7で取得された画像に基づき算出する。ステップSB4では、特定物に含まれている周辺車両aのうち、前方車両2との距離が最も近い(つまり、自車両1との距離が最も近い)周辺車両aを表示対象として抽出する(図5参照)。このとき、この周辺車両aのブレーキランプ及び方向指示器の点灯状態も検出する。ステップSB5では、特定物に含まれている歩行者h、信号機s、及び交差点iのうち、前方車両2との距離が最も近い歩行者h、信号機s、及び交差点iを表示対象として抽出する(図5参照)。このとき、歩行者hの移動方向、及び信号機sの点灯状態も検出する。その後、エンドする。   In step SB3, the distance between the specific object recognized in step SA8 and the preceding vehicle 2 is calculated based on the image acquired in step SA7. In step SB4, the peripheral vehicle a having the shortest distance from the preceding vehicle 2 among the peripheral vehicles a included in the specific object (that is, the closest distance to the own vehicle 1) is extracted as a display target (FIG. 5). At this time, the lighting state of the brake lamp and the direction indicator of the surrounding vehicle a is also detected. In step SB5, among pedestrians h, traffic lights s, and intersections i included in the specific object, pedestrians h, traffic lights s, and intersections i that are closest to the preceding vehicle 2 are extracted as display targets ( (See FIG. 5). At this time, the moving direction of the pedestrian h and the lighting state of the traffic light s are also detected. Then end.

一方、ステップSB6では、路側カメラ3の位置情報を路車間通信で取得する。ステップSB7では、ステップSA8で認識された特定物の路側カメラ3との距離をステップSA7で取得された画像に基づき算出する。ステップSB8では、特定物の自車1との距離を、自車1の位置情報、路側カメラ3の位置情報、特定物の路側カメラ3との距離に基づき算出する。   On the other hand, in step SB6, the position information of the roadside camera 3 is acquired by road-to-vehicle communication. In step SB7, the distance between the specific object recognized in step SA8 and the roadside camera 3 is calculated based on the image acquired in step SA7. In step SB8, the distance of the specific object from the own vehicle 1 is calculated based on the position information of the own vehicle 1, the position information of the roadside camera 3, and the distance from the specific object of the roadside camera 3.

ステップSB9では、ステップSA8で認識された特定物から、自車1との距離が、自車1前方の遮蔽物の自車1との距離(この距離は自車1で検出される)と近似する特定物(つまり、前方車両2)を抽出する。ステップSB10では、ステップSA8で認識された特定物から、ステップSB9で抽出された特定物を除外する。ステップSB11では、特定物に含まれている周辺車両aのうち、自車1との距離が最も近い周辺車両aを表示対象として抽出する(図5参照)。このとき、この周辺車両aのブレーキランプ及び方向指示器の点灯状態も検出する。ステップSB12では、特定物に含まれている歩行者h、信号機s、及び交差点iのうち、自車1との距離が最も近い歩行者h、信号機s、及び交差点iを表示対象として抽出する(図5参照)。このとき、歩行者hの移動方向、及び信号機sの点灯状態も検出する。その後、エンドする。   In step SB9, from the specific object recognized in step SA8, the distance from the own vehicle 1 is approximate to the distance from the subject vehicle 1 in front of the own vehicle 1 (this distance is detected by the own vehicle 1). The specific object (that is, the preceding vehicle 2) to be extracted is extracted. In step SB10, the specific object extracted in step SB9 is excluded from the specific object recognized in step SA8. In step SB11, the peripheral vehicle a closest to the host vehicle 1 is extracted as a display target from the peripheral vehicles a included in the specific object (see FIG. 5). At this time, the lighting state of the brake lamp and the direction indicator of the surrounding vehicle a is also detected. In step SB12, among pedestrians h, traffic lights s, and intersections i included in the specific object, pedestrians h, traffic lights s, and intersections i that are closest to the vehicle 1 are extracted as display targets ( (See FIG. 5). At this time, the moving direction of the pedestrian h and the lighting state of the traffic light s are also detected. Then end.

(簡略画像表示)
以下、図8及び図9のフローチャートを参照しながら、車両用運転支援装置10の簡略画像表示制御について説明する。
(Simplified image display)
Hereinafter, the simplified image display control of the vehicle driving support apparatus 10 will be described with reference to the flowcharts of FIGS. 8 and 9.

ステップSC1では、表示対象に信号機sが含まれているか否かを判定する。ステップSC1の判定結果がYESの場合はステップSC2に進み、NO場合はステップSC6に進む。   In step SC1, it is determined whether or not the display object includes the traffic light s. If the determination result in step SC1 is YES, the process proceeds to step SC2, and if NO, the process proceeds to step SC6.

ステップSC2では、その信号機sの簡略画像を記憶装置15から読み出す。ステップSC3では、自車1との距離(又は前方車両2との距離)に応じてその簡略画像の大きさを補正する。具体的には、その距離が近いほど、その簡略画像の大きさを大きくし、その距離が遠いほど、その簡略画像の大きさを小さくする。ステップSC4では、等距離面D(つまり、前方車両2の背面)の色に応じてその簡略画像の信号機本体部の色を補正する。ステップSC5では、現実の信号機sの点灯状態に応じてその簡略画像を補正する。具体的には、青色点灯中の場合は、その簡略画像s´の左側の最も小さいランプの中の色を青色に(図10(a)参照)、黄色点灯中の場合は、中央の中ぐらいのランプの中の色を黄色に(図10(b)参照)、赤色点灯中の場合は、左側の最も大きいランプの中の色を赤色にする(図10(c)参照)。   In step SC2, the simplified image of the traffic light s is read from the storage device 15. In step SC3, the size of the simplified image is corrected according to the distance from the own vehicle 1 (or the distance from the preceding vehicle 2). Specifically, the size of the simplified image is increased as the distance is shorter, and the size of the simplified image is decreased as the distance is longer. In step SC4, the color of the traffic light main body of the simplified image is corrected according to the color of the equidistant surface D (that is, the back surface of the preceding vehicle 2). In step SC5, the simplified image is corrected according to the actual lighting state of the traffic light s. Specifically, when the blue light is on, the color in the smallest lamp on the left side of the simplified image s ′ is blue (see FIG. 10A). The color in the lamp is yellow (see FIG. 10B), and when the red lamp is lit, the color in the largest lamp on the left side is red (see FIG. 10C).

ステップSC6では、表示対象に周辺車両aが含まれているか否かを判定する。ステップSC6の判定結果がYESの場合はステップSC13に進み、NO場合はステップSC7に進む。   In step SC6, it is determined whether or not the display target includes the surrounding vehicle a. If the determination result in step SC6 is YES, the process proceeds to step SC13, and if NO, the process proceeds to step SC7.

ステップSC7では、その周辺車両aの簡略画像を記憶装置15から読み出す。ステップSC8では、自車1との距離(又は前方車両2との距離)に応じてその簡略画像の大きさを補正する。具体的には、その距離が近いほど、その簡略画像a´の大きさを大きくし(図11(a)参照)、その距離が遠いほど、その簡略画像a´の大きさを小さくする(図11(b)参照)。ステップSC9では、等距離面D(つまり、前方車両2の背面)の色に応じてその簡略画像の車両本体部の色を補正する。ステップSC10では、現実の周辺車両aのブレーキランプ又は方向指示器が点灯しているか否かを判定する。ステップSC10の判定結果がYESの場合はステップS11に進み、その簡略画像a´の車体本体部及びランプ部の少なくとも一方の色を濃く補正する(つまり、色の濃度を濃くする、又は色を濃い色にする。図12(a)参照)。一方、NOの場合はステップSC12に進み、その簡略画像a´の車体本体部及びランプ部の少なくとも一方の色を薄く補正する(つまり、色の濃度を薄くする、又は色を薄い色にする。図12(b)参照)。   In step SC7, a simplified image of the surrounding vehicle a is read from the storage device 15. In step SC8, the size of the simplified image is corrected according to the distance from the own vehicle 1 (or the distance from the preceding vehicle 2). Specifically, the closer the distance is, the larger the size of the simplified image a ′ is (see FIG. 11A), and the farther the distance is, the smaller the size of the simplified image a ′ is (see FIG. 11). 11 (b)). In step SC9, the color of the vehicle main body portion of the simplified image is corrected according to the color of the equidistant surface D (that is, the back surface of the preceding vehicle 2). In step SC10, it is determined whether the brake lamp or the direction indicator of the actual surrounding vehicle a is lit. If the decision result in the step SC10 is YES, the process advances to a step S11 so that at least one color of the vehicle body portion and the lamp portion of the simplified image a ′ is darkly corrected (that is, the color density is darkened or the color is darkened). (Refer to FIG. 12A). On the other hand, in the case of NO, the process proceeds to step SC12, and at least one color of the vehicle body portion and the lamp portion of the simplified image a ′ is lightly corrected (that is, the color density is lightened or the color is lightened). (Refer FIG.12 (b)).

ステップSC13では、表示対象に歩行者hが含まれているか否かを判定する。ステップSC13の判定結果がYESの場合はステップSC14に進み、NO場合はステップSC20に進む。   In step SC13, it is determined whether or not the pedestrian h is included in the display target. If the determination result in step SC13 is YES, the process proceeds to step SC14, and if NO, the process proceeds to step SC20.

ステップSC14では、その歩行者hの簡略画像を記憶装置15から読み出す。ステップSC15では、自車1との距離(又は前方車両2との距離)に応じてその簡略画像の大きさを補正する。具体的には、その距離が近いほど、その簡略画像の大きさを大きくし、その距離が遠いほど、その簡略画像の大きさを小さくする。ステップSC16では、等距離面D(つまり、前方車両2の背面)の色に応じてその簡略画像の色を補正する。ステップSC17では、現実の歩行者hが現実の自車1の方向に向かって移動しているか否かを判定する。ステップSC17の判定結果がYESの場合(つまり、自車1の方向に向かって移動している場合)はステップSC18に進み、その簡略画像の色を濃く補正する(つまり、色の濃度を濃くする、又は色を濃い色にする)。一方、NOの場合(つまり、自車1の方向とは異なる方向に向かって移動している場合)はステップSC19に進み、その簡略画像の色を薄く補正する(つまり、色の濃度を薄くする、又は色を薄い色にする)。   In step SC14, the simplified image of the pedestrian h is read from the storage device 15. In step SC15, the size of the simplified image is corrected according to the distance from the own vehicle 1 (or the distance from the preceding vehicle 2). Specifically, the size of the simplified image is increased as the distance is shorter, and the size of the simplified image is decreased as the distance is longer. In step SC16, the color of the simplified image is corrected according to the color of the equidistant surface D (that is, the back surface of the preceding vehicle 2). In step SC17, it is determined whether or not the actual pedestrian h is moving in the direction of the actual own vehicle 1. If the decision result in the step SC17 is YES (that is, if the vehicle is moving in the direction of the host vehicle 1), the process proceeds to a step SC18, and the color of the simplified image is corrected deeply (that is, the color density is increased). Or make the color darker). On the other hand, in the case of NO (that is, when moving in a direction different from the direction of the own vehicle 1), the process proceeds to step SC19, and the color of the simplified image is lightly corrected (that is, the color density is lightened). Or make the color lighter).

ステップSC20では、表示対象に交差点iが含まれているか否かを判定する。ステップSC20の判定結果がYESの場合はステップSC21に進み、NO場合はステップSC24に進む。   In step SC20, it is determined whether or not the intersection i is included in the display target. If the determination result of step SC20 is YES, the process proceeds to step SC21, and if NO, the process proceeds to step SC24.

ステップSC21では、その交差点iの簡略画像を記憶装置15から読み出す。ステップSC22では、自車1との距離(又は前方車両2との距離)に応じてその簡略画像の大きさを補正する。具体的には、その距離が近いほど、その簡略画像の大きさを大きくし、その距離が遠いほど、その簡略画像の大きさを小さくする。ステップSC23では、等距離面D(つまり、前方車両2の背面)の色に応じてその簡略画像の色を補正する。   In step SC21, the simplified image of the intersection i is read from the storage device 15. In step SC22, the size of the simplified image is corrected according to the distance from the own vehicle 1 (or the distance from the preceding vehicle 2). Specifically, the size of the simplified image is increased as the distance is shorter, and the size of the simplified image is decreased as the distance is longer. In step SC23, the color of the simplified image is corrected according to the color of the equidistant surface D (that is, the back surface of the forward vehicle 2).

ステップSC24では、各簡略画像をフロントウィンドウ1a上に表示する。この表示画像の例を図13に示す。図13では、周辺車両の簡略画像を符号a´、歩行者の簡略画像を符号h´、信号機の簡略画像を符号s´、交差点の簡略画像を符号i´で表している。   In step SC24, each simplified image is displayed on the front window 1a. An example of this display image is shown in FIG. In FIG. 13, the simplified image of the surrounding vehicle is denoted by a ′, the simplified image of the pedestrian is denoted by h ′, the simplified image of the traffic light is denoted by s ′, and the simplified image at the intersection is denoted by symbol i ′.

−効果−
以上により、本実施形態によれば、取得された、前方車両2の前方画像を含む画像から、前方車両2に遮られて自車両1の運転者が視認不可能でかつその運転者が視認すべき特定物を認識し、その認識された特定物を簡略化した簡略画像を読み出し、その読み出された簡略画像のみ表示するので、運転者は、その表示画像からその特定物を容易に認識することができ、運転の安全性を高いレベルで維持することができる。
-Effect-
As described above, according to the present embodiment, from the acquired image including the front image of the preceding vehicle 2, the driver of the host vehicle 1 is invisible and is visually recognized by the preceding vehicle 2 because it is blocked by the preceding vehicle 2. A specific image to be recognized is recognized, a simplified image obtained by simplifying the recognized specific object is read, and only the read simplified image is displayed, so that the driver can easily recognize the specific object from the display image. And driving safety can be maintained at a high level.

また、認識された特定物のうち自車両1の最も近くに存在するものを抽出し、その抽出された特定物を簡略化した簡略画像を読み出し、その読み出された簡略画像のみ表示するので、運転者は、その表示画像からその特定物をより一層容易に認識することができ、運転の安全性をより一層高いレベルで維持することができる。   Moreover, since the thing which exists in the nearest vicinity of the own vehicle 1 among the recognized specific objects is extracted, the simplified image which simplified the extracted specific object is read, and only the read simplified image is displayed. The driver can more easily recognize the specific object from the display image, and can maintain driving safety at a higher level.

また、認識された特定物の状態に応じて簡略画像を変更するので、簡略画像を認識された特定物の状態に応じたものにすることができる。このため、運転者は、認識された特定物の状態を正確に認識することができる。   Moreover, since the simplified image is changed according to the state of the recognized specific object, the simplified image can be made to correspond to the recognized state of the specific object. For this reason, the driver can accurately recognize the state of the recognized specific object.

また、フロントウィンドウ1a上に表示するので、運転者の視認動作量を低減することができ、その負担を軽減することができる。   Moreover, since it displays on the front window 1a, a driver | operator's visual recognition operation amount can be reduced and the burden can be eased.

また、前方車両2の背面の色に応じて簡略画像の色を変更するので、簡略画像の色を前方車両2の背面の色に応じたものにすることができる。このため、運転者は、簡略画像を容易に視認することができる。   In addition, since the color of the simplified image is changed according to the color of the back surface of the preceding vehicle 2, the color of the simplified image can be made according to the color of the back surface of the preceding vehicle 2. For this reason, the driver | operator can visually recognize a simple image easily.

また、前方車両2の前方画像を含む画像を前方車両2から車車間通信で取得するので、その画像を容易に取得することができる。   Moreover, since the image containing the front image of the front vehicle 2 is acquired from the front vehicle 2 by vehicle-to-vehicle communication, the image can be acquired easily.

また、前方車両2の前方画像を含む画像を路側カメラ3から路車間通信で取得するので、その画像を容易に取得することができる。   Moreover, since the image containing the front image of the front vehicle 2 is acquired from the roadside camera 3 by road-to-vehicle communication, the image can be acquired easily.

(実施形態2)
本実施形態では、特定物抽出器16dは、特定物認識器16cにより認識された各特定物のうち抽出エリア(自車両1の周囲の所定範囲に相当)内に存在するものを抽出する。その他の点に関しては、実施形態1とほぼ同様である。
(Embodiment 2)
In the present embodiment, the specific object extractor 16d extracts those existing in the extraction area (corresponding to a predetermined range around the host vehicle 1) among the specific objects recognized by the specific object recognizer 16c. The other points are almost the same as in the first embodiment.

−車両用運転支援装置の画像処理制御−
(表示対象抽出)
以下、図14のフローチャートを参照しながら、車両用運転支援装置10の表示対象抽出制御について説明する。
-Image processing control of vehicle driving support device-
(Display target extraction)
Hereinafter, the display target extraction control of the vehicle driving support apparatus 10 will be described with reference to the flowchart of FIG.

ステップSB1´では、自車1の位置情報をGPSアンテナ14を介して取得する。ステップSB2´では、ステップSA7で取得された画像が前方車両2からの画像であるか否かを判定する。ステップSB2´の判定結果がYESの場合(つまり、前方車両2からの画像である場合)はステップSB3´に進み、NOの場合(つまり、路側カメラ3からの画像である場合)はステップSB6´に進む。   In step SB 1 ′, the position information of the host vehicle 1 is acquired via the GPS antenna 14. In Step SB2 ′, it is determined whether or not the image acquired in Step SA7 is an image from the preceding vehicle 2. If the determination result in step SB2 ′ is YES (that is, if it is an image from the preceding vehicle 2), the process proceeds to step SB3 ′, and if NO (that is, if it is an image from the roadside camera 3), step SB6 ′. Proceed to

ステップSB3´では、ステップSA8で認識された特定物の前方車両2との距離をステップSA7で取得された画像に基づき算出する。ステップSB4´では、自車速に対応する抽出エリアを算出する。具体的には、自車1を中心、自車速にある係数を乗じて得た値を半径とする、所定の円の範囲を抽出エリアとして求める。ステップSB5´では、特定物に含まれている周辺車両aのうち、その抽出エリア内に位置する周辺車両aを表示対象として抽出する(図5参照)。このとき、この周辺車両aのブレーキランプ及び方向指示器の点灯状態も検出する。ステップSB6´では、特定物に含まれている歩行者h、信号機s、及び交差点iのうち、その抽出エリア内に位置する歩行者h、信号機s、及び交差点iを表示対象として抽出する(図5参照)。このとき、歩行者hの移動方向、及び信号機sの点灯状態も検出する。その後、エンドする。   In step SB3 ′, the distance between the specific object recognized in step SA8 and the preceding vehicle 2 is calculated based on the image acquired in step SA7. In step SB4 ′, an extraction area corresponding to the host vehicle speed is calculated. Specifically, a range of a predetermined circle having the radius obtained by multiplying the vehicle 1 by the coefficient of the vehicle 1 as the center and the vehicle speed is obtained as the extraction area. In step SB5 ', the surrounding vehicle a located in the extraction area among the surrounding vehicles a included in the specific object is extracted as a display target (see FIG. 5). At this time, the lighting state of the brake lamp and the direction indicator of the surrounding vehicle a is also detected. In step SB6 ′, among pedestrians h, traffic lights s, and intersections i included in the specific object, pedestrians h, traffic lights s, and intersections i located in the extraction area are extracted as display targets (FIG. 5). At this time, the moving direction of the pedestrian h and the lighting state of the traffic light s are also detected. Then end.

一方、ステップSB7´では、路側カメラ3の位置情報を路車間通信で取得する。ステップSB8´では、ステップSA8で認識された特定物の路側カメラ3との距離をステップSA7で取得された画像に基づき算出する。ステップSB9´では、特定物の自車1との距離を、自車1の位置情報、路側カメラ3の位置情報、特定物の路側カメラ3との距離に基づき算出する。   On the other hand, in step SB7 ′, the position information of the roadside camera 3 is acquired by road-to-vehicle communication. In step SB8 ′, the distance between the specific object recognized in step SA8 and the roadside camera 3 is calculated based on the image acquired in step SA7. In step SB9 ', the distance from the own vehicle 1 of the specific object is calculated based on the position information of the own vehicle 1, the position information of the roadside camera 3, and the distance from the roadside camera 3 of the specific object.

ステップSB10´では、ステップSA8で認識された特定物から、自車1との距離が、自車1前方の遮蔽物の自車1との距離(この距離は自車1で検出される)と近似する特定物(つまり、前方車両2)を抽出する。ステップSB11´では、ステップSA8で認識された特定物から、ステップSB9´で抽出された特定物を除外する。ステップSB12´では、自車速に対応する抽出エリアを算出する。具体的には、自車1を中心、自車速にある係数を乗じて得た値を半径とする、所定の円の範囲を抽出エリアとして求める。ステップSB13´では、特定物に含まれている周辺車両aのうち、その抽出エリア内に位置する周辺車両aを表示対象として抽出する(図5参照)。このとき、この周辺車両aのブレーキランプ及び方向指示器の点灯状態も検出する。ステップSB14´では、特定物に含まれている歩行者h、信号機s、及び交差点iのうち、その抽出エリア内に位置する歩行者h、信号機s、及び交差点iを表示対象として抽出する(図5参照)。このとき、歩行者hの移動方向、及び信号機sの点灯状態も検出する。その後、エンドする。   In step SB10 ', the distance from the specific object recognized in step SA8 is the distance from the own vehicle 1 of the shield in front of the own vehicle 1 (this distance is detected by the own vehicle 1). The specific object to be approximated (that is, the preceding vehicle 2) is extracted. In step SB11 ′, the specific object extracted in step SB9 ′ is excluded from the specific object recognized in step SA8. In step SB12 ′, an extraction area corresponding to the host vehicle speed is calculated. Specifically, a range of a predetermined circle having the radius obtained by multiplying the vehicle 1 by the coefficient of the vehicle 1 as the center and the vehicle speed is obtained as the extraction area. In step SB13 ′, among the surrounding vehicles a included in the specific object, the surrounding vehicle a located in the extraction area is extracted as a display target (see FIG. 5). At this time, the lighting state of the brake lamp and the direction indicator of the surrounding vehicle a is also detected. In step SB14 ′, among pedestrians h, traffic lights s, and intersections i included in the specific object, pedestrians h, traffic lights s, and intersections i located in the extraction area are extracted as display targets (FIG. 5). At this time, the moving direction of the pedestrian h and the lighting state of the traffic light s are also detected. Then end.

−効果−
以上により、本実施形態によれば、認識された特定物のうち自車両1の抽出エリア内に存在するものを抽出し、その抽出された特定物を簡略化した簡略画像を読み出し、その読み出された簡略画像のみ表示するので、運転者は、その表示画像からその特定物をより一層容易に認識することができ、運転の安全性をより一層高いレベルで維持することができる。
-Effect-
As described above, according to the present embodiment, among the recognized specific objects, those existing in the extraction area of the host vehicle 1 are extracted, and a simplified image obtained by simplifying the extracted specific objects is read out and read out. Since only the simplified image is displayed, the driver can more easily recognize the specific object from the display image, and the driving safety can be maintained at a higher level.

(その他の実施形態)
上記各実施形態では、認識された特定物のうち自車両1の最も近くに存在するものや自車両1の周囲の所定範囲内に存在するものを抽出し、その抽出された特定物を簡略化した簡略画像を読み出し、その読み出された簡略画像のみ表示しているが、これに限らず、例えば、認識された特定物を簡略化した簡略画像を読み出し、その読み出された簡略画像のみ表示しても良い。
(Other embodiments)
In each of the above embodiments, among the recognized specific objects, those that are closest to the own vehicle 1 and those that are within a predetermined range around the own vehicle 1 are extracted, and the extracted specific objects are simplified. However, the present invention is not limited to this. For example, a simplified image obtained by simplifying a recognized specific object is read, and only the read simplified image is displayed. You may do it.

また、上記各実施形態では、簡略画像をフロントウィンドウ1a上における前方車両2の背面に対応する部分に表示しているが、これに限らず、例えば、フロントウィンドウ1a上における前方車両2の背面に対応する部分以外の部分に表示したり、車内の表示装置(図示せず)に表示したりしても良い。   Moreover, in each said embodiment, although the simplified image is displayed on the part corresponding to the back surface of the front vehicle 2 on the front window 1a, it is not restricted to this, For example, on the back surface of the front vehicle 2 on the front window 1a You may display on parts other than a corresponding part, or you may display on the display apparatus (not shown) in a vehicle.

また、上記各実施形態では、特定物を自車両1で認識しているが、これに限らず、例えば、特定物を前方車両2や路側カメラ3で認識しても良い(車両用運転支援システムに相当)。   Moreover, in each said embodiment, although the specific thing is recognized with the own vehicle 1, it is not restricted to this, For example, you may recognize a specific thing with the front vehicle 2 or the roadside camera 3 (vehicle driving assistance system) Equivalent).

また、上記各実施形態では、認識された特定物を簡略化した簡略画像を読み出し、その読み出された簡略画像のみ表示しているが、その認識された特定物の実画像のみ表示しても良い。これにより、取得された、前方車両2の前方画像を含む画像から、前方車両2に遮られて自車両1の運転者が視認不可能でかつその運転者が視認すべき特定物を認識し、その認識された特定物の実画像のみ表示するので、運転者は、その表示画像からその特定物を容易に認識することができ、運転の安全性を高いレベルで維持することができる。この場合も、その認識された特定物のうち自車両1の最も近くに存在するものや自車両1の周囲の所定範囲内に存在するものを抽出したり、車内の表示装置に表示したり、特定物を前方車両2や路側カメラ3で認識したりしても良い。   Further, in each of the above embodiments, a simplified image obtained by simplifying the recognized specific object is read and only the read simplified image is displayed. However, even if only the actual image of the recognized specific object is displayed. good. Thereby, from the acquired image including the forward image of the forward vehicle 2, the driver of the host vehicle 1 is obstructed by the forward vehicle 2 and cannot recognize the specific object and the driver should recognize the specific object, Since only the real image of the recognized specific object is displayed, the driver can easily recognize the specific object from the display image, and can maintain driving safety at a high level. Also in this case, the recognized specific objects that are closest to the own vehicle 1 and those that are within a predetermined range around the own vehicle 1 are extracted, displayed on a display device in the vehicle, A specific object may be recognized by the forward vehicle 2 or the roadside camera 3.

また、上記各実施形態では、自車両1のカメラ11、前方車両2のカメラ2a、及び路側カメラ3をステレオカメラで構成しているが、これに限らず、例えば、普通のカメラで構成しても良い。この場合、自車両1のカメラ11からの画像から自車両1の運転者の前方視界画像Vを抽出し、その前方視界画像Vから単一面を抽出し、その単一面のその前方視界画像Vに対する面積占有率が所定値α以上であるときに、自車両1の運転者の前方視界が前方車両2に遮られていると判定するようになっている。この単一面は、色が同一の前方車両2の背面であり、カメラ11からの画像に基づき決定される。   Moreover, in each said embodiment, although the camera 11 of the own vehicle 1, the camera 2a of the front vehicle 2, and the roadside camera 3 are comprised by the stereo camera, it does not restrict to this, For example, it comprises by a normal camera. Also good. In this case, the forward view image V of the driver of the own vehicle 1 is extracted from the image from the camera 11 of the own vehicle 1, a single plane is extracted from the forward view image V, and the single plane with respect to the forward view image V is extracted. When the area occupancy is equal to or greater than the predetermined value α, it is determined that the forward view of the driver of the host vehicle 1 is blocked by the forward vehicle 2. This single surface is the back surface of the front vehicle 2 having the same color, and is determined based on the image from the camera 11.

本発明は、実施形態に限定されず、その精神又は主要な特徴から逸脱することなく他の色々な形で実施することができる。   The present invention is not limited to the embodiments, and can be implemented in various other forms without departing from the spirit or main features thereof.

このように、上述の実施形態はあらゆる点で単なる例示に過ぎず、限定的に解釈してはならない。本発明の範囲は請求の範囲によって示すものであって、明細書本文には何ら拘束されない。さらに、請求の範囲の均等範囲に属する変形や変更は、全て本発明の範囲内のものである。   As described above, the above-described embodiment is merely an example in all respects and should not be interpreted in a limited manner. The scope of the present invention is indicated by the claims, and is not restricted by the text of the specification. Further, all modifications and changes belonging to the equivalent scope of the claims are within the scope of the present invention.

以上説明したように、本発明にかかる車両用運転支援装置は、運転の安全性を高いレベルで維持する用途等に適用できる。   As described above, the vehicle driving support apparatus according to the present invention can be applied to a use for maintaining driving safety at a high level.

本発明の実施形態に係る車両用運転支援装置のブロック図である。It is a block diagram of the driving assistance device for vehicles concerning the embodiment of the present invention. 車両用運転支援装置が搭載された車両の概略平面図である。1 is a schematic plan view of a vehicle on which a vehicle driving support device is mounted. 車両用運転支援装置が搭載された車両の周辺の様子を示す側面図である。It is a side view which shows the mode of the periphery of the vehicle by which the driving assistance device for vehicles is mounted. 車両の運転者の前方視界を示す図である。It is a figure which shows the front view of the driver | operator of a vehicle. 車両用運転支援装置が搭載された車両の周辺の様子を示す概略平面図であり、(a)は、前方車両のカメラの撮影範囲を示す図であり、(b)は、路側カメラの撮影範囲を示す図である。It is a schematic plan view which shows the mode of the periphery of the vehicle by which the driving assistance device for vehicles is mounted, (a) is a figure which shows the imaging range of the camera of a front vehicle, (b) is the imaging range of a roadside camera. FIG. 車両用運転支援装置の画像処理制御の全体のフローチャートである。It is a flowchart of the whole image processing control of the driving assistance device for vehicles. 車両用運転支援装置の表示対象抽出制御のフローチャートである。It is a flowchart of the display object extraction control of the driving assistance device for vehicles. 車両用運転支援装置の簡略画像表示制御の一部のフローチャートである。It is a flowchart of a part of simple image display control of the driving assistance apparatus for vehicles. 車両用運転支援装置の簡略画像表示制御の一部のフローチャートである。It is a flowchart of a part of simple image display control of the driving assistance apparatus for vehicles. 信号機の簡略画像を示す図であり、(a)は、信号機が青色点灯中の場合の図であり、(b)は、信号機が黄色点灯中の場合の図であり、(c)は、信号機が赤色点灯中の場合の図である。It is a figure which shows the simple image of a traffic light, (a) is a figure when the traffic light is lit in blue, (b) is a figure when the traffic light is lit in yellow, and (c) is a traffic light. FIG. 6 is a diagram when the red light is on. 周辺車両の簡略画像を示す図であり、(a)は、距離が近い場合の図であり、(b)は、距離が遠い場合の図である。It is a figure which shows the simple image of a surrounding vehicle, (a) is a figure when a distance is near, (b) is a figure when a distance is long. 周辺車両の簡略画像を示す図であり、(a)は、ブレーキランプ又は方向指示器が点灯中の場合の図であり、(b)は、ブレーキランプ又は方向指示器が点灯していない場合の図である。It is a figure which shows the simple image of a surrounding vehicle, (a) is a figure when a brake lamp or a direction indicator is lit, (b) is a case where a brake lamp or a direction indicator is not lit FIG. 簡略画像をフロントウィンドウ上に表示した様子を示す図である。It is a figure which shows a mode that the simple image was displayed on the front window. 車両用運転支援装置の表示対象抽出制御のフローチャートである。It is a flowchart of the display object extraction control of the driving assistance device for vehicles.

符号の説明Explanation of symbols

1 車両(自車両)
1a フロントウィンドウ
2 前方車両
3 路側カメラ
10 車両用運転支援装置
16 画像処理装置
16a 視界遮断判定器(視界遮断判定手段)
16b 画像取得器(画像取得手段)
16c 特定物認識器(特定物認識手段)
16d 特定物抽出器(特定物抽出手段)
16e 画像読出し器(画像読出し手段)
16f 画像変更器(画像変更手段)
16g 画像色補正器(画像色補正手段)
17 ヘッドアップディスプレイ表示用装置(画像表示手段)
a 周辺車両
h 歩行者
s 信号機
i 交差点
a´ 周辺車両の簡略画像
h´ 歩行者の簡略画像
s´ 信号機の簡略画像
i´ 交差点の簡略画像
1 Vehicle (own vehicle)
DESCRIPTION OF SYMBOLS 1a Front window 2 Front vehicle 3 Roadside camera 10 Driving support apparatus 16 for vehicles Image processing apparatus 16a Visibility interruption | blocking determination device (Visibility interruption | blocking determination means)
16b Image acquisition device (image acquisition means)
16c Specific object recognizer (specific object recognition means)
16d specific substance extractor (specific substance extraction means)
16e Image reader (image reading means)
16f Image changer (image change means)
16g image color corrector (image color correction means)
17 Head-up display display device (image display means)
a Surrounding vehicle h Pedestrian s Traffic light i Intersection a ′ Simplified image of surrounding vehicle h ′ Simplified image of pedestrian s ′ Simplified image of traffic light i ′ Simplified image of intersection

Claims (11)

車両の運転を支援するための車両用運転支援装置であって、
自車両の運転者の前方視界が前方車両に遮られているかを判定する視界遮断判定手段と、
上記前方視界が上記前方車両に遮られていると判定されたときに、該前方車両の前方画像を含む画像を取得する画像取得手段と、
上記取得された画像から、上記前方車両に遮られて上記運転者が視認不可能でかつ該運転者が視認すべき特定物を認識する特定物認識手段と、
上記認識された特定物を簡略化した簡略画像を読み出す画像読出し手段と、
上記読み出された簡略画像のみ表示する画像表示手段とを備えたことを特徴とする車両用運転支援装置。
A vehicle driving support device for supporting driving of a vehicle,
Visibility cut-off determination means for determining whether the forward view of the driver of the host vehicle is blocked by the forward vehicle;
Image acquisition means for acquiring an image including a forward image of the forward vehicle when the forward view is determined to be blocked by the forward vehicle;
Specific object recognition means for recognizing a specific object that is blocked by the preceding vehicle and cannot be visually recognized by the driver and that the driver should visually recognize from the acquired image,
Image reading means for reading a simplified image obtained by simplifying the recognized specific object;
A vehicle driving support apparatus comprising: an image display means for displaying only the read simplified image.
請求項1記載の車両用運転支援装置において、
上記認識された特定物のうち上記自車両の最も近くに存在するものを抽出する特定物抽出手段をさらに備え、
上記画像読出し手段は、上記抽出された特定物を簡略化した簡略画像を読み出すように構成されていることを特徴とする車両用運転支援装置。
The vehicle driving support device according to claim 1,
A specific object extracting means for extracting the recognized specific object that is closest to the host vehicle;
The vehicle driving support apparatus, wherein the image reading means is configured to read a simplified image obtained by simplifying the extracted specific object.
請求項1記載の車両用運転支援装置において、
上記認識された特定物のうち上記自車両の周囲の所定範囲内に存在するものを抽出する特定物抽出手段をさらに備え、
上記画像読出し手段は、上記抽出された特定物を簡略化した簡略画像を読み出すように構成されていることを特徴とする車両用運転支援装置。
The vehicle driving support device according to claim 1,
A specific object extracting means for extracting the recognized specific object existing within a predetermined range around the host vehicle;
The vehicle driving support apparatus, wherein the image reading means is configured to read a simplified image obtained by simplifying the extracted specific object.
請求項1〜3のいずれか1つに記載の車両用運転支援装置において、
上記認識された特定物の状態に応じて上記簡略画像を変更する画像変更手段をさらに備えたことを特徴とする車両用運転支援装置。
In the vehicle driving assistance device according to any one of claims 1 to 3,
A vehicle driving support apparatus, further comprising image changing means for changing the simplified image in accordance with the recognized state of the specific object.
請求項1〜4のいずれか1つに記載の車両用運転支援装置において、
上記画像表示手段は、フロントウィンドウ上に表示するように構成されていることを特徴とする車両用運転支援装置。
In the vehicle driving support device according to any one of claims 1 to 4,
The vehicle driving support apparatus, wherein the image display means is configured to display on a front window.
請求項5記載の車両用運転支援装置において、
上記前方車両の背面の色に応じて上記簡略画像の色を変更する画像色補正手段をさらに備えたことを特徴とする車両用運転支援装置。
The vehicle driving support device according to claim 5,
The vehicle driving support apparatus further comprising image color correction means for changing the color of the simplified image in accordance with the color of the back surface of the preceding vehicle.
請求項1〜6のいずれか1つに記載の車両用運転支援装置において、
上記画像取得手段は、上記画像を上記前方車両から車車間通信で取得するように構成されていることを特徴とする車両用運転支援装置。
In the vehicle driving support device according to any one of claims 1 to 6,
The driving support apparatus for a vehicle, wherein the image acquisition means is configured to acquire the image from the preceding vehicle by inter-vehicle communication.
請求項1〜6のいずれか1つに記載の車両用運転支援装置において、
上記画像取得手段は、上記画像を路側カメラから路車間通信で取得するように構成されていることを特徴とする車両用運転支援装置。
In the vehicle driving support device according to any one of claims 1 to 6,
The vehicle driving support apparatus, wherein the image acquisition means is configured to acquire the image from a roadside camera by road-to-vehicle communication.
車両の運転を支援するための車両用運転支援システムであって、
自車両の運転者の前方視界が前方車両に遮られているかを判定する視界遮断判定手段と、
上記前方視界が上記前方車両に遮られていると判定されたときに、該前方車両の前方画像を含む画像を取得する画像取得手段と、
上記取得された画像から、上記前方車両に遮られて上記運転者が視認不可能でかつ該運転者が視認すべき特定物を認識する特定物認識手段と、
上記認識された特定物を簡略化した簡略画像を読み出す画像読出し手段と、
上記読み出された簡略画像のみ表示する画像表示手段とを備えたことを特徴とする車両用運転支援システム。
A vehicle driving support system for supporting driving of a vehicle,
Visibility cut-off determination means for determining whether the forward view of the driver of the host vehicle is blocked by the forward vehicle;
An image acquisition means for acquiring an image including a forward image of the forward vehicle when it is determined that the forward view is blocked by the forward vehicle;
Specific object recognition means for recognizing a specific object that is obstructed by the vehicle ahead and cannot be visually recognized by the driver and that the driver should visually recognize from the acquired image,
Image reading means for reading a simplified image obtained by simplifying the recognized specific object;
A vehicle driving support system comprising image display means for displaying only the read simplified image.
車両の運転を支援するための車両用運転支援装置であって、
自車両の運転者の前方視界が前方車両に遮られているかを判定する視界遮断判定手段と、
上記前方視界が上記前方車両に遮られていると判定されたときに、該前方車両の前方画像を含む画像を取得する画像取得手段と、
上記取得された画像から、上記前方車両に遮られて上記運転者が視認不可能でかつ該運転者が視認すべき特定物を認識する特定物認識手段と、
上記認識された特定物の画像のみ表示する画像表示手段とを備えたことを特徴とする車両用運転支援装置。
A vehicle driving support device for supporting driving of a vehicle,
Visibility cut-off determination means for determining whether the forward view of the driver of the host vehicle is blocked by the forward vehicle;
An image acquisition means for acquiring an image including a forward image of the forward vehicle when it is determined that the forward view is blocked by the forward vehicle;
Specific object recognition means for recognizing a specific object that is obstructed by the vehicle ahead and cannot be visually recognized by the driver and that the driver should visually recognize from the acquired image,
A vehicle driving support apparatus, comprising: an image display unit that displays only the image of the recognized specific object.
車両の運転を支援するための車両用運転支援システムであって、
自車両の運転者の前方視界が前方車両に遮られているかを判定する視界遮断判定手段と、
上記前方視界が上記前方車両に遮られていると判定されたときに、該前方車両の前方画像を含む画像を取得する画像取得手段と、
上記取得された画像から、上記前方車両に遮られて上記運転者が視認不可能でかつ該運転者が視認すべき特定物を認識する特定物認識手段と、
上記認識された特定物の画像のみ表示する画像表示手段とを備えたことを特徴とする車両用運転支援システム。
A vehicle driving support system for supporting driving of a vehicle,
Visibility cut-off determination means for determining whether the forward view of the driver of the host vehicle is blocked by the forward vehicle;
An image acquisition means for acquiring an image including a forward image of the forward vehicle when it is determined that the forward view is blocked by the forward vehicle;
Specific object recognition means for recognizing a specific object that is obstructed by the vehicle ahead and cannot be visually recognized by the driver and that the driver should visually recognize from the acquired image,
A vehicle driving support system comprising image display means for displaying only an image of the recognized specific object.
JP2006337445A 2006-12-14 2006-12-14 Vehicle driving assistance device and vehicle driving assistance system Pending JP2008149786A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006337445A JP2008149786A (en) 2006-12-14 2006-12-14 Vehicle driving assistance device and vehicle driving assistance system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006337445A JP2008149786A (en) 2006-12-14 2006-12-14 Vehicle driving assistance device and vehicle driving assistance system

Publications (1)

Publication Number Publication Date
JP2008149786A true JP2008149786A (en) 2008-07-03

Family

ID=39652467

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006337445A Pending JP2008149786A (en) 2006-12-14 2006-12-14 Vehicle driving assistance device and vehicle driving assistance system

Country Status (1)

Country Link
JP (1) JP2008149786A (en)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103661103A (en) * 2012-09-03 2014-03-26 现代摩比斯株式会社 Front image providing method and display device
JP2014206888A (en) * 2013-04-15 2014-10-30 本田技研工業株式会社 Driving support system of vehicle
WO2015177864A1 (en) * 2014-05-20 2015-11-26 日産自動車株式会社 Traffic-light recognition device and traffic-light recognition method
WO2016006029A1 (en) * 2014-07-08 2016-01-14 日産自動車株式会社 Traffic signal detection device and traffic signal detection method
JP2016112984A (en) * 2014-12-12 2016-06-23 日本精機株式会社 Virtual image display system for vehicle, and head up display
JP2017126263A (en) * 2016-01-15 2017-07-20 株式会社デンソー Driving support apparatus and driving support method
WO2019107295A1 (en) * 2017-11-30 2019-06-06 日本精機株式会社 Head-up display device
JP2019206262A (en) * 2018-05-29 2019-12-05 日本精機株式会社 Display device
JP2020126478A (en) * 2019-02-05 2020-08-20 株式会社デンソー Display control device and display control program
CN113168767A (en) * 2018-11-30 2021-07-23 索尼集团公司 Information processing apparatus, information processing system, and information processing method
WO2021199329A1 (en) * 2020-03-31 2021-10-07 日本電気株式会社 Signal information providing device, signal information providing method, and recording medium having program recorded thereon
JP2022037199A (en) * 2021-02-23 2022-03-08 北京百度網訊科技有限公司 Roadside service unit, traffic presentation apparatus, traffic presentation system and method, storage medium, and computer program
JP2022138173A (en) * 2021-03-10 2022-09-26 矢崎総業株式会社 Display device for vehicle
JP7273635B2 (en) 2018-09-12 2023-05-15 バイドゥ オンライン ネットワーク テクノロジー(ペキン) カンパニー リミテッド Vehicle image processing method, vehicle image processing apparatus and computer readable storage medium
JP7404821B2 (en) 2019-11-29 2023-12-26 株式会社Jvcケンウッド In-vehicle display device, in-vehicle display system, control method for in-vehicle display device, and control program for in-vehicle display device

Cited By (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103661103A (en) * 2012-09-03 2014-03-26 现代摩比斯株式会社 Front image providing method and display device
CN103661103B (en) * 2012-09-03 2015-12-09 现代摩比斯株式会社 Front image supplying method and read out instrument
JP2014206888A (en) * 2013-04-15 2014-10-30 本田技研工業株式会社 Driving support system of vehicle
WO2015177864A1 (en) * 2014-05-20 2015-11-26 日産自動車株式会社 Traffic-light recognition device and traffic-light recognition method
US9779315B2 (en) 2014-05-20 2017-10-03 Nissan Motor Co., Ltd. Traffic signal recognition apparatus and traffic signal recognition method
WO2016006029A1 (en) * 2014-07-08 2016-01-14 日産自動車株式会社 Traffic signal detection device and traffic signal detection method
JPWO2016006029A1 (en) * 2014-07-08 2017-05-25 日産自動車株式会社 Signal detection device and signal detection method
US9922259B2 (en) 2014-07-08 2018-03-20 Nissan Motor Co., Ltd. Traffic light detection device and traffic light detection method
JP2016112984A (en) * 2014-12-12 2016-06-23 日本精機株式会社 Virtual image display system for vehicle, and head up display
JP2017126263A (en) * 2016-01-15 2017-07-20 株式会社デンソー Driving support apparatus and driving support method
JP7173042B2 (en) 2017-11-30 2022-11-16 日本精機株式会社 head-up display device
WO2019107295A1 (en) * 2017-11-30 2019-06-06 日本精機株式会社 Head-up display device
JPWO2019107295A1 (en) * 2017-11-30 2020-12-24 日本精機株式会社 Head-up display device
US11538334B2 (en) 2017-11-30 2022-12-27 Nippon Seiki Co., Ltd. Head-up display device
EP3718809A4 (en) * 2017-11-30 2021-08-25 Nippon Seiki Co., Ltd. Head-up display device
JP2019206262A (en) * 2018-05-29 2019-12-05 日本精機株式会社 Display device
JP7273635B2 (en) 2018-09-12 2023-05-15 バイドゥ オンライン ネットワーク テクノロジー(ペキン) カンパニー リミテッド Vehicle image processing method, vehicle image processing apparatus and computer readable storage medium
CN113168767A (en) * 2018-11-30 2021-07-23 索尼集团公司 Information processing apparatus, information processing system, and information processing method
CN113168767B (en) * 2018-11-30 2023-08-15 索尼集团公司 Information processing apparatus, information processing system, and information processing method
JP7127565B2 (en) 2019-02-05 2022-08-30 株式会社デンソー Display control device and display control program
JP2020126478A (en) * 2019-02-05 2020-08-20 株式会社デンソー Display control device and display control program
JP7404821B2 (en) 2019-11-29 2023-12-26 株式会社Jvcケンウッド In-vehicle display device, in-vehicle display system, control method for in-vehicle display device, and control program for in-vehicle display device
JPWO2021199329A1 (en) * 2020-03-31 2021-10-07
WO2021199329A1 (en) * 2020-03-31 2021-10-07 日本電気株式会社 Signal information providing device, signal information providing method, and recording medium having program recorded thereon
JP7311037B2 (en) 2020-03-31 2023-07-19 日本電気株式会社 SIGNAL INFORMATION PROVIDING DEVICE, SIGNAL INFORMATION PROVIDING METHOD AND PROGRAM
US11989946B2 (en) 2020-03-31 2024-05-21 Nec Corporation Signal information providing device, signal information providing method, and recording medium having program recorded thereon
JP2022037199A (en) * 2021-02-23 2022-03-08 北京百度網訊科技有限公司 Roadside service unit, traffic presentation apparatus, traffic presentation system and method, storage medium, and computer program
JP2022138173A (en) * 2021-03-10 2022-09-26 矢崎総業株式会社 Display device for vehicle
JP7301898B2 (en) 2021-03-10 2023-07-03 矢崎総業株式会社 vehicle display

Similar Documents

Publication Publication Date Title
JP2008149786A (en) Vehicle driving assistance device and vehicle driving assistance system
CN108136987B (en) Parking space detection method and device
CN107848416B (en) Display control device, display device, and display control method
JP6073536B1 (en) Display control device for vehicle
JP5070809B2 (en) Driving support device, driving support method, and program
JP5096836B2 (en) Method and system for imaging the surroundings of a vehicle
EP3100913A2 (en) Vehicle display apparatus and vehicle including the same
JP4702348B2 (en) In-vehicle image display device
US8880344B2 (en) Method for displaying images on a display device and driver assistance system
JP6107590B2 (en) Head-up display device
CN107438538B (en) Method for displaying the vehicle surroundings of a vehicle
CN107533795B (en) Vehicle display device and vehicle display method
CN107209987B (en) Driver assistance system and method for traffic sign verification
JP4103518B2 (en) In-vehicle image display device
JP2017062638A (en) Image recognition processing device and program
CN109415018B (en) Method and control unit for a digital rear view mirror
CN110462699B (en) Display control device for vehicle and display unit for vehicle
WO2019063352A1 (en) Method for assisting a driver of a motor vehicle in overtaking an object as well as driver assistance system
US11858414B2 (en) Attention calling device, attention calling method, and computer-readable medium
JP2012153256A (en) Image processing apparatus
JP2005202787A (en) Display device for vehicle
EP2879112B1 (en) Image processing device, image pickup device, mobile unit, program and region setting method
JP2020120268A (en) Display system, travel control device, display control method, and program
CN113242813B (en) System and method for alerting a driver of a vehicle to objects in the vicinity of the vehicle
CN109661688B (en) Image output system