JP5218910B2 - Night vision system - Google Patents
Night vision system Download PDFInfo
- Publication number
- JP5218910B2 JP5218910B2 JP2009003884A JP2009003884A JP5218910B2 JP 5218910 B2 JP5218910 B2 JP 5218910B2 JP 2009003884 A JP2009003884 A JP 2009003884A JP 2009003884 A JP2009003884 A JP 2009003884A JP 5218910 B2 JP5218910 B2 JP 5218910B2
- Authority
- JP
- Japan
- Prior art keywords
- luminance
- target obstacle
- image
- vision system
- night vision
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Traffic Control Systems (AREA)
Description
本発明はナイトビジョンシステムに関し、より詳しくは、夜間にドライバが歩行者等を発見し易いように撮像画像を表示しつつ、ドライバが撮像画像の表示を煩わしく感じないようにすることができるナイトビジョンシステムに関する。 The present invention relates to a night vision system, and more specifically, night vision that allows a driver to display a captured image so that the driver can easily find a pedestrian or the like at night while preventing the driver from feeling annoying the display of the captured image. About the system.
近年、夜間の見づらい車外の状況を車両に搭載した赤外線カメラで撮像し、撮像した画像を表示部に表示することで、ドライバに車外の状況を見易い明るさで提示するようにしたナイトビジョンシステムが提案されている(例えば、特許文献1参照)。ナイトビジョンシステムの表示部は、例えば、ヘッドアップディスプレイ、センターコンソールに設けられたディスプレイである。ヘッドアップディスプレイにおいては、画像がウィンドシールド(フロントガラス)に投影される。センターコンソールに設けられたディスプレイは、通常、ナビゲーションシステムのディスプレイとしても機能する。 In recent years, a night vision system has been developed in which a situation outside the vehicle that is difficult to see at night is captured by an infrared camera mounted on the vehicle, and the captured image is displayed on the display unit, so that the driver can be presented with a brightness that makes it easy to see the situation outside the vehicle. It has been proposed (see, for example, Patent Document 1). The display unit of the night vision system is, for example, a head-up display or a display provided in the center console. In the head-up display, an image is projected on a windshield (front glass). The display provided in the center console usually functions as a display for the navigation system.
ナイトビジョンシステムの表示部を見ることで、ドライバは直接の目視では見づらい車外の状況を認識することができる。ナイトビジョンシステムの表示部は、例えば、車両のヘッドライトの光が十分に照射されない領域に居る歩行者を明るく表示する。これにより、ドライバはヘッドライトの光を照射するだけでは発見が難しい歩行者を容易に発見し、接触事故を未然に防止することができる。 By looking at the display part of the night vision system, the driver can recognize the situation outside the vehicle that is difficult to see directly. For example, the display unit of the night vision system brightly displays a pedestrian in an area where the light of the vehicle headlight is not sufficiently irradiated. As a result, the driver can easily find a pedestrian that is difficult to find just by irradiating the light of the headlight, and can prevent a contact accident.
車外の状況の見易さは、表示部の画面が大きい程、また、画像の輝度が高い程、良好となる。その一方で、画面が大きくなる程、また、画像の輝度が高くなる程、ドライバは画像に気を取られて運転に対する集中力が低下することがあり、画像の表示を煩わしく感じることがある。 The visibility of the situation outside the vehicle becomes better as the screen of the display unit is larger and the brightness of the image is higher. On the other hand, the larger the screen and the higher the brightness of the image, the more the driver is distracted by the image, and the concentration on driving may decrease, and the display of the image may be annoying.
本発明は、このような実情に鑑みてなされたもので、夜間にドライバが歩行者等を発見し易いように撮像画像を表示しつつ、ドライバが撮像画像の表示を煩わしく感じないようにすることができるナイトビジョンシステムの提供を目的とする。 The present invention has been made in view of such circumstances, and prevents the driver from feeling annoying the display of the captured image while displaying the captured image so that the driver can easily find a pedestrian or the like at night. The purpose is to provide a night vision system.
第1の発明は、
赤外線カメラで撮像した車両外部の画像を表示するナイトビジョンシステムであって、
車外を撮像する赤外線カメラと、
上記赤外線カメラの撮像画像に基づき、車外の対象障害物を検知する検知部と、
上記撮像画像の輝度を調節する輝度調節部と、
上記輝度調節部で調節された輝度で上記撮像画像を表示する表示部とを備え、
上記輝度調節部は、第1の調節パターンで輝度を調節可能であり、当該第1の調節パターンでは、上記対象障害物の検知前は上記表示部の画面の輝度を第1の状態に調節し、上記対象障害物が検知されると上記対象障害物の周辺部の輝度を上記第1の状態よりも平均輝度が高い第2の状態に変更し、この変更により上記周辺部の平均輝度を当該周辺部以外の部分の平均輝度よりも高くすることを特徴とするナイトビジョンシステムである。
The first invention is
A night vision system for displaying an image outside a vehicle captured by an infrared camera,
An infrared camera that images outside the vehicle;
Based on the captured image of the infrared camera, a detection unit that detects a target obstacle outside the vehicle;
A brightness adjusting unit for adjusting the brightness of the captured image;
A display unit that displays the captured image with the luminance adjusted by the luminance adjustment unit,
The luminance adjustment unit can adjust the luminance with a first adjustment pattern. In the first adjustment pattern, the luminance of the screen of the display unit is adjusted to a first state before the target obstacle is detected. When the target obstacle is detected, the luminance of the peripheral portion of the target obstacle is changed to a second state where the average luminance is higher than that of the first state, and the average luminance of the peripheral portion is changed by this change. It is a night vision system characterized in that it is higher than the average brightness of the part other than the peripheral part.
第1の発明における「対象障害物」は特に限定されるものではないが、例えば歩行者、自転車に乗っている人である。
第1の発明によれば、対象障害物が検知される前は画像全体の輝度が低く抑えられ、対象障害物が検知されると対象障害物の周辺部においてのみ画像の輝度が高くなる。ドライバは、輝度が高くなった領域内に対象障害物が存在すると認識することができる。よって、対象障害物の存在が検知されると即座にドライバは対象障害物の存在を認識することができる。また、対象障害物が検知される前後を通じて、ドライバは画像に気を取られにくくなり、運転に対する集中力が低下せず、画像の表示を煩わしく感じなくなる。従って、第1の発明によれば、夜間にドライバが歩行者等を発見し易いように撮像画像を表示しつつ、ドライバが撮像画像の表示を煩わしく感じないようにすることができる。
The “target obstacle” in the first invention is not particularly limited, but is, for example, a pedestrian or a person riding a bicycle.
According to the first aspect, before the target obstacle is detected, the luminance of the entire image is suppressed low, and when the target obstacle is detected, the luminance of the image is increased only in the peripheral portion of the target obstacle. The driver can recognize that the target obstacle exists in the area where the luminance is high. Therefore, as soon as the presence of the target obstacle is detected, the driver can recognize the presence of the target obstacle. Further, before and after the target obstacle is detected, the driver is less likely to be distracted by the image, the concentration on driving is not reduced, and the display of the image does not feel troublesome. Therefore, according to the first invention, it is possible to prevent the driver from feeling annoying the display of the captured image while displaying the captured image so that the driver can easily find a pedestrian or the like at night.
第2の発明は、第1の発明において、
上記対象障害物の周りを目立つ態様で囲む枠画像を生成する枠画像生成部と、
上記枠画像を上記撮像画像に重畳させる画像重畳部とを更に備え、
上記表示部は、上記画像重畳部で生成された画像を表示することを特徴とする。
According to a second invention, in the first invention,
A frame image generation unit that generates a frame image surrounding the target obstacle in a conspicuous manner;
An image superimposing unit that superimposes the frame image on the captured image;
The display unit displays the image generated by the image superimposing unit.
第2の発明によれば、対象障害物を囲むように、目立つ態様の枠画像が画面に表示される。従って、第2の発明によれば、ドライバは対象障害物をより一層発見し易くなる。 According to the second aspect, a conspicuous frame image is displayed on the screen so as to surround the target obstacle. Therefore, according to the second aspect, the driver can more easily find the target obstacle.
第3の発明は、第2の発明において、上記枠画像は、目立つ態様で表示されることを特徴とする。 According to a third aspect, in the second aspect, the frame image is displayed in a conspicuous manner.
第3の発明によれば、枠画像が目立つ態様で表示されるので、ドライバは対象障害物をより一層認識し易くなる。 According to the third aspect, since the frame image is displayed in a conspicuous manner, the driver can more easily recognize the target obstacle.
第4の発明は、第1乃至第3の発明のいずれかにおいて、
上記周辺部の表示横幅は、上記表示部の画面横幅の1/3以下であることを特徴とする。
According to a fourth invention, in any one of the first to third inventions,
The display width of the peripheral portion is 1/3 or less of the screen width of the display portion.
第4の発明によれば、対象障害物の周辺部の表示横幅は、表示部の画面横幅の1/3以下であるので、ドライバは、対象障害物が自車の走行車線に対して横方向のどの辺りに存在するのかを容易に判断することができる。例えば、ドライバは、対象障害物が自車の走行車線上、自車の走行車線より左側、或いは自車の走行車線より右側のいずれに存在するのかを容易に判断することができる。 According to the fourth invention, since the display width of the peripheral portion of the target obstacle is equal to or less than 1/3 of the screen width of the display portion, the driver can check that the target obstacle is lateral to the traveling lane of the own vehicle. It is possible to easily determine which part of the area exists. For example, the driver can easily determine whether the target obstacle exists on the traveling lane of the own vehicle, on the left side of the traveling lane of the own vehicle or on the right side of the traveling lane of the own vehicle.
第5の発明は、第1乃至第4の発明のいずれかにおいて、
上記輝度調節部は、第2の調節パターンで輝度を調節可能であり、当該第2の調節パターンでは上記対象障害物の検知前および検知後の双方において上記表示部の画面の輝度を上記第1の状態よりも平均輝度が高い第3の状態に調節し、
上記ナイトビジョンシステムは、
上記第1の調節パターンと上記第2の調節パターンを相互に切り替える選択スイッチを更に備えたことを特徴とする。
According to a fifth invention, in any one of the first to fourth inventions,
The luminance adjustment unit can adjust the luminance with a second adjustment pattern, and the second adjustment pattern controls the luminance of the screen of the display unit both before and after detection of the target obstacle. Adjust to the third state where the average brightness is higher than the state of
The night vision system above
A selection switch for switching the first adjustment pattern and the second adjustment pattern to each other is further provided.
第5の発明によれば、ドライバが選択スイッチを操作することにより、ドライバの好みに応じて第1の調節パターンと第2の調節パターンを相互に切り替えることができる。上記したように、第1の調節パターンは、対象障害物が検知される前は画像全体の輝度が低く抑えられ、対象障害物が検知されると対象障害物の周辺部においてのみ画像の輝度が高くなる調節パターンである。第2の調節パターンは、対象障害物の検知前および検知後の双方において画像全体の輝度が高くなる調節パターンである。 According to the fifth aspect, when the driver operates the selection switch, the first adjustment pattern and the second adjustment pattern can be switched to each other according to the preference of the driver. As described above, in the first adjustment pattern, the brightness of the entire image is suppressed to a low level before the target obstacle is detected, and when the target obstacle is detected, the brightness of the image is increased only at the periphery of the target obstacle. This is an increasing adjustment pattern. The second adjustment pattern is an adjustment pattern in which the brightness of the entire image is increased both before and after detection of the target obstacle.
第6の発明は、第1乃至第5の発明のいずれかにおいて、
上記赤外線カメラは、近赤外線カメラであることを特徴とする。
A sixth invention is any one of the first to fifth inventions,
The infrared camera is a near infrared camera.
第6の発明によれば、近赤外線カメラを用いるので、遠赤外線カメラを用いて熱源を検知するものと比べて、製造コストを抑えることができる。 According to the sixth invention, since the near-infrared camera is used, the manufacturing cost can be reduced as compared with the case where the far-infrared camera is used to detect the heat source.
第7の発明は、第6の発明において、
近赤外光を投光する投光器を更に備えたことを特徴とする。
A seventh invention is the sixth invention, wherein
The projector further includes a projector that projects near-infrared light.
第7の発明によれば、近赤外光を投光する投光器を備えるので、車外の物体に対して近赤外光を照射することができる。これにより、近赤外線カメラは近赤外光を照射しない場合に比べて近赤外光を多く受光することができ、対象障害物の検知精度を高めることができる。 According to the seventh aspect of the invention, since the projector that projects near-infrared light is provided, it is possible to irradiate an object outside the vehicle with near-infrared light. Thereby, the near-infrared camera can receive more near-infrared light than when not irradiating near-infrared light, and the detection accuracy of the target obstacle can be improved.
第8の発明は、第1乃至第7の発明のいずれかにおいて、
上記表示部は、運転席前方のコンビネーションメータの配置領域内に設けられていることを特徴とする。
According to an eighth invention, in any one of the first to seventh inventions,
The display section is provided in a region where the combination meter is disposed in front of the driver's seat.
第8の発明によれば、表示部がコンビネーションメータの配置領域内に設けられているので、ドライバは、表示部の画面を視認し易い。 According to the eighth aspect, since the display unit is provided in the arrangement area of the combination meter, the driver can easily view the screen of the display unit.
第9の発明は、第1乃至第8の発明のいずれかにおいて、
上記対象障害物が検知されると、上記表示部の輪郭部が点滅することを特徴とする。
According to a ninth invention, in any one of the first to eighth inventions,
When the target obstacle is detected, the contour portion of the display section blinks.
第9の発明によれば、対象障害物が検知されると、表示部における撮像画像の輪郭部が点滅するので、ドライバは、対象障害物の存在に気付き易くなる。 According to the ninth aspect, when the target obstacle is detected, the contour portion of the captured image on the display unit blinks, so that the driver can easily notice the presence of the target obstacle.
本発明によれば、夜間にドライバが歩行者等を発見し易いように撮像画像を表示しつつ、ドライバが撮像画像の表示を煩わしく感じないようにすることができるナイトビジョンシステムを提供することができる。 According to the present invention, it is possible to provide a night vision system that can display a captured image so that the driver can easily find a pedestrian or the like at night, while preventing the driver from feeling annoying the display of the captured image. it can.
(第1実施形態)
本発明の第1実施形態について、図面を参照しつつ説明する。図1は、第1実施形態に係るナイトビジョンシステムの構成を示すブロック図である。図2は、第1実施形態における表示部が設けられたコンビネーションメータを示す図である。図3は、画像輝度の第1の調節パターンにおいて、対象障害物が検知される前の状態を示す図である。図4は、画像輝度の第1の調節パターンにおいて、対象障害物が検知された時の状態を示す図である。図5は、ナイトビジョンシステムの動作を示すフローチャートである。
(First embodiment)
A first embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a block diagram showing the configuration of the night vision system according to the first embodiment. FIG. 2 is a diagram illustrating a combination meter provided with a display unit according to the first embodiment. FIG. 3 is a diagram illustrating a state before a target obstacle is detected in the first adjustment pattern of image luminance. FIG. 4 is a diagram illustrating a state when a target obstacle is detected in the first adjustment pattern of image luminance. FIG. 5 is a flowchart showing the operation of the night vision system.
第1実施形態に係るナイトビジョンシステム1は、赤外線カメラ2で撮像した車両外部の画像を表示するナイトビジョンシステムである。
The
ナイトビジョンシステム1は、図1に示されるように、赤外線カメラ2と、投光器3と、検知部4と、輝度調節部5と、枠画像生成部6と、画像重畳部7と、表示制御部13と、表示部8とを備える。検知部4、輝度調節部5、枠画像生成部6、画像重畳部7、および表示制御部13は、ECU(Electronic Control Unit)10内に設けられている。
As shown in FIG. 1, the
赤外線カメラ2は、車外を撮像する。赤外線カメラ2は、例えば、車両の前方を撮像するカメラである。車両の前方を撮像するカメラである場合、赤外線カメラ2は、例えば、車両のフロントバンパー、またはフロントグリルに設けられる。赤外線カメラ2の種類は特に限定されないが、図1に示される例では、近赤外線カメラである。近赤外線カメラは、物体が放つ近赤外光または物体で反射された近赤外光を受光し、車外の状況を撮像することができる。近赤外線カメラは、近赤外領域で撮像するので、車外が暗くても車外の状況を撮像することができる。
The
投光器3は、赤外線カメラ2の撮像領域内に近赤外光を投光する。例えば、投光器3は、主としてヘッドライト(図示せず)の照射領域の外側を照射する。すなわち、投光器3は、ヘッドライトの光が十分に照射されない領域に近赤外光を照射する。例えば、投光器3は、ヘッドライトの照射領域の前方および側方を主として照射する。なお、投光器3は、ヘッドライトの照射領域内を照射してもよいし、ヘッドライトの照射領域内および照射領域外の双方を照射してもよい。
The
検知部4は、赤外線カメラ2の撮像画像に基づき、車外の対象障害物9(図2参照)を検知する。対象障害物9の種類は特に限定されないが、例えば歩行者、自転車に乗っている人である。
The
輝度調節部5は、撮像画像の輝度を調節する。輝度調節部5は、第1の調節パターンで輝度を調節することができる。第1の調節パターンでは、輝度調節部5は、対象障害物9の検知前は表示部8の画像の輝度を第1の状態に調節する(図3参照)。また、第1の調節パターンでは、輝度調節部5は、対象障害物9が検知されると対象障害物9の周辺部11の輝度を第1の状態よりも平均輝度が高い第2の状態に変更し、この変更により周辺部11の平均輝度を当該周辺部11以外の部分の平均輝度よりも高くする(図4参照)。
The
枠画像生成部6は、対象障害物9の周りを囲む枠画像12(図4参照)を生成する。枠画像生成部6は、ECU10内に設けられている。枠画像12は、表示部8において目立つ態様で生成される。「目立つ態様」は特に限定されるものではないが、例えば、周囲より高い輝度、目立つ色彩、点滅である。目立つ色彩は、例えば、警告を意味する赤色や黄色である。「目立つ態様」は、高い輝度、目立つ色彩、点滅を任意に組み合わせてもよい。
The frame
画像重畳部7は、枠画像12を撮像画像に重畳させる。なお、対象障害物9が検知されないときは、枠画像生成部6において枠画像12が生成されないので、画像重畳部7は、枠画像12を撮像画像に重畳しない。
The
表示制御部13は、画像重畳部7で生成された画像を表示部8に表示させる(図4参照)。なお、対象障害物9が検知されないときは、枠画像生成部6において枠画像12が生成されないので、表示制御部13は、枠画像12を表示部8に表示させず、撮像画像を表示部8に表示させる。また、対象障害物9が検知されると、表示制御部13は、表示部8における撮像画面の輪郭部を点滅させる(点滅は図示せず)。
The
表示部8は、画像重畳部7で生成された画像を表示する(図4参照)。なお、対象障害物9が検知されないときは、枠画像生成部6において枠画像12が生成されないので、表示部8は、撮像画像を表示部8に表示する際、枠画像12を表示部8に表示しない。表示部8は、撮像画像を、輝度調節部5で調節された輝度で表示する。
The
輝度調節部5による輝度調節パターンの一つに、上記の如く、第1の調節パターンがある。第1の調節パターンで輝度が調節された場合、対象障害物9の検知前においては、表示部8は、画面の輝度が第1の状態に調節された状態で撮像画像を表示する(図3参照)。第1の状態は、例えば、路面における白線等の走行区画線14をドライバが認識できる程度の輝度状態であって、ドライバが撮像画像を煩わしく感じない程度の輝度状態である。
One of the luminance adjustment patterns by the
一方、対象障害物9が検知されると、表示部8は、対象障害物9の周辺部11の輝度を第1の状態よりも平均輝度が高い第2の状態に変更する(図2、4参照)。この変更により、周辺部11の平均輝度が当該周辺部11以外の部分の平均輝度よりも高くなる。第2の状態は、例えば、走行区画線14のみならず、歩行者等の対象障害物9をドライバが容易に認識できる程度の輝度状態である。第2の状態の平均輝度は、例えば、第1の状態の平均輝度の2〜4倍である。
On the other hand, when the
また、表示部8は、枠画像12については、目立つ態様で表示する(図2、4参照)。「目立つ態様」は上記の如く、例えば、周囲より高い輝度、目立つ色彩、点滅である。目立つ色彩は、例えば、警告を意味する赤色や黄色である。「目立つ態様」は、高い輝度、目立つ色彩、点滅を任意に組み合わせてもよい。
The
また、対象障害物9が検知されると、表示部8は撮像画像の輪郭部を点滅表示する。
When the
対象障害物9の周辺部11の表示横幅は、特に限定されるものではないが、例えば、表示部8の画面横幅の1/3以下である。
The display width of the
表示部8の種類は特に限定されないが、例えば、運転席前方のコンビネーションメータ25の配置領域内に設けられたディスプレイ(図2参照)、ヘッドアップディスプレイ、センターコンソールに設けられたディスプレイである。図2に示される例では、コンビネーションメータ25は、ディスプレイ(表示部8)の他にタコメータ23およびスピードメータ24等を備えている。ヘッドアップディスプレイにおいては、画像がウィンドシールド(フロントガラス)に投影される。センターコンソールに設けられたディスプレイは、通常、ナビゲーションシステムのディスプレイとしても機能する。
Although the kind of the
次に、ナイトビジョンシステム1の動作について、図5のフローチャートを参照しつつ説明する。
Next, the operation of the
まず、投光器3の投光および赤外線カメラ2の撮像により、車両前方の車外状況が撮像される(ステップS1)。次いで、輝度調節部5は、画面の輝度を第1の状態に調節する
(ステップS2)。第1の状態は、例えば、路面における白線等の走行区画線14をドライバが認識できる程度の輝度状態であって、ドライバが撮像画像を煩わしく感じない程度の輝度状態である(図3参照)。次いで、表示部8は、第1の状態で撮像画像を表示する(ステップS3)。従って、ドライバは撮像画像を煩わしく感じない。
First, the situation outside the vehicle in front of the vehicle is imaged by light projection by the
次いで、検知部4は、赤外線カメラ2の撮像画像に基づき、車両前方に歩行者等の対象障害物9が存在するかどうかを判断する(ステップS4)。歩行者等の対象障害物9が存在すると判断されると、輝度調節部5は、対象障害物9の周辺部11の輝度を第1の状態よりも平均輝度が高い第2の状態に変更する(ステップS5)。この変更により、周辺部11の平均輝度が当該周辺部11以外の部分の平均輝度よりも高くなる(図4参照)。第2の状態は、例えば、走行区画線14のみならず、歩行者等の対象障害物9をドライバが認識できる程度の輝度状態である。周辺部11の平均輝度が当該周辺部11以外の部分の平均輝度よりも高くなることで、ドライバは、歩行者等の対象障害物9が存在していることと、対象障害物9が存在するおよその位置を瞬時に認識することができる。一方、ステップS4において対象障害物9が存在しないと判断されると、ステップS1に戻る。
Next, the
次いで、枠画像生成部6は、対象障害物9の周りを囲む枠画像12を生成する(ステップS6)。枠画像12は、表示部8において目立つ態様で生成される。枠画像12が生成されると、画像重畳部7は、枠画像12を撮像画像に重畳する(ステップS7)。次いで、表示部8は、対象障害物9の周辺部11の平均輝度が当該周辺部11以外の部分の平均輝度よりも高い撮像画像に、枠画像12が重畳された画像を表示する(ステップS8)。対象障害物9の周辺部11の平均輝度が高くなっているので、ドライバは対象障害物9の存在と対象障害物9のおよその位置を瞬時に認識することができる。また、対象障害物9の周辺部11の平均輝度が高くなっているものの、周辺部11以外の部分の輝度は低く抑えられているので、ドライバは撮像画像を煩わしく感じない。また、対象障害物9を囲むように枠画像12が表示されるので、ドライバは対象障害物9の位置を瞬時に認識することができる。ステップS8の処理が終了するとステップS1に戻る。以上がナイトビジョンシステム1の動作である。
Next, the frame
ナイトビジョンシステム1によれば、夜間にドライバが歩行者等を発見し易いように撮像画像を表示しつつ、ドライバが撮像画像の表示を煩わしく感じないようにすることができる。また、周辺部11以外の部分の輝度は低く抑えられているので、運転を補助する情報を撮像画像に重畳させた場合に、当該情報を視認し易く表示することができる。運転を補助する情報とは、例えば、ナビゲーションシステムにおける交差点案内情報(図6に例示される直進、右折、左折等を示す矢印16等)である。
According to the
(第2実施形態)
次に、本発明の第2実施形態について、図面を参照しつつ説明する。図7は、第2実施形態に係るナイトビジョンシステムの構成を示すブロック図である。図8は、画像輝度の第2の調節パターンにおいて、対象障害物が検知される前の状態を示す図である。図9は、画像輝度の第2の調節パターンにおいて、対象障害物が検知された時の状態を示す図である。図10は、ナイトビジョンシステムの動作を示すフローチャートである。
(Second Embodiment)
Next, a second embodiment of the present invention will be described with reference to the drawings. FIG. 7 is a block diagram showing the configuration of the night vision system according to the second embodiment. FIG. 8 is a diagram illustrating a state before the target obstacle is detected in the second image luminance adjustment pattern. FIG. 9 is a diagram illustrating a state when a target obstacle is detected in the second image luminance adjustment pattern. FIG. 10 is a flowchart showing the operation of the night vision system.
第2実施形態が第1実施形態と異なる点は、輝度調節部15(図7参照)が第1の実施形態で説明した第1の調節パターンに加えて第2の調節パターンを有している点と、ナイトビジョンシステム20が第1の調節パターンと第2の調節パターンを相互に切り替える選択スイッチ22を備えている点であり、その他の構成は第1実施形態と同様である。第2実施形態において、第1実施形態と同じ構成については同一の参照符号を付してその説明を省略する。検知部4、輝度調節部15、枠画像生成部6、画像重畳部7、および表示制御部13は、ECU(Electronic Control Unit)17内に設けられている。
The second embodiment is different from the first embodiment in that the luminance adjustment unit 15 (see FIG. 7) has a second adjustment pattern in addition to the first adjustment pattern described in the first embodiment. The point is that the night vision system 20 includes a selection switch 22 that switches between the first adjustment pattern and the second adjustment pattern, and other configurations are the same as those of the first embodiment. In the second embodiment, the same components as those in the first embodiment are denoted by the same reference numerals, and the description thereof is omitted. The
輝度調節部15は、第1の調節パターンおよび第2の調節パターンで輝度を調節することができる。第2の調節パターンでは、輝度調節部15は、対象障害物9の検知前および検知後の双方において、表示部8の画面の輝度を第1実施形態における第1の状態よりも平均輝度が高い第3の状態に調節する(図8、9参照)。第2の調節パターンで輝度が調節された場合、対象障害物9の検知前および検知後において、表示部8は、画面の輝度が第3の状態に調節された状態で撮像画像を表示する(図8、9参照)。第3の状態は、例えば、走行区画線14のみならず、歩行者等の対象障害物9をドライバが認識できる程度の輝度状態である。第3の状態は、第1実施形態における第2の状態と同じ輝度状態とすることができる。第2の調節パターンでは、歩行者等の対象障害物9をドライバが容易に認識できる程度の輝度状態が、対象障害物9の検知前および検知後を通じて維持されることとなる。
The brightness adjustment unit 15 can adjust the brightness with the first adjustment pattern and the second adjustment pattern. In the second adjustment pattern, the luminance adjustment unit 15 has a higher average luminance than the first state in the first embodiment in the luminance of the screen of the
選択スイッチ22は、第1の調節パターンと第2の調節パターンを相互に切り替える。選択スイッチ22は、ドライバが操作することができる。ドライバは、第1の調節パターンおよび第2の調節パターンの中から、好みの調節パターンを選択することができる。選択スイッチ22は、例えばセンターコンソールに設けられている。 The selection switch 22 switches between the first adjustment pattern and the second adjustment pattern. The selection switch 22 can be operated by a driver. The driver can select a favorite adjustment pattern from the first adjustment pattern and the second adjustment pattern. The selection switch 22 is provided, for example, in the center console.
次に、ナイトビジョンシステム20の動作について、図10のフローチャートを参照しつつ説明する。 Next, the operation of the night vision system 20 will be described with reference to the flowchart of FIG.
まず、投光器3の投光および赤外線カメラ2の撮像により、車両前方の車外状況が撮像される(ステップS1)。次いで、選択スイッチ22から入力される信号に基づき、第1の調節パターンと第2の調節パターンのいずれが選択されているかが判断される(ステップS1A)。ステップS1Aで第1の調節パターンが選択されていると判断された場合、第1の実施形態で説明したようにステップS2〜S8の処理が行われる。
First, the situation outside the vehicle in front of the vehicle is imaged by the projection of the
一方、ステップS1Aで第2の調節パターンが選択されていると判断された場合、輝度調節部15は、画面の輝度を第3の状態に調節する(ステップS9)。第3の状態は、例えば、路面における白線等の走行区画線14のみならず、歩行者等の対象障害物9をドライバが容易に認識できる程度の輝度状態である。次いで、表示部8は、図8に示される如く第3の状態で撮像画像を表示する(ステップS10)。
On the other hand, when it is determined in step S1A that the second adjustment pattern has been selected, the luminance adjusting unit 15 adjusts the luminance of the screen to the third state (step S9). The third state is, for example, a luminance state in which the driver can easily recognize the
次いで、検知部4は、赤外線カメラ2の撮像画像に基づき、車両前方に歩行者等の対象障害物9が存在するかどうかを判断する(ステップS11)。歩行者等の対象障害物9が存在すると判断されると、枠画像生成部6は、対象障害物9の周りを囲む枠画像12を生成する(ステップS12)。枠画像12は、表示部8において目立つ態様で生成される。枠画像12が生成されると、画像重畳部7は、枠画像12を撮像画像に重畳する(ステップS16)。次いで、表示部8は、図9に示される如く、撮像画像に枠画像12が重畳された画像を表示する(ステップS17)。画面の輝度が高くなっているので、ドライバは対象障害物9の存在を容易に認識することができる。また、対象障害物9を囲むように枠画像12が表示されるので、ドライバは対象障害物9の位置を瞬時に認識することができる。ステップS17の処理が終了するとステップS1に戻る。以上がナイトビジョンシステム20の動作である。
Next, the
ナイトビジョンシステム20によれば、夜間にドライバが歩行者等を発見し易いように撮像画像を表示しつつ、ドライバが撮像画像の表示を煩わしく感じないようにすることができる。また、ドライバが選択スイッチ22を操作することにより、ドライバの好みに応じて第1の調節パターンと第2の調節パターンを相互に切り替えることができる。 According to the night vision system 20, it is possible to prevent the driver from feeling annoying the display of the captured image while displaying the captured image so that the driver can easily find a pedestrian or the like at night. Further, when the driver operates the selection switch 22, the first adjustment pattern and the second adjustment pattern can be switched to each other according to the preference of the driver.
本発明は、夜間にドライバが歩行者等を発見し易いように撮像画像を表示するナイトビジョンシステム等に利用可能である。 The present invention can be used for a night vision system or the like that displays a captured image so that a driver can easily find a pedestrian or the like at night.
1、20 ナイトビジョンシステム
2 赤外線カメラ
3 投光器
4 検知部
5、15 輝度調節部
6 枠画像生成部
7 画像重畳部
8 表示部
9 対象障害物(歩行者等)
10 ECU
11 対象障害物の周辺部
12 枠画像
13 表示制御部
14 走行区画線
22 選択スイッチ
DESCRIPTION OF
10 ECU
DESCRIPTION OF
Claims (8)
車外を撮像する赤外線カメラと、
前記赤外線カメラの撮像画像に基づき、車外の対象障害物を検知する検知部と、
前記撮像画像の輝度を調節する輝度調節部と、
前記輝度調節部で調節された輝度で前記撮像画像を表示する表示部とを備え、
前記輝度調節部は、第1の調節パターンで輝度を調節可能であり、当該第1の調節パターンでは、前記対象障害物の検知前は前記表示部の画面の輝度を第1の状態に調節し、前記対象障害物が検知されると前記対象障害物の周辺部の輝度を前記第1の状態よりも平均輝度が高い第2の状態に変更し、この変更により前記周辺部の平均輝度を当該周辺部以外の部分の平均輝度よりも高くする一方、第2の調節パターンでも輝度を調節可能であり、当該第2の調節パターンでは前記対象障害物の検知前および検知後の双方において前記表示部の画面の輝度を前記第1の状態よりも平均輝度が高い第3の状態に調節し、
前記ナイトビジョンシステムは、
前記第1の調節パターンと前記第2の調節パターンを相互に切り替える選択スイッチを更に備えたことを特徴とするナイトビジョンシステム。 A night vision system for displaying an image outside a vehicle captured by an infrared camera,
An infrared camera that images outside the vehicle;
Based on the captured image of the infrared camera, a detection unit for detecting a target obstacle outside the vehicle;
A brightness adjusting unit for adjusting the brightness of the captured image;
A display unit that displays the captured image with the luminance adjusted by the luminance adjustment unit,
The luminance adjustment unit can adjust the luminance with a first adjustment pattern. In the first adjustment pattern, the luminance of the screen of the display unit is adjusted to a first state before the target obstacle is detected. When the target obstacle is detected, the luminance of the peripheral portion of the target obstacle is changed to a second state where the average luminance is higher than the first state, and the average luminance of the peripheral portion is changed by this change. While the brightness is higher than the average brightness of the portion other than the peripheral portion, the brightness can be adjusted also by the second adjustment pattern. In the second adjustment pattern, the display unit both before and after the detection of the target obstacle. Adjusting the screen brightness to a third state in which the average brightness is higher than the first state,
The night vision system
A night vision system , further comprising a selection switch for switching between the first adjustment pattern and the second adjustment pattern .
前記枠画像を前記撮像画像に重畳させる画像重畳部とを更に備え、
前記表示部は、前記画像重畳部で生成された画像を表示することを特徴とする請求項1に記載のナイトビジョンシステム。 A frame image generation unit that generates a frame image surrounding the target obstacle;
An image superimposing unit that superimposes the frame image on the captured image;
The night vision system according to claim 1, wherein the display unit displays an image generated by the image superimposing unit.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009003884A JP5218910B2 (en) | 2009-01-09 | 2009-01-09 | Night vision system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009003884A JP5218910B2 (en) | 2009-01-09 | 2009-01-09 | Night vision system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010161736A JP2010161736A (en) | 2010-07-22 |
JP5218910B2 true JP5218910B2 (en) | 2013-06-26 |
Family
ID=42578535
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009003884A Expired - Fee Related JP5218910B2 (en) | 2009-01-09 | 2009-01-09 | Night vision system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5218910B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10489950B2 (en) | 2016-08-31 | 2019-11-26 | Aisin Seiki Kabushiki Kaisha | Display control device for displaying a captured image of a vehicle periphery |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5459154B2 (en) * | 2010-09-15 | 2014-04-02 | トヨタ自動車株式会社 | Vehicle surrounding image display apparatus and method |
JP5553444B2 (en) * | 2010-09-21 | 2014-07-16 | 株式会社デンソー | Vehicle display device |
KR101601324B1 (en) * | 2010-11-24 | 2016-03-08 | 현대자동차일본기술연구소 | Image acquiring method of vehicle camera system |
JP5621558B2 (en) * | 2010-12-02 | 2014-11-12 | 株式会社デンソー | Vehicle display device |
JP5529097B2 (en) * | 2011-10-05 | 2014-06-25 | 本田技研工業株式会社 | Vehicle driving support device |
JP5842647B2 (en) * | 2012-02-03 | 2016-01-13 | 三菱電機株式会社 | Detecting device |
KR101410215B1 (en) | 2012-08-16 | 2014-06-19 | 현대모비스 주식회사 | Apparatus for detecting pedestrian for vehicle and method thereof |
JP2015001663A (en) * | 2013-06-17 | 2015-01-05 | 株式会社東芝 | Image processing apparatus, terminal device, image processing system, image processing method, and image processing program |
JP6311067B2 (en) | 2014-07-24 | 2018-04-11 | ボリーメディア ホールディングス カンパニー リミテッドBolymedia Holdings Co. Ltd. | Night vision device |
JP6622055B2 (en) * | 2015-10-20 | 2019-12-18 | 矢崎総業株式会社 | Vehicle display device |
KR102169885B1 (en) * | 2016-12-13 | 2020-10-27 | 주식회사 토비스 | Night vision system displaying thermal energy information and its control method |
CN109703556B (en) * | 2018-12-20 | 2021-01-26 | 斑马网络技术有限公司 | Driving assistance method and apparatus |
CN111443250B (en) * | 2020-04-07 | 2022-05-27 | 西安应用光学研究所 | Real-time detection and management system for maintenance fault of night vision system |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11243538A (en) * | 1998-02-25 | 1999-09-07 | Nissan Motor Co Ltd | Visually recognizing device for vehicle |
JP2005135037A (en) * | 2003-10-29 | 2005-05-26 | Toyota Central Res & Dev Lab Inc | Vehicular information presentation system |
JP2005267030A (en) * | 2004-03-17 | 2005-09-29 | Daihatsu Motor Co Ltd | Pedestrian outline extraction method and pedestrian outline extraction device |
JP2005318408A (en) * | 2004-04-30 | 2005-11-10 | Nissan Motor Co Ltd | Vehicle surrounding monitoring apparatus and method |
JP2007087337A (en) * | 2005-09-26 | 2007-04-05 | Toyota Motor Corp | Vehicle peripheral information display device |
JP4389173B2 (en) * | 2005-12-08 | 2009-12-24 | 株式会社デンソー | Vehicle display device |
JP4857974B2 (en) * | 2006-07-13 | 2012-01-18 | トヨタ自動車株式会社 | Vehicle periphery monitoring device |
JP2008183933A (en) * | 2007-01-26 | 2008-08-14 | Toyota Motor Corp | Noctovision equipment |
-
2009
- 2009-01-09 JP JP2009003884A patent/JP5218910B2/en not_active Expired - Fee Related
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10489950B2 (en) | 2016-08-31 | 2019-11-26 | Aisin Seiki Kabushiki Kaisha | Display control device for displaying a captured image of a vehicle periphery |
Also Published As
Publication number | Publication date |
---|---|
JP2010161736A (en) | 2010-07-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5218910B2 (en) | Night vision system | |
US10741083B2 (en) | Road surface image-drawing system for vehicle | |
JP6806156B2 (en) | Peripheral monitoring device | |
JP6346614B2 (en) | Information display system | |
JP5742937B2 (en) | Visibility support device for vehicle | |
JP5392470B2 (en) | Vehicle display device | |
EP3367366B1 (en) | Display control method and display control device | |
US10166922B2 (en) | On-vehicle image display device, on-vehicle image display method for vehicle, and on-vehicle image setting device | |
JP4834100B2 (en) | Night vision device for automobiles | |
US20180118109A1 (en) | Information presentation apparatus | |
JP4943367B2 (en) | Vehicle information display device | |
JP5817843B2 (en) | Vehicle information transmission device | |
JP2010184607A (en) | Vehicle periphery displaying device | |
JP2020043400A (en) | Periphery monitoring device | |
WO2013065341A1 (en) | Obstacle alert device | |
JP2013156927A (en) | Reminder device and program | |
JP7047586B2 (en) | Vehicle display control device | |
JP2013207746A (en) | Device for photographing rear lateral side of vehicle | |
JP6448714B2 (en) | Information display system | |
US20200298922A1 (en) | Vehicle | |
JP2014199677A (en) | Driving supporting device | |
JP5119675B2 (en) | Vehicle periphery monitoring device | |
JP2019199139A (en) | Vehicular display device | |
JP6288136B2 (en) | Vehicle interior indicator display device | |
JP2006176054A (en) | Display device for vehicle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20110901 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20111208 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20121119 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121126 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130122 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130208 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130221 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160315 Year of fee payment: 3 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5218910 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160315 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |