JPH0717328A - Circumference recognition auxiliary device for vehicle - Google Patents

Circumference recognition auxiliary device for vehicle

Info

Publication number
JPH0717328A
JPH0717328A JP5161889A JP16188993A JPH0717328A JP H0717328 A JPH0717328 A JP H0717328A JP 5161889 A JP5161889 A JP 5161889A JP 16188993 A JP16188993 A JP 16188993A JP H0717328 A JPH0717328 A JP H0717328A
Authority
JP
Japan
Prior art keywords
vehicle
image
bird
wide
distance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP5161889A
Other languages
Japanese (ja)
Inventor
Kazuya Hayafune
一弥 早舩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Motors Corp
Original Assignee
Mitsubishi Motors Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Motors Corp filed Critical Mitsubishi Motors Corp
Priority to JP5161889A priority Critical patent/JPH0717328A/en
Publication of JPH0717328A publication Critical patent/JPH0717328A/en
Pending legal-status Critical Current

Links

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

PURPOSE:To provide a circumference recognition auxiliary device, by which even a beginner can easily put a vehicle into a garage or can easily park a vehicle longitudinally. CONSTITUTION:A circumference recognition auxiliary device for a vehicle is provided with plural pairs of a wide-angle area photographing means 2, which is mounted in a vehicle 1 for photographing a condition around the vehicle 1, and a distance measuring means 3, which is mounted in the vehicle 1 for measuring a distance to an article to be photographed by the wide-angle area photographing means 2. The circumference recognition auxiliary device is also provided with a solid virtual means 4, which assumes the article solidly on the basis of the information from the wide-angle area photographing means 2 and the distance measuring means 3, an image converting means 5, which forms a bird's eye view of the circumference of the vehicle 1 by means of computer graphics on the basis of the information from the solid virtual means 4, and an image indicating means 6, which indicates the bird's eye view obtained from the image converting means.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【産業上の利用分野】本発明は、車両の周辺の情報を画
像情報によりドライバに表示する、車両用周辺認識補助
装置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a vehicle periphery recognition assisting device for displaying information on the periphery of a vehicle to a driver by image information.

【0002】[0002]

【従来の技術】近年、自動車等の車両では、運転に習熟
していないドライバであっても車庫入れや縦列駐車等を
簡単に行なえるように、例えばコーナセンサや逆位相後
輪操舵システム等の装置が開発されている。このコーナ
センサは、自車両からの発信電波(又は、超音波)と、
他車両又は電柱等の障害物から反射される際の反射電波
(又は、反射音波)との時間差により、自車両と障害物
との距離を測定するものであって、例えば車両内では障
害物までの距離が表示されたり、又は障害物までの距離
が所定値以下になったとき時は警告音を発したりするよ
うになっている。そして、これによりドライバに注意を
促すようになっているものである。
2. Description of the Related Art In recent years, in vehicles such as automobiles, for example, a corner sensor or an antiphase rear wheel steering system is provided so that even a driver who is not familiar with driving can easily enter a garage or park in parallel. The device is being developed. This corner sensor is a radio wave (or ultrasonic wave) transmitted from the own vehicle,
The distance between the vehicle and the obstacle is measured by the time difference from the reflected radio wave (or reflected sound wave) when reflected from another vehicle or an obstacle such as a power pole. Is displayed, or a warning sound is emitted when the distance to the obstacle becomes less than a predetermined value. Then, the driver is alerted accordingly.

【0003】また、逆位相後輪操舵システムは、低速且
つ大舵角で後退すると、前輪に対して逆位相で後輪が操
舵されるものであり、これにより、車両の取回しを向上
させるようなものである。また、このような装置以外に
も、例えば車両の前方や後方にカメラを設置し、これら
のカメラにより車両の周辺状況を撮像して、車室内のデ
ィスプレイに周辺状況を画像表示するような装置が開発
されている。
Further, the reverse-phase rear wheel steering system steers the rear wheels in a reverse phase with respect to the front wheels when the vehicle reverses at a low speed and a large steering angle, thereby improving the handling of the vehicle. Is like. In addition to such an apparatus, for example, an apparatus that installs a camera in front of or behind the vehicle, images the surroundings of the vehicle with these cameras, and displays the surroundings on a display in the vehicle interior. Being developed.

【0004】そして、例えば特開平2−158900で
は、自車両と障害物との間の距離が所定値以下になると
警報音が発せられるような装置が提案されている。この
ような、画像情報を用いた装置では、例えば特開平2−
245610に提案された測定方式により、カメラが撮
像した障害物と自車両との間の距離を測定することが考
えられる。
[0004] For example, Japanese Patent Laid-Open No. 2-158900 proposes a device that emits an alarm sound when the distance between the vehicle and an obstacle becomes a predetermined value or less. Such an apparatus using image information is disclosed in, for example, Japanese Patent Laid-Open No.
It is conceivable to measure the distance between the obstacle imaged by the camera and the host vehicle by the measurement method proposed in 245610.

【0005】[0005]

【発明が解決しようとする課題】しかしながら、上述し
た従来のコーナセンサでは、車両と障害物との距離が単
に数字で示されるだけであったり、又は警報音のみであ
るため、運転に習熟していないドライバでは、車両と障
害物との間の距離感を客観的に捉えることができない。
However, in the above-described conventional corner sensor, the distance between the vehicle and the obstacle is simply indicated by a numeral, or only an alarm sound is generated, and therefore, the operator is familiar with driving. Without a driver, the sense of distance between the vehicle and the obstacle cannot be objectively captured.

【0006】また、逆位相後輪操舵システムでは、ドラ
イバがかえって操舵に違和感を感じてしまう場合があ
り、初心者のドライバでは、後退時や縦列駐車時に車両
を上手に操作できない場合がある。さらに、上述したよ
うな画像情報を用いた装置では、カメラが撮像した範囲
内の周辺状況しかディスプレイに画像表示することがで
きないので、ドライバは、車室内から客観的に自車両の
周辺状況を知ることができない。これにより、やはりド
ライバが後退時や縦列駐車時に車両を上手に操作できな
い場合があるという課題があった。
Further, in the anti-phase rear wheel steering system, the driver may sometimes feel uncomfortable in steering, and a beginner driver may not be able to operate the vehicle well when moving backward or in parallel parking. Further, in the device using the image information as described above, only the peripheral condition within the range captured by the camera can be displayed on the display as an image, so that the driver can objectively know the peripheral condition of the vehicle from the passenger compartment. I can't. As a result, there is a problem in that the driver may not be able to operate the vehicle well when moving backward or when parking in parallel.

【0007】本発明は、このような課題に鑑み創案され
たもので、初心者であっても容易に車庫入れ操作や縦列
駐車等を行なうことができるようにした、車両用周辺認
識補助装置を提供することを目的とする。
The present invention was devised in view of the above problems, and provides a vehicle peripheral recognition assisting device which enables even a beginner to easily perform a garage parking operation, parallel parking, and the like. The purpose is to do.

【0008】[0008]

【課題を解決するための手段】このため、請求項1記載
の本発明の車両用周辺認識補助装置は、車両の周囲の状
況を撮像するために、該車両に搭載された広角領域撮影
手段と、該広角領域撮影手段により撮像される物体まで
の距離を測定するために、該車両に搭載された距離測定
手段とを複数組そなえ、該広角領域撮影手段からの画像
情報と該距離測定手段からの距離情報とに基づいて撮像
された物体を立体的に仮想する立体仮想手段と、該立体
仮想手段からの情報に基づいて該車両の周辺をコンピュ
ータグラフィックスによって鳥瞰図に変換する画像変換
手段と、該画像変換手段により得られた該鳥瞰図を表示
する画像表示手段とが設けられていることを特徴として
いる。
Therefore, the vehicle peripheral recognition assisting apparatus of the present invention according to claim 1 is provided with a wide-angle region photographing means mounted on the vehicle for photographing the situation around the vehicle. A plurality of sets of distance measuring means mounted on the vehicle for measuring a distance to an object imaged by the wide-angle area photographing means, and image information from the wide-angle area photographing means and the distance measuring means. Stereoscopic virtual means for stereoscopically virtualizing the imaged object based on the distance information of the, and image conversion means for converting the periphery of the vehicle into a bird's-eye view by computer graphics based on the information from the stereoscopic virtual means, Image display means for displaying the bird's-eye view obtained by the image conversion means is provided.

【0009】また、請求項2記載の本発明の車両用周辺
認識補助装置は、上記請求項1記載の構成に加えて、該
画像表示手段が、車両のフロントウインド内面に画像を
投影するヘッドアップディスプレイとして構成されてい
ることを特徴としている。また、請求項3記載の本発明
の車両用周辺認識補助装置は、上記請求項1記載の構成
に加えて、上記画像表示手段が、ドライバの頭部に装着
するヘッド・マウント・ディスプレイとして構成されて
いることを特徴としている。
According to a second aspect of the present invention, in addition to the structure of the first aspect, the image display means has a head-up for projecting an image on the inner surface of the front window of the vehicle. It is characterized by being configured as a display. Further, in the vehicle peripheral recognition assisting device of the present invention according to claim 3, in addition to the configuration according to claim 1, the image display means is configured as a head mount display to be mounted on a driver's head. It is characterized by

【0010】[0010]

【作用】上述の請求項1記載の本発明の車両用周辺認識
補助装置では、車両の周囲の状況が広角領域撮影手段に
より撮像されるとともに、撮像された物体までの距離が
距離測定手段により測定される。そして、立体仮想手段
では、これらの広角領域撮影手段からの画像情報と距離
測定手段からの距離情報とに基づいて撮像された物体が
立体的に仮想される。
In the vehicle surrounding recognition assisting apparatus of the present invention as set forth in claim 1 above, the situation around the vehicle is imaged by the wide-angle area photographing means and the distance to the imaged object is measured by the distance measuring means. To be done. Then, in the stereoscopic virtual means, the imaged object is stereoscopically virtualized based on the image information from the wide-angle area photographing means and the distance information from the distance measuring means.

【0011】さらに、画像変換手段において、立体仮想
手段からの情報に基づいて車両の周辺がコンピュータグ
ラフィックスによって鳥瞰図に変換され、この鳥瞰図が
画像表示手段により表示される。また、請求項2記載の
本発明の車両用周辺認識補助装置では、上記のコンピュ
ータグラフィックスの鳥瞰図が、ヘッドアップディスプ
レイにより車両のフロントウインド内面に投影される。
Further, in the image conversion means, the periphery of the vehicle is converted into a bird's-eye view by computer graphics based on the information from the three-dimensional virtual means, and this bird's-eye view is displayed by the image display means. Further, in the vehicle peripheral recognition assisting device of the second aspect of the present invention, the bird's-eye view of the computer graphics is projected on the inner surface of the front window of the vehicle by the head-up display.

【0012】また、請求項3記載の本発明の車両用周辺
認識補助装置では、画像表示手段としてドライバの頭部
に装着されたヘッド・マウント・ディスプレイに上記の
コンピュータグラフィックスの鳥瞰図が画像表示され
る。
Further, in the vehicle peripheral recognition assisting apparatus of the present invention as defined in claim 3, a bird's-eye view of the computer graphics is displayed as an image on a head mounted display mounted on the head of the driver as an image display means. It

【0013】[0013]

【実施例】以下、図面により、本発明の一実施例として
の車両用周辺認識補助装置について説明すると、図1は
その構成を示す模式的なブロック図、図2,図3,図4
はいずれもその作用を説明するための模式図である。図
1に示すように、車両1には、広角領域撮影手段として
のCCDカメラ2が設置されており、このCCDカメラ
2により周囲の状況が撮像されるようになっている。な
お、このCCDカメラ2には広角CCDカメラが用いら
れている。また、このCCDカメラ2の近くには(ある
いはCCDカメラ2と一体化して)、距離測定手段とし
てのレーザレンジファインダ3がそなえられており、C
CDカメラ2が撮像しうる視野とほぼ同じ視野を捉える
ようになっている。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS A vehicle peripheral recognition assisting device as an embodiment of the present invention will be described below with reference to the drawings. FIG. 1 is a schematic block diagram showing the structure thereof, and FIGS.
3A and 3B are schematic views for explaining the operation. As shown in FIG. 1, a vehicle 1 is provided with a CCD camera 2 as a wide-angle area photographing means, and the CCD camera 2 is adapted to photograph the surrounding situation. A wide-angle CCD camera is used as the CCD camera 2. Further, a laser range finder 3 as a distance measuring means is provided near the CCD camera 2 (or integrated with the CCD camera 2).
The CD camera 2 captures a field of view that is substantially the same as the field of view that can be captured by the CD camera 2.

【0014】レーザレンジファインダ3は、視野内の物
体(即ち、CCDカメラ2の被写体)との距離を測定す
るが、標的(被写体)にレーザビームを発射して、標的
からの反射ビームを拾って、これらの発射ビームと反射
ビームとの時間差から、被写体までの距離を測定するよ
うになっている。図1に示すように、CCDカメラ2と
レーザレンジファインダ3とは一対になって車両1の複
数箇所に設定されるが、この例では車両1の前後方向及
び左右方向にそれぞれ1組づつ、計4組設けられてい
る。これら4組のCCDカメラ2とレーザレンジファイ
ンダ3とによって、車両1の周囲を全周に亘って視野内
に収めることができるようになっているのである。
The laser range finder 3 measures the distance to an object in the field of view (that is, the subject of the CCD camera 2), emits a laser beam to a target (subject), and picks up a reflected beam from the target. The distance to the subject is measured from the time difference between the emitted beam and the reflected beam. As shown in FIG. 1, the CCD camera 2 and the laser range finder 3 are paired and set at a plurality of locations on the vehicle 1. In this example, one set is provided in each of the front-rear direction and the left-right direction of the vehicle 1. Four sets are provided. The four sets of the CCD camera 2 and the laser range finder 3 enable the entire circumference of the vehicle 1 to be within the visual field.

【0015】そして、CCDカメラ2で撮像された、例
えば図2(a)に示すような原画像の情報と、レーザレ
ンジファインダ3で検出された、例えば図2(b)に示
すような距離情報とが、立体仮想手段4に送られて処理
されるようになっている。この立体仮想手段4は、レー
ザレンジファインダ3からの距離情報に基づいて当該視
野の距離画像を得るようになっており、また、上述した
CCDカメラ2からの原画像から視野内の物体認識を行
なうようになっている。そして、これら原画像と距離画
像との2つの画像情報と、物体認識による知識とから、
CCDカメラ2では見えない、被写体の隠れた部分を仮
定して立体的に視野を再現するものである。
Information on the original image as shown in FIG. 2A, for example, taken by the CCD camera 2 and distance information as shown in FIG. 2B, for example, detected by the laser range finder 3. And are sent to the three-dimensional virtual means 4 for processing. The three-dimensional virtual means 4 is adapted to obtain a distance image of the visual field based on the distance information from the laser range finder 3, and also recognizes an object in the visual field from the original image from the CCD camera 2 described above. It is like this. Then, from the two image information of the original image and the range image and the knowledge obtained by the object recognition,
The field of view is reproduced three-dimensionally by assuming a hidden part of the subject that cannot be seen by the CCD camera 2.

【0016】この立体仮想手段4で再現された3次元情
報は、画像変換手段5に送られるようになっている。こ
の画像変換手段5は、上述の立体仮想手段4からの情報
に基づいて、コンピュータグラフィックによって図2
(c)に示すような鳥瞰図10を作成するものである。
この鳥瞰図10は、自車両1側の適当な視点を仮定して
示されるもので、自車両1とその周辺環境との位置関係
を客観的に示すものである。
The three-dimensional information reproduced by the three-dimensional virtual means 4 is sent to the image conversion means 5. This image conversion means 5 is shown in FIG. 2 by computer graphics based on the information from the above-mentioned three-dimensional virtual means 4.
The bird's-eye view 10 as shown in (c) is created.
This bird's-eye view 10 is shown assuming an appropriate viewpoint on the vehicle 1 side, and objectively shows the positional relationship between the vehicle 1 and its surrounding environment.

【0017】なお、車両1の立体情報(大きさ,形状等
の3次元データ)は予め画像表示手段6に入力されてお
り、これによりドライバは、車両1の周囲を精度良く客
観的に把握することができ、車室内からの死角になって
いる部分についても本装置により補うことができるよう
になっている。そして、この画像変換手段5により得ら
れた鳥瞰図10は、画像表示手段6により、例えば図4
のように表示される。この画像表示手段6は、具体的に
は車室内に設けられたCRTディスプレイであったり、
このCRTディスプレイを利用したヘッドアップディス
プレイである。なお、ヘッドアップディスプレイとは、
車両1のフロントウインド内面に対して画像を投影する
ことにより、フロントウインド内面に投影された画像を
ドライバが視線をほとんど変更することなく見ることが
できるようにしたものである。
Note that the three-dimensional information (three-dimensional data such as size and shape) of the vehicle 1 is input in advance in the image display means 6, so that the driver can accurately and objectively grasp the surroundings of the vehicle 1. This device can also be used to compensate for a blind spot from the passenger compartment. Then, the bird's-eye view 10 obtained by the image conversion means 5 is displayed by the image display means 6 as shown in
Is displayed. The image display means 6 is specifically a CRT display provided in the vehicle compartment,
A head-up display using this CRT display. The head-up display is
By projecting the image on the inner surface of the front window of the vehicle 1, the driver can see the image projected on the inner surface of the front window without changing the line of sight.

【0018】また、画像表示手段6は、後退時の効果の
みを補助するものであれば、車両1が後退した場合にの
みスイッチがONになるように設定してもよい。本発明
の一実施例としての車両用周辺認識補助装置は、上述の
ように構成されているので、以下のように作用する。例
えば図3に示すような車庫入れ操作時について説明する
と、まず、車両1に設置されたCCDカメラ2により周
囲の風景、つまり車庫9内の他の車両8,8や歩行者7
等が撮像されるとともに、レーザレンジファインダ3に
より、これらの物体までの距離が計測される。
Further, the image display means 6 may be set so that the switch is turned on only when the vehicle 1 moves backward as long as it assists only the effect at the time of moving backward. Since the vehicle peripheral recognition assisting device as one embodiment of the present invention is configured as described above, it operates as follows. For example, when a garage is put into operation as shown in FIG.
The laser range finder 3 measures the distances to these objects as well as the above images.

【0019】そして立体仮想手段4により、レーザレン
ジファインダ3からの距離情報に基づき距離画像が作ら
れ、CCDカメラ2からの原画像とこのレーザレンジフ
ァインダ3からの距離画像とに基づいて、被写体(他の
車両8,8や歩行者7等)を立体的に仮想する。そし
て、これらの情報に基づいて画像変換手段5により、図
4に示すようなコンピュータグラフィックの鳥瞰図10
が作成される。この鳥瞰図10は、画像表示手段6とし
てのCRTディスプレイやヘッドアップディスプレイに
より、ドライバが確認できるように表示されるが、画像
表示手段6は、車両1が後退するときにのみON状態と
なるので、通常走行時には、CRTディスプレイには何
も表示されない。
Then, the three-dimensional virtual means 4 creates a distance image based on the distance information from the laser range finder 3. Based on the original image from the CCD camera 2 and the distance image from the laser range finder 3, the object ( Other vehicles 8, 8 and pedestrians 7) are three-dimensionally virtualized. Then, based on these pieces of information, the image conversion means 5 causes a bird's-eye view 10 of computer graphics as shown in FIG.
Is created. The bird's-eye view 10 is displayed by a CRT display or a head-up display as the image display means 6 so that the driver can check it. However, the image display means 6 is turned on only when the vehicle 1 moves backward, During normal driving, nothing is displayed on the CRT display.

【0020】また、このコンピュータグラフィックスに
よる鳥瞰図10は、車両1や周囲の被写体(歩行者7や
他の車両8)の動きに応じて変化するので、あたかも車
両1の上方に別のカメラが設けられて、車室内の画像表
示手段6には、この架空のカメラから撮像されたかのよ
うなイメージのコンピュータグラフィックス画面が表示
されるのである。
Since the bird's-eye view 10 based on the computer graphics changes according to the movements of the vehicle 1 and the surrounding objects (the pedestrian 7 and other vehicles 8), another camera is provided above the vehicle 1. Then, the image display means 6 in the vehicle interior displays a computer graphics screen of an image as if it was taken by the imaginary camera.

【0021】なお、この時、例えば車両1の左斜め上方
と右斜め上方とに、それぞれ車両1と位置関係が一定の
基準点(図示省略)を設定しておき、これらのいずれか
の基準点を視点とした鳥瞰図10を選択的に表示できる
ように設定してもよい。これにより、例えば後退しなが
らハンドル操作を行なうような場合、操舵方向に応じて
左斜め後方の視界と右斜め後方の視界とのどちらかを表
示することで車両1の動きを客観的に観察することがで
き、初心者であっても車庫入れ操作や縦列駐車あるいは
後退走行などを容易に行なうことができる。
At this time, for example, reference points (not shown) having a fixed positional relationship with the vehicle 1 are set in the diagonally upper left and the diagonally upper right of the vehicle 1, respectively, and one of these reference points is set. The bird's-eye view 10 from the viewpoint may be set to be selectively displayed. With this, for example, when the steering wheel is operated while moving backward, the movement of the vehicle 1 is objectively observed by displaying either the left rear view or the right rear view according to the steering direction. Therefore, even a beginner can easily perform a garage entry operation, parallel parking, or backward traveling.

【0022】また、CCDカメラ2とレーザレンジファ
インダ3とは、車両1の周囲を全周に亘って撮像できる
ようになっているので、視界に死角が生じることがな
い。したがって、歩行者7等を見落とすことなく安全に
車両1を操作することができるのである。なお、本装置
では、車両1が後退する時にのみ画像表示手段6がON
状態になるように設定されているが、画像表示手段6は
常時ON状態になるようにしてもよい。
Further, since the CCD camera 2 and the laser range finder 3 are capable of picking up an image of the circumference of the vehicle 1 over the entire circumference, there is no blind spot in the field of view. Therefore, the vehicle 1 can be safely operated without overlooking the pedestrian 7 and the like. In this device, the image display means 6 is turned on only when the vehicle 1 moves backward.
Although the image display means 6 is set to be in the ON state, the image display means 6 may be always in the ON state.

【0023】また、本実施例では、画像表示手段6とし
て、CRTディスプレイを用いて説明したが、画像表示
手段6はこれに限られるものではなく、例えば液晶画面
やヘッド・マウント・ディスプレイを用いてもよい。ヘ
ッド・マウント・ディスプレイとは、ドライバの頭部に
装着するようなディスプレイ装置の1つである。ディス
プレイ本体はドライバの直前に設置され、ドライバはデ
ィスプレイ本体に映し出された鳥瞰図10を見ることが
できるようになっている。また、このディスプレイ本体
に表示される鳥瞰図は、ドライバの前方に虚像として表
示され、ドライバの目の焦点距離があまり移動しないよ
うに設定されている。
In the present embodiment, the CRT display is used as the image display means 6, but the image display means 6 is not limited to this, and for example, a liquid crystal screen or a head mount display is used. Good. A head mounted display is one of the display devices worn on the driver's head. The display main body is installed just before the driver, and the driver can see the bird's-eye view 10 displayed on the display main body. Further, the bird's-eye view displayed on the display body is displayed as a virtual image in front of the driver so that the focal length of the driver's eyes does not move much.

【0024】また、このヘッド・マウント・ディスプレ
イを用いる場合は、例えば車両1が前進している時は、
ディスプレイ本体は光を透過して、周囲の状況をドライ
バが直接確認できるようになっており、車両1が後退を
始めたときにのみヘッド・マウント・ディスプレイが作
動して鳥瞰図が表示されるものである。そして、このよ
うな目の焦点距離があまり移動しないようなヘッド・マ
ウント・ディスプレイを用いることにより、運転の負担
を増やすことなく鳥瞰図をより確認し易くなり、より安
全性を高めることができるのである。
When this head mounted display is used, for example, when the vehicle 1 is moving forward,
The main body of the display is transparent to the driver so that the driver can directly check the surroundings. Only when the vehicle 1 starts to retreat, the head mounted display operates and the bird's eye view is displayed. is there. Then, by using a head-mounted display in which the focal length of the eyes does not move so much, it becomes easier to check the bird's-eye view without increasing the driving burden, and it is possible to further improve the safety. .

【0025】[0025]

【発明の効果】以上詳述したように、請求項1記載の本
発明の車両用周辺認識補助装置によれば、車両の周囲の
状況を撮像するために、該車両に搭載された広角領域撮
影手段と、該広角領域撮影手段により撮像される物体ま
での距離を測定するために、該車両に搭載された距離測
定手段とを複数組そなえ、該広角領域撮影手段からの画
像情報と該距離測定手段からの距離情報とに基づいて撮
像された物体を立体的に仮想する立体仮想手段と、該立
体仮想手段からの情報に基づいて該車両の周辺をコンピ
ュータグラフィックスによって鳥瞰図に変換する画像変
換手段と、該画像変換手段により得られた該鳥瞰図を表
示する画像表示手段とが設けられるという構成により、
車両の動きを車室内から客観的に観察することができ、
初心者であっても車庫入れ操作や縦列駐車あるいは後退
走行などを容易に行なうことができる。また、車両の視
界に死角が生じることないので歩行者等を見落とすこと
なく安全に車両を操作することができる。
As described in detail above, according to the vehicle periphery recognition assisting apparatus of the present invention, the wide-angle area photographing mounted on the vehicle for photographing the situation around the vehicle is performed. Means and a plurality of distance measuring means mounted on the vehicle for measuring a distance to an object imaged by the wide-angle area photographing means, and image information from the wide-angle area photographing means and the distance measurement. Stereoscopic virtual means for stereoscopically virtualizing the imaged object based on the distance information from the means, and image conversion means for converting the periphery of the vehicle into a bird's-eye view by computer graphics based on the information from the stereoscopic virtual means. And an image display unit for displaying the bird's-eye view obtained by the image conversion unit,
You can objectively observe the movement of the vehicle from the passenger compartment,
Even a beginner can easily perform a garage entry operation, parallel parking, or backward traveling. Further, since there is no blind spot in the field of view of the vehicle, the vehicle can be safely operated without overlooking the pedestrian or the like.

【0026】また、請求項2記載の本発明の車両用周辺
認識補助装置によれば、該画像表示手段が、車両のフロ
ントウインド内面に画像を投影するヘッドアップディス
プレイとして構成されるという構造により、ほとんど視
線を変更することなく確実に画像情報を確認することが
できる。また、請求項3記載の本発明の車両用周辺認識
補助装置によれば、該画像表示手段が、ドライバの頭部
に装着するヘッド・マウント・ディスプレイとして構成
されるという構造により、運転の負担を増やすことな
く、より安全性を高めることができるのである。
According to the vehicle periphery recognition assisting apparatus of the present invention as defined in claim 2, the image display means is configured as a head-up display for projecting an image on the inner surface of the front window of the vehicle. The image information can be surely confirmed without changing the line of sight. Further, according to the vehicle periphery recognition assisting device of the present invention as defined in claim 3, the image display means is configured as a head mount display to be mounted on the driver's head, thereby reducing the driving load. It is possible to increase safety without increasing the number.

【図面の簡単な説明】[Brief description of drawings]

【図1】本発明の一実施例としての車両用周辺認識補助
装置における構成を示す模式的なブロック図である。
FIG. 1 is a schematic block diagram showing a configuration of a vehicle peripheral recognition assisting device as an embodiment of the present invention.

【図2】本発明の一実施例としての車両用周辺認識補助
装置における作用を説明するための模式図である。
FIG. 2 is a schematic diagram for explaining the operation of the vehicle peripheral recognition assisting device as one embodiment of the present invention.

【図3】本発明の一実施例としての車両用周辺認識補助
装置における作用を説明するための模式図である。
FIG. 3 is a schematic diagram for explaining the operation of the vehicle peripheral recognition assisting device as one embodiment of the present invention.

【図4】本発明の一実施例としての車両用周辺認識補助
装置における作用を説明するための模式図である。
FIG. 4 is a schematic diagram for explaining the operation of the vehicle peripheral recognition assisting device as one embodiment of the present invention.

【符号の説明】[Explanation of symbols]

1 車両 2 広角領域撮影手段としてのCCDカメラ 3 距離測定手段としてのレーザレンジファインダ 4 立体仮想手段 5 画像変換手段 6 画像表示手段 7 歩行者 8 他の車両 9 車庫 10 鳥瞰図 1 vehicle 2 CCD camera as wide-angle region photographing means 3 laser range finder as distance measuring means 4 three-dimensional virtual means 5 image conversion means 6 image display means 7 pedestrian 8 other vehicle 9 garage 10 bird's-eye view

Claims (3)

【特許請求の範囲】[Claims] 【請求項1】 車両の周囲の状況を撮像するために、該
車両に搭載された広角領域撮影手段と、該広角領域撮影
手段により撮像される物体までの距離を測定するため
に、該車両に搭載された距離測定手段とを複数組そな
え、 該広角領域撮影手段からの画像情報と該距離測定手段か
らの距離情報とに基づいて撮像された物体を立体的に仮
想する立体仮想手段と、該立体仮想手段からの情報に基
づいて該車両の周辺をコンピュータグラフィックスによ
って鳥瞰図に変換する画像変換手段と、該画像変換手段
により得られた該鳥瞰図を表示する画像表示手段とが設
けられていることを特徴とする、車両用周辺認識補助装
置。
1. A wide-angle area photographing means mounted on the vehicle for photographing a situation around the vehicle, and a distance to an object imaged by the wide-angle area photographing means are measured by the vehicle. A plurality of sets of mounted distance measuring means, and a stereoscopic virtual means for stereoscopically virtualizing an object imaged based on the image information from the wide-angle region photographing means and the distance information from the distance measuring means; Image conversion means for converting the periphery of the vehicle into a bird's-eye view by computer graphics based on information from the three-dimensional virtual means, and image display means for displaying the bird's-eye view obtained by the image conversion means are provided. A peripheral recognition assisting device for a vehicle, characterized by:
【請求項2】 該画像表示手段が、車両のフロントウイ
ンド内面に画像を投影するヘッドアップディスプレイと
して構成されていることを特徴とする、上記請求項1記
載の車両用周辺認識補助装置。
2. The peripheral recognition assisting device for a vehicle according to claim 1, wherein the image display means is configured as a head-up display for projecting an image on the inner surface of the front window of the vehicle.
【請求項3】 該画像表示手段が、ドライバの頭部に装
着するヘッド・マウント・ディスプレイとして構成され
ていることを特徴とする、上記請求項1記載の車両用周
辺認識補助装置。
3. The vehicle peripheral recognition assisting device according to claim 1, wherein the image display means is configured as a head mount display to be mounted on a driver's head.
JP5161889A 1993-06-30 1993-06-30 Circumference recognition auxiliary device for vehicle Pending JPH0717328A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP5161889A JPH0717328A (en) 1993-06-30 1993-06-30 Circumference recognition auxiliary device for vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP5161889A JPH0717328A (en) 1993-06-30 1993-06-30 Circumference recognition auxiliary device for vehicle

Publications (1)

Publication Number Publication Date
JPH0717328A true JPH0717328A (en) 1995-01-20

Family

ID=15743930

Family Applications (1)

Application Number Title Priority Date Filing Date
JP5161889A Pending JPH0717328A (en) 1993-06-30 1993-06-30 Circumference recognition auxiliary device for vehicle

Country Status (1)

Country Link
JP (1) JPH0717328A (en)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19741896A1 (en) * 1997-09-23 1999-04-22 Opel Adam Ag Automobile image screen display for potentially hazardous situations, e.g. traffic accidents during parking
DE19754249A1 (en) * 1997-12-06 1999-06-10 Volkswagen Ag Optical maneuvering aid for automobile
DE19753514A1 (en) * 1997-12-03 1999-06-17 Herbert Siekmann Motor vehicle with bonnet located between front bumper and windscreen
JP2001010432A (en) * 1999-04-28 2001-01-16 Matsushita Electric Ind Co Ltd Parking aiding device and parking aiding method
JP2001163132A (en) * 1999-09-30 2001-06-19 Toyota Autom Loom Works Ltd Image converting device for device for monitoring back of vehicle
JP2002034035A (en) * 2000-07-14 2002-01-31 Clarion Co Ltd Image converting method and on-vehicle circumference monitoring device
JP2002087191A (en) * 2000-06-30 2002-03-26 Matsushita Electric Ind Co Ltd Driving supporting system
JP2002092598A (en) * 2000-09-14 2002-03-29 Nissan Motor Co Ltd Own vehicle position detector in parking
JP2002109697A (en) * 2000-10-02 2002-04-12 Matsushita Electric Ind Co Ltd Drive support device
JP2002314991A (en) * 2001-02-09 2002-10-25 Matsushita Electric Ind Co Ltd Image synthesizer
US6476730B2 (en) 2000-02-29 2002-11-05 Aisin Seiki Kabushiki Kaisha Assistant apparatus and method for a vehicle in reverse motion
JP2002335524A (en) * 1999-09-20 2002-11-22 Matsushita Electric Ind Co Ltd Driving support device
JP2003511288A (en) * 1999-10-02 2003-03-25 ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツング Device for monitoring the surroundings of a parked vehicle
US6654670B2 (en) 1999-03-31 2003-11-25 Aisin Seiki Kabushiki Kaisha Parking assisting apparatus
JP2006214236A (en) * 2005-02-07 2006-08-17 Hitachi Constr Mach Co Ltd Measurement display mechanism of construction machine
US7369041B2 (en) 2004-04-27 2008-05-06 Matsushita Electric Industrial Co., Ltd. Vehicle surrounding display device
JP2010076765A (en) * 2009-12-25 2010-04-08 Fujitsu Ten Ltd Travel recorder
DE10037129B4 (en) * 1999-09-13 2016-06-09 Volkswagen Ag Parking and / or Rangierhilfeeinrichtung
US9591280B2 (en) 2011-07-29 2017-03-07 Fujitsu Limited Image processing apparatus, image processing method, and computer-readable recording medium

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19741896C2 (en) * 1997-09-23 1999-08-12 Opel Adam Ag Device for the visual representation of areas around a motor vehicle
DE19741896A1 (en) * 1997-09-23 1999-04-22 Opel Adam Ag Automobile image screen display for potentially hazardous situations, e.g. traffic accidents during parking
DE19753514A1 (en) * 1997-12-03 1999-06-17 Herbert Siekmann Motor vehicle with bonnet located between front bumper and windscreen
DE19754249A1 (en) * 1997-12-06 1999-06-10 Volkswagen Ag Optical maneuvering aid for automobile
DE19754249B4 (en) * 1997-12-06 2005-05-19 Volkswagen Ag Method and device for optical maneuvering assistance for a motor vehicle
US6654670B2 (en) 1999-03-31 2003-11-25 Aisin Seiki Kabushiki Kaisha Parking assisting apparatus
JP2001010432A (en) * 1999-04-28 2001-01-16 Matsushita Electric Ind Co Ltd Parking aiding device and parking aiding method
DE10037129B4 (en) * 1999-09-13 2016-06-09 Volkswagen Ag Parking and / or Rangierhilfeeinrichtung
US6993159B1 (en) 1999-09-20 2006-01-31 Matsushita Electric Industrial Co., Ltd. Driving support system
JP2002335524A (en) * 1999-09-20 2002-11-22 Matsushita Electric Ind Co Ltd Driving support device
JP2001163132A (en) * 1999-09-30 2001-06-19 Toyota Autom Loom Works Ltd Image converting device for device for monitoring back of vehicle
JP4782963B2 (en) * 1999-10-02 2011-09-28 ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツング Device for monitoring the surroundings of a parked vehicle
JP2003511288A (en) * 1999-10-02 2003-03-25 ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツング Device for monitoring the surroundings of a parked vehicle
US6476730B2 (en) 2000-02-29 2002-11-05 Aisin Seiki Kabushiki Kaisha Assistant apparatus and method for a vehicle in reverse motion
JP4493885B2 (en) * 2000-06-30 2010-06-30 パナソニック株式会社 Driving support system
JP2002087191A (en) * 2000-06-30 2002-03-26 Matsushita Electric Ind Co Ltd Driving supporting system
JP2002034035A (en) * 2000-07-14 2002-01-31 Clarion Co Ltd Image converting method and on-vehicle circumference monitoring device
JP2002092598A (en) * 2000-09-14 2002-03-29 Nissan Motor Co Ltd Own vehicle position detector in parking
JP2002109697A (en) * 2000-10-02 2002-04-12 Matsushita Electric Ind Co Ltd Drive support device
JP2002314991A (en) * 2001-02-09 2002-10-25 Matsushita Electric Ind Co Ltd Image synthesizer
US7369041B2 (en) 2004-04-27 2008-05-06 Matsushita Electric Industrial Co., Ltd. Vehicle surrounding display device
JP2006214236A (en) * 2005-02-07 2006-08-17 Hitachi Constr Mach Co Ltd Measurement display mechanism of construction machine
JP2010076765A (en) * 2009-12-25 2010-04-08 Fujitsu Ten Ltd Travel recorder
US9591280B2 (en) 2011-07-29 2017-03-07 Fujitsu Limited Image processing apparatus, image processing method, and computer-readable recording medium

Similar Documents

Publication Publication Date Title
KR102344171B1 (en) Image generating apparatus, image generating method, and program
JPH0717328A (en) Circumference recognition auxiliary device for vehicle
JP5454934B2 (en) Driving assistance device
JP3034409B2 (en) Rear image display device
JP4914458B2 (en) Vehicle periphery display device
CN101207802B (en) Driving support method and driving support apparatus
JP4687160B2 (en) Perimeter monitoring device
JP4364471B2 (en) Image processing apparatus for vehicle
US20120127312A1 (en) Vehicle periphery image generation apparatus
US20100220189A1 (en) Device and method for monitoring vehicle surroundings
EP1803602A1 (en) Driving assist method and driving assist apparatus
KR20050121259A (en) Parking aid for a vehicle
WO2018159017A1 (en) Vehicle display control device, vehicle display system, vehicle display control method and program
JP2004240480A (en) Operation support device
JP4154980B2 (en) Moving object periphery monitoring device
JP2010001020A (en) Vehicle peripheral display device
JP3960153B2 (en) Vehicle periphery monitoring device
JP2007124097A (en) Apparatus for visually recognizing surrounding of vehicle
JP2006054662A (en) Drive support device
JP5617396B2 (en) Driving assistance device
JP2003259356A (en) Apparatus for monitoring surrounding of vehicle
CN108422932A (en) driving assistance system, method and vehicle
JP2022023870A (en) Display control device
JP3988551B2 (en) Vehicle perimeter monitoring device
JP2011003117A (en) Backward visual recognition support system

Legal Events

Date Code Title Description
A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20010130