JP7258847B2 - Video system for vehicle - Google Patents
Video system for vehicle Download PDFInfo
- Publication number
- JP7258847B2 JP7258847B2 JP2020506613A JP2020506613A JP7258847B2 JP 7258847 B2 JP7258847 B2 JP 7258847B2 JP 2020506613 A JP2020506613 A JP 2020506613A JP 2020506613 A JP2020506613 A JP 2020506613A JP 7258847 B2 JP7258847 B2 JP 7258847B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- area
- vehicle
- vehicle body
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004040 coloring Methods 0.000 claims description 6
- 230000037237 body shape Effects 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 3
- 238000000034 method Methods 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 239000003086 colorant Substances 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000004438 eyesight Effects 0.000 description 1
- 230000004313 glare Effects 0.000 description 1
- 239000003973 paint Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Mechanical Engineering (AREA)
- Signal Processing (AREA)
- Closed-Circuit Television Systems (AREA)
Description
本発明は、カメラで車体周辺を撮影し、運転席のモニタに表示する車両用映像システムに関する。 The present invention relates to a video system for a vehicle that captures images of the surroundings of a vehicle with a camera and displays the images on a monitor in the driver's seat.
近年、バックミラーやサイドミラーに代えて、車体の後側方をカメラで撮影し、撮影した映像を運転席のモニタに表示して、車体周辺の視界を確保する電子ミラーの技術が知られている。例えば、特許文献1には、電子ミラーを採用し、サイドミラーを撤去することで、走行時の空気抵抗を低減した車両の後方認識装置が提案されている。また、特許文献2には、電子ミラーを設け、バックミラーやサイドミラーには映らなかった死角も確認できる車両用映像システムが提案されている。 In recent years, in place of the rear-view and side mirrors, electronic mirror technology has become known, in which the rear and sides of the vehicle are captured by a camera, and the captured image is displayed on a monitor in the driver's seat to ensure visibility around the vehicle. there is For example, Patent Literature 1 proposes a rear recognition device for a vehicle that employs an electronic mirror and removes side mirrors to reduce air resistance during travel. Further, Japanese Patent Laid-Open No. 2002-200000 proposes a video system for a vehicle, which is provided with an electronic mirror and can check blind spots that are not reflected in the rearview mirror or the side mirror.
しかし、特許文献1,2の装置やシステムでは、カメラが従来のサイドミラーよりもフェンダーといった車体の低位置に取り付けられるため、より広範囲に車体が映りこみ、運転者が実際の風景と車体に映り込んだ風景とを混同し、自身が運転している車両の位置を誤認するおそれがあった。
However, in the devices and systems of
この解決策として、例えば、映像の撮影範囲から車体を除外し、車体を表示させない方法も考えられる。しかし、運転者は通常、自身が運転している車両を基準とし、周囲の障害物や他車両との位置関係を相対的に把握している。そのため、単純に運転者の車体を映像から消してしまうと、自身の置かれている状況を把握できなくなり、運転ミスを生じさせるという問題もあった。 As a solution to this problem, for example, a method of not displaying the vehicle body by excluding the vehicle body from the shooting range of the image is conceivable. However, the driver usually uses the vehicle he or she is driving as a reference, and relatively grasps the positional relationship with surrounding obstacles and other vehicles. Therefore, if the vehicle body of the driver is simply erased from the image, the driver will not be able to grasp the situation in which he or she is placed, and this will cause driving errors.
そこで、本発明の目的は、運転者が実際の風景と車体に映り込んだ風景とを容易に判別できる映像を表示させる車両用映像システムを提供することにある。 SUMMARY OF THE INVENTION Accordingly, it is an object of the present invention to provide a video system for a vehicle that displays a video that allows the driver to easily distinguish between the actual scenery and the scenery reflected in the vehicle.
上記課題を解決するために、本発明の車両用映像システムは、車体周辺域を撮影するカメラと、カメラの映像をモニタに表示する制御部と、を備え、制御部が、カメラの映像に基づいて、カメラの映像を、車体を含む第1領域とそれ以外の第2領域とに分割する映像分割手段と、第1領域に所定の加工を施す映像加工手段と、を含むことを特徴とする。 In order to solve the above-described problems, the vehicle image system of the present invention includes a camera that captures an area around a vehicle body, and a control unit that displays the image of the camera on a monitor. and image dividing means for dividing an image of the camera into a first area including the vehicle body and a second area other than the vehicle body, and image processing means for performing predetermined processing on the first area. .
ここで、映像分割手段は、カメラ映像のうち、周囲の映像に比べて変化量が小さい領域を前記第1領域として判定する。 Here, the image dividing means determines an area in the camera image that has a smaller amount of change than the surrounding image as the first area.
また、映像分割手段は、第1領域と第2領域を比較し、例えば、映像がより不鮮明な領域を第1領域として判定する。映像がより屈曲している領域を第1領域として判定しても良い。 Also, the image dividing means compares the first area and the second area, and determines, for example, an area where the image is less clear as the first area. A region where the image is more curved may be determined as the first region.
映像加工手段は、判定された第1領域を着色する。第一領域に所定の車体形状を上書きしても良い。 The image processing means colors the determined first area. A predetermined vehicle body shape may be overwritten in the first area.
本発明の車両用表示システムによれば、車体周辺をカメラで撮影し、撮影した映像を、車体を含む第1領域とそれ以外の第2領域とに分割し、さらに第1領域に所定の映像処理を施すため、運転者は実際の風景(第2領域)と車体に映り込んだ風景の反射像(第1領域)とを容易に区別し、運転状況を的確に把握することができるという優れた効果がある。 According to the vehicular display system of the present invention, the periphery of a vehicle body is photographed by a camera, the photographed image is divided into a first area including the vehicle body and a second area other than the vehicle body, and a predetermined image is stored in the first area. Because of the processing, the driver can easily distinguish between the actual scenery (second area) and the reflected image of the scenery reflected on the vehicle body (first area), and can accurately grasp the driving situation. effective.
以下、本発明の一実施形態を図面に基づいて説明する。図1に示す車両用映像システム1は、車体5の周辺域を撮影するカメラ2L,2Rと、撮影された映像6(図4参照)に映像処理を施し、モニタ4L,4Rへ出力する制御部としてのECU3と、処理済みのカメラ2R,2Lの映像6(図6参照)をそれぞれ表示するモニタ4L,4Rとを備えている。
An embodiment of the present invention will be described below with reference to the drawings. The vehicle image system 1 shown in FIG. 1 includes cameras 2L and 2R that capture the peripheral area of the
図2に示すように、カメラ2は、主に車体側方および後方を撮影できるように車両5のフェンダーに取り付けられている。このとき、カメラ2の撮影領域には、車体5の側面のドアやリアフェンダーも含まれている。
As shown in FIG. 2, the
図3に示すように、ECU3は、カメラ2L,2Rの映像を解析し、車体を含む第1領域としての領域S1とそれ以外の領域である第2領域としての領域S2とに分割する映像分割部31と、領域S1に着色等の加工を施す映像加工部32と、加工済みのカメラ2L,2Rの映像をそれぞれモニタ4L,4Rに出力する映像表示部33とを備えている。
As shown in FIG. 3, the
上記構成の車両用映像システム1においては、カメラ2L,2Rが撮影した映像6は、ECU3の映像分割部31により第1領域S1と、第2領域S2に分割され、映像加工部32により第1領域S1に加工を施された後、映像表示部33によりモニタ4L,4Rにそれぞれ出力される。
In the vehicle image system 1 configured as described above, the
次に、上記構成の車両用映像システム1の映像処理について、図4~図6に従って詳細に説明する。図4に示すように、映像6には、車体5と車体周辺域の風景が撮影されており、道路の白線71および車体に映り込んだその反射像71’と、後方を走行する他の車両72および車体に映り込んだその反射像72’が含まれている。
Next, image processing of the vehicle image system 1 having the above configuration will be described in detail with reference to FIGS. 4 to 6. FIG. As shown in FIG. 4, the
図5に示すように、映像分割部31は、受信したカメラ2の映像6を解析し、映像中に車体5が占める領域を抽出し、この領域を第1領域である領域S1とするとともに、その他の領域を第2領域である領域S2として分割する。
As shown in FIG. 5, the
解析処理は、映像6から静止度合いの高い、つまり、映像の変化量の小さい領域を抽出して行う。カメラ2は車体5に固定されているため、車体5が撮影された領域は映像の変化量が小さくなるはずであり、当該領域を抽出すれば、車体5を含む領域を抽出することが可能となる。抽出の際には、例えば、事前に検知した静止領域の変化量の上限閾値を基準にしても良い。
The analysis process is performed by extracting a region with a high degree of stillness from the
次に、映像分割部31は、判定した領域S1と領域S2について映像を比較し、判定結果を検証する。具体的には、道路の白線71の映像(領域S2)とその反射像71’の映像(領域S1)の比較や、実際に後方を走行している他の車両72の映像(領域S2)とその反射像72’の映像(領域S1)の比較をし、その結果、例えば、より不鮮明であると判断された映像を含む領域を領域S1として判定する。あるいは、より屈曲していると判断された映像を含む領域を領域S1として判定しても良い。車体5に映り込んだ風景の反射像は、車体表面の塗装の微細な凹凸や汚れ等により直接像である風景に比べて不鮮明に現れたり、あるいは、車体表面の形状に応じて屈曲して現れたりするはずであるから、映像6中から不鮮明な領域または屈曲している領域を判定することにより、領域S1を判定することが可能となる。
Next, the
分割された映像6は、映像加工部32へ送信され、領域S1について加工が施される。例えば、図6(a)に示すように、領域S1を所定の色で着色したり、図6(b)に示すように、あらかじめ用意した車体5の写真・CG画像を領域S1に上書きしたりすることができる。
The divided
以上の構成の車両用映像システムによれば、モニタ4に表示される映像6には、車体映像(領域S1)に着色等の処理が施されているため、運転者が実際の風景と車体に映り込んだ風景とを容易に判別でき、運転状況を的確に把握できるという優れた効果がある。
According to the vehicle image system configured as described above, in the
本発明の変形例としては、例えば、車体5への映り込み強度や明度を測定し、その度合いに応じて着色の透明度や写真・CG画像の透過率を調整しても良い。この場合には、運転者の違和感を軽減できるという効果がある。また、夜間の走行時には、後続車両のヘッドランプや街灯が車体5に乱反射する現象(サチレーション)も生じうるので、ECU3にて検知し、サチレーションが生じている領域やその周辺領域の明るさを低減しても良い。この場合には、視界の眩しさを軽減させ、運転者はより正確に車両周辺の状況を把握することができる。
As a modification of the present invention, for example, the intensity and brightness of reflection on the
別の変形例としては、図6(c)に示すように、領域S2との境界部のみに着色を施したり、車体の写真・CG画像を表示するフレームレートを下げたりして処理を行なっても良い。この場合には、映像処理負担を低減できるという効果がある。また、図6(a)~(c)で示した表示は、適宜組み合わせて用いることもできる。 As another modification, as shown in FIG. 6(c), only the boundary with the area S2 is colored, or the frame rate for displaying the photograph/CG image of the vehicle body is lowered. Also good. In this case, there is an effect that the image processing load can be reduced. Also, the displays shown in FIGS. 6A to 6C can be used in combination as appropriate.
なお、本発明は、上記実施形態に限定されるものではなく、以下に例示するように、発明の趣旨を逸脱しない範囲で、各部の構成を適宜に変更して実施することも可能である。
(1)カメラ2を、走行時の空気抵抗を受けにくい場所・位置、例えば、ドアノブ51(図2参照)や、サイドターンシグナルランプ等の車両用灯具内に設置する。
(2)モニタ4L,4Rを、カメラ2L,2Rの映像をそれぞれ確認し易い位置、例えば、ドアミラー付近、ダッシュボードに取り付ける。
(3)モニタ4L,4Rの映像を合体させ、一つのモニタ上に表示させる。
(4)ECU3を左右別個に設け、カメラ2L,2Rまたはモニタ4L,2Rにそれぞれ搭載する。It should be noted that the present invention is not limited to the above-described embodiments, and as illustrated below, it is also possible to change the configuration of each part as appropriate without departing from the scope of the invention.
(1) Install the
(2) The monitors 4L and 4R are installed in positions where the images of the cameras 2L and 2R can be easily checked, for example, near the door mirrors and on the dashboard.
(3) Combine the images on the monitors 4L and 4R and display them on one monitor.
(4) The left and
1 車両用映像システム
2 カメラ
3 ECU
31 映像分割部
32 映像加工部
33 映像表示部
4 モニタ
5 車体
51 ドアノブ
52 タイヤ
6 映像
71 白線
72 後続車両
1 video system for
31
Claims (6)
前記カメラの映像をモニタに表示する制御部と、を備え、
前記制御部が、前記カメラの映像に基づき、前記カメラの映像を、車体を含む第1領域とそれ以外の第2領域とに分割する映像分割手段と、前記第1領域に所定の加工を施す映像加工手段と、を含み、
前記映像分割手段は、前記第1領域と前記第2領域を比較し、映像がより不鮮明な領域を前記第1領域として判定することを特徴とする車両用映像システム。 a camera that captures the surrounding area of the vehicle;
A control unit that displays the image of the camera on a monitor,
The control unit, based on the image of the camera, divides the image of the camera into a first area including a vehicle body and a second area other than the vehicle body, and performs a predetermined processing on the first area. including video processing means,
The vehicle image system, wherein the image dividing means compares the first area and the second area, and determines an area where the image is less clear as the first area.
前記カメラの映像をモニタに表示する制御部と、を備え、
前記制御部が、前記カメラの映像に基づき、前記カメラの映像を、車体を含む第1領域とそれ以外の第2領域とに分割する映像分割手段と、前記第1領域に所定の加工を施す映像加工手段と、を含み、
前記映像分割手段は、前記第1領域と前記第2領域を比較し、映像がより屈曲している領域を前記第1領域として判定することを特徴とする車両用映像システム。 a camera that captures the surrounding area of the vehicle;
A control unit that displays the image of the camera on a monitor,
The control unit, based on the image of the camera, divides the image of the camera into a first area including a vehicle body and a second area other than the vehicle body, and performs a predetermined processing on the first area. including video processing means,
The vehicle image system, wherein the image dividing means compares the first area and the second area, and determines an area where the image is more curved as the first area.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018047493 | 2018-03-15 | ||
JP2018047493 | 2018-03-15 | ||
PCT/JP2019/010306 WO2019177036A1 (en) | 2018-03-15 | 2019-03-13 | Vehicle imaging system |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2019177036A1 JPWO2019177036A1 (en) | 2021-03-11 |
JP7258847B2 true JP7258847B2 (en) | 2023-04-17 |
Family
ID=67907927
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020506613A Active JP7258847B2 (en) | 2018-03-15 | 2019-03-13 | Video system for vehicle |
Country Status (3)
Country | Link |
---|---|
JP (1) | JP7258847B2 (en) |
CN (1) | CN111886858B (en) |
WO (1) | WO2019177036A1 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7506036B2 (en) | 2021-07-29 | 2024-06-25 | Kddi株式会社 | Apparatus, method and program for discriminating mirror images |
CN117011830B (en) * | 2023-08-16 | 2024-04-26 | 微牌科技(浙江)有限公司 | Image recognition method, device, computer equipment and storage medium |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014116756A (en) | 2012-12-07 | 2014-06-26 | Toyota Motor Corp | Periphery monitoring system |
JP2015201680A (en) | 2014-04-04 | 2015-11-12 | 富士通株式会社 | Image display apparatus, image display method, and image display program |
JP2017183974A (en) | 2016-03-30 | 2017-10-05 | マツダ株式会社 | Electronic mirror control device |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000059763A (en) * | 1998-08-06 | 2000-02-25 | Mitsubishi Electric Corp | Monitoring device around vehicle |
JP2006050246A (en) * | 2004-08-04 | 2006-02-16 | Auto Network Gijutsu Kenkyusho:Kk | Device for visually recognizing around vehicle |
JP5347257B2 (en) * | 2007-09-26 | 2013-11-20 | 日産自動車株式会社 | Vehicle periphery monitoring device and video display method |
KR100966288B1 (en) * | 2009-01-06 | 2010-06-28 | 주식회사 이미지넥스트 | Around image generating method and apparatus |
EP2512133B1 (en) * | 2009-12-07 | 2018-07-18 | Clarion Co., Ltd. | Vehicle periphery image display system |
WO2011086807A1 (en) * | 2010-01-14 | 2011-07-21 | 本田技研工業株式会社 | Vehicle periphery monitoring device |
JP5892876B2 (en) * | 2011-07-28 | 2016-03-23 | クラリオン株式会社 | In-vehicle environment recognition system |
JP5953824B2 (en) * | 2012-03-02 | 2016-07-20 | 日産自動車株式会社 | Vehicle rear view support apparatus and vehicle rear view support method |
JP6011104B2 (en) * | 2012-07-24 | 2016-10-19 | 株式会社デンソー | Visibility support device for vehicle |
JP6115642B2 (en) * | 2013-08-01 | 2017-04-19 | 株式会社島津製作所 | Height measuring device |
CN106231986B (en) * | 2014-06-18 | 2018-08-28 | 奥林巴斯株式会社 | Image processing apparatus |
JP6413477B2 (en) * | 2014-08-21 | 2018-10-31 | アイシン精機株式会社 | Image display control device and image display system |
-
2019
- 2019-03-13 JP JP2020506613A patent/JP7258847B2/en active Active
- 2019-03-13 CN CN201980019090.XA patent/CN111886858B/en active Active
- 2019-03-13 WO PCT/JP2019/010306 patent/WO2019177036A1/en active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014116756A (en) | 2012-12-07 | 2014-06-26 | Toyota Motor Corp | Periphery monitoring system |
JP2015201680A (en) | 2014-04-04 | 2015-11-12 | 富士通株式会社 | Image display apparatus, image display method, and image display program |
JP2017183974A (en) | 2016-03-30 | 2017-10-05 | マツダ株式会社 | Electronic mirror control device |
Also Published As
Publication number | Publication date |
---|---|
CN111886858B (en) | 2022-06-21 |
CN111886858A (en) | 2020-11-03 |
JPWO2019177036A1 (en) | 2021-03-11 |
WO2019177036A1 (en) | 2019-09-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10029621B2 (en) | Rear view camera system using rear view mirror location | |
JP5742937B2 (en) | Visibility support device for vehicle | |
US20180015879A1 (en) | Side-view mirror camera system for vehicle | |
JP5459154B2 (en) | Vehicle surrounding image display apparatus and method | |
KR101778173B1 (en) | A rearview assembly of a vehicle for displaying images | |
WO2015118806A1 (en) | Image analysis apparatus and image analysis method | |
US20140232872A1 (en) | Vehicle camera image quality improvement in poor visibility conditions by contrast amplification | |
US10752177B2 (en) | Vehicular visual recognition device and vehicular visual recognition image display method | |
JP6321178B2 (en) | Method for operating a rear view camera system of an automobile after detection of a headlight flasher, a rear view camera system and an automobile | |
JP2010058742A (en) | Vehicle drive assisting device | |
JP2008044603A (en) | Glare-proof device for vehicle | |
JP6481970B2 (en) | Driver shooting device | |
JP2009255740A (en) | Photographing device for vehicle | |
JP7258847B2 (en) | Video system for vehicle | |
JP4798015B2 (en) | Anti-glare control device | |
JP2007091186A (en) | Photographing/display method of peripheral state of vehicle and photographing/display system | |
JP2018022958A (en) | Vehicle display controller and vehicle monitor system | |
WO2015151404A1 (en) | Rear condition display device and rear condition display method | |
JP6168024B2 (en) | Captured image display device, captured image display method, and captured image display program | |
KR102061210B1 (en) | Side front blind area display apparatus for vehicle and the method thereof | |
JP3764317B2 (en) | In-vehicle peripheral visual recognition device | |
CN110831814A (en) | Passenger camera device | |
JP7051667B2 (en) | In-vehicle device | |
JP6327388B2 (en) | Captured image display device, captured image display method, and captured image display program | |
JP4376050B2 (en) | Vehicle periphery monitoring device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220712 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220909 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221004 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221201 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230314 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230405 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7258847 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |