JP2021016103A - 画像処理装置、画像処理プログラム - Google Patents
画像処理装置、画像処理プログラム Download PDFInfo
- Publication number
- JP2021016103A JP2021016103A JP2019130370A JP2019130370A JP2021016103A JP 2021016103 A JP2021016103 A JP 2021016103A JP 2019130370 A JP2019130370 A JP 2019130370A JP 2019130370 A JP2019130370 A JP 2019130370A JP 2021016103 A JP2021016103 A JP 2021016103A
- Authority
- JP
- Japan
- Prior art keywords
- image
- information
- imaging
- vehicle
- dynamic range
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 30
- 238000003384 imaging method Methods 0.000 claims abstract description 52
- 238000012937 correction Methods 0.000 claims abstract description 27
- 230000002194 synthesizing effect Effects 0.000 claims description 12
- 239000000203 mixture Substances 0.000 claims description 11
- 230000035945 sensitivity Effects 0.000 claims description 7
- 238000000034 method Methods 0.000 description 17
- 238000007906 compression Methods 0.000 description 16
- 230000006835 compression Effects 0.000 description 15
- 239000002131 composite material Substances 0.000 description 13
- 230000006870 function Effects 0.000 description 12
- 230000003287 optical effect Effects 0.000 description 9
- 230000015572 biosynthetic process Effects 0.000 description 4
- 238000003786 synthesis reaction Methods 0.000 description 4
- 240000004050 Pentaglottis sempervirens Species 0.000 description 2
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000001454 recorded image Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
- B60R2300/304—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Mechanical Engineering (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
Abstract
Description
12 右カメラアダプタ
14 RHカメラヘッド(撮像装置)
16 左カメラアダプタ
18 LHカメラヘッド(撮像装置)
20 RRカメラヘッド(撮像装置)
22 後進専用カメラ
24 情報表示用モニタ
26 右サイドウィンドウ部
28 フロントウィンドウ部
30 右サイドAピラー
32 RHモニタ
34 左サイドウィンドウ部
36 左サイドAピラー
38 LHモニタ
40 センターコンソール部
42 シフトレバー
44 ルームミラー部
45 表示ドライバ
46 表示デバイス
48 表示部
50 画像処理装置
52 画像情報メモリ(取得部)
54 撮像パラメータ情報メモリ(取得部)
56 画像情報メモリ(取得部)
58 撮像パラメータ情報メモリ(取得部)
60 画像情報メモリ(取得部)
62 撮像パラメータ情報メモリ(取得部)
63 輝度合成部
64 画像合成部(画像合成部)
66 カメラ間補正値計算部(計算部)
68 ローカルトーンマッピング部(調整部)
70 背景輝度推定部
72 輝度差分・トーン圧縮部
74 出力部
R 一点鎖線
AR 視野領域
L 一点鎖線
AL 領域
C 一点鎖線
AC 領域
B 一点鎖線
AB 領域
Claims (9)
- 車両における運転者の視野の補助となり得る特定の画角を、複数の撮像装置で分割して撮像したときの各々の画像情報、及び画像の属性情報を取得する取得部と、
前記取得部で取得した前記属性情報から、各撮像装置間のダイナミックレンジを一致させるための補正値を計算する計算部と、
前記計算部で計算された補正値と、各画像情報の属性情報と、に基づいて、前記各々の画像情報を単一のダイナミックレンジの画像へ合成する画像合成部と、
前記画像合成部で合成した画像情報を表示デバイスへ出力する出力部と、
を有する画像処理装置。 - 前記画像合成部で合成した画像情報が、撮像装置のダイナミックレンジより広いダイナミックレンジを持つことを特徴する請求項1記載の画像処理装置。
- 前記画像合成部で合成した画像情報を、前記表示デバイスが表示可能なダイナミックレンジに調整する調整部をさらに有する請求項1又は請求項2記載の画像処理装置。
- 前記属性情報が、各画像の撮像時の感度、露出時間、絞りを含む撮像パラメータである請求項1から請求項3の何れか1項記載の画像処理装置。
- 前記属性情報が、各画像情報の重複撮像領域から得られる各撮像装置の個体差情報である請求項1から請求項3の何れか1項記載の画像処理装置。
- 複数の撮像装置が、それぞれ車両に搭載され、当該車両の右後方を撮像するRHカメラヘッドと、当該車両の左後方を撮像するLHカメラヘッドと、当該車両の後方を撮像するRRカメラヘッドとを含み、各撮像装置で撮像した画像情報の少なくとも一部が重複するように、各撮像装置で撮像する画角が定められる請求項1〜請求項5の何れか1項記載の画像処理装置。
- 前記表示デバイスが、車両の後方を確認するためのミラーの代用として設置されるモニタである請求項1〜請求項6の何れか1項記載の画像処理装置。
- 前記表示デバイスが、予め定めた期間の撮像情報を、期間の古い撮像情報から削除し、期間の新しい撮像を記憶する循環記憶を行う記憶装置である請求項1〜請求項6の何れか1項記載の画像処理装置。
- コンピュータを、
請求項1〜請求項8の何れか1項記載の画像処理装置として動作させる、
画像処理プログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019130370A JP7384343B2 (ja) | 2019-07-12 | 2019-07-12 | 画像処理装置、画像処理プログラム |
CN202080050288.7A CN114097216A (zh) | 2019-07-12 | 2020-07-10 | 图像处理装置和图像处理程序 |
PCT/JP2020/027158 WO2021010356A1 (en) | 2019-07-12 | 2020-07-10 | Image processing device and image processing program |
DE112020003339.2T DE112020003339T5 (de) | 2019-07-12 | 2020-07-10 | Bildverarbeitungsvorrichtung und Bildverarbeitungsprogramm |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019130370A JP7384343B2 (ja) | 2019-07-12 | 2019-07-12 | 画像処理装置、画像処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021016103A true JP2021016103A (ja) | 2021-02-12 |
JP7384343B2 JP7384343B2 (ja) | 2023-11-21 |
Family
ID=71784598
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019130370A Active JP7384343B2 (ja) | 2019-07-12 | 2019-07-12 | 画像処理装置、画像処理プログラム |
Country Status (4)
Country | Link |
---|---|
JP (1) | JP7384343B2 (ja) |
CN (1) | CN114097216A (ja) |
DE (1) | DE112020003339T5 (ja) |
WO (1) | WO2021010356A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023074067A1 (ja) * | 2021-10-29 | 2023-05-04 | 日立Astemo株式会社 | 撮像装置 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007072750A (ja) * | 2005-09-07 | 2007-03-22 | Alpine Electronics Inc | 合成画像生成装置及び合成画像生成方法 |
JP2009017020A (ja) * | 2007-07-02 | 2009-01-22 | Nissan Motor Co Ltd | 画像処理装置及び表示画像生成方法 |
JP2011077898A (ja) * | 2009-09-30 | 2011-04-14 | Fujitsu Ten Ltd | 表示装置、表示方法、および、プログラム |
JP2011151596A (ja) * | 2010-01-21 | 2011-08-04 | Rohm Co Ltd | 生体認証装置およびモバイル機器 |
JP2014110627A (ja) * | 2012-12-04 | 2014-06-12 | Aisin Seiki Co Ltd | 車両の制御装置、及び制御方法 |
WO2014155812A1 (ja) * | 2013-03-27 | 2014-10-02 | 富士フイルム株式会社 | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム |
JP2018026606A (ja) * | 2016-08-08 | 2018-02-15 | キヤノン株式会社 | 画像処理装置 |
JP2019067016A (ja) * | 2017-09-29 | 2019-04-25 | 株式会社ホンダアクセス | ドライブレコーダ |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3297040B1 (ja) * | 2001-04-24 | 2002-07-02 | 松下電器産業株式会社 | 車載カメラの画像合成表示方法及びその装置 |
JP5113220B2 (ja) | 2010-06-28 | 2013-01-09 | 本田技研工業株式会社 | 車両用画像表示装置 |
JP5655667B2 (ja) * | 2011-03-31 | 2015-01-21 | カシオ計算機株式会社 | 撮像装置及び撮像制御方法、画像処理装置及び画像処理方法、並びにプログラム |
US9510636B2 (en) | 2012-02-20 | 2016-12-06 | Nike, Inc. | Article of footwear incorporating a knitted component with an integral knit tongue |
JP2017175480A (ja) | 2016-03-25 | 2017-09-28 | パナソニックIpマネジメント株式会社 | 撮像装置システム |
GB2559758B (en) * | 2017-02-16 | 2021-10-27 | Jaguar Land Rover Ltd | Apparatus and method for displaying information |
JP2020126551A (ja) | 2019-02-06 | 2020-08-20 | トヨタ自動車株式会社 | 車両周辺監視システム |
-
2019
- 2019-07-12 JP JP2019130370A patent/JP7384343B2/ja active Active
-
2020
- 2020-07-10 CN CN202080050288.7A patent/CN114097216A/zh active Pending
- 2020-07-10 DE DE112020003339.2T patent/DE112020003339T5/de active Pending
- 2020-07-10 WO PCT/JP2020/027158 patent/WO2021010356A1/en active Application Filing
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007072750A (ja) * | 2005-09-07 | 2007-03-22 | Alpine Electronics Inc | 合成画像生成装置及び合成画像生成方法 |
JP2009017020A (ja) * | 2007-07-02 | 2009-01-22 | Nissan Motor Co Ltd | 画像処理装置及び表示画像生成方法 |
JP2011077898A (ja) * | 2009-09-30 | 2011-04-14 | Fujitsu Ten Ltd | 表示装置、表示方法、および、プログラム |
JP2011151596A (ja) * | 2010-01-21 | 2011-08-04 | Rohm Co Ltd | 生体認証装置およびモバイル機器 |
JP2014110627A (ja) * | 2012-12-04 | 2014-06-12 | Aisin Seiki Co Ltd | 車両の制御装置、及び制御方法 |
WO2014155812A1 (ja) * | 2013-03-27 | 2014-10-02 | 富士フイルム株式会社 | 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム |
JP2018026606A (ja) * | 2016-08-08 | 2018-02-15 | キヤノン株式会社 | 画像処理装置 |
JP2019067016A (ja) * | 2017-09-29 | 2019-04-25 | 株式会社ホンダアクセス | ドライブレコーダ |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023074067A1 (ja) * | 2021-10-29 | 2023-05-04 | 日立Astemo株式会社 | 撮像装置 |
Also Published As
Publication number | Publication date |
---|---|
CN114097216A (zh) | 2022-02-25 |
DE112020003339T5 (de) | 2022-03-31 |
WO2021010356A1 (en) | 2021-01-21 |
JP7384343B2 (ja) | 2023-11-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4543147B2 (ja) | パノラマビジョンシステム及び方法 | |
US7576767B2 (en) | Panoramic vision system and method | |
CN102387344B (zh) | 成像装置、成像系统和成像方法 | |
JP4254887B2 (ja) | 車両用画像表示システム | |
KR100936557B1 (ko) | 차량용 주변 감시 장치 및 영상 표시 방법 | |
US11800045B2 (en) | Image synthesis device for electronic mirror and method thereof | |
EP2434759B1 (en) | Monitoring apparatus | |
DE112017005807T5 (de) | Bildverarbeitungsvorrichtung und Bildverarbeitungsverfahren | |
EP2476588A1 (en) | Vehicle surrounding monitor apparatus | |
US10965872B2 (en) | Image display apparatus | |
US10455159B2 (en) | Imaging setting changing apparatus, imaging system, and imaging setting changing method | |
WO2018167844A1 (ja) | ヘッドアップディスプレイ装置とその画像表示方法 | |
KR20100081964A (ko) | 주변 영상 생성 방법 및 장치 | |
JP2011049735A (ja) | 車両周辺画像提供装置 | |
JP2007129290A (ja) | 車両/周囲画像提供装置 | |
JP7384343B2 (ja) | 画像処理装置、画像処理プログラム | |
JP2023046953A (ja) | 画像処理システム、移動装置、画像処理方法、およびコンピュータプログラム | |
JP2019001325A (ja) | 車載用撮像装置 | |
JP7073237B2 (ja) | 画像表示装置、画像表示方法 | |
JP2023046965A (ja) | 画像処理システム、移動装置、画像処理方法、およびコンピュータプログラム | |
US20220222947A1 (en) | Method for generating an image of vehicle surroundings, and apparatus for generating an image of vehicle surroundings | |
JP2008146436A (ja) | 車両周辺画像表示装置およびその表示方法 | |
JP2005303442A (ja) | 車両用視覚支援装置 | |
JP5606774B2 (ja) | 映像表示装置及び映像表示方法 | |
JP2023046511A (ja) | 画像処理システム、画像処理方法、およびコンピュータプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220425 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230110 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230313 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20230418 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230711 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20230822 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231010 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231027 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7384343 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |