JP2018078372A - 画像出力装置 - Google Patents
画像出力装置 Download PDFInfo
- Publication number
- JP2018078372A JP2018078372A JP2016217320A JP2016217320A JP2018078372A JP 2018078372 A JP2018078372 A JP 2018078372A JP 2016217320 A JP2016217320 A JP 2016217320A JP 2016217320 A JP2016217320 A JP 2016217320A JP 2018078372 A JP2018078372 A JP 2018078372A
- Authority
- JP
- Japan
- Prior art keywords
- image
- luminance
- unit
- range
- generated
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 239000002131 composite material Substances 0.000 claims abstract description 63
- 238000003384 imaging method Methods 0.000 claims abstract description 46
- 238000007906 compression Methods 0.000 claims abstract description 32
- 230000006835 compression Effects 0.000 claims abstract description 31
- 230000006870 function Effects 0.000 description 13
- 238000000034 method Methods 0.000 description 10
- 239000000470 constituent Substances 0.000 description 9
- 230000000694 effects Effects 0.000 description 8
- 230000035945 sensitivity Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000010586 diagram Methods 0.000 description 1
- 229920006395 saturated elastomer Polymers 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/57—Control of the dynamic range
- H04N25/58—Control of the dynamic range involving two or more exposures
- H04N25/587—Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields
- H04N25/589—Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields with different integration times, e.g. short and long exposures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/57—Control of the dynamic range
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
- B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
- Exposure Control For Cameras (AREA)
- Picture Signal Circuits (AREA)
- Mechanical Engineering (AREA)
Abstract
Description
(第1実施形態)
[1.構成]
まず、本実施形態に係る画像出力装置10の構成について、図1を参照して説明する。画像出力装置10は、カメラ装置20と、処理装置30と、を備える。
次に、画像出力装置10が実行する画像圧縮処理の処理手順について、図2のフローチャートを参照して説明する。本処理手順は、所定の時間間隔で繰り返し実行される。
図3に、短シャッタ画像及び長シャッタ画像の輝度を、それぞれ12ビット幅の画素値で表した場合における、輝度に対する画素値の特性グラフを示す。長シャッタ画像では、短シャッタ画像よりもシャッタ時間が16倍長く、入射光量は16倍となる。よって、長シャッタ画像は、短シャッタ画像と同じ輝度の被写体を写しても、画素値は16倍となっている。
図9に、第1シーンにおいて撮像したHDR合成画像の輝度ヒストグラム及び圧縮特性を示す。また、図10に、第2シーンにおいて撮像したHDR合成画像の輝度ヒストグラム及び圧縮特性を示す。第1シーンと第2シーンは異なるシーンであり、第1シーンは、例えば昼のシーン、第2シーンは、例えばトンネル出口のシーンである。
以上説明した第1実施形態によれば、以下の効果が得られる。
(1)撮像部21を制御する制御パラメータを適切に算出することにより、被写体の輝度が分布する分布範囲をダイナミックレンジとするHDR合成画像を生成することができる。そして、生成したHDR合成画像のダイナミックレンジに、限られた出力画素値を全て割り当てることで、被写体が存在しない不要な輝度に対する出力画素値の割り当てを抑制して、被写体が存在する有効な輝度に対して出力画素値を割り当てることができる。
(4)分布範囲の下限値を下回る輝度の画素数が暗閾値よりも少なくなるように、分布範囲を設定することにより、被写体の黒潰れを抑制することができる。
[1.第1実施形態との相違点]
第2実施形態は、基本的な構成は第1実施形態と同様であるため、共通する構成については説明を省略し、相違点を中心に説明する。なお、第1実施形態と同じ符号は、同一の構成を示すものであって、先行する説明を参照する。
次に、第2実施形態の画像出力装置10が実行する画像圧縮処理について、図11のフローチャートを用いて説明する。本処理手順は、所定の時間間隔で繰り返し実行される。
続いて、ステップS110では、撮像制御部33が、ステップS100で算出された制御パラメータを用いて撮像部21を制御し、短シャッタ撮像と長シャッタ撮像を行う。
続いて、ステップS140では、図12に示すように、画像処理部34が、ステップS120で生成されたHDR合成画像から、ステップS130において設定された分布範囲となるダイナミックレンジを切り出すように調整された調整画像を生成する。そして、画像処理部34は、HDR合成画像を調整画像に更新する。
続いて、ステップS160では、画像処理部34が、ステップS150において生成した圧縮特性を用いてHDR合成画像から圧縮画像を生成し、生成した圧縮画像を出力する。本実施形態では、第2ビット幅を8ビット幅とし、HDR合成画像を圧縮して、8ビット幅の圧縮画像を生成する。以上で、本処理を一旦終了する。
以上詳述した第2実施形態によれば、前述した第1実施形態の効果(3)〜(5)に加え、以下の効果が得られる。
[1.第2実施形態との相違点]
第3実施形態は、基本的な構成は第2実施形態と同様であるため、共通する構成については説明を省略し、相違点を中心に説明する。なお、第2実施形態と同じ符号は、同一の構成を示すものであって、先行する説明を参照する。
以上説明した第3実施形態によれば、前述した第1実施形態の効果(3)〜(5)に加え、前述した第2実施形態の効果(6)が得られる。
以上、本発明を実施するための形態について説明したが、本発明は上述の実施形態に限定されることなく、種々変形して実施することができる。
Claims (7)
- 複数のシャッタ時間を含む車載カメラ(20)の制御パラメータを繰り返し算出するように構成されたパラメータ算出部(32)と、
前記パラメータ算出部により算出された前記制御パラメータを用いて、前記車載カメラを制御するように構成された撮像制御部(33)と、
前記撮像制御部により制御された前記車載カメラにより撮像された、異なる前記シャッタ時間の複数の撮像画像を合成して、予め設定された第1ビット幅の画素値で輝度を表す合成画像を生成するように構成された画像生成部(22)と、
前記画像生成部により生成された前記合成画像において、被写体の輝度が分布する範囲である分布範囲を設定するように構成された範囲設定部(31)と、
前記範囲設定部により設定された前記分布範囲の輝度を、前記第1ビット幅よりも狭い予め設定された第2ビット幅の画素値で表す圧縮特性を生成するように構成された特性生成部(22)と、
前記特性生成部で生成された前記圧縮特性を用いて、前記合成画像を圧縮して圧縮画像を生成し、生成した前記圧縮画像を出力するように構成された画像出力部(22)と、
を備える、画像出力装置。 - 前記パラメータ算出部は、前記画像生成部により生成される前記合成画像の輝度幅が、前回生成された前記合成画像に対して前記範囲設定部により設定された前記分布範囲となるように、前記車載カメラの制御パラメータを算出するように構成されている、請求項1に記載の画像処理装置。
- 前記画像処理部は、前記範囲設定部を含み、
前記パラメータ算出部は、前記合成画像の輝度幅が前記カメラ装置の設計で決まる最大幅となるように、前記車載カメラの制御パラメータを算出するように構成されており、
前記画像出力部は、前記画像生成部により生成された前記合成画像から、前記範囲設定部により設定された前記分布範囲となる輝度幅切り出すように調整された調整画像を生成し、切り出した前記調整画像を前記合成画像として、前記圧縮画像を生成するように構成されている、請求項1に記載の画像処理装置。 - 前記画像生成部は、前記範囲設定部を含み、前記車載カメラに含まれるハードウェアで構成されており、
前記パラメータ算出部は、前記合成画像の輝度幅が前記車載カメラの設計で決まる最大幅となるように、前記車載カメラの制御パラメータを算出するように構成されており、
前記画像生成部は、生成した前記合成画像から、前記範囲設定部により設定された前記分布範囲となる輝度幅を切り出すように調整された調整画像を生成し、前記合成画像を前記調整画像に更新するように構成されている、請求項1に記載の画像処理装置。 - 前記範囲設定部は、前記分布範囲の上限値を超える輝度の画素数が、予め設定された明閾値よりも少なくなるように、前記分布範囲を設定するように構成されている、請求項1〜4のいずれか1項に記載の画像出力装置。
- 前記範囲設定部は、前記分布範囲の下限値を下回る輝度の画素数が、予め設定された暗閾値よりも少なくなるように、前記分布範囲を設定するように構成されている、請求項1〜5のいずれか1項に記載の画像出力装置。
- 前記範囲設定部は、前記合成画像の輝度が、予め設定された上限閾値を超える範囲に分布している場合は、前記上限閾値を超える前記輝度の分布を除外して、前記分布範囲を設定するように構成されている、請求項1〜6のいずれか1項に記載の画像出力装置。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016217320A JP6740866B2 (ja) | 2016-11-07 | 2016-11-07 | 画像出力装置 |
US15/804,782 US10136080B2 (en) | 2016-11-07 | 2017-11-06 | Image generating apparatus |
DE102017219694.7A DE102017219694A1 (de) | 2016-11-07 | 2017-11-06 | Bilderzeugungsvorrichtung |
CN201711085293.8A CN108063898B (zh) | 2016-11-07 | 2017-11-07 | 图像生成设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016217320A JP6740866B2 (ja) | 2016-11-07 | 2016-11-07 | 画像出力装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018078372A true JP2018078372A (ja) | 2018-05-17 |
JP6740866B2 JP6740866B2 (ja) | 2020-08-19 |
Family
ID=62002865
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016217320A Active JP6740866B2 (ja) | 2016-11-07 | 2016-11-07 | 画像出力装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10136080B2 (ja) |
JP (1) | JP6740866B2 (ja) |
CN (1) | CN108063898B (ja) |
DE (1) | DE102017219694A1 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10721426B2 (en) * | 2017-08-31 | 2020-07-21 | Canon Kabushiki Kaisha | Solid-state image sensor, image capture apparatus and image capture method |
US10965894B2 (en) * | 2017-11-20 | 2021-03-30 | Flir Commercial Systems, Inc. | Short wave infrared image sensor with automatic exposure and dynamic range control |
JP7373299B2 (ja) * | 2019-04-26 | 2023-11-02 | キヤノン株式会社 | 画像処理装置およびその制御方法 |
CN112243090A (zh) * | 2019-07-16 | 2021-01-19 | 三星电子株式会社 | 图像传感器和图像处理系统 |
KR20210009255A (ko) | 2019-07-16 | 2021-01-26 | 삼성전자주식회사 | 이미지 센서 및 이를 포함하는 이미지 처리 시스템 |
JP7217211B2 (ja) * | 2019-08-23 | 2023-02-02 | 日立Astemo株式会社 | 撮像装置及び撮像方法 |
CN117135288B (zh) * | 2023-10-25 | 2024-02-02 | 钛玛科(北京)工业科技有限公司 | 图像拼接方法及装置 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008228058A (ja) * | 2007-03-14 | 2008-09-25 | Sony Corp | 撮像装置、撮像方法、露光制御方法、プログラム |
JP2013138301A (ja) * | 2011-12-28 | 2013-07-11 | Mitsubishi Electric Corp | 画像処理装置、画像処理方法及び撮像装置 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3801126B2 (ja) * | 2002-09-25 | 2006-07-26 | ソニー株式会社 | 撮像装置,撮像装置の画像出力方法,およびコンピュータプログラム |
US8120570B2 (en) * | 2004-12-02 | 2012-02-21 | Sharp Laboratories Of America, Inc. | Systems and methods for tone curve generation, selection and application |
JP4996402B2 (ja) | 2007-09-14 | 2012-08-08 | 株式会社東芝 | 撮像装置 |
CN101212545A (zh) * | 2007-12-24 | 2008-07-02 | 电子科技大学 | 一种高动态范围的图形映射到低动态范围的方法及装置 |
JP5646884B2 (ja) | 2010-05-27 | 2014-12-24 | 矢崎エナジーシステム株式会社 | 車載画像撮影用制御装置 |
JP5621569B2 (ja) * | 2010-12-13 | 2014-11-12 | ソニー株式会社 | 撮像装置及びシャッタ動作補正方法 |
US8947555B2 (en) * | 2011-04-18 | 2015-02-03 | Qualcomm Incorporated | White balance optimization with high dynamic range images |
CN103024300B (zh) * | 2012-12-25 | 2015-11-25 | 华为技术有限公司 | 一种高动态范围图像显示方法及装置 |
CN103916669B (zh) * | 2014-04-11 | 2017-06-13 | 浙江宇视科技有限公司 | 高动态范围图像压缩方法及装置 |
US9307162B2 (en) * | 2014-05-21 | 2016-04-05 | Himax Imaging Limited | Local enhancement apparatus and method to generate high dynamic range images by blending brightness-preserved and brightness-adjusted blocks |
JP6533050B2 (ja) | 2014-11-13 | 2019-06-19 | クラリオン株式会社 | 車載カメラシステム |
RU2678483C1 (ru) * | 2015-03-02 | 2019-01-29 | Долби Лэборетериз Лайсенсинг Корпорейшн | Контент-адаптивный перцепционный квантизатор для изображений с высоким динамическим диапазоном |
JP6549901B2 (ja) | 2015-05-26 | 2019-07-24 | 株式会社Soken | 点火装置 |
CN105450939A (zh) * | 2015-11-19 | 2016-03-30 | 上海斐讯数据通信技术有限公司 | 一种高动态范围图像的显示方法及移动终端 |
-
2016
- 2016-11-07 JP JP2016217320A patent/JP6740866B2/ja active Active
-
2017
- 2017-11-06 US US15/804,782 patent/US10136080B2/en active Active
- 2017-11-06 DE DE102017219694.7A patent/DE102017219694A1/de active Pending
- 2017-11-07 CN CN201711085293.8A patent/CN108063898B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008228058A (ja) * | 2007-03-14 | 2008-09-25 | Sony Corp | 撮像装置、撮像方法、露光制御方法、プログラム |
JP2013138301A (ja) * | 2011-12-28 | 2013-07-11 | Mitsubishi Electric Corp | 画像処理装置、画像処理方法及び撮像装置 |
Also Published As
Publication number | Publication date |
---|---|
CN108063898B (zh) | 2020-12-22 |
DE102017219694A1 (de) | 2018-05-09 |
US10136080B2 (en) | 2018-11-20 |
JP6740866B2 (ja) | 2020-08-19 |
CN108063898A (zh) | 2018-05-22 |
US20180131884A1 (en) | 2018-05-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6740866B2 (ja) | 画像出力装置 | |
EP2571249B1 (en) | Image synthesizing device, image synthesizing method and computer readable medium | |
JP5743696B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP4089911B2 (ja) | 画像入力装置 | |
JP6049343B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JPWO2006098358A1 (ja) | 画像処理装置および方法、プログラム、並びに記録媒体 | |
CN109474770B (zh) | 一种成像装置及成像方法 | |
JP4952499B2 (ja) | 画像処理装置 | |
JP2009017477A (ja) | 撮像装置及び撮像方法 | |
JP5804857B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
WO2020202885A1 (ja) | 撮像装置、および、画像調整方法 | |
US11887286B2 (en) | Image processing device and image processing method to generate image for object recognition | |
JP2008206111A (ja) | 撮影装置及び撮影方法 | |
JP2006339994A (ja) | 車載カメラ制御装置 | |
JP2012088785A (ja) | 対象物識別装置及びプログラム | |
JP6543787B2 (ja) | 画像処理装置および画像処理方法 | |
JP5427744B2 (ja) | 画像処理装置 | |
JP6376339B2 (ja) | 画像処理装置および画像処理方法 | |
JP6944350B2 (ja) | 撮影画像表示システム、電子ミラーシステム及び撮影画像表示方法 | |
JP6570311B2 (ja) | 画像処理装置及び画像処理方法 | |
JP2015177391A (ja) | 画像処理装置、撮像装置、画像処理プログラム、画像処理方法 | |
JP2009017336A (ja) | 撮像装置及び撮像システム | |
JP6693387B2 (ja) | 画像処理装置 | |
JP2017068513A (ja) | 画像処理装置及びその方法、プログラム、記憶媒体 | |
JP2020177340A (ja) | 画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190123 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191024 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191210 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200210 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200623 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200706 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6740866 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |