JP6309111B2 - 撮像条件を検出するための方法および装置 - Google Patents
撮像条件を検出するための方法および装置 Download PDFInfo
- Publication number
- JP6309111B2 JP6309111B2 JP2016566881A JP2016566881A JP6309111B2 JP 6309111 B2 JP6309111 B2 JP 6309111B2 JP 2016566881 A JP2016566881 A JP 2016566881A JP 2016566881 A JP2016566881 A JP 2016566881A JP 6309111 B2 JP6309111 B2 JP 6309111B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- camera
- imaging
- brightness
- exposure
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims description 107
- 238000000034 method Methods 0.000 title claims description 49
- 238000009826 distribution Methods 0.000 claims description 40
- 238000012545 processing Methods 0.000 claims description 37
- 230000001186 cumulative effect Effects 0.000 claims description 32
- 238000005286 illumination Methods 0.000 claims description 26
- 230000008569 process Effects 0.000 claims description 18
- 238000001514 detection method Methods 0.000 claims description 14
- 230000004927 fusion Effects 0.000 claims description 14
- 238000000605 extraction Methods 0.000 claims description 6
- 230000008859 change Effects 0.000 claims description 5
- 238000004590 computer program Methods 0.000 claims description 5
- 238000001914 filtration Methods 0.000 claims description 5
- 238000004364 calculation method Methods 0.000 claims description 4
- 230000004044 response Effects 0.000 claims description 3
- 230000003044 adaptive effect Effects 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 7
- 230000009977 dual effect Effects 0.000 description 6
- 238000012549 training Methods 0.000 description 4
- 238000007499 fusion processing Methods 0.000 description 3
- 238000011835 investigation Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000012805 post-processing Methods 0.000 description 3
- 238000009825 accumulation Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000002310 reflectometry Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/40—Analysis of texture
- G06T7/49—Analysis of texture based on structural texture description, e.g. using primitives or placement rules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/71—Circuitry for evaluating the brightness variation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/72—Combination of two or more compensation controls
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computing Systems (AREA)
- Studio Devices (AREA)
- Exposure Control For Cameras (AREA)
- Cameras In General (AREA)
Description
次いで、第一画像中のピクセルの総計数を使ってc(n)を正規化し、これにより、輝度値nについての輝度累積分布を得る。
v=arg min(|c(n)−T|)
単なる例として、T=0.5のときv=70であると仮定しよう。この例において、これは、画像中の50%のピクセルがこの輝度範囲[0,70]内に分布していることを意味する。説明をし易くするために、以下の説明において、輝度の範囲を、輝度範囲の上限vによって表すこととする。
である。
これにより、E'と所定の閾値とを比較することによって撮像露光度を判定することが可能である。
1)低照度+標準露光
2)標準照度+標準露光
3)明るい照度+標準露光
4)低照度+過度露光
5)標準照度+過度露光
6)明るい照度+過度露光
Claims (20)
- 撮像条件を検出する方法であって、前記方法は、
光景の第一画像中の輝度分布に基づいて、前記第一画像の撮像明度を判定することであって、前記第一画像は第一カメラによって取り込まれる、前記撮像明度を判定することと;
前記光景の第二画像中のハイライト領域の検出に基づいて、前記第二画像の撮像露光度を判定することであって、前記第二画像は第二カメラによって取り込まれる、前記撮像露光度を判定することと;
を含み、前記第一画像と前記第二画像とは、同一または類似の撮像条件の下で取り込まれ、前記第一カメラの露光量は前記第二カメラの露光量よりも低い、方法。 - 前記第一画像の撮像明度を判定することが、
前記第一画像中の輝度累積分布を算定することと;
前記輝度累積分布に基づいて、前記第一画像中の所定パーセントのピクセルの輝度範囲を算定することと;
前記輝度範囲に基づいて前記撮像明度を判定することと;
を含む、請求項1に記載の方法。 - 前記輝度範囲に基づいて前記撮像明度を判定することが、
輝度調査領域中の前記輝度累積分布の変動率を計算することと;
前記撮像明度を判定するために、前記変動率に基づいて前記輝度範囲を調整することと;
を含む、請求項2に記載の方法。 - 前記第二画像の撮像露光度を判定することが、
所定輝度閾値を用い、前記第二画像を2値化することによって、前記ハイライト領域を検出すること、
を含む、請求項1に記載の方法。 - 前記第二画像の撮像露光度を判定することが、
前記第二画像中の前記ハイライト領域を検出するのに応答して、前記第一画像中の、前記ハイライト領域に対応する領域中のテクスチャを取得することと;
前記テクスチャの量に基づいて、前記撮像露光度を判定することと;
を含む、請求項1に記載の方法。 - 前記第一画像中の、前記ハイライト領域に対応する領域中のテクスチャを取得することが、
前記テクスチャとして、前記第一画像の前記領域中のエッジを抽出すること、
を含む、請求項5に記載の方法。 - 前記第一画像の前記撮像明度および前記第二画像の前記撮像露光度に基づいて、前記第一画像と前記第二画像とを融合すること、
をさらに含む、請求項1に記載の方法。 - 前記第一画像と前記第二画像とを融合することが、
前記融合の過程で、前記第一画像の前記撮像明度および前記第二画像の前記撮像露光度に基づいて、低照度の除去処理、ハイダイナミックレンジ処理、超解像処理、ノイズフィルタリング処理、およびカラー強調処理のうちの少なくとも一つを有効化または無効化すること、
を含む、請求項7に記載の方法。 - 前記第一カメラがカラーカメラであり、前記第二カメラが白黒カメラである、請求項1〜8のいずれか一項に記載の方法。
- 撮像条件を検出するための装置であって、前記装置は、
光景の第一画像中の輝度分布に基づいて、前記第一画像の撮像明度を判定するよう構成された明度判定ユニットであって、前記第一画像は第一カメラによって取り込まれる、前記明度判定ユニットと;
前記光景の第二画像の中のハイライト領域の検出に基づいて、前記第二画像の撮像露光度を判定するよう構成された露光度判定ユニットであって、前記第二画像は第二カメラによって取り込まれる、前記露光度判定ユニットと;
を備え、前記第一画像と前記第二画像とは、同一または類似の撮像条件の下で取り込まれ、前記第一カメラの露光量は前記第二カメラの露光量よりも低い、装置。 - 前記第一画像中の輝度累積分布を算定するよう構成された累積分布算定ユニットと;
前記輝度累積分布に基づいて、前記第一画像中の所定パーセントのピクセルの輝度範囲を算定するよう構成された輝度範囲算定ユニットと;
をさらに備え、前記明度判定ユニットが、前記輝度範囲に基づいて前記撮像明度を判定するように構成される、請求項10に記載の装置。 - 輝度調査領域中の前記輝度累積分布の変動率を計算するよう構成された変動率計算ユニットと;
前記撮像明度を判定するために、前記変動率に基づいて前記輝度範囲を調整するよう構成された輝度範囲調整ユニットと;
をさらに含む、請求項11に記載の装置。 - 前記露光度判定ユニットが、
所定輝度閾値を用い、前記第二画像を2値化することによって、前記ハイライト領域を検出するよう構成された検出ユニット、
を備える、請求項10に記載の装置。 - 前記露光度判定ユニットが、
前記第二画像中の前記ハイライト領域を検出するのに応答して、前記第一画像中の、前記ハイライト領域に対応する領域中のテクスチャを取得するよう構成されたテクスチャ取得ユニットと;
前記テクスチャの量に基づいて、前記撮像露光度を判定するよう構成された第一露光度判定ユニットと;
を備える、請求項10に記載の装置。 - 前記テクスチャとして、前記第一画像の前記領域中のエッジを抽出するよう構成されたエッジ抽出ユニット、
をさらに備える、請求項14に記載の装置。
- 前記第一画像の前記撮像明度および前記第二画像の前記撮像露光度に基づいて、前記第一画像と前記第二画像とを融合するよう構成された画像融合ユニット、
をさらに備える、請求項10に記載の装置。 - 前記画像融合ユニットが、
前記融合の過程で、前記第一画像の前記撮像明度および前記第二画像の前記撮像露光度に基づいて、低照度の除去処理、ハイダイナミックレンジ処理、超解像処理、ノイズフィルタリング処理、およびカラー強調処理のうちの少なくとも一つを有効化または無効化するよう構成された適応制御ユニット、
を備える、請求項16に記載の装置。 - 前記第一カメラがカラーカメラであり、前記第二カメラが白黒カメラである、請求項10〜17のいずれか一項に記載の装置。
- コントローラと;
第一カメラと;
第二カメラの露光量が前記第一カメラの露光量よりも大きい、前記第二カメラと;
請求項10〜18のいずれか一項に記載の、撮像条件を検出するための装置と;
を備える電子デバイス。 - 装置の処理手段に実行されると、前記装置に、請求項1から9のいずれかに記載の方法を遂行させるように構成されるプログラム命令を備える、コンピュータプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410357287.3 | 2014-07-17 | ||
CN201410357287.3A CN105338338B (zh) | 2014-07-17 | 2014-07-17 | 用于成像条件检测的方法和装置 |
PCT/FI2015/050484 WO2016009110A1 (en) | 2014-07-17 | 2015-07-03 | Method and apparatus for detecting imaging conditions |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017520147A JP2017520147A (ja) | 2017-07-20 |
JP6309111B2 true JP6309111B2 (ja) | 2018-04-11 |
Family
ID=55077945
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016566881A Active JP6309111B2 (ja) | 2014-07-17 | 2015-07-03 | 撮像条件を検出するための方法および装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9973706B2 (ja) |
EP (1) | EP3170304B1 (ja) |
JP (1) | JP6309111B2 (ja) |
CN (1) | CN105338338B (ja) |
WO (1) | WO2016009110A1 (ja) |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106572339B (zh) * | 2016-10-27 | 2018-11-30 | 深圳奥比中光科技有限公司 | 一种图像采集器和图像采集系统 |
CN106412534B (zh) * | 2016-10-27 | 2018-09-11 | 成都西纬科技有限公司 | 一种图像亮度调节方法及装置 |
CN106534677B (zh) * | 2016-10-27 | 2019-12-17 | 成都西纬科技有限公司 | 一种图像过曝优化方法及装置 |
CN106534633A (zh) * | 2016-10-27 | 2017-03-22 | 深圳奥比中光科技有限公司 | 一种组合摄像系统、移动终端及图像处理方法 |
KR101823272B1 (ko) * | 2016-12-01 | 2018-01-29 | 삼성전기주식회사 | 카메라 모듈 |
US10706512B2 (en) * | 2017-03-07 | 2020-07-07 | Adobe Inc. | Preserving color in image brightness adjustment for exposure fusion |
KR102204596B1 (ko) * | 2017-06-02 | 2021-01-19 | 삼성전자주식회사 | 프로세서, 이를 포함하는 이미지 프로세싱 장치 및 이미지 프로세싱 방법 |
US10785400B2 (en) * | 2017-10-09 | 2020-09-22 | Stmicroelectronics (Research & Development) Limited | Multiple fields of view time of flight sensor |
WO2019118319A1 (en) * | 2017-12-15 | 2019-06-20 | Gopro, Inc. | High dynamic range processing on spherical images |
CN107872625B (zh) * | 2017-12-25 | 2020-05-22 | 信利光电股份有限公司 | 一种双摄像头曝光同步控制方法和系统 |
CN109696788B (zh) * | 2019-01-08 | 2021-12-14 | 武汉精立电子技术有限公司 | 一种基于显示面板的快速自动对焦方法 |
CN113287147A (zh) * | 2019-04-24 | 2021-08-20 | 华为技术有限公司 | 一种图像处理方法及装置 |
DE102019121340A1 (de) * | 2019-08-07 | 2021-02-11 | Infineon Technologies Ag | Verfahren und vorrichtung zum bestimmen einer fehlfunktion und sensorsystem |
JP7063488B2 (ja) * | 2020-03-02 | 2022-05-09 | 株式会社オプトエレクトロニクス | 撮像方法、撮像装置、撮像対象の判別方法及びプログラム |
CN111586308B (zh) * | 2020-04-10 | 2022-03-29 | 北京迈格威科技有限公司 | 图像处理方法、装置及电子设备 |
DE102020126737A1 (de) * | 2020-10-12 | 2022-04-14 | Carl Zeiss Microscopy Gmbh | Verfahren und Mikroskop zum Erzeugen eines Übersichtsbildes einer Probe |
JP2022093914A (ja) * | 2020-12-14 | 2022-06-24 | キヤノン株式会社 | 撮像装置、その制御方法およびプログラム |
CN113012081A (zh) * | 2021-01-28 | 2021-06-22 | 北京迈格威科技有限公司 | 图像处理方法、装置和电子系统 |
CN116091341B (zh) * | 2022-12-15 | 2024-04-02 | 南京信息工程大学 | 一种低光图像的曝光差增强方法及装置 |
CN116033278A (zh) * | 2022-12-18 | 2023-04-28 | 重庆邮电大学 | 一种面向单色-彩色双相机的低照度图像预处理方法 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6486915B2 (en) | 1999-04-20 | 2002-11-26 | Intel Corporation | Determining a final exposure setting automatically for a solid state camera without a separate light metering circuit |
US7538801B2 (en) | 2003-09-15 | 2009-05-26 | Micron Technology, Inc. | Region-based auto gain control and auto exposure control method and apparatus |
JP4363207B2 (ja) * | 2004-02-05 | 2009-11-11 | 住友電気工業株式会社 | 画像処理方法、画像処理システムおよび画像処理装置 |
JP4522307B2 (ja) | 2005-04-08 | 2010-08-11 | キヤノン株式会社 | 画像撮像装置、画像撮像方法 |
US7403707B2 (en) | 2005-07-28 | 2008-07-22 | Mitsubishi Electric Research Laboratories, Inc. | Method for estimating camera settings adaptively |
CN100508559C (zh) * | 2006-04-21 | 2009-07-01 | 北京中星微电子有限公司 | 低照度条件下摄像装置进行图像输出的处理方法 |
EP2018048A4 (en) * | 2006-05-09 | 2011-07-20 | Sharp Kk | PICTURE SETUP |
JP4218723B2 (ja) * | 2006-10-19 | 2009-02-04 | ソニー株式会社 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
CN101211407B (zh) * | 2006-12-29 | 2011-10-26 | 东软集团股份有限公司 | 昼夜图像识别方法和装置 |
JP2009047956A (ja) * | 2007-08-21 | 2009-03-05 | Sony Corp | 撮像装置 |
CN101126661B (zh) * | 2007-09-20 | 2010-06-02 | 北京中星微电子有限公司 | 一种确定环境亮度的方法及装置 |
JP5082776B2 (ja) * | 2007-10-31 | 2012-11-28 | オムロン株式会社 | 画像処理装置 |
WO2009085305A1 (en) | 2007-12-27 | 2009-07-09 | Google Inc. | High-resolution, variable depth of field image device |
WO2012001755A1 (ja) * | 2010-07-02 | 2012-01-05 | 株式会社ソニー・コンピュータエンタテインメント | 情報処理システム、情報処理装置および情報処理方法 |
WO2012051720A2 (en) * | 2010-10-22 | 2012-04-26 | University Of New Brunswick | Camera imaging systems and methods |
US8947555B2 (en) | 2011-04-18 | 2015-02-03 | Qualcomm Incorporated | White balance optimization with high dynamic range images |
CN102572245B (zh) * | 2011-12-22 | 2014-12-17 | 深圳市赛格导航科技股份有限公司 | 一种扩展图像动态范围的方法及装置 |
JP5409829B2 (ja) * | 2012-02-17 | 2014-02-05 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、および、プログラム |
-
2014
- 2014-07-17 CN CN201410357287.3A patent/CN105338338B/zh active Active
-
2015
- 2015-07-03 US US15/326,630 patent/US9973706B2/en active Active
- 2015-07-03 WO PCT/FI2015/050484 patent/WO2016009110A1/en active Application Filing
- 2015-07-03 JP JP2016566881A patent/JP6309111B2/ja active Active
- 2015-07-03 EP EP15822052.5A patent/EP3170304B1/en active Active
Also Published As
Publication number | Publication date |
---|---|
CN105338338A (zh) | 2016-02-17 |
JP2017520147A (ja) | 2017-07-20 |
EP3170304B1 (en) | 2019-03-06 |
CN105338338B (zh) | 2018-01-02 |
WO2016009110A1 (en) | 2016-01-21 |
EP3170304A4 (en) | 2018-02-28 |
EP3170304A1 (en) | 2017-05-24 |
US20170208234A1 (en) | 2017-07-20 |
US9973706B2 (en) | 2018-05-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6309111B2 (ja) | 撮像条件を検出するための方法および装置 | |
US11671702B2 (en) | Real time assessment of picture quality | |
US9609221B2 (en) | Image stabilization method and electronic device therefor | |
US9544497B2 (en) | System and method for determining image resolution | |
TWI682664B (zh) | 基於亮度分布與動作間之取捨以產生場景之高動態範圍影像之方法 | |
JP5589548B2 (ja) | 撮像装置、画像処理方法、及びプログラム記憶媒体 | |
WO2017114399A1 (zh) | 逆光拍照方法和装置 | |
CN112514362B (zh) | 用于基于图像分数的视频质量增强的图像捕获设备和方法 | |
US10122912B2 (en) | Device and method for detecting regions in an image | |
US9282235B2 (en) | Focus score improvement by noise correction | |
US20160071253A1 (en) | Method and apparatus for image enhancement | |
WO2016074467A1 (zh) | 一种图像的处理方法和装置 | |
CN107105172B (zh) | 一种用于对焦的方法和装置 | |
US8212891B2 (en) | Apparatus, methods and computer readable storage mediums | |
US10373329B2 (en) | Information processing apparatus, information processing method and storage medium for determining an image to be subjected to a character recognition processing | |
JP2016092513A5 (ja) | ||
US9432572B2 (en) | Method and apparatus for automatic prediction of dynamic exposure |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20171225 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180201 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180206 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180216 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180313 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6309111 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |