JP6240811B2 - 撮像装置、画像処理装置、画像処理方法、プログラム及び記録媒体 - Google Patents
撮像装置、画像処理装置、画像処理方法、プログラム及び記録媒体 Download PDFInfo
- Publication number
- JP6240811B2 JP6240811B2 JP2017512512A JP2017512512A JP6240811B2 JP 6240811 B2 JP6240811 B2 JP 6240811B2 JP 2017512512 A JP2017512512 A JP 2017512512A JP 2017512512 A JP2017512512 A JP 2017512512A JP 6240811 B2 JP6240811 B2 JP 6240811B2
- Authority
- JP
- Japan
- Prior art keywords
- optical system
- imaging
- wavelength component
- image
- target image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 390
- 238000003384 imaging method Methods 0.000 title claims description 318
- 238000003672 processing method Methods 0.000 title claims description 7
- 230000003287 optical effect Effects 0.000 claims description 672
- 238000000034 method Methods 0.000 claims description 154
- 238000011156 evaluation Methods 0.000 claims description 145
- 230000008569 process Effects 0.000 claims description 122
- 238000012546 transfer Methods 0.000 claims description 82
- 238000004891 communication Methods 0.000 claims description 55
- 230000006870 function Effects 0.000 description 100
- 230000002093 peripheral effect Effects 0.000 description 80
- 238000010586 diagram Methods 0.000 description 23
- 230000004075 alteration Effects 0.000 description 9
- 238000001514 detection method Methods 0.000 description 9
- 230000015556 catabolic process Effects 0.000 description 7
- 238000006731 degradation reaction Methods 0.000 description 7
- 230000014509 gene expression Effects 0.000 description 7
- 238000013461 design Methods 0.000 description 6
- 230000006872 improvement Effects 0.000 description 6
- 230000033001 locomotion Effects 0.000 description 6
- 238000012544 monitoring process Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 230000007423 decrease Effects 0.000 description 4
- 230000003321 amplification Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000010295 mobile communication Methods 0.000 description 3
- 238000003199 nucleic acid amplification method Methods 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 230000005674 electromagnetic induction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000010363 phase shift Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 229920006395 saturated elastomer Polymers 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G06T5/73—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/20—Image enhancement or restoration by the use of local operators
-
- G06T5/92—
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19617—Surveillance camera constructional details
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19654—Details concerning communication with a camera
- G08B13/19656—Network used to communicate with a camera, e.g. WAN, LAN, Internet
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
- G08B25/08—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using communication transmission lines
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/10—Image enhancement or restoration by non-spatial domain filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/40—Image enhancement or restoration by the use of histogram techniques
Description
(1)光学系の全画角が90度を超えること、
(2)光学系の光量評価領域が、光学系の結像面において結像面の中心からの距離が撮像素子の撮像面の対角線の2分の1の長さの80%以上を示す光学系の領域であり、546.1nmの波長成分を含む第1の評価波長を使った場合に、結像面の中心に対応する光学系の領域における光量に対する光量評価領域における光量の比が25%以上を示すこと、
(3)406.0nmの波長成分、430.5nmの波長成分、471.2nmの波長成分、522.5nmの波長成分、577.5nmの波長成分、628.8nmの波長成分、669.5nmの波長成分及び694.0nmの波長成分を含む第2の評価波長を使った場合に、撮像素子のナイキスト周波数の1/2に関して取得される光学系のMTFの値が15%以上を示すこと、
を満たす場合に、光学系の光学伝達関数に基づく復元処理を対象画像に対して行う復元処理部とを備える画像処理装置に関する。
(4)第1の評価波長を使った場合に、結像面の中心に対応する光学系の領域における光量に対する光量評価領域における光量の比が30%以上を示すこと、
(5)第2の評価波長を使った場合に、撮像素子のナイキスト周波数の1/2に関して取得されるMTFの値が20%以上を示すこと、
を満たす場合に、復元処理を行う。
(6)第1の評価波長を使った場合に、結像面の中心に対応する光学系の領域における光量に対する光量評価領域における光量の比が35%以上を示すこと、
(7)第2の評価波長を使った場合に、撮像素子のナイキスト周波数の1/2に関して取得されるMTFの値が25%以上を示すこと、
を満たす場合に、復元処理を行う。
(8)光学系の全画角が90度を超える。
(1)光学系の全画角が90度を超えること、
(2)光学系の光量評価領域が、光学系の結像面において結像面の中心からの距離が撮像素子の撮像面の対角線の2分の1の長さの80%以上を示す光学系の領域であり、546.1nmの波長成分を含む第1の評価波長を使った場合に、結像面の中心に対応する光学系の領域における光量に対する光量評価領域における光量の比が25%以上を示すこと、
(3)406.0nmの波長成分、430.5nmの波長成分、471.2nmの波長成分、522.5nmの波長成分、577.5nmの波長成分、628.8nmの波長成分、669.5nmの波長成分及び694.0nmの波長成分を含む第2の評価波長を使った場合に、撮像素子のナイキスト周波数の1/2に関して取得される光学系のMTFの値が15%以上を示すこと、
を満たす場合に、光学系の光学伝達関数に基づく復元処理を対象画像に対して行うステップとを備える画像処理方法に関する。
(8)光学系の全画角が90度を超える。
(1)光学系の全画角が90度を超えること、
(2)光学系の光量評価領域が、光学系の結像面において結像面の中心からの距離が撮像素子の撮像面の対角線の2分の1の長さの80%以上を示す光学系の領域であり、546.1nmの波長成分を含む第1の評価波長を使った場合に、結像面の中心に対応する光学系の領域における光量に対する光量評価領域における光量の比が25%以上を示すこと、
(3)406.0nmの波長成分、430.5nmの波長成分、471.2nmの波長成分、522.5nmの波長成分、577.5nmの波長成分、628.8nmの波長成分、669.5nmの波長成分及び694.0nmの波長成分を含む第2の評価波長を使った場合に撮像素子のナイキスト周波数の1/2に関して取得される光学系のMTFの値が15%以上を示すこと、
を満たす場合に、光学系の光学伝達関数に基づく復元処理を対象画像に対して行う手順とをコンピュータに実行させるためのプログラムに関する。
(8)光学系の全画角が90度を超える。
(1)光学系の全画角が90度を超えること、
(2)光学系の光量評価領域が、光学系の結像面において結像面の中心からの距離が撮像素子の撮像面の対角線の2分の1の長さの80%以上を示す光学系の領域であり、546.1nmの波長成分を含む第1の評価波長を使った場合に、結像面の中心に対応する光学系の領域における光量に対する光量評価領域における光量の比が25%以上を示すこと、
(3)406.0nmの波長成分、430.5nmの波長成分、471.2nmの波長成分、522.5nmの波長成分、577.5nmの波長成分、628.8nmの波長成分、669.5nmの波長成分及び694.0nmの波長成分を含む第2の評価波長を使った場合に、撮像素子のナイキスト周波数の1/2に関して取得される光学系のMTFの値が15%以上を示すこと、
を満たす場合に、光学系の光学伝達関数に基づく復元処理を対象画像に対して行う手順とをコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な非一時的有形記録媒体(a non-transitory computer-readable tangible medium)に関する。
(8)光学系の全画角が90度を超える。
光学系16は全画角が90度を超える。
光学系16の光量評価領域は、光学系16の結像面において結像面の中心からの距離が撮像素子22の撮像面の対角線の2分の1の長さの80%以上を示す光学系16の領域であり、546.1nmの波長成分を含む第1の評価波長を使った場合に、結像面の中心に対応する光学系16の領域における光量に対する光量評価領域における光量の比が25%以上を示す。
406.0nmの波長成分、430.5nmの波長成分、471.2nmの波長成分、522.5nmの波長成分、577.5nmの波長成分、628.8nmの波長成分、669.5nmの波長成分及び694.0nmの波長成分を含む第2の評価波長を使った場合に、撮像素子22のナイキスト周波数の1/2に関して取得される光学系16のMTFの値が15%以上を示す。
「f」は、対象画像の空間周波数を表し、
「h」は、対象画像の中心からの距離を表し、
「H(f,h)」は、光学系16のOTF(Optical Transfer Function)を表し、
「R(h)」は、光学系16の光量評価領域が、光学系16の結像面において結像面の中心からの距離が撮像素子22の撮像面の対角線の2分の1の長さの80%以上を示す光学系16の領域であり、546.1nmの波長成分を含む第1の評価波長を使った場合に、結像面の中心に対応する光学系16の領域における光量に対する光量評価領域における光量の比を表し、「0≦R(h)≦1」を満たし、
「SNR(f)」は、「SNR(f)=S(f)/N(f)」によって表され、
「S(f)」は、想定される撮影条件において期待される対象画像の中心における信号量の二乗平均値を表し、
「N(f)」は、想定される撮影条件において期待されるノイズ量の二乗平均値を表す。
第1の評価波長を使った場合に、結像面の中心に対応する光学系16の領域における光量に対する光量評価領域における光量の比が30%以上を示す。
第2の評価波長を使った場合に、撮像素子22のナイキスト周波数の1/2に関して取得される光学系16のMTFの値が20%以上を示す。
第1の評価波長を使った場合に、結像面の中心に対応する光学系16の領域における光量に対する光量評価領域における光量の比が35%以上を示す。
第2の評価波長を使った場合に、撮像素子22のナイキスト周波数の1/2に関して取得される光学系16のMTFの値が25%以上を示す。
A%≧0.75×B%−40%
この第9処理条件は図6及び図7のラインB3によって規定され、第9処理条件を満たす光学系16は、図6及び図7のラインB3の上側の領域(ラインB3を含む)に含まれる。この場合、復元処理部41によって行われる復元処理は、上記の第9処理条件を満たす光学系16を使用して撮影された対象画像に適用されることとなる。
Wienerフィルタは、画質劣化が線形で既知な場合において復元画像と元画像との間の平均二乗誤差を最小とすることを目的として作成されるフィルタであって、線形フィルタ設計基準の一つとして利用されている。Wienerフィルタの周波数特性F(f,h)は、下記式により表される。
Wienerフィルタを使った復元処理では、対象画像中のノイズ成分が大きくMTF成分が小さい場合には、MTFを増幅させることなく減衰させることによって、ノイズの抑制を重視するケースが存在する。このようなケースを生じさせないための条件は下記式によって表される。
SN比は、画像の信号成分とノイズ成分との比である。撮影画像Iが画像の信号成分X及びノイズ成分Yによって下記式で表されるように構成されるケースについて考える。
光学伝達関数に基づく復元処理適用後のMTFの値が「α(ただし「0≦α≦1」)」を超える(下記式参照)ために満たすべき条件を求める。
図12は、実施例1に係る光学系16の断面図を示す。図12の左側が物体側(被写体側)であり、図の右側が像側(像面Sim側)である。
本実施例において、上述の実施例1と同一の要素には同一の符号を付し、その詳細な説明は省略する。
本実施例において、上述の実施例1と同一の要素には同一の符号を付し、その詳細な説明は省略する。
本実施例において、上述の実施例2と同一の要素には同一の符号を付し、その詳細な説明は省略する。
本発明の応用は上述の実施形態に限定されるものではなく、上述の実施形態に各種の変形が加えられてもよい。
図44は、本発明の撮像装置の一実施形態であるスマートフォン101の外観を示す図である。図44に示すスマートフォン101は、平板状の筐体102を有し、筐体102の一方の面に表示部としての表示パネル121と、入力部としての操作パネル122とが一体となって形成される表示入力部120が設けられる。また、その筐体102は、スピーカ131と、マイクロホン132と、操作部140と、カメラ部141とを備える。なお、筐体102の構成はこれに限定されず、例えば、表示部と入力部とが独立して設けられる構成を採用したり、折り畳み構造やスライド機構を有する構成を採用することもできる。
Claims (17)
- 光学系と、
前記光学系を介して撮影光を受光して対象画像を出力する撮像素子と、
前記光学系の光学伝達関数に基づく復元処理を前記対象画像に対して行う復元処理部とを備え、
前記光学系は全画角が90度を超え、
前記光学系の光量評価領域は、前記光学系の結像面において前記結像面の中心からの距離が前記撮像素子の撮像面の対角線の2分の1の長さの80%以上を示す前記光学系の領域であり、
546.1nmの波長成分を含む第1の評価波長を使った場合に、前記結像面の中心に対応する前記光学系の領域における光量に対する前記光量評価領域における光量の比が25%以上を示し、
406.0nmの波長成分、430.5nmの波長成分、471.2nmの波長成分、522.5nmの波長成分、577.5nmの波長成分、628.8nmの波長成分、669.5nmの波長成分及び694.0nmの波長成分を含む第2の評価波長を使った場合に、前記撮像素子のナイキスト周波数の1/2に関して取得される前記光学系のMTFの値が15%以上を示す撮像装置。 - 光学系と、
前記光学系を介して撮影光を受光して対象画像を出力する撮像素子と、
前記光学系の光学伝達関数に基づく復元処理を前記対象画像に対して行う復元処理部とを備え、
前記光学系は全画角が90度を超え、かつ
fは、前記対象画像の空間周波数を表し、
hは、前記対象画像の中心からの距離を表し、
H(f,h)は、前記光学系のOTFを表し、
R(h)は、前記光学系の光量評価領域が、前記光学系の結像面において前記結像面の中心からの距離が前記撮像素子の撮像面の対角線の2分の1の長さの80%以上を示す前記光学系の領域であり、546.1nmの波長成分を含む第1の評価波長を使った場合に、前記結像面の中心に対応する前記光学系の領域における光量に対する前記光量評価領域における光量の比を表し、0≦R(h)≦1を満たし、
SNR(f)は、SNR(f)=S(f)/N(f)によって表され、
S(f)は、想定される撮影条件において期待される前記対象画像の中心における信号量の二乗平均値を表し、
N(f)は、想定される撮影条件において期待されるノイズ量の二乗平均値を表す、
を満たす撮像装置。 - 対象画像を取得する画像取得部と、
前記対象画像を撮影した際の光学系及び撮像素子の情報を示す撮影デバイス条件を取得する条件取得部と、
前記撮影デバイス条件が、
(1)前記光学系の全画角が90度を超えること、
(2)前記光学系の光量評価領域が、前記光学系の結像面において前記結像面の中心からの距離が前記撮像素子の撮像面の対角線の2分の1の長さの80%以上を示す前記光学系の領域であり、546.1nmの波長成分を含む第1の評価波長を使った場合に、前記結像面の中心に対応する前記光学系の領域における光量に対する前記光量評価領域における光量の比が25%以上を示すこと、及び
(3)406.0nmの波長成分、430.5nmの波長成分、471.2nmの波長成分、522.5nmの波長成分、577.5nmの波長成分、628.8nmの波長成分、669.5nmの波長成分及び694.0nmの波長成分を含む第2の評価波長を使った場合に、前記撮像素子のナイキスト周波数の1/2に関して取得される前記光学系のMTFの値が15%以上を示すこと、
を満たす場合に、前記光学系の光学伝達関数に基づく復元処理を前記対象画像に対して行う復元処理部とを備える画像処理装置。 - 前記MTFの値は、前記光学系のサジタル方向のMTFの値及びタンジェンシャル方向のMTFの値のうち値が小さい方のMTFの値である請求項3に記載の画像処理装置。
- 前記復元処理部は、前記撮影デバイス条件が更に、
(4)前記第1の評価波長を使った場合に、前記結像面の中心に対応する前記光学系の領域における光量に対する前記光量評価領域における光量の比が30%以上を示すこと、及び
(5)前記第2の評価波長を使った場合に、前記撮像素子のナイキスト周波数の1/2に関して取得される前記MTFの値が20%以上を示すこと、
を満たす場合に、前記復元処理を行う請求項3又は4に記載の画像処理装置。 - 前記復元処理部は、前記撮影デバイス条件が更に、
(6)前記第1の評価波長を使った場合に、前記結像面の中心に対応する前記光学系の領域における光量に対する前記光量評価領域における光量の比が35%以上を示すこと、及び
(7)前記第2の評価波長を使った場合に、前記撮像素子のナイキスト周波数の1/2に関して取得される前記MTFの値が25%以上を示すこと、
を満たす場合に、前記復元処理を行う請求項3又は4に記載の画像処理装置。 - 対象画像を取得する画像取得部と、
前記対象画像を撮影した際の光学系及び撮像素子の情報を示す撮影デバイス条件を取得する条件取得部と、
前記撮影デバイス条件が、
(8) 前記光学系の全画角が90度を超えること、及び
fは、前記対象画像の空間周波数を表し、
hは、前記対象画像の中心からの距離を表し、
H(f,h)は、前記光学系のOTFを表し、
R(h)は、前記光学系の光量評価領域が、前記光学系の結像面において前記結像面の中心からの距離が前記撮像素子の撮像面の対角線の2分の1の長さの80%以上を示す前記光学系の領域であり、546.1nmの波長成分を含む第1の評価波長を使った場合に、前記結像面の中心に対応する前記光学系の領域における光量に対する前記光量評価領域における光量の比を表し、0≦R(h)≦1を満たし、
SNR(f)は、SNR(f)=S(f)/N(f)によって表され、
S(f)は、想定される撮影条件において期待される前記対象画像の中心における信号量の二乗平均値を表し、
N(f)は、想定される撮影条件において期待されるノイズ量の二乗平均値を表す、
を満たす場合に、前記光学系の光学伝達関数に基づく復元処理を前記対象画像に対して行う復元処理部とを備える画像処理装置。 - 前記復元処理部は、
406.0nmの波長成分、430.5nmの波長成分、471.2nmの波長成分、522.5nmの波長成分、577.5nmの波長成分、628.8nmの波長成分、669.5nmの波長成分及び694.0nmの波長成分を含む第2の評価波長を使った場合に、前記撮像素子のナイキスト周波数の1/2に関して取得される前記光学系のMTFの値がA%として表され、546.1nmの波長成分を含む第1の評価波長を使った場合に、前記結像面の中心に対応する前記光学系の領域における光量に対する前記光量評価領域における光量の比がB%として表される場合に、
(10) A%≧0.75×B%−40%
を前記撮影デバイス条件が更に満たす場合に、前記復元処理を行う請求項3〜7のいずれか一項に記載の画像処理装置。 - 前記光量評価領域は、前記結像面において前記結像面の中心からの距離が前記撮像素子の撮像面の対角線の2分の1の長さの60%以上を示す前記光学系の領域である請求項3〜8のいずれか一項に記載の画像処理装置。
- 光学系が着脱可能に取り付けられる光学系装着部と、
前記光学系装着部に装着された前記光学系を介して撮影光を受光して画像を出力する撮像素子と、
請求項3〜9のいずれか一項に記載の画像処理装置とを備え、
前記撮像素子から出力される前記画像を前記対象画像とする撮像装置。 - 光学系と、当該光学系を介して撮影光を受光して画像を出力する撮像素子と、当該撮像素子に接続されるカメラ側制御処理部と、当該カメラ側制御処理部に接続されるカメラ側通信部とを有するカメラデバイスと、
前記カメラ側通信部と通信可能な端末側通信部と、当該端末側通信部に接続される端末側制御処理部と、当該端末側制御処理部に接続されるユーザインターフェースとを有する制御端末とを備え、
前記カメラ側制御処理部及び前記端末側制御処理部のうち少なくともいずれか一方は、請求項3〜9のいずれか一項に記載の画像処理装置を有し、
前記撮像素子から出力される前記画像を前記対象画像とする撮像装置。 - 対象画像を取得するステップと、
前記対象画像を撮影した際の光学系及び撮像素子の情報を示す撮影デバイス条件を取得するステップと、
前記撮影デバイス条件が、
(1)前記光学系の全画角が90度を超えること、
(2)前記光学系の光量評価領域が、前記光学系の結像面において前記結像面の中心からの距離が前記撮像素子の撮像面の対角線の2分の1の長さの80%以上を示す前記光学系の領域であり、546.1nmの波長成分を含む第1の評価波長を使った場合に、前記結像面の中心に対応する前記光学系の領域における光量に対する前記光量評価領域における光量の比が25%以上を示すこと、及び
(3)406.0nmの波長成分、430.5nmの波長成分、471.2nmの波長成分、522.5nmの波長成分、577.5nmの波長成分、628.8nmの波長成分、669.5nmの波長成分及び694.0nmの波長成分を含む第2の評価波長を使った場合に、前記撮像素子のナイキスト周波数の1/2に関して取得される前記光学系のMTFの値が15%以上を示すこと、
を満たす場合に、前記光学系の光学伝達関数に基づく復元処理を前記対象画像に対して行うステップとを備える画像処理方法。 - 対象画像を取得するステップと、
前記対象画像を撮影した際の光学系及び撮像素子の情報を示す撮影デバイス条件を取得するステップと、
前記撮影デバイス条件が、
(8) 前記光学系の全画角が90度を超えること、及び
fは、前記対象画像の空間周波数を表し、
hは、前記対象画像の中心からの距離を表し、
H(f,h)は、前記光学系のOTFを表し、
R(h)は、前記光学系の光量評価領域が、前記光学系の結像面において前記結像面の中心からの距離が前記撮像素子の撮像面の対角線の2分の1の長さの80%以上を示す前記光学系の領域であり、546.1nmの波長成分を含む第1の評価波長を使った場合に、前記結像面の中心に対応する前記光学系の領域における光量に対する前記光量評価領域における光量の比を表し、0≦R(h)≦1を満たし、
SNR(f)は、SNR(f)=S(f)/N(f)によって表され、
S(f)は、想定される撮影条件において期待される前記対象画像の中心における信号量の二乗平均値を表し、
N(f)は、想定される撮影条件において期待されるノイズ量の二乗平均値を表す、
を満たす場合に、前記光学系の光学伝達関数に基づく復元処理を前記対象画像に対して行うステップとを備える画像処理方法。 - 対象画像を取得する手順と、
前記対象画像を撮影した際の光学系及び撮像素子の情報を示す撮影デバイス条件を取得する手順と、
前記撮影デバイス条件が、
(1)前記光学系の全画角が90度を超えること、
(2)前記光学系の光量評価領域が、前記光学系の結像面において前記結像面の中心からの距離が前記撮像素子の撮像面の対角線の2分の1の長さの80%以上を示す前記光学系の領域であり、546.1nmの波長成分を含む第1の評価波長を使った場合に、前記結像面の中心に対応する前記光学系の領域における光量に対する前記光量評価領域における光量の比が25%以上を示すこと、及び
(3)406.0nmの波長成分、430.5nmの波長成分、471.2nmの波長成分、522.5nmの波長成分、577.5nmの波長成分、628.8nmの波長成分、669.5nmの波長成分及び694.0nmの波長成分を含む第2の評価波長を使った場合に前記撮像素子のナイキスト周波数の1/2に関して取得される前記光学系のMTFの値が15%以上を示すこと、
を満たす場合に、前記光学系の光学伝達関数に基づく復元処理を前記対象画像に対して行う手順とをコンピュータに実行させるためのプログラム。 - 対象画像を取得する手順と、
前記対象画像を撮影した際の光学系及び撮像素子の情報を示す撮影デバイス条件を取得する手順と、
前記撮影デバイス条件が、
(8) 前記光学系の全画角が90度を超えること、及び
fは、前記対象画像の空間周波数を表し、
hは、前記対象画像の中心からの距離を表し、
H(f,h)は、前記光学系のOTFを表し、
R(h)は、前記光学系の光量評価領域が、前記光学系の結像面において前記結像面の中心からの距離が前記撮像素子の撮像面の対角線の2分の1の長さの80%以上を示す前記光学系の領域であり、546.1nmの波長成分を含む第1の評価波長を使った場合に、前記結像面の中心に対応する前記光学系の領域における光量に対する前記光量評価領域における光量の比を表し、0≦R(h)≦1を満たし、
SNR(f)は、SNR(f)=S(f)/N(f)によって表され、
S(f)は、想定される撮影条件において期待される前記対象画像の中心における信号量の二乗平均値を表し、
N(f)は、想定される撮影条件において期待されるノイズ量の二乗平均値を表す、
を満たす場合に、前記光学系の光学伝達関数に基づく復元処理を前記対象画像に対して行う手順とをコンピュータに実行させるためのプログラム。 - 対象画像を取得する手順と、
前記対象画像を撮影した際の光学系及び撮像素子の情報を示す撮影デバイス条件を取得する手順と、
前記撮影デバイス条件が、
(1)前記光学系の全画角が90度を超えること、
(2)前記光学系の光量評価領域が、前記光学系の結像面において前記結像面の中心からの距離が前記撮像素子の撮像面の対角線の2分の1の長さの80%以上を示す前記光学系の領域であり、546.1nmの波長成分を含む第1の評価波長を使った場合に、前記結像面の中心に対応する前記光学系の領域における光量に対する前記光量評価領域における光量の比が25%以上を示すこと、及び
(3)406.0nmの波長成分、430.5nmの波長成分、471.2nmの波長成分、522.5nmの波長成分、577.5nmの波長成分、628.8nmの波長成分、669.5nmの波長成分及び694.0nmの波長成分を含む第2の評価波長を使った場合に、前記撮像素子のナイキスト周波数の1/2に関して取得される前記光学系のMTFの値が15%以上を示すこと、
を満たす場合に、前記光学系の光学伝達関数に基づく復元処理を前記対象画像に対して行う手順とをコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な非一時的有形記録媒体。 - 対象画像を取得する手順と、
前記対象画像を撮影した際の光学系及び撮像素子の情報を示す撮影デバイス条件を取得する手順と、
前記撮影デバイス条件が、
(8) 前記光学系の全画角が90度を超えること、及び
fは、前記対象画像の空間周波数を表し、
hは、前記対象画像の中心からの距離を表し、
H(f,h)は、前記光学系のOTFを表し、
R(h)は、前記光学系の光量評価領域が、前記光学系の結像面において前記結像面の中心からの距離が前記撮像素子の撮像面の対角線の2分の1の長さの80%以上を示す前記光学系の領域であり、546.1nmの波長成分を含む第1の評価波長を使った場合に、前記結像面の中心に対応する前記光学系の領域における光量に対する前記光量評価領域における光量の比を表し、0≦R(h)≦1を満たし、
SNR(f)は、SNR(f)=S(f)/N(f)によって表され、
S(f)は、想定される撮影条件において期待される前記対象画像の中心における信号量の二乗平均値を表し、
N(f)は、想定される撮影条件において期待されるノイズ量の二乗平均値を表す、
を満たす場合に、前記光学系の光学伝達関数に基づく復元処理を前記対象画像に対して行う手順とをコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な非一時的有形記録媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015084393 | 2015-04-16 | ||
JP2015084393 | 2015-04-16 | ||
PCT/JP2016/061512 WO2016167189A1 (ja) | 2015-04-16 | 2016-04-08 | 撮像装置、画像処理装置、画像処理方法、プログラム及び記録媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6240811B2 true JP6240811B2 (ja) | 2017-11-29 |
JPWO2016167189A1 JPWO2016167189A1 (ja) | 2018-03-08 |
Family
ID=57126157
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017512512A Active JP6240811B2 (ja) | 2015-04-16 | 2016-04-08 | 撮像装置、画像処理装置、画像処理方法、プログラム及び記録媒体 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10269101B2 (ja) |
JP (1) | JP6240811B2 (ja) |
CN (1) | CN107431763B (ja) |
WO (1) | WO2016167189A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6243087B2 (ja) * | 2015-04-23 | 2017-12-06 | 富士フイルム株式会社 | 撮像装置及び撮像装置の画像処理方法及びプログラム |
CN114424105A (zh) * | 2019-09-30 | 2022-04-29 | 株式会社尼康 | 光学系统、光学设备及光学系统的制造方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009213129A (ja) * | 2008-02-05 | 2009-09-17 | Fujifilm Corp | 画像処理装置、画像処理方法、およびプログラム |
JP2012005056A (ja) * | 2010-06-21 | 2012-01-05 | Canon Inc | 画像処理装置、画像処理方法及びプログラム |
JP2014021312A (ja) * | 2012-07-19 | 2014-02-03 | Canon Inc | ズームレンズおよび撮像装置 |
WO2015015935A1 (ja) * | 2013-07-29 | 2015-02-05 | 富士フイルム株式会社 | 撮像装置及び画像処理方法 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5076240B2 (ja) * | 2008-02-05 | 2012-11-21 | 富士フイルム株式会社 | 撮像装置、撮像方法、およびプログラム |
US8324546B1 (en) * | 2009-02-05 | 2012-12-04 | Stc.Unm | System and methods for reducing distortion and degradation in adaptive optics technology |
WO2012132870A1 (ja) * | 2011-03-31 | 2012-10-04 | 富士フイルム株式会社 | 焦点拡張光学系及びEDoF撮像システム |
US20130265459A1 (en) * | 2011-06-28 | 2013-10-10 | Pelican Imaging Corporation | Optical arrangements for use with an array camera |
JP5264968B2 (ja) * | 2011-08-08 | 2013-08-14 | キヤノン株式会社 | 画像処理装置、画像処理方法、撮像装置、および、画像処理プログラム |
JP5993124B2 (ja) | 2011-10-14 | 2016-09-14 | 京セラ株式会社 | 撮像装置 |
US8976271B2 (en) | 2012-07-19 | 2015-03-10 | Canon Kabushiki Kaisha | Optical system and image pickup apparatus |
JP5833794B2 (ja) * | 2013-03-27 | 2015-12-16 | 富士フイルム株式会社 | 撮像装置 |
-
2016
- 2016-04-08 CN CN201680021291.XA patent/CN107431763B/zh active Active
- 2016-04-08 JP JP2017512512A patent/JP6240811B2/ja active Active
- 2016-04-08 WO PCT/JP2016/061512 patent/WO2016167189A1/ja active Application Filing
-
2017
- 2017-10-13 US US15/783,439 patent/US10269101B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009213129A (ja) * | 2008-02-05 | 2009-09-17 | Fujifilm Corp | 画像処理装置、画像処理方法、およびプログラム |
JP2012005056A (ja) * | 2010-06-21 | 2012-01-05 | Canon Inc | 画像処理装置、画像処理方法及びプログラム |
JP2014021312A (ja) * | 2012-07-19 | 2014-02-03 | Canon Inc | ズームレンズおよび撮像装置 |
WO2015015935A1 (ja) * | 2013-07-29 | 2015-02-05 | 富士フイルム株式会社 | 撮像装置及び画像処理方法 |
Also Published As
Publication number | Publication date |
---|---|
JPWO2016167189A1 (ja) | 2018-03-08 |
US10269101B2 (en) | 2019-04-23 |
CN107431763B (zh) | 2020-02-28 |
WO2016167189A1 (ja) | 2016-10-20 |
US20180047139A1 (en) | 2018-02-15 |
CN107431763A (zh) | 2017-12-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5759085B2 (ja) | 画像処理装置、撮像装置、画像処理方法及びプログラム並びに記録媒体 | |
US9906732B2 (en) | Image processing device, image capture device, image processing method, and program | |
JP5750558B2 (ja) | 撮像装置及び合焦制御方法 | |
JP5851650B2 (ja) | 復元フィルタ生成装置及び方法、画像処理装置、撮像装置、復元フィルタ生成プログラム並びに記録媒体 | |
US9965833B2 (en) | Optical system characteristic data storing device, method, and program for image restoration filtering | |
CN108156378B (zh) | 拍照方法、移动终端及计算机可读存储介质 | |
JP5903528B2 (ja) | 撮像装置及び画像処理方法 | |
JP6259165B2 (ja) | 撮像装置、画像処理装置、画像処理方法、プログラム及び記録媒体 | |
JPWO2008078708A1 (ja) | 撮像レンズ、それを用いた撮像装置及び携帯端末装置 | |
JP5870231B2 (ja) | 画像処理装置、撮像装置、画像処理方法、及びプログラム | |
JP6255540B2 (ja) | 合焦制御装置、撮像装置、合焦制御方法、及び合焦制御プログラム | |
JP6042034B2 (ja) | 画像処理装置、撮像装置、画像処理方法及びプログラム | |
JP6240811B2 (ja) | 撮像装置、画像処理装置、画像処理方法、プログラム及び記録媒体 | |
WO2016038935A1 (ja) | 撮像光学系及び撮像装置 | |
US10511775B2 (en) | Shake detection device and shake correction device of imaging device, imaging device, and shake detection method | |
WO2014098143A1 (ja) | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム | |
JP6379307B2 (ja) | 撮像装置、合焦制御方法、及び合焦制御プログラム | |
WO2017175579A1 (ja) | 合焦制御装置、レンズ装置、撮像装置、合焦制御方法、合焦制御プログラム | |
WO2017104328A1 (ja) | 画像処理装置及び画像処理方法 | |
WO2013145887A1 (ja) | 撮像装置及び撮像方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170929 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170929 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20170929 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20171011 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20171025 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171106 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6240811 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |