JP2013115717A5 - - Google Patents

Download PDF

Info

Publication number
JP2013115717A5
JP2013115717A5 JP2011262007A JP2011262007A JP2013115717A5 JP 2013115717 A5 JP2013115717 A5 JP 2013115717A5 JP 2011262007 A JP2011262007 A JP 2011262007A JP 2011262007 A JP2011262007 A JP 2011262007A JP 2013115717 A5 JP2013115717 A5 JP 2013115717A5
Authority
JP
Japan
Prior art keywords
image
image signal
pixel
subject light
image sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011262007A
Other languages
English (en)
Other versions
JP5913934B2 (ja
JP2013115717A (ja
Filing date
Publication date
Application filed filed Critical
Priority claimed from JP2011262007A external-priority patent/JP5913934B2/ja
Priority to JP2011262007A priority Critical patent/JP5913934B2/ja
Priority to KR1020147017478A priority patent/KR101627087B1/ko
Priority to DE112012003264.0T priority patent/DE112012003264B4/de
Priority to CN201280047715.1A priority patent/CN103828344B/zh
Priority to PCT/JP2012/080411 priority patent/WO2013080899A1/en
Priority to US14/238,246 priority patent/US9191595B2/en
Priority to RU2014126378/07A priority patent/RU2570349C1/ru
Priority to BR112014000674A priority patent/BR112014000674A2/pt
Priority to GB1410755.1A priority patent/GB2512223B/en
Publication of JP2013115717A publication Critical patent/JP2013115717A/ja
Publication of JP2013115717A5 publication Critical patent/JP2013115717A5/ja
Priority to US14/865,523 priority patent/US9560297B2/en
Publication of JP5913934B2 publication Critical patent/JP5913934B2/ja
Application granted granted Critical
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (16)

  1. 撮像素子から取得される被写体光の進行方向の情報を含む画像信号に適用される画像処理装置であって、
    前記撮像素子から取得される画像信号を用いて被写体の画像を再構築する仮想像面の位置を設定する仮想像面位置設定手段と、
    前記撮像素子の欠陥画素の画像信号を前記撮像素子の他の画素の画像信号を用いて補正する補正手段とを備え、
    前記補正手段は、前記仮想像面位置設定手段によって設定された前記仮想像面の位置と前記被写体光の進行方向の情報に基づいて、前記欠陥画素の画像信号の補正に使用する前記他の画素を決定することを特徴とする画像処理装置。
  2. 前記補正手段は、前記欠陥画素に入射する被写体光が通過する前記仮想像面上の位置と同じ位置の進行方向の情報を有する被写体光が入射する画素から前記他の画素を選択し、当該選択された画素の画素信号を用いて前記欠陥画素の画像信号の補正値を生成することを特徴とする請求項1に記載の画像処理装置。
  3. 前記選択される画素は、前記欠陥画素に入射する被写体光が通過する前記仮想像面上の位置と同じ位置の進行方向の情報を有する被写体光のうち、前記欠陥画素に入射する被写体光が射出される瞳分割領域に隣接する瞳分割領域からの被写体光が入射する画素であることを特徴とする請求項2に記載の画像処理装置。
  4. 前記補正手段は、前記他の画素の画像信号の算術平均により前記欠陥画素の画像信号の補正値を生成することを特徴とする請求項1乃至3のいずれか一項に記載の画像処理装置。
  5. 前記補正手段は、前記瞳分割領域の位置に応じて対応する画素の画像信号に重み付けを用いた加重平均により前記欠陥画素の画像信号の補正値を生成することを特徴とする請求項1乃至3のいずれか一項に記載の画像処理装置。
  6. 前記画像信号は、撮影レンズの瞳分割領域に対応した被写体光の進行方向の情報が得られる撮像光学系を用いて撮像素子から取得されることを特徴とする請求項1乃至5のいずれか一項に記載の画像処理装置。
  7. 撮像素子から取得される被写体光の進行方向の情報を含む画像信号に適用される画像処理装置の制御方法であって、
    前記撮像素子から取得される画像信号を用いて被写体の画像を再構築する仮想像面の位置を設定する仮想像面位置設定ステップと、
    前記撮像素子の欠陥画素の画像信号を前記撮像素子の他の画素の画像信号を用いて補正する補正ステップとを備え、
    前記補正ステップは、前記仮想像面位置設定ステップで設定された前記仮想像面の位置と前記被写体光の進行方向の情報に基づいて、前記欠陥画素の画像信号の補正に使用する前記他の画素を決定することを特徴とする制御方法。
  8. コンピュータを、
    撮像素子から取得される被写体光の進行方向の情報を含む画像信号に適用される画像処理装置の制御方法において、
    前記撮像素子から取得される画像信号を用いて被写体の画像を再構築する仮想像面の位置を設定する仮想像面位置設定手段と、
    前記撮像素子の欠陥画素の画像信号を前記撮像素子の他の画素の画像信号を用いて補正する補正手段として機能させ、さらに前記補正手段を、前記仮想像面位置設定手段によって設定された仮想像面の位置と前記被写体光の進行方向の情報に基づいて、前記欠陥画素の画像信号の補正に使用する前記他の画素を決定手段として機能させるプログラム。
  9. 請求項8のプログラムを記録したコンピュータが読み取り可能な記録媒体。
  10. コンピュータを、請求項1乃至のいずれか一項に記載された画像処理装置の各手段として機能させるプログラム。
  11. 撮影レンズの瞳分割領域に対応した被写体光の進行方向の情報が得られる撮像光学系と、前記撮像光学系により結像された被写体光を光電変換して画像信号を出力する撮像素子と、
    請求項1乃至のいずれか一項に記載の画像処理装置とを
    備えることを特徴とする撮像装置。
  12. 前記撮像光学系は、前記撮影レンズと前記撮像素子との間に、前記瞳分割領域に対応したマイクロレンズアレイを備え、各マイクロレンズに対応する前記撮像素子の画素配列に含まれる各画素は前記撮影レンズの各瞳分割領域に対応すること特徴とする請求項11に記載の撮像装置。
  13. 撮像素子から取得される被写体光の進行方向の情報を含む画像信号に適用される画像処理装置であって、
    前記撮像素子から取得される画像信号を用いて仮想像面における被写体の画像を再構築する再構築手段と、
    前記撮像素子の欠陥画素の画像信号を前記撮像素子の他の画素の画像信号を用いて補正する補正手段とを備え、
    前記補正手段は、前記仮想像面の位置と前記被写体光の進行方向の情報に基づいて、前記欠陥画素の画像信号の補正に使用する前記他の画素を決定することを特徴とする画像処理装置。
  14. 撮像素子から取得される被写体光の進行方向の情報を含む画像信号に適用される画像処理装置の制御方法であって、
    前記撮像素子から取得される画像信号を用いて仮想像面における被写体の画像を再構築する再構築ステップと、
    前記撮像素子の欠陥画素の画像信号を前記撮像素子の他の画素の画像信号を用いて補正する補正ステップとを備え、
    前記補正ステップでは、前記仮想像面の位置と前記被写体光の進行方向の情報に基づいて、前記欠陥画素の画像信号の補正に使用する前記他の画素を決定することを特徴とする画像処理装置の制御方法。
  15. コンピュータを、
    撮像素子から取得される被写体光の進行方向の情報を含む画像信号に適用される画像処理装置の制御方法において、
    前記撮像素子から取得される画像信号を用いて仮想像面における被写体の画像を再構築する再構築手段と、
    前記撮像素子の欠陥画素の画像信号を前記撮像素子の他の画素の画像信号を用いて補正する補正手段として機能させ、
    さらに前記補正手段は、前記仮想像面の位置と前記被写体光の進行方向の情報に基づいて、前記欠陥画素の画像信号の補正に使用する前記他の画素を決定するように機能させることを特徴とするプログラム。
  16. 請求項15のプログラムを記録したコンピュータが読み取り可能な記録媒体。
JP2011262007A 2011-11-30 2011-11-30 画像処理装置、画像処理方法およびプログラム、および画像処理装置を有する撮像装置 Expired - Fee Related JP5913934B2 (ja)

Priority Applications (10)

Application Number Priority Date Filing Date Title
JP2011262007A JP5913934B2 (ja) 2011-11-30 2011-11-30 画像処理装置、画像処理方法およびプログラム、および画像処理装置を有する撮像装置
RU2014126378/07A RU2570349C1 (ru) 2011-11-30 2012-11-16 Устройство обработки изображений, способ обработки изображений и программа, и устройство съемки изображений, включающее в себя устройство обработки изображений
GB1410755.1A GB2512223B (en) 2011-11-30 2012-11-16 Image processing apparatus, image processing method and program, and image pickup apparatus including image processing apparatus
CN201280047715.1A CN103828344B (zh) 2011-11-30 2012-11-16 图像处理设备及其控制方法、以及摄像设备
PCT/JP2012/080411 WO2013080899A1 (en) 2011-11-30 2012-11-16 Image processing apparatus, image processing method and program, and image pickup apparatus including image processing apparatus
US14/238,246 US9191595B2 (en) 2011-11-30 2012-11-16 Image processing apparatus, image processing method and program, and image pickup apparatus including image processing apparatus
KR1020147017478A KR101627087B1 (ko) 2011-11-30 2012-11-16 화상처리장치, 화상처리방법 및 기억매체, 및 화상처리장치를 구비한 촬상장치
BR112014000674A BR112014000674A2 (pt) 2011-11-30 2012-11-16 aparelho de processamento de imagem, programa e método de processamento de imagem e aparelho de captação de imagem que inclui o aparelho de processamento de imagem
DE112012003264.0T DE112012003264B4 (de) 2011-11-30 2012-11-16 Bildverarbeitungsvorrichtung, Bildverarbeitungsverfahren und Programm, und Bildaufnahmevorrichtung mit einer Bildverarbeitungsvorrichtung
US14/865,523 US9560297B2 (en) 2011-11-30 2015-09-25 Image processing apparatus, image processing method and program, and image pickup apparatus including image processing apparatus for correcting defect pixels

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011262007A JP5913934B2 (ja) 2011-11-30 2011-11-30 画像処理装置、画像処理方法およびプログラム、および画像処理装置を有する撮像装置

Publications (3)

Publication Number Publication Date
JP2013115717A JP2013115717A (ja) 2013-06-10
JP2013115717A5 true JP2013115717A5 (ja) 2015-01-22
JP5913934B2 JP5913934B2 (ja) 2016-05-11

Family

ID=48535356

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011262007A Expired - Fee Related JP5913934B2 (ja) 2011-11-30 2011-11-30 画像処理装置、画像処理方法およびプログラム、および画像処理装置を有する撮像装置

Country Status (9)

Country Link
US (2) US9191595B2 (ja)
JP (1) JP5913934B2 (ja)
KR (1) KR101627087B1 (ja)
CN (1) CN103828344B (ja)
BR (1) BR112014000674A2 (ja)
DE (1) DE112012003264B4 (ja)
GB (1) GB2512223B (ja)
RU (1) RU2570349C1 (ja)
WO (1) WO2013080899A1 (ja)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6238657B2 (ja) * 2013-09-12 2017-11-29 キヤノン株式会社 画像処理装置及びその制御方法
JP2015080125A (ja) * 2013-10-18 2015-04-23 カシオ計算機株式会社 画像処理装置、撮像装置、画像処理方法及びプログラム
JP6506506B2 (ja) * 2014-04-02 2019-04-24 キヤノン株式会社 画像処理装置、撮像装置、制御方法およびプログラム
JP6585890B2 (ja) * 2014-09-30 2019-10-02 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム、並びに撮像装置
TWI538515B (zh) * 2014-10-31 2016-06-11 晶相光電股份有限公司 影像感測裝置與缺陷像素檢測與補償方法
EP3026884A1 (en) * 2014-11-27 2016-06-01 Thomson Licensing Plenoptic camera comprising a light emitting device
JP2016127389A (ja) 2014-12-26 2016-07-11 キヤノン株式会社 画像処理装置およびその制御方法
EP3144887A1 (en) * 2015-09-17 2017-03-22 Thomson Licensing A method and an apparatus for generating data representative of a pixel beam
US10872442B2 (en) 2015-09-17 2020-12-22 Interdigital Vc Holdings, Inc. Apparatus and a method for encoding an image captured by an optical acquisition system
EP3145168A1 (en) 2015-09-17 2017-03-22 Thomson Licensing An apparatus and a method for generating data representing a pixel beam
EP3264741A1 (en) 2016-06-30 2018-01-03 Thomson Licensing Plenoptic sub aperture view shuffling with improved resolution
JP2018098663A (ja) * 2016-12-14 2018-06-21 キヤノン株式会社 画像処理装置、方法及びプログラム
JP2018157371A (ja) * 2017-03-17 2018-10-04 キヤノン株式会社 撮像装置及び欠陥画素の補正方法
JP6872956B2 (ja) 2017-04-13 2021-05-19 キヤノン株式会社 撮像システム及び撮像システムの制御方法
US11089251B2 (en) 2018-07-12 2021-08-10 Canon Kabushiki Kaisha Image sensor and image capturing apparatus

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5703961A (en) * 1994-12-29 1997-12-30 Worldscape L.L.C. Image transformation and synthesis methods
US6618084B1 (en) * 1997-11-05 2003-09-09 Stmicroelectronics, Inc. Pixel correction system and method for CMOS imagers
US6665009B1 (en) * 1998-05-20 2003-12-16 Omnivision Technologies, Inc. On-chip dead pixel correction in a CMOS imaging sensor
JP2002359783A (ja) * 2001-05-31 2002-12-13 Olympus Optical Co Ltd 撮像装置及び画素欠陥補正方法
US6737625B2 (en) 2001-06-28 2004-05-18 Agilent Technologies, Inc. Bad pixel detection and correction in an image sensing device
JP2003141562A (ja) * 2001-10-29 2003-05-16 Sony Corp 非平面画像の画像処理装置及び画像処理方法、記憶媒体、並びにコンピュータ・プログラム
DE10209552A1 (de) * 2002-03-04 2003-10-02 Plettac Ag Verfahren und Vorrichtung zur Kompensation defekter Pixel eines CCD-Sensors
JP4211292B2 (ja) * 2002-06-03 2009-01-21 ソニー株式会社 画像処理装置および画像処理方法、プログラム並びにプログラム記録媒体
US7372484B2 (en) 2003-06-26 2008-05-13 Micron Technology, Inc. Method and apparatus for reducing effects of dark current and defective pixels in an imaging device
US7936392B2 (en) * 2004-10-01 2011-05-03 The Board Of Trustees Of The Leland Stanford Junior University Imaging arrangements and methods therefor
CN101426085B (zh) * 2004-10-01 2012-10-03 小利兰·斯坦福大学托管委员会 成像装置及其方法
WO2007036055A1 (en) * 2005-09-30 2007-04-05 Simon Fraser University Methods and apparatus for detecting defects in imaging arrays by image analysis
EP1941314A4 (en) * 2005-10-07 2010-04-14 Univ Leland Stanford Junior ARRANGEMENTS AND APPROACHES FOR MICROSCOPY
JP5137380B2 (ja) * 2006-11-07 2013-02-06 キヤノン株式会社 ぶれ補正装置及び方法
US7792423B2 (en) * 2007-02-06 2010-09-07 Mitsubishi Electric Research Laboratories, Inc. 4D light field cameras
JP4483951B2 (ja) * 2008-01-28 2010-06-16 ソニー株式会社 撮像装置
JP2010057067A (ja) * 2008-08-29 2010-03-11 Sony Corp 撮像装置および画像処理装置
KR101441586B1 (ko) * 2008-10-06 2014-09-23 삼성전자 주식회사 촬상 장치 및 촬상 방법
JP5230456B2 (ja) * 2009-01-09 2013-07-10 キヤノン株式会社 画像処理装置および画像処理方法
JP5463718B2 (ja) * 2009-04-16 2014-04-09 ソニー株式会社 撮像装置
US20120249550A1 (en) * 2009-04-18 2012-10-04 Lytro, Inc. Selective Transmission of Image Data Based on Device Attributes
US8908058B2 (en) * 2009-04-18 2014-12-09 Lytro, Inc. Storage and transmission of pictures including multiple frames
RU2412554C1 (ru) 2010-01-25 2011-02-20 Учреждение Российской академии наук Институт физики полупроводников им. А.В. Ржанова Сибирского отделения РАН (ИФП СО РАН) Способ компенсации дефектных фоточувствительных элементов многоэлементного фотоприемника
US8928969B2 (en) * 2011-12-06 2015-01-06 Ostendo Technologies, Inc. Spatio-optical directional light modulator
JP6071333B2 (ja) * 2012-08-27 2017-02-01 キヤノン株式会社 画像処理装置、方法およびプログラム、並びに画像処理装置を有する撮像装置

Similar Documents

Publication Publication Date Title
JP2013115717A5 (ja)
EP2615825A3 (en) Image processing apparatus, image sensing appparatus, control method, program, and recording medium
JP2015138200A5 (ja) 焦点調節装置及び焦点調節方法
JP2012142918A5 (ja)
JP2014146023A5 (ja)
JP2014206564A5 (ja)
JP2013128217A5 (ja)
JP2016045240A5 (ja)
JP2015079193A5 (ja)
JP2015075526A5 (ja) 画像データ処理装置、距離算出装置、撮像装置および画像データ処理方法
JP6137316B2 (ja) 深さ位置検出装置、撮像素子、及び深さ位置検出方法
JP2013101305A5 (ja) 焦点検出装置及び焦点検出装置の制御方法
JP2015094899A5 (ja)
JP2013258500A5 (ja) 撮像装置及びその制御方法
JP2014055999A5 (ja)
JP2014026062A5 (ja)
JP2015119206A5 (ja) 画像処理装置、撮像装置、その制御方法及びプログラム
JP2015046019A5 (ja)
JP2017158018A5 (ja)
JP2011015299A5 (ja)
JP2015018084A5 (ja) 撮像装置、カメラシステム及び画像処理方法
JP2016036115A5 (ja)
JP2013254194A5 (ja)
JP2010101972A5 (ja)
JP2014135562A5 (ja)