JP2012175621A5 - - Google Patents
Download PDFInfo
- Publication number
- JP2012175621A5 JP2012175621A5 JP2011038240A JP2011038240A JP2012175621A5 JP 2012175621 A5 JP2012175621 A5 JP 2012175621A5 JP 2011038240 A JP2011038240 A JP 2011038240A JP 2011038240 A JP2011038240 A JP 2011038240A JP 2012175621 A5 JP2012175621 A5 JP 2012175621A5
- Authority
- JP
- Japan
- Prior art keywords
- image
- timing
- output
- images
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Description
図３、および、図４を参照して、各行の露光の開始および終了タイミングと、電荷の読み出し開始タイミングの一例について説明する。
図３、図４とも時間軸を横軸、行を縦軸として示している。
例えば図３において、電荷読み出しのタイミングは、図に示す点線ライン１５１ａ、１５１ｂで示すように、行単位で時間ずれが発生する。
図３、図４とも時間軸を横軸、行を縦軸として示している。
例えば図３において、電荷読み出しのタイミングは、図に示す点線ライン１５１ａ、１５１ｂで示すように、行単位で時間ずれが発生する。
図１３に示す出力タイミング（Ｔｘ）の画像を構成する上端の行の画素の画素値（ＯＵＴ）は以下の（式１）で算出する。
ＯＵＴ＝ａ×Ａ＋Ｂ＋Ｃ＋Ｄ＋（１−ａ）×Ｅ
・・・（式１）
Ａ〜Ｅは、各タイミング画像の同一画素位置、すなわち対応画素位置の画素値である。
ａは重み係数である。
なお、重み係数ａは、例えば図１３に示す出力タイミング（Ｔｘ）と各タイミング画像との重複率に相当する値を設定する。
なお、重み係数ａは、各行の露光タイミングによって変わるため、走査線位置情報２１７を必要とする。
ＯＵＴ＝ａ×Ａ＋Ｂ＋Ｃ＋Ｄ＋（１−ａ）×Ｅ
・・・（式１）
Ａ〜Ｅは、各タイミング画像の同一画素位置、すなわち対応画素位置の画素値である。
ａは重み係数である。
なお、重み係数ａは、例えば図１３に示す出力タイミング（Ｔｘ）と各タイミング画像との重複率に相当する値を設定する。
なお、重み係数ａは、各行の露光タイミングによって変わるため、走査線位置情報２１７を必要とする。
このゲイン補償処理を実行することで、静止画については通常のＢａｙｅｒ配列と同じ解像度劣化のない画像を取得することができる。ゲイン補償処理部２４１の出力は、歪みをもち、また露光制御パターンごとに動きのぶれ量が異なるため、動きのある場合には、画が破綻してしまう。
例えば、タイミング画像（差分画像）の生成に適用する２つの画像の対応画素値が本来１２００と８００である場合、
差分画像画素値＝１２００−８００＝４００
となる。しかし、センサの出力が１０ｂｉｔであるような場合、センサ出力は０〜１０２３の画素値しか出力できない。この場合上記の画素値２０００は画素値１０２３として出力され、
差分画像画素値＝１０２３―８００＝２２３
となり、実際よりも小さな画素値のタイミング画像（差分画像）を生成してしまうことがある。
差分画像画素値＝１２００−８００＝４００
となる。しかし、センサの出力が１０ｂｉｔであるような場合、センサ出力は０〜１０２３の画素値しか出力できない。この場合上記の画素値２０００は画素値１０２３として出力され、
差分画像画素値＝１０２３―８００＝２２３
となり、実際よりも小さな画素値のタイミング画像（差分画像）を生成してしまうことがある。
本発明によるフォーカルプレーン歪み軽減効果を示す。図１１、図１２（Ｂ）、図１３を参照して説明したように、４通りの露光時間からなる１枚の画像から、まず、４枚の露光パターン画像を生成し、さらに４枚の露光パターン画像の差分画像として、４つの異なるタイミングで撮影された画像に相当する４つのタイミング画像を生成する。歪み補正処理部は、これらのタイミング画像の合成処理によってフォーカルプレーン歪みを補正した補正画像を生成する。
Priority Applications (7)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011038240A JP5655626B2 (ja) | 2011-02-24 | 2011-02-24 | 画像処理装置、および画像処理方法、並びにプログラム |
| KR1020120015994A KR20120102509A (ko) | 2011-02-24 | 2012-02-16 | 화상 처리 장치, 화상 처리 방법 및 프로그램 |
| CN2012100390978A CN102651802A (zh) | 2011-02-24 | 2012-02-17 | 图像处理装置和图像处理方法及程序 |
| US13/399,222 US8797433B2 (en) | 2011-02-24 | 2012-02-17 | Image processing apparatus and image processing method and program |
| BRBR102012003819-6A BR102012003819A2 (pt) | 2011-02-24 | 2012-02-17 | aparelho e mÉtodo de processamento de imagem,e, programa para executar processamento de imagem |
| US14/326,963 US9432595B2 (en) | 2011-02-24 | 2014-07-09 | Image processing device that generates an image from pixels with different exposure times |
| US15/225,276 US9800806B2 (en) | 2011-02-24 | 2016-08-01 | Image processing device that generates an image from pixels with different exposure times |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011038240A JP5655626B2 (ja) | 2011-02-24 | 2011-02-24 | 画像処理装置、および画像処理方法、並びにプログラム |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2012175621A JP2012175621A (ja) | 2012-09-10 |
| JP2012175621A5 true JP2012175621A5 (ja) | 2014-03-06 |
| JP5655626B2 JP5655626B2 (ja) | 2015-01-21 |
Family
ID=46693689
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011038240A Expired - Fee Related JP5655626B2 (ja) | 2011-02-24 | 2011-02-24 | 画像処理装置、および画像処理方法、並びにプログラム |
Country Status (5)
| Country | Link |
|---|---|
| US (3) | US8797433B2 (ja) |
| JP (1) | JP5655626B2 (ja) |
| KR (1) | KR20120102509A (ja) |
| CN (1) | CN102651802A (ja) |
| BR (1) | BR102012003819A2 (ja) |
Families Citing this family (71)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2011053678A1 (en) | 2009-10-28 | 2011-05-05 | The Trustees Of Columbia University In The City Of New York | Methods and systems for coded rolling shutter |
| JP5499854B2 (ja) | 2010-04-08 | 2014-05-21 | ソニー株式会社 | 頭部装着型ディスプレイにおける光学的位置調整方法 |
| JP5434848B2 (ja) | 2010-08-18 | 2014-03-05 | ソニー株式会社 | 表示装置 |
| JP5655626B2 (ja) | 2011-02-24 | 2015-01-21 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
| EP2678740B1 (en) | 2011-02-25 | 2020-12-23 | Sony Corporation | Systems, methods, and media for reconstructing a space-time volume from a coded image |
| JP2012234393A (ja) * | 2011-05-02 | 2012-11-29 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
| JP2013066142A (ja) * | 2011-08-31 | 2013-04-11 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
| JP2013066140A (ja) | 2011-08-31 | 2013-04-11 | Sony Corp | 撮像装置、および信号処理方法、並びにプログラム |
| US9013615B2 (en) * | 2011-09-21 | 2015-04-21 | Semiconductor Components Industries, Llc | Image sensor with flexible interconnect capabilities |
| JP5780129B2 (ja) | 2011-11-22 | 2015-09-16 | ソニー株式会社 | 光ビーム伸長装置、画像表示装置及び光学装置 |
| JP5879973B2 (ja) | 2011-11-30 | 2016-03-08 | ソニー株式会社 | 光反射部材、光ビーム伸長装置、画像表示装置及び光学装置 |
| JP6003903B2 (ja) | 2012-01-24 | 2016-10-05 | ソニー株式会社 | 表示装置 |
| CN102647565A (zh) * | 2012-04-18 | 2012-08-22 | 格科微电子（上海）有限公司 | 像素阵列的排列方法、图像传感器及图像传感方法 |
| JP6145966B2 (ja) | 2012-05-09 | 2017-06-14 | ソニー株式会社 | 表示装置 |
| JP5747238B2 (ja) * | 2012-12-07 | 2015-07-08 | 関根 弘一 | 動き検出用固体撮像装置及び動き検出システム |
| WO2014099320A1 (en) | 2012-12-17 | 2014-06-26 | The Trustees Of Columbia University In The City Of New York | Methods, systems, and media for high dynamic range imaging |
| WO2014109115A1 (ja) | 2013-01-10 | 2014-07-17 | ソニー株式会社 | 画像表示装置、画像生成装置及び透過型空間光変調装置 |
| KR101871945B1 (ko) * | 2013-01-17 | 2018-08-02 | 한화에어로스페이스 주식회사 | 영상 처리 장치 및 방법 |
| JP6123342B2 (ja) | 2013-02-20 | 2017-05-10 | ソニー株式会社 | 表示装置 |
| KR101992933B1 (ko) * | 2013-03-14 | 2019-06-25 | 삼성전자주식회사 | 광역 역광 보정 이미지 처리 방법 및 이를 이용하는 이미지 신호 프로세서 |
| CN111314632B (zh) * | 2013-03-14 | 2023-04-21 | 株式会社尼康 | 摄像单元及摄像装置 |
| EP2985652A4 (en) | 2013-04-11 | 2016-12-14 | Sony Corp | IMAGE DISPLAY DEVICE AND DISPLAY DEVICE |
| CN108132537B (zh) | 2013-04-11 | 2021-03-16 | 索尼公司 | 显示设备 |
| US9413992B2 (en) * | 2013-05-20 | 2016-08-09 | Omnivision Technologies, Inc. | High dynamic range image sensor with full resolution recovery |
| JP6261883B2 (ja) * | 2013-06-03 | 2018-01-17 | 浜松ホトニクス株式会社 | 光観察装置、それに用いる撮像装置、及び光観察方法 |
| JP6367529B2 (ja) | 2013-06-25 | 2018-08-01 | ソニー株式会社 | 表示装置、表示制御方法、表示制御装置、および電子機器 |
| CN104769935B (zh) | 2013-07-16 | 2019-11-19 | 索尼公司 | 显示装置 |
| JP6311714B2 (ja) | 2013-07-16 | 2018-04-18 | ソニー株式会社 | 表示装置 |
| TWI644568B (zh) | 2013-07-23 | 2018-12-11 | 新力股份有限公司 | 攝像元件、攝像方法及攝像程式 |
| US20150130959A1 (en) * | 2013-11-14 | 2015-05-14 | Himax Imaging Limited | Image processing device and exposure control method |
| KR102159256B1 (ko) * | 2013-11-25 | 2020-09-23 | 삼성전자 주식회사 | 픽셀 어레이 및 이를 포함하는 이미지 센서 |
| KR102170627B1 (ko) * | 2014-01-08 | 2020-10-27 | 삼성전자주식회사 | 이미지 센서 |
| JP2015148782A (ja) | 2014-02-10 | 2015-08-20 | ソニー株式会社 | 画像表示装置及び表示装置 |
| JP6314518B2 (ja) | 2014-02-10 | 2018-04-25 | ソニー株式会社 | 画像表示装置及び表示装置 |
| JP6070599B2 (ja) * | 2014-02-18 | 2017-02-01 | ソニー株式会社 | 情報処理装置、情報処理方法、情報処理システム、および撮像装置 |
| JP6391952B2 (ja) | 2014-03-17 | 2018-09-19 | ソニー株式会社 | 表示装置及び光学装置 |
| JP2015185943A (ja) * | 2014-03-20 | 2015-10-22 | 株式会社東芝 | フィルタアレイ付マイクロレンズおよび固体撮像装置 |
| JP2015184560A (ja) | 2014-03-25 | 2015-10-22 | ソニー株式会社 | 導光装置、画像表示装置及び表示装置 |
| JP2015184561A (ja) | 2014-03-25 | 2015-10-22 | ソニー株式会社 | 導光装置、画像表示装置及び表示装置 |
| KR102184714B1 (ko) * | 2014-04-11 | 2020-12-02 | 에스케이하이닉스 주식회사 | 이미지 센싱 장치 |
| US10070067B2 (en) | 2014-04-15 | 2018-09-04 | Sony Corporation | Systems, methods, and media for extracting information and a display image from two captured images |
| US9711553B2 (en) * | 2014-04-28 | 2017-07-18 | Samsung Electronics Co., Ltd. | Image sensor including a pixel having photoelectric conversion elements and image processing device having the image sensor |
| TWI556647B (zh) * | 2014-08-08 | 2016-11-01 | 恆景科技股份有限公司 | 影像感測器的可調適降低功率消耗的方法 |
| KR20160019215A (ko) * | 2014-08-11 | 2016-02-19 | 삼성전자주식회사 | 촬영 장치 및 그 촬영 방법 |
| US9531959B2 (en) * | 2014-08-29 | 2016-12-27 | Semiconductor Components Industries, Llc | Imaging systems and methods for capturing image data at high scan rates |
| CN104363380B (zh) * | 2014-10-15 | 2017-10-27 | 北京智谷睿拓技术服务有限公司 | 图像采集控制方法和装置 |
| WO2016072018A1 (ja) * | 2014-11-07 | 2016-05-12 | オリンパス株式会社 | 撮像装置 |
| JP6511780B2 (ja) * | 2014-11-13 | 2019-05-15 | カシオ計算機株式会社 | 画像取得装置、及びプログラム |
| KR102277178B1 (ko) * | 2015-03-09 | 2021-07-14 | 삼성전자 주식회사 | 카메라 모듈을 포함하는 전자 장치 및 전자 장치의 이미지 처리 방법 |
| JP6486182B2 (ja) | 2015-04-22 | 2019-03-20 | キヤノン株式会社 | 画像処理装置、撮像装置および画像処理プログラム |
| US9654699B2 (en) * | 2015-07-02 | 2017-05-16 | Omnivision Technologies, Inc. | High dynamic range imaging with reduced frame buffer |
| EP3358821B1 (en) * | 2015-09-30 | 2021-06-30 | Nikon Corporation | Imaging device and image processing device |
| WO2017057279A1 (ja) * | 2015-09-30 | 2017-04-06 | 株式会社ニコン | 撮像装置、画像処理装置、および表示装置 |
| KR102465212B1 (ko) * | 2015-10-30 | 2022-11-10 | 삼성전자주식회사 | 다중 노출 센서를 이용하는 촬영 장치 및 이의 촬영 방법 |
| US9848137B2 (en) * | 2015-11-24 | 2017-12-19 | Samsung Electronics Co., Ltd. | CMOS image sensors having grid array exposure control |
| CN106303269A (zh) * | 2015-12-28 | 2017-01-04 | 北京智谷睿拓技术服务有限公司 | 图像采集控制方法和装置、图像采集设备 |
| US9743025B2 (en) | 2015-12-30 | 2017-08-22 | Omnivision Technologies, Inc. | Method and system of implementing an uneven timing gap between each image capture in an image sensor |
| EP3424403B1 (en) * | 2016-03-03 | 2024-04-24 | Sony Group Corporation | Medical image processing device, system, method, and program |
| KR102495754B1 (ko) * | 2016-10-25 | 2023-02-02 | 한화테크윈 주식회사 | 광역 영상의 동적 범위를 압축하는 영상 처리 장치 및 방법 |
| WO2019035244A1 (ja) * | 2017-08-18 | 2019-02-21 | 富士フイルム株式会社 | 撮像装置、撮像装置の制御方法、及び撮像装置の制御プログラム |
| JP7057079B2 (ja) * | 2017-09-01 | 2022-04-19 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、及びプログラム |
| TW201915818A (zh) * | 2017-10-05 | 2019-04-16 | 香港商印芯科技股份有限公司 | 光學識別模組 |
| KR102648747B1 (ko) * | 2019-01-18 | 2024-03-20 | 삼성전자주식회사 | Hdr 이미지를 생성하기 위한 이미징 시스템 및 그것의 동작 방법 |
| CN110335219B (zh) * | 2019-07-17 | 2021-09-28 | 中国电子科技集团公司第十三研究所 | 一种像素畸变的校正方法、校正装置及终端 |
| US11671720B2 (en) * | 2019-08-08 | 2023-06-06 | Microsoft Technology Licensing, Llc | HDR visible light imaging using TOF pixel |
| CN110381263B (zh) * | 2019-08-20 | 2021-04-13 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
| CN111432099B (zh) * | 2020-03-30 | 2021-04-30 | Oppo广东移动通信有限公司 | 图像传感器、处理系统及方法、电子设备和存储介质 |
| CN111601054B (zh) * | 2020-05-15 | 2022-07-19 | 上海集成电路研发中心有限公司 | 图像传感器新型滚筒式曝光的时序控制方法 |
| CN114513609B (zh) * | 2020-11-17 | 2024-05-10 | 浙江大华技术股份有限公司 | 相机曝光时间的调节方法、图像频闪检测方法及装置 |
| KR20230046816A (ko) * | 2021-09-30 | 2023-04-06 | 에스케이하이닉스 주식회사 | 이미지 센싱 장치 |
| KR20230173508A (ko) * | 2022-06-17 | 2023-12-27 | 에스케이하이닉스 주식회사 | 이미지 센서 |
Family Cites Families (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002075815A (ja) * | 2000-08-23 | 2002-03-15 | Sony Corp | パターン検査装置及びこれを用いた露光装置制御システム |
| JP3626448B2 (ja) * | 2001-11-28 | 2005-03-09 | 株式会社東芝 | 露光方法 |
| JP2004140479A (ja) | 2002-10-16 | 2004-05-13 | Sony Corp | 固体撮像装置、カメラ装置、及びその制御方法 |
| JP4117540B2 (ja) | 2002-10-17 | 2008-07-16 | ソニー株式会社 | 固体撮像素子の制御方法 |
| US7180533B2 (en) * | 2002-12-20 | 2007-02-20 | Konica Minolta Holdings Inc. | Image processing apparatus, image processing method, and program |
| CN101057493B (zh) | 2004-11-02 | 2011-05-25 | 松下电器产业株式会社 | 图像传感器 |
| JP2006148496A (ja) * | 2004-11-18 | 2006-06-08 | Sony Corp | フォーカルプレーン歪みの補正回路および補正方法、並びに電子機器、プログラム、記録媒体 |
| JP2006253876A (ja) | 2005-03-09 | 2006-09-21 | Sony Corp | 物理量分布検知装置および物理量分布検知装置の駆動方法 |
| JP4483744B2 (ja) * | 2005-08-26 | 2010-06-16 | ソニー株式会社 | 撮像装置及び撮像制御方法 |
| JP4987355B2 (ja) * | 2005-10-14 | 2012-07-25 | 京セラ株式会社 | 撮像装置および撮像方法 |
| US8115818B2 (en) * | 2005-12-27 | 2012-02-14 | Kyocera Corporation | Imaging device and image processing method of same |
| JP3974634B2 (ja) * | 2005-12-27 | 2007-09-12 | 京セラ株式会社 | 撮像装置および撮像方法 |
| JP4340915B2 (ja) | 2006-02-01 | 2009-10-07 | ソニー株式会社 | 撮像画像信号の歪み補正方法、撮像画像信号の歪み補正装置、撮像方法および撮像装置 |
| JP4743007B2 (ja) * | 2006-06-16 | 2011-08-10 | ソニー株式会社 | 画像処理装置および画像処理方法、記録媒体、並びに、プログラム |
| JP4961982B2 (ja) | 2006-12-07 | 2012-06-27 | ソニー株式会社 | 固体撮像装置、固体撮像装置の駆動方法および撮像装置 |
| JP2008219523A (ja) * | 2007-03-05 | 2008-09-18 | Canon Inc | 撮像装置及びその制御方法 |
| JP4661922B2 (ja) * | 2008-09-03 | 2011-03-30 | ソニー株式会社 | 画像処理装置、撮像装置、固体撮像素子、画像処理方法およびプログラム |
| US8390698B2 (en) * | 2009-04-08 | 2013-03-05 | Panasonic Corporation | Image capturing apparatus, reproduction apparatus, image capturing method, and reproduction method |
| JP5655626B2 (ja) | 2011-02-24 | 2015-01-21 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
| JP2012234393A (ja) * | 2011-05-02 | 2012-11-29 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
-
2011
- 2011-02-24 JP JP2011038240A patent/JP5655626B2/ja not_active Expired - Fee Related
-
2012
- 2012-02-16 KR KR1020120015994A patent/KR20120102509A/ko not_active Application Discontinuation
- 2012-02-17 CN CN2012100390978A patent/CN102651802A/zh active Pending
- 2012-02-17 BR BRBR102012003819-6A patent/BR102012003819A2/pt not_active Application Discontinuation
- 2012-02-17 US US13/399,222 patent/US8797433B2/en active Active
-
2014
- 2014-07-09 US US14/326,963 patent/US9432595B2/en not_active Expired - Fee Related
-
2016
- 2016-08-01 US US15/225,276 patent/US9800806B2/en not_active Expired - Fee Related
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2012175621A5 (ja) | ||
| JP5655626B2 (ja) | 画像処理装置、および画像処理方法、並びにプログラム | |
| US9420193B2 (en) | Image pickup apparatus, method of controlling image pickup apparatus, and program | |
| JP4638361B2 (ja) | 撮像装置 | |
| US9001233B2 (en) | Image pickup apparatus and image pickup apparatus control method that generates an image with transformed number of pixels | |
| JP4689687B2 (ja) | 撮像方法および撮像装置 | |
| JP5746521B2 (ja) | 撮像装置及びその制御方法、プログラム並びに記憶媒体 | |
| JP2012226213A5 (ja) | ||
| JP6045767B1 (ja) | 撮像装置、画像取得方法、画像取得プログラムおよび記憶媒体 | |
| JP2015061199A5 (ja) | ||
| JP2013070117A5 (ja) | ||
| JP5526287B2 (ja) | 撮像装置及び撮像方法 | |
| JP2015142342A (ja) | 撮像装置、画像生成方法及び画像生成プログラム | |
| JP2010212761A (ja) | 画像処理装置 | |
| JP5489739B2 (ja) | 信号処理装置、撮像装置、及び信号処理方法 | |
| JP2015032842A (ja) | 固体撮像素子、撮像装置、および補正方法 | |
| JP2017098931A5 (ja) | ||
| JP2015026910A (ja) | 撮像装置及びその制御方法 | |
| JP2017005542A (ja) | 像ブレ補正装置、撮像装置、像ブレ補正方法 | |
| JP2012010063A5 (ja) | ||
| JP2017138621A5 (ja) | 撮像装置 | |
| JP2006217204A (ja) | 撮像装置 | |
| JP2013055584A (ja) | 撮像装置 | |
| JP2007116333A (ja) | 固体撮像装置 |