JP2013048410A5 - カラー撮像装置及び画像処理方法 - Google Patents

カラー撮像装置及び画像処理方法 Download PDF

Info

Publication number
JP2013048410A5
JP2013048410A5 JP2012165734A JP2012165734A JP2013048410A5 JP 2013048410 A5 JP2013048410 A5 JP 2013048410A5 JP 2012165734 A JP2012165734 A JP 2012165734A JP 2012165734 A JP2012165734 A JP 2012165734A JP 2013048410 A5 JP2013048410 A5 JP 2013048410A5
Authority
JP
Japan
Prior art keywords
pixel
color
filter
green
red
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012165734A
Other languages
English (en)
Other versions
JP5872408B2 (ja
JP2013048410A (ja
Filing date
Publication date
Application filed filed Critical
Priority to JP2012165734A priority Critical patent/JP5872408B2/ja
Priority claimed from JP2012165734A external-priority patent/JP5872408B2/ja
Publication of JP2013048410A publication Critical patent/JP2013048410A/ja
Publication of JP2013048410A5 publication Critical patent/JP2013048410A5/ja
Application granted granted Critical
Publication of JP5872408B2 publication Critical patent/JP5872408B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明はカラー撮像装置及び画像処理方法に係り、特に色モワレの発生を抑圧することができるカラー撮像装置及び画像処理方法に関する。
本発明はこのような事情に鑑みてなされたもので、高周波部の偽色の発生を簡単な画像処理で抑圧することができるカラー撮像装置及び画像処理方法を提供することを目的とする。

Claims (13)

  1. 水平方向及び垂直方向に配列された光電変換素子からなる複数の画素と、該複数の画素上に配設された所定のカラーフィルタ配列のカラーフィルタとが配設されてなる単板式のカラー撮像素子であって、前記カラーフィルタ配列は、輝度信号を得るために最も寄与する第1の色に対応する第1のフィルタと前記第1の色以外の2色以上の第2の色に対応する第2のフィルタとが周期的に配置され、かつ前記第1のフィルタは、水平、垂直、斜め右上、及び斜め左上方向に2以上隣接する部分を含むカラー撮像素子と、
    前記カラー撮像素子から前記カラーフィルタ配列に対応するモザイク画像を取得する画像取得部と、
    前記モザイク画像から抽出される同時化処理の対象画素に対し、該対象画素の近傍の前記第1のフィルタに対応する画素であって、前記水平、垂直、斜め右上、及び斜め左上方向に隣接する画素の画素値を取得し、それぞれ隣接する画素の画素値に基づいて輝度の相関方向が、前記水平、垂直、斜め右上、及び斜め左上方向のうちのいずれの方向かを判別する方向判別部と、
    前記モザイク画像から抽出される同時化処理の対象画素の画素位置における他の色の画素値を算出する同時化処理部であって、前記方向判別部により判別された相関方向に存在する他の色の画素の画素値を使用して算出する同時化処理部と、
    備えたカラー撮像装置。
  2. 前記カラーフィルタ配列は、前記第1のフィルタと前記第2のフィルタとが配列された基本配列パターンを含み、該基本配列パターンが水平及び垂直方向に繰り返して配置され、
    前記第1のフィルタ及び第2のフィルタは、それぞれ前記基本配列パターン内において水平及び垂直方向の各ライン内に1つ以上配置されている請求項1に記載のカラー撮像装置。
  3. 前記カラーフィルタ配列は、前記第1のフィルタが3×3画素群において中心と4隅に配置され、該3×3画素群が水平方向及び垂直方向に繰り返し配置されている請求項1に記載のカラー撮像装置。
  4. 前記カラーフィルタ配列は、前記第1のフィルタが3×3画素群において中心のフィルタを挟んで上下左右に配置され、該3×3画素群が水平方向及び垂直方向に繰り返し配置されている請求項1に記載のカラー撮像装置。
  5. 前記方向判別部は、前記水平、垂直、斜め右上、及び斜め左上方向の各方向別に、隣接する画素の画素値の差分絶対値を算出し、各方向別の差分絶対値のうち最小となる方向を相関方向として判別する請求項1から4のいずれか1項に記載のカラー撮像装置。
  6. 前記方向判別部は、前記水平、垂直、斜め右上、及び斜め左上方向の各方向別に、隣接する画素の画素値の比を算出し、各方向別の比のうち最も1に近い方向を相関方向として判別する請求項1から4のいずれか1項に記載のカラー撮像装置。
  7. 前記同時化処理部は、前記方向判別部により判別された相関方向に存在する他の色の画素の画素値を、そのまま前記対象画素の画素位置における他の色の画素値とし、又は前記方向判別部により判別された相関方向に存在する複数の他の色の画素の画素値を補間した値を、前記対象画素の画素位置における他の色の画素値とする請求項1から6のいずれか1項に記載のカラー撮像装置。
  8. 前記同時化処理部は、前記方向判別部により判別された相関方向に前記他の色の画素が存在しない場合には、前記対象画素の近傍の前記他の色の画素の画素位置における色差又は色比により、前記対象画素の画素値を補間して前記他の色の画素値を算出する請求項1から7のいずれか1項に記載のカラー撮像装置。
  9. 前記カラーフィルタは、赤、緑、青の色に対応するフィルタ、フィルタ及びフィルタを有し、
    前記同時化処理部は、
    前記同時化処理の対象画素が画素、その画素値がGであり、前記方向判別部により判別された相関方向に赤画素又は画素が存在しない場合、前記画素の近傍の赤画素及び青画素の画素値をR,B、これらの画素の画素位置における緑画素の画素値をG、Gとすると、前記対象画素の位置における赤画素及び青画素の画素値R,Bを、次式、
    =G+(R−G),B=G+(B−G
    により算出し、前記同時化処理の対象画素が画素、その画素値がRであり、前記方向判別部により判別された相関方向に緑画素又は画素が存在しない場合、前記画素の近傍の緑画素及び青画素の画素値をG,B、これらの画素の画素位置における赤画素の画素値をR、Rとすると、前記対象画素の位置における緑画素及び青画素の画素値G,Bを、次式、
    =R+(G−R),B=R+(B−R
    により算出し、前記同時化処理の対象画素が画素、その画素値がBであり、前記方向判別部により判別された相関方向に緑画素又は画素が存在しない場合、前記画素の近傍の緑画素及び赤画素の画素値をG,R、これらの画素の画素位置における青画素の画素値をB、Bとすると、前記対象画素の位置における緑画素及び赤画素の画素値G,Rを、次式、
    =B+(G−B),R=B+(R−B
    により算出する請求項8に記載のカラー撮像装置。
  10. 前記カラーフィルタは、赤、緑、及び青の色に対応するフィルタ、フィルタ及びフィルタを有し、
    前記同時化処理部は、
    前記同時化処理の対象画素が画素、その画素値がGであり、前記方向判別部により判別された相関方向に赤画素又は画素が存在しない場合、前記画素の近傍の赤画素及び青画素の画素値をR,B、これらの画素の画素位置における緑画素の画素値をG、Gとすると、前記対象画素の位置における赤画素及び青画素の画素値R,Bを、次式、
    =G×(R/G),B=G×(B/G
    により算出し、前記同時化処理の対象画素が画素、その画素値がRであり、前記方向判別部により判別された相関方向に緑画素又は画素が存在しない場合、前記画素の近傍の緑画素及び青画素の画素値をG,B、これらの画素の画素位置における赤画素の画素値をR、Rとすると、前記対象画素の位置における緑画素及び青画素の画素値G,Bを、次式、
    =R×(G/R),B=R×(B/R
    により算出し、前記同時化処理の対象画素が画素、その画素値がBであり、前記方向判別部により判別された相関方向に緑画素又は画素が存在しない場合、前記画素の近傍の緑画素及び赤画素の画素値をG,R、これらの画素の画素位置における青画素の画素値をB、Bとすると、前記対象画素の位置における緑画素及び赤画素の画素値G,Rを、次式、
    =B×(G/B),R=B×(R/B
    により算出する請求項8に記載のカラー撮像装置。
  11. 前記方向判別部は、前記水平、垂直、斜め右上、及び斜め左上方向に隣接する画素の画素値の差分値がそれぞれ等しい場合には相関方向がないと判別し、
    前記同時化処理部は、前記方向判別部により相関方向がないと判別されると、同時化処理の対象画素の画素位置における他の色の画素値を、該画素位置の近傍に存在する他の色の画素の画素値を使用して算出する請求項1から10のいずれか1項に記載のカラー撮像装置。
  12. 前記モザイク画像から抽出する同時化処理の対象画素を前記同時化処理の対象画素単位毎に移動させながら前記方向判別部及び同時化処理部を繰り返し動作させる制御部を有する請求項1から11のいずれか1項に記載のカラー撮像装置。
  13. 水平方向及び垂直方向に配列された光電変換素子からなる複数の画素と、該複数の画素上に配設された所定のカラーフィルタ配列のカラーフィルタとが配設されてなる単板式のカラー撮像素子であって、前記カラーフィルタ配列は、輝度信号を得るために最も寄与する第1の色に対応する第1のフィルタと前記第1の色以外の2色以上の第2の色に対応する第2のフィルタとが周期的に配置され、かつ前記第1のフィルタは、水平、垂直、斜め右上、及び斜め左上方向に2以上隣接する部分を含むカラー撮像素子に使用される画像処理方法において、
    前記カラー撮像素子から前記カラーフィルタ配列に対応するモザイク画像を取得する工程と、
    前記モザイク画像から抽出される同時化処理の対象画素に対し、該対象画素の近傍の前記第1のフィルタに対応する画素であって、前記水平、垂直、斜め右上、及び斜め左上方向に隣接する画素の画素値を取得し、それぞれ隣接する画素の画素値に基づいて輝度の相関方向が、前記水平、垂直、斜め右上、及び斜め左上方向のうちのいずれの方向かを判別する工程と、
    前記モザイク画像から抽出される同時化処理の対象画素の画素位置における他の色の画素値を算出する工程であって、前記判別された相関方向に存在する他の色の画素の画素値を使用して算出する工程と、
    を含む画像処理方法。
JP2012165734A 2011-02-28 2012-07-26 カラー撮像装置及び画像処理方法 Active JP5872408B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012165734A JP5872408B2 (ja) 2011-02-28 2012-07-26 カラー撮像装置及び画像処理方法

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2011042831 2011-02-28
JP2011042831 2011-02-28
JP2011162413 2011-07-25
JP2011162413 2011-07-25
JP2012165734A JP5872408B2 (ja) 2011-02-28 2012-07-26 カラー撮像装置及び画像処理方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2012524427A Division JP5054858B1 (ja) 2011-02-28 2011-07-29 カラー撮像装置

Publications (3)

Publication Number Publication Date
JP2013048410A JP2013048410A (ja) 2013-03-07
JP2013048410A5 true JP2013048410A5 (ja) 2014-09-25
JP5872408B2 JP5872408B2 (ja) 2016-03-01

Family

ID=46757538

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2012524427A Active JP5054858B1 (ja) 2011-02-28 2011-07-29 カラー撮像装置
JP2012165734A Active JP5872408B2 (ja) 2011-02-28 2012-07-26 カラー撮像装置及び画像処理方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2012524427A Active JP5054858B1 (ja) 2011-02-28 2011-07-29 カラー撮像装置

Country Status (7)

Country Link
US (2) US8878970B2 (ja)
EP (1) EP2683167B1 (ja)
JP (2) JP5054858B1 (ja)
CN (1) CN102959958B (ja)
BR (1) BR112012027309A2 (ja)
RU (1) RU2556022C2 (ja)
WO (1) WO2012117584A1 (ja)

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8488031B2 (en) * 2011-01-14 2013-07-16 DigitalOptics Corporation Europe Limited Chromatic noise reduction method and apparatus
BR112012026632A2 (pt) 2011-02-21 2016-07-12 Fujifilm Corp elemento de criação de imagem colorida
JP5054858B1 (ja) * 2011-02-28 2012-10-24 富士フイルム株式会社 カラー撮像装置
BR112012029513A2 (pt) 2011-03-09 2016-12-06 Fujifilm Corp elemento de imageamento de cor.
JP5378627B2 (ja) * 2011-03-11 2013-12-25 富士フイルム株式会社 撮像装置およびその動作制御方法ならびに撮像システム
WO2013183379A1 (ja) * 2012-06-08 2013-12-12 富士フイルム株式会社 画像処理装置、撮像装置、コンピュータ、画像処理方法及びプログラム
WO2014007282A1 (ja) * 2012-07-06 2014-01-09 富士フイルム株式会社 カラー撮像素子及び撮像装置
JP5702895B2 (ja) * 2012-07-06 2015-04-15 富士フイルム株式会社 カラー撮像素子および撮像装置
JP5981824B2 (ja) * 2012-09-28 2016-08-31 株式会社メガチップス 画素補間処理装置、撮像装置、プログラムおよび集積回路
CN102938843B (zh) 2012-11-22 2014-12-03 华为技术有限公司 图像处理方法、装置以及成像设备
CN104904197B (zh) * 2012-12-05 2016-12-28 富士胶片株式会社 摄像装置及异常倾斜入射光检测方法
WO2014087804A1 (ja) * 2012-12-07 2014-06-12 富士フイルム株式会社 撮像装置、画像処理方法及びプログラム
US9172743B2 (en) * 2012-12-31 2015-10-27 Futurewei Technologies, Inc. Scalable storage systems with longest prefix matching switches
JP5830186B2 (ja) * 2013-02-05 2015-12-09 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法及びプログラム
KR102241837B1 (ko) 2013-02-13 2021-04-19 쓰리세이프 에이/에스 컬러를 기록하는 포커스 스캐닝 장치
CN103179407B (zh) * 2013-03-11 2015-03-11 浙江大学 应用于去马赛克算法方向插值的实现装置及方法
WO2014188950A1 (ja) * 2013-05-23 2014-11-27 富士フイルム株式会社 画素補間装置およびその動作制御方法
US9042643B2 (en) * 2013-06-20 2015-05-26 Himax Imaging Limited Method for demosaicking
JP6276580B2 (ja) * 2013-12-20 2018-02-07 株式会社メガチップス 画素補間処理装置、撮像装置、プログラムおよび集積回路
JP2015162706A (ja) 2014-02-26 2015-09-07 ソニー株式会社 画像処理装置および方法、並びにプログラム
KR102134636B1 (ko) 2014-07-14 2020-07-16 삼성전자주식회사 이미지 센서의 단위 픽셀 및 이를 포함하는 이미지 센서
KR102282457B1 (ko) * 2014-12-05 2021-07-28 한화테크윈 주식회사 컬러 모아레 저감 방법, 컬러 모아레 저감 장치 및 영상 처리 장치
TWI585726B (zh) * 2015-03-25 2017-06-01 鴻海精密工業股份有限公司 畫素結構
US10412356B2 (en) * 2015-03-26 2019-09-10 Sony Corporation Image processing apparatus and image processing method
CN106454286A (zh) * 2016-09-29 2017-02-22 杭州雄迈集成电路技术有限公司 一种g模式色彩滤波阵列
CN106507066B (zh) * 2016-11-22 2018-04-17 深圳开阳电子股份有限公司 抑制图像伪彩色的方法、装置
KR20210130972A (ko) * 2020-04-23 2021-11-02 삼성전자주식회사 전자 장치의 컬러 필터, 및 그 전자 장치
FR3120989B1 (fr) * 2021-03-16 2024-03-08 Commissariat Energie Atomique Motif couleur et proche-infrarouge pour capteur d’images

Family Cites Families (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS60263592A (ja) * 1984-06-11 1985-12-27 Toshiba Corp 固体撮像装置
JP2739586B2 (ja) 1989-02-10 1998-04-15 富士写真フイルム株式会社 カラー固体撮像デバイス
WO1992013423A1 (en) * 1991-01-25 1992-08-06 Eastman Kodak Company A solid state color image sensor using a field-staggered color filter pattern
JP3268891B2 (ja) * 1992-08-14 2002-03-25 オリンパス光学工業株式会社 内視鏡撮像装置
JPH0823543A (ja) 1994-07-07 1996-01-23 Canon Inc 撮像装置
JPH0823542A (ja) 1994-07-11 1996-01-23 Canon Inc 撮像装置
JP3935548B2 (ja) * 1997-02-27 2007-06-27 オリンパス株式会社 画像信号処理装置
EP0930789B1 (en) 1998-01-20 2005-03-23 Hewlett-Packard Company, A Delaware Corporation Colour image pickup device
WO2000016261A1 (en) * 1998-09-15 2000-03-23 Phase One A/S A method and a system for processing images
US6396873B1 (en) 1999-02-25 2002-05-28 Envision Advanced Medical Systems Optical device
JP4098438B2 (ja) 1999-04-15 2008-06-11 オリンパス株式会社 カラー撮像素子及びカラー撮像装置
JP4487351B2 (ja) * 1999-07-15 2010-06-23 ソニー株式会社 固体撮像素子およびその駆動方法並びにカメラシステム
JP4043197B2 (ja) * 2000-03-24 2008-02-06 三洋電機株式会社 単板式カラーカメラの色分離回路
EP1148735A1 (en) * 2000-04-20 2001-10-24 Koninklijke Philips Electronics N.V. Camera with color filter
EP1337115B1 (en) * 2000-09-07 2010-03-10 Nikon Corporation Image processor and colorimetric system converting method
JP4088959B2 (ja) 2001-01-09 2008-05-21 ソニー株式会社 画像処理装置および方法、並びに記録媒体
EP1395063A4 (en) * 2001-05-15 2008-06-04 Matsushita Electric Ind Co Ltd FIGURE APPARATUS AND SIGNAL PROCESSING METHOD THEREFOR
US7027091B1 (en) 2001-09-17 2006-04-11 Pixim, Inc. Detection of color filter array alignment in image sensors
US6970597B1 (en) 2001-12-05 2005-11-29 Pixim, Inc. Method of defining coefficients for use in interpolating pixel values
JP4451044B2 (ja) * 2002-02-21 2010-04-14 株式会社メガチップス 混成画素補間装置および混成画素補間方法
JP4019417B2 (ja) 2003-01-14 2007-12-12 ソニー株式会社 画像処理装置および方法、記録媒体、並びにプログラム
JP2004266369A (ja) 2003-02-21 2004-09-24 Sony Corp 固体撮像装置およびその駆動方法
JP4385282B2 (ja) 2003-10-31 2009-12-16 ソニー株式会社 画像処理装置および画像処理方法
JP4446818B2 (ja) * 2004-07-06 2010-04-07 株式会社メガチップス 画素補間方法
EP1650979A1 (en) 2004-10-21 2006-04-26 STMicroelectronics S.r.l. Method and system for demosaicing artifact removal
JP4253634B2 (ja) 2004-11-30 2009-04-15 富士フイルム株式会社 デジタルカメラ
JP4840740B2 (ja) * 2004-12-01 2011-12-21 株式会社メガチップス 画素補間方法および画像判定方法
JP5151075B2 (ja) 2005-06-21 2013-02-27 ソニー株式会社 画像処理装置及び画像処理方法、撮像装置、並びにコンピュータ・プログラム
US8139130B2 (en) * 2005-07-28 2012-03-20 Omnivision Technologies, Inc. Image sensor with improved light sensitivity
US7821553B2 (en) 2005-12-30 2010-10-26 International Business Machines Corporation Pixel array, imaging sensor including the pixel array and digital camera including the imaging sensor
US7755682B2 (en) 2006-03-29 2010-07-13 Ite Tech. Inc. Color interpolation method for Bayer filter array images
JP4662883B2 (ja) 2006-05-15 2011-03-30 富士フイルム株式会社 二次元カラー固体撮像素子
US7769230B2 (en) 2006-11-30 2010-08-03 Eastman Kodak Company Producing low resolution images
US7701496B2 (en) 2006-12-22 2010-04-20 Xerox Corporation Color filter pattern for color filter arrays including a demosaicking algorithm
US8199812B2 (en) * 2007-01-09 2012-06-12 Qualcomm Incorporated Adaptive upsampling for scalable video coding
JP5082528B2 (ja) 2007-03-23 2012-11-28 ソニー株式会社 固体撮像装置及び撮像装置
JP4946581B2 (ja) * 2007-04-05 2012-06-06 ソニー株式会社 画像処理装置
US7825965B2 (en) * 2007-09-07 2010-11-02 Seiko Epson Corporation Method and apparatus for interpolating missing colors in a color filter array
US7859580B2 (en) 2007-10-16 2010-12-28 Aptina Imaging Corporation Method and apparatus for anisotropic demosaicing of image data
RU2383967C2 (ru) 2008-04-10 2010-03-10 Общество с ограниченной ответственностью ООО "Юник Ай Сиз" Фотоприемная матрица цветного изображения
KR101588877B1 (ko) 2008-05-20 2016-01-26 펠리칸 이매징 코포레이션 이종 이미저를 구비한 모놀리식 카메라 어레이를 이용한 이미지의 캡처링 및 처리
US8004588B2 (en) 2008-08-27 2011-08-23 Seiko Epson Corporation Image processing procedure for receiving mosaic image data and calculating vertical and horizontal-direction color difference components for each pixel
US8164042B2 (en) 2008-11-06 2012-04-24 Visera Technologies Company Limited Color filter arrays and image sensors using the same
JP5149143B2 (ja) 2008-12-24 2013-02-20 シャープ株式会社 固体撮像素子およびその製造方法、電子情報機器
JP5574615B2 (ja) 2009-04-20 2014-08-20 キヤノン株式会社 画像処理装置、その制御方法、及びプログラム
US8203633B2 (en) 2009-05-27 2012-06-19 Omnivision Technologies, Inc. Four-channel color filter array pattern
JP5471117B2 (ja) * 2009-07-24 2014-04-16 ソニー株式会社 固体撮像装置とその製造方法並びにカメラ
JP5120441B2 (ja) 2009-11-26 2013-01-16 株式会社ニコン 画像処理装置
JP2010104019A (ja) 2009-12-17 2010-05-06 Mega Chips Corp 画素補間方法
BR112012026632A2 (pt) 2011-02-21 2016-07-12 Fujifilm Corp elemento de criação de imagem colorida
JP5054858B1 (ja) * 2011-02-28 2012-10-24 富士フイルム株式会社 カラー撮像装置

Similar Documents

Publication Publication Date Title
JP2013048410A5 (ja) カラー撮像装置及び画像処理方法
JP2013048409A5 (ja) カラー撮像装置及び画像処理方法
US9167183B2 (en) Imaging element and imaging apparatus employing phase difference detection pixels pairs
US9288454B2 (en) Color imaging apparatus having color imaging element
US8704922B2 (en) Mosaic image processing method
CN102884796B (zh) 彩色成像元件
US9262805B2 (en) Method and device for processing image in Bayer format
US9313466B2 (en) Color imaging element
JP2016219977A5 (ja)
TWI449027B (zh) 適應性畫素補償方法
JP2011250325A5 (ja)
US8743246B2 (en) Color imaging device
WO2013100034A9 (ja) カラー撮像素子
JP2020092431A5 (ja)
JP2009188822A5 (ja)
JP2013038654A5 (ja)
CN103002230A (zh) 适应性像素补偿方法
CN109816597A (zh) 去除图像GrGb噪声的方法和装置