JP2023075606A - 画像処理装置および撮像装置 - Google Patents

Abstract

【課題】回路規模の縮小化を図る画像処理装置及び撮像装置を提供する。【解決手段】撮像装置から撮像部を除いた画像処理部からなる装置である画像処理装置２００は、サイズが異なる複数の画像データのいずれかを時分割で選択する選択部と、選択部によって選択された画像データを選択順にノイズ除去するノイズ除去部２６０と、を有する。【選択図】図２

Description

本発明は、画像処理装置および撮像装置に関する。

従来、画像からノイズ除去するにあたり、画像に対して多重解像度変換処理を施して大きさの異なる複数の縮小画像を生成し、各縮小画像に対するノイズ抽出処理の結果に基づいて、元の画像からノイズを除去する技術がある。

特開２０００－２２４４２１号公報

第１開示技術の画像処理装置は、サイズが異なる複数の画像データのいずれかを時分割で選択する選択部と、前記選択部によって選択された画像データを選択順にノイズ除去するノイズ除去部と、を有する。

第２開示技術の画像処理装置は、入力画像データの１／２^２サイズから１／２^２ｎサイズ（ｎは１以上の整数）までの縮小画像データ群を生成する縮小部と、前記縮小部によって縮小された縮小画像データ群について、１／２^{２（ｎ－１）}サイズから１／２^２サイズまでの拡大画像データ群を生成する拡大部と、前記１／２^２ｎサイズの縮小画像データと、前記拡大部によって生成された１／２^{２（ｎ－１）}サイズから１／２^２サイズまでの拡大画像データ群と、の中から、時分割でいずれかの画像データを選択する選択部と、前記選択部によって選択された画像データを選択順にノイズ除去し、ノイズ除去した画像データのサイズが１／２^２サイズになるまで、前記ノイズ除去した画像データを前記拡大部に出力するノイズ除去部と、を有する。

第３開示技術の画像処理装置は、入力された画像データに基づいてサイズの異なる複数の画像データを生成する生成部と、前記生成部によって生成されたサイズの異なる複数の前記画像データのうち、異なるタイミングで選択された画像データを選択順にノイズ除去するノイズ除去部と、を有する。

図１は、撮像装置のハードウェア構成例を示すブロック図である。 図２は、画像処理装置のハードウェア構成例を示すブロック図である。 図３は、縮小部の構成例を示す説明図である。 図４は、１／１６^２解像処理の一例を示す説明図である。 図５は、１／８^２解像処理の一例を示す説明図である。 図６は、１／４^２解像処理の一例を示す説明図である。 図７は、１／２^２解像処理の一例を示す説明図である。 図８は、時分割ノイズ除去処理例１を示す説明図である。 図９は、時分割ノイズ除去処理例２を示す説明図である。 図１０は、時分割ノイズ除去処理例３を示す説明図である。 図１１は、時分割ノイズ除去処理例４を示す説明図である。 図１２は、時分割ノイズ除去処理例５を示す説明図である。 図１３は、時分割ノイズ除去処理例６を示す説明図である。 図１４は、時分割ノイズ除去処理例７を示す説明図である。

＜撮像装置のハードウェア構成例＞
図１は、撮像装置のハードウェア構成例を示すブロック図である。撮像装置１００は、静止画または動画撮影可能な装置であり、具体的には、たとえば、デジタルカメラ、デジタルビデオカメラ、スマートフォン、タブレット、パーソナルコンピュータ、ゲーム機である。図１では、撮像装置の一例としてデジタルカメラを例に挙げて説明する。

撮像装置１００は、プロセッサ１０１と、記憶デバイス１０２と、駆動部１０３と、光学系１０４と、撮像素子１０５と、ＡＦＥ（Ａｎａｌｏｇ Ｆｒｏｎｔ Ｅｎｄ）１０６と、ＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）１０７と、操作デバイス１０８と、センサ１０９と、表示デバイス１１０と、通信ＩＦ（Ｉｎｔｅｒｆａｃｅ）１１１と、バス１１２と、を有する。プロセッサ１０１、記憶デバイス１０２、駆動部１０３、ＬＳＩ１０７、操作デバイス１０８、センサ１０９、表示デバイス１１０、および通信ＩＦ１１１は、バス１１２に接続される。

プロセッサ１０１は、撮像装置１００を制御する。記憶デバイス１０２は、プロセッサ１０１の作業エリアとなる。また、記憶デバイス１０２は、各種プログラムやデータを記憶する非一時的なまたは一時的な記録媒体である。記憶デバイス１０２としては、たとえば、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、フラッシュメモリがある。記憶デバイス１０２は、撮像装置１００に複数実装されてもよく、そのうちの少なくとも１つは、撮像装置１００に対し着脱自在でもよい。

駆動部１０３は、光学系１０４を駆動制御する。駆動部１０３は、駆動回路１０３ａと駆動源１０３ｂとを有する。駆動回路１０３ａは、プロセッサ１０１からの指示により駆動源１０３ｂを制御する。駆動源１０３ｂは、たとえば、モータであり、駆動回路１０３ａの制御により、光学系１０４内のズーミングレンズ７４１ｂおよびフォーカシングレンズ７４１ｃを光軸方向に移動させたり、絞り７４２を開閉制御する。

光学系１０４は、光軸方向に配列された複数のレンズ（レンズ７４１ａ、ズーミングレンズ７４１ｂ、およびフォーカシングレンズ７４１ｃ）と、絞り７４２と、を含む。光学系１０４は、被写体光を集光し、撮像素子１０５に出射する。

撮像素子１０５は、光学系１０４からの被写体光を受光して電気信号に変換する。撮像素子１０５は、たとえば、ＸＹアドレス方式の固体撮像素子（たとえば、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ‐Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ））であってもよく、順次走査方式の固体撮像素子（たとえば、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ））であってもよい。

撮像素子１０５の受光面には、複数の受光素子（画素）がマトリクス状に配列されている。そして、撮像素子１０５の画素には、それぞれが異なる色成分の光を透過させる複数種類のカラーフィルタが所定の色配列（たとえば、ベイヤ配列）に従って配置される。そのため、撮像素子１０５の各画素は、カラーフィルタでの色分解によって各色成分に対応するアナログの電気信号を出力する。

ＡＦＥ１０６は、撮像素子１０５からのアナログの電気信号に対して信号処理を施すアナログフロントエンド回路である。ＡＦＥ１０６は、電気信号のゲイン調整、アナログ信号処理（相関二重サンプリング、黒レベル補正など）、Ａ／Ｄ変換処理、デジタル信号処理（欠陥画素補正など）を順次実行してＲＡＷ画像データを生成し、ＬＳＩ１０７に出力する。上述した駆動部１０３、光学系１０４、撮像素子１０５、およびＡＦＥ１０６は、撮像部７２０を構成する。

ＬＳＩ１０７は、ＡＦＥ１０６からのＲＡＷ画像データについて、色補間、ホワイトバランス調整、輪郭強調、ガンマ補正、階調変換などの画像処理や符号化処理、復号処理、圧縮伸張処理など、特定の処理を実行する集積回路である。ＬＳＩ１０７は、具体的には、たとえば、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）やＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）などのＰＬＤ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ）によって実現してもよい。

操作デバイス１０８は、コマンドやデータを入力する。操作デバイス１０８としては、たとえば、レリーズボタンを含む各種ボタン、スイッチ、ダイヤル、タッチパネルがある。センサは、情報を検出するデバイスであり、たとえば、ＡＦ（Ａｕｔｏｍａｔｉｃ Ｆｏｃｕｓ）センサ、ＡＥ（Ａｕｔｏｍａｔｉｃ Ｅｘｐｏｓｕｒｅ）センサ、ジャイロセンサ、加速度センサ、温度センサなどがある。表示デバイス１１０は、画像データや設定画面３００を表示する。表示デバイス１１０には、撮像装置１００の背面にある背面モニタと、電子ビューファインダと、がある。通信ＩＦ１１１は、ネットワークと接続し、データを送受信する。

なお、プロセッサ１０１、記憶デバイス１０２、ＬＳＩ１０７、操作デバイス１０８、センサ１０９、表示デバイス１１０、通信ＩＦ１１１、およびバス１１２を、画像処理部１３０と称す。また、撮像装置１００から撮像部１２０を除いた画像処理部１３０からなる装置を、画像処理装置と称す。

＜画像処理装置のハードウェア構成例＞
図２は、画像処理装置のハードウェア構成例を示すブロック図である。画像処理装置２００は、たとえば、多重解像度解析を実行する。画像処理装置２００は、縮小部２１０と、第１選択部２２０と、変更部２３０と、拡大部２４０と、第２選択部２５０と、ノイズ除去部２６０と、第３選択部２７０と、を有する。

縮小部２１０は、入力画像データから、入力画像データのサイズ（解像度ともいう）よりも小さく、かつ、各々サイズが異なる複数の縮小画像データを生成する回路である。すなわち、縮小部２１０は、入力画像データに基づいてサイズの異なる複数の画像データを生成する生成部として機能する回路である。具体的には、たとえば、縮小部２１０は、入力画像データの１／２^２サイズから１／２^２ｎサイズ（ｎは１以上の整数）までの縮小画像データ群を生成する。図２は、ｎ＝４の例である。ｎ＝４の場合、縮小部２１０は、１／２^２サイズ、１／４^２サイズ、１／８^２サイズ、および１／１６^２サイズの縮小画像データを生成する。

第１選択部２２０は、１／２^２サイズから１／２^{２（ｎ－１）}サイズまでの縮小画像データ群を保持し、いずれかのサイズの縮小画像データを選択して、変更部２３０に出力する回路である。具体的には、たとえば、第１選択部２２０は、縮小画像データの保持順に選択して、変更部２３０に出力する。

第１選択部２２０は、１／２^２サイズから１／２^{２（ｎ－１）}サイズ（ｎは１以上の整数）までの縮小画像データ群の各々を保持する（ｎ－１）個のラインバッファを有する。図２は、ｎ＝４の例であるため、第１選択部２２０は、１／２^２縮小バッファ２２１、１／４^２縮小バッファ２２２、および１／８^２縮小バッファ２２３を有する。

たとえば、１／２^２縮小バッファ２２１は、１／２^２サイズの縮小画像データの１行分を保持し、１／４^２縮小バッファ２２２は、１／４^２サイズの縮小画像データの１行分を保持し、１／８^２縮小バッファ２２３は、１／８^２サイズの縮小画像データの１行分を保持する。なお、各縮小バッファ２２１～２２３が保持する行は、１行分に限らず複数行分でもよい。

変更部２３０は、第３選択部２７０から選択されたノイズ除去画像データのサイズが特定のサイズである場合に、第１選択部２２０から選択された縮小画像データと第３選択部２７０から選択されたノイズ除去画像データとの拡大部２４０への出力タイミングを変更する回路である。具体的には、変更部２３０は、拡大部２４０からのサイズが異なる複数の拡大画像データの第２選択部２５０による選択タイミングが異なるように、拡大部２４０への出力タイミングを変更する。

たとえば、変更部２３０は、１／２^{２（ｎ－ｍ）}サイズの拡大画像データをノイズ除去部２６０によってノイズ除去した１／２^{２（ｎ－ｍ）}サイズ（ｍは、ｎ＜２ｍ－１を満たす１以上の整数）のノイズ除去画像データの拡大部２４０への出力を、入力画像データの（ｎ－（２ｍ－１））行分遅延するように制御する。

具体的には、たとえば、１／２^{２（ｎ－１）}サイズの拡大画像データであれば、変更部２３０は、１／２^{２（ｎ－１）}サイズのノイズ除去画像データの拡大部２４０への出力を、入力画像データの（ｎ－１）行分遅延するように制御する（ｍ＝１）。ｎ＝４であれば、変更部２３０は、１／８^２サイズのノイズ除去画像データの拡大部２４０への出力を、入力画像データの３行分遅延させる。

また、１／２^{２（ｎ－２）}サイズの拡大画像データであれば、変更部２３０は、１／２^{２（ｎ－１）}サイズのノイズ除去画像データの拡大部２４０への出力を、入力画像データの（ｎ－３）行分遅延するように制御する（ｍ＝２）。ｎ＝４であれば、変更部２３０は、１／４^２サイズのノイズ除去画像データの拡大部２４０への出力を、入力画像データの１行分遅延させる。

また、１／２^{２（ｎ－３）}サイズの拡大画像データであれば、変更部２３０は、１／２^{２（ｎ－３）}サイズのノイズ除去画像データの拡大部２４０への出力を、入力画像データの（ｎ－５）行分遅延するように制御する（ｍ＝３）。ｎ＝４であれば、ｍは、ｎ＜２ｍ－１を充足しないため、変更部２３０は、１／２^２サイズのノイズ除去画像データの拡大部２４０への出力タイミングを変更せずに拡大部２４０に出力する。

このように、第２選択部２５０は、拡大部２４０からの拡大画像データ群を時分割で選択可能になる。したがって、ノイズ除去部２６０は、サイズが異なる画像データの各ノイズ除去を、異なるタイミングで実行することができる。

なお、変更部２３０は、第３選択部２７０から選択されたノイズ除去画像データのサイズが特定のサイズでない場合、第１選択部２２０から選択された縮小画像データと第３選択部２７０から選択されたノイズ除去画像データとの拡大部２４０への出力タイミングを変更せずに拡大部２４０に出力する。

拡大部２４０は、変更部２３０からの第１選択部２２０から選択された縮小画像データと第３選択部２７０から選択されたノイズ除去画像データとを用いて、第３選択部２７０から選択されたノイズ除去画像データのサイズを拡大し、拡大画像データを生成して、第２選択部２５０に出力する回路である。具体的には、たとえば、拡大部２４０は、縮小部２１０によって縮小された縮小画像データ群について、１／２^{２（ｎ－１）}サイズから１／２^２サイズまでの拡大画像データ群を生成する。

第２選択部２５０は、サイズが異なる複数の画像データのいずれかを時分割で選択する回路である。具体的には、第２選択部２５０は、第１サイズの画像データを選択してノイズ除去部２６０に出力してから第１サイズの他の画像データを選択してノイズ除去部２６０に出力するまでの間に、第１サイズとは異なる第２サイズの画像データを選択してノイズ除去部２６０に出力する。

たとえば、第２選択部２５０は、縮小部２１０からの１／２^２ｎサイズの縮小画像データを保持するラインバッファと、拡大部２４０によって生成された１／２^{２（ｎ－１）}サイズから１／２^２サイズまでの拡大画像データ群の各々を保持するラインバッファと、を有する。

図２は、ｎ＝４の例であるため、第２選択部２５０は、１／１６^２縮小バッファ２５１、１／８^２拡大バッファ２５２、１／４^２拡大バッファ２５３および１／２^２拡大バッファ２５４を有する。１／１６^２縮小バッファ２５１は、縮小部２１０からの１／２^２ｎサイズの縮小画像データの一行分を保持し、１／８^２拡大バッファ２５２は、１／８^２拡大画像データの一行分を保持し、１／４^２拡大バッファ２５３は、１／４^２拡大画像データの一行分を保持し、１／２^２拡大バッファ２５４は、１／２^２拡大画像データの一行分を保持する。

ノイズ除去部２６０は、第２選択部２５０によって選択された画像データを選択順にノイズ除去する回路である。具体的には、たとえば、ノイズ除去部２６０は、Ｋ×Ｋのフィルタ（Ｋは２以上の整数）を用いて、第２選択部２５０によって選択された画像データに含まれるノイズを除去して、ノイズ除去画像データを生成する。

たとえば、Ｋ＝５の場合、ノイズ除去部２６０は、連続する３行分の画像データが第２選択部２５０のバッファに蓄積されると、不足する２行分の画像データを、連続する３行分の画像データからミラーリングして補完し、Ｋ×Ｋのフィルタを用いてフィルタ処理を実行する。

また、連続する４行分の画像データが第２選択部２５０のバッファに蓄積されると、不足する１行分の画像データを、連続する４行分の画像データからミラーリングして補完し、Ｋ×Ｋのフィルタを用いてフィルタ処理を実行する。連続する５行分の画像データが第２選択部２５０のバッファに蓄積されると、Ｋ×Ｋのフィルタを用いてフィルタ処理を実行する。

ノイズ除去部２６０は、ノイズ除去画像データのサイズが１／２^２サイズになるまで、ノイズ除去した画像データを第３選択部２７０に出力する。

すなわち、ノイズ除去部２６０は、１／２^２サイズのノイズ除去画像データを画像処理装置２００内または画像処理装置２００外の回路（以下、出力先回路）に出力する。出力先回路は、入力画像データを用いて１／２^２サイズのノイズ除去画像データを拡大して、入力画像データと同サイズの画像データを生成する。そして、当該出力先回路は、生成した画像データと入力画像データとに基づいて、ノイズ除去画像データを生成する。

＜縮小部２１０の構成例＞
つぎに、縮小部２１０の構成例について説明する。縮小部２１０は、ｎ個の入力バッファと、ｎ個の縮小処理部（１／２^２縮小処理部～１／２^２ｎ縮小処理部）と、を有する。すなわち、ｉ番目（１≦ｉ≦ｎ）の入力バッファは、１／２^{２（ｉ－１）}縮小処理部の行方向画像データを順次保持して、１／２^２ｉ縮小処理部３２２からの読出しにより１／２^２ｉ縮小処理部に出力する。以下、ｎ＝４を例に挙げて図３で説明する。

図３は、縮小部２１０の構成例を示す説明図である。縮小部２１０は、入力画像データ３００の行方向画像データを、先頭行（０行目）から行番号の昇順に行単位で取得して、１／２^２サイズの縮小画像データ３０２、１／４^２サイズの縮小画像データ３０４、１／８^２サイズの縮小画像データ３０８、および１／１６^２サイズの縮小画像データ３１６を生成する。

具体的には、たとえば、縮小部２１０は、縮小部２１０は、第１入力バッファ３１１と、第２入力バッファ３１２と、第３入力バッファ３１３と、第４入力バッファ３１４と、１／２^２縮小処理部３２１と、１／４^２縮小処理部３２２と、１／８^２縮小処理部３２３と、１／１６^２縮小処理部３２４と、を有する。

第１入力バッファ３１１は、入力画像データ３００の行方向画像データを順次保持して、１／２^２縮小処理部３２１からの読出しにより１／２^２縮小処理部３２１に出力する。

第２入力バッファ３１２は、１／２^２縮小処理部３２１の行方向画像データを順次保持して、１／４^２縮小処理部３２２からの読出しにより１／４^２縮小処理部３２２に出力する。

第３入力バッファ３１３は、１／４^２縮小処理部３２２の行方向画像データを順次保持して、１／８^２縮小処理部３２３からの読出しにより１／８^２縮小処理部３２３に出力する。

第４入力バッファ３１４は、１／８^２縮小処理部３２３の行方向画像データを順次保持して、１／１６^２縮小処理部３２４からの読出しにより１／１６^２縮小処理部３２３に出力する。

１／２^２縮小処理部３２１は、第１入力バッファ３１１から、入力画像データ３００の連続する２行分の行方向画像データを読み出し、１／２^２縮小画像データ３０２の１行分の行方向画像データを生成する。具体的には、たとえば、１／２^２縮小処理部３２１は、入力画像データ３００の連続する２行分の行方向画像データにおける２行２列の画素群の画素値の平均値を、１／２^２縮小画像データ３０２の１行分の行方向画像データの１画素の値として生成する。

１／２^２縮小処理部３２１は、生成した１／２^２縮小画像データ３０２の１行分の行方向画像データを、第２入力バッファ３１２および第１選択部２２０の１／２^２縮小バッファ２２１に書き込む。

１／４^２縮小処理部３２２は、第２入力バッファ３１２から、１／２^２縮小画像データ３０２の連続する２行分の行方向画像データを読み出し、１／４^２縮小画像データ３０４の１行分の行方向画像データを生成する。具体的には、たとえば、１／４^２縮小処理部３２２は、１／２^２縮小画像データ３０２の連続する２行分の行方向画像データにおける２行２列の画素群（入力画像データ３００の４行４列の画素群に対応）の画素値の平均値を、１／４^２縮小画像データ３０４の１行分の行方向画像データの１画素の値として生成する。

１／４^２縮小処理部３２２は、生成した１／４^２縮小画像データ３０４の１行分の行方向画像データを、第３入力バッファ３１３および第１選択部２２０の１／４^２縮小バッファ２２２に書き込む。

１／８^２縮小処理部３２３は、第３入力バッファ３１３から、１／４^２縮小画像データ３０４の連続する２行分の行方向画像データを読み出し、１／８^２縮小画像データ３０８の１行分の行方向画像データを生成する。具体的には、たとえば、１／８^２縮小処理部３２３は、１／４^２縮小画像データ３０４の連続する２行分の行方向画像データにおける２行２列の画素群（入力画像データ３００の８行８列の画素群に対応）の画素値の平均値を、１／８^２縮小画像データ３０８の１行分の行方向画像データの１画素の値として生成する。

１／８^２縮小処理部３２３は、生成した１／８^２縮小画像データ３０８の１行分の行方向画像データを、第３入力バッファ３１３および第１選択部２２０の１／８^２縮小バッファ２２３に書き込む。

１／１６^２縮小処理部３２４は、第４入力バッファ３１４から、１／８^２縮小画像データ３０８の連続する２行分の行方向画像データを読み出し、１／１６^２縮小画像データ３１６の１行分の行方向画像データを生成する。具体的には、たとえば、１／１６^２縮小処理部３２４は、１／８^２縮小画像データ３０８の連続する２行分の行方向画像データにおける２行２列の画素群（入力画像データ３００の１６行１６列の画素群に対応）の画素値の平均値を、１／１６^２縮小画像データ３１６の１行分の行方向画像データの１画素の値として生成する。

１／１６^２縮小処理部３２４は、生成した１／１６^２縮小画像データ３１６の１行分の行方向画像データを、第４入力バッファ３１４および第２選択部２５０の１／１６^２縮小バッファ２５１に書き込む。

＜１／１６^２解像処理＞
図４は、１／１６^２解像処理の一例を示す説明図である。縮小部２１０は、１／１６^２縮小処理部３２４により１／１６^２縮小画像データ３１６の１行分の行方向画像データを生成し、第２選択部２５０の１／１６^２縮小バッファ２５１に書き込む（ステップＳ４０１）。

縮小部２１０は、１／８^２縮小処理部３２３により１／１８^２縮小画像データ３０８の１行分の行方向画像データを生成し、第１選択部２２０の１／８^２縮小バッファ２２３に書き込む（ステップＳ４０２）。

第２選択部２５０は、１／１６^２縮小バッファ２５１を選択し、１／１６^２縮小画像データ３１６の行方向画像データをノイズ除去部２６０に出力する（ステップＳ４０３）。

ノイズ除去部２６０は、１／１６^２縮小画像データ３１６のＫ行分の行方向画像データのノイズ除去処理を実行して、ノイズ除去処理結果である１／１６^２ＮＲ画像データ４１６を第３選択部２７０の１／１６^２ＮＲバッファ２７１に書き込む（ステップＳ４０４）。このようにして、１／１６^２解像処理により、１／１６^２ＮＲ画像データ４１６が生成される。

＜１／８^２解像処理＞
図５は、１／８^２解像処理の一例を示す説明図である。縮小部２１０は、１／４^２縮小処理部３２２により１／４^２縮小画像データ３０４の１行分の行方向画像データを生成し、第１選択部２２０の１／４^２縮小バッファ２２２に書き込む（ステップＳ５０１）。

第１選択部２２０は、１／８^２縮小バッファ２２３を選択し、１／８^２縮小画像データ３０８の行方向画像データを変更部２３０に出力する（ステップＳ５０２）。

第３選択部２７０は、１／１６^２ＮＲバッファ２７１を選択し、１／１６^２ＮＲ画像データ４１６の行方向画像データを変更部２３０に出力する（ステップＳ５０３）。

変更部２３０は、１／８^２縮小画像データ３０８の行方向画像データおよび１／１６^２ＮＲ画像データ４１６の行方向画像データの出力タイミングを変更して、拡大部２４０に出力する（ステップＳ５０４）。具体的には、たとえば、変更部２３０は、入力画像データ３００の３行分遅延させて拡大部２４０に出力する。

拡大部２４０は、１／８^２縮小画像データ３０８の行方向画像データを用いて、１／１６^２ＮＲ画像データ４１６の行方向画像データのサイズを１／８^２に拡大して、１／８^２拡大画像データ５０８の行方向画像データを生成し、第２選択部２５０の１／８^２拡大バッファ２５２に書き込む（ステップＳ５０５）。

第２選択部２５０は、１／８^２拡大バッファ２５２を選択し、１／８^２縮小画像データ３０８の行方向画像データをノイズ除去部２６０に出力する（ステップＳ５０６）。

ノイズ除去部２６０は、１／８^２拡大画像データ５０８のＫ行分の行方向画像データのノイズ除去処理を実行して、ノイズ除去処理結果である１／８^２ＮＲ画像データ４０８の１行分の行方向画像データを第３選択部２７０の１／８^２ＮＲバッファ２７２に書き込む（ステップＳ５０７）。このようにして、１／８^２解像処理により、１／８^２ＮＲ画像データ４０８が生成される。

＜１／４^２解像処理＞
図６は、１／４^２解像処理の一例を示す説明図である。縮小部２１０は、１／２^２縮小処理部３２１により１／２^２縮小画像データ３０２の１行分の行方向画像データを生成し、第１選択部２２０の１／２^２縮小バッファ２２１に書き込む（ステップＳ６０１）。

第１選択部２２０は、１／４^２縮小バッファ２２２を選択し、１／４^２縮小画像データ３０４の行方向画像データを変更部２３０に出力する（ステップＳ６０２）。

第３選択部２７０は、１／８^２ＮＲバッファ２７２を選択し、１／８^２ＮＲ画像データ４０８の行方向画像データを変更部２３０に出力する（ステップＳ６０３）。

変更部２３０は、１／４^２縮小画像データ３０４の行方向画像データおよび１／８^２ＮＲ画像データ４０８の行方向画像データの出力タイミングを変更して、拡大部２４０に出力する（ステップＳ６０４）。具体的には、たとえば、変更部２３０は、入力画像データ３００の１行分遅延させて拡大部２４０に出力する。

拡大部２４０は、１／４^２縮小画像データ３０４の行方向画像データを用いて、１／８^２ＮＲ画像データ４０８の行方向画像データのサイズを１／４^２に拡大して、１／４^２拡大画像データ５０４の行方向画像データを生成し、第２選択部２５０の１／４^２拡大バッファ２５３に書き込む（ステップＳ６０５）。

第２選択部２５０は、１／４^２拡大バッファ２５３を選択し、１／４^２縮小画像データ３０４の行方向画像データをノイズ除去部２６０に出力する（ステップＳ６０６）。

ノイズ除去部２６０は、１／４^２拡大画像データ５０４のＫ行分の行方向画像データのノイズ除去処理を実行して、ノイズ除去処理結果である１／４^２ＮＲ画像データ４０４の１行分の行方向画像データを第３選択部２７０の１／４^２ＮＲバッファ２７３に書き込む（ステップＳ６０７）。このようにして、１／４^２解像処理により、１／４^２ＮＲ画像データ４０４が生成される。

＜１／２^２解像処理＞
図７は、１／２^２解像処理の一例を示す説明図である。第１選択部２２０は、１／２^２縮小バッファ２２１を選択し、１／２^２縮小画像データ３０２の行方向画像データを変更部２３０に出力する（ステップＳ７０１）。

第３選択部２７０は、１／４^２ＮＲバッファ２７３を選択し、１／４^２ＮＲ画像データ４０４の行方向画像データを変更部２３０に出力する（ステップＳ７０２）。

変更部２３０は、１／２^２縮小画像データ３０２の行方向画像データおよび１／４^２ＮＲ画像データ４０４を、タイミング変更せずに拡大部２４０に出力する（ステップＳ７０３）。

拡大部２４０は、１／２^２縮小画像データ３０２の行方向画像データを用いて、１／４^２ＮＲ画像データ４０４の行方向画像データのサイズを１／２^２に拡大して、１／２^２拡大画像データ５０２の行方向画像データを生成し、第２選択部２５０の１／２^２拡大バッファ２５４に書き込む（ステップＳ７０４）。

第２選択部２５０は、１／２^２拡大バッファ２５４を選択し、１／２^２拡大画像データ５０２の行方向画像データをノイズ除去部２６０に出力する（ステップＳ７０５）。

ノイズ除去部２６０は、１／２^２拡大画像データ５０２のＫ行分の行方向画像データのノイズ除去処理を実行して、ノイズ除去処理結果である１／２^２ＮＲ画像データ４０２の１行分の行方向画像データを出力する（ステップＳ７０６）。このようにして、１／２^２解像処理により、１／２^２ＮＲ画像データ４０２が生成される。

＜時分割ノイズ除去処理＞
つぎに、図４～図７に示した１／１６^２解像処理、１／８^２解像処理、１／４^２解像処理および１／２^２解像処理における時分割ノイズ除去処理について、図８～図１４を用いて説明する。

図８～図１４は、時分割ノイズ除去処理例を示す説明図である。図８～図１４において、各列のセル内の数値は、当該列が示す画像データの行番号である。たとえば、入力画像データ３００の列の行番号０は、入力画像データ３００の０行目の行方向画像データを示す。

また、同一行に行番号がある場合は、同一タイミングで処理（入力画像データ３００の列であれば縮小部２１０への書き込み、縮小画像データ３０２，３０４，３０８，３１６の列であれば縮小部２１０による縮小処理、ＮＲ画像データ４０２，４０４，４０８，４１６の列であればノイズ除去部２６０によるノイズ除去処理、拡大画像データ５０２，５０４，５０８の列であれば拡大部２４０による拡大処理）されていることを示す。

画像処理装置２００は、入力画像データ３００の行番号の昇順で、当該行番号の行方向画像データを読み込む。図８では、入力画像データ３００の行番号０～１５までの行方向画像データ群が行番号の昇順に読み込まれた場合に、１／２^２縮小画像データ３０２の０行目から７行目までの行方向画像データ群が生成され、１／４^２縮小画像データ３０４の０行目から３行目までの行方向画像データ群が生成され、１／８^２縮小画像データ３０８の０行目から１行目までの行方向画像データ群が生成され、１／１６^２縮小画像データ３１６の０行目の行方向画像データが生成されたことを示している。

具体的には、たとえば、１／２^２縮小画像データ３０２の０行目の行方向画像データは、入力画像データ３００の０行目および１行目の行方向画像データにより生成されることを示す。以降同様に、１／２^２縮小画像データ３０２の１行目～４９行目の行方向画像データ（図１４）の各々は、入力画像データ３００の同一行および１つ前の行の２つの行の行方向画像データにより生成される。

また、１／４^２縮小画像データ３０４の０行目の行方向画像データは、１／２^２縮小画像データ３０２の０行目および１行目の行方向画像データにより生成されることを示す。以降同様に、１／４^２縮小画像データ３０４の１行目～２４行目の行方向画像データ（図１４）の各々は、１／２^２縮小画像データ３０２の同一行および１つ前の行の２つの行の行方向画像データにより生成される。

また、１／８^２縮小画像データ３０８の０行目の行方向画像データは、１／４^２縮小画像データ３０４の０行目および１行目の行方向画像データにより生成されることを示す。以降同様に、１／８^２縮小画像データ３０８の１行目～１２行目の行方向画像データ（図１４）の各々は、１／４^２縮小画像データ３０４の同一行および１つ前の行の２つの行の行方向画像データにより生成される。

また、１／１６^２縮小画像データ３１６の０行目の行方向画像データは、１／８^２縮小画像データ３０８の０行目および１行目の行方向画像データにより生成されることを示す。以降同様に、１／１６^２縮小画像データ３１６の１行目～６行目の行方向画像データ（図１４）の各々は、１／８^２縮小画像データ３０８の同一行および１つ前の行の２つの行の行方向画像データにより生成される。

図１０～図１２において、ノイズ除去部２６０は、ノイズ除去処理によりノイズ除去画像データを生成する。たとえば、図１０において、１／１６^２縮小画像データ３１６が３行分（０行目（図８）、１行目（図９）、２行目）生成されると、ノイズ除去部２６０は、１行目および２行目の行方向画像データをミラーリングして、１／１６^２縮小画像データ３１６の５行分の行方向画像データ群にする。ノイズ除去部２６０は、１／１６^２縮小画像データ３１６の５行分の行方向画像データ群を、５×５のフィルタでフィルタ処理することにより、１／１６^２ＮＲ画像データ４１６の０行目の行方向画像データを生成する。

同様に、図１１において、１／１６^２縮小画像データ３１６が４行分（０行目（図８）、１行目（図９）、２行目（図１０）、３行目）生成されると、ノイズ除去部２６０は、３行目の行方向画像データをミラーリングして、１／１６^２縮小画像データ３１６の５行分の行方向画像データ群にする。ノイズ除去部２６０は、１／１６^２縮小画像データ３１６の５行分の行方向画像データ群を、５×５のフィルタでフィルタ処理することにより、１／１６^２ＮＲ画像データ４１６の１行目の行方向画像データを生成する。

また、図１２において、１／１６^２縮小画像データ３１６が５行分（０行目（図８）、１行目（図９）、２行目（図１０）、３行目（図１１）、４行目）生成されると、ノイズ除去部２６０は、１／１６^２縮小画像データ３１６の５行分の行方向画像データ群を、５×５のフィルタでフィルタ処理することにより、１／１６^２ＮＲ画像データ４１６の２行目の行方向画像データを生成する。以下同様にして、図１３および図１４においてもそれぞれ、１／１６^２ＮＲ画像データ４１６の３行目および４行目の行方向画像データが生成される。

また、１／１６^２ＮＲ画像データ４１６が生成されると、拡大部２４０は、変更部２３０によって入力画像データ３００の３行分遅延して、１／８^２拡大画像データ５０８を生成する。

具体的には、たとえば、図１０において１／１６^２ＮＲ画像データ４１６の０行目の行方向画像データが生成されると、拡大部２４０は、図１１に示すように変更部２３０によって入力画像データ３００の３行分遅延して、１／８^２拡大画像データ５０８の０行目の行方向画像データを生成する。

同様に、図１１において１／１６^２ＮＲ画像データ４１６の１行目の行方向画像データが生成されると、拡大部２４０は、図１２に示すように変更部２３０によって入力画像データ３００の３行分遅延して、１／８^２拡大画像データ５０８の２行目の行方向画像データを生成する。

同様に、図１２において１／１６^２ＮＲ画像データ４１６の２行目の行方向画像データが生成されると、拡大部２４０は、図１３に示すように変更部２３０によって入力画像データ３００の３行分遅延して、１／８^２拡大画像データ５０８の４行目の行方向画像データを生成する。

同様に、図１３において１／１６^２ＮＲ画像データ４１６の３行目の行方向画像データが生成されると、拡大部２４０は、図１４に示すように変更部２３０によって入力画像データ３００の３行分遅延して、１／８^２拡大画像データ５０８の６行目の行方向画像データを生成する。

なお、１／８^２拡大画像データ５０８の奇数行目の行方向画像データは、１／８^２拡大画像データ５０８の連続する偶数行の行方向画像データが生成される間で生成される。

また、図１２～図１４において、ノイズ除去部２６０は、ノイズ除去処理によりノイズ除去画像データを生成する。たとえば、図１２において、１／８^２拡大画像データ５０８が３行分（０行目（図１１）、１行目（図１１）、２行目）生成されると、ノイズ除去部２６０は、１行目および２行目の行方向画像データをミラーリングして、１／８^２拡大画像データ５０８の５行分の行方向画像データ群にする。ノイズ除去部２６０は、１／８^２拡大画像データ５０８の５行分の行方向画像データ群を、５×５のフィルタでフィルタ処理することにより、１／８^２ＮＲ画像データ４０８の０行目の行方向画像データを生成する。

同様に、図１２において、１／８^２拡大画像データ５０８が４行分（０行目（図１１）、１行目（図１１）、２行目、３行目）生成されると、ノイズ除去部２６０は、３行目の行方向画像データをミラーリングして、１／８^２拡大画像データ５０８の５行分の行方向画像データ群にする。ノイズ除去部２６０は、１／８^２拡大画像データ５０８の５行分の行方向画像データ群を、５×５のフィルタでフィルタ処理することにより、１／８^２ＮＲ画像データ４０８の１行目の行方向画像データを生成する。

同様に、図１３において、１／８^２拡大画像データ５０８が５行分（０行目（図１１）、１行目（図１１）、２行目（図１２）、３行目（図１２）、４行目）生成されると、ノイズ除去部２６０は、１／８^２拡大画像データ５０８の５行分の行方向画像データ群を、５×５のフィルタでフィルタ処理することにより、１／８^２ＮＲ画像データ４０８の２行目の行方向画像データを生成する。以下同様にして、図１３および図１４においてもそれぞれ、１／８^２ＮＲ画像データ４０８の３行目～５行目の行方向画像データが生成される。

また、１／８^２ＮＲ画像データ４０８が生成されると、拡大部２４０は、変更部２３０によって入力画像データ３００の１行分遅延して、１／４^２拡大画像データ５０４を生成する。

具体的には、たとえば、図１２において１／８^２ＮＲ画像データ４０８の０行目の行方向画像データが生成されると、拡大部２４０は、変更部２３０によって入力画像データ３００の１行分遅延して、１／４^２拡大画像データ５０４の０行目の行方向画像データを生成する。

同様に、図１２において１／８^２ＮＲ画像データ４０８の１行目の行方向画像データが生成されると、拡大部２４０は、変更部２３０によって入力画像データ３００の１行分遅延して、１／４^２拡大画像データ５０４の２行目の行方向画像データを生成する。

同様に、図１３において１／８^２ＮＲ画像データ４０８の２行目の行方向画像データが生成されると、拡大部２４０は、変更部２３０によって入力画像データ３００の１行分遅延して、１／４^２拡大画像データ５０４の４行目の行方向画像データを生成する。

同様に、図１３において１／８^２ＮＲ画像データ４０８の３行目の行方向画像データが生成されると、拡大部２４０は、変更部２３０によって入力画像データ３００の１行分遅延して、１／４^２拡大画像データ５０４の６行目の行方向画像データを生成する。

同様に、図１４において１／８^２ＮＲ画像データ４０８の４行目の行方向画像データが生成されると、拡大部２４０は、変更部２３０によって入力画像データ３００の１行分遅延して、１／４^２拡大画像データ５０４の８行目の行方向画像データを生成する。

同様に、図１４において１／８^２ＮＲ画像データ４０８の５行目の行方向画像データが生成されると、拡大部２４０は、変更部２３０によって入力画像データ３００の１行分遅延して、１／４^２拡大画像データ５０４の１０行目の行方向画像データを生成する。

なお、１／４^２拡大画像データ５０４の奇数行目の行方向画像データは、１／４^２拡大画像データ５０４の連続する偶数行の行方向画像データが生成される間で生成される。

また、図１２～図１４において、ノイズ除去部２６０は、ノイズ除去処理によりノイズ除去画像データを生成する。たとえば、図１２において、１／４^２拡大画像データ５０４が３行分（０行目、１行目、２行目）生成されると、ノイズ除去部２６０は、１行目および２行目の行方向画像データをミラーリングして、１／４^２拡大画像データ５０４の５行分の行方向画像データ群にする。ノイズ除去部２６０は、１／４^２拡大画像データ５０４の５行分の行方向画像データ群を、５×５のフィルタでフィルタ処理することにより、１／４^２ＮＲ画像データ４０４の０行目の行方向画像データを生成する。

同様に、図１３において、１／４^２拡大画像データ５０４が４行分（０行目（図１２）、１行目（図１２）、２行目（図１２）、３行目）生成されると、ノイズ除去部２６０は、３行目の行方向画像データをミラーリングして、１／４^２拡大画像データ５０４の５行分の行方向画像データ群にする。ノイズ除去部２６０は、１／４^２拡大画像データ５０４の５行分の行方向画像データ群を、５×５のフィルタでフィルタ処理することにより、１／４^２ＮＲ画像データ４０４の１行目の行方向画像データを生成する。

同様に、図１３において、１／４^２拡大画像データ５０４が５行分（０行目（図１２）、１行目（図１２）、２行目（図１２）、３行目、４行目）生成されると、ノイズ除去部２６０は、１／４^２拡大画像データ５０４の５行分の行方向画像データ群を、５×５のフィルタでフィルタ処理することにより、１／４^２ＮＲ画像データ４０４の２行目の行方向画像データを生成する。以下同様にして、図１３および図１４においてもそれぞれ、１／４^２ＮＲ画像データ４０４の３行目～８行目の行方向画像データが生成される。

また、１／４^２ＮＲ画像データ４０４が生成されると、拡大部２４０は、変更部２３０によるタイミング変更なしで、１／２^２拡大画像データ５０２を生成する。

具体的には、たとえば、図１２において１／４^２ＮＲ画像データ４０４の０行目の行方向画像データが生成されると、拡大部２４０は、１／２^２拡大画像データ５０２の０行目の行方向画像データを生成する。

同様に、図１３において１／４^２ＮＲ画像データ４０４の１行目の行方向画像データが生成されると、拡大部２４０は、１／２^２拡大画像データ５０２の２行目の行方向画像データを生成する。

同様に、図１３において１／４^２ＮＲ画像データ４０４の２行目の行方向画像データが生成されると、拡大部２４０は、１／２^２拡大画像データ５０２の４行目の行方向画像データを生成する。

同様に、図１３において１／４^２ＮＲ画像データ４０４の３行目の行方向画像データが生成されると、拡大部２４０は、１／２^２拡大画像データ５０２の６行目の行方向画像データを生成する。

同様に、図１３において１／４^２ＮＲ画像データ４０４の４行目の行方向画像データが生成されると、拡大部２４０は、１／２^２拡大画像データ５０２の８行目の行方向画像データを生成する。

同様に、図１４において１／４^２ＮＲ画像データ４０４の５行目の行方向画像データが生成されると、拡大部２４０は、１／２^２拡大画像データ５０２の１０行目の行方向画像データを生成する。

同様に、図１４において１／４^２ＮＲ画像データ４０４の６行目の行方向画像データが生成されると、拡大部２４０は、１／２^２拡大画像データ５０２の１２行目の行方向画像データを生成する。

同様に、図１４において１／４^２ＮＲ画像データ４０４の７行目の行方向画像データが生成されると、拡大部２４０は、１／２^２拡大画像データ５０２の１４行目の行方向画像データを生成する。

同様に、図１４において１／４^２ＮＲ画像データ４０４の８行目の行方向画像データが生成されると、拡大部２４０は、１／２^２拡大画像データ５０２の１６行目の行方向画像データを生成する。

なお、１／２^２拡大画像データ５０２の奇数行目の行方向画像データは、１／２^２拡大画像データ５０２の連続する偶数行の行方向画像データが生成される間で生成される。

また、図１３および図１４において、ノイズ除去部２６０は、ノイズ除去処理によりノイズ除去画像データを生成する。たとえば、図１３において、１／２^２拡大画像データ５０２が３行分（０行目（図１２）、１行目、２行目）生成されると、ノイズ除去部２６０は、１行目および２行目の行方向画像データをミラーリングして、１／２^２拡大画像データ５０２の５行分の行方向画像データ群にする。ノイズ除去部２６０は、１／２^２拡大画像データ５０２の５行分の行方向画像データ群を、５×５のフィルタでフィルタ処理することにより、１／２^２ＮＲ画像データ４０２の０行目の行方向画像データを生成する。

同様に、図１３において、１／２^２拡大画像データ５０２が４行分（０行目（図１２）、１行目、２行目、３行目）生成されると、ノイズ除去部２６０は、３行目の行方向画像データをミラーリングして、１／２^２拡大画像データ５０２の５行分の行方向画像データ群にする。ノイズ除去部２６０は、１／２^２拡大画像データ５０２の５行分の行方向画像データ群を、５×５のフィルタでフィルタ処理することにより、１／２^２ＮＲ画像データ４０２の１行目の行方向画像データを生成する。

同様に、図１３において、１／２^２拡大画像データ５０２が５行分（０行目（図１２）、１行目、２行目、３行目、４行目）生成されると、ノイズ除去部２６０は、１／２^２拡大画像データ５０２の５行分の行方向画像データ群を、５×５のフィルタでフィルタ処理することにより、１／２^２ＮＲ画像データ４０２の２行目の行方向画像データを生成する。以下同様にして、図１３および図１４においてもそれぞれ、１／２^２ＮＲ画像データ４０２の３行目～１４行目の行方向画像データが生成される。

図１１～図１４のノイズ除去処理を参照すると、入力画像データ３００の６３行目～１１１行目までにおいて、いずれのＮＲ画像データも同じ行で生成されない。このように、１つのノイズ除去部２６０が、サイズ（解像度）が異なる複数の画像データを時分割でノイズ除去処理することができる。

このように、画像処理装置２００は、複数の縮小処理部３２１～３２４の各々についてノイズ除去部２６０および拡大部２４０を設ける必要がなく、ノイズ除去部２６０および拡大部２４０を、複数の縮小処理部３２１～３２４で共用することができる。すなわち、複数の縮小処理部３２１～３２４の数（縮小画像データのサイズの種類数）よりもノイズ除去部２６０の数が少ない。したがって、画像処理装置２００の回路規模の縮小化および部品点数の削減によるコスト低減化を図ることができる。単純に第１サイズの画像データのノイズ除去を行って、第２サイズのノイズ除去を行う場合に比べて、処理時間の短縮化を図ることができる。

なお、本発明は上記の内容に限定されるものではなく、これらを任意に組み合わせたものであっても良い。また、本発明の技術的思想の範囲で考えられるその他の態様も本発明の範囲に含まれる。

１００ 撮像装置、２００ 画像処理装置、２１０ 縮小部、２２０ 第１選択部、２３０ 変更部、２４０ 拡大部、２５０ 第２選択部、２６０ ノイズ除去部、２７０ 第３選択部

Claims (10)

1. サイズが異なる複数の画像データのいずれかを時分割で選択する選択部と、
   前記選択部によって選択された画像データを選択順にノイズ除去するノイズ除去部と、
   を有する画像処理装置。
2. 請求項１に記載の画像データ処理装置であって、
   前記選択部は、第１サイズの画像データを選択して前記ノイズ除去部に出力してから前記第１サイズの他の画像データを選択して前記ノイズ除去部に出力するまでの間に、前記第１サイズとは異なる第２サイズの画像データを選択して前記ノイズ除去部に出力する、画像処理装置。
3. 請求項１に記載の画像処理装置であって、
   前記ノイズ除去部によってノイズ除去されたノイズ除去画像データを拡大して拡大画像データを生成し、前記選択部に出力する拡大部と、
   を有する画像処理装置。
4. 請求項３に記載の画像処理装置であって、
   入力画像データから、前記入力画像データのサイズよりも小さく、かつ、各々前記サイズが異なる複数の縮小画像データを生成する縮小部を有し、
   前記縮小部は、前記サイズが異なる複数の縮小画像データのうち最小サイズの縮小画像データを前記選択部に出力し、前記サイズが異なる複数の縮小画像データのうち最小サイズの縮小画像データ以外の他の縮小画像データを前記拡大部に出力する、画像処理装置。
5. 請求項３に記載の画像処理装置であって、
   前記ノイズ除去画像データのうち特定サイズのノイズ除去画像データの前記拡大部への出力タイミングを、前記サイズが異なる複数の拡大画像データの前記選択部による選択タイミングが異なるように、変更する変更部と、
   を有する画像処理装置。
6. 入力画像データの１／２^２サイズから１／２^２ｎサイズ（ｎは１以上の整数）までの縮小画像データ群を生成する縮小部と、
   前記縮小部によって縮小された縮小画像データ群について、１／２^{２（ｎ－１）}サイズから１／２^２サイズまでの拡大画像データ群を生成する拡大部と、
   前記１／２^２ｎサイズの縮小画像データと、前記拡大部によって生成された１／２^{２（ｎ－１）}サイズから１／２^２サイズまでの拡大画像データ群と、の中から、時分割でいずれかの画像データを選択する選択部と、
   前記選択部によって選択された画像データを選択順にノイズ除去し、ノイズ除去した画像データのサイズが１／２^２サイズになるまで、前記ノイズ除去した画像データを前記拡大部に出力するノイズ除去部と、
   を有する画像処理装置。
7. 請求項６に記載の画像処理装置であって、
   １／２^{２（ｎ－ｍ）}サイズの拡大画像データを前記ノイズ除去部によってノイズ除去した１／２^{２（ｎ－ｍ）}サイズ（ｍは、ｎ＜２ｍ－１を満たす１以上の整数）のノイズ除去画像データの前記拡大部への出力を、前記入力画像データの（ｎ－（２ｍ－１））行分遅延するように制御する変更部と、
   を有する画像処理装置。
8. 入力された画像データに基づいてサイズの異なる複数の画像データを生成する生成部と、
   前記生成部によって生成されたサイズの異なる複数の前記画像データのうち、異なるタイミングで選択された画像データを選択順にノイズ除去するノイズ除去部と、
   を有する画像処理装置。
9. 請求項１に記載の画像データ処理装置であって、
   前記ノイズ除去部は、選択された第１サイズの画像データをノイズ除去してから前記第１サイズの他の画像データを選択して前記ノイズ除去するまでの間に、前記第１サイズとは異なる、選択された第２サイズの画像データをノイズ除去する、画像処理装置。
10. 請求項１または９のいずれか一項に記載の画像処理装置を有する撮像装置。

Images