JP3494436B2 - 画像処理装置 - Google Patents

画像処理装置

Info

Publication number
JP3494436B2
JP3494436B2 JP2001130450A JP2001130450A JP3494436B2 JP 3494436 B2 JP3494436 B2 JP 3494436B2 JP 2001130450 A JP2001130450 A JP 2001130450A JP 2001130450 A JP2001130450 A JP 2001130450A JP 3494436 B2 JP3494436 B2 JP 3494436B2
Authority
JP
Japan
Prior art keywords
data
image processing
signal
processing unit
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2001130450A
Other languages
English (en)
Other versions
JP2002328880A (ja
Inventor
健介 高井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2001130450A priority Critical patent/JP3494436B2/ja
Publication of JP2002328880A publication Critical patent/JP2002328880A/ja
Application granted granted Critical
Publication of JP3494436B2 publication Critical patent/JP3494436B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Studio Devices (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Bus Control (AREA)

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、ディジタルスチル
カメラのように固体撮像装置等を用いた撮像部から出力
される画像データを所定の処理する画像処理モジュール
およびそれを用いた画像処理装置に関する。
【0002】
【従来の技術】ディジタルスチルカメラでは、固体撮像
装置であるCCDによって撮像された画像データが、画
像処理装置によって、ディジタルクランプ等の取込処
理、輝度データ、色差データ等のデータ生成処理、生成
された輝度データ、色差データ等に基づくJPEG圧縮
処理等が実施されて、外部メモリに記憶するようになっ
ている。
【0003】図9は、このような画像処理装置の一例を
示すブロック図である。この画像処理装置20は、画像
データを、それぞれ所定の処理するようになった複数の
画像処理モジュール25〜27を有している。なお、図
9に示す画像処理装置20では、3つの第1〜第3の画
像処理モジュール25〜27が示されているが、これら
の画像処理モジュール25〜27以外にも、特に図示し
ていないが、他の所定の処理を行う画像処理モジュール
が設けられている。
【0004】ここでは、CCDから取り込んだ画像デー
タを画像処理装置内に取り込む処理を行う第1の画像処
理モジュール25、第1の画像処理モジュール25によ
って取込処理されたCCDの画像データから、カラーフ
ィルタアレイのデータに基づいて、輝度データおよび色
差データを生成する信号処理を実施する第2の画像処理
装置26、第2の画像処理モジュール26によって生成
された輝度データおよび色差データをJPEG圧縮処理
する第3の画像処理モジュール27について説明する。
【0005】なお、これらの第1〜第3の画像処理モジ
ュール25〜27以外に、第2の画像処理モジュール2
6によって信号処理された画像データを、CRT、液晶
パネル等のディスプレイ用の表示データに信号処理する
画像処理モジュール、例えば、第3の画像処理モジュー
ル27によって信号処理されたJPEGデータ等を外部
と通信する通信モジュール等が設けられている。
【0006】第1〜第3の各画像処理モジュール25〜
27は、それぞれ、システムバス29を使用してのデー
タの入出力を要求するDMA(ダイレクトメモリアクセ
ス)要求信号を、DMAC(DMAコントローラ)モジ
ュール21に出力するようになっている。DMACモジ
ュール21には、追い越し禁止回路21aおよび優先順
位決定回路21bが設けられており、DMACモジュー
ル21は、各画像処理モジュール25〜27からのDM
A要求が競合する際に、競合制御部22に対してシステ
ムバス29の使用要求信号DMBREQを出力し、競合
制御部22からのシステムバス29の使用要求信号DM
GNTおよびDMGNTDに基づいて優先順位を設定す
る。
【0007】また、競合制御部22には、CPUおよび
インターフェース部を有するCPU&ifユニット23
からシステムバス29の使用要求信号CPBREQが入
力されており、競合制御部22は、その使用要求信号C
PBREQに対して、管理信号DMGNTおよびDMG
NTDを、CPU&ifユニット23に出力する。
【0008】優先順位の最も高い第1画像処理モジュー
ル25には、撮像部として設けられたCCDの出力が、
A/D変換されてディジタル化された状態で入力され
て、画像処理装置内に取込処理し、システムバス29を
介して、外部メモリ28に出力する。外部メモリ28に
対するデータの入出力は、外部メモリコントローラ24
によって制御されるようになっている。
【0009】第1画像処理モジュール25は、入力され
るCCDからのディジタルデータに対して、ディジタル
クランプ等の取込処理を実施する。第1画像処理モジュ
ール25によってデータが取込処理されると、そのデー
タを、システムバス29を使用して外部メモリ28に格
納する際に、DMA要求信号DREQO−AをDMAC
モジュール21に出力する。第1画像処理モジュール2
5は、DMACモジュール21からDMAアクナリッジ
信号DACKO−Aが与えられることによって、システ
ムバス29に取込処理されたデータを出力する。システ
ムバス29に出力された取込処理データは、外部メモリ
コントローラ24によって、外部メモリ28に格納され
る。
【0010】第2画像処理モジュール26は、外部メモ
リ28に格納された取込処理データを、システムバス2
9を使用して読み出す際に、DMA要求信号DREQI
−BをDMACモジュール21に出力する。そして、D
MAC21からのDMAアクナリッジ信号DACKI−
Bが与えられると、外部メモリ28に格納された取込処
理データを、システムバス29を介して入力する。
【0011】第2画像処理モジュール26は、入力され
る取込処理データを、カラーフィルタアレイのデータに
基づいて、輝度データおよび色差データを生成する信号
処理を実施する。そして、所定の信号処理されたデータ
をシステムバス29を介して外部メモリ28に出力する
際に、DMA要求信号DREQO−BをDMACモジュ
ール21に出力する。第2画像処理モジュール26は、
DMAC21からのDMAアクナリッジ信号DACKO
−Bが与えられると、所定の処理が実施されたデータを
システムバス29に出力し、システムバス29に出力さ
れたデータが、外部メモリコントローラ24によって、
外部メモリ28に格納される。
【0012】第2画像処理モジュール26では、このよ
うな処理以外に、ノイズ除去のためのフィルタ処理、補
間によって拡大または縮小処理した際の画質の低下を低
減するフィルタ処理等がある。これらのフィルタ処理
は、処理対象である画素の画像データのみならず、その
画素の周辺画素の画像データも含めて取り込む必要があ
る。このために、第2画像処理モジュール26において
は、画面全体を複数の矩形小領域(以下、ブロックと称
する)に分割して、分割されたブロック単位で画像デー
タが入出力される。
【0013】第3画像処理モジュール26は、外部メモ
リ28に格納された輝度データおよび色差データを読み
出す際に、DMA要求信号DREQI−CをDMACモ
ジュール21に出力して、DMACモジュール21から
DMAアクナリッジ信号DACKI−Cが与えられるこ
とによって、外部メモリ28に格納された輝度および色
差データを、システムバス29を介して入力する。
【0014】第3画像処理モジュール27は、入力され
る輝度データおよび色差データを、JPEG圧縮処理し
て、生成された圧縮データをシステムバス29に出力す
る際に、DMA要求信号DREQO−CをDMACモジ
ュール21に出力する。そして、DMACモジュール2
1からのDMAアクナリッジ信号DACKO−Cが与え
られることによって、システムバス29に圧縮データを
出力し、システムバス29に出力された圧縮データが、
外部メモリコントローラ24によって、外部メモリ28
に格納される。
【0015】このような構成の画像処理装置では、第1
〜第3の各画像処理モジュール25〜27に対するDM
A要求に対する優先順位は、CCDから出力されるディ
ジタルデータを確実に外部メモリ28に格納するため
に、第1の画像処理モジュール25の優先順位が最も高
く、以下、第2の画像処理モジュール26、第3の画像
処理モジュール27の順に設定されている。優先順位の
低い画像処理モジュールは、優先順位の高い画像処理モ
ジュールがシステムバス29を使用してデータの入出力
を実施していない期間に、DMACモジュール21から
出力されるDMAアクナリッジ信号によって、システム
バス29を使用してのデータの入出力が実施される。
【0016】特に、第1画像処理モジュール25は、C
CDから出力されるディジタルデータが順次転送される
ことから、転送されるデータを順次取り込んで、取り込
んだデータに対して所定の処理を、順次、実施する必要
があるために、処理が終了したデータは、速やかに外部
メモリ部29に出力する必要がある。このために、第1
画像処理モジュール25からのDMA要求に対しては、
システムバス29にデータを出力するまでの待ち時間を
最も短くする必要があり、しかも、第1画像処理モジュ
ール25から確実にデータを順次出力させる必要があ
る。従って、第1画像処理モジュール25のDMA要求
に対する優先順位が高く設定されている。
【0017】また、前述したように、画像処理装置20
には、第1〜第3の画像処理モジュール25〜27以外
にも、例えば、液晶パネル等のディスプレイに表示デー
タを順次転送する必要がある表示用画像処理モジュール
が設けられている。この表示用画像処理モジュールも、
第1画像処理モジュール25と同様に、順次、データを
処理する必要があるために、DMA要求が出されてから
システムバス29に表示データを出力するまでの待機時
間を短くするとともに、処理によって得られる表示デー
タを順次出力させる必要である。従って、この画像表示
モジュールも、DMA要求に対する優先順位が高く設定
される。
【0018】図10は、画像処理装置に使用される第1
〜第3の画像処理モジュールの構成を示すブロック図で
ある。第1〜第3の各画像処理モジュールは、同様の構
成になっており、全体制御部31と、全体制御部31に
よって、それぞれ制御される入力処理部32、信号処理
部33および出力制御部34とを有している。
【0019】全体制御部31は、DMACモジュール2
1に対して、データ入力を要求するDMAC要求信号D
REQIを出力し、DMACモジュール21からのDM
Aアクナリッジ信号DACKIが与えられることによ
り、システムバス29を介して、外部メモリ28に格納
されたデータが入力処理部32に入力される。入力処理
部32に入力されたデータは、バッファ(メモリ)32
aに格納され、そして、バッファ32a内に格納された
データが、全体制御部31からの信号によって、信号処
理部33に転送される。
【0020】信号処理部33は、転送されたデータに対
して所定の処理を実施する。転送されたデータの処理が
終了すると、全体制御部33からの信号によって、所定
の処理が実施されたデータを、出力処理部34に出力す
る。出力処理部34は、信号処理部33から出力される
処理データをバッファ(メモリ)34a内に格納する。
【0021】このような状態になると、全体制御部31
は、DMACモジュール21に対して、システムバス2
9を使用してのデータ出力を要求するDMAC要求信号
DREQOを出力し、DMACモジュール21からのD
MAアクナリッジ信号DACKOが与えられると、出力
処理部34は、システムバス29に、所定の処理が実施
されたデータを出力する。システムバス29に出力され
たデータは、外部メモリ28に格納される。
【0022】
【発明が解決しようとする課題】このような画像処理モ
ジュールが設けられた画像処理装置では、CCDおよび
ディスプレイの画素数が少ない場合には、CCDからの
データを取り込む第1画像処理モジュール25、あるい
は、ディスプレイに対して表示データを転送する表示用
画像処理モジュールは、システムバスに対する優先順位
が高くなっているものの、データ処理数が少なく、シス
テムバス29の使用頻度も比較的少なく、システムバス
29には余裕がある。従って、これらの画像処理モジュ
ールよりも優先順位の低い第2画像処理モジュール26
および第3画像処理モジュール27では、DMA要求に
対して、システムバス29を使用してのデータ入力まで
の待機時間、あるいは、データ出力までの待機時間が長
くなるおそれがない。その結果、画像処理モジュールの
内部において、待機時間が長くなることによってデータ
の過不足が発生し、データ処理時間が長くなるようなお
それがない。
【0023】近時、CCDおよびディスプレイでは、画
素数が300万程度になっており、CCDから転送され
るデータ数、および、ディスプレイへ転送される表示デ
ータ数が増加し、優先順位の高い画像処理モジュールに
よるシステムバス29の使用頻度(データ転送周波数)
が高くなっている。その結果、システムバス29によっ
てデータが転送される時間が長くなり、優先順位の低い
第2および第3の画像処理モジュール26および27
は、システムバス29を使用する機会が低下するという
問題がある。
【0024】例えば、第2画像処理モジュール26で
は、システムバス29に対するデータの入出力を要求す
るDMA要求を出力しても、優先順位の高い画像処理モ
ジュールによってシステムバス29が使用されているこ
とにより、第2画像処理モジュール26に対するデータ
の入出力が実施されず待機状態になる。これにより、第
2画像処理モジュール26は、高速での信号処理が可能
な状態であるにもかかわらず、入力データが不足するこ
とによって、あるいは、処理が終了したデータが出力さ
れずに滞留することによって、信号処理速度が低下する
おそれ、あるいは、無効データが処理されるおそれがあ
る。そして、このような状態が継続することにより、処
理されたデータに異常が発生するおそれもある。
【0025】画像データの通信のため、あるいは外部メ
モリに記憶させるために、データをJPEG圧縮処理す
る第3画像処理モジュール27においても、同様の問題
が発生する。
【0026】また、CCDおよびディスプレイの画素数
が多くない場合であっても、CCDからのデータの取込
と同時に、すなわち、CCDからのデータを取り込みな
がら、逐次、第2または第3の画像処理モジュール26
または27によって、データ処理を行っているときに、
CCDから転送されるデータの取込速度に対して第2ま
たは第3の画像処理モジュール26または27によるデ
ータ処理速度が高速になると、本来処理すべきデータが
第2または第3の画像処理モジュール26または27に
入力される前に、第2または第3の画像処理モジュール
26または27による画像処理動作が開始することにな
る。これにより、第2または第3の画像処理モジュール
26または27にて処理されるデータに異常が発生する
おそれがある。
【0027】このような異常の発生を防止するために、
通常、画像処理装置の競合制御部(アービタ)22が、
第2または第3の画像処理モジュール26または27か
らのDMA要求に対して、システムバス29の使用許可
を与えないようにする制御等によって、第2または第3
の画像処理モジュール26または27をデータ入力待機
状態で停止させることが実施されている。このように、
第2または第3の画像処理モジュール26または27
を、データ入力待機状態で停止させる場合には、消費電
力を低減させるために、CPU&if23の制御によっ
て、第2または第3の画像処理モジュール26または2
7へのクロックの供給を停止させている。
【0028】しかしながら、このように、CPU&if
23の制御によって、第2または第3の画像処理モジュ
ール26または27へのクロックの供給を停止すると、
第2または第3の画像処理モジュール26または27に
よる処理を開始する際に、CPUCPU&if23から
の制御信号が使用頻度の高いシステムバス29を介し
て、第2または第3の画像処理モジュール26または2
7に供給されるために、第2または第3の画像処理モジ
ュール26または27が処理可能な状態になるまで長時
間を要するという問題がある。
【0029】しかも、この場合には、第2または第3の
画像処理モジュール26または27による処理を再開し
た後に、第2または第3の画像処理モジュール26また
は27がDMA要求を発生してシステムバス29を使用
することができるまでにも時間を要するために、第2ま
たは第3の画像処理モジュール26または27によって
実際の処理が実施されるまでに、きわめて長時間を要す
ることになる。さらには、このように、実際の処理が実
施されるまでに長時間を要することにより、消費電力も
増大することになる。
【0030】本発明は、このような問題を解決するもの
であり、その目的は、システムバスを使用する際の優先
順位の低い画像処理モジュールにおいて、処理されるデ
ータに異常等が発生することを防止することができ、ま
た、消費電力を低減することができる画像処理装置を提
供することにある。
【0031】
【課題を解決するための手段】本発明の画像処理装置
は、画面を複数に分割して得られる各領域の画素データ
を1ブロックとして、1ブロック単位のデータに対して
所定の処理を実行する信号処理部と、システムバスを介
して処理すべき1ブロックのデータの入力を要求するD
MA(ダイレクトメモリアクセス)要求を発生する入力
側DMA要求制御手段と、前記システムバスを介して処
理されたブロックのデータの出力を要求するDMA要求
を発生する出力側DMA要求制御手段と、前記システム
バスを介して1ブロックのデータが入力されるととも
に、入力されたデータを前記信号処理部に転送する入力
処理部と、前記信号処理部にて処理されたデータが転送
されて、システムバスに対して出力する出力処理部とを
それぞれ具備し、前記システムバスを使用してのデータ
の入出力の優先順位がそれぞれ設定された画像処理モジ
ュールと、前記各画像処理モジュールからのDMA要求
に対して、いずれの画像処理モジュールに対して前記
ステムバスの使用を許可するかを、設定された優先順位
に基づいて決定するDMACモジュールとを具備し、
先順位の低い前記画像処理モジュールのみが、前記信号
処理部における信号処理が終了した時点において、前記
入力側DMA要求制御手段または出力側DMA要求制御
手段からDMA要求が発生している場合に、該信号処理
部による信号処理を停止するようになっていることを特
徴とする
【0032】 前記信号処理部による信号処理を停止す
るようになった画像処理モジュールは、該信号処理部に
対するクロック信号の供給を制御するクロック制御部が
設けられており、信号処理部における信号処理を停止
させる際に、該クロック制御手段からのクロック信号の
供給が停止されて該信号処理部が動作停止状態とされ
る。
【0033】 前記信号処理部による信号処理を停止す
るようになった画像処理モジュールは、該信号処理部に
対するクロック信号の供給を制御するクロック制御部が
設けられており、信号処理部における信号処理を停止
させる際に、該クロック制御手段からのクロック信号の
供給が停止されて該信号処理部が動作停止状態とされ
る。
【0034】 前記各画像処理モジュールの前記出力処
理部は、複数のブロックを一括して出力する。
【0035】
【0036】前記画像モジュールにて信号処理されるデ
ータが固体撮像装置から出力される画像データである。
【0037】
【発明の実施の形態】以下、本発明の実施の形態を図面
に基づいて説明する。
【0038】本発明の画像処理装置は、図9に示す画像
処理装置とは、第2および第3の画像処理モジュール2
6および27の構成のみが異なっていること以外は同様
の構成になっており、第2および第3の画像処理モジュ
ール26および27以外の構成については、図9に示す
符号を用いて、詳しい説明は省略する。
【0039】図1は、本発明の画像処理装置において第
2および第3の画像処理モジュールとして使用される本
発明の画像処理モジュールの構成を示すブロック図であ
る。この画像処理モジュールは、データ処理をブロック
単位で行うとともに、ブロック単位でデータをシステム
バス29に対して入力および出力する。
【0040】画像処理モジュールは、システムバス29
からのブロック単位のデータが入力される入力処理部1
5と、この入力処理部15に入力されたブロック単位の
データが転送されて、所定の処理を実施する信号処理部
16と、信号処理部16にて処理されたブロック単位の
データが転送されて、システムバス29に出力する出力
処理部17と、前記信号処理部16の制御等を実施する
全体制御部18とを有している。
【0041】全体制御部18は、システムバス29を介
してデータの入力を要求するDMA要求を発生する入力
側DMA要求制御部11と、システムバス29を介して
データの出力を要求するDMA要求を発生する出力側D
MA要求制御部13と、信号制御部16を制御する信号
処理制御部12とを有している。信号処理制御部12に
は、信号処理部16にてデータがブロック単位で処理さ
れてその処理が終了したことを検出するブロック処理終
了検出部12aが設けられるとともに、信号処理部16
にて処理されたブロック数をカウントするブロック数カ
ウント部12bが設けられている。
【0042】ブロック処理終了検出部12aは、ブロッ
ク単位のデータを信号処理部16にて処理するために要
する時間が予め設定されており、入力処理部15からブ
ロック単位のデータが信号処理部16に転送されてか
ら、予め設定された時間が経過することによって、ブロ
ック単位のデータが信号処理部16にて処理されたこと
を検出するようになっている。
【0043】全体制御部18の入力側DMA要求制御部
11は、データ入力を要求するDMA要求信号(DMA
REQI)を生成して、DMACモジュール21に対し
て出力するとともに、全体制御部18の信号処理制御部
12に出力する。また、入力側DMA要求制御部11に
は、DMACモジュール21からのDMAアクナリッジ
信号DACKIが入力されるようになっており、このD
MAアクナリッジ信号DAKIは、入力処理部15にも
入力されている。
【0044】出力側DMA要求制御部13は、データ出
力を要求するDMA要求信号(DMAREQO)を生成
して、DMACモジュール21に対して出力するととも
に、全体制御部18の信号処理制御部12に出力する。
また、出力側DMA要求制御部13には、DMACモジ
ュール21からのDMAアクナリッジ信号DACKOが
入力されるようになっており、このDMAアクナリッジ
信号DACKOは、入力処理部15にも入力されてい
る。
【0045】入力処理部15は、DMACモジュール2
1からのDMAアクナリッジ信号DACKIが入力され
ると、システムバス29からデータをブロック単位で入
力して、バッファ(メモリ)15a内に格納する。そし
て、バッファ15a内に格納されたデータが、信号処理
部16に転送される。
【0046】信号処理部16は、転送されたブロック単
位のデータに対して所定の処理を実施した後に、処理さ
れたデータを出力処理部17に出力する。出力処理部1
7は、信号処理部16から出力される処理データをバッ
ファ(メモリ)17a内に格納して、DMACモジュー
ル21からのDMAアクナリッジ信号DACKOが入力
されることによって、システムバス29に出力する。
【0047】全体制御部18には、信号処理部16に対
して、信号制御部16を動作可能な状態とするためにク
ロック信号を供給するクロック制御部14が設けられて
いる。クロック制御部14は、信号処理制御部12によ
って制御されるようになっており、入力処理部15およ
び出力処理部17において、ブロック単位のデータが入
力および出力される際には、その処理を優先させるため
に、信号処理部14へのクロック信号の供給を停止し
て、信号処理部14を動作停止状態とする。
【0048】このような構成の画像処理モジュールによ
って、間引き処理ではなく補間処理によって画像圧縮を
行うフィルタ処理を実施する場合について以下に説明す
る。このフィルタ処理は、圧縮処理によって画質が大き
く劣化しないように、処理すべき画素の輝度等のデータ
のみならず、その周辺画素のデータに対して、所定の係
数を乗じたデータも取り込んで補間処理を行う。従っ
て、処理すべき画素のみならず、周辺画素も含めてデー
タを取り込む必要がある。このために、画面全体を複数
のブロックに分割した矩形小領域(ブロック)における
全ての画素のデータが、そのブロック単位で画像処理モ
ジュールに対して入力され、信号処理部16において
も、ブロック単位で画像データが処理された後に、ブロ
ック単位のデータが出力される。
【0049】ここでは、画面上における水平方向の19
画素(水平ライン)および垂直方向の19画素(垂直ラ
イン)によって構成された19×19画素を、水平方向
に8画素および垂直方向に8画素である8×8画素に圧
縮する画素数圧縮変換する場合について説明する。この
場合、信号処理部では、19×19画素を処理対象画素
として、出力される1画素のデータに処理する。このた
めに、入力された1ブロックの画素データから、19×
19画素の処理対象画素を、順次、変更しながら、出力
される8×8画素に対応したデータが得られるように信
号処理が実施される。従って、信号処理部16では、8
×8=64回の信号処理が実施される。
【0050】信号処理部16において所定の信号処理を
実施するために、1つの画面に対して、図2に示すよう
に、32(水平ライン)×19(垂直ライン)画素を1
ブロックとして分割されて、その1ブロックにおける3
2×19画素のデータが、画像処理モジュールからのD
MA要求によって、システムバス29を介して順番に画
像処理モジュールに入力される。この場合、画面におけ
る最も左側の最上部に位置する1つのブロックI1のデ
ータが最初に画像処理モジュールに転送されて、次に、
そのブロックI1の水平方向右側に隣接するブロックI
2のデータが、画像処理モジュールに転送される。以
下、順番に、水平方向の右側に隣接するブロックのデー
タが画像処理モジュールに転送される。
【0051】各ブロックにおいては、最上段の水平ライ
ンにおける32画素が左から右方向に順番に転送され
て、最上段の32画素のデータの転送が終了すると、そ
の水平ラインの下側に隣接する水平ラインの32画素の
データが、左側から右側に順番に転送される。以下同様
にして、垂直方向の19ラインにわたって、データが順
番に転送されることにより、1ブロックにおける全ての
画素のデータ転送が終了する。
【0052】水平方向に並んだ1列のブロックにおける
全てのデータの転送が終了すると、その列の下側に隣接
する水平方向に沿った各ブロックのデータが、左側から
順番に画像処理モジュールに転送される。
【0053】この場合、データが転送された最上段のブ
ロックにおける下部の垂直方向に並んだ11の水平ライ
ン分の画素データが重複して読み込まれる。すなわち、
上側から第2番目のラインブロックでは、最上段の水平
ラインの画素に対して8ライン下側に位置する第9番目
の水平ラインから垂直方向に19ライン分の画素のデー
タが転送される。以後、同様に、上下方向に並んだ一対
のブロックでは、垂直方向に並んだ11ライン分の画素
のデータが重複して転送されることになり、この重複し
て転送される11ライン分のデータは、画像処理に際し
て連続性を維持するために使用される。
【0054】このように、画像処理モジュールの入力処
理部15には、32×19画素の1ブロック単位のデー
タが順番に入力されて、入力処理部15のバッファ15
aに、1ブロック32×19画素のデータが格納され
る。その後、入力処理部15のバッファ15aに格納さ
れた1ブロック32×19画素のデータが、信号処理部
16に転送される。
【0055】なお、入力処理部15におけるバッファ1
5aの容量は、処理速度、システムバス29の使用頻
度、LSIチップ面積等を考慮して決定されるが、3回
のDMA要求によって転送されるデータ(32×19×
3画素に対応するデータ)を格納し得る程度の容量があ
ればよい。通常、2ブロック(32×19×2画素)に
対応するデータを格納し得ることにより、ブロック単位
のデータを連続して出力することができるバッファとし
て機能し得る。
【0056】信号処理部16では、32×19画素のデ
ータから、補間処理等を含む画素数縮小処理を実施し
て、19×19画素のデータから1画素のデータを得
て、32×19画素のデータが、8×8画素のデータに
圧縮される。そして、得られた8×8画素のデータが1
ブロック単位とされる。
【0057】信号処理部16にて得られた8×8画素の
1ブロックのデータは、出力処理部17に転送される。
【0058】出力処理部17では、転送される1ブロッ
ク8×8画素のデータを、4ブロックを1単位として、
バッファ17aに、水平方向に並んだ状態で格納され
る。この場合、図3に示すように、出力処理部17のバ
ッファ17aには、1水平ライン方向に、4ブロック分
である32画素のデータが、左から右方向に順番に格納
され、32画素のデータが水平方向に格納されると、垂
直方向に1段下側に位置する2番目の水平ラインにおけ
る32画素のデータが格納される。以下、同様にして、
垂直方向に8ラインにわって、画素のデータが格納さ
れ、32(8×4)×8画素を1単位として格納され
る。
【0059】このようにして、1ブロック8×8画素の
データが、4ブロックを1単位として、順次出力処理部
17のバッファ17aに格納される。
【0060】図4は、信号処理部16において、処理さ
れるデータサイズ(19×19画素)と、画像圧縮処理
によって得られデータサイズ(8×8画素)との関係を
示している。信号処理部16では、19×19画素のデ
ータが圧縮処理されて、8×8画素のデータとされ、順
次、出力処理部14に出力される。出力処理部17のバ
ッファ17aでは、8×8画素のデータを1ブロックと
して、4ブロックを1単位として格納される。
【0061】なお、補間による画像圧縮処理は、既存の
技術であるために、ここでは特に説明せずに、画像処理
モジュールにおけるDMA要求によるデータの入出力制
御および信号処理部14の制御等について説明する。
【0062】図5は、画像処理モジュールにおける入力
処理部14にデータが入力される際の処理手順を示すフ
ローチャート、図6は、入力側DMA要求制御部11に
おけるサブルーチンを示すフローチャートである。
【0063】画像処理が開始される当初は、全体制御部
18のクロック制御部14は、信号処理部16に対して
クロック信号の供給を停止しており、信号処理部16
は、処理が実施されない動作停止状態になっている。
(図5のステップS11参照、以下同様)。
【0064】このような状態で画像処理が開始される
と、入力処理部15のバッファ(メモリ)15aには、
データが入力されていない状態であることから、入力処
理部14にデータを入力するために、入力側DMA要求
制御部11では、図6に示すサブルーチンAが実施され
る。
【0065】全体制御部18における入力側DMA要求
制御部11は、図6のサブルーチンAに示すように、デ
ータ入力要求信号DREQIを発生して(図6のステッ
プS31参照、以下同様)、そのデータ入力要求信号D
REQIを、DMACモジュール21に出力する。そし
て、DMACモジュール21から、画像処理モジュール
に対するシステムバス29の使用を認めるためのDMA
アクナリジ信号DACKIが入力側DMA要求制御部1
1および入力処理部15に与えられると、DMACモジ
ュール21の制御によって、入力処理部15のバッファ
(メモリ)15aに、1ブロック32×19画素のデー
タが、外部メモリ28から転送される。
【0066】図6のステップS31に示すように、入力
側DMA要求制御部11からDREQIが発生すると、
入力処理部15のバッファ15aに、1ブロック32×
19画素のデータが格納されるまで、DMA要求信号D
REQIが継続して発生られる(ステップS32)。そ
して、1ブロックのデータが入力処理部15のバッファ
15aへ転送されると、入力側DMA要求制御部11に
おけるDMA要求信号DREQIの発生は終了する(ス
テップS33)。
【0067】なお、信号処理開始当初は、入力側DMA
要求制御部11から発せられた最初のDMA要求信号D
REQIにより、外部メモリからシステムバス19を介
して転送された32×19画素の1ブロックのデータが
入力処理部15のバッファ15aに格納されても、バッ
ファ15aには、マージン(空き)があるために、図6
に示すサブルーチンAが連続して実施され、次のブロッ
クにおける32×19画素のデータも、連続してバッフ
ァ15a内に格納される。
【0068】また、入力処理部15のバッファ15aに
データが入力されている間は、全体制御部18のクロッ
ク制御部14から信号処理部16に対するクロック信号
の供給が継続して停止されており、従って、信号処理部
16は動作停止状態を継続している。
【0069】全体制御部18における信号処理制御部1
2には、信号処理部16において、入力される1ブロッ
ク32×19画素のデータから19×19画素を抽出し
て圧縮処理することにより、32×19画素を8×8画
素とするために要する時間が予め設定されたブロック処
理終了検出部12aが設けられており、ブロック処理終
了検出部12aは、1ブロックのデータの格納が開始さ
れることによって時間の計測を開始する。そして、ブロ
ック処理終了検出部12aによって、予め設定された時
間が経過すると(ステップS12)、入力処理部15の
バッファに対する1ブロックのデータの入力が終了した
ものとして、入力側DMA要求制御部11からDMA要
求信号DREQIが発生しているかをチェックする(ス
テップS13)。
【0070】ステップS13において、DMA要求信号
DREQIが発生している場合には、入力処理部15の
バッファ15aに全てのデータが完全に入力されていな
いと判断して、入力処理部15のバッファ15aへのデ
ータの入力が継続して実施される。
【0071】これに対して、DMA要求信号DREQI
の発生が終了している場合には、全体制御部18のクロ
ック制御部14は、クロック信号を信号処理部16に供
給して、信号処理部16を処理動作可能な状態にする。
そして、入力処理部15から信号処理部16に、32×
19画素の1ブロックのデータが転送される(ステップ
S14)。
【0072】このような状態になると、信号処理部16
は、入力処理部15から入力される32×19画素のデ
ータの信号処理を実施する。信号処理部16は、入力さ
れる32×19画素のデータから、8個の19×19画
素のデータを順次選択して、選択された19×19画素
のデータをそれぞれ圧縮処理して、1つの画素データと
する(ステップS15)。
【0073】このようにして、最初の1ブロックのデー
タ処理が終了すると、連続して2ブロックのデータの処
理が終了していないことを確認して(ステップS1
6)、入力処理部15のバッファ15aに入力されてい
る第2番目のブロックにおける32×19画素のデータ
が、信号処理部16に転送され、データの圧縮処理が実
施される。そして、信号処理部16の処理によって得ら
れた8×8画素のデータが1ブロックとして出力処理部
17のバッファ17aに転送される(ステップS1
5)。
【0074】なお、信号処理開始当初においては、信号
処理部16によって信号処理されたデータが存在せず、
出力処理部17のバッファ17aには、外部メモリ28
に出力するデータが存在しないために、このように、信
号処理部16において、2ブロックのデータを連続して
処理することができる。
【0075】このようにして、信号処理部16にて、2
ブロックのデータ処理が実施されると、入力処理部15
のバッファ15aに、1ブロック32×19画素のデー
タを格納し得るマージン(空き)があるかを確認し(ス
テップS19)、入力処理部15のバッファ15aに、
1ブロックのデータを格納し得るマージンがある場合に
は、図6に示すサブルーチンAが実施されて、入力処理
部15のバッファ15aに1ブロックのデータが格納さ
れる(ステップS17)。
【0076】その後、入力側DMA要求制御部11から
DMA要求信号DREQIが発生しているかをチェック
し(ステップS18)、入力側DMA要求制御部11か
らDMA要求信号DREQIが発生している場合には、
全体制御部18のクロック制御部14から信号処理部1
6に対するクロックの供給が停止され、信号処理部16
は、信号処理が実施されない状態とされる(ステップS
19)。
【0077】入力側DMA要求制御部11からのDMA
要求信号DREQIが発生している場合には、DMAC
モジュール21からのアクナリッジ信号を待機している
状態と判断して、1ブロック32×15画素の全てのデ
ータが入力処理部15のバッファ15aへ転送されて、
DMA要求信号DREQIの発生が終了するまで、クロ
ック制御部16からのクロックの発生が停止されて、信
号処理部16は動作停止状態とされる。
【0078】DMACモジュール21からのアクナリッ
ジ信号によって、入力処理部15のバッファ15aに1
ブロックのデータが入力されることによって、DMA要
求信号DREQIの発生が終了すると、出力側DMA要
求制御部13からDMA要求信号DREQOが発生して
いるかをチェックする(ステップS20)。出力側DM
A要求制御部13からDMA要求信号DREQOが発生
している場合には、DMA要求信号DREQOの発生が
終了するまで待機して、DMA要求信号DREQOが発
生していない状態になったことを確認すると、全体制御
部18のクロック制御部14は、クロック信号を信号処
理部16に供給して、信号処理部16を信号処理の実施
が可能な状態にする。そして、入力処理部15から信号
処理部16に、32×19画素の1ブロックのデータが
転送される(ステップS21)。
【0079】その後、信号処理部16は、前述したよう
に、入力処理部15から入力される32×19画素のデ
ータの圧縮処理を実施して、8×8画素の処理データを
出力処理部17のバッファ17aに出力する(ステップ
S22)。
【0080】このようにして、信号処理部16による1
ブロックの画素のデータの処理が終了すると、画面にお
ける全てのブロックのデータ処理が終了したかを確認し
(ステップS23)、全てのブロックのデータ処理が終
了していない場合には、ステップS18〜ステップS2
2の処理を繰り返す。
【0081】図7は、出力処理部17から処理データが
出力される場合における動作説明のためのフローチャー
トである。出力処理部17による処理が開始された当初
は、信号処理部16に対してクロック信号の供給を停止
しており、信号処理部16は、処理が実施されない動作
停止状態になっている。また、ブロック数カウント部1
2bはリセットされて、カウント数は0とされている
(図7のステップS40参照、以下同様)。
【0082】出力処理部17では、出力側DMA要求制
御部13からDMA要求信号DREQOが発生していな
いことによって、信号処理部16に対して、1ブロック
のデータに対する信号処理許可状態になっていると(図
7のステップS41)、入力側DMA要求制御部11か
らDMA要求信号DREQIが発生していないことを確
認して(ステップS42)、信号処理部16によるデー
タの処理が実施される(ステップS43)。信号処理部
16によるデータ処理は、図5のフローチャートにおけ
るステップS15での信号処理と同様であり、データの
処理が終了すると、信号処理制御部12に設けられたブ
ロック数カウント部の処理ブロック数が、+1増加され
る。そして、信号処理部16にて得られた8×8画素の
1ブロックのデータは、出力処理部17のバッファ17
aに出力される。
【0083】入力側DMA要求制御部11からDMA要
求信号DREQIが発生している場合には、入力処理部
15のバッファ15aに対する1ブロックのデータ入力
が実施されるために、信号処理部16は、クロック制御
部14からクロック信号が供給されず、処理が実施され
ない動作停止状態とされ、入力処理部15のバッファ1
5aに対する1ブロックのデータ入力が終了した後に、
信号処理部16にクロック信号が供給されることによっ
て、信号処理部が処理実施可能状態とされて、所定の信
号処理が実施される。
【0084】このようにして、信号処理部16による1
ブロックの画素のデータの処理が終了すると、信号処理
制御部18に設けられたブロック数カウント部12bに
おいて、信号処理部16によって連続して信号処理され
たブロック数が4になっているかを確認する(ステップ
S44)。信号処理部16において、連続して4つのブ
ロックのデータが処理されていない場合には、ステップ
S41〜S43が繰り返される。
【0085】これに対して、信号処理部16において、
連続して4つのブロックのデータが処理されている場合
には、出力側DMA要求制御部13はDMA要求信号D
REQOを発生し、DMACモジュール21に対してシ
ステムバス29の使用を要求する。入力処理部14にデ
ータを入力する場合には、入力側DMA要求制御部11
では、図6に示すサブルーチンAが実施される。この場
合の全体制御部18における出力側DMA要求制御部1
3では、図8に示すサブルーチンBを実施する。出力側
DMA要求制御部13は、まず、データ入力要求信号D
REQOを発生して(図8のステップS51参照、以下
同様)、そのデータ入力要求信号DREQOを、DMA
Cモジュール21に出力する。そして、DMACモジュ
ール21から、画像処理モジュールに対するシステムバ
ス29の使用を認めるためのDMAアクナリジ信号DA
CKOが出力側DMA要求制御部13および出力処理部
17に与えられると、DMACモジュール21の制御に
よって、出力処理部17のバッファ(メモリ)17aに
格納された4ブロックの画素データ(8×4×8画素デ
ータ)が一括して、システムバス29を介して、外部メ
モリ28に転送される。
【0086】信号処理部16において、連続して4つの
ブロックのデータが処理されていない場合には、ステッ
プS41〜S43の処理が実施される。
【0087】出力側DMA要求制御部13によって制御
が実施されると、出力側DMA要求制御部13からDM
A要求信号DREQOが発生しているかをチェックし
(ステップS45)、出力側DMA要求制御部13から
DMA要求信号DREQOが発生している場合には、全
体制御部18のクロック制御部14から信号処理部16
に対するクロックの供給が停止され、信号処理部16
は、信号処理が実施されない状態とされる(ステップS
46)。
【0088】出力側DMA要求制御部13からのDMA
要求信号DREQOが発生している場合には、DMAC
モジュール21からのアクナリッジ信号DACKOを待
機している状態と判断して、出力処理部17のバッファ
17aに格納された4ブロック(8×4×8画素)のデ
ータが、一括して、システムバス29を介して外部メモ
リ28に出力される。
【0089】出力処理部17のバッファ17aに格納さ
れた4ブロック(8×4×8画素)のデータが、システ
ムバス29を介して外部メモリ28に出力されることに
より、出力側DMA要求制御部13からのDMA要求信
号DREQOの発生が停止すると、画面における全ての
ブロックのデータ処理が終了したかを確認し(ステップ
S47)、全てのブロックのデータ処理が終了していな
い場合には、ステップS41〜ステップS46の処理を
繰り返す。全てのブロックのデータ処理が終了している
場合には、制御は終了する。
【0090】
【発明の効果】本発明の画像処理モジュールおよび画像
処理装置は、このように、DMA要求が発生している場
合に、信号処理部による信号処理を停止して、データが
入出力されるようになっているために、信号処理部によ
る信号処理に際して、データの過不足が発生するおそれ
がなく、処理されたデータに異常等が発生するおそれが
ない。
【0091】しかも、画像処理モジュールには、信号処
理部に対してクロック信号を供給するクロック制御部を
設けて、信号処理を停止する際に、信号処理部を動作停
止状態とすることにより、消費電力を著しく低減するこ
とができる。
【図面の簡単な説明】
【図1】本発明の画像処理モジュールの構成を示すブロ
ック図である。
【図2】その画像処理モジュールにおける処理される画
像データの入力手順の説明図である。
【図3】その画像処理モジュールにおける処理される画
像データの出力手順の説明図である。
【図4】その画像処理モジュールにおける画像データの
処理内容の説明図である。
【図5】その画像処理モジュールにおけるデータ入力側
の処理内容を説明するためのフローチャートである。
【図6】その処理におけるサブルーチンを示すフローチ
ャートである。
【図7】その画像処理モジュールにおけるデータ出力側
の処理内容を説明するためのフローチャートである。
【図8】その処理におけるサブルーチンを示すフローチ
ャートである。
【図9】画像処理装置の構成の一例を示すブロック図で
ある。
【図10】その画像処理装置に使用される画像処理モジ
ュールの構成を示すブロック図である。
【符号の説明】
11 入力側DMA要求制御部 12 信号処理制御部 12a ブロック処理終了検出部 12b ブロック数カウント部 13 出力側DMA要求制御部 14 クロック制御部 15 入力処理部 15a バッファ 16 信号処理部 17 出力処理部 17a バッファ 21 DMACモジュール 22 競合制御部 23 CPU&if 24 外部メモリコントローラ 25〜27 画像処理モジュール 28 外部メモリ 29 システムバス
───────────────────────────────────────────────────── フロントページの続き (58)調査した分野(Int.Cl.7,DB名) G06F 13/28 310 G06F 13/362 510 H04N 5/232 H04N 7/24

Claims (4)

    (57)【特許請求の範囲】
  1. 【請求項1】 画面を複数に分割して得られる各領域の
    画素データを1ブロックとして、1ブロック単位のデー
    タに対して所定の処理を実行する信号処理部と、 システムバスを介して処理すべき1ブロックのデータの
    入力を要求するDMA(ダイレクトメモリアクセス)要
    求を発生する入力側DMA要求制御手段と、 前記システムバスを介して処理されたブロックのデータ
    の出力を要求するDMA要求を発生する出力側DMA要
    求制御手段と、 前記システムバスを介して1ブロックのデータが入力さ
    れるとともに、入力されたデータを前記信号処理部に転
    送する入力処理部と、 前記信号処理部にて処理されたデータが転送されて、シ
    ステムバスに対して出力する出力処理部とをそれぞれ具
    備し、前記システムバスを使用してのデータの入出力の
    優先順位がそれぞれ設定された画像処理モジュールと、 前記 各画像処理モジュールからのDMA要求に対して、
    いずれの画像処理モジュールに対して前記システムバス
    の使用を許可するかを、設定された優先順位に基づいて
    決定するDMACモジュールとを具備し、優先順位の低い前記画像処理モジュールのみが、前記信
    号処理部における信号処理が終了した時点において、前
    記入力側DMA要求制御手段または出力側DMA要求制
    御手段からDMA要求が発生している場合に、該信号処
    理部による信号処理を停止するようになっていることを
    特徴とする 画像処理装置。
  2. 【請求項2】 前記信号処理部による信号処理を停止す
    るようになった画像処理モジュールは、該信号処理部に
    対するクロック信号の供給を制御するクロック制御部が
    設けられており、信号処理部における信号処理を停止
    させる際に、該クロック制御手段からのクロック信号の
    供給が停止されて該信号処理部が動作停止状態とされる
    請求項1に記載の画像処理装置
  3. 【請求項3】 前記各画像処理モジュールの前記出力処
    理部は、複数のブロックを一括して出力する請求項1に
    記載の画像処理装置
  4. 【請求項4】 前記画像モジュールにて信号処理され
    るデータが固体撮像装置から出力される画像データであ
    請求項1に記載の画像処理装置。
JP2001130450A 2001-04-26 2001-04-26 画像処理装置 Expired - Fee Related JP3494436B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001130450A JP3494436B2 (ja) 2001-04-26 2001-04-26 画像処理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001130450A JP3494436B2 (ja) 2001-04-26 2001-04-26 画像処理装置

Publications (2)

Publication Number Publication Date
JP2002328880A JP2002328880A (ja) 2002-11-15
JP3494436B2 true JP3494436B2 (ja) 2004-02-09

Family

ID=18978823

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001130450A Expired - Fee Related JP3494436B2 (ja) 2001-04-26 2001-04-26 画像処理装置

Country Status (1)

Country Link
JP (1) JP3494436B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050134877A1 (en) * 2003-12-17 2005-06-23 Murata Kikai Kabushiki Kaisha Color image processing device and color image processing method

Also Published As

Publication number Publication date
JP2002328880A (ja) 2002-11-15

Similar Documents

Publication Publication Date Title
JP3761061B2 (ja) データ処理システムおよびデータ処理方法
US7170553B2 (en) Image processing apparatus, image processing method and portable imaging apparatus
JP3720268B2 (ja) 画像処理装置
US7983495B2 (en) Image processing device and method
US20070065022A1 (en) Image signal processing apparatus and method
US20190324646A1 (en) Memory access device, image-processing device, and imaging device
US10719458B2 (en) Data transfer device, image processing device, and imaging device
JP2003101951A (ja) 撮像装置、画像処理方法、記録媒体およびプログラム
JP2004312073A (ja) 画像処理装置及びカメラ
KR20100007628A (ko) 이미지 센서 인터페이스 장치 및 이를 구비하는 디지털촬영 장치
JP3494436B2 (ja) 画像処理装置
US20040201693A1 (en) Image processing system
US11314664B2 (en) Memory access device, image processing device and imaging device
JPH11296155A (ja) 表示装置およびその制御方法
WO2019043822A1 (ja) メモリアクセス装置、画像処理装置、および撮像装置
JP2004312072A (ja) 画像処理装置及びカメラ、並びに画像処理方法
JP5224492B2 (ja) 画像データ転送制御装置及び画像データ転送方法並びに該画像データ転送装置を有するカメラ
US9019404B2 (en) Image processing apparatus and method for preventing image degradation
WO2020008522A1 (ja) バス調停装置、バス調停システム、および撮像装置
JP2018182551A (ja) 撮像装置
JP2007243819A (ja) 画像処理装置
JP4439746B2 (ja) 情報処理装置
JP2004312148A (ja) カメラ画像処理装置
JPS63216183A (ja) 画像処理装置
JP2018037743A (ja) 画像処理装置

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20031110

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081121

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091121

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees