JP2000059690A - Electronic camera and signal correcting method - Google Patents

Electronic camera and signal correcting method

Info

Publication number
JP2000059690A
JP2000059690A JP10237944A JP23794498A JP2000059690A JP 2000059690 A JP2000059690 A JP 2000059690A JP 10237944 A JP10237944 A JP 10237944A JP 23794498 A JP23794498 A JP 23794498A JP 2000059690 A JP2000059690 A JP 2000059690A
Authority
JP
Japan
Prior art keywords
pixel
information
time
defective pixel
defective
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP10237944A
Other languages
Japanese (ja)
Other versions
JP3767188B2 (en
Inventor
Atsushi Takayama
淳 高山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Original Assignee
Konica Minolta Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Inc filed Critical Konica Minolta Inc
Priority to JP23794498A priority Critical patent/JP3767188B2/en
Publication of JP2000059690A publication Critical patent/JP2000059690A/en
Application granted granted Critical
Publication of JP3767188B2 publication Critical patent/JP3767188B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an electronic camera and a signal correcting method with which a white flaw increased/decreased corresponding to exposure time can be appropriately corrected. SOLUTION: This camera has a CCD 1 having plural pixels, memory 9 for storing information on the defective pixel of the CCD 1 and control circuit 8 for detecting whether a concerned pixel is defective or not by comparing information on the concerned pixel with prescribed information. Therefore, by correcting the pixel defect based on the previously stored information on the defective pixel at the time of short-time exposure, for example, such correction can be speedily performed. At the time of long-time exposure, on the other hand, the defective pixel is detected by the control circuit 8 so that information on the defective pixel to be stored can be reduced. Therefore, since a small storage capacity is enough for the memory 9, the cost of the digital still camera can be suppressed low, and further, data sampling time concerning the defective pixel in the production process of the digital still camera is shortened.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、固体撮像素子を備
えた電子カメラにおいて、前記固体撮像素子の欠陥画素
を検出し、かかる欠陥画素からの出力信号を補正する技
術に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a technology for detecting a defective pixel of a solid-state imaging device and correcting an output signal from the defective pixel in an electronic camera having the solid-state imaging device.

【0002】[0002]

【従来の技術】電子カメラに備えられた固体撮像素子
は、二次元に並んだ多数の画素により、画素上に結像し
た被写体の光学像を、電荷量(電気的信号)に変換して
出力する機能を有している。ところで、かかる画素の中
には、ダストの付着や結晶欠陥等に基づく欠陥(画素欠
陥)を有するために、正常な信号を出力し得ないものも
ありえる。このような画素欠陥には、被写体の輝度に対
応して出力されるはずの出力信号に対し余分な信号成分
を加算した信号を出力してしまい、画像を白っぽくして
しまう白キズと、被写体の輝度に対応して出力されるは
ずの出力信号に対しある信号成分を減算した信号を出力
してしまい、画像を黒っぽくしてしまう黒キズとがあ
る。
2. Description of the Related Art A solid-state imaging device provided in an electronic camera converts an optical image of a subject formed on a pixel into a charge (electric signal) by using a large number of pixels arranged two-dimensionally and outputs the charge. It has the function to do. By the way, some of such pixels may not be able to output a normal signal because they have a defect (pixel defect) based on dust adhesion, crystal defect or the like. For such a pixel defect, a signal that is obtained by adding an extra signal component to an output signal that should be output in accordance with the luminance of the subject is output, and a white flaw that makes the image whitish, There is a black flaw that outputs a signal obtained by subtracting a certain signal component from an output signal that should be output in accordance with the luminance, thereby making an image blackish.

【0003】画素欠陥が多く生じると、かかる固体撮像
素子を用いて撮像した画像を再生する場合に、著しく画
質が低下する恐れがある。一方、近年用いられるように
なった固体撮像素子は、少なくとも数十万以上の画素を
有するので、全く画素欠陥のない固体撮像素子を製造す
ることは、実際には困難といえる。従って、ある程度の
画素欠陥は常に存在するとの前提に立った上で、固体撮
像素子を使用することが要求されている。
[0003] When many pixel defects occur, there is a possibility that the image quality will be remarkably deteriorated when reproducing an image picked up using such a solid-state image pickup device. On the other hand, since a solid-state imaging device that has recently been used has at least several hundred thousand pixels, it can be said that it is actually difficult to manufacture a solid-state imaging device having no pixel defect. Therefore, it is required to use a solid-state imaging device on the assumption that a certain amount of pixel defects always exist.

【0004】かかる前提に基づき、画素欠陥のある画素
から出力された電気的信号を、後処理により補正する補
正回路を備え、画質の向上を図るようにした電子カメラ
が既に開発されている。このような電子カメラによれ
ば、電子カメラの生産工程で、画素欠陥検査装置を用い
て固体撮像素子の画素欠陥のある画素(欠陥画素)を検
出し、その位置を、たとえば電子カメラに搭載したRO
M内に情報として記憶させることにより、実際の撮像時
に、かかる欠陥画素からの出力信号を適宜補正するとい
う手法をとっている。
[0004] On the basis of such a premise, an electronic camera which has a correction circuit for correcting an electric signal output from a pixel having a pixel defect by post-processing to improve the image quality has already been developed. According to such an electronic camera, in a production process of the electronic camera, a pixel having a pixel defect (defective pixel) of the solid-state imaging device is detected using a pixel defect inspection device, and the position is mounted on the electronic camera, for example. RO
By storing the information in M, the output signal from the defective pixel is appropriately corrected at the time of actual imaging.

【0005】[0005]

【発明が解決しようとする課題】ところが、上述した白
キズは結晶欠陥に基づく画素欠陥であるため、固体撮像
素子の使用環境に応じて増大する場合があることが判明
している。たとえば、露光時間が長くなることに応じ
て、白キズは増加する傾向がある。かかる場合、電子カ
メラの生産工程で一定の条件の下に検出した欠陥画素の
位置と異なる位置に、新たな欠陥画素が生じることとな
るため、十分な補正ができないことも起こりうる。これ
に対し、電子カメラの生産工程における検査時に長時間
露光を行うことにより、予め欠陥画素情報を得ておき、
実際に撮影したときに、かかる情報に基づき欠陥画素の
信号を補正することも考えられる。
However, it has been found that the above-mentioned white flaw is a pixel defect based on a crystal defect, and may increase depending on the use environment of the solid-state imaging device. For example, white flaws tend to increase as the exposure time increases. In such a case, since a new defective pixel is generated at a position different from the position of the defective pixel detected under a certain condition in the production process of the electronic camera, sufficient correction may not be performed. On the other hand, by performing long-time exposure during inspection in the production process of the electronic camera, defective pixel information is obtained in advance,
It is also conceivable to correct the signal of the defective pixel based on such information when actually photographing.

【0006】しかしながら、白キズにかかる欠陥画素の
数は、露光時間が長くなると飛躍的に増大し、またその
位置も不変であるとは限らないので、かかる画素の位置
(座標)と露光時間との関係を示す情報を記憶するため
には、電子カメラのROMにおいて大きな記憶容量が必
要となる。また、電子カメラの生産工程で、長時間露光
を行って欠陥画素に関するデータを採取する場合、たと
えば3回の平均値を取るというように、同じことを繰り
返さねばならない。従って、長時間露光を最大4秒とす
ると、データ採取に必要な時間は露光時間だけでも12
秒必要ということになり、従来のデータ採取時間が1秒
以下であるところ、10倍以上の時間がかかることとな
る。
[0006] However, the number of defective pixels caused by white flaws increases dramatically as the exposure time increases, and their positions are not necessarily unchanged. Therefore, the position (coordinates) of such pixels and the exposure time are reduced. In order to store the information indicating the relationship, a large storage capacity is required in the ROM of the electronic camera. Also, in the production process of an electronic camera, when performing long-time exposure and collecting data on defective pixels, the same must be repeated, for example, taking an average value of three times. Therefore, assuming that the long-time exposure is 4 seconds at the maximum, the time required for data collection is only 12 hours.
This means that seconds are required, and the conventional data collection time is 1 second or less, which takes 10 times or more.

【0007】本発明は、かかる従来技術の問題点に鑑
み、露光時間に応じて増減する白キズに対して適切に補
正することのできる電子カメラ及び信号補正方法を提供
することを目的とする。
An object of the present invention is to provide an electronic camera and a signal correction method capable of appropriately correcting white flaws that increase or decrease according to the exposure time in view of the problems of the related art.

【0008】[0008]

【課題を解決するための手段】上述の目的を達成すべ
く、本発明の電子カメラは、複数の画素を有する固体撮
像素子と、前記固体撮像素子の欠陥画素に関する情報を
記憶する記憶手段と、注目画素に関する情報を、所定の
情報と比較することにより、注目画素が欠陥画素である
か否かを検出する検出手段とを有することを特徴とす
る。
In order to achieve the above object, an electronic camera according to the present invention comprises: a solid-state imaging device having a plurality of pixels; storage means for storing information on defective pixels of the solid-state imaging device; Detecting means for detecting whether or not the pixel of interest is a defective pixel by comparing information on the pixel of interest with predetermined information.

【0009】本発明の電子カメラは、複数の画素を有す
る固体撮像素子と、前記固体撮像素子の欠陥画素に関す
る情報を記憶する記憶手段と、注目画素に関する情報
を、所定の情報と比較することにより、注目画素が欠陥
画素であるか否かを検出する検出手段と、撮影時におけ
る露光時間の情報に基づいて、前記記憶手段に記憶され
た前記欠陥画素に関する情報から欠陥画素を特定する
か、あるいは前記検出手段により欠陥画素を検出するか
を決定する決定手段とを有することを特徴とする。
According to the electronic camera of the present invention, a solid-state imaging device having a plurality of pixels, storage means for storing information on defective pixels of the solid-state imaging device, and information on a pixel of interest are compared with predetermined information. Detecting means for detecting whether or not the pixel of interest is a defective pixel, and identifying a defective pixel from information on the defective pixel stored in the storage means, based on information on the exposure time at the time of shooting, or Determining means for determining whether to detect a defective pixel by the detecting means.

【0010】本発明の信号補正方法は、固体撮像素子を
有する電子カメラの信号補正方法であって、前記電子カ
メラの露光時間が、第1の露光時間と第2の露光時間の
いずれかであるかを判断するステップと、前記露光時間
が前記第1の露光時間であるときは、予め記憶された固
体撮像素子の欠陥画素に関する情報に基づいて欠陥画素
を特定し、一方前記露光時間が前記第2の露光時間であ
るときは、注目画素に関する情報を所定の情報と比較し
て欠陥画素を検出するステップと、前記検出された欠陥
画素からの出力信号を補正する補正するステップとを有
することを特徴とする。
A signal correction method according to the present invention is a signal correction method for an electronic camera having a solid-state imaging device, wherein the exposure time of the electronic camera is one of a first exposure time and a second exposure time. Determining whether the exposure time is the first exposure time, and identifying a defective pixel based on information about the defective pixel of the solid-state imaging device stored in advance, while the exposure time is the first exposure time. When the exposure time is 2, the method includes a step of comparing the information on the target pixel with predetermined information to detect a defective pixel, and a step of correcting an output signal from the detected defective pixel. Features.

【0011】[0011]

【作用】本発明の電子カメラによれば、複数の画素を有
する固体撮像素子と、前記固体撮像素子の欠陥画素に関
する情報を記憶する記憶手段と、注目画素に関する情報
を、所定の情報と比較することにより、注目画素が欠陥
画素であるか否かを検出する検出手段とを有しているの
で、たとえば短時間の露光時には、予め記憶された欠陥
画素に関する情報に基づき画素欠陥を補正するようにす
れば、かかる補正処理を迅速に行うことができる。一
方、長時間露光時には、前記検出手段により欠陥画素を
検出するようにすれば、記憶すべき欠陥画素に関する情
報が少なくなり、従って前記記憶手段の記憶容量が小さ
くて足りることから、電子カメラのコストを低く抑える
ことができ、また電子カメラの生産工程における欠陥画
素に関するデータ採取時間を短縮することができる。
According to the electronic camera of the present invention, a solid-state image sensor having a plurality of pixels, storage means for storing information on defective pixels of the solid-state image sensor, and information on a target pixel are compared with predetermined information. Accordingly, since the detection unit detects whether or not the pixel of interest is a defective pixel, for example, at the time of short-time exposure, the pixel defect is corrected based on the information on the defective pixel stored in advance. Then, such correction processing can be performed quickly. On the other hand, at the time of long-time exposure, if a defective pixel is detected by the detection means, the information on the defective pixel to be stored is reduced, and the storage capacity of the storage means is small. Can be suppressed, and the time for collecting data on defective pixels in the production process of the electronic camera can be shortened.

【0012】本発明の電子カメラによれば、複数の画素
を有する固体撮像素子と、前記固体撮像素子の欠陥画素
に関する情報を記憶する記憶手段と、注目画素に関する
情報を、所定の情報と比較することにより、注目画素が
欠陥画素であるか否かを検出する検出手段と、撮影時に
おける露光時間の情報に基づいて、前記記憶手段に記憶
された前記欠陥画素に関する情報から欠陥画素を特定す
るか、あるいは前記検出手段により欠陥画素を検出する
かを決定する決定手段とを有するので、たとえば短時間
の露光時には、予め記憶された欠陥画素に関する情報に
基づき画素欠陥を補正するようにすれば、かかる補正処
理を迅速に行うことができる。一方、長時間露光時に
は、前記検出手段により欠陥画素を検出するように前記
決定手段が決定すれば、記憶すべき欠陥画素に関する情
報が少なくなり、従って前記記憶手段の記憶容量が小さ
くて足りることから、電子カメラのコストを低く抑える
ことができ、また電子カメラの生産工程における欠陥画
素に関するデータ採取時間を短縮することができる。
According to the electronic camera of the present invention, the solid-state imaging device having a plurality of pixels, storage means for storing information on defective pixels of the solid-state imaging device, and information on the target pixel are compared with predetermined information. Thus, based on the information on the exposure time at the time of photographing, whether the target pixel is a defective pixel or not, based on the information on the defective pixel, Or a determining means for determining whether to detect a defective pixel by the detecting means. For example, at the time of short-time exposure, it is possible to correct a pixel defect based on information about a defective pixel stored in advance. Correction processing can be performed quickly. On the other hand, at the time of long exposure, if the determining means determines that the defective pixel is detected by the detecting means, the information on the defective pixel to be stored is reduced, and therefore the storage capacity of the storage means is small. In addition, the cost of the electronic camera can be kept low, and the time for collecting data on defective pixels in the production process of the electronic camera can be shortened.

【0013】本発明の信号補正方法によれば、電子カメ
ラの露光時間が、第1の露光時間と第2の露光時間のい
ずれかであるかを判断するステップと、前記露光時間が
前記第1の露光時間であるときは、予め記憶された固体
撮像素子の欠陥画素に関する情報に基づいて欠陥画素を
特定し、一方前記露光時間が前記第2の露光時間である
ときは、注目画素に関する情報を所定の情報と比較して
欠陥画素を検出するステップと、前記検出された欠陥画
素からの出力信号を補正する補正するステップとを有す
るので、たとえば第1の露光時間を短時間と決め、予め
記憶された欠陥画素に関する情報に基づき欠陥画素から
の出力信号を補正するようにすれば、かかる補正処理を
迅速に行うことができる。一方、第2の露光時間を長い
露光時間と決め、注目画素に関する情報を所定の情報と
比較して欠陥画素を検出するようにすれば、記憶すべき
欠陥画素に関する情報が少なくなり、従って前記記憶手
段の記憶容量が小さくて足りることから、電子カメラの
コストを低く抑えることができ、また電子カメラの生産
工程における欠陥画素に関するデータ採取時間を短縮す
ることができる。
According to the signal correction method of the present invention, it is determined whether the exposure time of the electronic camera is either the first exposure time or the second exposure time; When the exposure time is, the defective pixel is specified based on the previously stored information on the defective pixel of the solid-state imaging device. On the other hand, when the exposure time is the second exposure time, the information on the pixel of interest is Since the method includes a step of detecting a defective pixel by comparing with predetermined information and a step of correcting an output signal from the detected defective pixel, for example, the first exposure time is determined to be short and stored in advance. If the output signal from the defective pixel is corrected based on the information on the defective pixel, the correction process can be performed quickly. On the other hand, if the second exposure time is determined to be a long exposure time and the information on the pixel of interest is compared with predetermined information to detect defective pixels, the information on defective pixels to be stored is reduced. Since the storage capacity of the means is small, the cost of the electronic camera can be kept low, and the time for collecting data on defective pixels in the production process of the electronic camera can be shortened.

【0014】[0014]

【発明の実施の形態】以下、本発明による第1の実施の
形態を、図面を参照して説明する。図1は、第1の実施
の形態にかかる電子カメラとしてのデジタルスチルカメ
ラの構成を示す図である。図1において、固体撮像素子
としてのCCD(Charge Coupled De
vice)イメージセンサ1は、その画素上に結像され
た被写体の光学像を電気的信号に変換する(電荷を生成
する)、いわゆる光電変換を行うものであり、駆動回路
2は、転送パルスを生成して、CCD1に供給する回路
である。CCD1は、駆動回路2によって生成された転
送パルスに基づいて、アナログ電気信号を出力する。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a first embodiment according to the present invention will be described with reference to the drawings. FIG. 1 is a diagram illustrating a configuration of a digital still camera as an electronic camera according to the first embodiment. In FIG. 1, a CCD (Charge Coupled De) as a solid-state imaging device is shown.
image) The image sensor 1 performs so-called photoelectric conversion, which converts an optical image of a subject formed on the pixel into an electric signal (generates a charge), and the drive circuit 2 generates a transfer pulse. It is a circuit that generates and supplies it to the CCD 1. The CCD 1 outputs an analog electric signal based on the transfer pulse generated by the drive circuit 2.

【0015】CDS(相関二重サンプリング)回路3は
ノイズを低減するための回路であり、駆動回路2から出
力された駆動パルスに基づいて駆動される。A/D変換
回路4は、入力されたアナログ信号をディジタル信号に
変換して出力するものである。尚、本実施の形態にかか
るA/D変換回路4においては、CCD1上の画素に入
射した光の強度が高いほど、大きな値のディジタル信号
に変換されるものとする。かかるA/D変換回路4を介
して得られたCCD1の画素毎の画像データは、一旦、
画像用メモリ5に記憶される。
The CDS (correlated double sampling) circuit 3 is a circuit for reducing noise, and is driven based on a driving pulse output from the driving circuit 2. The A / D conversion circuit 4 converts an input analog signal into a digital signal and outputs the digital signal. In the A / D conversion circuit 4 according to the present embodiment, it is assumed that the higher the intensity of the light incident on the pixels on the CCD 1, the larger the value of the light is converted to a digital signal. Image data for each pixel of the CCD 1 obtained through the A / D conversion circuit 4 is temporarily
It is stored in the image memory 5.

【0016】画像用メモリ5に記憶された画像データ
は、CPU6によって各種の画像処理が施され、最終的
には、メモリカード、光磁気ディスク等の記録媒体から
なる記録部7に記憶される。
The image data stored in the image memory 5 is subjected to various types of image processing by the CPU 6, and is finally stored in a recording unit 7 composed of a recording medium such as a memory card, a magneto-optical disk, or the like.

【0017】ここで、各種の画像処理には、CCD1の
欠陥画素の画像データを補正する処理が含まれる。後述
するように露光時間に応じた態様で、CPU6は、欠陥
画素の検出を行って、かかる欠陥画素についての画像デ
ータを補正するようになっている。尚、欠陥画素の検出
に用いる各種のデータも、メモリ9に記憶されている。
Here, the various types of image processing include a process of correcting image data of defective pixels of the CCD 1. As will be described later, the CPU 6 detects a defective pixel and corrects the image data of the defective pixel in a manner corresponding to the exposure time as described later. Note that various data used for detecting a defective pixel is also stored in the memory 9.

【0018】液晶表示装置10は、撮像された画像や必
要な操作情報等を表示するものである。CCD1の前面
には、被写体からの光を画素上に結像させるためのレン
ズ11と、入射光の光量を調節する絞り12と、CCD
1の温度を検出する温度センサ13とが備えられてお
り、温度センサ13の検出信号は制御回路8に入力され
るようになっている。
The liquid crystal display device 10 displays a captured image, necessary operation information, and the like. On the front surface of the CCD 1, a lens 11 for imaging light from a subject on a pixel, an aperture 12 for adjusting the amount of incident light, and a CCD
And a temperature sensor 13 for detecting the temperature of the temperature sensor 1. The detection signal of the temperature sensor 13 is input to the control circuit 8.

【0019】更に、被写体までの測距手段(不図示)が
備えられ、かかる測距手段からの信号により、制御回路
8は、レンズ駆動回路14を駆動し、合焦位置にレンズ
11を移動させるようになっている。また、電源スイッ
チ15及び、画素欠陥の検出を行わせる検出モードを選
択するためのモードスイッチ16(モード選択手段)が
備えられ、かかるスイッチの動作に基づく信号が制御回
路8に入力されるようになっている。一方、タイマ17
が制御回路8に接続されている。タイマ17は、CCD
1の撮像時における露光時間を検出して、かかる露光時
間に対応する信号を制御回路8に出力するようになって
いる。尚、拡散板21は、黒キズ検出時に用いられるも
のであり、白キズ検出時には用いられないため、以下そ
の説明を省略する。
Further, a distance measuring means (not shown) to the subject is provided, and the control circuit 8 drives the lens driving circuit 14 to move the lens 11 to a focus position by a signal from the distance measuring means. It has become. Further, a power switch 15 and a mode switch 16 (mode selection means) for selecting a detection mode for detecting a pixel defect are provided, and a signal based on the operation of the switch is input to the control circuit 8. Has become. On the other hand, the timer 17
Are connected to the control circuit 8. Timer 17 is a CCD
The exposure time at the time of imaging 1 is detected, and a signal corresponding to the exposure time is output to the control circuit 8. The diffuser plate 21 is used when detecting a black flaw, and is not used when detecting a white flaw.

【0020】次に、欠陥画素として、白キズの検出につ
いて説明する。尚、白キズの検出は、デジタルスチルカ
メラの生産工程において行われ、得られた検出結果を制
御回路のメモリ9に記憶して、かかる検出結果を実際の
撮像のときに白キズ補正に用いるようになっている。し
かしながら、経時的に増大する白キズに対応すべく、モ
ードスイッチ16がオンとなっている場合には、電源投
入毎にその検出を実行して、検出結果を更新するように
しても良い。
Next, detection of a white defect as a defective pixel will be described. The white flaw detection is performed in the production process of the digital still camera, and the obtained detection result is stored in the memory 9 of the control circuit, and the detection result is used for white flaw correction at the time of actual imaging. It has become. However, if the mode switch 16 is turned on in order to cope with white spots that increase with time, the detection may be performed each time the power is turned on, and the detection result may be updated.

【0021】デジタルスチルカメラの生産工程における
白キズ検出の態様を説明する。まず、モードスイッチ1
6がオンとなった状態で、電源スイッチ15を投入する
と、かかるスイッチ信号が制御回路8に入力され、制御
回路8によって絞り12(光量調節手段)が全閉に駆動
され、この状態でCCD1により入射光を制限しながら
1画面分撮像を行う(制御手段)。かかる撮像によるC
CD1からの出力は、画像用メモリ5に蓄積され、CP
U6は予めメモり9に記憶されている白キズ判定用の閾
値(基準データ)と各画素毎の画像データすなわち出力
信号とをそれぞれ比較する。尚、この基準データは、撮
像した画像データを用い、検出する画素の周辺データか
ら平均等により求めることができる。
A description will be given of an aspect of white defect detection in the production process of a digital still camera. First, mode switch 1
When the power switch 15 is turned on with the switch 6 turned on, the switch signal is input to the control circuit 8, and the control circuit 8 drives the aperture 12 (light amount adjusting means) to be fully closed. An image is taken for one screen while limiting the incident light (control means). C by such imaging
The output from the CD 1 is stored in the image memory 5,
U6 compares a threshold value (reference data) for white defect determination stored in the memory 9 in advance with image data of each pixel, that is, an output signal. Note that the reference data can be obtained by averaging the peripheral data of the pixel to be detected, using captured image data.

【0022】基準データの求め方を、図面を参照して以
下に説明する。まず、図2に示すような4色の色フィル
タが画素毎に配置されている場合を考える。図3は、こ
の色フィルタが2次元的に並べられている状態を示す図
であるが、理解しやすくするためA色のみを表示してい
る。
The method for obtaining the reference data will be described below with reference to the drawings. First, consider a case where four color filters as shown in FIG. 2 are arranged for each pixel. FIG. 3 is a diagram showing a state in which the color filters are two-dimensionally arranged, but only the color A is displayed for easy understanding.

【0023】図3において、注目画素AAに対して、周
囲9画素四方のエリア内の注目画素における24個の同
じ色(A色)の画素のデータを用いて、基準データを計
算するものとする。まず、24個の画素のデータ平均値
を求める。この平均値をこの画素に対する第1の基準デ
ータとする。注目画素のデータと、この第1の基準デー
タとを比較し、それらの差を求め、この差をキズレベル
とする。キズレベルが所定の範囲を超える場合、キズと
して認識し、その位置情報をメモリに記憶する。他の色
(B、C、D色)についても、同様の処理を行う。また
全ての画素について、同様の処理を行う。
In FIG. 3, for reference pixel AA, reference data is calculated using data of 24 pixels of the same color (color A) in the target pixel in an area of nine surrounding pixels. . First, a data average value of 24 pixels is obtained. This average value is used as first reference data for this pixel. The data of the pixel of interest is compared with the first reference data, a difference between them is obtained, and this difference is set as a defect level. If the flaw level exceeds a predetermined range, the flaw is recognized as a flaw and its position information is stored in a memory. Similar processing is performed for the other colors (B, C, and D colors). Similar processing is performed for all pixels.

【0024】このとき検出するキズレベルについて、画
像データ全てに対して同じ範囲とするのではなく、ある
エリアを区切って、そのエリア毎に異なる基準で検出し
ても良い。たとえば、画面中央部と周辺部とに分けて、
中央部は5%以下、周辺部は10%以下というように、
キズ検出の条件を変えることができる。このときのパー
センテージは、注目画素の周辺24画素のデータ平均値
に対するキズレベルの比である。
At this time, the flaw level to be detected is not limited to the same range for all the image data. Instead, a certain area may be divided and detected by a different standard for each area. For example, dividing the screen into a central part and a peripheral part,
The central part is less than 5%, the peripheral part is less than 10%,
The conditions for flaw detection can be changed. The percentage at this time is the ratio of the defect level to the data average value of the 24 pixels around the target pixel.

【0025】色フィルタとして、単色フィルタを複数枚
使用した場合は、白黒のイメージセンサの場合と同様
で、注目画素に対して隣接する画素を全て利用すること
ができる。図4は、この例を示す図である。たとえば、
注目画素BBに対してBの部分全てを利用できる。計算
については同様に、周辺画素のデータ平均値を求め、こ
れを第1の基準データとすればよい。尚、長時間露光時
における白キズ検出の場合には、比較すべき周辺画素
を、たとえば注目画素を中心として5画素四方内に限る
ことにより、処理速度の向上を図ることができる。ま
た、かかる周辺画素の範囲は、正方形でなく長方形(た
とえば5×9画素)としても良い。
When a plurality of single-color filters are used as the color filters, all the pixels adjacent to the target pixel can be used in the same manner as in the case of a monochrome image sensor. FIG. 4 is a diagram showing this example. For example,
All parts of B can be used for the target pixel BB. In the calculation, similarly, the data average value of the peripheral pixels may be obtained, and this may be used as the first reference data. In the case of detecting white spots during long-time exposure, the processing speed can be improved by limiting the peripheral pixels to be compared to, for example, five pixels around the target pixel. Further, the range of the peripheral pixels may be a rectangle (for example, 5 × 9 pixels) instead of a square.

【0026】このようにして基準データすなわち閾値が
求まるが、上述した撮像によればCCD1の画素上に
は、入射光が到達しないのであるから、画素が正常であ
る限り、かかる画素からの出力信号は閾値未満となるは
ずである。従って、その出力信号が閾値以上である場
合、白キズに相当する欠陥があると判断する。かかる比
較により白キズが検出されることとなる。白キズが検出
されれば、それに対応する欠陥画素の位置情報(二次元
座標)が、制御回路8のメモリ9(記憶手段)に記憶さ
れることとなる。
In this manner, the reference data, ie, the threshold value, is obtained. However, according to the above-described imaging, since the incident light does not reach the pixels of the CCD 1, as long as the pixels are normal, the output signals from the pixels are not affected. Should be less than the threshold. Therefore, when the output signal is equal to or larger than the threshold, it is determined that there is a defect corresponding to a white defect. The white defect is detected by such a comparison. If a white defect is detected, the position information (two-dimensional coordinates) of the corresponding defective pixel is stored in the memory 9 (storage means) of the control circuit 8.

【0027】尚、電源スイッチ15の投入毎に、白キズ
の検出が自動的に行われるようにすれば、最新の白キズ
の位置情報が前記メモリ9に記憶されるため、経時的な
白キズの変化に対応した補正も可能となる。
If the detection of white flaws is automatically performed each time the power switch 15 is turned on, the latest white flaw position information is stored in the memory 9. Can be corrected in accordance with the change of.

【0028】ところで、露光時間がたとえば1/8秒以
下である場合には、白キズの位置は比較的少ないため、
デジタルスチルカメラの生産工程で、白キズを検出し
て、かかる位置をメモり9に記憶しても、その記憶容量
は小さくて足りる。ところが、露光時間が1/8秒より
長くなった場合には、白キズが飛躍的に増大するため、
デジタルスチルカメラの生産工程で、白キズを検出する
時間が長くかかるという不具合、及び白キズの位置をメ
モり9に記憶するため大きな記憶容量が必要になるとい
う不具合がある。
When the exposure time is, for example, 1/8 second or less, the position of the white flaw is relatively small.
Even if a white flaw is detected in the production process of the digital still camera and such a position is stored in the memory 9, the storage capacity is small. However, if the exposure time is longer than 1/8 second, white flaws increase dramatically,
In the production process of the digital still camera, there is a problem that it takes a long time to detect a white defect, and a problem that a large storage capacity is required because the position of the white defect is stored in the memory 9.

【0029】そこで、本実施の形態においては、デジタ
ルスチルカメラの生産工程で、露光時間が1/8秒以下
の場合だけ、白キズの検出を行うようにして、かかる検
出結果をメモり9に記憶している。更に、実際の撮像時
における露光時間が1/8秒以下の場合には、メモリ9
に記憶された白キズの位置に基づき補正処理を行い、一
方、露光時間が1/8秒を超えた場合には、撮像により
得られた画像データを処理しながら、キズの検出、補正
を行うようにしている。尚、理想的には、撮像前後にC
CD1への入射光を制限して白キズを検出することが望
ましいが、画像データからも検出が可能であり、本実施
の形態においては、かかる検出態様を採用している。注
目画素の周辺のみに着目すれば、画素間のデータに大き
な変化はないので、周辺画素の平均と注目画素のデータ
との比較からキズの検出ができる。より具体的に、本実
施の形態の動作について説明する。
Therefore, in the present embodiment, in the production process of the digital still camera, white flaws are detected only when the exposure time is 1/8 second or less. I remember. Further, when the exposure time during actual imaging is 1/8 second or less, the memory 9
In the case where the exposure time exceeds 1/8 second, the detection and correction of flaws are performed while processing the image data obtained by imaging. Like that. Note that ideally, before and after imaging, C
It is desirable to detect the white flaw by restricting the light incident on the CD 1, but it is also possible to detect the white flaw from the image data. In the present embodiment, such a detection mode is adopted. If attention is paid only to the periphery of the target pixel, there is no significant change in the data between the pixels. Therefore, a defect can be detected by comparing the average of the peripheral pixels with the data of the target pixel. More specifically, the operation of the present embodiment will be described.

【0030】図5は、本実施の形態にかかる電子カメラ
を用いて、実際に被写体を撮像する場合の処理を示すフ
ローチャートであり、図6は、信号処理及びキズ補正処
理を行うサブルーチンである。
FIG. 5 is a flowchart showing a process for actually photographing a subject using the electronic camera according to the present embodiment, and FIG. 6 is a subroutine for performing signal processing and flaw correction processing.

【0031】まず、図5のステップS101において、
ユーザーが電源スイッチ15を投入(パワーON)する
ことにより、フローが開始する。なお、ユーザーが不図
示のシャッタボタンを半押しすることにより、スイッチ
SW1が投入(オン)され、全押しすることによりスイ
ッチSW2が投入(オン)されるものとする。
First, in step S101 of FIG.
When the user turns on the power switch 15 (power ON), the flow starts. The switch SW1 is turned on (ON) when the user half-presses a shutter button (not shown), and the switch SW2 is turned on (ON) when the user fully presses the shutter button.

【0032】ステップS102において、スイッチSW
1が投入されない場合には、電子カメラは待機状態に維
持されるが、スイッチSW1が投入されたとき、続くス
テップS103において、制御回路8による露出制御が
行われ、必要な絞り値とシャッタ速度から、露光時間T
が決定される。
In step S102, the switch SW
When the switch 1 is not turned on, the electronic camera is maintained in a standby state. However, when the switch SW1 is turned on, in the next step S103, the exposure control by the control circuit 8 is performed, and the necessary aperture value and shutter speed are determined. , Exposure time T
Is determined.

【0033】続くステップS104において、制御回路
8は、不図示の測距回路により被写体までの距離を求め
て、レンズ駆動回路14によりレンズ11を合焦位置へ
と駆動する。
In the following step S104, the control circuit 8 obtains the distance to the object by a distance measuring circuit (not shown), and drives the lens 11 to the in-focus position by the lens driving circuit 14.

【0034】更にステップS105において、スイッチ
SW2が投入されない(すなわち、シャッタボタンが全
押しされない)場合には、デジタルスチルカメラは待機
状態に維持されるが、スイッチSW2が投入されたと
き、続くステップS106において、制御回路8により
シャッタが駆動され、露光時間Tで露出が行われる。
In step S105, when the switch SW2 is not turned on (that is, the shutter button is not fully pressed), the digital still camera is kept in a standby state. In, the shutter is driven by the control circuit 8, and the exposure is performed for the exposure time T.

【0035】かかる露出によりCCD1に電荷が蓄積さ
れた後、ステップS107において、電荷の転送が行わ
れる。このように転送された電荷は、A/D変換後画像
用メモリ5に画素毎に、画像データとして記憶される。
After the charges are accumulated in the CCD 1 by the exposure, the charges are transferred in step S107. The charges transferred in this manner are stored as image data for each pixel in the A / D converted image memory 5.

【0036】ステップS108において、露光時間Tが
1/8秒より長いか判断される。露光時間Tが1/8秒
より長ければ、フローはステップS109へと移行し、
図6に示す信号処理及びキズ補正処理のサブルーチンが
開始される。まず、ステップS109aにおいて、記憶
された画像データを5×5の画素領域で読み込む。続く
ステップS109bにおいて、キズを検出する。より具
体的には、注目画素(5×5画素領域の中心)と周辺画
素の画素信号の差を求める。ステップS109cにおい
て、かかる差が閾値より大きい場合には、注目画素は欠
陥画素である(すなわちキズ有り)と判断する。キズが
あった場合には、ステップS109dにおいて後述する
態様でキズ補正を行う。一方、キズがなければ、そのま
ま信号処理を行う(ステップS109e)。以上の処理
を、画素領域を順繰りに変えながら(ステップS109
g)画素全体について行った後、最後のデータについて
検出が終了したことが判断されれば(ステップS109
f)、フローは図5のステップS112へと戻されるよ
うになっている。尚、画像データを処理しながら白キズ
の検出や補正を行うのであるから、白キズ補正が完了す
るまでの時間は比較的長くはなるが、ユーザは長時間露
光であることを十分意識しているので、処理時間が長く
てもあまり気にしないと考えられる。
In step S108, it is determined whether the exposure time T is longer than 1/8 second. If the exposure time T is longer than 1/8 second, the flow moves to step S109,
The subroutine of signal processing and flaw correction processing shown in FIG. 6 is started. First, in step S109a, the stored image data is read in a 5 × 5 pixel area. In the following step S109b, a flaw is detected. More specifically, the difference between the pixel signal of the target pixel (the center of the 5 × 5 pixel area) and the pixel signal of the peripheral pixel is obtained. In step S109c, if the difference is larger than the threshold value, it is determined that the pixel of interest is a defective pixel (that is, there is a flaw). If there is a flaw, flaw correction is performed in step S109d in a manner described later. On the other hand, if there is no flaw, the signal processing is performed as it is (step S109e). The above processing is performed while sequentially changing the pixel area (step S109).
g) If it is determined that the detection has been completed for the last data after performing for all the pixels (step S109)
f), the flow is returned to step S112 in FIG. In addition, since white flaw detection and correction are performed while processing image data, the time until completion of white flaw correction is relatively long, but the user should be fully aware of long exposure. It is thought that even if the processing time is long, it does not matter much.

【0037】一方、図5のステップS108において、
露光時間Tが1/8秒以下であると判断されれば、対応
する白キズの検出結果であるデータがメモり9に記憶さ
れているので、かかるデータを読み込んで、白キズの補
正を行う(ステップS110)。かかる補正は、補正の
対象となる画素が予め記憶されているので、迅速に行わ
れるようになっている。その後、ステップS111にお
いて、画素データに対して信号処理がなされるようにな
っている。
On the other hand, in step S108 of FIG.
If it is determined that the exposure time T is 秒 second or less, the data as the detection result of the corresponding white flaw is stored in the memory 9, and such data is read to correct the white flaw. (Step S110). Such correction is performed quickly because the pixels to be corrected are stored in advance. Thereafter, in step S111, signal processing is performed on the pixel data.

【0038】ステップS112においては、以上のよう
にして信号処理された画像データが圧縮される。制御回
路8は、最終的にステップS113において記録部7に
画像を記録し、その後フローをステップS102へと戻
すようになっている。
In step S112, the image data subjected to the signal processing as described above is compressed. The control circuit 8 finally records an image in the recording unit 7 in step S113, and thereafter returns the flow to step S102.

【0039】次に、上述したステップS109d(図
6)及びステップ110(図5)における白キズの補正
の態様について述べる。制御回路8は、ステップS10
9b(図6)またはステップS110(図5)において
特定された欠陥画素に対応する、画像用メモリ5に記憶
された画像データ内の電荷量に、後述する態様で補正処
理を加える。
Next, the manner of correcting white spots in steps S109d (FIG. 6) and step 110 (FIG. 5) will be described. The control circuit 8 determines in step S10
9b (FIG. 6) or the charge amount in the image data stored in the image memory 5 corresponding to the defective pixel specified in step S110 (FIG. 5) is corrected in a manner described later.

【0040】尚、本実施の形態における画像データの補
正においては、欠陥を有する画素に隣接する画素の電荷
量を平均することによって、かかる欠陥を有する画素の
電荷量を新たに求めるようにしている。しかしながら、
欠陥を有する画素からの電荷量に対して補正値を加減乗
除したり、補正項の乗除を行うことによっても、画像デ
ータの補正を行うことは可能である。
In the correction of the image data in the present embodiment, the charge amount of the defective pixel is newly obtained by averaging the charge amounts of the pixels adjacent to the defective pixel. . However,
It is also possible to correct image data by adding, subtracting, multiplying, and multiplying a correction value with respect to a charge amount from a defective pixel, or by multiplying and multiplying a correction term.

【0041】まず、図7に示すように予めCCD1に設
けられたカラーモザイクフィルタが、A,B,C,D
(たとえばYe、Cy、G、Mg)の4色のカラーフィ
ルタの場合、制御回路8が、欠陥画素である画素An、n
の電荷量を求めるときは、以下のいずれかの計算式に基
づき計算を行う。尚、後述する符号An、nは、n列n行
目の画素のフィルタ色A(すなわちYe)にかかる電荷
量を意味する。
First, as shown in FIG. 7, the color mosaic filters provided in the CCD 1 in advance are A, B, C, D
In the case of four color filters (for example, Ye, Cy, G, and Mg), the control circuit 8 controls the defective pixels A n, n
Is calculated based on one of the following formulas. The symbols A n and n described later mean the amounts of charges applied to the filter color A (that is, Ye) of the pixel in the n-th column and the n-th row.

【0042】 (i)第1の計算式 An、n=(An-2、n-2+An-2、n+An-2、n+2+An、n-2 +An、n+2+An+2、n-2+An+2、n+An+2、n+2)/8 (1) (ii)第2の計算式 An、n=(An-2、n+An、n-2+An、n+2+An+2、n)/4 (2) (iii)第3の計算式 An、n=(An、n-2+An、n+2)/2 or (An-2、n+An+2、n)/2 (3)(I) First Calculation Formula An, n = (A n−2, n−2 + A n−2, n + A n−2, n + 2 + A n, n−2 + A n, n + 2 + An + 2, n-2 + An + 2, n + An + 2, n + 2 ) / 8 (1) (ii) Second calculation formula An, n = ( An-2, n + A) n, n−2 + A n, n + 2 + A n + 2, n ) / 4 (2) (iii) Third calculation formula An, n = (A n, n−2 + A n, n + 2 ) / 2 or ( An-2, n + An + 2, n ) / 2 (3)

【0043】上記(1)式の平均によれば、欠陥画素を
中心とする5×5画素領域内で、欠陥画素と同じ色のカ
ラーフィルタが設けられた8画素の電荷量の平均値を、
欠陥画素の電荷量に置き換えるため、かかる画素の電荷
量と隣接する画素の電荷量の変化が自然となり、それに
より画質の向上を図ることができる。
According to the average of the above equation (1), within the 5 × 5 pixel area centered on the defective pixel, the average value of the charge amounts of the eight pixels provided with the color filters of the same color as the defective pixel is calculated as:
Since the charge amount of the defective pixel is replaced with the charge amount of the defective pixel, the change in the charge amount of such a pixel and the charge amount of an adjacent pixel become natural, whereby the image quality can be improved.

【0044】上記(2)式の平均によれば、欠陥画素を
中心とする5×5画素領域内で、欠陥画素と同じ色のカ
ラーフィルタが設けられた画素であって、欠陥画素と同
じ列及び同じ行の4画素の電荷量の平均値を、欠陥画素
の電荷量に置き換えており、画質の向上と処理速度の向
上との調和を図ることができる。
According to the average of the above equation (2), a pixel provided with a color filter of the same color as the defective pixel in a 5 × 5 pixel area centered on the defective pixel and having the same column as the defective pixel In addition, the average value of the charge amounts of the four pixels in the same row is replaced with the charge amount of the defective pixel, and it is possible to achieve harmony between improvement in image quality and improvement in processing speed.

【0045】上記(3)式の平均によれば、欠陥画素を
中心とする5×5画素領域内で、欠陥画素と同じ色のカ
ラーフィルタが設けられた画素であって、欠陥画素と同
じ列又は同じ行の2画素の電荷量の平均値を、欠陥画素
の電荷量に置き換えており、処理速度の向上を図ること
ができる。尚、A以外のフィルタ色B、C、Dについて
も、同様に補正処理を行う。
According to the average of the above equation (3), a pixel provided with a color filter of the same color as the defective pixel in a 5 × 5 pixel area centered on the defective pixel, and having the same column as the defective pixel Alternatively, the average value of the charge amounts of the two pixels in the same row is replaced with the charge amount of the defective pixel, so that the processing speed can be improved. Note that the correction processing is similarly performed for the filter colors B, C, and D other than A.

【0046】一方、図8に示すように、カラーモザイク
フィルタがA,B,C(たとえばR、G、B)の3色の
フィルタであり、かつフィルタ色B、Cにかかる画素が
欠陥画素であった場合にも、前記(1)乃至(3)式を
用いて、電荷量の置き換えを行うことができる。一方、
フィルタ色Aにかかる画素が欠陥画素であった場合、以
下のいずれかの計算式に基づき計算を行うことができ
る。
On the other hand, as shown in FIG. 8, the color mosaic filter is a filter of three colors A, B, and C (for example, R, G, and B), and pixels relating to filter colors B and C are defective pixels. In such a case, the charge amount can be replaced by using the expressions (1) to (3). on the other hand,
When the pixel related to the filter color A is a defective pixel, the calculation can be performed based on any of the following formulas.

【0047】 (i)第1の計算式 An、n=(An-1、n-1+An-1、n+1+An+1、n-1+An+1、n+1)/4 (4) (ii)第2の計算式 An、n=(An-2、n-2+An-2、n+An-2、n+2+An-1、n-1 +An-1、n+1+An、n-2+An、n+2+An+1、n-1 +An+1、n+1+An+2、n-2+An+2、n+An+2、n+2)/12 (5)(I) First Calculation Formula An, n = (A n−1, n−1 + A n−1, n + 1 + A n + 1, n−1 + A n + 1, n + 1 ) / 4 (4) (ii) Second calculation formula An, n = ( An-2, n-2 + An-2, n + An-2, n + 2 + An-1, n-1) + An-1, n + 1 + An, n-2 + An, n + 2 + An + 1, n-1 + An + 1, n + 1 + An + 2, n-2 + An + 2, n + A n + 2, n + 2 ) / 12 (5)

【0048】上記(4)式の平均によれば、欠陥画素を
中心とする3×3画素領域内で、欠陥画素と同じA色の
カラーフィルタが設けられた4隅の4画素の電荷量の平
均値を、欠陥画素の電荷量に置き換えており、画質の向
上と処理速度の向上との調和を図ることができる。
According to the average of the above equation (4), within the 3 × 3 pixel area centered on the defective pixel, the charge amount of the four pixels at the four corners where the same A color filter as the defective pixel is provided is provided. Since the average value is replaced by the charge amount of the defective pixel, it is possible to achieve harmony between improvement in image quality and improvement in processing speed.

【0049】一方、上記(5)式の平均によれば、欠陥
画素を中心とする5×5画素領域内で、欠陥画素と同じ
A色のカラーフィルタが設けられた12画素の平均値
を、欠陥画素の電荷量に置き換えており、画質の向上を
図ることができる。
On the other hand, according to the average of the above equation (5), within the 5 × 5 pixel area centered on the defective pixel, the average value of 12 pixels provided with the same A color filter as the defective pixel is calculated as The charge amount of the defective pixel is replaced, and the image quality can be improved.

【0050】更に、図9に示すような3板式のCCDを
用いる場合には、A、B、C(たとえばR、G、B)の
カラーフィルタが、各CCDに設けられているため、欠
陥画素である画素An、nの電荷量を補正するときは、以
下のいずれかの計算式に基づき計算を行うことができ
る。
Further, when a three-plate CCD as shown in FIG. 9 is used, A, B, C (for example, R, G, B) color filters are provided for each CCD, so that defective pixels When correcting the charge amounts of the pixels An and n , the calculation can be performed based on any of the following formulas.

【0051】 (i)第1の計算式 An、n=(An-1、n-1+An-1、n+An-1、n+1+An、n-1 +An、n+1+An+1、n-1+An+1、n+An+1、n+1)/8 (6) (ii)第2の計算式 An、n=(An-1、n-1+An-1、n+1+An+1、n-1+An+1、n+1)/4 (7) (iii)第3の計算式 An、n=(An-1、n+An、n-1+An、n+1+An+1、n)/4 (8) (iv)第4の計算式 An、n=(An-1、n+An+1、n)/2 (9) (v)第5の計算式 An、n=(An、n-1+An、n+1)/2 (10) (vi)第6の計算式 An、n=(An-1、n-1+An+1、n+1)/2 (11) (vii)第7の計算式 An、n=(An-1、n+1+An+1、nー1)/2 (12)(I) First calculation formula An, n = (A n−1, n−1 + A n−1, n + A n−1, n + 1 + A n, n−1 + A n, n + 1 + An + 1, n-1 + An + 1, n + An + 1, n + 1 ) / 8 (6) (ii) Second calculation formula An, n = ( An-1, n- 1 + A n−1, n + 1 + A n + 1, n−1 + A n + 1, n + 1 ) / 4 (7) (iii) Third formula: An, n = (A n−1, n + An, n-1 + An, n + 1 + An + 1, n ) / 4 (8) (iv) Fourth calculation formula An, n = ( An-1, n + An + 1, n ) / 2 (9) (v) Fifth calculation formula An, n = ( An, n-1 + An, n + 1 ) / 2 (10) (vi) Sixth calculation formula An, n = (A n−1, n−1 + A n + 1, n + 1 ) / 2 (11) (vii) Seventh calculation formula An, n = (A n−1, n + 1 + A n +) 1, n-1 ) / 2 (12)

【0052】(6)式に基づく計算は、欠陥画素に隣接
する8画素の電荷量の平均値を求めるものであり、
(7)式に基づく計算は、欠陥画素を中心とした3×3
画素領域内の4隅の4画素の電荷量の平均値を求めるも
のである。
The calculation based on the equation (6) is to calculate the average value of the electric charges of eight pixels adjacent to the defective pixel.
The calculation based on the expression (7) is 3 × 3 around the defective pixel.
The average value of the charge amounts of the four pixels at the four corners in the pixel area is obtained.

【0053】(8)式に基づく計算は、欠陥画素に隣接
する上下左右4画素の電荷量の平均値を求めるものであ
り、(9)式に基づく計算は、欠陥画素に隣接する上下
2画素の電荷量の平均値を求めるものである。
The calculation based on the equation (8) is to calculate the average value of the electric charges of the four pixels above, below, left and right adjacent to the defective pixel. The calculation based on the equation (9) is based on the two pixels above and below the defective pixel. Is to calculate the average value of the charge amounts.

【0054】(10)式に基づく計算は、欠陥画素に隣
接する左右2画素の電荷量の平均値を求めるものであ
り、(11)式に基づく計算は、欠陥画素に隣接する左
上及び右下の2画素の電荷量の平均値を求めるものであ
り、(12)式に基づく計算は、欠陥画素に隣接する右
上及び左下の2画素の電荷量の平均値を求めるものであ
る。かかる計算式は、要求される画質と処理速度とから
適宜選択すればよい。
The calculation based on the expression (10) is to calculate the average value of the electric charge amounts of two pixels on the left and right adjacent to the defective pixel. The calculation based on the expression (11) is the upper left and lower right adjacent to the defective pixel. The calculation based on the expression (12) is to calculate the average value of the charge amounts of the two upper right and lower left pixels adjacent to the defective pixel. Such a calculation formula may be appropriately selected from required image quality and processing speed.

【0055】以上述べたように本実施の形態によれば、
露光時間が短い場合には、メモリ9に記憶された白キズ
のデータを用いて白キズの補正を行うようにしているの
で、かかる補正を迅速に行うことができる。一方、露光
時間が長いときは、撮像後に白キズ検出を行うようにし
たので、白キズにかかるデータをメモり9に記憶する必
要がなく、それによりデジタルスチルカメラの生産工程
における検査を効率よく行えると共に、メモリ9の記憶
容量を小さくすることができる。
As described above, according to the present embodiment,
When the exposure time is short, the correction of the white defect is performed using the data of the white defect stored in the memory 9, so that the correction can be performed quickly. On the other hand, when the exposure time is long, white flaw detection is performed after imaging, so that it is not necessary to store data relating to white flaws in the memory 9, thereby efficiently performing inspection in the production process of the digital still camera. In addition to this, the storage capacity of the memory 9 can be reduced.

【0056】図10は、デジタルスチルカメラの第2の
実施の形態を示す図である。図10に示す構成によって
も、第1の実施の形態と同様にして、欠陥画素の検出及
び欠陥画素に対応する電荷量の補正を行うことが可能と
なる。尚、第2の実施の形態においては、図1の構成と
同一の要素には同一符号を付して説明を省略する。
FIG. 10 is a diagram showing a second embodiment of the digital still camera. According to the configuration shown in FIG. 10, it is possible to detect a defective pixel and correct the charge amount corresponding to the defective pixel in the same manner as in the first embodiment. In the second embodiment, the same elements as those in the configuration of FIG.

【0057】図10において、A/D変換回路4で変換
されたディジタル信号が出力される信号処理部41に
は、信号処理回路42と、画素欠陥検出手段としての画
素欠陥検出回路43と、画素欠陥補正手段としての画素
欠陥補正回路44とが備えられている。
In FIG. 10, the signal processing section 41 to which the digital signal converted by the A / D conversion circuit 4 is output includes a signal processing circuit 42, a pixel defect detection circuit 43 as pixel defect detection means, and a pixel defect detection circuit. A pixel defect correction circuit 44 as defect correction means is provided.

【0058】信号処理回路42は、輝度処理や色処理を
施して、たとえば輝度信号と色差信号としてのディジタ
ルビデオ信号に変換する回路である。画素欠陥検出回路
43は、第1の実施の形態と同様にして白キズの欠陥画
素を検出する回路であり、この画素欠陥検出回路43で
検出された欠陥画素の位置情報(二次元座標)がメモリ
9に記憶されるようになっている。
The signal processing circuit 42 is a circuit which performs a luminance process and a color process and converts it into, for example, a luminance signal and a digital video signal as a color difference signal. The pixel defect detection circuit 43 is a circuit that detects a defective pixel having a white defect in the same manner as in the first embodiment, and the position information (two-dimensional coordinates) of the defective pixel detected by the pixel defect detection circuit 43 is It is stored in the memory 9.

【0059】画素欠陥補正回路44は、メモリ9に記憶
されている欠陥画素の位置情報(二次元座標)に基づい
て、欠陥画素にかかる電荷量を補正し、補正された電荷
量に基づく画像データを信号処理回路42に出力するよ
うになっている。
The pixel defect correction circuit 44 corrects the amount of charge applied to the defective pixel based on the position information (two-dimensional coordinates) of the defective pixel stored in the memory 9 and the image data based on the corrected amount of charge To the signal processing circuit 42.

【0060】以上、本発明を実施の形態を参照して説明
してきたが、本発明は上記実施の形態に限定して解釈さ
れるべきではなく、適宜変更・改良が可能であることは
もちろんである。たとえば、本実施の形態においては、
露光時間が1/8秒以下か否かで処理態様を変えるよう
にしているが、かかる時間は撮像素子の種類と共に変動
するものであるから、実際の画素欠陥に応じて変えれば
よいものであり、通常のデジタルスチルカメラの場合に
は、1/8秒乃至1/2秒程度の範囲内に収まるべきも
のである。
Although the present invention has been described with reference to the embodiments, it should be understood that the present invention should not be construed as being limited to the above-described embodiments, and that modifications and improvements can be made as appropriate. is there. For example, in this embodiment,
The processing mode is changed depending on whether or not the exposure time is 1/8 second or less. However, since the time varies with the type of the imaging device, it may be changed according to the actual pixel defect. In the case of an ordinary digital still camera, it should fall within the range of about 1/8 second to 1/2 second.

【0061】[0061]

【発明の効果】本発明の電子カメラによれば、複数の画
素を有する固体撮像素子と、前記固体撮像素子の欠陥画
素に関する情報を記憶する記憶手段と、注目画素に関す
る情報を、所定の情報と比較することにより、注目画素
が欠陥画素であるか否かを検出する検出手段とを有して
いるので、たとえば短時間の露光時には、予め記憶され
た欠陥画素に関する情報に基づき画素欠陥を補正するよ
うにすれば、かかる補正処理を迅速に行うことができ
る。一方、長時間露光時には、前記検出手段により欠陥
画素を検出するようにすれば、記憶すべき欠陥画素に関
する情報が少なくなり、従って前記記憶手段の記憶容量
が小さくて足りることから、電子カメラのコストを低く
抑えることができ、また電子カメラの生産工程における
欠陥画素に関するデータ採取時間を短縮することができ
る。
According to the electronic camera of the present invention, a solid-state imaging device having a plurality of pixels, storage means for storing information on defective pixels of the solid-state imaging device, and information on a pixel of interest stored in predetermined information and Since it has a detecting means for detecting whether or not the pixel of interest is a defective pixel by comparison, a pixel defect is corrected based on the information on the defective pixel stored in advance, for example, during short-time exposure. By doing so, such correction processing can be performed quickly. On the other hand, at the time of long-time exposure, if a defective pixel is detected by the detection means, the information on the defective pixel to be stored is reduced, and the storage capacity of the storage means is small. Can be suppressed, and the time for collecting data on defective pixels in the production process of the electronic camera can be shortened.

【0062】本発明の電子カメラによれば、複数の画素
を有する固体撮像素子と、前記固体撮像素子の欠陥画素
に関する情報を記憶する記憶手段と、注目画素に関する
情報を、所定の情報と比較することにより、注目画素が
欠陥画素であるか否かを検出する検出手段と、撮影時に
おける露光時間の情報に基づいて、前記記憶手段に記憶
された前記欠陥画素に関する情報から欠陥画素を特定す
るか、あるいは前記検出手段により欠陥画素を検出する
かを決定する決定手段とを有するので、たとえば短時間
の露光時には、予め記憶された欠陥画素に関する情報に
基づき画素欠陥を補正するようにすれば、かかる補正処
理を迅速に行うことができる。一方、長時間露光時に
は、前記検出手段により欠陥画素を検出するように前記
決定手段が決定すれば、記憶すべき欠陥画素に関する情
報が少なくなり、従って前記記憶手段の記憶容量が小さ
くて足りることから、電子カメラのコストを低く抑える
ことができ、また電子カメラの生産工程における欠陥画
素に関するデータ採取時間を短縮することができる。
According to the electronic camera of the present invention, the solid-state imaging device having a plurality of pixels, the storage means for storing information on defective pixels of the solid-state imaging device, and the information on the target pixel are compared with predetermined information. Thus, based on the information on the exposure time at the time of photographing, whether the target pixel is a defective pixel or not, based on the information on the defective pixel, Or a determining means for determining whether to detect a defective pixel by the detecting means. For example, at the time of short-time exposure, it is possible to correct a pixel defect based on information about a defective pixel stored in advance. Correction processing can be performed quickly. On the other hand, at the time of long exposure, if the determining means determines that the defective pixel is detected by the detecting means, the information on the defective pixel to be stored is reduced, and therefore the storage capacity of the storage means is small. In addition, the cost of the electronic camera can be kept low, and the time for collecting data on defective pixels in the production process of the electronic camera can be shortened.

【0063】本発明の信号補正方法によれば、電子カメ
ラの露光時間が、第1の露光時間と第2の露光時間のい
ずれかであるかを判断するステップと、前記露光時間が
前記第1の露光時間であるときは、予め記憶された固体
撮像素子の欠陥画素に関する情報に基づいて欠陥画素を
特定し、一方前記露光時間が前記第2の露光時間である
ときは、注目画素に関する情報を所定の情報と比較して
欠陥画素を検出するステップと、前記検出された欠陥画
素からの出力信号を補正する補正するステップとを有す
るので、たとえば第1の露光時間を短時間と決め、予め
記憶された欠陥画素に関する情報に基づき欠陥画素から
の出力信号を補正するようにすれば、かかる補正処理を
迅速に行うことができる。一方、第2の露光時間を長い
露光時間と決め、注目画素に関する情報を所定の情報と
比較して欠陥画素を検出するようにすれば、記憶すべき
欠陥画素に関する情報が少なくなり、従って前記記憶手
段の記憶容量が小さくて足りることから、電子カメラの
コストを低く抑えることができ、また電子カメラの生産
工程における欠陥画素に関するデータ採取時間を短縮す
ることができる。
According to the signal correction method of the present invention, it is determined whether the exposure time of the electronic camera is one of the first exposure time and the second exposure time, and the exposure time is determined by the first exposure time. When the exposure time is, the defective pixel is specified based on the previously stored information on the defective pixel of the solid-state imaging device. On the other hand, when the exposure time is the second exposure time, the information on the pixel of interest is Since the method includes a step of detecting a defective pixel by comparing with predetermined information and a step of correcting an output signal from the detected defective pixel, for example, the first exposure time is determined to be short and stored in advance. If the output signal from the defective pixel is corrected based on the information on the defective pixel, the correction process can be performed quickly. On the other hand, if the second exposure time is determined to be a long exposure time and the information on the pixel of interest is compared with predetermined information to detect defective pixels, the information on defective pixels to be stored is reduced. Since the storage capacity of the means is small, the cost of the electronic camera can be kept low, and the time for collecting data on defective pixels in the production process of the electronic camera can be shortened.

【図面の簡単な説明】[Brief description of the drawings]

【図1】第1の実施の形態にかかる電子カメラとしての
デジタルスチルカメラの構成を示す図である。
FIG. 1 is a diagram showing a configuration of a digital still camera as an electronic camera according to a first embodiment.

【図2】4色のフィルタの例を示す図である。FIG. 2 is a diagram illustrating an example of a four-color filter.

【図3】図2のフィルタを2次元的に配置した状態を示
す図である。
FIG. 3 is a diagram showing a state in which the filters of FIG. 2 are two-dimensionally arranged.

【図4】単色フィルタを配置した状態を示す図である。FIG. 4 is a diagram showing a state in which a monochromatic filter is arranged.

【図5】本実施の形態にかかる電子カメラを用いて、実
際に被写体を撮像する場合の処理を示すフローチャート
である。
FIG. 5 is a flowchart illustrating a process when an image of a subject is actually captured using the electronic camera according to the embodiment;

【図6】信号処理及びキズ補正処理を行うサブルーチン
である。
FIG. 6 is a subroutine for performing signal processing and flaw correction processing.

【図7】CCDに取り付けられるカラーモザイクフィル
タを、模式的に示す図である。
FIG. 7 is a diagram schematically showing a color mosaic filter attached to a CCD.

【図8】図7とは異なるカラーモザイクフィルタを、模
式的に示す図である。
FIG. 8 is a diagram schematically illustrating a color mosaic filter different from FIG. 7;

【図9】3板式CCDに取り付けられるカラーモザイク
フィルタを、模式的に示す図である。
FIG. 9 is a diagram schematically showing a color mosaic filter attached to a three-plate CCD.

【図10】デジタルスチルカメラの第2の実施の形態を
示す図である。
FIG. 10 is a diagram showing a second embodiment of the digital still camera.

【符号の説明】[Explanation of symbols]

1 CCD 2 駆動回路 3 CDS回路 4 A/D変換回路 5 画像用メモリ 6 CPU 7 記憶部 8 制御回路 9 メモリ 10 液晶表示装置 11 レンズ 12 絞り 13 温度センサ 14 レンズ駆動回路 15 電源スイッチ 16 モードスイッチ 17 タイマ 21 拡散板 41 信号処理部 42 信号処理回路 43 画素欠陥検出回路 44 画素欠陥補正回路 Reference Signs List 1 CCD 2 drive circuit 3 CDS circuit 4 A / D conversion circuit 5 image memory 6 CPU 7 storage unit 8 control circuit 9 memory 10 liquid crystal display device 11 lens 12 aperture 13 temperature sensor 14 lens drive circuit 15 power switch 16 mode switch 17 Timer 21 Diffusion plate 41 Signal processing unit 42 Signal processing circuit 43 Pixel defect detection circuit 44 Pixel defect correction circuit

Claims (11)

【特許請求の範囲】[Claims] 【請求項1】 複数の画素を有する固体撮像素子と、 前記固体撮像素子の欠陥画素に関する情報を記憶する記
憶手段と、 注目画素に関する情報を、所定の情報と比較することに
より、前記注目画素が欠陥画素であるか否かを検出する
検出手段とを有することを特徴とする電子カメラ。
1. A solid-state imaging device having a plurality of pixels, a storage unit for storing information on defective pixels of the solid-state imaging device, and comparing information on a pixel of interest with predetermined information, so that the pixel of interest is An electronic camera comprising: a detection unit configured to detect whether the pixel is a defective pixel.
【請求項2】 複数の画素を有する固体撮像素子と、 前記固体撮像素子の欠陥画素に関する情報を記憶する記
憶手段と、 注目画素に関する情報を、所定の情報と比較することに
より、前記注目画素が欠陥画素であるか否かを検出する
検出手段と、 撮影時における露光時間の情報に基づいて、前記記憶手
段に記憶された前記欠陥画素に関する情報から欠陥画素
を特定するか、あるいは前記検出手段により欠陥画素を
検出するかを決定する決定手段とを有することを特徴と
する電子カメラ。
2. A solid-state imaging device having a plurality of pixels; storage means for storing information on defective pixels of the solid-state imaging device; and comparing the information on the pixel of interest with predetermined information, so that the pixel of interest is Detecting means for detecting whether or not the pixel is a defective pixel, and identifying a defective pixel from information on the defective pixel stored in the storage means based on information on an exposure time at the time of photographing, or A determination unit for determining whether to detect a defective pixel.
【請求項3】 前記記憶手段に記憶された前記欠陥画素
に関する情報から特定された欠陥画素からの出力信号、
又は前記検出手段により検出された欠陥画素からの出力
信号を補正する補正手段を更に有することを特徴とする
請求項1又は2に記載の電子カメラ。
3. An output signal from a defective pixel specified from information on the defective pixel stored in the storage means,
3. The electronic camera according to claim 1, further comprising a correction unit configured to correct an output signal from the defective pixel detected by the detection unit.
【請求項4】 前記記憶手段は、複数の露光時間に対応
した欠陥画素に関する情報を記憶していることを特徴と
する請求項1乃至3のいずれかに記載の電子カメラ。
4. The electronic camera according to claim 1, wherein the storage unit stores information on defective pixels corresponding to a plurality of exposure times.
【請求項5】 前記所定の情報は、前記注目画素の周辺
に位置する周辺画素のデータより求められることを特徴
とする請求項1乃至4のいずれかに記載の電子カメラ。
5. The electronic camera according to claim 1, wherein the predetermined information is obtained from data of peripheral pixels located around the pixel of interest.
【請求項6】 前記決定手段は、撮影時における露光時
間の情報に基づいて、撮影が長時間露光であると判断し
た場合には、前記検出手段により欠陥画素を検出するよ
う決定することを特徴とする請求項1乃至5のいずれか
に記載の電子カメラ。
6. The method according to claim 1, wherein the determining unit determines that the defective pixel is detected by the detecting unit when determining that the image capturing is a long-time exposure based on information on an exposure time at the time of image capturing. The electronic camera according to any one of claims 1 to 5, wherein
【請求項7】 前記長時間露光とは、露光時間が1/8
秒より長いことを特徴とする請求項6に記載の電子カメ
ラ。
7. The long-time exposure means that the exposure time is 1/8
7. The electronic camera according to claim 6, wherein the time is longer than seconds.
【請求項8】 固体撮像素子を有する電子カメラの信号
補正方法であって、 前記電子カメラの露光時間が、第1の露光時間と第2の
露光時間のいずれかであるかを判断するステップと、 前記露光時間が前記第1の露光時間であるときは、予め
記憶された固体撮像素子の欠陥画素に関する情報に基づ
いて欠陥画素を特定し、一方前記露光時間が前記第2の
露光時間であるときは、注目画素に関する情報を所定の
情報と比較して欠陥画素を検出するステップと、 前記検出された欠陥画素からの出力信号を補正する補正
するステップとを有することを特徴とする信号補正方
法。
8. A signal correction method for an electronic camera having a solid-state imaging device, the method comprising: determining whether an exposure time of the electronic camera is one of a first exposure time and a second exposure time. When the exposure time is the first exposure time, a defective pixel is specified based on information on a defective pixel of the solid-state imaging device stored in advance, while the exposure time is the second exposure time. A signal correction method comprising the steps of: detecting a defective pixel by comparing information on a target pixel with predetermined information; and correcting the output signal from the detected defective pixel. .
【請求項9】 前記所定の情報は、前記注目画素の周辺
に位置する周辺画素のデータより求められることを特徴
とする請求項8に記載の信号補正方法。
9. The signal correction method according to claim 8, wherein the predetermined information is obtained from data of peripheral pixels located around the target pixel.
【請求項10】 前記第1の露光時間は所定時間以下で
あり、前記第2の露光時間は前記所定時間より長いこと
を特徴とする請求項8又は9に記載の信号補正方法。
10. The signal correction method according to claim 8, wherein the first exposure time is equal to or shorter than a predetermined time, and the second exposure time is longer than the predetermined time.
【請求項11】 前記所定時間は、1/8秒から1/2
秒までのいずれかの時間であることを特徴とする請求項
10に記載の信号補正方法。
11. The predetermined time is from 1/8 second to 1/2.
The signal correction method according to claim 10, wherein the time is any time up to seconds.
JP23794498A 1998-08-11 1998-08-11 Electronic camera and signal correction method Expired - Fee Related JP3767188B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP23794498A JP3767188B2 (en) 1998-08-11 1998-08-11 Electronic camera and signal correction method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP23794498A JP3767188B2 (en) 1998-08-11 1998-08-11 Electronic camera and signal correction method

Publications (2)

Publication Number Publication Date
JP2000059690A true JP2000059690A (en) 2000-02-25
JP3767188B2 JP3767188B2 (en) 2006-04-19

Family

ID=17022783

Family Applications (1)

Application Number Title Priority Date Filing Date
JP23794498A Expired - Fee Related JP3767188B2 (en) 1998-08-11 1998-08-11 Electronic camera and signal correction method

Country Status (1)

Country Link
JP (1) JP3767188B2 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002185857A (en) * 2000-12-08 2002-06-28 Olympus Optical Co Ltd Imaging device
JP2002330353A (en) * 2001-04-27 2002-11-15 Olympus Optical Co Ltd Imaging unit and method for correcting defective pixel
US7436451B2 (en) 2003-08-25 2008-10-14 Canon Kabushiki Kaisha Image sensing apparatus and its control method
US7602426B2 (en) 2005-07-25 2009-10-13 Fujifilm Corporation Digital camera and defect pixel compensation system
US7742086B2 (en) 2004-06-22 2010-06-22 Canon Kabushiki Kaisha Image processing apparatus and image processing method
US7978238B2 (en) 2002-02-20 2011-07-12 Canon Kabushiki Kaisha Image data correction processing based on sensitivity

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002185857A (en) * 2000-12-08 2002-06-28 Olympus Optical Co Ltd Imaging device
JP4515627B2 (en) * 2000-12-08 2010-08-04 オリンパス株式会社 Imaging device
JP2002330353A (en) * 2001-04-27 2002-11-15 Olympus Optical Co Ltd Imaging unit and method for correcting defective pixel
JP4546664B2 (en) * 2001-04-27 2010-09-15 オリンパス株式会社 Imaging apparatus and pixel defect correction method
US7978238B2 (en) 2002-02-20 2011-07-12 Canon Kabushiki Kaisha Image data correction processing based on sensitivity
US7436451B2 (en) 2003-08-25 2008-10-14 Canon Kabushiki Kaisha Image sensing apparatus and its control method
US7742086B2 (en) 2004-06-22 2010-06-22 Canon Kabushiki Kaisha Image processing apparatus and image processing method
US20100220224A1 (en) * 2004-06-22 2010-09-02 Canon Kabushiki Kaisha Image processing apparatus and image processing method
US8497922B2 (en) * 2004-06-22 2013-07-30 Canon Kabushiki Kaisha Image processing apparatus and image processing method
US7602426B2 (en) 2005-07-25 2009-10-13 Fujifilm Corporation Digital camera and defect pixel compensation system

Also Published As

Publication number Publication date
JP3767188B2 (en) 2006-04-19

Similar Documents

Publication Publication Date Title
JP3785520B2 (en) Electronic camera
TWI323382B (en)
CN101001319B (en) Image processing apparatus and image processing method
JP5541718B2 (en) Imaging device and defective pixel detection method thereof
JP2010062640A (en) Image capturing apparatus, method of controlling the same, and program
JP2003244712A (en) Imaging apparatus and system
JP2009027220A (en) Imaging apparatus, image processing method, and computer program
JP3854754B2 (en) Imaging apparatus, image processing apparatus and method, and memory medium
JP2009033321A (en) Image device, image processing method, and computer program
CN102870402B (en) Imaging device and formation method
JPH11239298A (en) Electronic camera, pixel signal correction method and recording medium
JP2009017475A (en) Defective pixel detecting device, imaging apparatus, and method for detecting defective pixel
JP2003023570A (en) Correcting method for image data and image signal processing apparatus
US20140307130A1 (en) Imaging device
JP2000059690A (en) Electronic camera and signal correcting method
JP2004015191A (en) Apparatus and method for correcting flaw in solid-state imaging device
JP5446955B2 (en) Imaging device
JP2003046871A (en) Image pickup device
JP2001057645A (en) Electronic camera
JP3864021B2 (en) Video camera
JP5299159B2 (en) Imaging apparatus and program
JP4192284B2 (en) Digital still camera
KR20100027943A (en) Imaging apparatus and imaging method
JP2001211388A (en) Image signal processing apparatus
JP2002218485A (en) Image data correction method and electronic camera

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050823

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050930

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060110

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060123

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090210

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100210

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110210

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110210

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120210

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120210

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130210

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130210

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140210

Year of fee payment: 8

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees