JP4235408B2 - ノイズ低減回路及び撮像装置 - Google Patents
ノイズ低減回路及び撮像装置 Download PDFInfo
- Publication number
- JP4235408B2 JP4235408B2 JP2002205606A JP2002205606A JP4235408B2 JP 4235408 B2 JP4235408 B2 JP 4235408B2 JP 2002205606 A JP2002205606 A JP 2002205606A JP 2002205606 A JP2002205606 A JP 2002205606A JP 4235408 B2 JP4235408 B2 JP 4235408B2
- Authority
- JP
- Japan
- Prior art keywords
- noise reduction
- luminance signal
- pixel
- imaging device
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003384 imaging method Methods 0.000 title claims description 18
- 238000003705 background correction Methods 0.000 claims description 25
- 230000002093 peripheral effect Effects 0.000 claims description 6
- 238000001914 filtration Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 10
- 238000006243 chemical reaction Methods 0.000 description 5
- 238000003708 edge detection Methods 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 238000000034 method Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000011946 reduction process Methods 0.000 description 2
- 238000002834 transmittance Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 210000003127 knee Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
- Picture Signal Circuits (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Color Television Image Signal Generators (AREA)
- Facsimile Image Signal Circuits (AREA)
- Studio Devices (AREA)
Description
【発明の属する技術分野】
本発明はシェーディング補正量の大きい画像周辺部のノイズ低減量を大きくするノイズ低減回路とこのノイズ低減回路を搭載した撮像装置に関する。
【0002】
【従来の技術】
デジタルスチルカメラやデジタルビデオカメラ等の撮像装置では、レンズを通して被写体画像を固体撮像素子に結像させるため、シェーディングが発生してしまう。即ち、図8に示す様に、レンズの透過率は、レンズの光軸を中心にレンズ周辺に行くに従って落ち、撮像画像の周辺部ほど暗い画像になってしまう。このため、撮像装置では、固体撮像素子の画素配置位置に応じた補正係数で各画素からの読出信号を補正し、光量の落ち込みをゲイン調整する様になっている。
【0003】
しかし、シェーディングを補正すると、画像周辺部は明るくなるが、画像周辺部のノイズも一緒にゲインが上がってしまい、撮像画像の周辺部ほどS/Nが劣化してしまう。このため、従来のシェーディング補正装置では、例えば特開2001―339736号公報に記載されている様に、シェーディング補正量とノイズ低減量とを関連付け、シェーディング補正量が大きい画像周辺部ほどノイズ低減量を大きくするようにしている。
【0004】
【発明が解決しようとする課題】
しかしながら、上述した従来技術に係るシェーディング補正装置では、シェーディング補正量と関連付けるノイズ低減量として、輪郭補正のゲイン量、コアリング量、色差LPFの周波数特性のみに限定しているため、ノイズ抑制が十分でない場合がある。例えば、高感度撮影を行った場合、画像に含まれるノイズレベルは大きく、このため、輪郭信号や色差信号のみをコントロールするだけでは十分でない。
【0005】
本発明の目的は、高感度撮影画像に対してシェーディング補正を行った場合でもシェーディング補正量に応じてノイズ低減を図ることができるノイズ低減回路と撮像装置を提供することにある。
【0006】
【課題を解決するための手段】
上記目的を達成するノイズ低減回路は、固体撮像素子の出力信号から得られる画素単位の輝度信号に対してノイズ低減処理を施すノイズ低減回路において、
処理対象の画素(以下、対象画素という。)の輝度信号を取り込み、該輝度信号と前記対象画素の周辺画素の輝度信号との差を求め、該差をしきい値と比較し、該差が該しきい値以下となる場合には前記対象画素の輝度信号の代わりに、該対象画素及び前記周辺画素の各輝度信号値をフィルタ処理した値を出力させる手段と、
前記しきい値をシェーディング補正量に応じて決定するしきい値決定手段とを備えたことを特徴とする。
この構成により、高感度撮影画像に対してシェーディング補正を行った場合でもシェーディング補正量に応じてノイズ低減を図ることが可能となる。
【0007】
上記目的を達成するノイズ低減回路はまた、固体撮像素子の出力から得られる画素単位の輝度信号に対してノイズ低減処理を施すノイズ低減回路において、前記ノイズ低減処理によるノイズ低減量をシェーディング補正量及び撮影モードが風景モードであるかポートレートモードであるかに応じて決定する手段を備えたことを特徴とする。
この構成により、風景モードによる撮像画像に対してよりも周辺ボケが気にならないポートレートモードによる撮像画像に対するノイズ低減量を大きくできる。
【0008】
上記目的を達成する撮像装置は、レンズと、該レンズを通して被写体画像を撮像する固体撮像素子と、上記のいずれかのノイズ低減回路とを備えたことを特徴とする。この構成により、高画質の画像を撮像することができる撮像装置が提供される。
【0009】
【発明の実施の形態】
以下、本発明の一実施形態について、図面を参照して説明する。
【0010】
図1は、本発明の一実施形態に係るノイズ低減回路を搭載したデジタルスチルカメラの構成図である。この例ではデジタルスチルカメラに本実施形態のノイズ低減回路を搭載しているが、デジタルビデオカメラ等の他の種類の撮像装置に本実施形態のノイズ低減回路を同様に搭載可能である。尚、本実施形態では、ノイズ低減回路をソフトウェアにて実現するが、これをハードウェア回路で実現することも可能である。
【0011】
図1に示すデジタルスチルカメラは、撮影レンズ10と、CCD等の固体撮像素子11と、この両者の間に設けられた絞り12と、赤外線カットフィルタ13と、光学ローパスフィルタ14とを備える。デジタルスチルカメラの全体を制御するCPU15は、フラッシュ用の発光部16及び受光部17を制御し、また、レンズ駆動部18を制御して撮影レンズ10の位置をフォーカス位置に調整し、絞り駆動部19を介し絞り12の開口量を制御して露光量が適正露光量となるように調整する。
【0012】
また、CPU15は、撮像素子駆動部20を介して固体撮像素子11を駆動し、撮影レンズ10を通して撮像した被写体画像を色信号として出力させる。また、CPU15には、操作部21を通してユーザの指示信号(後述する「ポートレートモード」「風景モード」の選択指示を含む。)が入力され、CPU15はこの指示に従って各種制御を行う。固体撮像素子11は、ハニカム画素配置のCCDやベイヤー方式のCCD、あるいはCMOSセンサである。
【0013】
デジタルスチルカメラの電気制御系は、固体撮像素子11の出力に接続されたアナログ信号処理部22と、このアナログ信号処理部22から出力されたRGBの色信号をデジタル信号に変換するA/D変換回路23とを備え、これらはCPU15によって制御される。
【0014】
更に、このデジタルスチルカメラの電気制御系は、メインメモリ24に接続されたメモリ制御部25と、詳細は後述するデジタル信号処理部26と、撮像画像をJPEG画像に圧縮したり圧縮画像を伸張したりする圧縮伸張処理部27と、測光データを積算してホワイトバランスのゲインを調整させる積算部28と、着脱自在の記録媒体29が接続される外部メモリ制御部30と、カメラ背面等に搭載された液晶表示部31が接続される表示制御部32とを備え、これらは、制御バス33及びデータバス34によって相互に接続され、CPU15からの指令によって制御される。
【0015】
図1に示すデジタル信号処理部26や、アナログ信号処理部22,A/D変換回路23等は、これを夫々別回路としてデジタルスチルカメラに搭載することもできるが、これらを固体撮像素子11と同一半導体基板上にLSI製造技術を用いて製造し、1つの固体撮像装置とするのがよい。
【0016】
図2は、図1に示すデジタル信号処理部26の詳細構成図である。このデジタル信号処理部26は、A/D変換回路23から出力されるデジタルのRGB色信号を取り込んでオフセット処理を行うオフセット補正回路41と、ホワイトバランスをとるゲイン補正回路42と、補正後の色信号に対してガンマ補正を行うガンマ補正回路43を備える。オフセット補正後の信号に対してリニアマトリクス処理やニー補正を行う場合には、ゲイン補正回路42とガンマ補正回路43との間で行う。
【0017】
このデジタル信号処理部26は更に、ガンマ補正後のRGB色信号を補間演算して各画素位置におけるRGB3色の信号を求めるRGB補間演算部44と、RGB信号から輝度信号Yと色差信号Cr,Cbとを求めるRGB/YC変換回路45と、輝度信号Yからノイズを低減するノイズフィルタ46と、ノイズ低減後の輝度信号Yに対して輪郭補正を行う輪郭補正回路47と、色差信号Cr,Cbに対して色差マトリクスを乗算して色調補正を行う色差マトリクス回路48とを備える。
【0018】
RGB補間演算部44は、3板式の撮像素子であれば不要であるが、本実施形態で使用する固体撮像素子11は単板式の固体撮像素子であり、各画素からは、R,G,Bのうちの一色の信号しか出力されないため、出力しない色、即ち、Rを出力する画素では、この画素位置においてG,Bの色信号がどの程度になるかを、周りの画素のG,B信号から補間演算により求めるものである。
【0019】
ノイズフィルタ46は、輝度信号Yからノイズを低減するものであり、本実施形態では、シェーディング補正情報(画素配置情報)が、ゲイン補正回路43と輪郭補正回路47の他に、このノイズフィルタ46にも入力され、詳細は後述するようにして輝度信号のノイズ低減処理を行う。
【0020】
図3は、ノイズフィルタ46の詳細構成図である。このノイズフィルタ46は、輝度信号Yを取り込み、メディアンフィルタ処理を施すメディアンフィルタ51と、同じく輝度信号Yを取り込んでエッジ判定を行い、詳細は後述するようにして選択信号を出力するエッジ判定部52と、輝度信号Yとメディアンフィルタ51の出力信号とを取り込み、前記の選択信号に基づいて輝度信号Yまたはメディアンフィルタ51の出力信号を選択し出力するセレクタ53とを備える。
【0021】
エッジ判定部52は、輝度信号Yを取り込んで画像中のエッジ部分を検出するエッジ検出部54と、エッジ検出部54の出力信号と輝度信号Yとシェーディング補正情報とに基づいて選択信号を生成しセレクタ53に出力するしきい値判定部55とを備える。
【0022】
次に、上述した構成のノイズフィルタ46におけるノイズ低減処理方法について説明する。
【0023】
図4は、ノイズフィルタ46の動作手順を示すフローチャートである。この例では、画素Eを中心とする例えば3×3=9の画素A,B,C,D,E,F,G,H,Iを考えるものとする。先ず、ステップS1で、3×3=9画素のうち中心の画素Eを除く他の8画素の輝度信号値の平均値Aveを算出する。そして、ステップS2で、画素Eの輝度信号値Eと上記平均値Aveとの差分の絶対値Devを算出する。このステップS1,S2の処理は、図3のエッジ検出部54が行う。
【0024】
次のステップS3で、しきい値判定部55は、上記の差分値Devがしきい値TH(Y)より大きいか否かを判定する。この判定結果が肯定(YES)の場合、即ち、Dev>TH(Y)の場合、しきい値判定部55は、セレクタ53に選択信号を出力し、後段(輪郭補正回路47)に出力させる画素Eの輝度信号値として、画素Eの輝度信号値としてセレクタ53に入力された信号そのものを出力させ(ステップS4)、画素Eの出力信号に対する処理を終了する。即ち、ステップS4では、画素Eの輝度信号に対してノイズ低減処理は行わない。
【0025】
ステップS3の判定結果が否定(NO)の場合、即ち、Dev≦TH(Y)の場合、しきい値判定部55は、セレクタ53に選択信号を出力し、後段(輪郭補正回路47)に出力させる画素Eの輝度信号値として、メディアンフィルタ51の出力信号を出力させ(ステップS5)、画素Eの出力信号に対する処理を終了する。即ち、ステップS5では、画素Eの輝度信号に対してノイズ低減処理を施す。
【0026】
図5は、メディアンフィルタ51の機能説明図である。メディアンフィルタ51は、ある画素Eの輝度信号値を出力する場合、この画素Eを中心とする例えば3×3=9画素の各輝度信号値を高い順(あるいは低い順)にソートし、その中央値を求める。図示する例では、輝度信号値“11”が中央値として求まる。画素Eの輝度信号値は図示する例では値“25”であるが、メディアンフィルタ51は、この画素Eの輝度信号値として、値“11”をセレクタ53に出力する。
【0027】
図6は、しきい値判定部55がステップS3で使用するしきい値TH(Y)の説明図である。しきい値TH(Y)は、輝度レベルY及びシェーディング補正量の関数として設定されており、入力してくる画素Eの輝度信号Yの値と、画素Eに対するシェーディング補正量とに基づいて決定される。このように、ノイズ低減処理(この実施形態では、メディアンフィルタ処理)を行うか否かを判定するしきい値TH(Y)を、輝度信号Yのみならずシェーディング補正量の関数として決定するため、シェーディング補正量に応じてノイズ低減量を大きくすることが可能となる。
【0028】
上述した実施形態では、ノイズフィルタ46にシェーディング補正情報(量)を入力して輝度信号Yのノイズ低減処理を行うか否かを判定するしきい値TH(Y)を決定したが、シェーディング補正量と撮影画像の種類とによって、ノイズ低減量を制御する構成とすることも可能である。
【0029】
図7は、撮影モードとシェーディング補正量とによってノイズ低減量を異ならせる例を示すグラフである。ノイズ低減量をシェーディング補正量に応じて決定する特性線を、撮影モードがポートレートモードの場合と、風景モードとで異なる特性線を用いる。これはポートレートモードで撮像した画像は、画像周辺をぼかしても弊害が少ないためであり、これに対して、風景モードで撮像した画像は、画像周辺にも主要な情報があり得るためである。従って、ポートレートモードによる撮像画像のノイズ低減量を、風景モードによる撮像画像のノイズ低減量に比較して大きくする。
【0030】
【発明の効果】
本発明によれば、輝度信号にかけるノイズ低減処理を行うか否かを判定するしきい値をシェーディング補正量に関連付けたため、高感度画像に対してもシェーディング補正量に応じたノイズ低減が可能となる。
【図面の簡単な説明】
【図1】本発明の一実施形態に係る撮像装置のブロック構成図である。
【図2】図1に示すデジタル信号処理部の詳細構成図である。
【図3】図2に示すノイズフィルタの詳細構成図である。
【図4】図3に示すノイズフィルタの処理手順を示すフローチャートである。
【図5】図3に示すメディアンフィルタの機能説明図である。
【図6】図3のしきい値判定部で使用するしきい値TH(Y)の説明図である。
【図7】ノイズ低減量と撮影モードとの関係を示すグラフである。
【図8】レンズの透過率とレンズ中心軸からの距離との関係を示すグラフである。
【符号の説明】
11 固体撮像素子
15 CPU
22 アナログ信号処理部
23 A/D変換回路23
26 デジタル信号処理部
46 ノイズフィルタ
51 メディアンフィルタ
52 エッジ判定部
53 セレクタ
54 エッジ検出部
55 しきい値判定部
Claims (3)
- 固体撮像素子の出力信号から得られる画素単位の輝度信号に対してノイズ低減処理を施すノイズ低減回路において、
処理対象の画素(以下、対象画素という。)の輝度信号を取り込み、該輝度信号と前記対象画素の周辺画素の輝度信号との差を求め、該差をしきい値と比較し、該差が該しきい値以下となる場合には前記対象画素の輝度信号の代わりに、該対象画素及び前記周辺画素の各輝度信号値をフィルタ処理した値を出力させる手段と、
前記しきい値をシェーディング補正量に応じて決定するしきい値決定手段とを備えたことを特徴とするノイズ低減回路。 - 固体撮像素子の出力から得られる画素単位の輝度信号に対してノイズ低減処理を施すノイズ低減回路において、前記ノイズ低減処理によるノイズ低減量をシェーディング補正量及び撮影モードが風景モードであるかポートレートモードであるかに応じて決定する手段を備えたことを特徴とするノイズ低減回路。
- レンズと、該レンズを通して被写体画像を撮像する固体撮像素子と、請求項1または請求項2に記載のノイズ低減回路とを備えたことを特徴とする撮像装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002205606A JP4235408B2 (ja) | 2002-07-15 | 2002-07-15 | ノイズ低減回路及び撮像装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002205606A JP4235408B2 (ja) | 2002-07-15 | 2002-07-15 | ノイズ低減回路及び撮像装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2004048562A JP2004048562A (ja) | 2004-02-12 |
JP4235408B2 true JP4235408B2 (ja) | 2009-03-11 |
Family
ID=31710866
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2002205606A Expired - Fee Related JP4235408B2 (ja) | 2002-07-15 | 2002-07-15 | ノイズ低減回路及び撮像装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4235408B2 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005269373A (ja) | 2004-03-19 | 2005-09-29 | Fuji Photo Film Co Ltd | 映像信号処理システムおよび電子映像機器 |
JP2006237686A (ja) * | 2005-02-22 | 2006-09-07 | Matsushita Electric Ind Co Ltd | 撮像装置 |
JP4420294B2 (ja) | 2005-06-28 | 2010-02-24 | エルジー ディスプレイ カンパニー リミテッド | ミディアンフィルタリング方法及び装置 |
JP4696812B2 (ja) * | 2005-09-22 | 2011-06-08 | コニカミノルタホールディングス株式会社 | 撮像装置 |
JP5235761B2 (ja) * | 2009-04-09 | 2013-07-10 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
US8270754B2 (en) * | 2009-06-22 | 2012-09-18 | Qualcomm Incorporated | Lens roll-off correction operation using values corrected based on brightness information |
JP5681155B2 (ja) | 2012-09-26 | 2015-03-04 | 株式会社 日立産業制御ソリューションズ | 画像処理装置 |
-
2002
- 2002-07-15 JP JP2002205606A patent/JP4235408B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2004048562A (ja) | 2004-02-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100580911B1 (ko) | 화상합성방법 및 촬상장치 | |
JP4567593B2 (ja) | 撮像装置および撮影方法 | |
US8009201B2 (en) | Sensitivity-settable image capture apparatus | |
JP5612017B2 (ja) | カメラの手ぶれ低減システム | |
WO2007058126A1 (ja) | 画像処理システム、画像処理プログラム | |
JP2002010108A (ja) | 画像信号処理装置および画像信号処理方法 | |
US7777806B2 (en) | Camera, method, and program which captures a field of an object to generate an image, and image processing program and imaging device for applying image processing to an image | |
JP2004363853A (ja) | 画像信号のノイズ低減方法及びノイズ低減装置 | |
JP4121493B2 (ja) | デジタルカメラとその信号処理方法及び信号処理装置 | |
JP4235408B2 (ja) | ノイズ低減回路及び撮像装置 | |
JP2008124653A (ja) | 画像信号処理装置、画像信号処理プログラム、画像信号処理方法 | |
JP3943719B2 (ja) | カラー撮像装置 | |
JP4178046B2 (ja) | デジタルカメラ | |
JP4150599B2 (ja) | 露出補正機能付きデジタルカメラ | |
JP2003069821A (ja) | 撮像システム | |
JP4486762B2 (ja) | 画像撮影方法及び装置 | |
JP4305200B2 (ja) | 撮像装置および方法、並びにプログラム | |
JP2006253970A (ja) | 撮像装置、シェーディング補正データ作成方法およびプログラム | |
JP2005109705A (ja) | 撮像処理装置 | |
JP2009055415A (ja) | カメラ | |
JP4419705B2 (ja) | 撮像装置と撮像方法、光量調整装置 | |
JP4015492B2 (ja) | 画像合成方法および撮像装置 | |
JP3947912B2 (ja) | 画像信号処理装置 | |
JP3995524B2 (ja) | ニー補正回路及び撮像装置 | |
JP3977260B2 (ja) | デジタルカメラと撮像画像データ記録方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050201 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20060324 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20061124 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070928 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071010 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20071108 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20071115 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20071122 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071210 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20080109 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080228 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20080326 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20081126 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20081215 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111219 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4235408 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111219 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121219 Year of fee payment: 4 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121219 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131219 Year of fee payment: 5 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |