JP2009050035A - 画像処理方法、画像処理システムおよび画像処理プログラム - Google Patents
画像処理方法、画像処理システムおよび画像処理プログラム Download PDFInfo
- Publication number
- JP2009050035A JP2009050035A JP2008310692A JP2008310692A JP2009050035A JP 2009050035 A JP2009050035 A JP 2009050035A JP 2008310692 A JP2008310692 A JP 2008310692A JP 2008310692 A JP2008310692 A JP 2008310692A JP 2009050035 A JP2009050035 A JP 2009050035A
- Authority
- JP
- Japan
- Prior art keywords
- image
- region
- processing
- area
- index
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims description 9
- 238000000034 method Methods 0.000 claims abstract description 17
- 238000006243 chemical reaction Methods 0.000 claims description 50
- 238000004364 calculation method Methods 0.000 claims description 35
- 238000010586 diagram Methods 0.000 description 7
- 230000010354 integration Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 3
- 238000004590 computer program Methods 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000005315 distribution function Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000003707 image sharpening Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Landscapes
- Facsimile Image Signal Circuits (AREA)
Abstract
【解決手段】画像中から顔、空・雲等の領域を認識する処理により、その領域らしさを計算し、その領域らしさに従い、画像領域向きの画像処理を行なうことにより、画像中の対象に応じた高画質化処理を実行する。
【選択図】 図1
Description
像を画像内容に応じて高画質化する画像処理方法、画像処理システムおよび画像処理プロ
グラムに関する。
像に変換する方法が知られている。例えば、特許番号第2692531号の「画像の鮮鋭
化方法及び装置」では画像の鮮鋭化を行なう場合に、すべての画像について画一的なシャ
ープニングを行なうのでなく、画像ごとにエッジ領域を検出し、その領域における高周波
成分または高周波帯域成分の強度の積分値をエッジ領域の面積で正規化した値に基づいて
鮮鋭化の程度を調整する。同様にして、画像のコントラストや彩度を画像に適応して最適
値に調整する方法も知られている。
果に応じて処理を決定するために、1枚の画像中に異なった性質の対象が存在している場
合に、対象に応じた高画質化を実行することができなかった。例えば、ビル街の上に青空
が広がっているような画像に対して、鮮鋭度を調節する場合、主観的に、ビル街等の人工
物の画像部分については鮮鋭度が高い画像が高画質と判断され、青空の画像部分について
はよりなだらかな輝度値の変化の画像が高画質と判断される。シャープニング処理は、画
像のノイズを増幅する効果があるため、青空の領域では、その影響により画質が劣化した
と判断される場合もある。そのように、最適なシャープニングの程度は異なっている。し
かし画像全体について一様に同じシャープニングを適用する場合には、平均的な値が使用
されることになるために効果が上がらないことがあった。
処理を行なうことによって、画像全体を高画質化する方法、システムおよびプログラムを
提供することにある。
して対象領域を設定し、該対象領域には前記対象に応じた画像処理を適用し、処理結果を
得ることを特徴とする。
含まれている対象領域らしさを求め、該対象領域らしさに応じて前記対象に応じた画像処
理を適用し、処理結果を得ることを特徴とする。
した画像処理を適用した1つあるいは複数の対象向け処理結果画像を作成し、前記原画像
の各位置について、前記対象が含まれている対象領域らしさを求め、該対象領域らしさに
応じて対象向け処理結果画像を統合することにより最終画像を得ることを特徴とする。
木、集合人物、自然風景の少なくとも1つを含むことを特徴とする。
、彩度強調処理、ホワイトバランス処理の少なくとも1つを含むことを特徴とする。
対象領域らしさを計算する領域指数計算手段と、該領域指数計算手段により得られた領域
指数に応じて原画像に画像変換処理を適用する画像変換手段を含むことを特徴とする。
に適した画像処理を適用した1つあるいは複数の対象向け処理結果画像を作成する画像変
換手段と、前記原画像の各位置について前記対象が含まれている対象領域らしさを領域指
数として計算する領域指数計算手段と、該領域指数に応じて前記対象向け処理結果画像を
統合する画像統合手段を含むことを特徴とする。
、草木、集合人物、自然風景の少なくとも1つを含むことを特徴とする。
処理、彩度強調処理、ホワイトバランス処理の少なくとも1つを含むことを特徴とする。
ていた従来の方法に対して、画像領域に応じた高画質化処理が可能となり、人の視覚に対
してより高画質な画像に変換することが可能となる。
理システムの動作を説明する。
に人物、背景に家や木などの風景や空が撮影されている。本実施の形態は、この原画像1
について、
(1)人物の肌については、シャープニングは弱くかける。
(2)空や雲については、シャープニングはかけない。青空の部分は彩度を高くする。
(3)人物の服、背景については、シャープニングを強くかける。コントラストや彩度も
メリハリがつくように強調する。
のような処理を行ない、人の視覚に対して画像を高画質化する。即ち、原画像1に対して
領域識別手段11が人物の肌領域を識別する。そして、識別された領域が“1”、それ以
外が“0”である二値画像である領域画像13が作成される。図2の例に対しては、図3
に“白”で示す部分が識別された肌領域である“1”の部分である。画像変換手段15は
、原画像1の領域画像13が“1”である部分に対して、肌領域に適した高画質化処理を
適用する。同様に、領域識別手段12が空・雲の領域を識別し、領域画像14が作成され
る。画像変換手段16は、原画像1の領域画像14が“1”である部分に対して、空・雲
領域に適した高画質化処理を適用する。また、原画像1の全体に対して、一般的な高画質
化処理が画像変換手段17により適用される。画像合成手段18は、画像変換手段17の
出力に対し、“肌”の領域画像13が“1”である部分については、画像変換手段15の
出力を、“空・雲”に領域画像14が“1”である部分については、画像変換手段16の
出力を合成する。画素ごとに画像を合成すると、領域の繋ぎ目で画質が急に変化し、不自
然な画像が生成されることがあるので、画像合成手段18は、領域間のぼかし処理を含む
のが適当である。
する画質が異なる対象ごとに別々の処理が行なわれる実施形態が望ましく、その他に人工
物や建物、山などの自然風景、集合人物等、よく画像が撮影される状況を識別し、それぞ
れの状況における高画質化処理を行なうことが可能である。
度強調’としているが、‘ホワイトバランス処理’、‘記憶色への色変更処理’などを含
んでもよい。
像変換が適用される領域が生じることがある。それを踏まえて、第2の実施の形態を図4
に基づいて説明する。まず、原画像1は、第1、第2の領域指数計算手段21、22によ
って、各画素毎に規定された性質を持っているかを解析する。領域の性質としては、例え
ば第1、第2の領域指数計算手段21、22は、それぞれ、人肌、空・雲の2つの領域の
性質を評価する。
域らしさを例えば0〜1の値をとる指数として出力する。図5を参照して人肌領域らしさ
を各画素の色から計算する領域指数計算手段21の機能を示す。ここでは、画素の色を(
R,G,B)値で示す。黒を(0,0,0)、白を(1,1,1)とすると、RGB色空
間において、すべての色は図5のような立方体に含まれる。この中で、最も肌色らしい領
域211に‘1’、その周囲の尤度が低い領域212に‘0.7’、その更に周囲の領域
213に‘0.3’、それ以外には‘0’の指数を予め設定する。各画素値は、これらの
領域に含まれているかどうかを調べられ、対応する指数F1が出力される。勿論、指数は
図5のように離散的な値を設定する代わりに、正規分布関数のような連続的に変化するよ
うに設定しても構わない。
の実施例を説明する。画像データが、まず画像スケーリング手段214に入力される。こ
れは、画像に撮像されている顔の大きさの変化に対応するためである。画像データは、ま
ず第1の変倍手段2151によって、例えば0.8倍のサイズに縮小される。縮小された
画像データは、第1の類似度判定手段2161に出力されると同時に、第2の変倍手段2
152にも出力される。第2の変倍手段2152は、同様に、画像を0.8倍のサイズ(
原画からは0.64倍のサイズ)に縮小する。この結果は第2の類似度判定手段2162
に出力されると同時に、第3の変倍手段2153にも出力される。これを必要なだけ繰り
返し、顔の大きさのバリエーションに対応する。類似度判定手段2161〜2163は、
状況に応じて画像の輝度の正規化を行ない、顔テンプレート217との類似度を0〜1の
値として計算する。顔が存在する場合、サイズがテンプレートと合っている類似度判定手
段に高い出力が得られるので、最大値選択手段218は、類似度判定手段2161〜21
63の出力の最大値を顔領域指数F2として出力する。
定精度を高めることもできる。その場合には、前記人肌領域指数F1と顔領域指数F2を
組み合わせた計算で、新しい顔領域指数Fを求めることが可能である。例えば、式(1)
や式(2)のような実現方法が可能であるが、これに制限されるものではない。
F=(F1+F2)/2 (2)
実施例を図7を参照して説明する。色相彩度計算手段221が各画素の値から、その画素
の色相H、彩度S、明度Vを計算する。例えば、公知のHSV空間への変換を式3に従っ
て行なう。
が、中心からの距離として彩度Sが定義できる。ここで、領域227を空や雲の色領域ら
しさC1=0.3、領域228をC1=0.6、領域229をC1=0.9として定義す
る。色度評価手段222は、この計算を行ないC1を出力する。
2を評価する。例えば式(4)により評価できるが、これに制限されるものではない。
計算方法は、式(5)又は式(6)で実現できるが、これに制限されるものではない。
C=(C1+C2)/2 (6)
域指数Cが各画素毎に出力され、それぞれ、領域指数画像31及び領域指数画像32とな
る。
質化処理を適用し、結果の画像を出力する。図9を参照して、画像変換手段4の実施例を
説明する。鮮鋭化手段41、コントラスト強調手段42、彩度強調手段43が原画像1に
対して画像処理を行なうが、それぞれの処理の程度は鮮鋭化量計算手段44、コントラス
ト強調量計算手段45、彩度強調量計算手段46で計算する。
れる場合、
くかけない方が高画質になるとき、例えば、鮮鋭化量計算手段44はαを式(8)のよう
に計算する。
し、原コントラスト値Kを得、目標のコントラスト値K’に式(10)により変換すると
する。
ほうが高画質になる場合、コントラスト強調量計算手段45は、強調量βを式(11)の
ように計算する。
段43に対しての彩度強調量を、領域指数の値に応じて計算するように構成される。
2の実施の形態と同等であると考えると、領域指数画像31、領域指数画像32の各画素
には、それぞれ、顔領域指数、空・雲領域指数が格納される。それに対応して、画像変換
手段410は、原画像1全体に顔領域に適した画像変換処理を適用する。同様に、画像変
換手段420は、原画像1全体に空・雲領域に適した画像変換処理を適用する。また、画
像変換手段430は、原画像全体に一般的な画像変換処理を適用する。画像変換手段41
0の構成例を図11に示す。画像変換手段410は、画像変換手段4と似た処理手段であ
る、鮮鋭化手段411、コントラスト強調手段412、彩度強調手段413を持つ。画像
変換手段4は、この強調量を計算して求めるが、画像変換手段410は、顔領域向けの画
像変換手段であるので、それに最適な強調量で画像変換を行ない、変換された画像を出力
する。画像変換手段420は、同様の構成で、空・雲領域に適した画像変換を行ない、処
理結果を出力する。画像変換手段430は、それ以外の一般の領域に適した画像変換を行
ない処理結果を出力する。
換手段410、420、430の出力画像をそれぞれg1(x,y)、g2(x,y)、
g3(x,y)、領域指数画像31、32を、それぞれF(x,y),C(x,y)とす
る。画像統合手段5は、各画素ごとに式(12)を計算し、結果画像result(x、
y)を出力する。
+(1−F−C)g3(x,y) (12)
成される。
れの処理をコンピュータプログラムで実現することも可能である。その場合の本発明の第
4の実施の形態を、図12を参照して説明する。処理が開始すると、まず領域指数計算ス
テップ23が実行される。領域指数計算ステップ23は原画像1を入力とし、例えば原画
像1の各画素において顔領域らしさの計算をプログラムにより実行する。その結果、各画
素に式(1)または式(2)で示された顔領域指数を持つ領域指数画像31が出力される
。次に領域指数計算ステップ24が実行される。領域指数計算ステップ24は原画像1を
入力とし、例えば原画像1の各画素において空・雲の領域らしさの計算をプログラムによ
り実行する。その結果、各画素に式(5)または式(6)で示された空・雲領域指数を持
つ領域指数画像32が出力される。続いて画像変換ステップ6が実行される。画像変換ス
テップ6はさらに鮮鋭化ステップ61、コントラスト強調ステップ62、彩度強調ステッ
プ63から成っており、それぞれの画像処理が、原画像1に対して領域指数画像31、領
域指数画像32に格納された領域指数に従って、処理の程度を式(7)、式(10)のよ
うに調整されて実行され、その結果が結果画像7として出力される。
て、第5の実施の形態を図13を参照して説明する。ここではまず、原画像1に対して、
例えば、顔領域らしさを計算する領域指数計算ステップ23が実行され、領域指数画像3
1が生成される。次に、顔領域向きの画像変換である画像変換ステップ83が原画像1に
対して実行され、処理結果画像33が生成される。同様に、例えば、空・雲領域らしさを
計算する領域指数計算ステップ24が実行され、領域指数画像32が生成され、空・雲領
域向きの画像変換を行なう画像変換ステップ84が実行され、処理結果画像34が生成さ
れる。続いて、一般の領域に対する画像変換処理を行なう画像変換ステップ85が原画像
1に対して実行され、処理結果画像35が生成される。最後に、それぞれの処理結果画像
33,34,35を各画素における領域指数画像31,32の領域指数に応じて合成する画
像統合ステップ9が実行され、最終的な結果画像7が出力される。この場合、2つの領域
指数計算ステップ23,24と、3つの画像変換ステップ83,84,85の処理内容は
全く独立であるので、その実行順序は任意であり、コンピュータによっては並行処理によ
り高速実行することも可能である。
11,12 領域識別手段
13,14 領域画像
15,16,17 画像変換手段
18 画像合成手段
21,22 領域指数計算手段
23,24 領域指数計算ステップ
31,32 領域指数画像
33,34,35 処理結果画像
4,410,420,430 画像変換手段
41 鮮鋭化手段
42 コントラスト強調手段
43 彩度強調手段
44 鮮鋭化量計算手段
45 コントラスト強調量計算手段
46 彩度強調量計算手段
5 画像統合手段
6,83,84,85 画像変換ステップ
7 結果画像
9 画像統合ステップ
Claims (3)
- 原画像の各部分において、複数種類の対象が含まれていることを識別し、識別された種類ごとに対象の領域を設定する際、前記原画像の各部分について複数種類の対象領域らしさを求めて設定し、前記原画像の各部分について複数種類の対象領域らしさに応じた画像処理を適用し、処理結果を得ることを特徴とする画像処理方法。
- 原画像の各部分において、複数種類の対象が含まれていることを識別し、識別された種類ごとに対象の領域を設定する際、前記原画像の各部分について複数種類の対象領域らしさを示す領域指数を計算する領域指数計算手段と、前記原画像の各部分について前記領域指数計算手段により得られた複数の領域指数に応じて画像変換処理を適用する画像変換手段を含むことを特徴とする画像処理システム。
- 原画像の各部分において、複数種類の対象が含まれていることを識別し、識別された種類ごとに対象の領域を設定する際、前記原画像の各部分について複数種類の対象領域らしさを示す領域指数を計算する領域指数計算ステップと、前記原画像の各部分について前記領域指数計算手段により得られた複数の領域指数に応じて画像変換処理を適用する画像変換ステップを含むことを特徴とする画像処理プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008310692A JP5203159B2 (ja) | 2008-12-05 | 2008-12-05 | 画像処理方法、画像処理システムおよび画像処理プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008310692A JP5203159B2 (ja) | 2008-12-05 | 2008-12-05 | 画像処理方法、画像処理システムおよび画像処理プログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007133876A Division JP4742068B2 (ja) | 2007-05-21 | 2007-05-21 | 画像処理方法、画像処理システムおよび画像処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009050035A true JP2009050035A (ja) | 2009-03-05 |
JP5203159B2 JP5203159B2 (ja) | 2013-06-05 |
Family
ID=40501730
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008310692A Expired - Lifetime JP5203159B2 (ja) | 2008-12-05 | 2008-12-05 | 画像処理方法、画像処理システムおよび画像処理プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5203159B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9025873B2 (en) | 2011-11-10 | 2015-05-05 | Canon Kabushiki Kaisha | Image processing apparatus and control method therefor |
JP2019149805A (ja) * | 2019-03-28 | 2019-09-05 | 株式会社ニコン | 電子機器、および画像処理方法 |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10878657B2 (en) | 2018-07-25 | 2020-12-29 | Konami Gaming, Inc. | Casino management system with a patron facial recognition system and methods of operating same |
US11521460B2 (en) | 2018-07-25 | 2022-12-06 | Konami Gaming, Inc. | Casino management system with a patron facial recognition system and methods of operating same |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08125857A (ja) * | 1994-10-27 | 1996-05-17 | Sharp Corp | 画像処理装置 |
JPH09154026A (ja) * | 1995-11-29 | 1997-06-10 | Sharp Corp | カラー画像処理装置 |
JPH11146219A (ja) * | 1997-11-13 | 1999-05-28 | Seiko Epson Corp | 画像処理装置、画像処理方法、画像処理プログラムを記録した媒体 |
JP2001144962A (ja) * | 1999-11-11 | 2001-05-25 | Fuji Xerox Co Ltd | 画像処理装置 |
JP2002281327A (ja) * | 2001-03-15 | 2002-09-27 | Minolta Co Ltd | 画像処理のための装置、方法及びプログラム |
JP2003244620A (ja) * | 2002-02-19 | 2003-08-29 | Fuji Photo Film Co Ltd | 画像処理方法および装置並びにプログラム |
-
2008
- 2008-12-05 JP JP2008310692A patent/JP5203159B2/ja not_active Expired - Lifetime
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08125857A (ja) * | 1994-10-27 | 1996-05-17 | Sharp Corp | 画像処理装置 |
JPH09154026A (ja) * | 1995-11-29 | 1997-06-10 | Sharp Corp | カラー画像処理装置 |
JPH11146219A (ja) * | 1997-11-13 | 1999-05-28 | Seiko Epson Corp | 画像処理装置、画像処理方法、画像処理プログラムを記録した媒体 |
JP2001144962A (ja) * | 1999-11-11 | 2001-05-25 | Fuji Xerox Co Ltd | 画像処理装置 |
JP2002281327A (ja) * | 2001-03-15 | 2002-09-27 | Minolta Co Ltd | 画像処理のための装置、方法及びプログラム |
JP2003244620A (ja) * | 2002-02-19 | 2003-08-29 | Fuji Photo Film Co Ltd | 画像処理方法および装置並びにプログラム |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9025873B2 (en) | 2011-11-10 | 2015-05-05 | Canon Kabushiki Kaisha | Image processing apparatus and control method therefor |
JP2019149805A (ja) * | 2019-03-28 | 2019-09-05 | 株式会社ニコン | 電子機器、および画像処理方法 |
Also Published As
Publication number | Publication date |
---|---|
JP5203159B2 (ja) | 2013-06-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20140079319A1 (en) | Methods for enhancing images and apparatuses using the same | |
JP6818463B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
Li et al. | A multi-scale fusion scheme based on haze-relevant features for single image dehazing | |
JP2006508460A (ja) | 画像信号処理方法 | |
JP5870598B2 (ja) | 画像のホワイトバランス処理方法及び装置 | |
JP6458570B2 (ja) | 画像処理装置および画像処理方法 | |
CN113344836B (zh) | 人脸图像处理方法及装置、计算机可读存储介质、终端 | |
Abebe et al. | Towards an automatic correction of over-exposure in photographs: Application to tone-mapping | |
JP5203159B2 (ja) | 画像処理方法、画像処理システムおよび画像処理プログラム | |
JP4742068B2 (ja) | 画像処理方法、画像処理システムおよび画像処理プログラム | |
Kwok et al. | Design of unsharp masking filter kernel and gain using particle swarm optimization | |
JP5614550B2 (ja) | 画像処理方法、画像処理装置及びプログラム | |
Al-Ameen et al. | Fast and Efficient Algorithm for Contrast Enhancement of Color Images. | |
US9881408B2 (en) | Digital signal processing for image filtering field | |
JP2011076302A (ja) | 輪郭抽出装置、輪郭抽出方法、および輪郭抽出プログラム | |
JP2005094452A (ja) | 画像処理方法、画像処理システムおよび画像処理プログラム | |
JP7437921B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
US10319131B2 (en) | Digital signal processing for image filtering field | |
JP2008294969A (ja) | 映像変換装置、映像変換方法、映像変換プログラム | |
JP4171354B2 (ja) | カラー画像処理装置及び方法 | |
KR101488641B1 (ko) | 영상처리장치 및 영상처리방법 | |
JP7400198B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP5069599B2 (ja) | 映像変換装置、映像変換方法および映像変換プログラム | |
Hussin et al. | Nonlinear local-pixel-shifting color constancy algorithm | |
JP2008147714A (ja) | 画像処理装置およびその方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20081205 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20090512 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100803 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101001 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110405 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110603 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20110705 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20111115 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120123 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20120131 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20120330 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130213 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5203159 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160222 Year of fee payment: 3 |
|
EXPY | Cancellation because of completion of term |