CN100546337C - 具有主动复位和随机可寻址像素的图像传感器 - Google Patents

具有主动复位和随机可寻址像素的图像传感器 Download PDF

Info

Publication number
CN100546337C
CN100546337C CNB2004100498422A CN200410049842A CN100546337C CN 100546337 C CN100546337 C CN 100546337C CN B2004100498422 A CNB2004100498422 A CN B2004100498422A CN 200410049842 A CN200410049842 A CN 200410049842A CN 100546337 C CN100546337 C CN 100546337C
Authority
CN
China
Prior art keywords
reset
row
operational amplifier
pixel
line
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB2004100498422A
Other languages
English (en)
Other versions
CN1581929A (zh
Inventor
博伊德·福勒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aptina Imaging Corp
Original Assignee
Micron Technology Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Micron Technology Inc filed Critical Micron Technology Inc
Publication of CN1581929A publication Critical patent/CN1581929A/zh
Application granted granted Critical
Publication of CN100546337C publication Critical patent/CN100546337C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/65Noise processing, e.g. detecting, correcting, reducing or removing noise applied to reset noise, e.g. KTC noise related to CMOS structures by techniques other than CDS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Solid State Image Pick-Up Elements (AREA)

Abstract

本发明公开了一种具有一列或多列像素的成像阵列。每个像素包括:包括第一和第二端子的光电二极管;本地复位电路,用于将第一端子连接到列复位线;和缓冲器电路,用于响应于字选择信号来有选择地将第一端子连接到列位线。每列还包括具有运算放大器和低通滤波器的列复位电路。所述运算放大器具有连接到该列的列位线的第一输入端,和连接到在复位周期期间产生复位信号的复位信号生成器的第二输入端。所述运算放大器的输出在复位周期期间连接到所述列复位线。在一个实施例中,在复位周期期间所述运算放大器的增益和所述低通滤波器的通带都变化。

Description

具有主动复位和随机可寻址像素的图像传感器
技术领域
本发明涉及CMOS图像传感器。
背景技术
原则上,CMOS图像传感器相对于CCD图像传感器具有许多优点。CMOS的产量大大好于CCD制造工艺的产量。此外,用基于CMOS的传感器所能得到的最低噪声水平大大低于用CCD可以得到的。最后,在基于CMOS的图像传感器中存储的图像可以在不破坏图像的情况下被读出。
CMOS传感器遭受到时域噪声。降低时域噪声的方案是本领域所公知的。例如,这里通过引用而结合进来的美国专利6,424,375,描述了一种降低时域噪声影响的主动像素复位系统(active pixel reset system)。然而,该专利中讨论的像素设计要求CMOS像素具有许多额外的部件,这些部件被用来在累积图像之前将光电二极管上的电压复位。此额外的电路增大了像素的尺寸,并因此增加了采用这种设计的成像阵列的成本。
此外,在噪声降低的程度和复位像素所需的时间之间有一个折衷。为了提供高的噪声降低量,复位电路的带宽必须被限制。这增加了光电二极管过渡到复位电势所需的时间。如果增加带宽来提供更短的复位时间,则噪声水平就升高。因此,这种设计无法同时提供短的复位时间和高的噪声降低量。
发明内容
本发明包括具有一列或多列像素的成像阵列。每个像素包括:包括第一和第二端子的光电二极管;本地复位电路,用于将第一端子连接到列复位线;和缓冲器电路,用于响应于字选择信号来有选择地将第一端子连接到列位线。每列还包括具有运算放大器和低通滤波器的列复位电路。所述运算放大器具有连接到该列的列位线的第一输入端,和连接到在复位周期期间产生复位信号的复位信号生成器的第二输入端。所述运算放大器的输出在复位周期期间连接到所述列复位线。在一个实施例中,所述运算放大器具有由增益控制信号确定的增益。在此实施例中所述运算放大器的增益在复位周期期间变化。在此实施例中,所述低通滤波器的通带也在复位周期中变化。优选的低通滤波器包括在复位周期期间连接到所述列复位线的一个或多个电容器。
附图说明
图1是二维成像阵列中一列100个像素的示意图。
图2是二维成像阵列300以及用来运行该成像阵列的像素的复位和解码电路的框图。
具体实施方式
参考图1可以更容易地理解本发明提供优点的方式。图1是二维成像阵列中一列100个像素的示意图。
参考图1,从组织成M列N行的矩形阵列的多个像素,来构造根据本发明一个实施例的成像阵列。图1示出了一列像素。在131和134示出了示例像素。每个像素具有三个部件:光电二极管112、本地复位电路101和输出放大器。输出放大器由晶体管114和116组成。晶体管116被用来有选择地将来自晶体管114的输出耦合到列输出线118,列输出线118被用来将代表光电二极管112上的电势的信号耦合到列输出放大器61。通过相应字线121上的信号来将所选像素连接到输出线118。
本地复位电路101由晶体管122和108以及电容器111组成。虽然电容器111被示为单独的电路部件,但应该注意到在一些实施例中,电容器111可以被晶体管122的寄生电容代替。晶体管122响应于相应复位线上的信号,将晶体管108的栅极耦合到列复位线158。141和151示出了示例的字复位线。在任何给定时间,每列中只有一个像素被耦合到列复位线158。
每列像素还包括列复位电路60,其包括放大器40和电容器30。在图1所示的本发明实施例中,放大器40包括多个并联的运算放大器。41和42示出了示例的放大器。每个放大器包括确定该放大器是“接通”还是“断开”的选通电路(gating circuit)。放大器41和42的选通电路,分别由控制线44和45上的合适的信号控制。类似地,在本实施例中,电容器30由多个并联的电容器构成。31和32示出了示例的电容器。每个电容器具有确定该电容器是否连接到列复位线158的相应的开关。33和34分别示出了与电容器31和32对应的开关。
为了更好地理解基本的复位周期,假定部件放大器和电容器中分别只有一个连接到列复位线158,例如放大器41和电容器31。假定像素134将被复位。复位周期可以被分成两个时间段。在复位周期开始时,通过合上开关50来将列复位线158连接到复位放大器。此外,提升复位线151来将晶体管108的栅极连接到复位线158,并且晶体管108经由复位线152而连接到Vdd。然后放大器41的输出被暂时接地。放大器41随后经由导线43连接到复位信号生成器。在第一时间段期间,运算放大器的反相输入Vr被线性增大到最大电势。当Vr超过光电二极管112上的电势加上晶体管108和114的阈值电压时,光电二极管上的电势类似地增大到某个最大值。在第二时间段期间,将Vr保持恒定在其最大值处。在此时间段光电二极管112上的电势由于晶体管108而增大。这使得被连接到复位线158的放大器41的输出下降,直到其差动输入达到大约相同的电势。复位线158上电势的降低关闭了晶体管108,随后允许光电二极管112上的电势在第二时间段期间过渡。在此第二时间段期间,光电二极管经由晶体管108的栅极到源极的电容而电容性耦合到复位线158。光电二极管112的电容性耦合在放大器41周围形成了反馈回路。此反馈回路被用来降低光电二极管112上的复位噪声。该反馈回路的过渡过程遵循典型的RC时间曲线,因此电容越大,过渡过程时间就越长。
噪声水平,即光电二极管上复位电势的变化还取决于电容器31的值。可以示出,复位值中的噪声近似由下式给出:
噪声=kTC/(1+Aβ)2+f(带宽),
其中kT是玻尔兹曼常数乘以绝对温度,C是光电二极管112的电容,A是放大器41的放大系数,β是反馈回路增益,f是复位回路带宽的函数,其随带宽的增大而增大。因此,为了提供最低的噪声,人们希望在使复位回路的带宽最小的同时使放大系数最大。在此例子中复位回路的带宽由电容器31的电容来控制。放大器40的输出电容越大,放大器带宽越小。此外,如果利用大的放大系数来使从以上等式中的第一项产生的噪声最小,则必须使用小的带宽。如上所述,很不幸,光电二极管过渡到复位电势所需的时间也由复位回路的带宽确定,更小的带宽导致过渡过程时间的增加。因此,单个放大器和电容值无法同时提供低的噪声和快的复位时间。
在本发明的一个优选实施例中,通过使用具有在复位周期上随时间变化的放大系数的放大器来克服这个问题。类似地,带宽限制电容也随时间变化。在复位周期开始时,利用小的放大系数和大的带宽,来将光电二极管112上的电势移到接近所需的复位电势的值。一旦复位电势接近于其最终值,就利用更大的放大系数和更小的带宽来降低噪声水平。由于当发生切换时复位电势接近其最终值,所以过渡过程时间并不显著增加,这是因为在降低的带宽处必须适应的电压变化相对较小。
在本实施例中,通过切换所选的放大器和电容器来实现带宽限制电容和放大的变化。如上所述,放大器40包括多个运算放大器。在本发明的这个实施例中,每个运算放大器具有不同的增益。因此,通过在复位周期期间切换所选的放大器,可以有效地改变放大系数。类似地,电容器30实现为多个电容器,这些电容器可以在复位周期的预定点处切换进入复位回路或切换出去。
现在参考图2,其是二维成像阵列300以及用来运行该成像阵列的像素的复位和解码电路的框图。成像阵列300由多列如上参考图1所述构成的像素所构成。这些像素被组织成具有N列和M行的矩形阵列301。在给定行上所有像素被连接到同一字线和字复位线。每列像素具有诸如参考图1所述的一个复位电路。在302示出N列复位电路。在310示出示例的一列像素,并在311示出相应的列复位电路。在312示出示例的行。单个复位信号生成器303为所有列提供复位信号。
一行中的所有像素可以被并行读取和复位。所关注的行由输入到字解码电路305的地址确定。当选择了一行来读取时,N个模拟信号可用来读取,每列一个信号。如果要输出单个像素值,可利用列解码电路304来选择所要的列。在本发明的一个优选实施例中,读出电路包括模数转换器(ADC),其将模拟值转换成数字值,该数字值从成像阵列输出。但是,也可以采用这样的实施例,其输出模拟电压,该模拟电压在成像阵列外被转换。
或者,读出电路可对每列包括一个ADC。在此情况下,ADC锁存器优选地存储被转换的结果。这些结果随后可按列选择电路304所指定的顺序被读出。
应该注意到本发明很适合于其中仅仅利用阵列中所有像素的子集的应用。例如,在自动数字相机中,相机通过检查图像中像素的子集来设置焦距和曝光。通常参考视场中预定的多个子场中的一个来设置焦距。通常通过测量差不多随机布置在视场中的预定多个像素的光强来设置曝光。
本发明允许每行中的所有像素或像素子集被读出。类似地,任何给定行中的像素的任何子集都可被复位。因此,当需要仅涉及全部像素的子集的一系列测量时,只有那些像素才需要被读取和复位。因为读取和复位整个图像可能需要大量的时间,所以此随机访问特征可显著缩短计算正确的曝光和聚焦所需的时间。
此外,在这种部分读出和复位操作中消耗的功率,大大小于必须读取和复位全部图像的系统中所使用的功率。数字相机一般由电池供电。因此,本发明提供的装置增加了在需要更换电池之前所能拍摄的图像的数量。
从以上说明和附图,对本领域技术人员本发明的各种改进将变得明显。因此,本发明仅仅由所附权利要求的范围来限制。

Claims (6)

1.一种成像阵列,包括:
第一多个像素和第一列复位电路,
其中所述第一多个像素中的每个像素包括:
包括第一和第二端子的光电二极管;
本地复位电路,用于将所述第一端子连接到第一列复位线;和
缓冲器电路,用于响应于字选择信号将所述第一端子连接到第一列输出线;和
其中所述第一列复位电路包括运算放大器和低通滤波器,所述运算放大器具有连接到所述第一列输出线的第一输入端、连接到在复位周期期间产生复位信号的复位信号生成器的第二输入端、以及在所述复位周期期间连接到所述第一列复位线的输出端;
其中所述运算放大器具有由增益控制信号确定的增益,并且
所述运算放大器包括并联的多个部件运算放大器,每个部件运算放大器具有不同的增益,每个部件运算放大器可被所述增益控制信号选择。
2.如权利要求1所述的成像阵列,其中在所述复位周期期间所述运算放大器的所述增益变化。
3.如权利要求1所述的成像阵列,其中所述低通滤波器具有由低通滤波器控制信号确定的通带。
4.如权利要求3所述的成像阵列,其中在所述复位周期期间所述低通滤波器的所述通带变化。
5.如权利要求4所述的成像阵列,其中所述低通滤波器包括在所述复位周期期间连接到所述第一列复位线的电容器,并且所述电容器是从并联的多个电容器中选择。
6.如权利要求1所述的成像阵列,还包括:
第二多个像素和第二列复位电路,
其中所述第二多个像素中的每个像素包括:
包括第三和第四端子的第二光电二极管;
第二本地复位电路,用于将所述第三端子连接到第二列复位线;和
第二缓冲器电路,用于响应于字选择信号将所述第三端子连接到第二列输出线;和
其中所述第二列复位电路包括第二运算放大器和第二低通滤波器,所述第二运算放大器具有连接到所述第二列输出线的第三输入端、连接到在所述复位周期期间产生复位信号的所述复位信号生成器的第四输入端、以及在所述复位周期期间连接到所述第二列复位线的第二输出端。
CNB2004100498422A 2003-08-11 2004-06-24 具有主动复位和随机可寻址像素的图像传感器 Expired - Fee Related CN100546337C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/639,227 US7274397B2 (en) 2003-08-11 2003-08-11 Image sensor with active reset and randomly addressable pixels
US10/639,227 2003-08-11

Publications (2)

Publication Number Publication Date
CN1581929A CN1581929A (zh) 2005-02-16
CN100546337C true CN100546337C (zh) 2009-09-30

Family

ID=33565227

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2004100498422A Expired - Fee Related CN100546337C (zh) 2003-08-11 2004-06-24 具有主动复位和随机可寻址像素的图像传感器

Country Status (6)

Country Link
US (1) US7274397B2 (zh)
EP (1) EP1507406B1 (zh)
JP (1) JP4487248B2 (zh)
CN (1) CN100546337C (zh)
DE (1) DE602004000375T2 (zh)
TW (1) TWI341122B (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060102827A1 (en) * 2004-11-17 2006-05-18 Matsushita Electric Industrial Co., Ltd. Solid-state imaging device
US7728896B2 (en) * 2005-07-12 2010-06-01 Micron Technology, Inc. Dual conversion gain gate and capacitor and HDR combination
US20070024713A1 (en) * 2005-07-28 2007-02-01 Baer Richard L Imaging parallel interface RAM
US7750960B2 (en) * 2006-03-15 2010-07-06 Honeywell International Inc. System and apparatus for high dynamic range sensor
US20090040351A1 (en) * 2007-08-09 2009-02-12 Micron Technology, Inc. Method and apparatus for reducing noise in a pixel array
CN101877758B (zh) * 2009-04-28 2013-04-03 英属开曼群岛商恒景科技股份有限公司 影像传感器的读出系统及方法
JP5470181B2 (ja) 2010-07-09 2014-04-16 パナソニック株式会社 固体撮像装置
JP5530277B2 (ja) 2010-07-09 2014-06-25 パナソニック株式会社 固体撮像装置およびその駆動方法
US8390712B2 (en) 2010-12-08 2013-03-05 Aptina Imaging Corporation Image sensing pixels with feedback loops for imaging systems
US20120242621A1 (en) * 2011-03-24 2012-09-27 Christopher James Brown Image sensor and display device incorporating the same
US8952729B2 (en) 2013-04-03 2015-02-10 BAE Systems Imaging Solutions Inc. Sample and hold circuit with reduced noise
CN106341627B (zh) * 2015-07-07 2020-08-11 松下知识产权经营株式会社 摄像装置
US10789450B2 (en) 2017-10-20 2020-09-29 Synaptics Incorporated Optical biometric sensor with automatic gain and exposure control
US10531035B1 (en) 2018-07-17 2020-01-07 Semiconductor Components Industries, Llc Image sensors with predictive pre-charging circuitry

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6469740B1 (en) * 1997-02-04 2002-10-22 Matsushita Electric Industrial Co., Ltd. Physical quantity distribution sensor and method for driving the same
US6697111B1 (en) * 1998-04-08 2004-02-24 Ess Technology, Inc. Compact low-noise active pixel sensor with progressive row reset
US6587142B1 (en) * 1998-09-09 2003-07-01 Pictos Technologies, Inc. Low-noise active-pixel sensor for imaging arrays with high speed row reset
US6424375B1 (en) * 1999-09-21 2002-07-23 Pixel Devices, International Low noise active reset readout for image sensors
JP3984808B2 (ja) * 2000-09-07 2007-10-03 キヤノン株式会社 信号処理装置及びそれを用いた撮像装置並びに放射線撮像システム
US7019345B2 (en) * 2000-11-16 2006-03-28 California Institute Of Technology Photodiode CMOS imager with column-feedback soft-reset for imaging under ultra-low illumination and with high dynamic range
FR2825219B1 (fr) * 2001-05-28 2003-09-05 St Microelectronics Sa Pixel actif cmos a bruit reduit
US20030076431A1 (en) * 2001-10-24 2003-04-24 Krymski Alexander I. Image sensor with pixels having multiple capacitive storage elements
US6777660B1 (en) * 2002-02-04 2004-08-17 Smal Technologies CMOS active pixel with reset noise reduction
JP4132850B2 (ja) * 2002-02-06 2008-08-13 富士通株式会社 Cmosイメージセンサおよびその制御方法
US6919551B2 (en) * 2002-08-29 2005-07-19 Micron Technology Inc. Differential column readout scheme for CMOS APS pixels
US7215369B2 (en) * 2003-04-02 2007-05-08 Micron Technology, Inc. Compact pixel reset circuits using reversed current readout
US7280143B2 (en) * 2003-04-14 2007-10-09 Micron Technology, Inc. CMOS image sensor with active reset and 4-transistor pixels
US20040227832A1 (en) * 2003-05-12 2004-11-18 Innovative Technology Licensing, Llc. Imaging system with individual pixel reset
US7525586B2 (en) * 2003-05-12 2009-04-28 Altasens, Inc. Image sensor and method with multiple scanning modes

Also Published As

Publication number Publication date
JP2005065270A (ja) 2005-03-10
TWI341122B (en) 2011-04-21
EP1507406A1 (en) 2005-02-16
DE602004000375D1 (de) 2006-04-20
US7274397B2 (en) 2007-09-25
US20050036048A1 (en) 2005-02-17
CN1581929A (zh) 2005-02-16
TW200507631A (en) 2005-02-16
EP1507406B1 (en) 2006-02-08
JP4487248B2 (ja) 2010-06-23
DE602004000375T2 (de) 2006-10-19

Similar Documents

Publication Publication Date Title
CN100546337C (zh) 具有主动复位和随机可寻址像素的图像传感器
US6580454B1 (en) CMOS active pixel sensor having in-pixel local exposure control
EP1399746B1 (en) Image sensor utilizing a low fpn high gain capacitive transimpedance amplifier
US6525304B1 (en) Circuitry for converting analog signals from pixel sensor to a digital and for storing the digital signal
US9402043B2 (en) Method and systems for amplifying an output of a CMOS pixel array
CN105960798B (zh) 适合用于成像阵列的可变增益列放大器
US20060244854A1 (en) Image sensor with pixels having multiple capacitive storage elements
TW200903787A (en) Image sensor with gain control
CN103856730A (zh) 基于像素级模数转换的紫外焦平面读出电路及其读出方法
CN102809436B (zh) 一种红外线列焦平面读出电路
US10142559B2 (en) Pixel signal transfer device and method thereof and CMOS image sensor including the same
CN111918007A (zh) Cmos图像传感器、像素单元及其控制方法
CN102224433B (zh) X射线探测器
CN109688353B (zh) 光检测单元、图像传感器、电子设备和检测方法
KR100744134B1 (ko) Cmos 이미지 센서 및 그 구동방법
CN113228623B (zh) 超高动态范围cmos传感器
TW201832548A (zh) 逐一輸出不同感測像素單元之感測訊號電荷及重置訊號電荷之影像感測器及感測像素陣列
CN111935427B (zh) Cmos图像传感器、像素单元及其控制方法
CN212572732U (zh) 图像传感器和放大电路
CN113840103A (zh) 一种高动态范围的图像传感器
US10187598B2 (en) Circuit for reading-out voltage variation of floating diffusion area, method thereof and CMOS image sensor using the same
CN115278122B (zh) 一种像素单元电路、信号采集装置和信号采集方法
CN216313265U (zh) 一种双存储cmos图像传感器电路
CN111953914B (zh) Cmos图像传感器、像素单元及其控制方法
US20230007196A1 (en) Imaging device and endoscope system

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: AVAGO TECHNOLOGIES GENERAL IP

Free format text: FORMER OWNER: ANJELEN SCI. + TECH. INC.

Effective date: 20061124

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20061124

Address after: Singapore Singapore

Applicant after: Avago Technologies General IP (Singapore) Pte. Ltd.

Address before: California, USA

Applicant before: AGILENT TECHNOLOGIES, Inc.

ASS Succession or assignment of patent right

Owner name: MICRON TECHNOLOGY INC.

Free format text: FORMER OWNER: AVAGO TECHNOLOGIES GENERAL IP

Effective date: 20080829

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20080829

Address after: Idaho

Applicant after: Micron Technology, Inc.

Address before: Singapore Singapore

Applicant before: Avago Technologies General IP (Singapore) Pte. Ltd.

C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: APTINA IMAGING CORP.

Free format text: FORMER OWNER: MICRON TECHNOLOGY INC.

Effective date: 20100406

C41 Transfer of patent application or patent right or utility model
COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; FROM: IDAHO,U.S.A. TO: CAYMAN ISLANDS

TR01 Transfer of patent right

Effective date of registration: 20100406

Address after: Cayman Islands

Patentee after: APTINA IMAGING Corp.

Address before: Idaho

Patentee before: Micron Technology, Inc.

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090930

CF01 Termination of patent right due to non-payment of annual fee