CN101206716B - 登记设备和登记方法 - Google Patents

Abstract

本发明提供了一种登记设备，包括：计算部分，所述计算部分计算被处理的第一图像上的身体特征的一部分和先于所述第一图像而被处理的第二图像上的所述身体特征的相应部分之间的位置差，所述身体特征用于验证；连接部分，所述连接部分在根据计算出的位置差对所述第一图像的位置进行校正之后，将所述第一图像连接到所述第二图像，使得所述第一图像上的所述身体特征的一部分与所述第二图像上的所述身体特征的相应部分搭接；以及登记部分，所述登记部分将经连接的图像登记在存储介质中。

Description

登记设备和登记方法

技术领域

本发明涉及登记设备、登记方法和程序，并且优选地应用于例如生物测量(biometric)验证。

背景技术

生物测量验证用于基于用户的身体特征来辨认用户。这样的特征之一是手指的血管图案。

如日本专利公开No.2003-331272所公开的，存在一种包括转台7的认证设备。图像获取摄像机2和光源1被布置在转台7的每侧。用户将其手指3放置在转台7的中心轴线上。认证设备以恒定速度旋转转台7，使得图像获取摄像机2和光源1围绕手指3旋转，并且获取移动图像。认证设备使用这些图像来掌握手指的所有方面。认证设备因此可以精确地辨认用户。

发明内容

因为上述认证设备具有围绕手指旋转的转台，所以其大于包括固定图像获取摄像机的认证设备，其中所述固定图像获取摄像机周期性地拍摄在预定位置滚动的手指，以获得手指的所有方面照片。

另一方面，如果使用包括固定图像获取摄像机的认证设备，则手指可能由于旋转而倾斜。此外，根据用户用手指等按压设备的力度，手指可能向下沉入。这不会为验证提供精确的图像。

如果认证设备装备有插入孔等以固定手指，则其可以防止手指倾斜。但是，这不足以固定手指的位置。此外，认证设备由于插入孔等而变大。

考虑上述的要点完成了本发明，并且本发明旨在提供可以精确地辨认用户并且可以小型化的登记设备、登记方法以及程序。

在本发明的一个方面，登记设备包括：计算部分，其计算被处理的第一图像上的身体特征的一部分和先于所述第一图像而被处理的第二图像上的所述身体特征的相应部分之间的位置差，所述身体特征用于验证；连接部分，其在根据计算出的位置差对所述第一图像的位置进行校正之后，将所述第一图像连接到所述第二图像，使得所述第一图像上的所述身体特征的一部分与所述第二图像上的所述身体特征的相应部分搭接；以及登记部分，其将经连接的图像登记在存储介质中。

以此方式，此登记设备在根据计算出的位置差校正所述第一图像的位置之后，将所述第一图像连接到所述第二图像，使得所述第一图像上的所述身体特征的一部分与所述第二图像上的所述身体特征的相应部分搭接。因此，用户不必将其手指插入引导孔等。相反，用户在固定摄像机的表面上滚动其手指。此外，此设备可以校正手指的水平和垂直位置差。

在本发明的另一个方面，一种登记方法，包括：第一步骤，用于计算被处理的第一图像上的身体特征的一部分和先于所述第一图像而被处理的第二图像上的所述身体特征的相应部分之间的位置差，所述身体特征用于验证；第二步骤，用于在根据计算出的位置差对所述第一图像的位置进行校正之后，将所述第一图像连接到所述第二图像，使得所述第一图像上的所述身体特征的一部分与所述第二图像上的所述身体特征的相应部分搭接；以及第三步骤，用于将经连接的图像登记在存储介质中。

以此方式，此登记方法在根据计算出的位置差校正所述第一图像的位置之后，将所述第一图像连接到所述第二图像，使得所述第一图像上的所述身体特征的一部分与所述第二图像上的所述身体特征的相应部分搭接。因此，用户不必将其手指插入引导孔等。相反，用户在固定摄像机的表面上滚动其手指。此外，此方法可以校正手指的水平和垂直位置差。

在本发明的另一个方面，一种程序使得计算机执行：第一步骤，用于计算被处理的第一图像上的身体特征的一部分和先于所述第一图像而被处理的第二图像上的所述身体特征的相应部分之间的位置差，所述身体特征用于验证；第二步骤，用于在根据计算出的位置差对所述第一图像的位置进行校正之后，将所述第一图像连接到所述第二图像，使得所述第一图像上的所述身体特征的一部分与所述第二图像上的所述身体特征的相应部分搭接；以及第三步骤，用于将经连接的图像登记在存储介质中。

以此方式，该程序在根据计算出的位置差校正所述第一图像的位置之后，将所述第一图像连接到所述第二图像，使得所述第一图像上的所述身体特征的一部分与所述第二图像上的所述身体特征的相应部分搭接。因此，用户不必将其手指插入引导孔等。相反，用户在固定摄像机的表面上滚动其手指。此外，该程序可以校正手指的水平和垂直位置差。

以此方式，此登记设备、登记方法和其程序在根据计算出的位置差校正所述第一图像的位置之后，将所述第一图像连接到所述第二图像，使得所述第一图像上的所述身体特征的一部分与所述第二图像上的所述身体特征的相应部分搭接。因此，用户不必将其手指插入引导孔等。相反，用户在固定摄像机的表面上滚动其手指。此外，此登记设备、登记方法和其程序可以校正手指的水平和垂直位置差。因此，登记设备、登记方法和其程序可以被小型化并且可以对用户进行精确验证。

当结合附图阅读时，根据下面的详细说明，本发明的特性、原理和实用性将变得更清楚，其中在附图中，相似的部件由相似的标号或者字符指示。

附图说明

在附图中：

图1是示出了根据本发明的实施例的认证设备的整体构造的框图；

图2A-2E是示出了在一个表面上滚动的手指的示意图；

图3是示出了图像获取表面和血管图案的示意图；

图4是示出了控制部分(血管登记模式)的功能性构造的框图；

图5A和5B是示出了在压印之前和之后图像的示意图；

图6是示出了所提取图案的示意图；

图7是示出了所检测的特征点的示意图；

图8A和8B是示出了位置差计算处理的示意图；

图9是示出了搜索区域的示意图；

图10是示出了位置差的示意图；

图11是示出了改变搜索区域的位置的过程的示意图；

图12是示出了在压印处理之后血管的亮度的示意图；

图13是示出了在图案提取处理过程中亮度变化的示意图；

图14A和14B是示出了如何对亮度进行平均的示意图；

图15是示出了如何从图像剪切一块的示意图；

图16是示出了在图像获取表面上，中心部分移动的距离与端点移动的距离之间的差的示意图；

图17A-17C是示出了失真校正的效果的示意图；

图18是示出了附加处理的示意图；

图19A和19B是示出了如何生成被登记的图像的示意图；

图20是示出了登记过程的流程图；

图21是示出了控制部分(认证模式)的功能性构造的框图；

图22是示出了如何找出并且剪切验证目标区域的示意图；

图23A-23C是示出了校正处理的示意图；

图24是示出了认证过程的流程图；和

图25是示出了如何改变搜索区域的形状的示意图。

具体实施方式

下面将参考附图对本发明的实施例进行详细描述。

(1)认证设备的整体构造

图1示出了根据本发明一种实施例的认证设备1的整体构造。认证设备1包括控制部分10，控制部分10经由总线16连接到操作部分11、图像获取部分12、存储器13、接口14和通知部分15。

控制部分10是包括中央处理单元(CPU)、只读存储器(ROM)和随机访问存储器(RAM)的微型计算机，其中，CPU负责设备1的整体控制，ROM存储各种程序和设置信息，RAM充当所述CPU的工作存储器。

当被用户操作时，操作部分11向控制部分10提供指令COM1、COM2等：指令COM1命令控制部分10以血管登记模式工作，其中血管登记模式用于登记用户的血管图案；而指令COM2命令控制部分10以认证模式工作，其中认证模式用于辨认用户。

当接收到指令COM1或COM2时，控制部分10以血管登记模式或认证模式工作。在此情况下，控制部分10执行相应的程序，以控制图像获取部分12、存储器13、接口14和通知部分15。

基于由控制部分10设置的曝光值(EV)，图像获取部分12调节光学系统的光学镜头的位置、图像获取元件的光圈和快门速度(曝光时间)。

图像获取部分12控制图像获取元件，以获得图像。图像获取元件以预定间隔顺序地输出图像信号。图像获取部分12执行模数(A/D)转换处理，以将图像信号转换成数字图像数据，然后将该图像数据提供给控制部分10。

此外，在由控制部分10规定的时间段内，图像获取部分12对近红外线源进行驱动，以向拍摄对象所在的预定位置(也称为“拍摄位置”)发射近红外线。血管特别地吸收近红外线。

当身体部分被放置在拍摄位置处时，所发射的近红外线进入身体部分。在通过光学系统和镜头之后，近红外线被图像获取元件接收，表示出身体部分的血管图案。结果，血管图案的图像被形成在图像获取元件的图像获取表面上。以此方式，图像获取部分12获得代表血管图案的图像。

存储器13例如是快闪(flash)存储器。存储器13存储控制部分10指定的数据。控制部分10可以从存储器13读出数据。

接口14经由预定的传输线与外部设备交换数据。

通知部分15包括：显示部分15a，其基于由控制部分10提供的数据来显示字符、符号等；以及音频输出部分15b，其基于由控制部分10提供的数据从扩音器输出声音。

(2)血管登记模式

下面描述设备如何以血管登记模式工作。当接收到指令COM1时，控制部分10进入血管登记模式。通知部分15通知用户其应该将其手指放置在拍摄位置，使得指肚接触其表面，然后在该表面滚动其手指。此外，控制部分10开始操作图像获取部分12。

例如，当如图2A-2E所示，用户在拍摄位置在表面上滚动其手指时，图像获取部分12从不同角度拍摄手指内的血管，如图3所示。

在此实施例中，设备没有任何用于固定手指位置的装备。因此，当设备拍摄手指的血管时，用户放置和滚动其手指的位置可能每次都不同。此外，从所述表面到血管的距离可能随着用户将其手指压靠表面的力度、其旋转轴等而变化。

控制部分10从图像获取部分12(图像获取元件)接收不同角度的手指的图像数据或者照片。控制部分10将这些照片合成为一个图像。此外，控制部分10从该图像提取血管的特征点。控制部分10随后将图像和提取的特征点存储或者登记在存储器13中，作为登记数据。

以此方式，控制部分10以血管登记模式工作。

下面将描述控制部分10如何获得图像数据并且产生登记数据。设控制部分10具有如图4所示的功能部件，包括压印部分21、图案提取部分22、特征点检测部分23、位置差计算部分24以及图像合成处理部分25。

压印部分21从图像获取部分12接收不同角度的手指图像(即，图像数据)的流。在由压印部分21接收之前，图像流可以以一定间隔被删减(thin out)(此处理也被称为“删减处理”)。

(2-1)压印处理

压印部分21将血管图案压印在图像上。压印部分21接收图像数据D10，并处理图像数据D10(诸如称为高斯处理的差分滤波处理)，以将血管图案压印在图像上。压印部分21随后将压印了血管图案图像的图像数据D11供应到图案提取部分22和位置差计算部分24。

图5A和5B示出了压印之前和压印之后的图像。如图5A所示，未压印图像的血管图案具有模糊的轮廓。另一方面，如图5B所示，压印图像具有血管图案的清晰轮廓。压印部分21的压印处理突出了血管的轮廓。因此，可以将血管图案与图像的其余部分区分开。

(2-2)图案提取处理

图案提取部分22以线图案的形式提取图像上的血管图案。在此实施例中，接收图像数据D11的图案提取部分22将图像数据D11二进制化，然后从二进制化的图像数据提取血管宽度的中点和宽度的亮度峰值，以获得线图案(也称作“血管线”)。图案提取部分22然后将血管线的图像数据D12供应到特征点检测部分23。

如图6所示，图案提取部分22的图案提取处理简化了血管图案，将其用线来表示。

(2-3)特征点检测处理

特征点检测部分23检测所述的线(或者线形图案)的某些分叉点、终点和转折点，作为特征点。在此实施例中，如图7所示，接收图像数据D12的特征点检测部分23从图像数据D12检测出上述线的某些终点、分叉点和转折点，作为特征点。实际上，特征点检测部分23首先用线连接这些点(终点、分叉点和转折点)，计算由线所包围的每一个单元的面积，仅仅选择大小小于预定阈值的单元，然后将这些选出的单元的点作为特征点。此方法例如公开于日本专利公开No.2006-207033中。

在检测特征点(终点、分叉点和转折点)之后，特征点检测部分23生成位置数据D13，然后将位置数据D13供应到位置差计算部分24，位置数据D13表示被检测的特征点的位置。此外，特征点检测部分23将位置数据D13与相应的图像数据D12(位置数据D13由其产生)相关联，然后将它们供应到图像合成处理部分25。

(2-4)位置差计算处理

位置差计算部分24针对设备将处理的目标第一图像(即，图像数据D11)和在第一图像之前设备已经处理的在先目标第二图像(即，图像数据D11)，计算位置差：位置差计算部分24计算第一图像的血管线和第二图像的相应血管线之间的位置差。第一图像也被称为“当前图像”，而已经在当前图像之前被处理的第二图像也被称为“在先图像”。

位置差计算部分24的计算方法例如是基于所谓的光学流(optical-flow)的。例如，如图8A所示，位置差计算部分24从当前图像IM1选择某个点作为引注点AP，并且围绕引注点AP设定m×n的像素方块(也称为“引注块”)ABL。位置差计算部分24计算引注块ABL的亮度。

如图8B所示，位置差计算部分24从在先图像IM2找出亮度值与引注块ABL的亮度值最接近的块RBL，然后将块RBL的中心作为针对引注点AP的相应点XP。位置差计算部分24计算从位置AP’(在先图像IM2的该位置AP’与当前图像IM1的引注点AP相同)指向相应点XP的位置矢量V(Vx，Vy)。

位置差计算部分24对于当前图像IM1的多个引注块的重复执行上述处理；每次当位置差计算部分24设定引注块ABL时，其找出在先图像IM2的相应块RBL，并且计算从点AP’(其位置与引注块的中心相同)指向块RBL的中心的位置矢量。位置差计算部分24随后计算位置矢量的平均值(即，水平矢量分量Vx和垂直矢量分量Vy的平均值)作为位置差，然后将其作为位置差数据D15供应到图像合成处理部分25。

在此实施例中，位置差计算部分24被设计成基于位置数据D13来从当前图像IM1检测血管线的特征点，并指定这些特征点作为引注点AP。就是说，引注点AP仅仅从血管线而不是从图像IM1的所有像素检测出。这减小了位置差计算部分24搜索块RBL的处理工作量。

在搜索亮度值与引注块ABL的亮度值最接近的块RBL之前，位置差计算部分24设定围绕位置AP’的搜索区域SAR，如图9所示。搜索区域SAR的大小是一定数量的引注块的组合。位置差计算部分24在搜索区域SAR中搜索相应点。这样，位置差计算部分24仅仅搜索在先图像IM2的一部分，而不是整个图像IM2。这减小了位置差计算部分24搜索块RBL的处理工作量。

图10示出了当前图像和在先图像之间的位置差：纵向线是由图案提取部分22从当前图像提取的血管线；血管线上的点是由特征点检测部分23检测的；虚线表示由图案提取部分22从在先图像提取的血管线。

在此情况下，位置差由纵向线和虚线之间的水平线表示。实际上，位置差通过对位置矢量或者水平线进行平均来计算。

从图10可清楚了解，计算出的位置差反映了手指的当前位置和在先位置之间的垂直差(其取决于用户手指压靠表面的力度等)，也反映了当前位置和在先位置之间的水平差。

此外，根据计算出的位置差，位置差计算部分24在在先图像IM2上移动搜索区域SAR。

下面是移动搜索区域SAR的一个实例。当在在先图像IM2中搜索与存在于当前图像IM1的血管线上的特征点(即，引注点AP)相应的点时，位置差计算部分24使用位置差(Vx_-AVE，Vy_-AVE)，所述位置差(Vx_-AVE，Vy_-AVE)已经在将在先图像IM2当作“当前”图像IM1时被计算出。当此位置差(Vx_-AVE，Vy_-AVE)为零时(这意味着不存在位置差)，位置差计算部分24在在先图像IM2上设定围绕位置AP’的搜索区域SAR1，其中所述位置AP’是与引注点AP相同的位置(如图11所示)。

顺带地，如果当前图像IM1、在先图像IM2和更前的图像分别为第k个图像、第k-1个图像和第k-2个图像，则已经在将在先图像IM2当作“当前”图像IM1时计算出的位置差(Vx_-AVE，Vy_-AVE)等于第(k-1)个图像与第(k-2)个图像之间的位置差。

而当位置差(Vx_-AVE，Vy_-AVE)不为零时(这意味着存在一定的位置差)，则位置差计算部分24将点AP’移动等于位置差的量，并且设定围绕其(即，图11中的点AP”)的搜索区域SAR2。

以此方式，位置差计算部分24被设计来根据在先计算出的位置差(Vx_-AVE，Vy_-AVE)移动搜索区域SAR的中心。因此，在先图像IM2上的搜索区域SAR的位置可以被改变。

这意味着位置差计算部分24移动搜索区域SAR，以补偿手指的当前位置和在先位置之间的垂直差(其取决于用户手指压靠表面的力度等)，并补偿当前位置和在先位置之间的水平差。

顺带地，在此实施例中，位置差的计算基于图像数据D11，该数据是在图案提取部分22的处理之前产生的。

此图像数据D11清晰地指明了血管线和其它部分之间的边界，如图5A和5B所示。此外，在该图像上的血管线的亮度被当作表示血管的实际三维(横截面)形状的信息，如图12所示。然而，已经经过图案提取部分22的提取处理(二进制化和细化处理(图13))的图像数据D12或者D13表示血管的经圆滑的形状，如图14A和14B所示。

如果图像数据D12或者D13被用于在在先图像IM2中搜索亮度与当前图像IM1的引注块ABL的亮度最接近的块的处理(如图8B所示)，则位置差计算部分24难以找出合适的一个块，因为可能存在多个与引注块ABL的亮度基本相同的块。在此情况下，位置差计算部分24可能不能精确地计算出位置差。

这就是为什么位置差计算部分24使用图像数据D11(其是在图案提取部分22的提取处理之前生成的数据)来计算位置差的原因。

另一方面，当前图像IM1的引注块ABL的引注点AP等于从已经经过图案提取部分22的提取处理的图像数据D13检测的特征点。

特征点代表血管线的图案。从还没有经过图案提取部分22的提取处理的图像所检测的特征点可能与从已经经过图案提取部分22的提取处理的图像数据所检测的特征点不一致。因此，这种方法(从还没有经过提取处理的图像检测特征点)是不可靠的。

因此，位置差计算部分24从已经经过图案提取部分22的提取处理的图像数据D13检测特征点，并且将其当作当前图像IM1的引注块ABL的引注点AP。

(2-5)图像剪切处理

如图15所示，图像合成处理部分25的图像剪切部分25A从输入图像(即，图像数据D12)切下从线LN1延伸到线LN2的有效区域AR，所述线LN1和线LN2中的每一者距中心线CLN一定距离，所述中心线CLN将图像在拍摄对象的运动方向上分成相等的两份。

中心线CLN与线LN1和LN2之一之间的距离(由像素数量表示)DS被确定成使得第一运动距离对第二运动距离的比(ratio)小于一个像素；第一运动距离表示拍摄对象在运动方向上相对于图像获取表面的中心所移动的距离，而第二运动距离是指拍摄对象在运动方向上相对于中心线之外的一条线移动的距离。

设想如图16所示，手指具有从手指的中心o延伸了距离r的血管，该手指围绕中心o在旋转方向d上旋转了角度Δθ。在此情况下，血管的下述点被称为P0：该点位于通过中心o并且与图像获取表面垂直相交的横截面上。当手指沿旋转方向d旋转了Δθ的角度时，点P0移动到位置P’0。同时，在旋转方向d上与点P0成θ角度的点P1移动到点P’1。

另一方面，如果拍摄对象(手指)具有平坦表面，则点P0和P’0之间在图像获取表面上的距离Δx₀和点P1和P’1之间在图像获取表面上的距离Δx₁基本相同。然而，因为拍摄对象的表面是弯曲的，所以距离Δx₀和Δx₁彼此不同。

如果旋转速度非常慢，则距离Δx₀由如下表示：

${\mathrm{\Δx}}_0=r\sin \left(\mathrm{\Δ\θ}\right)$

$\≅r\·\mathrm{\Δ\θ}\·\·\·\·\·\·\left(1\right)$

类似地，距离Δx₁由如下表示：

${\mathrm{\Δx}}_1=r\sin (\mathrm{\θ}+\mathrm{\Δ\θ})-r\sin \left(\mathrm{\θ}\right)$

$=r\{\sin \left(\mathrm{\θ}\right)\cos \left(\mathrm{\Δ\θ}\right)+\cos \left(\mathrm{\θ}\right)\sin \left(\mathrm{\Δ\θ}\right)-\sin \left(\mathrm{\θ}\right)\}$

$\≅r\{\sin \left(\mathrm{\θ}\right)\·1+\cos \left(\mathrm{\θ}\right)\·\mathrm{\Δ\θ}-\sin \left(\mathrm{\θ}\right)\}$

$=r\·\mathrm{\Δ\θ}\·\cos \left(\mathrm{\θ}\right)\·\·\·\·\·\·\left(2\right)$

基于上述的等式(1)和(2)，Δx₀和Δx₁比值为：

$\frac{\mathrm{\Δ}{x}_1}{\mathrm{\Δ}{x}_0}=\frac{r\·\mathrm{\Δ\θ}\·\cos \left(\mathrm{\θ}\right)}{r\·\mathrm{\Δ\θ}}=\cos \left(\mathrm{\θ}\right)\·\·\·\·\·\·\left(3\right)$

另一方面，在图像获取表面上点P0和P1之间的角度θ由如下表示：

$\mathrm{\θ}=\arctan \left(\frac{r\sin \left(\mathrm{\θ}\right)}{r}\right)\·\·\·\·\·\·\left(4\right)$

因此，将等式(3)中的“θ”用等式(4)替换，将Δx₀与Δx₁的比值以如下方式表示：

$\frac{\mathrm{\Δ}{x}_1}{\mathrm{\Δ}{x}_0}=\cos \left(\arctan \left(\frac{r\sin \left(\mathrm{\θ}\right)}{r}\right)\right)\·\·\·\·\·\·\left(5\right)$

假定允许Δx₀与Δx₁之间的差，点P0和P1之间的在图像获取表面上的区域r(sin(θ))，至多为10个像素。在此情况下，如果在图像获取表面上对应于运动方向的方向的宽度是与手指的宽度相同的60个像素，则离中心o的距离r为约30个像素。

因此，基于等式(5)，Δx₀与Δx₁的比值为0.9388...。就是说，点P0的运动距离Δx₀与点P1的运动距离Δx₁之间的差小于一个像素。因此，它们被认为与实际运动距离Δθ相同。在此情况下，根据等式(4)，角度θ(角度P0-o-P1)为约20度。

因此，如果要剪切的图像的宽度就像素而言与手指的相同，则有效区域AR的最大尺寸将为将被剪切的图像的宽度的1/3。此外，有效区域AR的一端与另一端之间相对于手指中心的角度为最多40度。这防止了有效区域AR的投影失真，而当弯曲的物体投影到平面上时，可能常常发生这样的投影失真。

顺带地，如图10所示，由虚线指示的血管线和由实线表示的血管线在图像的中心区域附近大致相同。另一方面，其在图像的边缘附近彼此不同。因此，从图像切下有效区域AR(图15)防止了投影失真。

某些设备试图通过处理图像的边缘以校正投影失真，而不是从输入图像剪切有效区域AR。然而，如图17B所示，处理图像的边缘(图17A)来校正失真增大了混淆(aliasing)效果。这样，图像上血管的平滑线(图17A)被转变成如图17C所示的锯齿线。

因此，图像剪切部分25A通过剪切有效区域AR提供了更可靠的图像。

(2-6)图像附加处理

如图18所示，图像附加部分25B提供扩展图像EXM，多个图像被附加到扩展图像EXM上。图像附加部分25B将图像IM10到IM16布置在扩展图像EXM上：图像IM10到IM16中每一者的上左端的位置例如根据由位置数据D13表示的相应位置差来确定。

实际上，图像附加部分25B在扩展图像EXM的左侧区域上放置第一图像IM10。顺带地，在此实施例中，附加到扩展图像EXM的图像IM10包括有效区域AR(图15)和边缘区域两者，因为图像剪切部分25A没有进行切除。

此后，图像附加部分25B根据位置差(即，水平矢量分量Vx和垂直矢量分量Vy(图8B)的平均值)逐个地放置第二图像和后续的图像IM11到IM16，使得每一个图像的参考点位于在先附加的图像的参考点。结果，每一个图像的血管线的一部分与在先附加的图像的血管线的一部分搭接(overlap)。

顺带地，除了最后一个图像IM16，第二图像和后续的图像IM11到IM15仅仅包括由图像剪切部分25A的剪切处理得到的有效区域AR(图15)。与第一图像IM10相似，被附加到扩展图像EXM的最后一个图像IM16包括有效区域AR(图15)和边缘区域两者。

在将最后一个图像IM16附加到扩展图像EXM之后，图像附加部分25B切除扩展图像EXM的突出部分(即图像CIM1(图19A))，产生用于登记的矩形图像CIM2。

图像附加部分25B随后基于位置数据D13识别图像CIM2的血管线的特征点，然后通过将特征点数据、图像CIM2的数据以及将特征点和图像CIM2关联的数据进行合成，产生将被登记的数据(称为“登记数据”)。

以此方式，控制部分10产生登记数据：该登记数据包括下述图像和血管的特征点的数量：手指内的血管的投影在所述图像上。

(3)登记过程

图20是示出了血管登记模式的登记过程的流程图。为了易于解释，设备没有削减从图像获取部分12顺序地供应的图像的数量。

当接收到血管登记模式执行指令COM1时，控制部分10开始登记过程并且进行到步骤SP1。在步骤SP1，控制部分10控制通知部分15，以向用户发送其应将其手指放置在拍摄位置并在表面上滚动其手指的消息。同时，控制部分10控制图像获取部分12，以开始拍摄。

当接收到从图像获取部分12供应的图像数据之后，在步骤SP2，控制部分10在图像上压印血管图案。在随后的步骤SP3，控制部分10将经过压印的图像临时存储在内部缓存器中，作为当前图像。

在随后的步骤SP4，控制部分10将所压印的血管转变为细线。在随后的步骤SP5，控制部分10检测上述细线的终点、分叉点和转折点，作为特征点。

如果当前图像是从图像获取部分12供应的第一个图像，则在步骤SP7，控制部分10将细线图像附加到扩展图像EXM的左侧区域上。在随后的步骤SP8，控制部分10开始将临时存储在内部缓存中的图像当作在先图像，然后返回到步骤SP2。

而如果当前图像不是从图像获取部分12供应的第一个图像，则在步骤SP9，控制部分10基于在步骤SP4和SP5检测的当前图像的特征点计算在先图像和当前图像之间的位置差：在先图像和当前图像都被临时存储在内部缓存器中。

在步骤SP10，控制部分10由在步骤SP9计算出的水平矢量分量Vx和垂直矢量分量Vy(图8B)的平均值，识别出与手指的运动方向一致的矢量分量(即，垂直矢量分量Vy(图8B)的平均值)，然后检查其是否大于或等于预定阈值。

如果矢量分量小于该阈值，则控制部分10判定手指基本没有运动。在此情况下，在随后的步骤SP11，控制部分10从内部缓存删除当前和在先的经过压印的图像，然后返回到步骤SP2。

而如果矢量分量大于或等于阈值，则在步骤SP12控制部分10从内部缓存删除在先的压印图像，然后开始将存储在内部缓存中的当前压印图像当作在先压印图像。控制部分10随后进行到步骤SP13。

在步骤SP13，控制部分10检查剪切图像的数量是否达到预定数量。如果没有，则在步骤SP14，控制部分10从当前压印图像剪切有效区域AR(图15)。在随后的步骤S15，控制部分10根据在步骤SP9计算的位置差，将当前压印图像附加到扩展图像EXM(图18)，使得当前图像的各个血管线的一部分与在先附加的图像的相应部分搭接。控制部分10随后返回到步骤SP2。

而如果剪切图像的数量达到了预定数量，则在步骤SP16，控制部分10以与步骤SP14相似的方式将当前压印图像附加到扩展图像EXM(图18)，然后从扩展图像EXM剪切合成图像CIM1(图19A)，获得用于登记的图像CIM2。控制部分10随后产生登记数据，登记数据包括图像CIM2和图像CIM2的血管线的特征点的数据。

在随后的步骤SP17，控制部分10在存储器13(图1)中登记登记数据，然后结束登记过程。

以此方式，控制部分10以血管登记模式工作。

(4)认证模式

下面描述认证模式。当接收到认证模式指令时，控制部分10(图1)进入认证模式。控制部分10控制通知部分15，以要求用户将其手指稳定地放置在拍摄位置。控制部分10还开始操作图像获取部分12。

当控制部分10从图像获取部分12的图像获取元件接收到作为拍摄结果的图像数据时，控制部分10执行压印处理、图案提取处理和特征点检测处理，这些处理与血管登记模式中的那些相同。以此方式，控制部分10获得合成图像数据和该图像的血管线的特征点数据。

控制部分10通过将所获得的特征点和图像(也分别被称为“参考点”和“参考图像”)与登记数据的特征点和图像(也分别被称为“登记点”和“登记图像”)进行比较，来检查用户是否是登记在设备中的合法的人。

如果控制部分10判定用户不是合法的，则控制部分10相应地通过显示部分15a和音频输出部分15b通知用户。而如果控制部分10判定用户是合法的，则控制部分10通过接口14向设备供应数据，表明用户是合法的人这一事实。当接收到该数据时，所述设备执行预定过程，诸如为该用户开门或者对于被禁止执行的操作模式解除限制。

以此方式，控制部分10以认证模式工作。

下面描述控制部分10如何获得参考点和参考图像以及如何判定用户是合法的。这些处理可以由如图21所示的功能块表示：图像剪切部分31、图像校正部分32以及验证部分33。

图像剪切部分31接收由压印处理、图案提取处理和特征点检测处理得到的参考图像数据和参考点数据，其中，压印处理、图案提取处理和特征点检测处理与血管登记模式的那些相同。

(4-1)图像剪切处理

图像剪切部分31在登记图像中搜索适于与参考图像进行比较的部分。具体地，如图22所示，图像剪切部分31识别出参考图像IM_R的有效区域AR_R中的参考点的图案，并且找出登记图像中的下述区域：该区域包括与被识别的图案基本相同或者相似的登记点的图案。此有效区域AR_R的大小与血管登记模式的有效区域AR的相同。

这防止了当弯曲的物体被投影在平面上时常常发生的投影失真。因此，图像剪切部分31可以精确地找出登记图像的下述区域：该区域包括与被识别的图案(也称为“搜索目标图案”)基本相同或相似的登记点的图案。

如果没有检测到该登记点图案(其与搜索目标图案基本相同或相似)，则意味着参考图像IM_R的血管线不同于登记图像CIM2的血管线。在此情况下，设备通过显示部分15a和音频输出部分15b通知用户用户不是合法的这一事实。

如果检测到该图案，则图像剪切部分31基于通过左端和右端登记点之间的中点的垂直线CLN_E从登记图像剪切验证目标图像IM_E，所述验证目标图像IM_E的大小与参考图像IM_R的相同并用于进行验证。

(4-2)图像校正处理

图像校正部分32校正验证目标图像IM_E的侧边区域AR_E-1和AR_E-2(图22)，使得侧边区域AR_E-1和AR_E-2的血管线变成弯曲的。顺带地，侧边区域AR_E-1和AR_E-2之间的是有效区域AR_E。

在此情况下，登记图像CIM2(图19B)是多个图像的集合，所述图像中的每一个是图像的中间部分(即，有效区域AR(图15))，该部分投影失真较小。因此，从登记图像CIM2剪切的验证目标图像IM_E的有效区域AR_E和侧边区域AR_E-1和AR_E-2具有低的投影失真。

另一方面，参考图像IM_R的侧边区域AR_R-1和AR_R-2具有较大的投影失真(在侧边区域AR_R-1和AR_R-2之间的是有效区域AR)。因此，将未调整的验证目标图像IM_E与参考图像IM_R进行比较可能由于侧边区域AR_E-1和AR_R-1和侧边区域AR_E-2和AR_R-2之间在血管线形状上的显著差别而导致不正确的结果(诸如错误地验证用户)。

因此，图像校正部分32如图23A到23C所示校正验证目标图像IM_E：将倾斜的侧边区域AR_E-1和AR_E-2投影在平面FM上，使得它们处于与有效区域AR_E相同的水平面上，如图23A和23B所示。在此情况下，经校正的侧边区域AR_E-1和AR_E-2在图23A通过用点填充的方式表示，并且在图23B和23C中由实线箭头表示。侧边区域AR_E-1和AR_E-2从有效区域AR_E的终点P₁和P₁’向后倾斜，形成角度θ_E(图23B和23C)。

顺带地，在此情况下，图23A到23C的九棱柱代表手指。验证目标图像IM_E的宽度为60个像素，而有效区域AR的宽度为20个像素(这意味着从有效区域AR的一端到垂直线CLN_E的距离是10个像素)。

在此情况下，根据等式(4)，角度P0-o-P1，或者θ，为约20度。因此，角度P0-o-Px，或者θ_E，为约40度。此外，侧边区域AR_E-1和AR_E-2相对于有效区域AR_E形成约40度的角度。

因此，侧边区域(在图23A中用点填充的方式表示，在图23B和23C中由实线箭头表示)的投影血管线的宽度按如下计算：cos(40°)×(倾斜的侧边区域AR_E-1(或AR_E-2)的宽度)。

顺带地，此设备不对参考图像IM_R的侧边区域AR_R-1和AR_R-2进行校正的原因与图18所示的相同。

(4-3)验证过程

验证部分33被设计来根据互相关函数将验证目标图像IM_E与参考图像IM_R进行比较。结果，验证部分33获得互相关值。如果该互相关值大于或等于预定的阈值，则验证部分33判定用户是被登记在设备中的合法的人。而如果互相关值小于阈值，则验证部分33判定用户不是合法的。

在此，控制部分10首先通过将手指中的血管图案投影在平坦表面上来获得登记图像CIM2。控制部分10然后基于登记图像CIM2和参考图像IM_R的特征点来搜索验证目标图像IM_E，并通过将验证目标图像IM_E与参考图像IM_R进行比较来检查用户是否是合法的。

(5)认证过程

图24是示出了认证模式的认证过程的流程图。

当接收到认证模式执行指令COM2之后，控制部分10开始认证过程，然后进行到步骤SP21。在步骤SP21，控制部分10控制通知部分15，以通知用户其应该将其手指放置在拍摄位置，使得手指肚接触其表面，然后在该表面上滚动其手指。此外，控制部分10控制图像获取部分12，以开始拍摄。

当从图像获取部分12接收到图像数据(参考图像的数据)时，在步骤SP22，控制部分10在执行验证过程之前以与血管登记模式相同的方式执行压印处理、图案提取处理和特征点检测处理。

在随后的步骤SP23，控制部分10识别出参考图像IM_R的有效区域AR_R中的参考点的图案，作为搜索目标图案。控制部分10随后在登记图像CIM2中搜索与搜索目标图案(图22)相同或相似的图案。

如果控制部分10成功地找到了与搜索目标图案相同或相似的登记点的图案，则在步骤SP24，控制部分10基于通过左端和右端登记点之间的中点的垂直线CLN_E从登记图像剪切验证目标图像IM_E(图22)，所述验证目标图像IM_E的大小与参考图像IM_R的相同并用于进行验证。控制部分10随后进行到步骤SP25。

在步骤SP25，控制部分10如图23A到23C所示校正验证目标图像IM_E：倾斜的侧边区域AR_E-1和AR_E-2被投影到平面FM上，使得它们与有效区域AR_E处于相同的水平面上。

随后，在步骤SP26，控制部分10根据互相关函数将验证目标图像IM_E(在步骤SP25经过校正)与参考图像IM_R(在步骤SP22获得)进行比较。结果，控制部分10获得互相关值。在随后的步骤SP27，控制部分10检查用户是否是合法的。

如果互相关值小于阈值，则控制部分10判定用户不合法，然后返回到步骤SP23，以再次进行该过程。

而如果互相关值大于或等于阈值，则控制部分10判定用户是合法的，然后进行到步骤SP28。在步骤SP28，控制部分10执行针对合法用户的处理，然后结束认证过程。

另一方面，如果在步骤SP23，控制部分10没有找出与搜索目标图案相同或者相似的登记点的图案，则意味着登记图像CIM2(图19B)可能没有这样的部分：所述部分与参考图像IM_R的互相关值大于或等于阈值。在此情况下，控制部分10判定用户不是合法的。随后，在步骤SP29，控制部分10执行针对未登记用户的处理，然后结束认证过程。

以此方式，控制部分10以认证模式工作。

(6)操作和效果

在血管登记模式中，认证设备1的位置差计算部分24计算当前图像IM1的血管线和在先图像IM2的相应血管线之间的位置差，其中，所述在先图像IM2是在当前图像IM1之前被供应的(图8A和8B)。图像合成处理部分25(图4)针对在先图像IM2校正当前图像IM1的位置，并且将当前图像IM1与在先图像IM2合成，使得当前图像IM1的每个血管线的一部分与在先图像IM2的相应部分搭接(图18)。

因此，认证设备1的固定的图像获取摄像机周期性拍摄在拍摄区域上滚动的手指，认证设备1可以补偿手指的当前位置和在先位置之间的垂直差。

因此，认证设备1可以被容易地安装在诸如移动电话机或者个人数字助理(PDA)的小型装置上，因为设备1不必具有用于手指插入的任何装备。

由图案提取部分22处理之前的手指图像显示出模糊的血管轮廓(图5A)。因此，在使得血管线变细之后可能存在许多血管线(图14A和14B)。这使得难以计算手指的水平差和垂直差。

在本实施例中，在计算水平差和垂直差之前，图案提取部分22产生血管的清晰轮廓的图像。认证设备1因此可以精确地计算当前图像和在先图像之间的血管位置差。

顺带地，在校正血管的图像IM10到IM16(图18)的失真之前，设备可能不能适当地连接图像IM10到IM16。

另一方面，如果设备被设计成使用有效区域AR，则理想的是使得有效区域AR的宽度尽可能大，因为合成许多小的有效区域AR增大了处理工作量。因此，对有效区域的宽度上限进行预先设定可以帮助具有能力较低的处理器的装置(诸如移动电话机或者PDA)顺利工作。

在本实施例中，有效区域的宽度的上限是从其剪切一片的图像的1/3(假定手指宽度基本等于图像的宽度)(图16)。这样，认证设备1可以设定合适的有效区域AR宽度，以在考虑到处理工作量影响的同时减小失真。

以此方式，认证设备1不必具有围绕拍摄位置(即，手指)旋转以获得手指图像的图像获取摄像机。相反，认证设备1具有固定的图像获取摄像机，所述固定的图像获取摄像机周期性地拍摄在平面上围绕拍摄位置滚动的手指。此外，认证设备1可以补偿当前图像和在先图像之间手指的水平和垂直位置差。因此，认证设备1可以被小型化，并且可以精确地对用户进行验证。

(7)其它实施例

在上述实施例中，被验证的生物测量特征是身体部分内的血管。但是，本发明不限于此。例如，神经(nerve)、指纹或者面部可以被用于验证。在一些情况下，设备可以不执行压印处理。

而且，在上述实施例中，被验证的身体部分是手指。但是，本发明不限于此。例如，手掌、脚趾、手臂或者眼睛可以被用于验证。

此外，在上述实施例中，压印部分21使用称为高斯滤波器的差分滤波器。但是，本发明不限于此。压印部分21也可以使用其它差分滤波器，诸如对数滤波器或者反差滤波器。压印部分21在差分滤波器之前或者之后可以包括空间滤波器等，以减小噪声。

此外，在上述实施例中，特征点检测部分23检测分叉点、终点和转折点中的一些作为特征点。但是，本发明不限于此。特征点检测部分23可以检测分叉点、终点或者转折点作为特征点。或者，特征点检测部分23可以检测所有的分叉点、终点和转折点作为特征点。

此外，在上述实施例中，在图案提取处理使得图像的血管成为线形图案之后，特征点检测部分23检测特征点。但是，本发明不限于此。特征点检测部分23可以在处理手指图像之前或者在压印处理之后检测特征点。关于检测特征点的详细描述例如公开在日本专利公开No.2006-207033中。然而，设备可以使用称为Harris Corner的另一种差分滤波方法。

此外，在上述实施例中，位置差计算部分24从在先图像IM2检测出与当前图像IM1的引注块ABL亮度最接近的块RBL，然后将块RBL的中心点当作相应点XP(图9)。但是，本发明不限于此。位置差计算部分24可以从在先图像IM2中找出这样的块RBL：所述块RBL的亮度是小于引注块ABL亮度的预定值；然后将所述块RBL的中心点当作相应点XP。这可以更精确地检测相应点XP。

此外，在上述实施例中，位置差计算部分24在在先图像IM2上移动搜索区域SAR(图11)。但是，本发明不限于此。相反，位置差计算部分24可以在在先图像IM2上改变搜索区域SAR的形状。

在此情况下，位置差计算部分24计算当在先图像IM2被当作“当前”图像时计算的位置差与在先位置差之间的变化：计算出的变化由x和y分量(Vx_-AVE，Vy_-AVE)表示。根据计算出的变化，位置差计算部分24调整搜索区域SAR的缺省位置。

如图25所示(图25的若干部分由与图11的相应部分相同的标号和符号表示)，如果计算出的变化为零，则意味着手指没有移动。在此情况下，设备围绕与AP相同的位置AP’将搜索区域SAR1布置在在先图像IM2上。另一方面，如果y分量(Vy_-AVE)存在变化，则意味着手指在滚动。在此情况下，设备将搜索区域SAR2布置在在先图像IM2上，使得其一侧(与手指没有运动的方向的一致)被最小化，而另一侧(与手指运动的方向一致)根据手指的运动快慢进行调节。这样，搜索区域SAR2可以有效地覆盖手指在其中运动的区域。

此外，在上述实施例中，位置差计算部分24以如下方式计算位置差：位置差计算部分24基于从当前图像IM1检测的每一个点AP’或者特征点，在在先图像IM2上检测出相应点XP，然后计算从点AP’指向相应点XP的位置矢量的平均值(即水平矢量分量Vx的平均值和垂直矢量分量Vy的平均值)(图8A和8B)作为位置差。但是，本发明不限于此。或者，位置差可以是根据统计方法从位置矢量计算出的值(代表值)，诸如位置矢量的最大值、最小值或者标准差。

此外，在上述实施例中，位置差计算部分24基于从当前图像IM1检测的所有特征点的每个位置AP’确定相应点XP(图8A和8B)。但是，本发明不限于此。或者，位置差计算部分24可以基于当前图像IM1的有效区域AR(图15)内的特征点的每个位置来确定相应点XP。这减小了反映在计算出的位置差上的失真校正的影响。因此，这使得设备可以更精确地计算位置差。

此外，在上述实施例中，图像合成处理部分25在从第一和最后一个图像剪切有效区域AR(图15)之前将第一和最后一个图像附加到扩展图像EXM(图18)。但是，本发明不限于此。可以将从第一和最后一个图像剪切的有效区域AR(图15)附加到扩展图像EXM上。

此外，上述实施例的验证方式是将参考图像IM_R的整个区域与相应区域进行比较。但是，本发明不限于此。相反，设备可以仅仅将参考图像IM_R的有效区域AR_R与相应区域进行比较。

此外，在上述实施例中，设备在从图像提取图案之后将图像附加到扩展图像EXM。但是，本发明不限于此。相反，设备可以在压印处理之后将图像附加到扩展图像EXM，然后从其提取图案。

此外，在上述实施例中，设备被设计成登记扩展图像(CIM2(图19B))以及与该图像上的血管线有关的特征点数据。但是，本发明不限于此。或者，设备可以仅仅登记扩展图像。在此情况下，设备在认证模式下可以检测登记的点以及参考点；因此，设备可以提供与上述实施例相同的效果。

此外，在上述实施例中，设备被设计成登记扩展图像(CIM2(图19B))以及与该图像上的血管线有关的特征点数据。但是，本发明不限于此。或者，设备可以仅仅登记与扩展图像(CIM2(图19B))上的血管线有关的特征点数据。这使得设备可以不执行对当用户被验证时输入的参考图像和从登记图像剪切的验证目标图像进行比较的比较过程，减小了设备的处理工作量。

此外，在上述实施例中，设备通过执行存储在ROM中的程序而以血管登记模式或者认证模式工作。但是，本发明不限于此。这些程序可以从诸如光盘(CD)、数字多功能盘(DVD)或者半导体存储器的程序存储介质安装到设备中，或者可以通过因特网从程序供应服务器获得。

此外，在上述实施例中，登记过程和认证过程由控制部分10执行。但是，本发明不限于此。这些过程的一部分可以由图形工作站执行。

此外，在上述实施例中，认证设备1配备有图像获取功能、验证功能和登记功能。但是，本发明不限于此。这些功能中的一个或者一些可以由另一个设备实现。

上述方法可以应用于生物测量验证。

本领域技术人员应该理解，根据设计要求和其它因素，在权利要求或其等同物的范围内，可能进行各种修改、组合、子组合和替换。

相关申请的交叉引用

本发明包含涉及2006年12月15日递交给日本专利局的日本专利申请JP 2006-339058的主题，其全文通过引用被包含在本文中。

Claims (6)

1.一种登记设备，包括：

压印部分，所述压印部分将用于验证的身体特征压印在输入图像上；

图案提取部分，所述图案提取部分从压印了所述身体特征的所述输入图像提取所述身体特征作为线形图案；

检测部分，所述检测部分检测所述线形图案上的所述身体特征的分叉点、终点和转折点的一部分或者全部，作为特征点；

计算部分，在第一图像和第二图像已经由所述压印部分压印有所述身体特征后，所述计算部分计算被处理的所述第一图像上的所述身体特征的一部分和先于所述第一图像而被处理的所述第二图像上的所述身体特征的相应部分之间的位置差，其中，所述计算部分通过在所述第二图像中搜索与从所述第一图像检测出的每个特征点的位置相应的点，获得从所述位置指向所述相应点的位置矢量的代表值，作为所述位置差；

连接部分，所述连接部分在根据计算出的位置差对所述第一图像的位置进行校正之后，将所述第一图像连接到所述第二图像，使得所述第一图像上的所述身体特征的一部分与所述第二图像上的所述身体特征的相应部分搭接；以及

登记部分，所述登记部分将经过连接的图像登记在存储介质中。

2.如权利要求1所述的登记设备，其中，所述计算部分在搜索区域内搜索所述相应点，所述搜索区域的中心处于所述的位置。

3.如权利要求1所述的登记设备，其中，所述计算部分在搜索区域内搜索所述相应点，所述搜索区域的中心与所述位置的距离为在先检测出的位置差。

4.如权利要求2所述的登记设备，其中，所述计算部分根据所检测出的位置差的变化大小来改变所述搜索区域的形状。

5.如权利要求1所述的登记设备，其中，所述登记部分登记所述经连接的图像和从所述经连接的图像检测出的所述特征点。

6.一种登记方法，包括：

第一步骤，将用于验证的身体特征压印在输入图像上；

第二步骤，从压印了所述身体特征的所述输入图像提取所述身体特征作为线形图案；

第三步骤，检测所述线形图案上的所述身体特征的分叉点、终点和转折点的一部分或者全部，作为特征点；

第四步骤，在第一图像和第二图像已经由所述压印部分压印有所述身体特征后，计算被处理的所述第一图像上的所述身体特征的一部分和先于所述第一图像而被处理的所述第二图像上的所述身体特征的相应部分之间的位置差，其中，通过在所述第二图像中搜索与从所述第一图像检测出的每个特征点的位置相应的点，获得从所述位置指向所述相应点的位置矢量的代表值，作为所述位置差；

第五步骤，在根据计算出的位置差对所述第一图像的位置进行校正之后，将所述第一图像连接到所述第二图像，使得所述第一图像上的所述身体特征的一部分与所述第二图像上的所述身体特征的相应部分搭接；以及

第六步骤，将经过连接的图像登记在存储介质中。

Images