JP2008129704A - Personal identification device - Google Patents

Personal identification device Download PDF

Info

Publication number
JP2008129704A
JP2008129704A JP2006311687A JP2006311687A JP2008129704A JP 2008129704 A JP2008129704 A JP 2008129704A JP 2006311687 A JP2006311687 A JP 2006311687A JP 2006311687 A JP2006311687 A JP 2006311687A JP 2008129704 A JP2008129704 A JP 2008129704A
Authority
JP
Japan
Prior art keywords
data
update
similarity
unit
registered
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006311687A
Other languages
Japanese (ja)
Other versions
JP5035876B2 (en
Inventor
Kenji Matsuo
賢治 松尾
Masayuki Hashimoto
真幸 橋本
Atsushi Koike
淳 小池
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2006311687A priority Critical patent/JP5035876B2/en
Publication of JP2008129704A publication Critical patent/JP2008129704A/en
Application granted granted Critical
Publication of JP5035876B2 publication Critical patent/JP5035876B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

<P>PROBLEM TO BE SOLVED: To provide a highly reliable personal identification device for suppressing the deterioration of authentication precision due to secular change, and for evading careless update. <P>SOLUTION: A detection part 21 detects the arm swinging action of an authenticated person as time sequential data. A similarity calculation part 24 calculates the degree of similarity of the preliminarily registered data A and input data B in an object block newly input in authenticating by using DP-matching, and a decision part 25 decides whether or not a user is the right person in question or the others according to whether or not the degree of similarity exceeds a first threshold. Also, an update part 26 prepares new update data C from the preliminarily registered registration data A based on the newly input input data B. A second threshold which is smaller than the first threshold is prepared, and when the degree of similarity exceeds the second threshold value, the decision part 25 updates the data A registered in the storage part 23 to the update data C. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、腕振り行動による本人認証装置に関し、特に、第三者になりすましされにくく、安全性および利便性の高い本人認証装置に関する。また、携帯電話等の所有者の正当性を確認するのに好適な本人認証装置に関する。  The present invention relates to a personal authentication device based on arm swinging behavior, and more particularly to a personal authentication device that is not easily spoofed by a third party and has high safety and convenience. The present invention also relates to a personal authentication device suitable for confirming the validity of the owner of a mobile phone or the like.

近年、金融業界や公的機関等の様々な場面において、銀行口座や個人情報を第三者のなりすましによる不正から守るために、本人認証を行う必要性が高まってきている。本人認証を行うための代表的な方法として、磁気カードと暗証番号とを組み合わせて本人認証を行う方法がある。   In recent years, in various situations such as in the financial industry and public institutions, there is an increasing need to perform personal authentication in order to protect bank accounts and personal information from fraud by impersonation by third parties. As a typical method for performing personal authentication, there is a method of performing personal authentication by combining a magnetic card and a password.

しかしながら、磁気情報複製器を使った磁気カードの複製や盗撮カメラを使った暗証番号の盗難犯罪による第三者のなりすましが昨今多発しており、磁気カードと暗証番号の組み合わせによる認証方法の安全性が疑問視されている。また、磁気カードの紛失や暗証番号の忘却の恐れがあり、被認証者に対する利便性に欠けている。   However, there have been frequent third-party impersonation due to magnetic card duplication using a magnetic information duplicator and security code theft crime using a voyeur camera, and the security of the authentication method using a combination of a magnetic card and a security code has been increasing recently. Has been questioned. Further, there is a risk of losing the magnetic card or forgetting the password, which is inconvenient for the person to be authenticated.

このような背景を元に、近年、高い安全性と高い利便性を同時に実現する本人認証方法として、生体情報を用いたバイオメトリクス認証が広く普及するようになった。下記の特許文献1に挙げる本人認証装置は、本発明者等により発明された腕振り行動に基づく認証装置であり、その構成を図9に示す。   Based on this background, in recent years, biometric authentication using biometric information has become widespread as a personal authentication method that simultaneously realizes high safety and high convenience. The personal authentication device described in Patent Document 1 below is an authentication device based on the arm swinging behavior invented by the present inventors, and its configuration is shown in FIG.

該認証装置は、被認証者の腕振り行動を検出する検出部11と、該検出部11により時系列で出力される腕振り行動の時系列データ全体から認証の対象として使用する区間を抽出する抽出部12と、抽出された認証の対象として使用する区間を常に一定の区間長に正規化する正規化部13と、正規化済みの腕振り行動の時系列データを登録データとして保持する記憶部14と、正規化済みの腕振り行動の時系列データと予め登録された腕振り行動の時系列データとの類似度を算出する類似度算出部15と、算出された類似度がしきい値を上回るか否かによって本人か他人かを判定する判定部16とから構成される。
特願2006−012408号
The authentication device extracts a section to be used as an authentication target from a detection unit 11 that detects the arm swing behavior of the person to be authenticated and the entire time series data of the arm swing behavior that is output in time series by the detection unit 11. Extraction unit 12, normalization unit 13 that always normalizes a section to be used as an authentication target, and a storage unit that stores normalized arm swing behavior time-series data as registration data 14, a similarity calculation unit 15 that calculates the similarity between the time series data of the normalized arm swing action and the time series data of the arm swing action registered in advance, and the calculated similarity sets a threshold value It is comprised from the determination part 16 which determines whether it is a principal or another person according to whether it exceeds.
Japanese Patent Application No. 2006-012408

しかしながら、生体認証の共通の問題として、経時変化により認証精度が劣化する問題があった。前記腕振り行動に基づいた認証装置にあっては、腕の筋肉の成長や衰えに起因し、振りのパターンが経時的に変化することにより、本人であっても正しく認証できない状況が発生するという問題がある。   However, as a common problem of biometric authentication, there is a problem that authentication accuracy deteriorates due to a change with time. In the authentication device based on the arm swinging behavior, a situation in which even the person cannot authenticate correctly occurs due to the change in the swing pattern over time due to the growth or decline of the arm muscles. There's a problem.

一般的に、このような問題に対する一つの解決策として、認証の度に最新のデータを取り入れて、登録データを更新する方法が有効であるが、不用意な登録データの更新は、装置の正常な動作を損なう恐れがあり、また装置利用者の負担や処理に必要な待ち時間が増えるため、避けるべきである。   In general, as a solution to such a problem, the method of updating the registered data by taking in the latest data at each authentication is effective, but inadvertent updating of the registered data is normal for the device. Operation should be avoided, and the burden on the user and the waiting time required for processing increase, which should be avoided.

本発明の目的は、上述した従来の課題を解決し、経年変化による認証精度の低下を抑制した本人認証装置を提供することにある。また、不用意な更新を回避することのできる信頼性の高い本人認証装置を提供することにある。また、他の目的は、第三者により成りすましされにくく、携帯電話の所有者等の正当性を確認するのに好適な本人認証装置を提供することにある。   An object of the present invention is to provide a personal authentication device that solves the above-described conventional problems and suppresses a decrease in authentication accuracy due to secular change. Another object of the present invention is to provide a highly reliable personal authentication device that can avoid inadvertent updating. Another object of the present invention is to provide a personal authentication device that is less likely to be spoofed by a third party and is suitable for confirming the legitimacy of the owner of the mobile phone.

前記した目的を達成するために、本発明は、被認証者の腕振り行動を時系列データとして検出する検出部と、前記検出部により時系列で出力される腕振り行動の時系列データ全体から認証の対象として使用する対象区間データを抽出する抽出部と、対象区間データを登録データAとして保持する記憶部と、認証時に新たに入力された対象区間データを入力データBとして予め登録された登録データAとの類似度を算出する類似度算出部と、算出された類似度が第1のしきい値以上になるか否かによって本人か他人かを判定する判定部と、新たに入力された入力データBと予め登録された登録データAとから新たな更新データCを作成し、該更新データCを前記記憶部に登録する更新部とを具備した点に第1の特徴がある。   In order to achieve the above-described object, the present invention provides a detection unit that detects a person's arm swing behavior as time-series data, and the entire time-series data of arm swing behavior output in time series by the detection unit. An extraction unit that extracts target section data to be used as an authentication target, a storage unit that holds the target section data as registration data A, and a registration that is pre-registered as input data B with target section data newly input at the time of authentication A similarity calculation unit that calculates the similarity with data A, a determination unit that determines whether the calculated similarity is equal to or higher than the first threshold value, and a newly entered person A first feature is that a new update data C is created from the input data B and pre-registered registration data A, and an update unit that registers the update data C in the storage unit is provided.

また、本発明は、前記判定部が、前記第1のしきい値より小さい第2のしきい値を有し、前記類似度算出部で算出された類似度が該第2のしきい値を超えたときに、前記登録データAを前記更新データCに更新する指令を出力するようにした点に第2の特徴がある。   According to the present invention, the determination unit has a second threshold value smaller than the first threshold value, and the similarity calculated by the similarity calculation unit has the second threshold value. There is a second feature in that a command to update the registration data A to the update data C is output when the registration data A is exceeded.

また、本発明は、前記類似度算出部が、前記登録データAと入力データBの各サンプル値の角度誤差の最小経路を求め、該最小経路をたどる際に算出される相違度の総和を類似度として用いることによって、変動による二系列データ間の部分的伸縮および位置ずれを吸収した類似度の算出を行うようにした点に第3の特徴がある。   Further, according to the present invention, the similarity calculation unit obtains the minimum path of the angle error between the sample values of the registration data A and the input data B, and the sum of the differences calculated when tracing the minimum path is similar. The third feature is that the similarity is calculated by absorbing the partial expansion / contraction and the positional deviation between the two series data due to the fluctuation by using the degree as a degree.

また、本発明は、前記更新部が、前記最小経路の各点にそれぞれ対応する予め登録されている登録データAおよび新たに入力された入力データBのサンプル値を統合して、前記更新データCを作成するようにした点に第4の特徴がある。   Further, according to the present invention, the update unit integrates sample values of pre-registered registration data A and newly input data B corresponding to each point of the minimum path, so that the update data C There is a fourth feature in that it is created.

また、本発明は、前記本人認証装置が携帯電話機に実装されるようにした点に第5の特徴がある。   In addition, the present invention has a fifth feature in that the personal authentication device is mounted on a mobile phone.

本発明によれば、被認証者の腕振り行動の時系列データに基づき判定を行うため、被認証者の腕の長さおよび筋肉のつき方等の構造を起因とした特徴と、被認証者が持つ固有の「くせ」が介在することとなり、これらの構造に起因した特徴と「くせ」は本人しか持ちえないものであるため、第三者になりすましされにくく、安全性の高い本人認証装置を提供できるようになる。   According to the present invention, since the determination is based on the time-series data of the person to be authenticated, the characteristics of the person to be authenticated, such as the length of the arm and the structure of the muscles, and the person to be authenticated Since the unique “fake” of the media is interspersed, and the features and “fake” resulting from these structures can only be possessed by the person himself, it is difficult for a third party to impersonate and is a highly secure identity authentication device. Will be able to provide.

また、本発明によれば、さらに最新のパターンを取り入れた登録データの更新が行えるので、経年変化による認証精度劣化を抑制することができるようになる。   In addition, according to the present invention, it is possible to update registration data that incorporates the latest pattern, so that it is possible to suppress deterioration in authentication accuracy due to secular change.

また、前記特許文献1に記載の装置では系列長の正規化する必要があり、本人認識率は上がるものの他人受け入れ誤りもあがるという課題があったが、本発明はDP−マッチング法を使用したことにより、取得データの系列長に関する正規化を行う必要が無く、精度劣化を抑制することができるようになる。   In addition, in the apparatus described in Patent Document 1, it is necessary to normalize the sequence length, and there is a problem that although the recognition rate of the person increases, there is also a problem that an error of accepting another person is raised, but the present invention uses the DP-matching method. Therefore, it is not necessary to normalize the sequence length of the acquired data, and accuracy degradation can be suppressed.

また、登録データを更新すべきタイミングを自動的に判定できるため、不用意な登録データの更新を避けることができ、装置利用者の負担や処理待ちを減らすことができる。本発明の装置によると、毎回の認証を行っているだけで、登録データを更新すべきか否かを自動的に判定するため、この結果、装置利用者は更新をなんら意識することなく、登録データを更新することができるようになる。   In addition, since the timing at which the registration data should be updated can be automatically determined, inadvertent updating of the registration data can be avoided, and the burden on the apparatus user and waiting for processing can be reduced. According to the apparatus of the present invention, it is determined whether or not the registration data should be updated only by performing authentication every time. Will be able to update.

また、これまで登録されていた信頼性の高い登録データに最新の腕振り行動の入力データを一部反映させて逐次的に更新するため、雑音を含む可能性のある新たな入力データにそっくり(完全に)更新されないため、信頼性の高い本人認証装置を提供できるようになる。   In addition, since the updated input data of the latest arm swing action is partly updated in the highly reliable registration data that has been registered so far, it will be updated sequentially so that it looks just like new input data that may contain noise ( Since it is not completely updated, a highly reliable personal authentication device can be provided.

また、本発明による本人認証装置は、例えば携帯電話端末等に実装された場合、腕振り行動を通して、携帯電話の使用者が本当に正しい所有者であるか否かの正当性を検証することができるようになる。   Further, when the personal authentication device according to the present invention is mounted on, for example, a mobile phone terminal or the like, it is possible to verify the legitimacy of whether or not the user of the mobile phone is really the correct owner through arm swinging behavior. It becomes like this.

以下に、図面を参照して本発明を詳細に説明する。図1は、本発明の本人認証装置の一実施形態の構成を示すブロック図である。   Hereinafter, the present invention will be described in detail with reference to the drawings. FIG. 1 is a block diagram showing a configuration of an embodiment of a personal authentication apparatus of the present invention.

本人認証装置は、被認証者の腕振り行動を時系列データとして検出する検出部21と、該検出部21により時系列で出力される腕振り行動の時系列データ全体から認証の対象として使用する対象区間データを抽出する抽出部22と、対象区間データを登録データAとして保持する記憶部23と、認証時に新たに入力された対象区間データを入力データBとして予め登録された登録データAとの類似度を算出する類似度算出部24と、算出された類似度がしきい値を上回るか否かによって本人か他人かを判定する判定部25と、新たに入力された入力データBに基づいて予め登録された登録データAから新たな更新データCを作成する更新部26とを備えている。なお、本発明のハード構成は、前記特許文献1の図2と同じものを使用できるので、説明を省略する。   The personal authentication device uses a detection unit 21 that detects the person's arm swing behavior as time-series data, and uses the entire time-series data of the arm swing behavior output in time series by the detection unit 21 as an authentication target. An extraction unit 22 that extracts target section data, a storage unit 23 that stores the target section data as registration data A, and registration data A that is registered in advance as input data B with the target section data newly input at the time of authentication. Based on the similarity calculation unit 24 that calculates the similarity, the determination unit 25 that determines whether the calculated similarity is greater than or equal to the threshold value, and the input data B that is newly input And an update unit 26 that creates new update data C from registered data A registered in advance. The hardware configuration of the present invention can be the same as that shown in FIG.

以下に、前記検出部21、抽出部22、記憶部23、類似度算出部24、判定部25および更新部26について、詳細に説明する。
○検出部21
Below, the said detection part 21, the extraction part 22, the memory | storage part 23, the similarity calculation part 24, the determination part 25, and the update part 26 are demonstrated in detail.
○ Detection unit 21

検出部21は、例えば加速度センサ、ジャイロセンサ等を用いて実現することができる。前記検出部21として前記加速度センサを使用する場合は腕振り行動の加速度が、ジャイロセンサを使用する場合は角加速度が検出される。一例として、図2に示す腕振り行動を行った場合の加速度の時系列変化を図3に示した。横軸は時間、縦軸は加速度の値を示す。上述の例は、x軸、y軸、z軸方向のそれぞれに加速度センサを設置し、x軸、y軸、z軸方向それぞれの加速度の時系列変化を腕振り行動の時系列データとして記録した結果である。
○抽出部22
The detection unit 21 can be realized using, for example, an acceleration sensor, a gyro sensor, or the like. When the acceleration sensor is used as the detection unit 21, the acceleration of the arm swing behavior is detected, and when the gyro sensor is used, the angular acceleration is detected. As an example, FIG. 3 shows time-series changes in acceleration when the arm swinging action shown in FIG. 2 is performed. The horizontal axis represents time, and the vertical axis represents the acceleration value. In the above example, acceleration sensors are installed in each of the x-axis, y-axis, and z-axis directions, and time-series changes in acceleration in the x-axis, y-axis, and z-axis directions are recorded as time-series data of arm swing behavior. It is a result.
○ Extraction unit 22

次に、図4(y軸方向の加速度)を一例として参照し、抽出部22の処理を説明する。抽出部22は、前記検出部21により時系列で出力される値Uを入力(図4(a))して、(1)腕振り行動の時系列データ全体の中から認証に使用する区間だけを特定し(図4(b))、(2)該当する区間を抽出する(図4(c))。   Next, the processing of the extraction unit 22 will be described with reference to FIG. 4 (acceleration in the y-axis direction) as an example. The extraction unit 22 inputs the value U output in time series by the detection unit 21 (FIG. 4 (a)), and (1) only the section used for authentication from the entire time series data of arm swing behavior. Is identified (FIG. 4B), and (2) the corresponding section is extracted (FIG. 4C).

まず、腕振り行動の時系列データ全体の記録の中から認証の対象として使用する区間だけを特定する動作(図4(b))を説明する。   First, an operation (FIG. 4 (b)) for specifying only a section to be used as an authentication target from among records of the entire time-series data of arm swing behavior will be described.

認証の対象として使用する区間は、腕の振り行動が開始したときから終了するまでとする。開始地点と終了地点を判定するために、前記時系列データに関し順次、直近の数サンプル(例えば、10サンプル)の分散を算出する。   The section used as an authentication target is from when the arm swinging action starts to when it ends. In order to determine the start point and the end point, the variance of the latest few samples (for example, 10 samples) is sequentially calculated with respect to the time series data.

腕の振り行動が激しい時ほど、検出部21の出力値として先の例に挙げた加速度、角加速度、速度ともに値が大きく、その分散は大きいと考えられる。逆に、腕の振り行動が静止に近い状態にある時は、加速度、角加速度、速度ともに値は小さく、その分散も小さいと考えられる。   It can be considered that the more the arm swinging action is, the larger the values of the acceleration, the angular acceleration, and the speed mentioned in the previous example are as the output values of the detection unit 21, and the variance is larger. On the other hand, when the arm swinging behavior is almost stationary, the values of acceleration, angular acceleration, and velocity are all small and the variance is also small.

したがって、前記時系列データの直近の数サンプルの分散が設定されたしきい値Tよりも大きい場合は腕の振り行動が大きいと考え、腕を振っている最中と判定する。逆に、直近の数サンプルの分散が設定されたしきい値Tより小さい場合は腕の振り行動は小さく、特に分散が0に近い値を示す場合は静止に近い状態にあると考え、腕を振っていない状態と判定する。   Therefore, when the variance of the most recent samples of the time series data is larger than the set threshold value T, it is considered that the arm swinging action is large, and it is determined that the arm is being shaken. Conversely, if the variance of the most recent samples is smaller than the set threshold value T, the arm swinging action is small, especially when the variance shows a value close to 0, It is determined that it is not shaken.

以上のようにして、直近数サンプルの分散の値に対するしきい値判定により、所望する認証の対象として使用する区間の開始地点tと終了地点tを特定できる。また、しきい値Tの大きさを調整することにより認証の対象として使用する区間長Δを調整することができる。 As described above, the start point t 0 and the end point t 1 of the section to be used as a desired authentication target can be specified by the threshold value determination with respect to the variance value of the most recent samples. Further, by adjusting the size of the threshold value T, the section length Δ used as an authentication target can be adjusted.

次に、全体の記録の中から、上述の処理によって特定された認証の対象として使用する区間Δに相当する記録区間を抽出する(図4(c)参照)。
○記憶部23
Next, a recording section corresponding to the section Δ used as an authentication target specified by the above-described processing is extracted from the entire recording (see FIG. 4C).
○ Storage unit 23

次に、記憶部23には、図1の本発明装置の2箇所のスイッチング手段27および28のそれぞれを接点S1に接続し、携帯電話端末の正当な所有者が携帯電話端末を握って腕振り行動を行った際に、上述の抽出部22の処理を経て取得した対象区間データが、端末の正当な所有者の腕振り行動の登録データとして登録される。一方、認証を行う場合には、スイッチング手段27および28のそれぞれを接点S2に接続し、記憶部23に登録された正当な所有者の登録データが読み出される。
○類似度算出部24
Next, each of the two switching means 27 and 28 of the device of the present invention shown in FIG. 1 is connected to the contact S1 in the storage unit 23, and a legitimate owner of the mobile phone terminal holds the mobile phone terminal and swings his arm. When the action is performed, the target section data acquired through the processing of the above-described extraction unit 22 is registered as registration data of the arm swinging action of the legitimate owner of the terminal. On the other hand, when the authentication is performed, each of the switching means 27 and 28 is connected to the contact S2, and the registered data of the legitimate owner registered in the storage unit 23 is read out.
○ Similarity calculation unit 24

次に、類似度算出部24について説明する。類似度算出部24では、記憶部23に予め登録された腕振り行動の時系列データである登録データAと、新たに取得した腕振り行動データである入力データBとの類似度を演算する。   Next, the similarity calculation unit 24 will be described. The similarity calculation unit 24 calculates the similarity between the registration data A, which is time-series data of arm swing behaviors registered in advance in the storage unit 23, and the input data B, which is newly acquired arm swing behavior data.

今、x軸、y軸、z軸から構成される三軸の加速度センサを用いて取得したデータであるため、図5(a)に示すサンプル点tA(=1,2,3,・・・,m)における登録データAのサンプル値atAは、x軸、y軸、z軸それぞれの軸の成分を持った3成分から成るベクトルであり、同図(b)に示す点tB(=1,2,3,・・・,n)における入力データBのサンプル値btBも、x軸、y軸、z軸それぞれの軸の成分を持った3成分から成るベクトルである。図5のm、nは系列長、a,a,a,・・・;b,b,b,・・・は、それぞれ登録データA、入力データBのサンプル値である。 Since the data is obtained using a triaxial acceleration sensor composed of the x-axis, y-axis, and z-axis, the sample point t A (= 1, 2, 3,... Shown in FIG. The sample value a tA of the registered data A in (, m) is a vector composed of three components having components of the x-axis, y-axis, and z-axis, respectively, and the point t B (b) shown in FIG. = 1, 2, 3,..., N), the sample value b tB of the input data B is also a vector composed of three components having components on the x-axis, y-axis, and z-axis. 5, m and n are sequence lengths, a 1 , a 2 , a 3 ,...; B 1 , b 2 , b 3 ,... Are sample values of registered data A and input data B, respectively. .

次式に定義する、サンプル点tAにおける登録データAのサンプル値atAおよびサンプル点tBにおける入力データBのサンプル値btBから求まる角度誤差θ(atA,btB)を下記の式から求め、変動による二系列データ間の部分的伸縮および位置ずれを吸収した類似度計算が可能であるDP−マッチングにより最小経路を求め、最小経路に対応する角度誤差の総和Diffを類似度とする。 Defined by the following equation, the sample value of the registration data A at the sample point t A a tA and obtained from the sample values b tB of the input data B at the sample point t B angle error θ (a tA, b tB) from the following formula The minimum path is obtained by DP-matching, which can calculate the degree of similarity by absorbing the partial expansion and contraction between the two series data due to the fluctuation and the positional deviation, and the sum Diff of the angle errors corresponding to the minimum path is set as the degree of similarity.

θ(atA, btB)=ABS(ArcCos{(atA,btB)/(|atA ||btB|)}) θ (a tA, b tB) = ABS (ArcCos {(a tA, b tB) / (| a tA || b tB |)})

ここで、ABSは絶対値、(atA,btB)はatAとbtBの内積、|atA|および|btB|はそれぞれatA および btBの大きさを意味する。また、0≦θ(atA, btB)≦πである。 Here, ABS is an absolute value, (a tA, b tB) is a tA and b tB inner product, | it means each magnitude of a tA and b tB | a tA | and | b tB. Further, 0 ≦ θ (a tA, b tB) is ≦ [pi.

また、DP−マッチングとは、音声認識等で頻繁に使われている類似度計算方法であり、2つの系列データ間で各系列データの要素間の対応付けを行い、変動による二系列データ間の部分的伸縮および位置ずれを吸収した相違度の計算方法である。   DP-matching is a similarity calculation method that is frequently used in speech recognition and the like, and associates the elements of each series data between two series data, and the two series data due to fluctuations This is a method for calculating the degree of difference by absorbing partial expansion and contraction and misalignment.

図6、図7および図8に示した簡単な例を用いて、DP−マッチングによる角度誤差の総和Diffの計算方法およびそのときの最小経路について説明する。登録データAの系列長はm、また入力データBの系列長はnの場合である。   The calculation method of the total angle Diff of DP errors by DP-matching and the minimum path at that time will be described using the simple examples shown in FIGS. The sequence length of the registration data A is m, and the sequence length of the input data B is n.

まず、上述の式により各サンプル点における角度誤差θ(atA, btB)を算出する。結果は図6の表の値の通りになったと仮定する。ここで、表の第j行i列目には、登録データAのサンプル点tA=iにおけるサンプル値aiと入力データBの点tB=jおける入力データBのサンプル値bjから求まる角度誤差θ(ai, bj)が算出され、記入されている。 First, the angle error θ (a tA, b tB) at each sample point by the above equations is calculated. Assume that the results are as shown in the table of FIG. Here, in the j-th row and i-th column of the table, the sample value a i at the sample point t A = i of the registered data A and the sample value b j of the input data B at the point t B = j of the input data B are obtained. Angular error θ (a i , b j ) is calculated and entered.

二系列データ間の部分的伸縮および位置ずれを考慮せず角度誤差の総和を計算すると、登録データおよび入力データでiとjの値を同時に1ずつインクリメントして、すなわち第1行1列目から右下方向に総和を求めていくことになる。DP−マッチングでは、部分的伸縮および位置ずれを考慮し、登録データだけでiを1インクリメントする、すなわち表内で右方向に総和を求めること、または入力データだけでjを1インクリメントする、すなわち表内で下方向に総和を求めることを許可して計算を行い、角度誤差ができる限り最小となる経路を見つけ出す。   When the sum of angle errors is calculated without taking into account partial expansion and contraction and positional deviation between the two series data, the values of i and j are simultaneously incremented by 1 in the registration data and the input data, that is, from the first row and the first column. The sum is calculated in the lower right direction. In DP-matching, i is incremented by 1 with only registered data in consideration of partial expansion and contraction and misalignment, that is, the sum is obtained in the right direction in the table, or j is incremented by 1 with only input data, that is, a table. The calculation is performed while allowing the sum to be calculated in the downward direction, and the path having the smallest possible angle error is found.

ただし、二系列データ間の部分的伸縮および位置ずれを考慮した類似度計算を行った場合、すなわちiまたはjいずれか一つだけのインクリメントを行った場合は、二系列データ間の部分的伸縮および位置ずれを考慮したことに関するペナルティを加える。図7にまとめたとおり、右下方向はペナルティ=0、右方向はペナルティ=P、下方向もペナルティ=Pを課す。Pは0≦P≦πと設定する。   However, when similarity calculation is performed in consideration of partial expansion / contraction and positional deviation between two series data, that is, when only one of i or j is incremented, partial expansion / contraction between two series data and Add a penalty for considering misalignment. As summarized in FIG. 7, a penalty = 0 is imposed in the lower right direction, a penalty = P is imposed in the right direction, and a penalty = P is imposed also in the lower direction. P is set as 0 ≦ P ≦ π.

このようにして、図7のZ図および図8の斜線マスに示す通り、角度誤差の総和が最小となる経路を見つけ出す。なお、図7のY図は、図6からその左上部を抽出した図、図8は最短経路と更新データC(=c1,c2,c3,・・・,cl)を示す図であり、斜線マスの経路は図6に関して前記角度誤差を最小とする経路(最短経路)の一例を示し、更新データCについては後述する。
○判定部25
In this way, as shown in the Z diagram of FIG. 7 and the hatched cells of FIG. 8, a path having the minimum sum of angle errors is found. 7 is a diagram in which the upper left portion is extracted from FIG. 6, and FIG. 8 is a diagram showing the shortest path and the update data C (= c1, c2, c3,..., Cl). The square path indicates an example of the path that minimizes the angle error (shortest path) with respect to FIG. 6, and the update data C will be described later.
○ Determining unit 25

次に、判定部25では、前記類似度算出部24で算出された類似度に基づき、本人か否かの判定を行う。DP−マッチングによる角度誤差の総和Diffが小さいほど、登録データと認証データの類似性が高いと考えられる。特にDiff=0の場合は、登録データと認証データが完全に一致することを意味する。逆に、角度誤差の総和Diffが大きいほど、登録データと認証データの類似性が低いと考えられる。したがって、判定しきい値D1を設定し、Diffの値が設定されたしきい値D1以下であれば本人、D1より大きければ本人ではない、と判定する。
○更新部26
Next, the determination unit 25 determines whether or not the person is the person based on the similarity calculated by the similarity calculation unit 24. It is considered that the similarity between the registration data and the authentication data is higher as the total angle Diff of DP-matching is smaller. In particular, Diff = 0 means that the registration data and the authentication data completely match. On the contrary, it is considered that the similarity between the registration data and the authentication data is lower as the total angle error Diff is larger. Therefore, the determination threshold value D1 is set, and if the value of Diff is equal to or less than the set threshold value D1, it is determined that the person is the person, and if the value is greater than D1, the person is not the person.
○ Update unit 26

図8に示す通り、DP−マッチングによるコスト最小経路が斜線マスで示した経路であるとする。更新データCの系列長は斜線マスの個数lに等しくなる。サンプル点tCにおける更新データCのサンプル値atcは、表で対応するサンプル点における登録データAおよび入力データBそれぞれのサンプル値の平均により統合する。 As shown in FIG. 8, it is assumed that the minimum cost path by DP-matching is a path indicated by hatched cells. The sequence length of the update data C is equal to the number l of hatched cells. The sample value a tc of the update data C at the sample point t C is integrated by averaging the sample values of the registration data A and the input data B at the corresponding sample points in the table.

例えば、図8の場合、cは第3行第2列目にあるから、a2とbとの和を取って2で割ることにより求められる。また、clー1は第n−1行第m−1列目にあるから、amー1とbnー1との和を取って2で割ることにより求められる。
その他は次の通りである。
1={a1+ b1}/2 c2={a2+ b}/2 c3={a+ b}/2
4={a3+ b}/2 c5={a+ b}/2 c6={a+ b4}/2
7={a+ b4}/2 c8={a+ b4}/2 c9={a+ b4}/2
・・・
l−5={amー3+ bnー3}/2 cl−4={amー3+ bnー2}/2 cl−3={am−3+bnー1}/2
l−2={amー2+ bnー1}/2 cl−1={amー1+ bnー1}/2 c={am+ bn}/2
For example, in the case of FIG. 8, c 3 is in the third row and the second column, so it is obtained by taking the sum of a 2 and b 3 and dividing by 2. Moreover, since c l -1 is in the m-1 column (n-1) -th row is determined by dividing by 2 taking the sum of the a m-1 and b n-1.
Others are as follows.
c 1 = {a 1 + b 1 } / 2 c 2 = {a 2 + b 2 } / 2 c 3 = {a 2 + b 3 } / 2
c 4 = {a 3 + b 4} / 2 c 5 = {a 4 + b 4} / 2 c 6 = {a 5 + b 4} / 2
c 7 = {a 6 + b 4} / 2 c 8 = {a 7 + b 4} / 2 c 9 = {a 8 + b 4} / 2
...
cl -5 = {am -3 + bn -3 } / 2 cl -4 = {am -3 + bn -2 } / 2 cl -3 = {am -3 + bn- 1 } / 2
c l−2 = {a m−2 + b n−1 } / 2 c l−1 = {a m−1 + b n−1 } / 2 c l = {a m + b n } / 2

このようにして統合した更新データC(=c1,c2,c3,・・・,c)は、記憶部23に再登録される。 The update data C integrated in this way (= c 1 , c 2 , c 3 ,..., C l ) is re-registered in the storage unit 23.

次に、前記更新部26で作成された更新データCを記憶部23に再登録するタイミングついて説明する。   Next, the timing for re-registering the update data C created by the update unit 26 in the storage unit 23 will be described.

生体認証共通の問題として、経時変化により認証精度が劣化する問題があった。これは、腕の筋肉の成長や衰えに起因し、振りのパターンが経時的に変化することにより、本人であっても正しく認証できない状況が発生する問題である。   As a problem common to biometric authentication, there is a problem that authentication accuracy deteriorates due to changes over time. This is due to the growth and decline of arm muscles, and the pattern of swinging changes over time, resulting in a situation where even the person himself cannot be authenticated correctly.

更新を実行するタイミングとして、次の2通りの方法が考えられる。一つは、認証の都度強制的に更新を実行する方法であり、もう一つは、認証の度に更新が必要かどうかを判定して、更新が必要であれば自動的に更新を行う方法である。   The following two methods can be considered as timing for executing the update. One is a method for forcibly performing an update for each authentication, and the other is a method for determining whether an update is necessary for each authentication and automatically performing an update if necessary. It is.

前者の更新方法を実現するためには、スイッチング手段27および28のそれぞれを接点S2に接続し、スイッチング手段29を接点S5に接続する。これにより、認証の都度、記憶部23のデータは強制的に更新される。なお、認証の際に更新を行わせないようにするためには、スイッチング手段27および28のそれぞれを接点S2に接続し、スイッチング手段29を接点S3に接続する。   In order to realize the former updating method, each of the switching means 27 and 28 is connected to the contact S2, and the switching means 29 is connected to the contact S5. As a result, the data in the storage unit 23 is forcibly updated each time authentication is performed. In order to prevent updating during authentication, each of the switching means 27 and 28 is connected to the contact S2, and the switching means 29 is connected to the contact S3.

一方、後者の更新方法を実現する方法として二つの方法があるが、これらの方法を実現するためには、スイッチング手段27および28のそれぞれを接点S2に接続し、スイッチング手段29を接点S4に接続する。   On the other hand, there are two methods for realizing the latter updating method. To realize these methods, each of the switching means 27 and 28 is connected to the contact S2, and the switching means 29 is connected to the contact S4. To do.

そして、第1の方法では、判定部25が本人であると認証した時に、判定部25から指令を出してスイッチング手段20をONとする。   In the first method, when the determination unit 25 authenticates that the user is the person, a command is issued from the determination unit 25 to turn on the switching unit 20.

第2の方法では、判定部25に設定されている本人認証判定用のしきい値D1とは異なるもう1つの更新判定用のしきい値D2を設ける。なお、D2は、(0≦)D2<D1とする。   In the second method, another threshold value D2 for update determination different from the threshold value D1 for personal authentication determination set in the determination unit 25 is provided. Note that D2 is (0 ≦) D2 <D1.

すなわち、入力データBと登録データAとのDP−マッチングによる角度誤差の総和DiffがD1以下であり、かつD2<Diff≦D1であった場合は更新を行う。DiffがD2以下の場合は、本人であると認証するものの更新は行わない。   In other words, the update is performed when the total angle Diff of DP-matching between the input data B and the registration data A is equal to or less than D1 and D2 <Diff ≦ D1. If Diff is less than or equal to D2, what is authenticated as the principal is not updated.

以上の更新判定により、判定部25はスイッチング手段20を制御する。すなわち、Diff≦D2およびD1<Diffであればスイッチング手段20はOFFとし、D2<Diff≦D1であればスイッチング手段20はONとする。   Based on the above update determination, the determination unit 25 controls the switching means 20. That is, if Diff ≦ D2 and D1 <Diff, the switching means 20 is turned off, and if D2 <Diff ≦ D1, the switching means 20 is turned on.

この方法によれば、腕の筋肉の経時変化により本人であっても過去に登録したデータに対する類似度は少しずつ低下していくと考えられるが、類似度の低下が小さい間は登録データの更新は行わず、ある程度以上低下した時すなわちD2以上に低下した時に更新される。   According to this method, it is considered that the degree of similarity with respect to previously registered data gradually decreases due to changes in arm muscles over time, but registration data is updated while the decrease in similarity is small. Is not performed, and is updated when the voltage drops to some extent, that is, when the voltage drops to D2 or more.

本実施形態では、登録データを更新すべきタイミングを自動的に判定でき、また更新データCが予め記憶されていた登録データと新たな入力データとを統合して作成されるので、不用意な登録データの更新を回避することができ、信頼性を向上させることができるようになる。   In this embodiment, it is possible to automatically determine when to update the registration data, and the update data C is created by integrating the previously stored registration data and the new input data. Update of data can be avoided and reliability can be improved.

前記した構成の本発明の本人認証装置は、例えば携帯電話端末等に実装されることにより、腕振り行動を通して、携帯電話の使用者が本当に正しい所有者であるか否かの正当性を検証することができるようになる。   The personal authentication device of the present invention having the above-described configuration is mounted on, for example, a mobile phone terminal, and verifies the validity of whether or not the user of the mobile phone is really the right owner through arm swinging behavior. Will be able to.

本発明の一実施形態の概略の構成を示すブロック図である。It is a block diagram which shows the schematic structure of one Embodiment of this invention. 腕振り行動の一例を示す図である。It is a figure which shows an example of an arm swing action. 検出部として加速度センサを使用した場合に得られる腕振り行動の時系列データ(角加速度の変化)の一例を示すグラフである。It is a graph which shows an example of the time series data (change of an angular acceleration) of the arm swing action obtained when an acceleration sensor is used as a detection part. 腕振り行動の時系列データから、認証の対象として使用する区間のデータを抽出する手順の説明図である。It is explanatory drawing of the procedure which extracts the data of the area used as the object of authentication from the time series data of arm swing action. 登録データAと入力データBのサンプル点の説明図である。It is explanatory drawing of the sample point of the registration data A and the input data B. FIG. DP−マッチングの説明図である。It is explanatory drawing of DP-matching. DP−マッチングにおける登録データAと入力データBの各サンプル値の角度誤差の最小経路の説明図である。It is explanatory drawing of the minimum path | route of the angle error of each sample value of the registration data A and the input data B in DP-matching. DP−マッチングにおける角度誤差の最小経路の更新データの説明図である。It is explanatory drawing of the update data of the minimum path | route of the angle error in DP-matching. 従来の本人認証装置の概略の構成を示すブロック図である。It is a block diagram which shows the structure of the outline of the conventional personal authentication apparatus.

符号の説明Explanation of symbols

21・・・検出部、22・・・抽出部、23・・・記憶部、24・・・類似度算出部、25・・・判定部、26・・・更新部。   DESCRIPTION OF SYMBOLS 21 ... Detection part, 22 ... Extraction part, 23 ... Memory | storage part, 24 ... Similarity calculation part, 25 ... Determination part, 26 ... Update part.

Claims (5)

被認証者の腕振り行動を時系列データとして検出する検出部と、
前記検出部により時系列で出力される腕振り行動の時系列データ全体から認証の対象として使用する対象区間データを抽出する抽出部と、
対象区間データを登録データAとして保持する記憶部と、
認証時に新たに入力された対象区間データを入力データBとして予め登録された登録データAとの類似度を算出する類似度算出部と、
算出された類似度が第1のしきい値以上になるか否かによって本人か他人かを判定する判定部と、
新たに入力された入力データBと予め登録された登録データAとから新たな更新データCを作成し、該更新データCを前記記憶部に登録する更新部とを具備したことを特徴とする本人認証装置。
A detection unit that detects the person's swing motion as time-series data;
An extraction unit that extracts target section data to be used as an authentication target from the entire time-series data of the arm swing action that is output in time series by the detection unit;
A storage unit that holds the target section data as registered data A;
A similarity calculation unit for calculating a similarity with registration data A registered in advance as input data B with the target section data newly input at the time of authentication;
A determination unit that determines whether the calculated similarity is greater than or equal to a first threshold value, whether the person is the other person or not,
An updater for creating new update data C from newly input data B and preregistered registration data A, and for registering the update data C in the storage unit Authentication device.
請求項1に記載の本人認証装置において、
前記判定部は、前記第1のしきい値より小さい第2のしきい値を有し、前記類似度算出部で算出された類似度が該第2のしきい値を超えたときに、前記登録データAを前記更新データCに更新する指令を出力することを特徴とする本人認証装置。
In the personal identification device according to claim 1,
The determination unit has a second threshold value smaller than the first threshold value, and when the similarity calculated by the similarity calculation unit exceeds the second threshold value, A personal authentication device that outputs a command to update registration data A to update data C.
請求項1または2に記載の本人認証装置において、
前記類似度算出部は、前記登録データAと入力データBの各サンプル値の角度誤差の最小経路を求め、該最小経路をたどる際に算出される相違度の総和を類似度として用いることによって、変動による二系列データ間の部分的伸縮および位置ずれを吸収した類似度の算出を行うことを特徴とする本人認証装置。
In the personal authentication device according to claim 1 or 2,
The similarity calculation unit obtains the minimum path of the angle error of each sample value of the registration data A and the input data B, and uses the sum of the differences calculated when tracing the minimum path as the similarity. A personal authentication device characterized in that a similarity is calculated by absorbing partial expansion and contraction between two series data due to fluctuation and a positional deviation.
請求項3に記載の本人認証装置において、
前記更新部は、前記最小経路の各点にそれぞれ対応する予め登録されている登録データAおよび新たに入力された入力データBのサンプル値を統合して、前記更新データCを作成することを特徴とする本人認証装置。
In the personal identification device according to claim 3,
The update unit creates the update data C by integrating pre-registered registration data A and newly input sample data B corresponding to each point of the minimum path. A personal authentication device.
請求項1ないし4のいずれかに記載の本人認証装置において、
該本人認証装置が携帯電話機に実装されることを特徴とする本人認証装置。
In the personal identification device according to any one of claims 1 to 4,
A personal authentication apparatus, wherein the personal authentication apparatus is mounted on a mobile phone.
JP2006311687A 2006-11-17 2006-11-17 Identification device Expired - Fee Related JP5035876B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006311687A JP5035876B2 (en) 2006-11-17 2006-11-17 Identification device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006311687A JP5035876B2 (en) 2006-11-17 2006-11-17 Identification device

Publications (2)

Publication Number Publication Date
JP2008129704A true JP2008129704A (en) 2008-06-05
JP5035876B2 JP5035876B2 (en) 2012-09-26

Family

ID=39555475

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006311687A Expired - Fee Related JP5035876B2 (en) 2006-11-17 2006-11-17 Identification device

Country Status (1)

Country Link
JP (1) JP5035876B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015103198A (en) * 2013-11-28 2015-06-04 キヤノンマーケティングジャパン株式会社 Information processing device, information processing method, and program
JP2017146663A (en) * 2016-02-15 2017-08-24 ルネサスエレクトロニクス株式会社 Authentication device, authentication system, and authentication method
JP2017152013A (en) * 2017-04-05 2017-08-31 キヤノンマーケティングジャパン株式会社 Information processing device, information processing method, and program

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63106798A (en) * 1986-10-24 1988-05-11 株式会社東芝 Personal validation apparatus
JP2003337926A (en) * 2002-05-21 2003-11-28 Nippon Signal Co Ltd:The Access control system
JP2005092722A (en) * 2003-09-19 2005-04-07 Yoshinao Aoki Operation recognition device
JP2005141628A (en) * 2003-11-10 2005-06-02 Fujitsu Ltd Authentication apparatus, authentication system, and sensor
JP2006072429A (en) * 2004-08-31 2006-03-16 Sanyo Electric Co Ltd Biological information registration apparatus and individual authentication apparatus
JP2006218033A (en) * 2005-02-09 2006-08-24 Univ Of Electro-Communications Biological discrimination method and biological discrimination device

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63106798A (en) * 1986-10-24 1988-05-11 株式会社東芝 Personal validation apparatus
JP2003337926A (en) * 2002-05-21 2003-11-28 Nippon Signal Co Ltd:The Access control system
JP2005092722A (en) * 2003-09-19 2005-04-07 Yoshinao Aoki Operation recognition device
JP2005141628A (en) * 2003-11-10 2005-06-02 Fujitsu Ltd Authentication apparatus, authentication system, and sensor
JP2006072429A (en) * 2004-08-31 2006-03-16 Sanyo Electric Co Ltd Biological information registration apparatus and individual authentication apparatus
JP2006218033A (en) * 2005-02-09 2006-08-24 Univ Of Electro-Communications Biological discrimination method and biological discrimination device

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
太田 雅敏: "加速度センサを用いた手の動きによる個人認証に関する検討", マルチメディア,分散,協調とモバイル(DICOMO)シンポジウム論文集 1997年〜2006年版 V, vol. 第2003巻,第9号, JPN6011062118, 31 August 2006 (2006-08-31), pages 261 - 264, ISSN: 0002260939 *
奥村 文教: "加速度センサを用いた手振りによる個人認証の研究", 映像メディア処理シンポジウム 第11回シンポジウム資料, JPN6011062117, 8 November 2006 (2006-11-08), pages 129 - 130, ISSN: 0002079581 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015103198A (en) * 2013-11-28 2015-06-04 キヤノンマーケティングジャパン株式会社 Information processing device, information processing method, and program
JP2017146663A (en) * 2016-02-15 2017-08-24 ルネサスエレクトロニクス株式会社 Authentication device, authentication system, and authentication method
JP2017152013A (en) * 2017-04-05 2017-08-31 キヤノンマーケティングジャパン株式会社 Information processing device, information processing method, and program

Also Published As

Publication number Publication date
JP5035876B2 (en) 2012-09-26

Similar Documents

Publication Publication Date Title
US11783018B2 (en) Biometric authentication
JP5795381B2 (en) How to use device movement in passwords
US11936787B2 (en) User identification proofing using a combination of user responses to system turing tests using biometric methods
US9807611B2 (en) Electronic device and voiceprint authentication method
JP2004227590A (en) Method and device for user authentication
US20180130475A1 (en) Methods and apparatus for biometric authentication in an electronic device
US8621583B2 (en) Sensor-based authentication to a computer network-based service
US9119068B1 (en) Authentication using geographic location and physical gestures
US20090106820A1 (en) System and method for user authentication based on odor recognition
US8983207B1 (en) Mitigating replay attacks using multiple-image authentication
US20070266154A1 (en) User authentication system, fraudulent user determination method and computer program product
JP3967914B2 (en) Biometrics authentication system and method
JP2008009555A (en) Technology for authenticating object on the basis of feature extracted from object
JP2007193656A (en) Personal identification device
JP5035876B2 (en) Identification device
JP3990907B2 (en) Composite authentication system
US10559312B2 (en) User authentication using audiovisual synchrony detection
US20210160687A1 (en) Integrated systems and methods for passive authentication
JP2007249587A (en) Authentication device, authentication method, authentication program and computer readable recording medium having the same recorded thereon
KR101972800B1 (en) Method and apparatus for authenticating handwritten signature
KR100882281B1 (en) Method To Confirm Identification Of Biometric System
JP2008158627A (en) Personal identification device and personal identification method
KR20070066548A (en) Method for executing signature certification operation and terminal of enabling the method
US20230139161A1 (en) Systems and methods for verifying user activity using behavioral models
JP7264355B2 (en) Handwritten Signature Authentication Method and Apparatus Based on Multiple Authentication Algorithm

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090707

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111116

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120119

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120530

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120608

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120627

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120628

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150713

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees