EP3074959A1 - Verfahren zum erfassen von daten eines identifikationsdokumentes - Google Patents

Verfahren zum erfassen von daten eines identifikationsdokumentes

Info

Publication number
EP3074959A1
EP3074959A1 EP14805523.9A EP14805523A EP3074959A1 EP 3074959 A1 EP3074959 A1 EP 3074959A1 EP 14805523 A EP14805523 A EP 14805523A EP 3074959 A1 EP3074959 A1 EP 3074959A1
Authority
EP
European Patent Office
Prior art keywords
image
document
data
identification document
comparison
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
EP14805523.9A
Other languages
English (en)
French (fr)
Other versions
EP3074959B1 (de
Inventor
Wolf Müller
Andreas Wolf
Matthias Fischbeck
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bundesdruckerei GmbH
Original Assignee
Bundesdruckerei GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bundesdruckerei GmbH filed Critical Bundesdruckerei GmbH
Publication of EP3074959A1 publication Critical patent/EP3074959A1/de
Application granted granted Critical
Publication of EP3074959B1 publication Critical patent/EP3074959B1/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07D—HANDLING OF COINS OR VALUABLE PAPERS, e.g. TESTING, SORTING BY DENOMINATIONS, COUNTING, DISPENSING, CHANGING OR DEPOSITING
    • G07D11/00—Devices accepting coins; Devices accepting, dispensing, sorting or counting valuable papers
    • G07D11/40—Device architecture, e.g. modular construction

Definitions

  • Identification document such as an identity card or passport electronically or machine read.
  • automated data entry is often not allowed by law due to existing or anticipated privacy laws.
  • nPA Identity card
  • elD electronic identification
  • the invention is based on the finding that the above object can be achieved by an image comparison of an image of the identification document with an image of a document template, which electronically simulates the identification documents and is filled with the data of the identification document.
  • the data is entered into a document template, which takes on the form of an identification document.
  • the test image is generated by converting the filled-in document template into an image, in particular into an image file. In this way, the capture of data even without a direct data comparison be effected. In other words, only one image comparison takes place to check the acquired data.
  • Electronic processing of the personal data is not performed according to one embodiment.
  • the invention relates to a method for acquiring data of an identification document comprising: acquiring the data of the identification document, electronically inserting the acquired data of the identification document into an electronic document template associated with the identification document to obtain a comparison template, creating a test image from the comparison template, acquiring an optical image of the identification document by means of an image camera to obtain a document image, and electronically comparing the document image with the inspection image to check the acquisition of the data.
  • the electronic comparison is carried out by means of an optical image comparison, in particular pattern comparison. In this way, a verification solution is provided in compliance with data protection regulations, which can also be integrated into the respective IT infrastructure.
  • the electronic comparison comprises optically comparing electronic image data of the test image and the document image.
  • an optical image pattern recognition can be performed.
  • an image difference between the image of the identification document and the test image is displayed on a display.
  • the image difference is compared with a threshold value, wherein the image difference is displayed when a difference threshold value is exceeded. In this way, an image deviation and thus a data deviation can be detected and displayed. If the threshold value is undershot, either an image match and thus data match are indicated, or an indicator remains off.
  • the optical image of the identification document is present in an electronic image format, wherein the comparison template is converted into the electronic image format in order to obtain the test image.
  • the electronic picture format can a digital image format, such as the JPEG format, the PNG format or the TIFF format.
  • the acquisition of the data is performed by means of an input interface, in particular by means of a keyboard.
  • the acquired data is electronically inserted into data fields of the electronic document template. This can be supported, for example, by means of an input mask or automatically.
  • the electronic insertion comprises automatically detecting a type of document based on the acquired data and selecting the document template associated with the type of document.
  • Document types can be ID cards or passports.
  • the document template is a replica of the identification document.
  • the replica can be digital and graphically emulate the external appearance of the identification document.
  • the invention relates to a data acquisition device for acquiring data of an identification document, comprising: an input interface for acquiring the data of the identification document, an image camera for acquiring an optical image of the identification document to obtain a document image, and a processor which is configured insert the captured data of the identification document into an electronic document template associated with the identification document to obtain a comparison template, create a test image from the comparison template, and compare the document image with the test image to verify the acquisition of the data.
  • the processor is configured to compare electronic image data of the test image and of the document image or to perform an optical image comparison, in particular a pattern comparison, in order to compare the test image with the document image.
  • the data acquisition device is program-technically configured to perform the inventive method for acquiring data.
  • the invention relates to a computer program with a program code for carrying out the method according to the invention for acquiring data.
  • FIG. 1 shows a flow of a method for acquiring data according to a
  • FIG. 2 is a flowchart of a method for acquiring data according to an embodiment
  • FIG. 3 shows a data acquisition device for acquiring data according to a
  • Embodiment. Fig. 1 shows a flow of a method for acquiring data of a
  • Identification document 101 according to an embodiment.
  • Identification document 101 is, for example, an identity card with an image 103 of the identified person.
  • the identification document 101 comprises, for example, a first data field 105 with personal data which, for example, indicates a name of the person, and a second data field 107 with personal data which are arranged, for example, in the machine-readable zone.
  • the personal data of the identification document 101 are input manually, for example, by using a keyboard not shown in FIG.
  • a document template 109 is assigned to the identification document 101. This assignment can be made, for example, by means of a verification program or a verification software, wherein a type of document of the identification document 101 is recognized on the basis of the data entered.
  • the document template 109 takes the outward appearance of
  • Identification document 101 and comprises data fields 1 10 and 1 12, which correspond to the data fields 105 and 107.
  • the document template 109 or a selection of document templates may then be displayed to a user on a display.
  • the optical detection or image acquisition of the identification document 101 can be initiated or initiated.
  • the optical detection or image acquisition of the identification document 101 can also be initiated or initiated automatically after the automatic assignment of the document template 109 to the entered data.
  • the identification document 101 is optically detected or read in, whereby a document image 1 11 with images 113 and 15 of FIG
  • Data fields 105 and 107 are created.
  • the document image 11 1 may be present, for example, as a digital image file.
  • the document image 11 1 is then used for example for an image comparison.
  • test image 117 with images 1 19 and 121 of the data fields 110 and 112 is created from the document template 109.
  • the test image 117 may also be provided by a digital image file.
  • an optical image comparison between the document image 11 and the test image 17 takes place, for example by means of the aforementioned verification software.
  • the software can compare visually, to what extent the images 11 1, 1 17
  • Image differences can be visually displayed on a display. Slight deviations between the document image 11 1 and the test image 1 17 can be tolerated according to an embodiment up to a certain threshold.
  • the optical difference can be determined, for example, by a deviation of a region 123 in the image 121 of the data field 107 from a region 125 in FIG available.
  • the error may, for example, result from an accidental input of the letter "C” instead of the letter "D" when entering the data of the
  • Identification document 101 result.
  • textual differences are not captured according to one embodiment. In this case, for example, only the faulty regions can be displayed without textual differences being detected.
  • FIG. 2 shows a flowchart of a method for acquiring data according to an embodiment that can implement the method illustrated in FIG. 1.
  • the method comprises detecting 201 the data of the identification document, electronically inserting 203 the acquired data of the identification document into an electronic document template associated with the identification document to obtain a comparison template, creating 205 a test image from the
  • Identification document by means of an image camera to obtain a document image, and the electronic comparison 209 of the document image with the test image to check the detection of the data.
  • the document image and the test image are present, for example, as digital image files and are compared visually, for example as optical patterns, and without any content analysis.
  • FIG. 3 shows a data acquisition device 300 for acquiring data according to an embodiment.
  • the methods illustrated in FIGS. 1 and 2 may, according to one embodiment, be implemented by means of the data acquisition device 300 shown in FIG. 3 for acquiring data of an identification document.
  • the data acquisition device 300 includes an input interface 301 for acquiring the data of the identification document, an image camera 303 for acquiring an optical image of the identification document to obtain a document image, and a processor 305 configured to acquire the acquired data of the
  • Insert identification document into an electronic document template which is associated with the identification document to obtain a comparison template, a To create a test image from the comparison template and to compare the document image with the test image in order to check the acquisition of the data.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Image Analysis (AREA)
  • Character Discrimination (AREA)

Abstract

Die Erfindung betrifft Verfahren zum Erfassen von Daten eines Identifikationsdokumentes, mit: Erfassen (201) der Daten des Identifikationsdokumentes, elektronischem Einsetzen (203) der erfassten Daten des Identifikationsdokumentes in ein elektronisches Dokumententemplate, das dem Identifikationsdokument zugeordnet ist, um ein Vergleichstemplate zu erhalten, Erstellen (205) eines Prüfbildes aus dem Vergleichstemplate, Erfassen (207) eines optischen Bildes des Identifikationsdokumentes mittels einer Bildkamera, um ein Dokumentenbild zu erhalten, und elektronischem Vergleichen (209) des Dokumentenbildes mit dem Prüfbild, um die Erfassung der Daten zu überprüfen.

Description

VERFAHREN ZUM ERFASSEN VON DATEN EINES IDENTIFIKATIONSDOKUMENTES
Im privatwirtschaftlichen, nicht hoheitlichen Umfeld werden für diverse Geschäftsvorfälle personenbezogene Daten benötigt. Es ist zwar möglich, diese Daten aus einem
Identifikationsdokument wie beispielsweise einem Personalausweis oder Reisepass elektronisch bzw. maschinell auslesen. Eine maschinelle Datenerfassung ist jedoch aufgrund von existierenden oder zu erwartenden Datenschutzvorschriften gesetzlich oft nicht zulässig.
So können derzeit in der Bundesrepublik Deutschland personenbezogene Daten für privatwirtschaftliche Zwecke unter Verwendung des neuen elektronischen
Personalausweises (nPA) nur dann maschinell erfasst werden, wenn hierbei ein elD- Dienst (elD: elektronische Identifikation) genutzt wird. Steht der el D-Dienst jedoch nicht zur Verfügung oder müssen personenbezogene Daten aus ausländischen
Identifikationsdokumenten erfasst werden, so müssen die personenbezogenen Daten manuell erfasst werden.
Eine manuelle Erfassung von personenbezogenen Daten ist jedoch fehleranfällig, sodass eine Überprüfung derart erfasster Daten notwendig ist. Dies wird oft durch eine Person durchgeführt, was jedoch aufwendig und ebenfalls fehlerbehaftet ist.
Es ist der Aufgabe der vorliegenden Erfindung, ein Konzept zur Erfassung von Daten eines Identifikationsdokumentes zu schaffen, bei dem eine Überprüfung der erfassten Daten ohne einen direkten Datenvergleich realisiert werden kann. Diese Aufgabe wird durch die Merkmale der unabhängigen Patentansprüche gelöst. Vorteilhafte Weiterbildungsformen sind Gegenstand der Beschreibung, der Patentansprüche und der beiliegenden Figuren.
Die Erfindung basiert auf der Erkenntnis, dass die obige Aufgabe durch einen Bildvergleich eines Bildes des Identifikationsdokumentes mit einem Bild eines Dokumententemplates, das das Identifikationsdokumente elektronisch nachbildet und mit den Daten des Identifikationsdokumentes ausgefüllt ist, gelöst werden kann. Dabei werden die Daten in ein Dokumententemplate eingegeben, das die Form eines Identifikationsdokumentes aufgreift. Das Prüfbild wird durch eine Umwandlung des ausgefüllten Dokumententemplates in ein Bild, insbesondere in eine Bilddatei, erzeugt. Auf diese Weise kann die Erfassung von Daten auch ohne einen direkten Datenvergleich bewirkt werden. Mit anderen Worten ausgedrückt findet zur Überprüfung der erfassten Daten nur ein Bildvergleich statt. Eine elektronische Verarbeitung der personenbezogenen Daten wird gemäß einer Ausführungsform nicht durchgeführt.
Gemäß einem Aspekt betrifft die Erfindung ein Verfahren zum Erfassen von Daten eines Identifikationsdokumentes, mit: Erfassen der Daten des Identifikationsdokumentes, elektronischem Einsetzen der erfassten Daten des Identifikationsdokumentes in ein elektronisches Dokumententemplate, das dem Identifikationsdokument zugeordnet ist, um ein Vergleichstemplate zu erhalten, Erstellen eines Prüfbildes aus dem Vergleichstemplate, Erfassen eines optischen Bildes des Identifikationsdokumentes mittels einer Bildkamera, um ein Dokumentenbild zu erhalten, und elektronischem Vergleichen des Dokumentenbildes mit dem Prüfbild, um die Erfassung der Daten zu überprüfen. Gemäß einer Ausführungsform wird das elektronische Vergleichen mittels eines optischen Bildvergleichs, insbesondere Mustervergleichs, durchgeführt. Auf diese Weise wird eine Verifikationslösung bei Einhaltung von Datenschutzvorschriften bereitstellt, welche zudem in die jeweilige IT-Infrastruktur einbindbar ist.
Gemäß einer Ausführungsform weist das elektronische Vergleichen das optische Vergleichen elektronischer Bilddaten des Prüfbildes und des Dokumentenbildes auf. Hierbei kann eine optische Bildmustererkennung durchgeführt werden.
Gemäß einer Ausführungsform wird im Schritt des optischen Vergleichens ein Bildunterschied zwischen dem Bild des Identifikationsdokumentes und dem Prüfbild auf einer Anzeige angezeigt. Gemäß einer Ausführungsform wird der Bildunterschied mit einem Schwellwert verglichen, wobei der Bildunterschied bei Überschreiten eines Unterschiedsschwellwertes angezeigt wird. Auf diese Weise kann eine Bildabweichung und somit eine Datenabweichung detektiert und angezeigt werden. Bei Unterschreiten des Schwellwertes wird entweder auf eine Bildübereinstimmung und somit Datenübereinstimmung hingewiesen, oder eine Anzeige bleibt aus.
Gemäß einer Ausführungsform liegt das optische Bild des Identifikationsdokumentes in einem elektronischen Bildformat vor, wobei das Vergleichstemplate in das elektronische Bildformat überführt wird, um das Prüfbild zu erhalten. Das elektronische Bildformat kann ein digitales Bildformat, beispielsweise das JPEG-Format, das PNG-Format oder das TIFF-Format sein.
Gemäß einer Ausführungsform wird das Erfassen der Daten mittels einer Eingabeschnittstelle, insbesondere mittels einer Tastatur, durchgeführt.
Gemäß einer Ausführungsform werden im Schritt des elektronischen Einsetzens die erfassten Daten elektronisch in Datenfelder des elektronischen Dokumententemplates eingesetzt. Dies kann beispielweise mittels einer Eingabemaske oder automatisch unterstützt werden.
Gemäß einer Ausführungsform umfasst das elektronische Einsetzen das automatische Erkennen einer Dokumentenart anhand der erfassten Daten und das Auswählen des Dokumententemplates, das der Dokumentenart zugeordnet ist. Als Dokumentenarten kommen Personalausweise oder Reisepässe infrage.
Gemäß einer Ausführungsform ist das Dokumententemplate eine Nachbildung des Identifikationsdokumentes. Die Nachbildung kann digital sein und graphisch die äußere Erscheinungsform des Identifikationsdokumentes nachbilden. Gemäß einem Aspekt betrifft die Erfindung eine Datenerfassungsvorrichtung zum Erfassen von Daten eines Identifikationsdokumentes, mit: einer Eingabeschnittstelle zum Erfassen der Daten des Identifikationsdokumentes, einer Bildkamera zum Erfassen eines optischen Bildes des Identifikationsdokumentes, um ein Dokumentenbild zu erhalten, und einem Prozessor, welcher ausgebildet ist, die erfassten Daten des Identifikationsdokumentes in ein elektronisches Dokumententemplate einzusetzen, das dem Identifikationsdokument zugeordnet ist, um ein Vergleichstemplate zu erhalten, ein Prüfbild aus dem Vergleichstemplate zu erstellen, und das Dokumentenbild mit dem Prüfbild zu vergleichen, um die Erfassung der Daten zu überprüfen. Gemäß einer Ausführungsform ist der Prozessor ausgebildet, elektronische Bilddaten des Prüfbildes und des Dokumentenbildes zu vergleichen oder einen optischen Bildvergleich, insbesondere einen Mustervergleich, durchzuführen, um das Prüfbild mit dem Dokumentenbild zu vergleichen. Gemäß einer Ausführungsform ist die Datenerfassungsvorrichtung programmtechnisch eingerichtet, um das erfindungsgemäße Verfahren zum Erfassen von Daten durchzuführen.
Gemäß einem Aspekt betrifft die Erfindung ein Computerprogramm mit einem Programmcode zum Ausführen des erfindungsgemäßen Verfahrens zum Erfassen von Daten.
Weitere Ausführungsbeispiele werden Bezug nehmend auf die beiliegenden Figuren näher erläutert. Es zeigen:
Fig. 1 einen Ablauf eines Verfahrens zum Erfassen von Daten gemäß einer
Ausführungsform;
Fig. 2 ein Ablaufdiagramm eines Verfahrens zum Erfassen von Daten gemäß einer Ausführungsform; und
Fig. 3 eine Datenerfassungsvorrichtung zum Erfassen von Daten gemäß einer
Ausführungsform. Fig. 1 zeigt einen Ablauf eines Verfahrens zum Erfassen von Daten eines
Identifikationsdokumentes 101 gemäß einer Ausführungsform. Das
Identifikationsdokument 101 ist beispielsweise ein Personalausweis mit einem Bild 103 der identifizierten Person. Das Identifikationsdokument 101 umfasst beispielsweise ein erstes Datenfeld 105 mit personenbezogenen Daten, welche beispielsweise einen Namen der Person angeben, und ein zweites Datenfeld 107 mit personenbezogenen Daten, welche beispielsweise in der maschinenlesbaren Zone angeordnet sind.
Die personenbezogenen Daten des Identifikationsdokumentes 101 werden beispielsweise manuell mithilfe einer in Fig. 1 nicht dargestellten Tastatur eingegeben. Anhand der eingegebenen Daten wird dem Identifikationsdokument 101 ein Dokumententemplate 109 zugeordnet. Diese Zuordnung kann beispielsweise mittels eines Verifikationsprogramms bzw. einer Verifikationssoftware erfolgen, wobei anhand der eingegebenen Daten eine Dokumentenart des Identifikationsdokumentes 101 erkannt wird. Das Dokumententemplate 109 greift beispielsweise die äußere Erscheinung des
Identifikationsdokumentes 101 auf, und umfasst Datenfelder 1 10 und 1 12, welche den Datenfeldern 105 und 107 entsprechen.
Das Dokumententemplate 109 oder eine Auswahl von Dokumententemplates kann daraufhin einem Benutzer auf einer Anzeige angezeigt werden. Nach einer Bestätigung bzw. einer Auswahl des Dokumententemplates 109 kann die optische Erfassung bzw. Bildaufnahme des Identifikationsdokumentes 101 veranlasst bzw. initiiert werden. Die optische Erfassung bzw. Bildaufnahme des Identifikationsdokumentes 101 kann jedoch auch automatisch nach der automatischen Zuordnung des Dokumententemplates 109 zu den eingegebenen Daten veranlasst bzw. initiiert werden.
In einem nachfolgenden Schritt wird das Identifikationsdokument 101 optisch erfasst bzw. eingelesen, wodurch ein Dokumentenbild 1 11 mit Abbildungen 113 und 1 15 der
Datenfelder 105 und 107 entsteht. Das Dokumentenbild 11 1 kann beispielsweise als eine digitale Bilddatei vorliegen. Das Dokumentenbild 11 1 wird dann beispielsweise für einen Bildvergleich herangezogen.
Parallel oder in einer zeitlich beliebigen Reihenfolge wird aus dem Dokumententemplate 109 ein Prüfbild 117 mit Abbildungen 1 19 und 121 der Datenfelder 1 10 und 1 12 erstellt. Das Prüfbild 117 kann ebenfalls durch eine digitale Bilddatei bereitgestellt werden. Das Prüfbild 1 17 sieht beispielsweise so aus wie das personalisierte Identifikationsdokument 101.
Daraufhin findet, beispielsweise mittels der vorgenannten Verifikationssoftware, ein optischer Bildvergleich zwischen dem Dokumentenbild 1 11 und dem Prüfbild 1 17 statt. Hierbei kann die Software optisch vergleichen, inwieweit die Bilder 11 1 , 1 17
deckungsgleich sind. Bildunterschiede können auf einer Anzeige optisch angezeigt werden. Leichte Abweichungen zwischen dem Dokumentenbild 11 1 und dem Prüfbild 1 17 können gemäß einer Ausführungsform bis zu einem gewissen Schwellwert toleriert werden.
Wird ein Bildunterschied festgestellt, so wird dieser gemäß einer Ausführungsform optisch angezeigt bzw. hervorgehoben. In dem in Fig. 1 dargestellten Ausführungsbeispiel kann der optische Unterschied beispielsweise durch eine Abweichung einer Region 123 in der Abbildung 121 des Datenfeldes 107 gegenüber einer Region 125 in der Abbildung 1 15 vorliegen. Der Fehler kann beispielsweise aus einem versehentlichen Eingeben des Buchstabens„C" statt des Buchstabens„D" bei der Eingabe der Daten des
Identifikationsdokumentes 101 resultieren. Textuelle Unterschiede werden jedoch gemäß einer Ausführungsform nicht erfasst. Hierbei können beispielsweise nur die fehlerhaften Regionen angezeigt werden, ohne dass textuelle Unterschiede erfasst werden.
Fig. 2 zeigt ein Ablaufdiagramm eines Verfahrens zum Erfassen von Daten gemäß einer Ausführungsform, das das in Fig. 1 dargestellte Verfahren realisieren kann.
Das Verfahren umfasst das Erfassen 201 der Daten des Identifikationsdokumentes, das elektronische Einsetzen 203 der erfassten Daten des Identifikationsdokumentes in ein elektronisches Dokumententemplate, das dem Identifikationsdokument zugeordnet ist, um ein Vergleichstemplate zu erhalten, das Erstellen 205 eines Prüfbildes aus dem
Vergleichstemplate, das Erfassen 207 eines optischen Bildes des
Identifikationsdokumentes mittels einer Bildkamera, um ein Dokumentenbild zu erhalten, und das elektronische Vergleichen 209 des Dokumentenbildes mit dem Prüfbild, um die Erfassung der Daten zu überprüfen. Das Dokumentenbild und das Prüfbild liegen beispielsweise als digitale Bilddateien vor und werden optisch, beispielswiese als optische Muster, und ohne jegliche Inhaltsauswertung verglichen.
Fig. 3 zeigt eine Datenerfassungsvorrichtung 300 zum Erfassen von Daten gemäß einer Ausführungsform. Die in den Figuren 1 und 2 dargestellten Verfahren können gemäß einer Ausführungsform mittels der in Fig. 3 dargestellten Datenerfassungsvorrichtung 300 zum Erfassen von Daten eines Identifikationsdokumentes ausgeführt werden.
Die Datenerfassungsvorrichtung 300 umfasst eine Eingabeschnittstelle 301 zum Erfassen der Daten des Identifikationsdokumentes, eine Bildkamera 303 zum Erfassen eines optischen Bildes des Identifikationsdokumentes, um ein Dokumentenbild zu erhalten, und einen Prozessor 305, welcher ausgebildet ist, die erfassten Daten des
Identifikationsdokumentes in ein elektronisches Dokumententemplate einzusetzen, das dem Identifikationsdokument zugeordnet ist, um ein Vergleichstemplate zu erhalten, ein Prüfbild aus dem Vergleichstemplate zu erstellen, und das Dokumentenbild mit dem Prüfbild zu vergleichen, um die Erfassung der Daten zu überprüfen.
Weitere Funktionsmerkmale der Datenerfassungsvorrichtung 300 ergeben sich unmittelbar aus den Merkmalen des hier beschriebenen Verfahrens zum Erfassen von Daten eines Identifikationsdokumentes.
BEZUGSZEICHENLISTE
101 Identifikationsdokument
103 Bild
105 Datenfeld
107 Datenfeld
109 Dokumententemplate
110 Datenfeld
111 Dokumentenbild
112 Datenfeld
113 Abbildung
115 Abbildung
117 Prüfbild
119 Abbildung
121 Abbildung
123 Region
125 Region
201 Erfassen
203 Einsetzen
205 Erstellen
207 Erfassen
209 Vergleichen
300 Dokumentenerfassungsvorrichtung
301 Eingabeschnittstelle
303 Bildkamera
305 Prozessor

Claims

PATENTANSPRÜCHE
1. Verfahren zum Erfassen von Daten eines Identifikationsdokumentes (101), mit: Erfassen (201) der Daten des Identifikationsdokumentes (101); elektronischem Einsetzen (203) der erfassten Daten des Identifikationsdokumentes (101) in ein elektronisches Dokumententemplate (109), das dem Identifikationsdokument (101) zugeordnet ist, um ein Vergleichstemplate zu erhalten; Erstellen (205) eines Prüfbildes (1 17) aus dem Vergleichstemplate;
Erfassen (207) eines optischen Bildes des Identifikationsdokumentes (101) mittels einer Bildkamera (303), um ein Dokumentenbild (1 11) zu erhalten; und elektronischem Vergleichen (209) des Dokumentenbildes (1 11) mit dem Prüfbild (1 17), um die Erfassung der Daten zu überprüfen.
2. Verfahren nach Anspruch 1 , bei dem das elektronische Vergleichen (209) mittels eines optischen Bildvergleichs, insbesondere Mustervergleichs, durchgeführt wird.
3. Verfahren nach Anspruch 1 oder 2, bei dem das elektronische Vergleichen (209) das optische Vergleichen elektronischer Bilddaten des Prüfbildes (117) und des
Dokumentenbildes (1 11) umfasst.
4. Verfahren nach einem der vorstehenden Ansprüche, bei dem im Schritt des optischen Vergleichens (209) ein Bildunterschied zwischen dem Bild des
Identifikationsdokumentes (101) und dem Prüfbild (1 17) auf einer Anzeige angezeigt wird.
5. Verfahren nach Anspruch 4, bei dem der Bildunterschied mit einem Schwellwert verglichen wird, und bei dem der Bildunterschied bei Überschreiten eines
Unterschiedsschwellwertes angezeigt wird.
6. Verfahren nach einem der vorstehenden Ansprüche, bei dem das optische Bild des Identifikationsdokumentes (101) in einem elektronischen Bildformat vorliegt, und bei dem das Vergleichstemplate in das elektronische Bildformat überführt wird, um das Prüfbild (1 17) zu erhalten.
7. Verfahren nach einem der vorstehenden Ansprüche, wobei das Erfassen (201) der Daten mittels einer Eingabeschnittstelle (301), insbesondere mittels einer Tastatur, durchgeführt wird.
8. Verfahren nach einem der vorstehenden Ansprüche, bei dem im Schritt des elektronischen Einsetzens (203) die erfassten Daten elektronisch in Datenfelder (110, 1 12) des elektronischen Dokumententemplates (109) eingesetzt werden.
9. Verfahren nach einem der vorstehenden Ansprüche, bei dem das elektronische Einsetzen (203) das automatische Erkennen einer Dokumentenart anhand der erfassten Daten und das Auswählen des Dokumententemplates (109), das der Dokumentenart zugeordnet ist, umfasst.
10. Verfahren nach einem der vorstehenden Ansprüche, bei dem das
Dokumententemplate (109) eine Nachbildung des Identifikationsdokumentes (101) ist.
1 1. Datenerfassungsvorrichtung (300) zum Erfassen von Daten eines
Identifikationsdokumentes (101), mit: einer Eingabeschnittstelle (301) zum Erfassen der Daten des Identifikationsdokumentes (101); einer Bildkamera (303) zum Erfassen eines optischen Bildes des
Identifikationsdokumentes (101), um ein Dokumentenbild (111) zu erhalten; und einem Prozessor (305), welcher ausgebildet ist, die erfassten Daten des
Identifikationsdokumentes (101) in ein elektronisches Dokumententemplate (109) einzusetzen, das dem Identifikationsdokument (101) zugeordnet ist, um ein
Vergleichstemplate zu erhalten, ein Prüfbild (117) aus dem Vergleichstemplate zu erstellen, und das Dokumentenbild (1 11) mit dem Prüfbild (1 17) zu vergleichen, um die Erfassung der Daten zu überprüfen.
12. Datenerfassungsvorrichtung (300) nach Anspruch 11 , wobei der Prozessor (305) ausgebildet ist, elektronische Bilddaten des Prüfbildes (117) und des Dokumentenbildes (11 1) zu vergleichen oder einen optischen Bildvergleich, insbesondere einen
Mustervergleich, durchzuführen, um das Prüfbild (1 17) mit dem Dokumentenbild (11 1) zu vergleichen.
13. Datenerfassungsvorrichtung (300) nach Anspruch 1 1 oder 12, welche
programmtechnisch eingerichtet ist, das Verfahren nach einem der Ansprüche 1 bis 10 durchzuführen.
14. Computerprogramm mit einem Programmcode zum Ausführen des Verfahrens nach einem der Ansprüche 1 bis 10.
EP14805523.9A 2013-11-26 2014-11-21 Verfahren zum erfassen von daten eines identifikationsdokumentes Active EP3074959B1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102013113041.0A DE102013113041A1 (de) 2013-11-26 2013-11-26 Verfahren zum Erfassen von Daten eines Identifikationsdokumentes
PCT/EP2014/075296 WO2015078785A1 (de) 2013-11-26 2014-11-21 Verfahren zum erfassen von daten eines identifikationsdokumentes

Publications (2)

Publication Number Publication Date
EP3074959A1 true EP3074959A1 (de) 2016-10-05
EP3074959B1 EP3074959B1 (de) 2023-05-03

Family

ID=52000814

Family Applications (1)

Application Number Title Priority Date Filing Date
EP14805523.9A Active EP3074959B1 (de) 2013-11-26 2014-11-21 Verfahren zum erfassen von daten eines identifikationsdokumentes

Country Status (3)

Country Link
EP (1) EP3074959B1 (de)
DE (1) DE102013113041A1 (de)
WO (1) WO2015078785A1 (de)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110598826A (zh) * 2019-09-03 2019-12-20 数字广东网络建设有限公司 电子证件分类展示方法、装置、系统和计算机设备

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19747713A1 (de) * 1997-10-29 1999-05-06 Philips Patentverwaltung Verfahren zum Ausfüllen von Formularen
JP2002163637A (ja) * 2000-11-27 2002-06-07 Omron Corp 画像検査装置及び画像検査方法
DE102009057360A1 (de) * 2009-12-08 2011-06-09 Bundesdruckerei Gmbh Verifikation von Lichtbildern/Unterschriften/Dokumenten mit Sicherheitsmerkmalen
DE102010019853A1 (de) * 2010-05-07 2011-11-10 Eckhard Fröbel Verfahren zum Überprüfen von Smart- und/oder Zugangskarten bei deren Verwendung
DE102012009232A1 (de) * 2012-05-07 2013-11-07 Gerhard Wenst Prüfschablone zum Erkennen von Fälschungen im Urkunden- und Dokumentenbereich (auch im erweiterten Sinne).
DE202013101427U1 (de) * 2013-04-04 2013-04-29 Pepperl + Fuchs Gmbh Erfassungssystem zum Erfassen von Daten eines Dokuments

Also Published As

Publication number Publication date
WO2015078785A1 (de) 2015-06-04
DE102013113041A1 (de) 2015-05-28
EP3074959B1 (de) 2023-05-03

Similar Documents

Publication Publication Date Title
EP3086251B1 (de) Benutzer-identifikation
DE10342594B4 (de) Verfahren und System zum Erfassen von Daten aus mehreren maschinell lesbaren Dokumenten
WO2002008841A1 (de) Verfahren zur bereitstellung von fertigungsbezogenen daten, insbesondere von kraftfahrzeugen
DE102009048770A1 (de) Transportwanne in einem Röntgenprüfsystem
EP3082292A1 (de) Digitale signatur mit fern-identifizierung
EP3074959B1 (de) Verfahren zum erfassen von daten eines identifikationsdokumentes
DE102012025350A1 (de) Verarbeitungn eines elektronischen Dokuments
DE102017001879A1 (de) Verfahren zur Verifizierung der Identität eines Nutzers
EP3024666A1 (de) Verfahren zur überprüfung der echtheit eines dokumentes
EP3357043B1 (de) Dokument und verfahren zum verifizieren eines dokuments
CH717006A2 (de) Verfahren zur Benutzeridentifikation.
DE102013101370B4 (de) Verfahren zum Ausführen einer elektronischen Geldüberweisung
WO2023122810A1 (de) Verfahren zur überprüfung der berechtigung einer person
DE102011052751A1 (de) Autorisierung von Check-Einreichungen
DE102016222301B4 (de) Verfahren zum Bereitstellen einer gleichartigen Kopie eines unterschriebenen Dokumentes
EP3120284B1 (de) Verfahren zum identifizieren eines nutzers eines kommunikationsgerätes unter verwendung eines elektronischen identifikationsdienstes
DE102014004553B4 (de) Verfahren zum Test eines Steuergerätes
DE102018205409A1 (de) Verfahren, Vorrichtung, Computerprogramm und Computerprogrammprodukt zum Annotieren eines Bildes
WO2023272330A1 (de) Verfahren zum digitalen erzeugen eines offline-überprüfbaren manipulationssicheren zutrittsdokuments
DE202023103878U1 (de) Fotokabine
WO2018001869A1 (de) Verfahren und system zur identifikation eines produkts
DE102016008723A1 (de) Computergestützte Plausibilitätsprüfung von Barcodes in Personalausweisen
DE102014215126A1 (de) Verfahren und Vorrichtung zum Erkennen von Zeichen auf einer digitalen Anzeige
DE102018104555A1 (de) Verfahren zum Prüfen einer Kamera
DE102015217808A1 (de) Verfahren zur optischen Erfassung von Führerscheinen und eine Vorrichtung zum Durchführen des Verfahrens

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20160621

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

DAX Request for extension of the european patent (deleted)
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

17Q First examination report despatched

Effective date: 20171002

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: GRANT OF PATENT IS INTENDED

RIC1 Information provided on ipc code assigned before grant

Ipc: G07D 11/40 20190101ALI20221110BHEP

Ipc: G07D 7/20 20160101ALI20221110BHEP

Ipc: G07C 9/00 20060101AFI20221110BHEP

INTG Intention to grant announced

Effective date: 20221207

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE PATENT HAS BEEN GRANTED

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

REG Reference to a national code

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

REG Reference to a national code

Ref country code: AT

Ref legal event code: REF

Ref document number: 1565322

Country of ref document: AT

Kind code of ref document: T

Effective date: 20230515

Ref country code: CH

Ref legal event code: EP

REG Reference to a national code

Ref country code: DE

Ref legal event code: R096

Ref document number: 502014016554

Country of ref document: DE

REG Reference to a national code

Ref country code: IE

Ref legal event code: FG4D

Free format text: LANGUAGE OF EP DOCUMENT: GERMAN

P01 Opt-out of the competence of the unified patent court (upc) registered

Effective date: 20230526

REG Reference to a national code

Ref country code: LT

Ref legal event code: MG9D

REG Reference to a national code

Ref country code: NL

Ref legal event code: MP

Effective date: 20230503

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

Ref country code: PT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230904

Ref country code: NO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230803

Ref country code: NL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

Ref country code: ES

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: RS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

Ref country code: PL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

Ref country code: LV

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

Ref country code: LT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230903

Ref country code: HR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

Ref country code: GR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230804

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SM

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

Ref country code: RO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

Ref country code: EE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

Ref country code: DK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

Ref country code: CZ

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

REG Reference to a national code

Ref country code: DE

Ref legal event code: R097

Ref document number: 502014016554

Country of ref document: DE

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

26N No opposition filed

Effective date: 20240206

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

Ref country code: IT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

REG Reference to a national code

Ref country code: CH

Ref legal event code: PL

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MC

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20231121

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CH

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20231130

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MC

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20231121

Ref country code: CH

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20231130

REG Reference to a national code

Ref country code: BE

Ref legal event code: MM

Effective date: 20231130

REG Reference to a national code

Ref country code: IE

Ref legal event code: MM4A

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20231121

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: BE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20231130

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20231121

Ref country code: BE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20231130

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: BG

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: BG

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

REG Reference to a national code

Ref country code: AT

Ref legal event code: MM01

Ref document number: 1565322

Country of ref document: AT

Kind code of ref document: T

Effective date: 20231121

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: AT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20231121

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: AT

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20231121

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CY

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT; INVALID AB INITIO

Effective date: 20141121

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: HU

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT; INVALID AB INITIO

Effective date: 20141121

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: TR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20230503

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20251118

Year of fee payment: 12

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: GB

Payment date: 20251120

Year of fee payment: 12

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20251125

Year of fee payment: 12