JP6712045B2 - Information processing system, its processing method, and program - Google Patents
Information processing system, its processing method, and program Download PDFInfo
- Publication number
- JP6712045B2 JP6712045B2 JP2016031557A JP2016031557A JP6712045B2 JP 6712045 B2 JP6712045 B2 JP 6712045B2 JP 2016031557 A JP2016031557 A JP 2016031557A JP 2016031557 A JP2016031557 A JP 2016031557A JP 6712045 B2 JP6712045 B2 JP 6712045B2
- Authority
- JP
- Japan
- Prior art keywords
- document
- image data
- information processing
- identification
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 108
- 238000003672 processing method Methods 0.000 title claims description 4
- 230000007547 defect Effects 0.000 claims description 66
- 230000007812 deficiency Effects 0.000 claims description 54
- 238000003384 imaging method Methods 0.000 claims 2
- 238000000034 method Methods 0.000 description 85
- 230000008569 process Effects 0.000 description 69
- 238000004458 analytical method Methods 0.000 description 24
- 238000012545 processing Methods 0.000 description 23
- 230000006870 function Effects 0.000 description 13
- 230000007246 mechanism Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 238000012795 verification Methods 0.000 description 5
- 238000012790 confirmation Methods 0.000 description 4
- 238000012937 correction Methods 0.000 description 3
- KNMAVSAGTYIFJF-UHFFFAOYSA-N 1-[2-[(2-hydroxy-3-phenoxypropyl)amino]ethylamino]-3-phenoxypropan-2-ol;dihydrochloride Chemical compound Cl.Cl.C=1C=CC=CC=1OCC(O)CNCCNCC(O)COC1=CC=CC=C1 KNMAVSAGTYIFJF-UHFFFAOYSA-N 0.000 description 2
- 230000002950 deficient Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
Images
Landscapes
- Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)
- Credit Cards Or The Like (AREA)
- Processing Or Creating Images (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
本発明は、読み取られた文書の不備を通知するための情報処理システムと、その処理方法及びプログラムに関する。 The present invention relates to an information processing system for notifying a deficiency of a read document, a processing method thereof, and a program.
従来より、記入済の文書を読取り、記入不備のチェックを行い、情報処理装置にチェック結果を表示する仕組みがある。 Conventionally, there is a mechanism in which a completed document is read, a deficiency in the entry is checked, and the check result is displayed on the information processing device.
特許文献1には、申請書データの内容をチェックし、フォーマットエラー、項目の記入漏れ等の受付不可エラーを判定する電子処理システムの技術が記載されている。
申込書の不備チェックをした場合、不備チェック結果を申込者に提示し、申込書の修正を依頼する必要がある。しかし、特許文献1のシステム構成では複数人の申込書の不備チェックを一度に実施した場合、申込書の申込者とは異なる者に申込内容や不備チェック結果を提示してしまうリスクがある。
When the application form is checked for defects, it is necessary to present the result of the defect check to the applicant and request correction of the application form. However, in the system configuration of
複数人の申込書の不備チェックを一度に実施するケースの具体例としては、ショッピングモールや催事場において、各顧客が記入したショッピングクレジット申込書等を複数枚一括して読み取り、チェックを行う等が考えられる。その場合、個人情報の漏洩を防ぐ目的から、申込者本人に間違いなく申込内容や不備チェック結果を提示しなくてはならないという課題がある。 As a specific example of the case where the incompleteness check of the application forms of multiple people is carried out at once, in a shopping mall or an event hall, a plurality of shopping credit application forms etc. filled in by each customer are collectively read and checked. Conceivable. In that case, there is a problem in that the applicant and the applicant must be informed of the details of the application and the result of the defect check in order to prevent leakage of personal information.
また、複数人でなく、1人の申込書の不備チェックを実施した場合であっても、なりすまし等により、申込書の申込者とは異なる者に申込内容や不備チェック結果を提示してしまうリスクはあるため、この場合も、申込者本人に間違いなく申込内容や不備チェック結果を提示しなくてはならないという課題がある。
身分証明書を用いた本人確認を実施するケースの具体例としては、上記ショッピングクレジット申込書以外にも、住宅ローンや生命保険等の申込書が挙げられる。また、平成28年1月からマイナンバーを用いる行政手続では、本人確認書類による本人確認が行われるようになった。
Also, even if the application form is checked by one person instead of multiple people, the risk of presenting the application details and the result of the defect check to a person different from the applicant of the application form due to spoofing etc. Therefore, in this case as well, there is a problem that the applicant must be sure to present the application content and the defect check result.
In addition to the shopping credit application form described above, specific examples of cases in which identity verification is performed using an identification card include application forms such as a mortgage and life insurance. In addition, from January 2016, in administrative procedures using My Number, identity verification has come to be performed using identity verification documents.
そこで、本発明の目的は、文書の申請者の本人確認を容易にする仕組みを提供することである。 Therefore, an object of the present invention is to provide a mechanism for facilitating the identity verification of a document applicant.
本発明は、情報処理装置を用いて取り込まれた文書の画像データと、当該文書の申請者の顔画像が含まれる身分証明書の画像データとを管理する情報処理システムであって、前記情報処理装置を用いて取込まれた文書画像データと身分証明書画像データとを対応付けて記憶する記憶手段と、前記記憶手段に記憶された身分証明書画像データから顔画像を特定する顔画像特定手段と、前記文書画像データを確認させる場合に、前記記憶手段に記憶された文書画像データと、前記顔画像特定手段により当該文書画像データと対応付く身分証明書画像データから特定された顔画像とをともに情報処理装置の画面に表示制御する表示制御手段とを備えることを特徴とする。 The present invention is an information processing system for managing the image data of the captured document using an information processing apparatus, and image data identification that includes the applicant's face image of the document, prior Symbol A storage unit that stores the document image data captured by using the information processing apparatus and the identification certificate image data in association with each other, and a face image that specifies a face image from the identification certificate image data stored in the storage unit. specifying means, in the case of checking the document image data, the document image data stored in the storage means, has been identified from this the document image data and rather with corresponding identification image data by the face image identification unit characterized in that it comprises a Viewing control means for displaying both controlled on the screen of the information processing apparatus and a face image.
本発明によれば、文書の申請者の本人確認を容易にする仕組みを提供することができる。 According to the present invention, it is possible to provide a mechanism for facilitating identification of a document applicant.
〔第1の実施形態〕
以下、図面を参照して本発明の実施形態を詳細に説明する。
[First Embodiment]
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
図1に示すように、本実施形態に情報処理システム100は、情報処理装置101、およびサーバ102が、ネットワーク103により通信可能に接続された構成をとる。情報処理装置101は、カメラ等を用いて文書の画像を取り込み、文書の記入不備チェックを行う。サーバ102は、文書の記入不備チェックに必要な記入内容の認識領域と認識条件を文書フォーム識別情報ごとに管理している。
As shown in FIG. 1, an
情報処理装置101は、携帯電話、スマートフォン、タブレット端末、ノートPC、およびPDA端末などの持ち運び可能な端末であって、ブラウザまたは文書システムのアプリケーションがインストールされており、無線通信または有線通信によりネットワーク103を介して、サーバ102と通信可能である。
The
なお、本実施形態においては、情報処理装置101とサーバ102が通信することで、記入不備チェックを行い、結果を表示しているが、本実施形態におけるサーバ102が持つ機能をすべて情報処理装置101に持たせることにより、サーバ102が無くても、本発明は実施可能である。ただし、以下の説明においては、より汎用的な文書システムを想定し、情報処理装置101とサーバ102に機能を分けて説明する。
In the present embodiment, the
以下、図2を用いて、図1に示した情報処理装置101に適用可能なハードウエア構成の一例について説明する。
図2において、201はCPUで、システムバス204に接続される各デバイスやコントローラを統括的に制御する。また、ROM203あるいは外部メモリ212には、CPU201の制御プログラムであるBIOS(Basic Input / Output System)やオペレーティングシステムプログラム(以下、OS)や、各サーバ或いは各PCの実行する機能を実現するために必要な各種プログラム等が記憶されている。
Hereinafter, an example of a hardware configuration applicable to the
In FIG. 2,
202はRAMで、CPU201の主メモリ、ワークエリア等として機能する。CPU201は、処理の実行に際して必要なプログラム等をROM203あるいは外部メモリ212からRAM202にロードして、該ロードしたプログラムを実行することで各種動作を実現するものである。
A
また、205は入力コントローラで、タッチセンサ210からの入力を制御する。206はビデオコントローラで、ディスプレイ211等の表示器への表示を制御する。なお、図2では、ディスプレイ211と記載しているが、表示器はCRTだけでなく、液晶ディスプレイ等の他の表示器であってもよい。これらは必要に応じて情報処理装置101のユーザが使用するものである。
An
207はメモリコントローラで、ブートプログラム、各種のアプリケーション、フォントデータ、ユーザファイル、編集ファイル、各種データ等を記憶する外部記憶装置(ハードディスク(HD))や、フレキシブルディスク(FD)、或いはPCMCIAカードスロットにアダプタを介して接続されるコンパクトフラッシュ(登録商標)メモリ等の外部メモリ212へのアクセスを制御する。
A
208は通信I/Fコントローラで、ネットワーク103を介して外部機器と接続・通信するものであり、ネットワークでの通信制御処理を実行する。例えば、TCP/IPを用いた通信等が可能である。
A communication I/
なお、CPU201は、例えばRAM202内の表示情報用領域へアウトラインフォントの展開(ラスタライズ)処理を実行することにより、ディスプレイ211上での表示を可能としている。また、CPU201は、ディスプレイ211上のタッチセンサ210におけるユーザのタッチ操作指示を受付けることを可能とする。
It should be noted that the
本発明を実現するための後述する各種プログラムは、外部メモリ212に記録されており、必要に応じてRAM202にロードされることによりCPU201によって実行されるものである。さらに、上記プログラムの実行時に用いられる定義ファイルや地図データ等も、外部メモリ212に格納されており、これらについての詳細な説明も後述する。
209は撮影画像入力コントローラで、撮影画像入力処理部214を介してカメラ215からの入力を制御する。カメラ215から入力された撮影画像を認識することが可能となっている。
Various programs to be described later for implementing the present invention are recorded in the
A captured
図3は、情報処理システム100の機能構成の一例を示すブロック図である。
画像取得部301は、文書および身分証明書を画像として取得する機能部である。
顔画像特定部302は、画像取得部301により取得された身分証明書画像から顔画像を特定する機能部である。
FIG. 3 is a block diagram showing an example of the functional configuration of the
The image acquisition unit 301 is a functional unit that acquires a document and an identification card as an image.
The face image identification unit 302 is a functional unit that identifies a face image from the identification card image acquired by the image acquisition unit 301.
記憶部303は、画像取得部301により取得された文書画像と、画像取得部301により取得された身分証明書画像または顔画像特定部302により特定された顔画像とを対応づけて記憶する機能部である。 The storage unit 303 is a functional unit that stores the document image acquired by the image acquisition unit 301 and the identification image acquired by the image acquisition unit 301 or the face image specified by the face image specifying unit 302 in association with each other. Is.
画面表示部304は、顔画像特定部302により特定された顔画像と、記憶部303に顔画像と対応づけて記憶された文書画像または文書画像を表示するためのリンクとを対応づけた画面を表示する機能部である。
The
画面表示部304は、画像取得部301により取得された身分証明書画像を表示するためのリンクと、記憶部303に身分証明書画像と対応づけて記憶された文書画像または文書画像を表示するためのリンクとを対応づけた画面を表示する機能部である。
The
画面表示部304は、文書画像もしくは身分証明書画像を表示した場合、または、文書画像もしくは身分証明書画像をユーザが確認したこと示す入力を受け付けた場合、表示済または確認済であることを識別して表示する機能部である。
特徴情報記憶部305は、身分証明書の種類を識別するための識別情報と、身分証明書の特徴情報とを対応づけて記憶する機能部である。
身分証明書特定部306は、特徴情報記憶部305により記憶された特徴情報を用いて、身分証明書の種類を特定する機能部である。
顔画像特定部302は、身分証明書特定部306により特定された身分証明書の種類に従って顔画像を特定する機能部である。
申請者特定部307は、画像取得部301により取得した文書画像から、文書の申請者を特定する機能部である。
所有者特定部308は、画像取得部301により取得した身分証明書画像から、身分証明書の所有者を特定する機能部である。
The
The characteristic information storage unit 305 is a functional unit that stores identification information for identifying the type of identification card and the characteristic information of the identification card in association with each other.
The identification card identification unit 306 is a functional unit that identifies the type of identification card using the characteristic information stored in the characteristic information storage unit 305.
The face image identification unit 302 is a functional unit that identifies a face image according to the type of identification card identified by the identification card identification unit 306.
The applicant identification unit 307 is a functional unit that identifies the applicant of the document from the document image acquired by the image acquisition unit 301.
The owner identification unit 308 is a functional unit that identifies the owner of the identification card from the identification card image acquired by the image acquisition unit 301.
記憶部303は、申請者特定部307により特定された申請者と、所有者特定部308により特定された所有者が一致した場合、文書画像と身分証明書画像または顔画像特定部302により特定された顔画像とを対応づけて記憶する機能部である。
文書定義情報記憶部309は、文書の記入内容の認識領域と認識条件とを含む文書定義情報を記憶する機能部である。
When the applicant identified by the applicant identifying unit 307 and the owner identified by the owner identifying unit 308 match, the storage unit 303 is identified by the document image and the identification card image or the face image identifying unit 302. It is a functional unit that stores the face image associated with it.
The document definition information storage unit 309 is a functional unit that stores the document definition information including the recognition area of the entry content of the document and the recognition condition.
不備チェック部310は、文書定義情報記憶部309に記憶されている認識領域と認識条件に従って、画像取得部301により取得された文書画像の認識領域ごとの不備をチェックする機能部である。 The deficiency check unit 310 is a functional unit that checks the deficiency for each recognition region of the document image acquired by the image acquisition unit 301 according to the recognition region and the recognition conditions stored in the document definition information storage unit 309.
不備領域表示部311は、文書定義情報記憶部309に記憶されている認識領域に従って、不備チェック部310によりチェックされた文書の不備をユーザが識別可能に表示する機能部である。
不備数表示手部312は、不備チェック部310によりチェックされた不備の数を文書フォーム毎に集計し表示する機能部である。
The deficiency area display unit 311 is a functional unit that displays the deficiency of the document checked by the deficiency check unit 310 according to the recognition area stored in the document definition information storage unit 309 so that the user can identify it.
The deficiency number
記憶部303は、申請者特定部307により特定された申請者と、所有者特定部308により特定された所有者が一致した場合、当該文書画像と当該身分証明書画像または顔画像特定部302により特定された顔画像とを対応付けて記憶する機能部である。 When the applicant identified by the applicant identifying unit 307 and the owner identified by the owner identifying unit 308 match, the storage unit 303 uses the document image and the identification card image or the face image identifying unit 302. The functional unit stores the identified face image in association with each other.
画面表示部304は、申請者特定部307により特定された申請者と、所有者特定部308により特定された所有者とが一致しなかった場合、エラーとして表示する機能部である。
撮像部313は、文書の申請者の顔を撮像する機能部である。
The
The
同一人物判定部314は、顔画像特定部302により特定された顔画像と、撮像部313により撮像された顔の画像とが同一人物の画像か否かを判定する機能部である。
The same person determination unit 314 is a functional unit that determines whether or not the face image identified by the face image identification unit 302 and the face image captured by the
表示制御315は、同一人物判定部314により同一人物の画像であると判定された場合、画像取得部301により取込まれた文書画像データを表示するよう制御し、同一人物判定部314により同一人物の画像ではないと判定された場合、画像取得部301により取込まれた文書画像データを表示しないよう制御する機能部である。
When the same person determination unit 314 determines that the images are images of the same person, the
記憶部303は、同一人物判定部314により同一人物の画像ではないと判定された場合、画像取得部301により取込まれた文書画像データと前記顔画像特定手段により特定された顔画像とを対応付けて記憶する機能部である。 When the same person determination unit 314 determines that the images are not images of the same person, the storage unit 303 associates the document image data captured by the image acquisition unit 301 with the face image identified by the face image identification unit. It is a functional unit that is attached and stored.
図4は、情報処理装置101で記入不備のチェック結果を表示する処理(以下、記入不備チェック結果表示処理と記す)の一例を示すフローチャートである。なお、以下の処理はすべて、情報処理装置101またはサーバ102のCPU201が行うものとする。
FIG. 4 is a flowchart showing an example of a process of displaying the check result of the entry defect in the information processing apparatus 101 (hereinafter referred to as the entry defect check result display process). It should be noted that all of the following processing is performed by the
ステップS401において、情報処理装置101は、文書システムのユーザによって行われる文書システムへのログインを受け付ける。なお、この記入不備チェック結果取得処理においてユーザインターフェースとなる文書アプリケーションは、情報処理装置101にインストールされたアプリケーションであってもよいし、ブラウザに表示されるWebアプリケーションなどのアプリケーションであってもよい。
In step S401, the
ステップS402において、情報処理装置101は、カメラ215を用いて記入不備チェックを行う申込書を撮影し、撮影された画像(以下、撮影画像)を外部メモリ212に記憶する。なお、この実施形態においては、情報処理装置101のカメラ215を用いて撮影画像を取得するとしたが、デジタルカメラなどを用いて撮影された画像やスキャナーなどを用いてスキャンされた画像を情報処理装置101に取り込むとしてもよい。
In step S<b>402, the
なお、この実施形態における「申込書」とは、本発明の情報処理システム100で扱う「文書」の一例である。「文書」の例としては、「申込書」以外にも「帳票」「稟議書」「届出書」「アンケート」などの書類が挙げられる。
The "application form" in this embodiment is an example of a "document" handled by the
ステップS403において、情報処理装置101は、カメラ215を用いて、ステップS402で撮影した申込書の申込者の身分証明書を撮影し、その撮影画像を外部メモリ212に記憶する。すなわち、ステップS402およびステップS403は、文書と前記身分証明書とを画像データとして取込む処理の一例を示すステップである。このステップもステップS402と同様、デジタルカメラなどを用いて撮影された画像やスキャナーなどを用いてスキャンされた画像を情報処理装置101に取り込むとしてもよい。
In step S403, the
なお、この実施形態においては、身分証明書の例として、運転免許証、パスポートを挙げたが、これに限定するものではなく、それら以外にも「健康保険証」「住基カード」「(マイナンバー)個人番号カード」などの本人を証明するための書類やカードなどであってもよい。
ステップS402とステップS403は、申込書の数だけ繰り返す。
In addition, in this embodiment, a driver's license and a passport are given as examples of the identification card, but the identification is not limited to these, and other than those, the “health insurance card”, “resident resident card”, “(my It may be a document or card for certifying the person such as "number) personal number card".
Steps S402 and S403 are repeated for the number of application forms.
ステップS404において、情報処理装置101は、ステップS402とステップS403にて外部メモリ212に記憶された、申込書と身分証明書の撮影画像をサーバ102に送信する。ここでは、撮影画像リスト1100(図11)のような複数のファイルが順に送信されたとする。
In step S404, the
ステップS405において、サーバ102は、撮影画像を受信し、外部メモリ212に撮影画像を記憶する。また、受信した撮影画像の順に従って、外部メモリ212上の解析用撮影画像リスト1200の「撮影画像ファイル名」カラムに受信した撮影画像ファイルのファイル名を記憶する。
In step S405, the
ステップS406において、サーバ102は、外部メモリ212に記憶した撮影画像を1つ取得し、申込書フォームテーブル800の各レコードにおける「フォーム画像」カラムに記憶されているファイルパスを用いて外部メモリ212から取り出したフォーム画像と順に画像比較することで、撮影画像のフォームIDを特定する。フォームIDを特定できた場合、外部メモリ212上の解析用撮影画像リスト1200の「フォームID/身分証明書ID」カラムに特定できたフォームIDを記憶し、ステップS407に進む。フォームIDを特定できなかった場合、ステップS408に進む。
In step S<b>406, the
具体的には、撮影画像「20141201_001.jpg」と申込書フォームテーブル800の各フォーム画像とを画像比較し、所定の値以上の割合で画像が一致した場合、解析用撮影画像リスト1200の「フォームID/身分証明書ID」カラムに一致したフォーム画像のフォームIDの値を記憶する。この撮影画像「20141201_001.jpg」の場合、フォーム画像「D:/form/01.jpg」と一致したとして、フォームID「FORM01」のフォームであると特定する。 Specifically, the photographed image “20141201_001.jpg” is compared with each form image of the application form table 800, and when the images match at a ratio of a predetermined value or more, the “form of the photographed image list for analysis 1200” is displayed. The value of the form ID of the form image that matches the “ID/ID card ID” column is stored. In the case of this photographed image “20141201 — 001.jpg”, it is determined that it is the form with the form ID “FORM01”, because it matches the form image “D:/form/01.jpg”.
ステップS407において、サーバ102は、OCRによる文字認識を行い、申込書に記載されている申込者名を特定し、外部メモリ212上の解析用撮影画像リスト1200の「申込者」カラムに特定できた申込者名を記憶する。すなわち、ステップS407は、文書画像から、文書の申請者を特定する処理の一例を示すステップである。なお、この実施形態において、ステップS407は、サーバ102で行う処理としたが、情報処理装置101にてOCRによる文字認識を行い、申込書に記載されている申込者名を特定するとしてもよい。
In step S407, the
ステップS408において、サーバ102は、記入不備チェック処理(図5)を行う。すなわち、ステップS408は、認識領域と認識条件に従って、文書画像の認識領域ごとの不備をチェックする処理の一例を示すステップである。
In step S408, the
なお、この実施形態において、ステップS408は、サーバ102で行う処理としたが、各テーブルやリスト(図8〜図13)のすべてを情報処理装置101に記憶させ、情報処理装置101でステップS408を行うとしてもよい。その場合、図4のすべての処理を情報処理装置101で行う。その場合、情報の送受信(例えば、ステップS404〜S405、ステップS413〜S414)は不要な処理になる。
ここで、図5の記入不備チェック処理について説明する。
In this embodiment, step S408 is the process performed by the
Here, the entry defect checking process of FIG. 5 will be described.
図5は、サーバ102で行う記入不備チェック処理の一例を示すフローチャートである。
ステップS501において、サーバ102は、外部メモリ212上の撮影画像リスト1100から申込書の撮影画像を1件取得し、RAM202に記憶する。具体的には、解析用撮影画像リスト1200の「フォームID/身分証明書ID」カラムに「FORMxx」のようにフォームIDが記憶されている撮影画像レコードを取得し、更に「撮影画像ファイル」カラムに記憶されている撮影画像ファイル名を用いて撮影画像ファイルを取得し、それぞれRAM202に記憶する。
FIG. 5 is a flowchart showing an example of the entry deficiency check process performed by the
In step S501, the
ステップS502において、サーバ102は、ステップS501にてRAM202に記憶した撮影画像レコードのフォームIDを検索キーとして記入不備チェックテーブル900(図9)を検索し、チェック対象の文書フォームに係る記入不備チェックレコードのリストを取得し、RAM202に記憶する。
In step S502, the
具体的には、解析用撮影画像リスト1200(図12)の1件目のレコードのフォームIDは「FORM01」であるため、フォームID=FORM01を検索キーとして、記入不備チェックテーブル900から、フォームID=FORM01の「ショッピングクレジット申込書」に係る記入不備チェックレコードのリストを取得し、RAM202に記憶する。
Specifically, since the form ID of the first record in the photographed image list for analysis 1200 (FIG. 12) is “FORM01”, the form ID=FORM01 is used as the search key, and the form ID is checked from the entry defect check table 900. =A list of entry defect check records related to the "shopping credit application form" of FORM01 is acquired and stored in the
なお、図9の記入不備チェックテーブル900は、フォームIDごとの記入不備チェック認識領域および認識条件を管理するテーブルの一例である。記入不備チェックテーブル900にはフォームID、チェック対象項目の通し番号であるチェックID、チェック内容となる認識条件、チェック対象項目の認識領域(矩形)を示す起点座標(X、Y)と終点座標(X、Y)が記憶されている。 The entry deficiency check table 900 in FIG. 9 is an example of a table for managing entry deficiency check recognition areas and recognition conditions for each form ID. In the entry defect check table 900, the form ID, the check ID that is the serial number of the check target item, the recognition condition that is the check content, and the starting point coordinates (X, Y) and the end point coordinates (X , Y) are stored.
なお、記入不備チェックテーブル900は、情報処理システム100で使用する文書の定義情報(文書フォーム識別情報と記入内容の認識領域と認識条件)として、システム管理者によって作成・メンテナンスされるテーブルである。すなわち、記入不備チェックテーブル900は、文書の記入内容の認識領域と認識条件とを含む文書定義情報を記憶する手段の一例を示す機能部である。
The entry defect check table 900 is a table created and maintained by the system administrator as definition information (document form identification information, recognition area and recognition condition of the entered content) of a document used in the
なお、この実施形態において、記入不備チェックテーブル900は、サーバ102で記憶するとしたが、情報処理装置101で記憶するとしてもよい。その場合、図5の記入不備チェック処理は、すべて情報処理装置101で行う。
Although the entry defect check table 900 is stored in the
ステップS503において、サーバ102は、変数errorに0を代入し、RAM202に変数errorを記憶する。この変数errorは、これから記入不備チェックを行う対象の撮影画像について、記入不備がある毎にカウントアップする変数である。
In step S503, the
ステップS504において、サーバ102は、変数iに1を代入し、RAM202に変数iを記憶する。この変数iは、撮影画像について、これから行う記入不備チェックのチェックIDとなる変数であり、そのチェックが終わると次のチェックIDのチェックを行うためにカウントアップしていく変数である。
In step S504, the
ステップS505において、サーバ102は、ステップS504にてRAM202に記憶した記入不備チェックレコードリストのうち、チェックID=iの記入不備チェックレコードの、認識領域の起点(X座標、Y座標)と終点(X座標、Y座標)と認識条件を取得する。具体的には、チェック対象フォームのフォームID=1の記入不備チェックレコードリストのうち、チェックID=1の場合、記入不備チェックレコードの認識領域=起点(100,100)と終点(300,150)、認識条件=「必須」が取得される。
ステップS506において、サーバ102は、取得した認識条件について判定する。
In step S505, the
In step S506, the
認識条件が「必須」の場合は、認識領域は入力必須項目であるため、ステップS507において、撮影画像の認識領域が示す矩形内に文字や記号が記入されているか否かを判定する。すなわち、ステップS507は、認識領域と認識条件に従って、文書画像の認識領域ごとの不備をチェックする処理の一例を示すステップである。なお、この判定処理は、OCR等による解析技術を用いるが、既知の技術であるため、説明は省略する。
文字や記号が記入されていると判定した場合はステップS511に進み、文字や記号が記入されていないと判定した場合はステップS509に進む。
If the recognition condition is "essential", the recognition area is an input required item, and therefore, in step S507, it is determined whether or not a character or symbol is written in the rectangle indicated by the recognition area of the captured image. That is, step S507 is a step showing an example of the process of checking the deficiency for each recognition area of the document image according to the recognition area and the recognition condition. Note that this determination processing uses an analysis technique such as OCR, but since it is a known technique, description thereof will be omitted.
If it is determined that characters or symbols are entered, the process proceeds to step S511, and if it is determined that characters or symbols are not entered, the process proceeds to step S509.
認識条件が「丸囲み」の場合は、認識領域は多肢選択項目であるため、ステップS508において、撮影画像の認識領域が示す矩形内に丸印が記入されているか否かを判定する。すなわち、ステップS508は、認識領域と認識条件に従って、文書画像の認識領域ごとの不備をチェックする処理の一例を示すステップである。この判定処理は、OMRやOCR等による解析技術を用いるが、既知の技術であるため、説明は省略する。なお、本実施例では、記入不備チェック認識条件を「丸囲み」として丸印の存在有無を判定しているが、丸印に限定するものではなく、レ点やその他の図形の判定であってもよい。 If the recognition condition is “encircled”, the recognition area is a multiple-choice item, so in step S508, it is determined whether or not a circle is entered in the rectangle indicated by the recognition area of the captured image. That is, step S508 is a step showing an example of the process of checking the deficiency for each recognition area of the document image according to the recognition area and the recognition condition. This determination processing uses an analysis technique such as OMR or OCR, but since it is a known technique, its explanation is omitted. In the present embodiment, the presence/absence of a circle mark is determined by setting the entry deficiency check recognition condition as “circled”, but the present invention is not limited to the circle mark, and may be a check mark or other figure determination. Good.
また、上記において、丸印の数を「1つ」としたが、記入不備チェックテーブル900に「上限値」や「チェック数」カラムを設け、上限値を超えた場合「NG」、印の個数が「チェック数」以外の場合「NG」と判定するとしてもよい。また、記入不備チェックテーブル900に「桁数」カラムを設け、記入された文字が許可された桁数であれば「OK」、許可されていない桁数であれば「NG」と判定してもよい。また、記入不備チェックテーブル900に「文字属性」カラムを設け、記入された文字の属性、例えば「数字」「ひらがな」「カタカナ」「英数字」などによって、「OK」「NG」の判定をしてもよい。 Further, in the above description, the number of circles is “1”, but the entry defect check table 900 is provided with “upper limit value” and “check number” columns, and when the upper limit value is exceeded, “NG”, the number of marks May be determined to be “NG” if the number is other than “the number of checks”. In addition, even if a “digit number” column is provided in the entry defect check table 900 and it is determined that the entered character is “OK” if it is the permitted digit number and “NG” if it is not the authorized digit number. Good. In addition, a “character attribute” column is provided in the entry defect check table 900, and “OK” or “NG” is determined by the attribute of the entered character, for example, “number”, “hiragana”, “katakana”, “alphanumeric character”, or the like. May be.
また、OCR等による解析結果で、記入された文字を認識できなかった場合、「NG」と判定するとしてもよい。また、変数result[i]の値は、「OK」「NG」の2つに限定するものではなく、「不明瞭」「認識不可」「矛盾」などの値を持つとしてもよい。 Further, when the written character cannot be recognized as a result of analysis by OCR or the like, it may be determined as “NG”. The value of the variable result[i] is not limited to the two values of “OK” and “NG”, and may have values such as “unclear”, “unrecognizable”, and “contradiction”.
ステップS508にて、丸印が記入されていると判定した場合は判定した場合はステップS511に進み、丸印が記入されていないと判定した場合はステップS509に進む。
ステップS509において、サーバ102は、変数errorをカウントアップする。つまり、記入不備が発見されたということである。
If it is determined in step S508 that the circle is filled, the process proceeds to step S511 if it is determined, and to step S509 if it is determined that the circle is not written.
In step S509, the
ステップS510において、サーバ102は、記入不備チェック結果リスト1300にエラー内容を示すレコードを挿入する。記入不備チェック結果リスト1300に挿入する記入不備チェック結果レコードは、「撮影画像ファイル」「チェックID」「エラー内容」「起点座標(X、Y))「終点座標(X、Y)」である。この記入不備チェック結果レコードは、記入不備チェック処理を終了後、情報処理装置101に送信し、記入不備チェック結果一覧画面の表示に用いる。
In step S510, the
ステップS511において、サーバ102は、変数iをカウントアップし、RAM202にチェックID=iの記入不備チェックレコードが存在するか否かを判定し、存在する場合は当該文書フォームの記入不備チェックが残っていることを意味するため、ステップS505に戻り、当該文書フォームの記入不備チェックを続ける。存在しない場合は、当該文書フォームの記入不備チェックがすべて終わったことを意味するため、ステップS501に戻り、外部メモリ212上の解析用撮影画像リスト1200における次の撮影画像レコードについて、文書フォームの記入不備チェックを行う。
In step S511, the
なお、次の撮影画像レコードがRAM202に存在しない場合、解析用撮影画像リスト1200のすべての撮影画像レコードについて記入不備チェックがすべて終わったことを意味するため、この記入不備チェック処理を終了する。
この時点で、本実施例においては、記入不備チェック結果リスト1300(図13)のような記入不備チェック結果レコードが記憶されている。
If the next photographed image record does not exist in the
At this point, in the present embodiment, an entry defect check result record such as the entry defect check result list 1300 (FIG. 13) is stored.
以上で、図5の記入不備チェック処理の説明を終了する。この処理によって、すべての撮影画像について、記入不備チェックが行われたことになる。図4の記入不備チェック結果表示処理の説明に戻る。 This is the end of the description of the entry deficiency check process in FIG. By this processing, the entry defects are checked for all the captured images. Returning to the description of the entry deficiency check result display process in FIG.
ステップS409において、ステップS406にて取得した撮影画像と、身分証明書マスタテーブル1000(図10)の各レコードにおける「サンプル画像ファイル」カラムに記憶されているファイルパスを用いて外部メモリ212から取得した身分証明書サンプル画像とを順に画像比較することで、身分証明書IDを特定する。
In step S409, the captured image acquired in step S406 and the file path stored in the “sample image file” column in each record of the identification certificate master table 1000 (FIG. 10) are used to acquire the image from the
すなわち、ステップS409は、記憶された特徴情報を用いて、身分証明書の種類を特定する処理の一例を示すステップである。また、身分証明書マスタテーブル1000は、身分証明書の種類を識別するための識別情報と、身分証明書の特徴情報とを対応づけて記憶する手段の一例を示す機能部である。 That is, step S409 is a step showing an example of a process of identifying the type of identification card using the stored characteristic information. The identification certificate master table 1000 is a functional unit showing an example of a unit that stores identification information for identifying the type of identification certificate and characteristic information of the identification certificate in association with each other.
身分証明書IDを特定できた場合、外部メモリ212上の解析用撮影画像リスト1200の「フォームID/身分証明書ID」カラムに特定できた身分証明書IDを記憶し、ステップS410に進む。身分証明書IDを特定できなかった場合、撮影画像は申込書フォームテーブル800の「フォーム画像」からも、身分証明書マスタテーブル1000の「サンプル画像ファイル」からも特定することができなかった画像であると捉え、ステップS406に戻る。
If the identification ID can be specified, the specified identification ID is stored in the “form ID/identification ID” column of the captured image list for analysis 1200 on the
具体的には、撮影画像「20141201_002.jpg」と身分証明書マスタテーブル1000の各サンプル画像ファイルとを画像比較し、サンプル画像ファイル「D:/cert/01.jpg」と一致した場合、撮影画像「20141201_002.jpg」は「運転免許証」であると特定できたため、解析用撮影画像リスト1200の「フォームID/身分証明書ID」カラムに「CERT01」の値を記憶する。 Specifically, the photographed image “20141201_002.jpg” is compared with each sample image file of the identification card master table 1000, and when the sample image file “D:/cert/01.jpg” matches, the photographed image Since “20141201_002.jpg” can be identified as the “driver's license”, the value of “CERT01” is stored in the “form ID/identification ID” column of the analysis photographed image list 1200.
ステップS410において、サーバ102は、ステップS406にて取得した撮影画像から顔画像を取得する。すなわち、ステップS410は、取得された身分証明書画像データから顔画像を特定する処理の一例を示すステップである。また、ステップS410は、特定された身分証明書の種類に従って顔画像を特定する処理の一例を示すステップである。
In step S410, the
具体的には、身分証明書マスタテーブル1000をステップS408にて特定された身分証明書IDで検索し、ヒットしたレコードの(顔画像始点X、顔画像始点Y)、(顔画像終点X,顔画像終点Y)の2点を対角とする矩形を用いて、ステップS406にて取得した撮影画像から顔画像を切り取る。切り取った顔画像は「撮影画像ファイル名_trim」のようなファイル名で外部メモリ212に記憶する。
Specifically, the identification card master table 1000 is searched by the identification card ID specified in step S408, and the record (face image start point X, face image start point Y), (face image end point X, face) of the hit record is searched. A face image is cut out from the captured image acquired in step S406 by using a rectangle having two diagonal points of the image end point Y). The cut face image is stored in the
なお、この実施形態においては、身分証明書マスタテーブル1000に記憶された座標を用いて顔画像を切り取るとしたが、この方法に限定するものではなく、身分証明書マスタテーブル1000に定義された座標を用いず、顔認識技術等を用いて身分証明書画像から顔画像部分を判定された顔画像を切り取るとしてもよい。なお、顔認識技術は既知の技術であるため、ここでの説明は省略する。 In this embodiment, the face image is cut out using the coordinates stored in the identification certificate master table 1000, but the present invention is not limited to this method, and the coordinates defined in the identification card master table 1000 are used. Instead of using, the face image of which the face image portion is determined may be cut out from the identification card image using a face recognition technique or the like. Since the face recognition technology is a known technology, the description thereof is omitted here.
ステップS411において、サーバ102は、外部メモリ212上の解析用撮影画像リスト1200の「身分証明書ファイル/顔画像ファイル」カラムにステップS410にて切り取った顔画像のファイル名を記憶する。これにより、身分証明書の撮影画像と顔画像とを関連付けることができるため、システム上で身分証明書の控えを保管する場合、身分証明書をスキャンして得た身分証明書の画像データと申込書のデータとを紐付ける作業をユーザ自身で行わなければならないという問題を解決することができる。
In step S411, the
また、ステップS409にて身分証明書IDが特定された身分証明書は、ステップS406にてフォームIDが直前に特定された申込書の本人確認のために撮影された画像であると捉え、解析用撮影画像リスト1200において、直前の申込書レコードの「身分証明書ファイル/顔画像ファイル」カラムにステップS409にて特定された身分証明書ファイル名を記憶する。 In addition, for the purpose of analysis, it is assumed that the identification certificate whose identification ID has been specified in step S409 is an image taken to verify the identity of the application form whose form ID was specified immediately before in step S406. In the photographed image list 1200, the ID card file name specified in step S409 is stored in the “ID card file/face image file” column of the immediately preceding application record.
これにより、申込書の撮影画像と身分証明書の撮影画像とを関連付けることができる。同時に、申込書の撮影画像と顔画像とを関連付けることができる。すなわち、ステップS411は、取込まれた文書画像データと身分証明書画像データとを対応付けて記憶する処理の一例を示すステップである。 This allows the photographed image of the application form and the photographed image of the identification card to be associated with each other. At the same time, the photographed image of the application form and the face image can be associated with each other. That is, step S411 is a step showing an example of a process of storing the captured document image data and the identification document image data in association with each other.
なお、この実施形態においては、申込書の撮影後に続けて、その申込者の本人確認を行う身分証明書を撮影するとしたが、これに限定するものではなく、撮影順序は順不同であっても良い。その場合、ステップS411による申込書の撮影画像と身分証明書の撮影画像との関連付けは、撮影画像の順序で判断することができないため、申込書の申込者名と身分証明書の氏名とが一致する申込書と身分証明書を関連付けるなどの方法を取ってもよい。 In this embodiment, after the application form is taken, the ID card for confirming the identity of the applicant is taken, but the present invention is not limited to this, and the order of shooting may be in any order. .. In that case, the association between the photographed image of the application form and the photographed image of the ID card in step S411 cannot be determined in the order of the photographed images, and therefore the applicant name of the application form and the name of the ID card match. You may use a method such as associating the application form with the ID card.
具体的には、ステップS409にて身分証明書の「身分証明書ID」を特定する際に身分証明書の「氏名」欄のOCRを行い、解析用撮影画像リスト1200の「申込者」カラムにOCRで取得した氏名を記憶し、この氏名とステップS407にて解析用撮影画像リスト1200の「申込者」カラムに記憶された申込者名とが同一の申込書レコードを、関連する申込書レコードとして判定する。 Specifically, when the “ID card ID” of the identification card is specified in step S409, the OCR of the “name” column of the ID card is performed, and the “Applicant” column of the photographed image list for analysis 1200 is displayed. The name obtained by OCR is stored, and an application record having the same name as the applicant's name stored in the “Applicant” column of the photographed image list for analysis 1200 in step S407 is used as a related application record. judge.
すなわち、ステップS409は、身分証明書画像から、身分証明書の所有者を特定する処理の一例を示すステップである。すなわち、ステップS411は、文書の申請者と、身分証明書の所有者が一致した場合、文書画像と身分証明書画像または顔画像とを対応づけて記憶する処理の一例を示すステップである。 That is, step S409 is a step showing an example of a process of identifying the owner of the identification card from the identification card image. That is, step S411 is a step showing an example of a process of storing the document image and the identification image or the face image in association with each other when the applicant of the document and the owner of the identification document match.
また、ステップS411による申込書の撮影画像と身分証明書の撮影画像との関連付けの方法は、これら以外にも、関連する申請書と身分証明書は同じ画像内に収めて撮影する方法や、関連する申請書と身分証明書に同一または関連する目印(バーコード等)と共に撮影する方法などを取ってもよい。
以上のステップS406からステップS411の処理は、ステップS405にて受信した画像の数だけ繰り返す。
The method of associating the photographed image of the application form with the photographed image of the identification card in step S411 is not limited to these methods, and the related application form and the identification card may be captured in the same image, or It is also possible to take a method such as taking a photograph together with a mark (bar code etc.) which is the same or related to the application form and the identification card.
The above steps S406 to S411 are repeated for the number of images received in step S405.
ステップS412において、サーバ102は、記入不備チェック処理(図5)で記憶した記入不備チェック結果リスト1300(図13)について、申込書ごとに不備数を集計する。具体的には、記入不備チェック結果リスト1300におけるチェックID≠NULLのレコードについて、撮影画像ファイル名ごとにグルーピングを行い、カウントする。
In step S412, the
ステップS413において、サーバ102は、解析用撮影画像リスト1200、記入不備チェック結果リスト1300およびステップS410にて取得した顔画像ファイルを情報処理装置101に送信する。
In step S<b>413, the
ステップS414において、情報処理装置101は、解析用撮影画像リスト1200、記入不備チェック結果リスト1300および顔画像ファイルを受信し、外部メモリ212に記憶する。
In step S<b>414, the
ステップS415において、情報処理装置101は、受信した解析用撮影画像リスト1200、記入不備チェック結果リスト1300および顔画像ファイルを用いて、申込者の顔画像を含む記入不備チェック結果一覧画面610(図6)をディスプレイ211に表示する。具体的には、申込書毎に顔画像611、申込者名、申込書における記入不備数、申込書ボタン613、身分証明書ボタン614を表示する。
In step S415, the
すなわち、ステップS415は、顔画像と、顔画像と対応づけて記憶された文書画像を表示するためのリンクとを対応づけた画面を表示する処理の一例を示すステップである。また、ステップS415は、文書画像データまたは当該文書画像データを表示するためのリンクと、当該文書画像データと対応付けて記憶された身分証明書画像データから特定された顔画像とを対応付けた画面を表示する処理の一例を示すステップである。 That is, step S415 is a step showing an example of a process of displaying a screen in which a face image and a link for displaying a document image stored in association with the face image are associated with each other. In addition, in step S415, a screen in which the document image data or the link for displaying the document image data and the face image identified from the identification certificate image data stored in association with the document image data are associated with each other. It is a step showing an example of a process of displaying.
また、ステップS415は、身分証明書画像を表示するためのリンクと、身分証明書画像と対応づけて記憶された文書画像を表示するためのリンクとを対応づけた画面を表示する処理の一例を示すステップである。また、ステップS415は、文書画像データまたは当該文書画像データを表示するためのリンクと、当該文書画像データと対応付けて記憶された身分証明書画像データを表示するためのリンクとを対応付けた画面を表示する処理の一例を示すステップである。また、ステップS415は、チェックされた不備の数を文書フォーム毎に集計し表示する処理の一例を示すステップである。 Further, step S415 is an example of a process of displaying a screen in which a link for displaying the identification image and a link for displaying the document image stored in association with the identification image are associated with each other. These are the steps shown. In addition, a step S415 is a screen in which the link for displaying the document image data or the document image data is associated with the link for displaying the identification image data stored in association with the document image data. It is a step showing an example of a process of displaying. Further, step S415 is a step showing an example of processing for totaling and displaying the number of checked defects for each document form.
なお、申込書における記入不備数は、受信した解析用撮影画像リスト1200のレコードを「撮影画像ファイル」でグルーピングを行い、「撮影画像ファイル」毎のレコード数を「撮影画像ファイル」に係る申込書における記入不備数として表示する。これにより、申込書毎の記入不備数が把握できるため、記入不備がある場合、記入不備の修正を依頼するために申込者を呼び出す等の対応をとることができる。 As for the number of incompleteness in the application form, the records of the received captured image list for analysis 1200 are grouped by "captured image file", and the number of records for each "captured image file" is related to the "captured image file". It is displayed as the number of deficiencies filled in. As a result, the number of deficiencies in each application form can be ascertained, and if there are deficiencies, it is possible to take measures such as calling the applicant to request correction of the deficiencies.
なお、申込書ボタン613、身分証明書ボタン614には、受信した解析用撮影画像リスト1200の「撮影画像ファイル」カラムに記憶されている画像ファイル名がそれぞれ対応づけられている。これにより、申込書ボタン613、身分証明書ボタン614が押下された場合、次画面において、ステップS402にて撮影され外部メモリ212に記憶された画像ファイルのうち、どの画像ファイルを表示すべきかがわかる。
Note that the
なお、この実施形態においては、申込書毎に表示するとしたが、これに限定するものではなく、同一の申込者が複数の申込書を提出していた場合、申込者毎に申込書をまとめて表示するとしてもよい。その場合、申込書ボタン613の押下を受け付けるとその申込者に係る複数の申込書を順にまたはまとめて表示する、または、その申込者の行に複数の申込書ボタン613を表示する等の方法をとる。
In addition, in this embodiment, the application is displayed for each application, but the present invention is not limited to this. If the same applicant submits a plurality of applications, the applications are collected for each applicant. It may be displayed. In that case, when the
なお、申込書に係る身分証明書が無い場合、図6の612のような「身分証明書がありません」や「NO IMAGE」や「×」といった文言を表示したり、空欄にしたりすることで、身分証明書が撮影されていない、または、撮影された身分証明書の種類を特定できなかったことを識別して表示する。これにより、申込書に係る身分証明書の有無が容易に認識できるようになる。また、申込書の本人確認のために、身分証明書の画像データの全体を画面に表示すると、画面のスペースをとってしまうという課題を解決することができる。 If you do not have an identification card related to the application form, you can display a message such as "No ID", "NO IMAGE", or "X" like 612 in Fig. 6 or leave it blank. It is displayed by identifying that the ID card was not photographed or that the type of the photographed ID card could not be specified. As a result, it becomes possible to easily recognize the presence or absence of the identification card related to the application form. Further, when the entire image data of the identification card is displayed on the screen for the identification of the application form, it is possible to solve the problem of taking up space on the screen.
また、これにより、申込者に記入不備の修正を依頼するために呼び出した際、申込者の顔と、ディスプレイ211に表示されている顔画像611とを見比べることで、文書の申込者の本人確認を容易にする仕組みを提供することができる。そのため、申込者本人に間違いなく不備チェック結果を提示することができ、誤って個人情報を漏洩するリスクを低減することができる。
Further, as a result, when a call is made to the applicant to request correction of a deficiency, the face of the applicant is compared with the face image 611 displayed on the
ステップS416において、情報処理装置101は、ユーザによる操作を受付け、受け付けた操作を判定する。申込書ボタン613が押下された場合は押下された申込書ボタン613に係る申込書の画像ファイル名を取得してステップS417に進む。身分証明書ボタン614が押下された場合は押下された身分証明書ボタン614に係る身分証明書の画像ファイル名を取得してステップS419に進む。記入不備チェック結果レコード行をドラッグ&ドロップされた場合はステップS420に進む。また、終了ボタン618が押下された場合は、図4の記入不備チェック結果取得処理を終了する。
In step S416, the
ステップS417において、情報処理装置101は、ステップS402にて撮影され外部メモリ212に記憶された申込書画像、ステップS415にて受信した顔画像ファイルを用いて、記入不備チェック結果画面710(図7)を表示する。
In step S417, the
具体的には、ステップS402にて撮影され外部メモリ212に記憶された申込書画像から、ステップS416にて押下された申込書ボタン613に係る申込書の画像ファイル名の画像ファイルを取得して申込書画像711(図7)のように表示する。また、ステップS415にて受信した顔画像ファイルから、同じくステップS415にて受信した解析用撮影画像リスト1200のうち、ステップS416にて押下された申込書ボタン613に係る顔画像ファイル名の顔画像ファイルを取得して顔画像712(図7)のように表示する。
Specifically, from the application form image captured in step S402 and stored in the
すなわち、ステップS417は、顔画像と、顔画像と対応づけて記憶された文書画像とを対応づけた画面を表示する処理の一例を示すステップである。また、ステップS417は、文書画像データと、当該文書画像データと対応付けて記憶された身分証明書画像データから特定された顔画像とを対応付けた画面を表示する処理の一例を示すステップである。 That is, step S417 is a step showing an example of a process for displaying a screen in which the face image and the document image stored in association with the face image are associated with each other. Further, step S417 is a step showing an example of a process of displaying a screen in which the document image data and the face image identified from the identification image data stored in association with the document image data are associated with each other. .
また、顔画像712の傍に、または顔画像712に重ねて、身分証明書画像を表示するための身分証明書ボタン715を表示する。なお、身分証明書ボタン715を表示せず、顔画像712を押下することで身分証明書画像を表示するとしてもよい。 Further, an identification card button 715 for displaying the identification image is displayed beside the face image 712 or over the face image 712. The identification card image may be displayed by pressing the face image 712 without displaying the identification card button 715.
すなわち、ステップS417は、身分証明書画像を表示するためのリンクと、身分証明書画像と対応づけて記憶された文書画像とを対応づけた画面を表示する処理の一例を示すステップである。また、ステップS417は、文書画像データと、当該文書画像データと対応付けて記憶された身分証明書画像データを表示するためのリンクとを対応付けた画面を表示する処理の一例を示すステップである。 That is, step S417 is a step showing an example of a process of displaying a screen in which the link for displaying the identification card image and the document image stored in association with the identification card image are associated with each other. In addition, step S417 is a step showing an example of a process of displaying a screen in which the document image data and the link for displaying the identification image data stored in association with the document image data are associated with each other. .
ステップS418において、情報処理装置101は、ステップS417にて表示された申込書画像711に記入不備箇所を識別可能に重畳表示する。すなわち、ステップS418は、認識領域に従って、チェックされた文書の不備をユーザが識別可能に表示する処理の一例を示すステップである。
In step S418, the
具体的には、ステップS416にて押下された申込書ボタン613に係る申込書の画像ファイル名を検索キーとして、記入不備チェック結果リスト1300を検索し、起点座標(X、Y)と終点座標(X、Y)を取得し、この2点を対角とする矩形を申込書画像711上に重畳させて描き、識別可能な色(例えば、赤色)で塗りつぶす(図7の記入不備箇所713)。これにより、記入不備の領域を識別可能に表示することができる。また、これにより、システム上で不備チェックと本人確認とを合わせて実施することができる。
Specifically, the entry defect check result list 1300 is searched using the image file name of the application form corresponding to the
なお、この実施形態においては、記入不備箇所713は、赤色で塗りつぶすとしたが、これに限定するものではなく、赤以外の色や模様による塗りつぶし、枠による囲み、点滅、拡大、色の反転表示など、ユーザが識別可能な表示であればよい。また、識別可能な表示に限定するものではなく、音声による記入不備箇所の読み上げ、画面をタッチした際の振動など触感による識別方法であってもよい。 In this embodiment, the defective portion 713 is painted in red. However, the invention is not limited to this. Filling in with a color or pattern other than red, enclosing with a frame, blinking, enlarging, and reversing display of color. Any display that can be identified by the user may be used. Further, the display method is not limited to the display that can be identified, and an identification method using a tactile sensation such as reading out an incomplete portion by voice or vibration when a screen is touched may be used.
ステップS419において、情報処理装置101は、ステップS403にて撮影され外部メモリ212に記憶された身分証明書画像を表示する。具体的には、ステップS403にて撮影され外部メモリ212に記憶された身分証明書画像から、ステップS416にて押下された身分証明書ボタン614に係る身分証明書の画像ファイル名の画像ファイルを取得し、身分証明書確認画面720を表示する。これにより、身分証明書をスキャンして得た身分証明書の画像データと申込書の画像データとを紐付けて表示することができる。
In step S419, the
ステップS420において、情報処理装置101は、ドラッグされた行をドロップされた箇所に移動させることで表示行の入替を行い、ステップS415に進み、記入不備チェック結果一覧画面を再表示する。このドラッグ&ドロップにより、担当者が通知する申込者の順番を変更することができる。例えば、呼び出した申込者が不在の場合、この申込者の記入不備チェック結果レコードをドラッグ&ドロップすることで通知を後回しにすることができる。
In step S420, the
具体的には、記入不備チェック結果一覧画面610の記入不備チェック結果レコード616をドラッグし、記入不備チェック結果レコード617の下にドロップした場合、記入不備チェック結果一覧画面620の記入不備チェック結果レコード621のように、記入不備チェック結果レコードの順番を変更することができる。
Specifically, when the entry defect
ステップS421において、情報処理装置101は、ユーザによる戻るボタンの押下を受付けると、ステップS415に戻り、ディスプレイ211に記入不備チェック結果一覧画面620(図6)を表示する。その際、申込書ボタン622や身分証明書ボタン623のように、表示した申込書や身分証明書には、「済」マークで表示したことを識別して表示する。
When the
すなわち、ステップS415は、文書画像もしくは身分証明書画像を表示した場合、表示済または確認済であることを識別して表示する処理の一例を示すステップである。また、ステップS415は、文書画像データもしくは身分証明書画像データを表示したこと、または文書画像データもしくは身分証明書画像データをユーザが確認したこと示す入力を受け付けたことを、他の画像と識別して表示する処理の一例を示すステップである。 That is, step S415 is a step showing an example of a process of displaying a document image or an identification card image by identifying whether the document image or the identification image has been displayed or confirmed. Further, in step S415, the fact that the document image data or the ID card image data is displayed, or the input indicating that the user has confirmed the document image data or the ID card image data is accepted is distinguished from other images. It is a step showing an example of a process of displaying as.
具体的には、チェック結果を表示した撮影画像ファイルについて、外部メモリ212上の解析用撮影画像リスト1200の「通知済」カラムに「済」フラグを立て、ステップS415にて記入不備チェック結果一覧画面620(図6)を表示する際に、記入不備チェック結果レコードの「通知済」カラムに「済」が記憶されている場合に各ボタンに「済」マークを表示する。これにより、担当者がどこまで申込者に通知したか、担当者がどこまで確認したか、どの申込者の本人確認が完了したか、等について容易に識別できる。
Specifically, for the captured image file displaying the check result, the “completed” flag is set in the “notified” column of the analysis captured image list 1200 on the
また、この「済」マークは、記入不備チェック結果画面710の通知済チェックボックス714、身分証明書確認画面720の確認済チェックボックス721がチェックされている場合にのみ、表示するとしてもよい。すなわち、ステップS415は、文書画像もしくは身分証明書画像をユーザが確認したこと示す入力を受け付けた場合、表示済または確認済であることを識別して表示する処理の一例を示すステップである。
以上で、図4の記入不備チェック結果取得処理の説明を終了する。
In addition, this “done” mark may be displayed only when the notified check box 714 of the entry deficiency check result screen 710 and the confirmed check box 721 of the identification confirmation screen 720 are checked. That is, step S415 is a step showing an example of a process of identifying and displaying the document image or the identification document image when the input indicating that the user has confirmed the document image or the identification document image is received.
This is the end of the description of the entry deficiency check result acquisition process in FIG.
以上により、文書の申込者の本人確認を容易にする仕組みを提供することができる。また、システム上で不備チェックと本人確認とを合わせて実施することができる。また、身分証明書の画像データと申込書のデータとを紐付けることができる。また、申込書の本人確認が完了していることを、担当者が正しく把握できる。また、申込書の本人確認のために、身分証明書の画像データの全体を画面に表示すると、画面のスペースをとってしまうという課題を解決することができる。 As described above, it is possible to provide a mechanism that facilitates the identification of the applicant of a document. In addition, the deficiency check and the identity verification can be performed together on the system. Further, the image data of the identification card and the data of the application form can be associated with each other. In addition, the person in charge can correctly understand that the identification of the application form has been completed. Further, when the entire image data of the identification card is displayed on the screen for the identification of the application form, it is possible to solve the problem of taking up a space on the screen.
〔第2の実施形態〕
第1の実施形態は、文書画像または文書リンクと顔画像を対応付けた画面、文書画像または文書リンクと身分証明書リンクを対応付けた画面を表示することによって、文書の申請者の本人確認を容易にする仕組みであり、第2の実施形態は、担当者(情報処理システム100のユーザ)が対面する申請者と身分証明書の顔画像との同一人物判定を行うことによって、文書の申請者の本人確認を容易にする仕組みである。
[Second Embodiment]
The first embodiment displays a screen in which a document image or a document link is associated with a face image and a screen in which a document image or a document link is associated with an identification card link to confirm the identity of a document applicant. The second embodiment is a mechanism for facilitating the process, and in the second embodiment, the person in charge (the user of the information processing system 100) makes the same person determination of the face image of the applicant and the face image of the identification card, thereby making the applicant of the document. It is a mechanism that makes it easy to identify yourself.
図14は、第2の実施形態に係る情報処理装置101で記入不備のチェック結果を表示する処理の一例を示すフローチャートである。図15は、第2の実施形態に係る情報処理装置101で顔一致判定をする処理の一例を示すフローチャートである。なお、第2の実施形態では、第1の実施形態における図4のフローチャートを図14に置き換え、第1の実施形態のステップと同じ処理については、同じステップ番号を付与し説明を省略する。なお、以下の処理はすべて、情報処理装置101またはサーバ102のCPU201が行うものとする。
FIG. 14 is a flowchart showing an example of a process of displaying a check result of entry defects in the
また、図16は、第2の実施形態に係る情報処理装置101で記入不備チェック結果一覧(身分証明書特定エラー)を表示する画面の一例を示す図である。図17は、第2の実施形態に係る情報処理装置101で記入不備チェック結果一覧(対面者撮影)を表示する画面の一例を示す図である。図18は、第2の実施形態に係る情報処理装置101で記入不備チェック結果一覧(顔一致判定エラー)を表示する画面の一例を示す図である。
In addition, FIG. 16 is a diagram illustrating an example of a screen that displays the entry defect check result list (identification certificate identification error) in the
図14および図15を用いて、第2の実施形態について説明する。
ステップS1401において、サーバ102は、直前の申請書について、「身分証明書特定エラー」と設定する。「身分証明書特定エラー」となる具体的なケースは、ステップS406にて取得した身分証明書の撮影画像から身分証明書IDが特定できなかった、申込書の申込者名と一致する身分証明書が撮像画像に存在しなかった等が挙げられる。
ステップS1402において、情報処理装置101は、顔一致判定処理(図15)を行う。図15の処理について説明する。
The second embodiment will be described with reference to FIGS. 14 and 15.
In step S1401, the
In step S1402, the
ステップS1501において、情報処理装置101は、ステップS416にて押下された申込書ボタン1601(図16)に係る申込書が「身分証明書特定エラー」と設定されているか否か判定する。「身分証明書特定エラー」の場合はステップS1502に進み、「身分証明書特定エラー」でない場合はステップS1504に進む。
In step S1501, the
ステップS1502において、情報処理装置101は、「身分証明書特定エラー」を示すメッセージを表示する(図16の1602)。すなわち、ステップS1502は、特定された申請者と特定された所有者とが一致しなかった場合、エラーとして表示する処理の一例を示すステップである。
In step S1502, the
ステップS1503において、情報処理装置101は、ユーザ(申請者の対応をする担当者)の操作を受け付け、判定を行う。キャンセルボタン1603の場合は図14のENDに進み、この処理を終了する。対面者撮影ボタン1604の場合はステップS1504に進む。身分証明書撮影ボタン1605の場合は図14のステップS403に進み、身分証明書を撮影し(ステップS403)、撮影した身分証明書をサーバ102に送信する(ステップS404)。
In step S1503, the
ステップS1504において、情報処理装置101は、カメラ215を用いて、担当者が対面する申請者(以下、対面者)を撮影する(図17)。すなわち、ステップS1504は、文書の申請者の顔を撮像する処理の一例を示すステップである。図17のように、対面者撮影ウィンドウ1703に、カメラ215を用いて撮影した対面者画像1704、キャンセルボタン1705、OKボタン1706を表示し、OKボタン1706の押下を受け付けることにより、対面者を撮影する。
In step S1504, the
ステップS1505において、情報処理装置101は、図14のステップS410にて切り取った身分証明書の顔画像1702と、対面者画像1704とを比較し、同一人物か否かを判定し、同一人物であると判定した場合は図15の処理を終了し、図14のステップS417に進み、同一人物でないと判定した場合はステップS1506に進む。すなわち、ステップS1505は、身分証明書から特定された顔画像と、撮像された顔の画像とが同一人物の画像か否かを判定する処理の一例を示すステップである。
In step S1505, the
なお、同一人物か否かの判定は、既知の画像比較の技術であるため、説明は省略する。また、本実施形態においては、画像比較により同一人物か否かを判定するとしたが、これに限定するものではなく、それぞれの画像から特徴部を抽出し、抽出した特徴部の比較により同一人物か否かを判定するとしてもよい。また、顔画像以外にも、指紋・掌紋・声紋などの生体認証により同一人物か否かを判定するとしてもよい。 Note that the determination of whether or not they are the same person is a known image comparison technique, and thus a description thereof will be omitted. Further, in the present embodiment, the image comparison is used to determine whether or not the same person is determined. However, the present invention is not limited to this, and a feature part is extracted from each image and the extracted person is compared to determine whether the same person is the same person. It may be determined whether or not. In addition to the face image, biometric authentication such as a fingerprint, palm print, and voice print may be used to determine whether or not the same person is present.
ステップS1506において、情報処理装置101は、「同一人物判定エラー」を示すメッセージを表示する(図18の1801)。図18のように、カメラ215を用いて撮影した対面者画像1802、キャンセルボタン1803、続行ボタン1804を表示する。すなわち、ステップS1506は、同一人物の画像であると判定された場合、取込まれた文書画像データを表示するよう制御し、同一人物の画像ではないと判定された場合、取込まれた文書画像データを表示しないよう制御する処理の一例を示すステップである。
In step S1506, the
これにより、申請書を申請した本人でないと判定された場合は、エラーメッセージが表示されるため、申請書の内容を申請者以外に閲覧させてしまうリスクを防ぐことができる。つまり、第1の実施形態においては、対面者が申請書を申請した本人かどうかの本人確認は、担当者にすべて委ねられていたが、第2の実施形態においては、情報処理システム100も本人確認を行うため、上記リスクをより防ぐことができる。特に、平成28年1月から行政手続で必要となったマイナンバーは本人以外に見せてはならず、申請書にマイナンバーを含むようなシステムにおいては、上記リスクを極力減らすことが求められるため有効である。
As a result, when it is determined that the person who applied for the application form is not the person who applied, an error message is displayed, so that it is possible to prevent the risk that the contents of the application form are viewed by anyone other than the applicant. In other words, in the first embodiment, the person in charge is solely responsible for confirming the identity of the person who has applied for the application form, but in the second embodiment, the
ステップS1507において、情報処理装置101は、ユーザ(申請者の対応をする担当者)の操作を受け付け、判定を行う。キャンセルボタン1803の場合は図14のENDに進み、この処理を終了する。続行ボタン1804の場合はステップS1508に進む。
In step S1507, the
ステップS1508において、情報処理装置101は、ステップS1504にて撮影した対面者画像1802を申込書ボタン1701(図17)に係る申込書と対応づけて、外部メモリ212に記憶し、図14のステップS417に進む。すなわち、ステップS1508は、同一人物の画像ではないと判定された場合、取込まれた文書画像データと特定された顔画像とを対応付けて記憶する処理の一例を示すステップである。
In step S1508, the
なお、本実施形態においては、対面者画像1802を情報処理装置101の外部メモリ212に記憶するとしたが、これに限定するものではなく、対面者画像1802をサーバ102に送信し、サーバ102の外部メモリ212に記憶するとしてもよい。
Note that in the present embodiment, the face-to-
これにより、情報処理システム100によって申請書を申請した本人でないと判定された場合であっても、担当者が同一人物と判断した場合は、申請書の内容を対面者に閲覧させることができるが、対面者の顔画像を申請書と対応付けて記憶しておくことにより、申請書の内容を閲覧させた人物の画像を記憶しておくことができる。
As a result, even if the
以上のように、前述した実施形態の機能を実現するプログラムを記録した記録媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ(またはCPUやMPU)が記録媒体に格納されたプログラムを読み出し、実行することによっても本発明の目的が達成されることは言うまでもない。 As described above, the recording medium recording the program that realizes the functions of the above-described embodiments is supplied to the system or apparatus, and the computer (or CPU or MPU) of the system or apparatus stores the program stored in the recording medium. It goes without saying that the object of the present invention can also be achieved by reading and executing.
この場合、記録媒体から読み出されたプログラム自体が本発明の新規な機能を実現することになり、そのプログラムを記録した記録媒体は本発明を構成することになる。 In this case, the program itself read from the recording medium realizes the novel function of the present invention, and the recording medium recording the program constitutes the present invention.
プログラムを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、DVD−ROM、磁気テープ、不揮発性のメモリカード、ROM、EEPROM、シリコンディスク等を用いることが出来る。 As a recording medium for supplying the program, for example, a flexible disk, hard disk, optical disk, magneto-optical disk, CD-ROM, CD-R, DVD-ROM, magnetic tape, non-volatile memory card, ROM, EEPROM, silicon. A disk or the like can be used.
また、コンピュータが読み出したプログラムを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムの指示に基づき、コンピュータ上で稼働しているOS(オペレーティングシステム)等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Further, not only the functions of the above-described embodiments are realized by executing the program read by the computer, but also the OS (operating system) or the like running on the computer is actually executed based on the instructions of the program. It goes without saying that a case where a part or all of the processing is performed and the functions of the above-described embodiments are realized by the processing is also included.
さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPU等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。 Furthermore, after the program read from the recording medium is written in the memory provided in the function expansion board inserted in the computer or the function expansion unit connected to the computer, the function expansion board is instructed based on the instruction of the program code. Needless to say, this also includes the case where the CPU or the like included in the function expansion unit performs some or all of the actual processing and the functions of the above-described embodiments are realized by the processing.
また、本発明は、複数の機器から構成されるシステムに適用しても、ひとつの機器から成る装置に適用しても良い。また、本発明は、システムあるいは装置にプログラムを供給することによって達成される場合にも適応できることは言うまでもない。この場合、本発明を達成するためのプログラムを格納した記録媒体を該システムあるいは装置に読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。 Further, the present invention may be applied to a system including a plurality of devices or an apparatus including a single device. Further, it goes without saying that the present invention can be applied to the case where it is achieved by supplying a program to a system or an apparatus. In this case, by reading the recording medium storing the program for achieving the present invention into the system or device, the system or device can enjoy the effects of the present invention.
上記プログラムの形態は、オブジェクトコード、インタプリタにより実行されるプログラムコード、OS(オペレーティングシステム)に供給されるスクリプトデータ等の形態から成ってもよい。 The form of the program may be an object code, a program code executed by an interpreter, script data supplied to an OS (operating system), or the like.
さらに、本発明を達成するためのプログラムをネットワーク上のサーバ、データベース等から通信プログラムによりダウンロードして読み出すことによって、そのシステムあるいは装置が、本発明の効果を享受することが可能となる。なお、上述した各実施形態およびその変形例を組み合わせた構成も全て本発明に含まれるものである。 Furthermore, by downloading and reading a program for achieving the present invention from a server, a database or the like on a network using a communication program, the system or apparatus can enjoy the effects of the present invention. It should be noted that the present invention also includes all configurations that combine the above-described embodiments and modifications thereof.
100 情報処理システム
101 情報処理装置
102 サーバ
103 ネットワーク
100
Claims (12)
前記情報処理装置を用いて取込まれた文書画像データと身分証明書画像データとを対応付けて記憶する記憶手段と、
前記記憶手段に記憶された身分証明書画像データから顔画像を特定する顔画像特定手段と、
前記文書画像データを確認させる場合に、前記記憶手段に記憶された文書画像データと、前記顔画像特定手段により当該文書画像データと対応付く身分証明書画像データから特定された顔画像とをともに情報処理装置の画面に表示制御する表示制御手段と
を備えることを特徴とする情報処理システム。 An information processing system for managing the image data of the captured document using an information processing apparatus, and image data identification that includes the applicant's face image of the document,
Storage means for storing collected incorporated document image data and the identification image data and the association by using a pre-Symbol information processing apparatus,
Face image specifying means for specifying a face image from the identification card image data stored in the storage means;
When to verify the document image data, the document image data stored in the storage unit, the a person the document image data and the face image identified from rather with corresponding identification image data by the face image identification unit both the information processing system characterized in that it comprises a Viewing control means for display control on the screen of the information processing apparatus.
前記記憶手段に記憶された文書画像データまたは当該文書画像データを表示するためのリンクと、前記記憶手段に当該文書画像データと対応付けて記憶された身分証明書画像データを表示するためのリンクとを対応付けた画面を表示すること
を特徴とする請求項1に記載の情報処理システム。 The Display control unit,
A link for displaying the document image data stored in the storage means or the document image data, and a link for displaying the identification image data stored in the storage means in association with the document image data The information processing system according to claim 1, wherein a screen associated with is displayed.
前記文書画像データもしくは前記身分証明書画像データを表示したこと、または文書画像データもしくは身分証明書画像データをユーザが確認したこと示す入力を受け付けたことを、他の画像と識別して表示すること
を特徴とする請求項1または2に記載の情報処理システム。 The Display control unit,
Displaying that the document image data or the ID image data has been displayed, or that an input indicating that the user has confirmed the document image data or ID image data has been accepted is displayed separately from other images. The information processing system according to claim 1, wherein:
前記特徴情報記憶手段により記憶された特徴情報を用いて、前記身分証明書の種類を特定する身分証明書特定手段と
を更に備え、
前記顔画像特定手段は、
前記身分証明書特定手段により特定された身分証明書の種類に従って顔画像を特定すること
を特徴とする請求項1乃至3のいずれか1項に記載の情報処理システム。 Identification information for identifying the type of the identification card, and characteristic information storage means for storing the characteristic information of the identification card in association with each other,
Further comprising: an identification certificate specifying unit for specifying the type of the identification certificate using the characteristic information stored by the characteristic information storage unit,
The face image identification means is
The information processing system according to any one of claims 1 to 3, wherein the face image is specified according to the type of the identification card specified by the identification card specifying unit.
前記記憶手段に記憶された身分証明書画像データから、前記身分証明書の所有者を特定する所有者特定手段と
を更に備え、
前記記憶手段は、
前記申請者特定手段により特定された申請者と、前記所有者特定手段により特定された所有者が一致した場合、当該文書画像と当該身分証明書画像または前記顔画像特定手段により特定された顔画像とを対応付けて記憶すること
を特徴とする請求項1乃至4のいずれか1項に記載の情報処理システム。 An applicant identifying unit that identifies an applicant of the document from the document image data stored in the storage unit;
From the identification certificate image data stored in the storage means, further comprising an owner identification means for identifying the owner of the identification card,
The storage means is
When the applicant specified by the applicant specifying unit and the owner specified by the owner specifying unit match, the document image and the identification card image or the face image specified by the face image specifying unit The information processing system according to any one of claims 1 to 4, further comprising:
前記申請者特定手段により特定された申請者と、前記所有者特定手段により特定された所有者とが一致しなかった場合、エラーとして表示すること
を特徴とする請求項5に記載の情報処理システム。 The Display control unit,
The information processing system according to claim 5, wherein if the applicant specified by the applicant specifying unit does not match the owner specified by the owner specifying unit, an error is displayed. ..
前記顔画像特定手段により特定された顔画像と、前記撮像手段により撮像された顔の画像とが同一人物の画像か否かを判定する同一人物判定手段と、
前記同一人物判定手段により同一人物の画像であると判定された場合、前記情報処理装置を用いて取込まれた文書画像データを表示するよう制御し、前記同一人物判定手段により同一人物の画像ではないと判定された場合、前記情報処理装置を用いて取込まれた文書画像データを表示しないよう制御する表示制御手段と
を更に備えることを特徴とする請求項1乃至6のいずれか1項に記載の情報処理システム。 Imaging means for imaging the face of the applicant of the document,
The same person determination unit that determines whether the face image identified by the face image identification unit and the face image captured by the image capturing unit are images of the same person;
When it is determined by the same person determination unit that the image is the same person, the information processing apparatus is controlled to display the captured document image data, and the same person determination unit determines that the same person image is displayed. 7. If it is determined that there is no document image, the display control means for controlling not to display the document image data taken in by using the information processing apparatus is further provided. Information processing system described.
前記同一人物判定手段により同一人物の画像ではないと判定された場合、前記情報処理装置を用いて取込まれた文書画像データと前記顔画像特定手段により特定された顔画像とを対応付けて記憶すること
を特徴とする請求項7に記載の情報処理システム。 The storage means is
When it is determined by the same person determination unit that the images are not images of the same person, the document image data captured by using the information processing apparatus and the face image identified by the face image identification unit are stored in association with each other. The information processing system according to claim 7, wherein:
前記文書定義情報記憶手段に記憶されている認識領域と認識条件に従って、前記情報処理装置を用いて取込まれた文書画像の認識領域ごとの不備をチェックする不備チェック手段と、
前記文書定義情報記憶手段に記憶されている認識領域に従って、前記不備チェック手段によりチェックされた前記文書の不備をユーザが識別可能に表示する不備領域表示手段と
を更に備えることを特徴とする請求項1乃至8のいずれか1項に記載の情報処理システム。 Document definition information storage means for storing document definition information including a recognition area of the entered content of the document and a recognition condition;
Insufficiency checking means for checking insufficiency for each recognition area of the document image captured by using the information processing device according to the recognition area and recognition conditions stored in the document definition information storage means,
A deficiency area display means for displaying a deficiency of the document checked by the deficiency checking means in a identifiable manner by a user in accordance with a recognition area stored in the document definition information storage means. The information processing system according to any one of 1 to 8.
を更に備えることを特徴とする請求項9に記載の情報処理システム。 10. The information processing system according to claim 9, further comprising defect number display means for totaling and displaying the number of defects checked by the defect check means for each document form.
前記情報処理システムが、
前記情報処理装置を用いて取込まれた文書画像データと身分証明書画像データとを対応付けて登録する登録ステップと、
前記登録ステップに登録された身分証明書画像データから顔画像を特定する顔画像特定ステップと、
前記文書画像データを確認させる場合に、前記登録ステップに登録された文書画像データと、前記顔画像特定ステップにより当該文書画像データと対応付く身分証明書画像データから特定された顔画像とをともに情報処理装置の画面に表示制御する表示制御ステップと
を実行することを特徴とする処理方法。 And the image data of the captured document using an information processing apparatus, a processing method in an information processing system for managing the image data identification that includes the applicant's face image of the document,
The information processing system,
A registration step of registering in association with the previous SL document image data and the identification image data captured using an information processing apparatus,
A face image identification step of identifying a face image from the identification card image data registered in the registration step;
When to verify the document image data, the document image data registered in the registration step, and a face image specified from this the document image data and rather with corresponding identification image data by the face image specifying step processing method characterized in that together run the Viewing control step of controlling display on the screen of the information processing apparatus.
前記情報処理システムを、
前記情報処理装置を用いて取込まれた文書画像データと身分証明書画像データとを対応付けて記憶する記憶手段と、
前記記憶手段に記憶された身分証明書画像データから顔画像を特定する顔画像特定手段と、
前記文書画像データを確認させる場合に、前記記憶手段に記憶された文書画像データと、前記顔画像特定手段により当該文書画像データと対応付く身分証明書画像データから特定された顔画像とをともに情報処理装置の画面に表示制御する表示制御手段
として機能させることを特徴とするプログラム。 And the image data of the captured document using an information processing apparatus, an executable program in an information processing system which manages the image data identification that includes the applicant's face image of the document,
The information processing system,
Storage means for storing collected incorporated document image data and the identification image data and the association by using a pre-Symbol information processing apparatus,
Face image specifying means for specifying a face image from the identification card image data stored in the storage means;
When to verify the document image data, the document image data stored in the storage unit, the a person the document image data and the face image identified from rather with corresponding identification image data by the face image identification unit a program characterized by causing both function as Viewing control means for display control on the screen of the information processing apparatus.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015033946 | 2015-02-24 | ||
JP2015033946 | 2015-02-24 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016157439A JP2016157439A (en) | 2016-09-01 |
JP6712045B2 true JP6712045B2 (en) | 2020-06-17 |
Family
ID=56826300
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016031557A Active JP6712045B2 (en) | 2015-02-24 | 2016-02-23 | Information processing system, its processing method, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6712045B2 (en) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6629453B2 (en) | 2016-08-10 | 2020-01-15 | 日本碍子株式会社 | Grinding process |
JP2018084857A (en) * | 2016-11-21 | 2018-05-31 | 共同印刷株式会社 | System, method and program confirming confirmation items of document |
JP2018101327A (en) * | 2016-12-21 | 2018-06-28 | 大日本印刷株式会社 | Data registering apparatus and data registering method |
JP6922544B2 (en) * | 2017-08-16 | 2021-08-18 | 富士フイルムビジネスイノベーション株式会社 | Information processing equipment, information processing system and information processing program |
JP7040244B2 (en) * | 2018-04-11 | 2022-03-23 | 富士フイルムビジネスイノベーション株式会社 | Information processing equipment, information processing systems, and information processing programs |
JP7168194B2 (en) * | 2018-05-23 | 2022-11-09 | Necソリューションイノベータ株式会社 | Counterfeit determination method, program, recording medium, and forgery determination device |
JP2020021222A (en) | 2018-07-31 | 2020-02-06 | 株式会社メルカリ | Program, information processing method, information processing device |
US20220027420A1 (en) | 2018-12-31 | 2022-01-27 | Sony Group Corporation | Information processing device, information processing method, and information processing program |
JP6850323B2 (en) * | 2019-07-17 | 2021-03-31 | キヤノンマーケティングジャパン株式会社 | Information processing device, its control method and program |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003296800A (en) * | 2002-04-05 | 2003-10-17 | Hitachi Building Systems Co Ltd | Device for authenticating identical person |
JP2004078701A (en) * | 2002-08-20 | 2004-03-11 | Nikko Business Systems Co Ltd | Documents acceptance management system |
JP2005208863A (en) * | 2004-01-21 | 2005-08-04 | Oki Electric Ind Co Ltd | Medium issuing system |
JP2005258554A (en) * | 2004-03-09 | 2005-09-22 | Oki Electric Ind Co Ltd | Customer management system and card used therefor, and customer authentication method |
JP2008158890A (en) * | 2006-12-25 | 2008-07-10 | Daiwa Securities Group Inc | System, method and program for workflow management, duplicate document file, and terminal device |
JP2008310481A (en) * | 2007-06-13 | 2008-12-25 | Softbank Mobile Corp | Sales system, sales shop, and sales method |
JP2009048416A (en) * | 2007-08-20 | 2009-03-05 | Promise Co Ltd | Contract document preparation method, automatic contract machine, contract management device and contract document |
JP2010079393A (en) * | 2008-09-24 | 2010-04-08 | Japan Tobacco Inc | Data processor, computer program thereof, and data processing method |
JP2011164707A (en) * | 2010-02-04 | 2011-08-25 | Nipponkoa Insurance Co Ltd | Contract support server, and contract support system and method of controlling the same |
JP6196443B2 (en) * | 2012-12-27 | 2017-09-13 | グローリー株式会社 | Valuable medium processing apparatus and valuable medium processing method |
CA2914629C (en) * | 2013-06-05 | 2022-10-04 | Morphotrust Usa Inc. | System and method for credential authentication |
-
2016
- 2016-02-23 JP JP2016031557A patent/JP6712045B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2016157439A (en) | 2016-09-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6712045B2 (en) | Information processing system, its processing method, and program | |
US9641715B2 (en) | Information processing device, method, and medium | |
TWI528292B (en) | Information code, information code generation method, information code reading device, and information code utilization system | |
JP6826293B2 (en) | Information information system and its processing method and program | |
KR102330637B1 (en) | System, server, method and recording medium for providing augmented reality photocard | |
KR20140126400A (en) | Station for acquiring biometric and biographic data | |
US10163013B2 (en) | Photographic image extraction apparatus, photographic image extraction method, and program | |
JP2010204733A (en) | Device, method, program and system for managing found article information | |
KR101849633B1 (en) | Id photo forgery preventing method and system | |
JP2016091169A (en) | Approval device, approval system, and approval program | |
JP3982132B2 (en) | Information output control method and information display device | |
JP2017102915A (en) | Information processing device, processing method therefor and program | |
JP6547654B2 (en) | Document imaging apparatus, document imaging method, program for document imaging apparatus, and management system | |
JP6850323B2 (en) | Information processing device, its control method and program | |
JP6507555B2 (en) | Application acceptance method and system for media with face image | |
JP2017097859A (en) | Information processing device, and processing method and program thereof | |
JP6708935B2 (en) | Information processing apparatus, processing method thereof, and program | |
JP2016126763A (en) | Information processing system, and information processing method and program thereof | |
JP2007079967A (en) | Registered imprint collation system | |
JP6913309B2 (en) | Computer programs, information processing methods, and information processing equipment | |
JP6705984B2 (en) | Information processing apparatus, processing method thereof, and program | |
JP6930795B2 (en) | Public Competition Voting System, Public Competition Voting Method, and Public Competition Voting Program | |
US11462014B2 (en) | Information processing apparatus and non-transitory computer readable medium | |
JP4675164B2 (en) | ID card reissue system | |
JP2007324848A (en) | Verification program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20161101 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20161101 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20180703 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20181031 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181221 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190111 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191015 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191119 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200117 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200428 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200511 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6712045 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |