JP2005018178A - 顔画像を利用した出入国審査支援システム - Google Patents
顔画像を利用した出入国審査支援システム Download PDFInfo
- Publication number
- JP2005018178A JP2005018178A JP2003178869A JP2003178869A JP2005018178A JP 2005018178 A JP2005018178 A JP 2005018178A JP 2003178869 A JP2003178869 A JP 2003178869A JP 2003178869 A JP2003178869 A JP 2003178869A JP 2005018178 A JP2005018178 A JP 2005018178A
- Authority
- JP
- Japan
- Prior art keywords
- information
- passport
- face image
- immigration
- storage device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
【課題】旅券の情報とブラックリストを比較する際、文字情報に加えて顔画像情報の比較を行って判定精度を上げ、また外国人出入国者の出入国時の顔画像と旅券情報との比較を行って同一人性の確認を高精度で実現する。
【解決手段】外国人の出入国審査を支援するシステムにおいて、旅券に記載された記載情報を読み取る読み取り部、カメラを用いて外国人出入国者の顔画像を取得する顔画像取得部、旅券情報、査証、在留資格認定証明書、外国人登録証明書の発給情報、ブラックリストを記録する記憶装置、ブラックリストを登録する登録部、読み取った書類の記載情報と記憶装置に記録されている情報の比較及び顔画像の特徴点を抽出し、画像の特徴点の比較を行う比較判定装置、読み取った情報及び記憶装置に記録された情報及びそれらを比較判定した結果を表示する表示部、及びそれらを制御する装置を備える。
【選択図】 図１
【解決手段】外国人の出入国審査を支援するシステムにおいて、旅券に記載された記載情報を読み取る読み取り部、カメラを用いて外国人出入国者の顔画像を取得する顔画像取得部、旅券情報、査証、在留資格認定証明書、外国人登録証明書の発給情報、ブラックリストを記録する記憶装置、ブラックリストを登録する登録部、読み取った書類の記載情報と記憶装置に記録されている情報の比較及び顔画像の特徴点を抽出し、画像の特徴点の比較を行う比較判定装置、読み取った情報及び記憶装置に記録された情報及びそれらを比較判定した結果を表示する表示部、及びそれらを制御する装置を備える。
【選択図】 図１
Description
【０００１】
【発明の属する技術分野】
本発明は、外国人の出入国を管理するシステムにおいて、ブラックリスト情報と出入国時に取得した顔画像及び旅券の情報を利用して出入国審査を支援するシステムに関する。
【０００２】
【従来の技術】
従来の出入国審査では、外国人入国者が持つ旅券、査証、在留資格認定証明書（以下、認定証）を審査官に渡し、審査官はそれぞれに記載された情報及び名義人と入国者本人の同一性を確認する。出国時においても、外国人出国者が持つ旅券、外国人登録証明書（以下、外登証）を審査官に渡し、審査官はそれぞれに記載された情報及び名義人と出国者本人の同一性を確認する。このうち旅券については、ＩＣＡＯの基準に準拠した機械読み取り旅券（ＭＲＰ：Ｍａｃｈｉｎｅ Ｒｅａｄａｂｌｅ Ｐａｓｓｐｏｒｔ）の場合、旅券に記載されている情報のうちＩ／Ｏ機器で読み込める情報（以下、身分情報）を文字情報として取得する事が可能である。出入国審査では出入国者の本人確認を行うと共に、要注意者として各国からリストアップされている人物のリスト（ブラックリスト）と照合して要注意人物の出入国を発見することが求められている。従来の出入国審査支援システムでは、旅券から文字情報として取得した身分情報をブラックリストの情報と比較することが可能である。
【０００３】
【特許文献】
なし
【０００４】
【発明が解決しようとする課題】
上記従来の方法により旅券の身分情報とブラックリスト情報の比較を機械的に行うことが可能となるが、比較事項が文字情報のみのため、比較結果が合致した場合においても旅券の所持者がブラックリストと同一人物であるか判断する根拠としては不十分であった。また、ブラックリストとの比較だけでなく、出入国者本人と旅券の同一人性も確認する必要があり、この場合も出入国者本人と旅券の顔画像を見比べる必要があるので、文字情報だけの比較を行うシステムでは審査の支援が不十分であった。
【０００５】
本発明の目的は、旅券の情報とブラックリストを比較する際に、文字情報に加えて顔画像情報の比較を行うことにより判定精度を上げ、また、外国人出入国者の出入国時の顔画像と旅券情報との比較を行うことにより同一人性の確認を高精度で実現するシステムを提供することである。
【０００６】
【課題を解決するための手段】
上記目的を達成する為に、本発明の出入国審査支援システムは旅券情報、査証情報、認定証情報、外登証情報、ブラックリストのデータベースを一元管理する記憶装置を備え、これらの情報に対応する書類に添付された顔写真等の画像情報を取得する機能を備える。入国時に読み取った旅券の顔写真画像及び身分情報を上記記憶装置に送信し、旅券情報として格納する。入国前の査証の発給時に発給管轄部署により査証の査証番号、記載情報及び添付されている顔写真からなる情報を取得し、上記記憶装置に送信し、査証発給情報として格納する。同様に認定証についても、入国前の発給時に発給管轄部署により認定証の許可番号、記載情報及び添付されている顔写真からなる情報を取得し、上記記憶装置に送信し、認定証発給情報として格納する。同様に外登証についても、入国後の発給時に発給管轄部署により外登証の外登番号、記載情報及び添付されている顔写真からなる情報を取得し、上記記憶装置に送信し、外登証発給情報として格納する。ブラックリストについては、上記記憶装置に対象者の顔画像情報、身分情報を登録する。入国時にカメラで取得した顔画像を上記記憶装置に送信し、旅券情報と関連付けて格納する。そして、空港等の出入国を審査する部署に、上記データベースを管理する記憶装置とデータの送受信を行う制御装置とを設置する。この審査部署に備えた制御装置は、外国人出入国者が所持する旅券、査証、認定証、外登証の情報を読み取る機能と、記憶装置から対応する書類の情報を取得する機能と、両者の記載情報を照合する機能とを備え、さらに外国人出入国者の出入国時の顔画像を取得する機能と、外国人出入国者が所持する旅券から取得した身分情報とブラックリスト情報とを比較する機能と、予め記憶装置に格納した旅券の顔写真画像及びブラックリストの顔写真画像及び出入国時に取得する顔画像の特徴点をそれぞれ抽出して比較し、適合率を算出する機能と、文字情報及び画像情報の比較結果を表示する機能を備える。
【０００７】
上記出入国審査支援システムを用いた入国審査支援は以下のように実施する。まず審査部署において、制御装置に備えた上記出入国時の顔画像を取得する機能であるカメラにより外国人入国者の顔画像を取得し、次に外国人入国者が持つ旅券の記載情報を上記顔写真等の画像情報を取得する機能を備えた読み取り部で読み取り、両者の顔画像の特徴点を比較する。ここで画像の特徴点の比較機能は、特開２００２−１８３７３４号公報に示されるような手法を用いて実現する。この手法により適合率を求め、両者の顔画像及び適合率を表示機能に表示する。次に出入国審査支援システムは、旅券から取得した顔写真画像とブラックリストの顔画像、旅券から取得した身分情報とブラックリストの身分情報とを比較する。顔画像については特徴点を比較し、本人確認時と同様に適合率が基準以上のものについて身分情報とともに一覧表示する。表示時には適合率を赤のような目立つ色で表示する等、識別しやすい表示としても良い。身分情報については従来の文字情報の比較方法を用いて旅券の身分情報とブラックリストの身分情報を比較する。この結果を表示する時にも同様の識別しやすい表示を用いても良い。また、比較するすべての項目が完全に一致しているものについては、上記識別表示と異なる、例えば表示項目の背景を赤くするような表示を用いても良い。
【０００８】
次に出入国審査支援システムは、外国人入国者が持つ査証の査証番号、記載情報及び添付される顔写真、認定証の許可番号、記載情報及び添付される顔写真を上記読み取り部で読み取り、事前に記憶装置に査証発給情報として格納された情報と照合を行い、内容が異なる部分を同一の項目と識別できるよう、例えば別の色等で表示する。最後に、読み取った旅券、査証及び認定証の顔写真と事前に記録されている顔写真と入国時に取得した顔画像を同一画面に表示し、審査者による視覚確認を行う。
【０００９】
同様に、出国審査の際には、出入国審査支援システムはまずカメラにより外国人出国者の顔画像を取得し、次に旅券の顔写真画像、身分情報を読み取り部で読み取り、両者の顔画像を比較する。そして、両者の顔画像及び適合率を表示する。次に旅券から取得した顔写真画像、身分事項とブラックリストの顔画像情報、身分情報を比較する。比較及び表示方法は入国審査時と同様である。
【００１０】
次に外国人出国者が持つ外登証の番号、記載情報及び添付される顔写真を読み取り部で読み取り、事前に記憶装置に外登証発給情報として格納された情報との照合を行い、内容が異なる部分を上記と同様に表示する。最後に、読み取った旅券、外登証の顔写真と事前に記録されている顔画像と入国時及び出国時に取得した顔画像を同一画面に表示し、審査者による視覚確認を行う。
【００１１】
以上のように、本発明の出入国審査支援システムによれば、出入国審査において、これまで身分情報のみで行っていた旅券とブラックリストの比較を顔画像を利用することでより正確に比較することが可能となり、不法出入国者の摘発効率が向上する。また、出入国者の出入国時の顔画像と旅券の顔写真画像を機械的に比較することにより、同一人性の確認が容易になる。さらにこれらにより審査官の目視による比較作業を減らすことが可能になる。
【００１２】
【発明の実施の形態】
以下、本発明の形態について図面により詳細に説明する。
【００１３】
図１は本発明を適用した出入国審査システムのシステム構成をブロック図で示したものである。図１において、１０は制御装置、２０は出入国者の顔画像を取得する装置、３０は旅券、査証、認定証及び外登証に記載された情報を読み取る読み取り部、２００は顔画像取得部２０で取得した顔画像と読み取り部３０で読み取った旅券の顔写真画像の特徴点を比較した結果、読み取り部３０で読み取った旅券の顔写真画像とブラックリスト１００の顔画像の特徴点を比較した結果及び旅券、査証、認定証、外登証に記載された情報及びその名義人と出入国者本人の同一人性を確認した結果を表示する表示部である。１０の制御装置はパーソナルコンピュータ、ワークステーション等、若しくは専用の制御装置でも構わない。制御装置１０は顔画像比較機能１１、１４、身分情報比較機能１２、記載情報比較機能１３を有している。外部記憶装置５０は、旅券情報６０、査証発給情報７０、外登証発給情報８０、認定証発給情報９０、ブラックリスト１００を持ち、ネットワークを介して制御装置１０から参照可能となっている。ここで、顔画像比較機能１１は読み取り部３０で読み取った旅券の顔写真画像とブラックリスト１００の顔画像の特徴点を抽出し比較する機能である。身分情報比較機能１２は読み取り部３０で読み取った旅券の身分情報とブラックリスト１００の身分情報を比較する機能である。記載情報比較機能１３は入国審査の際は読み取り部３０で読み取った査証、認定証の記載情報と外部記憶装置５０に記録されている査証発給情報７０、認定証発給情報９０との突合せを行う機能であり、出国審査の際は読み取り部３０で読み取った旅券、外登証の記載情報と外部記憶装置５０に記録されている旅券情報６０、外登証発給情報８０との突合せを行う機能である。顔画像比較機能１４は顔画像取得部２０で取得した出入国者の顔画像と読み取り部３０で読み取った旅券の顔写真画像の特徴点を抽出し比較する機能である。
【００１４】
旅券情報６０は図２に示すようなデータ項目を備える。旅券情報６０は入国時に読み取った旅券番号６１、氏名、国籍等の記載情報６２、添付されている顔写真画像６３、入国時の顔画像６４で１つの記録が構成される。査証発給情報７０は図３に示すようなデータ項目を備える。査証発給情報７０は査証の発給時に記録した査証番号７１、氏名、国籍等の記載情報７２、添付されている顔画像画像７３で１つの記録が構成される。外登証発給情報８０は図４に示すようなデータ項目を備える。外登証発給情報８０は外登証の発給時に記録した外登番号８１、氏名、国籍等の記載情報８２、添付されている顔画像画像８３で１つの記録が構成される。認定証発給情報９０は図５に示すようなデータ項目を備える。認定証発給情報９０は認定証の発給時に記録した許可番号９１、氏名、国籍等の記載情報９２、添付されている顔写真画像９３で１つの記録が構成される。ブラックリスト１００は図６に示すようなデータ項目を備える。ブラックリスト１００は出入国を許可すべきでない外国人の氏名、国籍等の身分事項１０１、顔画像１０２で１つの記録が構成される。
【００１５】
次に、本システムによる審査支援処理を入国時、出国時の２処理に分けて図１１、１２のフローチャートに従い説明する。通常、入国審査場所と出国審査場所は分けられており、それぞれに設置される制御装置１０においては、それぞれ入国・出国に該当する処理のみを行うが、全ての機能を持たせて、メニューにより機能の選択を行っても良い。まず入国時の処理を図１１により説明する。最初にカメラの顔画像取得部２０により入国者の顔画像を取得する（ステップ３０１）。入国者が審査官のいる審査ブースで旅券、査証及び認定証を提示すると、提示された旅券を読み取り部３０によって読み取り、記載情報、顔写真画像及びステップ３０１で取得した顔画像を外部記憶装置５０の旅券情報６０に記録する（ステップ３０２）。制御装置１０の顔画像比較機能１１により顔画像取得部２０により取得した顔画像と読み取り部３０により取得した旅券の顔写真画像の特徴点を抽出し、適合率を算出する。両画像及び適合率を表示部２００に表示する（ステップ３０３）。適合率が基準以下であった場合には、適合率を赤等目立つ色で表示する（ステップ３０４）。ここで、読み取り部３０により取得した旅券の顔写真画像と外部記憶装置５０に記録されているブラックリスト１００の顔画像を制御装置１０の顔画像比較機能１４によって顔画像の特徴点を抽出し、適合率を算出する。また、旅券の記載情報とブラックリストの記載情報を比較し（ステップ３０５）、顔画像の適合率が基準以上であるブラックリスト、もしくは記載情報に類似点があるブラックリストを表示部２００に表示し、その際、一致した記載情報及び基準以上の適合率の表示を赤等目立つ色で表示する（ステップ３０６）。次に提示された認定証を読み取り部３０によって読み取り（ステップ３０７）、査証番号から事前に記録されている査証発給情報７０を参照し、記載情報の突合せを行う（ステップ３０８）。ここで、項目の内容が異なる場合には当該項目の表示を等しい内容の項目と異なる色とする（ステップ３０９）。次に提示された認定証を読み取り部３０によって読み取り（ステップ３１０）、許可番号から認定証発給情報９０を参照し、記載情報の突合せを行う（ステップ３１１）。項目の内容が異なる場合は当該項目の表示を等しい内容の項目とは異なる色とする（ステップ３１２）。最後に読み取った情報、発給情報、突合せ結果及び入国時の顔画像を表示部２００に表示する（ステップ３１３）。
【００１６】
次に出国時の処理を図１２により説明する。カメラの顔画像取得部２０により出国者の顔画像を取得する（ステップ４０１）。出国者が審査官のいる審査ブースで旅券、外登証を提示すると、提示された旅券に記載されている記載情報を読み取り部３０によって読み取る（ステップ４０２）。制御装置１０の顔画像比較機能１４により顔画像取得部２０により取得した顔画像と読み取り部３０により取得した旅券の顔写真画像の特徴点を抽出し、適合率を算出する。両画像及び適合率を表示部２００に表示する（ステップ４０３）。適合率が基準以下であった場合には、適合率を赤等目立つ色で表示する（ステップ４０４）。ここで、読み取り部３０により取得した旅券の顔写真画像と外部記憶装置５０に記録されているブラックリスト１００の顔画像を制御装置１０の顔画像比較機能１４によって顔画像の特徴点を抽出し、適合率を算出する。また、旅券の身分情報とブラックリストの身分情報を比較し（ステップ４０５）、適合率が基準以上である顔画像データ、もしくは身分情報に類似点があるブラックリストを表示部２００に表示し、その際、一致した記載情報及び基準以上の適合率の表示を赤等目立つ色で表示する（ステップ４０６）。読み取り部３０によって読み取られた旅券情報とその旅券番号から旅券情報６０を参照し、記載情報の突合せを行う（ステップ４０７）。ここで、項目の内容が異なる場合は当該項目の表示を等しい内容の項目とは異なる色とする（ステップ４０８）。次に提示された外登証を読み取り部３０によって読み取り（ステップ４０９）、外登番号から外登証発給情報８０を参照し、記載情報の突合せを行う（ステップ４１０）。ここで、項目の内容が異なる場合は当該項目の表示を等しい内容の項目とは異なる色とする（ステップ４１１）。最後に読み取った情報、発給情報、突合せ結果及び入国時、出国時の顔画像を表示部３０に表示する（ステップ４１２）。
【００１７】
ここで図７から図１０により表示部２００の表示例を示す。図７はカメラによる顔画像と旅券の顔写真画像の比較結果を表示する例である。顔画像取得部２０によって入国者の顔画像を取得した後、読み取り部３０により旅券の顔写真画像を読み取った際に表示する表示部２００は、入国時、出国時ともにカメラの顔画像取得部で取得した顔画像２０１、及び読み取り部３０で取得した旅券の顔画像２０２、及び顔画像適合率２０３で構成される。その際、顔画像適合率が基準より低い場合には、赤等目立つ色で表示する。図８は旅券の顔写真画像及び身分情報とブラックリストの顔画像及び身分情報の比較結果の表示例である。表示部２００は、読み取り部３０によって読み取った旅券の顔写真画像とブラックリストに登録されている顔画像を比較した結果、適合率が基準以上であるブラックリストまたは旅券の記載情報とブラックリストの記載情報を比較した結果類似しているブラックリストの顔画像２０４、顔画像適合率２０５、記載情報２０６で構成される。顔画像適合率が基準以上である場合には、赤等目立つ色で表示する。また、旅券の記載情報とブラックリストの記載情報が類似している項目についても赤等目立つ色で表示する。顔画像適合率がすべて基準以下であり、かつ類似した身分情報がブラックリストに存在しない場合には図８に示す表示は表示しない。図９は入国審査時の表示結果の例である。入国審査時に表示される表示部２００は読み取り部３０で読み取った旅券に記載されている情報を表示する旅券情報２０７、査証に記載されている情報を表示する２０８、査証の発給情報を表示する２０９、認定証に記載されている情報を表示する２１０、認定証の発給情報を表示する２１１、入国時にカメラの顔画像取得部によって取得した顔画像２１２で構成される。図１０は出国審査時の表示結果の表示例である。出国審査時に表示される表示部２００は読み取り部３０で読み取った旅券に記載されている情報を表示する２１３、入国時の旅券情報を表示する２１４、外登証に記載されている情報を表示する２１５、外登証の発給情報を表示する２１６、入国時にカメラの顔画像取得部によって取得した顔画像２１７出国時にカメラの顔画像取得部によって取得した顔画像２１８で構成される。
【００１８】
【発明の効果】
以上説明したように、本発明によれば、旅券情報とブラックリストとの比較に文字情報に加えて顔画像情報を利用することにより、合致度の判定精度を向上させることが可能となり、より正確な不法入国者の摘発が可能となる。また、入出国時にカメラで顔画像を取得して旅券の顔写真と機械的に比較することにより、同一人性の確認を容易にする。上記機能により審査官の目視による比較作業の負担を減らすことが可能となり、入出国審査のスピードアップが図れる。また、本発明の出入国審査支援システムは、出入国者本人と旅券を生体認証の１つである顔画像を用いて機械的にも同一人性を確認することにより、指紋等の他の生体認証を利用する場合やＩＣカード化した旅券への対応が容易である。
【図面の簡単な説明】
【図１】本発明の実施の形態を示すシステム構成ブロック図。
【図２】図１における旅券情報６０の構成図。
【図３】図１における査証発給情報７０の構成図。
【図４】図１における外登証発給情報８０の構成図。
【図５】図１における認定証発給情報９０の構成図。
【図６】図１におけるブラックリスト１００の構成図。
【図７】図１における表示部３０表示例（カメラによる顔画像と旅券の顔写真画像の比較結果）を示す図。
【図８】図１における表示部３０表示例（旅券の顔写真画像及び身分情報とブラックリストの顔画像及び身分情報の比較結果）を示す図。
【図９】図１における表示部３０表示例（入国審査時の表示結果）を示す図。
【図１０】図１における表示部３０表示例（出国審査時の表示結果）を示す図。
【図１１】図１における入国審査の手続きを示すフローチャート。
【図１２】図１における出国審査の手続きを示すフローチャート。
【符号の説明】
１０…制御装置、１１…顔画像比較機能（旅券の顔写真画像とブラックリストの顔画像）、１２…身分情報比較機能（旅券の身分情報とブラックリストの身分情報）、１３…記載情報比較機能（査証、認定証、外登証の記載事項）、１４…顔画像比較機能（カメラによって取得した顔画像と旅券の顔写真画像）、２０…顔画像取得部、３０…読み取り部、４０…ブラックリスト登録部、５０…外部記憶装置、６０…旅券情報、７０…査証発給情報、８０…外登証発給情報、９０…認定証発給情報、１００…ブラックリスト、２００…表示部。
【発明の属する技術分野】
本発明は、外国人の出入国を管理するシステムにおいて、ブラックリスト情報と出入国時に取得した顔画像及び旅券の情報を利用して出入国審査を支援するシステムに関する。
【０００２】
【従来の技術】
従来の出入国審査では、外国人入国者が持つ旅券、査証、在留資格認定証明書（以下、認定証）を審査官に渡し、審査官はそれぞれに記載された情報及び名義人と入国者本人の同一性を確認する。出国時においても、外国人出国者が持つ旅券、外国人登録証明書（以下、外登証）を審査官に渡し、審査官はそれぞれに記載された情報及び名義人と出国者本人の同一性を確認する。このうち旅券については、ＩＣＡＯの基準に準拠した機械読み取り旅券（ＭＲＰ：Ｍａｃｈｉｎｅ Ｒｅａｄａｂｌｅ Ｐａｓｓｐｏｒｔ）の場合、旅券に記載されている情報のうちＩ／Ｏ機器で読み込める情報（以下、身分情報）を文字情報として取得する事が可能である。出入国審査では出入国者の本人確認を行うと共に、要注意者として各国からリストアップされている人物のリスト（ブラックリスト）と照合して要注意人物の出入国を発見することが求められている。従来の出入国審査支援システムでは、旅券から文字情報として取得した身分情報をブラックリストの情報と比較することが可能である。
【０００３】
【特許文献】
なし
【０００４】
【発明が解決しようとする課題】
上記従来の方法により旅券の身分情報とブラックリスト情報の比較を機械的に行うことが可能となるが、比較事項が文字情報のみのため、比較結果が合致した場合においても旅券の所持者がブラックリストと同一人物であるか判断する根拠としては不十分であった。また、ブラックリストとの比較だけでなく、出入国者本人と旅券の同一人性も確認する必要があり、この場合も出入国者本人と旅券の顔画像を見比べる必要があるので、文字情報だけの比較を行うシステムでは審査の支援が不十分であった。
【０００５】
本発明の目的は、旅券の情報とブラックリストを比較する際に、文字情報に加えて顔画像情報の比較を行うことにより判定精度を上げ、また、外国人出入国者の出入国時の顔画像と旅券情報との比較を行うことにより同一人性の確認を高精度で実現するシステムを提供することである。
【０００６】
【課題を解決するための手段】
上記目的を達成する為に、本発明の出入国審査支援システムは旅券情報、査証情報、認定証情報、外登証情報、ブラックリストのデータベースを一元管理する記憶装置を備え、これらの情報に対応する書類に添付された顔写真等の画像情報を取得する機能を備える。入国時に読み取った旅券の顔写真画像及び身分情報を上記記憶装置に送信し、旅券情報として格納する。入国前の査証の発給時に発給管轄部署により査証の査証番号、記載情報及び添付されている顔写真からなる情報を取得し、上記記憶装置に送信し、査証発給情報として格納する。同様に認定証についても、入国前の発給時に発給管轄部署により認定証の許可番号、記載情報及び添付されている顔写真からなる情報を取得し、上記記憶装置に送信し、認定証発給情報として格納する。同様に外登証についても、入国後の発給時に発給管轄部署により外登証の外登番号、記載情報及び添付されている顔写真からなる情報を取得し、上記記憶装置に送信し、外登証発給情報として格納する。ブラックリストについては、上記記憶装置に対象者の顔画像情報、身分情報を登録する。入国時にカメラで取得した顔画像を上記記憶装置に送信し、旅券情報と関連付けて格納する。そして、空港等の出入国を審査する部署に、上記データベースを管理する記憶装置とデータの送受信を行う制御装置とを設置する。この審査部署に備えた制御装置は、外国人出入国者が所持する旅券、査証、認定証、外登証の情報を読み取る機能と、記憶装置から対応する書類の情報を取得する機能と、両者の記載情報を照合する機能とを備え、さらに外国人出入国者の出入国時の顔画像を取得する機能と、外国人出入国者が所持する旅券から取得した身分情報とブラックリスト情報とを比較する機能と、予め記憶装置に格納した旅券の顔写真画像及びブラックリストの顔写真画像及び出入国時に取得する顔画像の特徴点をそれぞれ抽出して比較し、適合率を算出する機能と、文字情報及び画像情報の比較結果を表示する機能を備える。
【０００７】
上記出入国審査支援システムを用いた入国審査支援は以下のように実施する。まず審査部署において、制御装置に備えた上記出入国時の顔画像を取得する機能であるカメラにより外国人入国者の顔画像を取得し、次に外国人入国者が持つ旅券の記載情報を上記顔写真等の画像情報を取得する機能を備えた読み取り部で読み取り、両者の顔画像の特徴点を比較する。ここで画像の特徴点の比較機能は、特開２００２−１８３７３４号公報に示されるような手法を用いて実現する。この手法により適合率を求め、両者の顔画像及び適合率を表示機能に表示する。次に出入国審査支援システムは、旅券から取得した顔写真画像とブラックリストの顔画像、旅券から取得した身分情報とブラックリストの身分情報とを比較する。顔画像については特徴点を比較し、本人確認時と同様に適合率が基準以上のものについて身分情報とともに一覧表示する。表示時には適合率を赤のような目立つ色で表示する等、識別しやすい表示としても良い。身分情報については従来の文字情報の比較方法を用いて旅券の身分情報とブラックリストの身分情報を比較する。この結果を表示する時にも同様の識別しやすい表示を用いても良い。また、比較するすべての項目が完全に一致しているものについては、上記識別表示と異なる、例えば表示項目の背景を赤くするような表示を用いても良い。
【０００８】
次に出入国審査支援システムは、外国人入国者が持つ査証の査証番号、記載情報及び添付される顔写真、認定証の許可番号、記載情報及び添付される顔写真を上記読み取り部で読み取り、事前に記憶装置に査証発給情報として格納された情報と照合を行い、内容が異なる部分を同一の項目と識別できるよう、例えば別の色等で表示する。最後に、読み取った旅券、査証及び認定証の顔写真と事前に記録されている顔写真と入国時に取得した顔画像を同一画面に表示し、審査者による視覚確認を行う。
【０００９】
同様に、出国審査の際には、出入国審査支援システムはまずカメラにより外国人出国者の顔画像を取得し、次に旅券の顔写真画像、身分情報を読み取り部で読み取り、両者の顔画像を比較する。そして、両者の顔画像及び適合率を表示する。次に旅券から取得した顔写真画像、身分事項とブラックリストの顔画像情報、身分情報を比較する。比較及び表示方法は入国審査時と同様である。
【００１０】
次に外国人出国者が持つ外登証の番号、記載情報及び添付される顔写真を読み取り部で読み取り、事前に記憶装置に外登証発給情報として格納された情報との照合を行い、内容が異なる部分を上記と同様に表示する。最後に、読み取った旅券、外登証の顔写真と事前に記録されている顔画像と入国時及び出国時に取得した顔画像を同一画面に表示し、審査者による視覚確認を行う。
【００１１】
以上のように、本発明の出入国審査支援システムによれば、出入国審査において、これまで身分情報のみで行っていた旅券とブラックリストの比較を顔画像を利用することでより正確に比較することが可能となり、不法出入国者の摘発効率が向上する。また、出入国者の出入国時の顔画像と旅券の顔写真画像を機械的に比較することにより、同一人性の確認が容易になる。さらにこれらにより審査官の目視による比較作業を減らすことが可能になる。
【００１２】
【発明の実施の形態】
以下、本発明の形態について図面により詳細に説明する。
【００１３】
図１は本発明を適用した出入国審査システムのシステム構成をブロック図で示したものである。図１において、１０は制御装置、２０は出入国者の顔画像を取得する装置、３０は旅券、査証、認定証及び外登証に記載された情報を読み取る読み取り部、２００は顔画像取得部２０で取得した顔画像と読み取り部３０で読み取った旅券の顔写真画像の特徴点を比較した結果、読み取り部３０で読み取った旅券の顔写真画像とブラックリスト１００の顔画像の特徴点を比較した結果及び旅券、査証、認定証、外登証に記載された情報及びその名義人と出入国者本人の同一人性を確認した結果を表示する表示部である。１０の制御装置はパーソナルコンピュータ、ワークステーション等、若しくは専用の制御装置でも構わない。制御装置１０は顔画像比較機能１１、１４、身分情報比較機能１２、記載情報比較機能１３を有している。外部記憶装置５０は、旅券情報６０、査証発給情報７０、外登証発給情報８０、認定証発給情報９０、ブラックリスト１００を持ち、ネットワークを介して制御装置１０から参照可能となっている。ここで、顔画像比較機能１１は読み取り部３０で読み取った旅券の顔写真画像とブラックリスト１００の顔画像の特徴点を抽出し比較する機能である。身分情報比較機能１２は読み取り部３０で読み取った旅券の身分情報とブラックリスト１００の身分情報を比較する機能である。記載情報比較機能１３は入国審査の際は読み取り部３０で読み取った査証、認定証の記載情報と外部記憶装置５０に記録されている査証発給情報７０、認定証発給情報９０との突合せを行う機能であり、出国審査の際は読み取り部３０で読み取った旅券、外登証の記載情報と外部記憶装置５０に記録されている旅券情報６０、外登証発給情報８０との突合せを行う機能である。顔画像比較機能１４は顔画像取得部２０で取得した出入国者の顔画像と読み取り部３０で読み取った旅券の顔写真画像の特徴点を抽出し比較する機能である。
【００１４】
旅券情報６０は図２に示すようなデータ項目を備える。旅券情報６０は入国時に読み取った旅券番号６１、氏名、国籍等の記載情報６２、添付されている顔写真画像６３、入国時の顔画像６４で１つの記録が構成される。査証発給情報７０は図３に示すようなデータ項目を備える。査証発給情報７０は査証の発給時に記録した査証番号７１、氏名、国籍等の記載情報７２、添付されている顔画像画像７３で１つの記録が構成される。外登証発給情報８０は図４に示すようなデータ項目を備える。外登証発給情報８０は外登証の発給時に記録した外登番号８１、氏名、国籍等の記載情報８２、添付されている顔画像画像８３で１つの記録が構成される。認定証発給情報９０は図５に示すようなデータ項目を備える。認定証発給情報９０は認定証の発給時に記録した許可番号９１、氏名、国籍等の記載情報９２、添付されている顔写真画像９３で１つの記録が構成される。ブラックリスト１００は図６に示すようなデータ項目を備える。ブラックリスト１００は出入国を許可すべきでない外国人の氏名、国籍等の身分事項１０１、顔画像１０２で１つの記録が構成される。
【００１５】
次に、本システムによる審査支援処理を入国時、出国時の２処理に分けて図１１、１２のフローチャートに従い説明する。通常、入国審査場所と出国審査場所は分けられており、それぞれに設置される制御装置１０においては、それぞれ入国・出国に該当する処理のみを行うが、全ての機能を持たせて、メニューにより機能の選択を行っても良い。まず入国時の処理を図１１により説明する。最初にカメラの顔画像取得部２０により入国者の顔画像を取得する（ステップ３０１）。入国者が審査官のいる審査ブースで旅券、査証及び認定証を提示すると、提示された旅券を読み取り部３０によって読み取り、記載情報、顔写真画像及びステップ３０１で取得した顔画像を外部記憶装置５０の旅券情報６０に記録する（ステップ３０２）。制御装置１０の顔画像比較機能１１により顔画像取得部２０により取得した顔画像と読み取り部３０により取得した旅券の顔写真画像の特徴点を抽出し、適合率を算出する。両画像及び適合率を表示部２００に表示する（ステップ３０３）。適合率が基準以下であった場合には、適合率を赤等目立つ色で表示する（ステップ３０４）。ここで、読み取り部３０により取得した旅券の顔写真画像と外部記憶装置５０に記録されているブラックリスト１００の顔画像を制御装置１０の顔画像比較機能１４によって顔画像の特徴点を抽出し、適合率を算出する。また、旅券の記載情報とブラックリストの記載情報を比較し（ステップ３０５）、顔画像の適合率が基準以上であるブラックリスト、もしくは記載情報に類似点があるブラックリストを表示部２００に表示し、その際、一致した記載情報及び基準以上の適合率の表示を赤等目立つ色で表示する（ステップ３０６）。次に提示された認定証を読み取り部３０によって読み取り（ステップ３０７）、査証番号から事前に記録されている査証発給情報７０を参照し、記載情報の突合せを行う（ステップ３０８）。ここで、項目の内容が異なる場合には当該項目の表示を等しい内容の項目と異なる色とする（ステップ３０９）。次に提示された認定証を読み取り部３０によって読み取り（ステップ３１０）、許可番号から認定証発給情報９０を参照し、記載情報の突合せを行う（ステップ３１１）。項目の内容が異なる場合は当該項目の表示を等しい内容の項目とは異なる色とする（ステップ３１２）。最後に読み取った情報、発給情報、突合せ結果及び入国時の顔画像を表示部２００に表示する（ステップ３１３）。
【００１６】
次に出国時の処理を図１２により説明する。カメラの顔画像取得部２０により出国者の顔画像を取得する（ステップ４０１）。出国者が審査官のいる審査ブースで旅券、外登証を提示すると、提示された旅券に記載されている記載情報を読み取り部３０によって読み取る（ステップ４０２）。制御装置１０の顔画像比較機能１４により顔画像取得部２０により取得した顔画像と読み取り部３０により取得した旅券の顔写真画像の特徴点を抽出し、適合率を算出する。両画像及び適合率を表示部２００に表示する（ステップ４０３）。適合率が基準以下であった場合には、適合率を赤等目立つ色で表示する（ステップ４０４）。ここで、読み取り部３０により取得した旅券の顔写真画像と外部記憶装置５０に記録されているブラックリスト１００の顔画像を制御装置１０の顔画像比較機能１４によって顔画像の特徴点を抽出し、適合率を算出する。また、旅券の身分情報とブラックリストの身分情報を比較し（ステップ４０５）、適合率が基準以上である顔画像データ、もしくは身分情報に類似点があるブラックリストを表示部２００に表示し、その際、一致した記載情報及び基準以上の適合率の表示を赤等目立つ色で表示する（ステップ４０６）。読み取り部３０によって読み取られた旅券情報とその旅券番号から旅券情報６０を参照し、記載情報の突合せを行う（ステップ４０７）。ここで、項目の内容が異なる場合は当該項目の表示を等しい内容の項目とは異なる色とする（ステップ４０８）。次に提示された外登証を読み取り部３０によって読み取り（ステップ４０９）、外登番号から外登証発給情報８０を参照し、記載情報の突合せを行う（ステップ４１０）。ここで、項目の内容が異なる場合は当該項目の表示を等しい内容の項目とは異なる色とする（ステップ４１１）。最後に読み取った情報、発給情報、突合せ結果及び入国時、出国時の顔画像を表示部３０に表示する（ステップ４１２）。
【００１７】
ここで図７から図１０により表示部２００の表示例を示す。図７はカメラによる顔画像と旅券の顔写真画像の比較結果を表示する例である。顔画像取得部２０によって入国者の顔画像を取得した後、読み取り部３０により旅券の顔写真画像を読み取った際に表示する表示部２００は、入国時、出国時ともにカメラの顔画像取得部で取得した顔画像２０１、及び読み取り部３０で取得した旅券の顔画像２０２、及び顔画像適合率２０３で構成される。その際、顔画像適合率が基準より低い場合には、赤等目立つ色で表示する。図８は旅券の顔写真画像及び身分情報とブラックリストの顔画像及び身分情報の比較結果の表示例である。表示部２００は、読み取り部３０によって読み取った旅券の顔写真画像とブラックリストに登録されている顔画像を比較した結果、適合率が基準以上であるブラックリストまたは旅券の記載情報とブラックリストの記載情報を比較した結果類似しているブラックリストの顔画像２０４、顔画像適合率２０５、記載情報２０６で構成される。顔画像適合率が基準以上である場合には、赤等目立つ色で表示する。また、旅券の記載情報とブラックリストの記載情報が類似している項目についても赤等目立つ色で表示する。顔画像適合率がすべて基準以下であり、かつ類似した身分情報がブラックリストに存在しない場合には図８に示す表示は表示しない。図９は入国審査時の表示結果の例である。入国審査時に表示される表示部２００は読み取り部３０で読み取った旅券に記載されている情報を表示する旅券情報２０７、査証に記載されている情報を表示する２０８、査証の発給情報を表示する２０９、認定証に記載されている情報を表示する２１０、認定証の発給情報を表示する２１１、入国時にカメラの顔画像取得部によって取得した顔画像２１２で構成される。図１０は出国審査時の表示結果の表示例である。出国審査時に表示される表示部２００は読み取り部３０で読み取った旅券に記載されている情報を表示する２１３、入国時の旅券情報を表示する２１４、外登証に記載されている情報を表示する２１５、外登証の発給情報を表示する２１６、入国時にカメラの顔画像取得部によって取得した顔画像２１７出国時にカメラの顔画像取得部によって取得した顔画像２１８で構成される。
【００１８】
【発明の効果】
以上説明したように、本発明によれば、旅券情報とブラックリストとの比較に文字情報に加えて顔画像情報を利用することにより、合致度の判定精度を向上させることが可能となり、より正確な不法入国者の摘発が可能となる。また、入出国時にカメラで顔画像を取得して旅券の顔写真と機械的に比較することにより、同一人性の確認を容易にする。上記機能により審査官の目視による比較作業の負担を減らすことが可能となり、入出国審査のスピードアップが図れる。また、本発明の出入国審査支援システムは、出入国者本人と旅券を生体認証の１つである顔画像を用いて機械的にも同一人性を確認することにより、指紋等の他の生体認証を利用する場合やＩＣカード化した旅券への対応が容易である。
【図面の簡単な説明】
【図１】本発明の実施の形態を示すシステム構成ブロック図。
【図２】図１における旅券情報６０の構成図。
【図３】図１における査証発給情報７０の構成図。
【図４】図１における外登証発給情報８０の構成図。
【図５】図１における認定証発給情報９０の構成図。
【図６】図１におけるブラックリスト１００の構成図。
【図７】図１における表示部３０表示例（カメラによる顔画像と旅券の顔写真画像の比較結果）を示す図。
【図８】図１における表示部３０表示例（旅券の顔写真画像及び身分情報とブラックリストの顔画像及び身分情報の比較結果）を示す図。
【図９】図１における表示部３０表示例（入国審査時の表示結果）を示す図。
【図１０】図１における表示部３０表示例（出国審査時の表示結果）を示す図。
【図１１】図１における入国審査の手続きを示すフローチャート。
【図１２】図１における出国審査の手続きを示すフローチャート。
【符号の説明】
１０…制御装置、１１…顔画像比較機能（旅券の顔写真画像とブラックリストの顔画像）、１２…身分情報比較機能（旅券の身分情報とブラックリストの身分情報）、１３…記載情報比較機能（査証、認定証、外登証の記載事項）、１４…顔画像比較機能（カメラによって取得した顔画像と旅券の顔写真画像）、２０…顔画像取得部、３０…読み取り部、４０…ブラックリスト登録部、５０…外部記憶装置、６０…旅券情報、７０…査証発給情報、８０…外登証発給情報、９０…認定証発給情報、１００…ブラックリスト、２００…表示部。
Claims (1)
- 外国人の出入国審査を支援するシステムにおいて、旅券に記載された記載情報を読み取る読み取り部、カメラを用いて外国人出入国者の顔画像を取得する顔画像取得部、旅券情報、査証、在留資格認定証明書、外国人登録証明書の発給情報、ブラックリストを記録する記憶装置、ブラックリストを登録する登録部、読み取った書類の記載情報と記憶装置に記録されている情報の比較及び顔画像の特徴点を抽出し、画像の特徴点の比較を行う比較判定装置、読み取った情報及び記憶装置に記録された情報及びそれらを比較判定した結果を表示する表示部、及びそれらを制御する装置を備えることを特徴とする出入国審査支援システム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003178869A JP2005018178A (ja) | 2003-06-24 | 2003-06-24 | 顔画像を利用した出入国審査支援システム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003178869A JP2005018178A (ja) | 2003-06-24 | 2003-06-24 | 顔画像を利用した出入国審査支援システム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2005018178A true JP2005018178A (ja) | 2005-01-20 |
Family
ID=34180326
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003178869A Pending JP2005018178A (ja) | 2003-06-24 | 2003-06-24 | 顔画像を利用した出入国審査支援システム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2005018178A (ja) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013020316A (ja) * | 2011-07-08 | 2013-01-31 | Hitachi Ltd | 入国審査システム |
| CN110895838A (zh) * | 2018-09-12 | 2020-03-20 | 格力电器（武汉）有限公司 | 一种智能门锁控制方法、装置及智能门锁 |
| CN111105541A (zh) * | 2019-11-20 | 2020-05-05 | 武汉烽火众智数字技术有限责任公司 | 一种人员无感知安检系统和方法 |
| CN111783594A (zh) * | 2020-06-23 | 2020-10-16 | 杭州海康威视数字技术股份有限公司 | 一种报警方法、装置及电子设备 |
| CN112215225A (zh) * | 2020-10-22 | 2021-01-12 | 北京通付盾人工智能技术有限公司 | 一种基于计算机视觉技术的kyc证件核验方法 |
| JPWO2021192228A1 (ja) * | 2020-03-27 | 2021-09-30 |
-
2003
- 2003-06-24 JP JP2003178869A patent/JP2005018178A/ja active Pending
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013020316A (ja) * | 2011-07-08 | 2013-01-31 | Hitachi Ltd | 入国審査システム |
| CN110895838A (zh) * | 2018-09-12 | 2020-03-20 | 格力电器（武汉）有限公司 | 一种智能门锁控制方法、装置及智能门锁 |
| CN111105541A (zh) * | 2019-11-20 | 2020-05-05 | 武汉烽火众智数字技术有限责任公司 | 一种人员无感知安检系统和方法 |
| JPWO2021192228A1 (ja) * | 2020-03-27 | 2021-09-30 | ||
| WO2021192228A1 (ja) * | 2020-03-27 | 2021-09-30 | 日本電気株式会社 | 不審者検知装置、不審者検知方法及びコンピュータ読み取り可能な記録媒体 |
| CN111783594A (zh) * | 2020-06-23 | 2020-10-16 | 杭州海康威视数字技术股份有限公司 | 一种报警方法、装置及电子设备 |
| CN112215225A (zh) * | 2020-10-22 | 2021-01-12 | 北京通付盾人工智能技术有限公司 | 一种基于计算机视觉技术的kyc证件核验方法 |
| CN112215225B (zh) * | 2020-10-22 | 2024-03-15 | 北京通付盾人工智能技术有限公司 | 一种基于计算机视觉技术的kyc证件核验方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7983452B2 (en) | Using a surface based computing device for verification of an identification document | |
| USRE36580E (en) | System for verifying use of credit/identification card including recording physical attributes of unauthorized users | |
| JP4347345B2 (ja) | アルコール検査装置及びアルコール検査方法 | |
| AU2007245887B2 (en) | Procedure for identifying a person by eyelash analysis | |
| WO2018187959A1 (zh) | 身份信息安全监控方法及系统 | |
| US20130002399A1 (en) | Access control device | |
| JPH0362158A (ja) | 自動審査装置 | |
| WO1998025229B1 (en) | Improved facial recognition system for security access and identification | |
| US20050077351A1 (en) | Secure photo carrying identification device, as well as means and method for authenticating such an identification device | |
| JP4397212B2 (ja) | 本人認証装置 | |
| JP2018124622A (ja) | 入場受付端末、入場受付方法、入場受付プログラム、および入場受付システム | |
| CN108959884B (zh) | 人证核验装置和方法 | |
| EP1833002A1 (en) | Method and apparatus for obtaining biometric image samples or biometric data | |
| CN207232409U (zh) | 一种身份信息整合式安检系统 | |
| JP2007249819A (ja) | 入場管理システムおよび入場管理方法 | |
| JP2005018178A (ja) | 顔画像を利用した出入国審査支援システム | |
| JP2006215858A (ja) | 入退場管理システムおよび入退場管理方法 | |
| JP2001160118A (ja) | Ｉｄカード発行システム | |
| KR20020032048A (ko) | 얼굴 인식 보안방법 | |
| JP2005301861A (ja) | 出入管理システム | |
| EP3249574A1 (en) | Automated control of the identity of a person holding an electronic machine-readable travel document | |
| KR20020013035A (ko) | 여권 인증 시스템 및 이를 이용한 출입국 관리 방법 | |
| JP2005242432A (ja) | 顔認証システム及びその処理方法及びそのプログラム | |
| JP7163573B2 (ja) | 登録システム | |
| Okumura et al. | Improving face recognition for identity verification by managing facial directions and eye contact of event attendees |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050921 |
|
| RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20060420 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080901 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081007 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20090217 |