JP2000306095A - 画像照合・検索システム - Google Patents

画像照合・検索システム

Info

Publication number
JP2000306095A
JP2000306095A JP11110020A JP11002099A JP2000306095A JP 2000306095 A JP2000306095 A JP 2000306095A JP 11110020 A JP11110020 A JP 11110020A JP 11002099 A JP11002099 A JP 11002099A JP 2000306095 A JP2000306095 A JP 2000306095A
Authority
JP
Japan
Prior art keywords
image
environment
input image
matching
collation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP11110020A
Other languages
English (en)
Inventor
Naoki Sashita
直毅 指田
Shigemi Osada
茂美 長田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP11110020A priority Critical patent/JP2000306095A/ja
Publication of JP2000306095A publication Critical patent/JP2000306095A/ja
Withdrawn legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands

Abstract

(57)【要約】 【課題】 入力画像と登録画像の撮影環境、条件等が異
なる場合においても高精度な照合処理を維持することが
できる顔画像照合・検索システムを提供する。 【解決手段】 予め利用者の登録画像を登録画像ＤＢ４
０に登録しておく。認証処理では、画像入力部１０のカ
メラ１１より利用者の顔画像を撮影し、入力画像環境対
象推定処理部２０は顔画像を解析し、環境パラメータ、
対象状態パラメータを推定する。例えば、照明条件を示
す照明パラメータ、撮影方向、（立ち位置に依存する）
顔サイズ等を示すポジションパラメータ、眼鏡等の付随
物の有無を示す付随物パラメータ、表情パラメータ等を
推定する。照合画像生成処理部３０は登録画像ＤＢ４０
から登録画像を取り出し、入力画像の推定したパラメー
タ値を目標としてパラメータ値を調整して照合画像を生
成する。画像照合処理部５０は照合画像と登録画像を比
較照合する。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、カメラなどの画像
入力装置から入力された画像と、画像データベース（以
下、画像ＤＢと略記する）などにあらかじめ登録済みの
画像を比較照合することにより、入力画像中に存在する
対象物を特定する画像照合・検索システムに関する。応
用の一形態として、入力画像および登録画像を人物の顔
画像とし、入力画像中に撮影された人物を特定する人物
認証が含まれる。
【０００２】
【従来の技術】コンピュータシステムにおいて、認証技
術の重要性が増しつつある。認証処理が処理業務の重要
な一部となるアプリケーションは多く存在し、アクセ
ス、利用に関して一定レベルのセキュリティが要求され
るアプリケーションには様々な認証方法が採用されてお
り、典型的には、いわゆるパソコン通信でのパスワード
による利用者認証、金融機関の現金自動処理システムに
おけるキャッシュカードと暗証番号による利用者認証、
オフィスビルやマンションの入退室管理システムにおけ
る暗証番号による入退室者認証などが挙げられる。さら
に高いセキュリティレベルを目指して、指紋を利用した
認証、網膜を利用した認証なども開発されている。一
方、コンピュータシステムの利用において、ユーザフレ
ンドリーなヒューマンインタフェースの重要性も増して
いるが、上記した認証処理においてセキュリティレベル
を上げ、厳密な運用を図れば図るほど処理時間の増大、
コストの上昇、利用者の煩雑な手間の負担増大などを招
き、ヒューマンインタフェースの観点からは好ましいも
のとはなっていない。
【０００３】ここで、近年のコンピュータ機器のマルチ
メディア処理能力の向上、デジタルカメラやビデオカメ
ラ等の画像入力装置の普及により、撮影した画像を容易
にコンピュータに取り込み、デジタル処理することが可
能となりつつある。そこでシステム利用者のインタフェ
ースの一部として設置したカメラから人物画像を取り込
み、その顔画像から、そこに写っている人物が誰である
か特定する顔画像照合・検索技術が注目を集めている。
この技術を用いれば、例えば、従来、暗証番号、パスワ
ード、ＩＤカードなどを用いていた金融機関の現金自動
処理システムの利用者認証、パソコン通信やインターネ
ットヘのログインの利用者認証を、顔画像で代用するこ
とが可能になる。さらに、犯罪捜査などにおいても、典
型的には現金自動処理システムに設置された監視カメ
ラ、コンビニエンスストアなどの防犯カメラに撮影され
た犯人の顔画像を基に、容疑者を割り出し、特定するこ
とが可能となる。
【０００４】今後、様々な撮影環境下において安定的に
高精度な照合が行える顔画像照合・検索システムが実現
できれば、上記で示した従来システムのみならず、今後
開発されるであろう各種自動受付システム、顧客管理シ
ステムなどにおける利用者認証への応用ができる。さら
に犯罪捜査支援など幅広い分野への応用が期待されてい
る。
【０００５】
【発明が解決しようとする課題】しかしながら、上記の
ような利用者認証を必要とするアプリケーションにおい
て、撮影し、入力される画像の状態が必ずしも良好なも
のでない場合が多く想定される。つまり、対象物を撮影
する際の周囲の撮影環境、撮影時点での対象物の位置、
方向などの対象物の状態、撮影に用いるカメラの機器性
能の違いなどにより入力画像の状態が大きく影響され、
登録画像を撮影、取得した際の撮影環境、対象物の状態
と大きく異なる場合が想定される。この場合、従来の顔
画像照合・検索技術によれば、照合精度が低下してしま
うという問題があった。
【０００６】例えば、現金自動処理システムで本人照合
する場合を想定すると、登録画像の撮影は、証明写真と
して照明条件の整った環境で高性能カメラを用いて撮影
するのに対し、一方、実際の利用の場面で取得される入
力画像は、金融機関の支店内、屋外にある現金自動処理
システム等に設置された安価なカメラを用いて撮影され
るということが十分考えられる。このような場合、入力
画像と登録画像の間で、照明条件による明度の違い、撮
影カメラの機器性能による解像度・画質の違い、顔向き
・サイズの違い、頭髪の変化、ひげ、眼鏡の付属物の有
無、等の要因により、照合精度が著しく低下し、他人を
本人と誤認識(他人受理)してしまったり、本人を他人と
誤認識(本人棄却)してしまうという問題があった。
【０００７】本発明は、上記問題を解決し、入力画像と
登録画像の撮影環境・条件などが異なる場合において
も、高精度な照合処理を維持することができる顔画像照
合・検索システムを提供することを目的とする。
【０００８】
【課題を解決するための手段】上記課題を解決するため
に本発明の画像照合・検索システムは、入力された画像
と、あらかじめ登録済みの登録画像を比較照合すること
により、入力画像中に存在する対象物を照合、推定する
画像照合・検索システムにおいて、入力画像を基に撮影
環境の状態を示す環境パラメータおよび対象物の状態を
示す対象状態パラメータを推定する入力画像環境対象推
定処理部と、前記登録画像の環境パラメータ値および対
象状態パラメータ値に基づいて、前記入力画像環境対象
推定処理部により推定された入力画像の環境パラメータ
値および対象状態パラメータ値を調整することにより、
前記入力画像を基に前記登録画像の撮影環境および対象
物状態に対応する照合画像を生成する照合画像生成処理
部と、前記照合画像と前記登録画像を比較・照合するこ
とにより照合結果を出力する画像照合処理部とを備えた
ことを特徴とする。
【０００９】上記構成により、撮影環境、対象物状態を
示すパラメータ値を調整して入力画像から照合画像を生
成し、照合画像と登録画像との照合を行なうので、入力
画像と登録画像の撮影環境・対象物状態などが異なる場
合においても、高精度な照合処理を実行することができ
る。
【００１０】また、上記課題を解決するために本発明の
画像照合・検索システムは、入力された画像と、あらか
じめ登録済みの登録画像を比較照合することにより、入
力画像中に存在する対象物を照合、推定する画像照合・
検索システムにおいて、入力画像を基に撮影環境の状態
を示す環境パラメータおよび対象物の状態を示す対象状
態パラメータを推定する入力画像環境対象推定処理部
と、前記入力画像環境対象推定処理部により推定された
入力画像の環境パラメータ値および対象状態パラメータ
値を目標として、前記登録画像の環境パラメータ値およ
び対象状態パラメータ値を調整することにより、前記登
録画像を基に前記入力画像の撮影環境および対象物状態
に対応する照合画像を生成する照合画像生成処理部と、
前記入力画像と前記照合画像を比較・照合することによ
り照合結果を出力する画像照合処理部とを備えたことを
特徴とする。
【００１１】上記構成により、撮影環境、対象物状態を
示すパラメータ値を調整して登録画像から照合画像を生
成し、照合画像と入力画像との照合を行なうので、入力
画像と登録画像の撮影環境、対象物状態などが異なる場
合においても、高精度な照合処理を実行することができ
る。
【００１２】また、上記目的を達成するために本発明の
画像照合・検索システムを実現する処理プログラムを記
録したコンピュータ読み取り可能な記録媒体は、入力画
像を基に撮影環境の状態を示す環境パラメータおよび対
象物の状態を示す対象状態パラメータを推定する入力画
像環境対象推定処理ステップと、前記登録画像の環境パ
ラメータ値および対象状態パラメータ値に基づいて、前
記入力画像環境対象推定処理ステップにより推定された
入力画像の環境パラメータ値および対象状態パラメータ
値を調整することにより、前記入力画像を基に前記登録
画像の撮影環境および対象物状態に対応する照合画像を
生成する照合画像生成処理ステップと、前記照合画像と
前記登録画像を比較・照合することにより照合結果を出
力する画像照合処理ステップとを備えた処理プログラム
を記録したことを特徴とする。
【００１３】上記構成により、パーソナルコンピュー
タ、ワークステーションなどのコンピュータを利用して
本発明の画像照合・検索システムを構築することができ
る。
【００１４】上記目的を達成するために本発明の画像照
合・検索システムを実現する処理プログラムを記録した
コンピュータ読み取り可能な記録媒体は、入力画像を基
に撮影環境の状態を示す環境パラメータおよび対象物の
状態を示す対象状態パラメータを推定する入力画像環境
対象推定処理ステップと、前記入力画像環境対象推定処
理ステップにより推定された入力画像の環境パラメータ
値および対象状態パラメータ値を目標として、前記登録
画像の環境パラメータ値および対象状態パラメータ値を
調整することにより、前記登録画像を基に前記入力画像
の撮影環境および対象物状態に対応する照合画像を生成
する照合画像生成処理ステップと、前記入力画像と前記
照合画像を比較・照合することにより照合結果を出力す
る画像照合処理ステップとを備えた処理プログラムを記
録したことを特徴とする。
【００１５】上記構成により、パーソナルコンピュー
タ、ワークステーションなどのコンピュータを利用して
本発明の画像照合・検索システムを構築することができ
る。
【００１６】
【発明の実施の形態】以下、本発明の画像照合・検索シ
ステムの実施形態について、図面を参照しながら説明す
る。
【００１７】（実施形態１）本発明の実施形態１の画像
照合・検索システムは、取り込んだ入力画像から環境パ
ラメータ値および対象状態パラメータ値を取得し、登録
画像の環境パラメータ値および対象状態パラメータ値を
目標として、入力画像のパラメータ値を調整して入力画
像から照合画像を生成し、照合画像と登録画像との照合
処理を行なうことにより、精度が高く、ユーザーフレン
ドリーな画像照合検索処理を実現するものである。本実
施形態１では、入力画像および登録画像が人物の顔を写
した顔画像であり、入力された利用者の顔画像と登録さ
れている利用者の顔画像とを比較・照合し、個人認証を
行なう画像照合・検索システムである。
【００１８】本実施形態１では、環境パラメータとし
て、撮影場所の照明状態を示す照明パラメータ、撮影に
利用したカメラの機器性能に依存するカメラ条件を示す
カメラパラメータを含み、また、対象状態パラメータと
して、対象物の撮影方向と撮影ポジションを示すポジシ
ョンパラメータ、対象物に付随物が伴っているか否かに
関する状態を示す付随物パラメータを含む。
【００１９】最初に、本実施形態１の画像照合・検索シ
ステムの全体構成の概略と本システムによる処理流れの
全体像を図１と図２を参照しつつ説明する。
【００２０】図１は、本実施形態１の画像照合・検索シ
ステムの概略構成図を示している。図２は、本システム
による処理流れの全体像を処理ステップとして表わした
ものである。
【００２１】図１に示すように、本画像照合・検索シス
テムは、大別して、画像入力部１０、入力画像環境対象
推定処理部２０、照合画像生成処理部３０、登録画像デ
ータベース４０、画像照合処理部５０、ユーザーインタ
フェース部６０を備えている。なお、図示していない
が、システム全体の制御処理に必要なコントローラ、メ
モリなどは装備している。
【００２２】画像入力部１０は、個人認証をする利用者
の顔画像を入力するもので、カメラ１１を備えている。
カメラ１１のピント調整、露光調整はユーザーインタフ
ェース部６０からリモート操作できることが好ましい。
また、オプションとして照度センサ、被写体の位置セン
サなど各種センサ１２を設置することができる。当該各
種センサ１２より感知した各種情報を後述するように環
境パラメータ、対象状態パラメータの解析・推定に利用
する。
【００２３】入力画像環境対象推定処理部２０は、画像
入力部１０から入力された画像から、所定の環境パラメ
ータ、対象状態パラメータを解析・推定して数値化す
る。なお、数値化はあらかじめ決められたコード体系で
あれば良い。また、撮影場所に照度センサ、被写体の位
置センサなどが設置され、環境パラメータ、対象状態パ
ラメータに関連する実測データが得られる場合には当該
実測データをも勘案して環境パラメータ、対象状態パラ
メータを解析・推定して数値化する。
【００２４】本実施形態１では、環境パラメータは、照
明パラメータ、カメラパラメータを含むものとする。こ
こで、照明パラメータとは、撮影時の撮影場所の照明条
件を表わすものであり、カメラパラメータとは、撮影に
利用したカメラの機器性能に依存するカメラ条件を表わ
すものである。照明パラメータとして入力画像から周囲
の照度（ルクスまたはＨＳＩ系に変換した場合のＩの値
など）、光源の位置（数と位置と方向）、光源の種類
（蛍光灯であるか、自然光であるかなど）などを推定し
て数値化する。具体的には、顔領域画像の明度輝度値の
平均値・分散・ヒストグラムなどを計算する方法が考え
られる。次に、カメラパラメータとして撮影に利用した
カメラの解像度、カメラのピント、カメラの露光度合い
などを推定して数値化する。
【００２５】次に、本実施形態１では、対象状態パラメ
ータとして、ポジションパラメータと付随物パラメータ
と表情パラメータを含むものとする。ポジションパラメ
ータとは、対象物の撮影方向と撮影ポジションの条件
（対象物とカメラとの距離（立ち位置）、対象物のカメ
ラに対する方向（回転方向を含む））を表わすものであ
り、付随物パラメタとは、対象物に付随物が伴っている
か否かの付随物条件を表わすものである。表情パラメー
タとは、入力顔画像の表情を示すものである。
【００２６】ポジションパラメータとして、例えば対象
物の撮影方向とサイズを推定して数値化する。顔対象の
状態を推定するには、顔領域内の肌色専有面積を計算す
ることにより顔向き角度や顔サイズを推定する方法が考
えられる。次に、付随物パラメータとして対象物に付随
物、例えば、眼鏡、ひげ、ピアスなどが伴っているか否
かを推定し、付随物の形状、領域を推定して数値化す
る。ここではテンプレートマッチングに基づいて眼鏡の
有無、表情などを推定する方法が考えられる。次に、表
情パラメータとして入力顔画像の表情に関する状態を推
定して数値化する。表情の推定は顔画像のうち、口のエ
ッジ検出による形状解析、口領域の空間周波数、目領域
の空間周波数を解析することにより一定レベルの推定、
数値化が可能である。なお、入力画像環境対象推定処理
部２０は、推定値とともに推定処理における推定誤差を
付与することが好ましい。推定誤差値は上記各推定処理
（推定アルゴリズム）において算出しても良いし、各パ
ラメータの種類に応じてあらかじめ決めておいても良
い。例えば付随物パラメータのひげに対する推定誤差は
１０％、表情パラメータの推定誤差は２０％のごとくで
ある。
【００２７】上記各種パラメータを導入することによ
り、当該機器が設置される建物屋内、屋外などの照明条
件、撮影に利用したカメラの解像度やピントなどの機器
性能、撮影時における人物とカメラとの相対関係に基づ
く差異、眼鏡やひげなどの付随物の有無、顔画像撮影時
点の人物の感情状態、健康状態などの違いにより生じる
表情の変化などに影響を考慮・調整することができ、精
度の良い顔画像検索を実行することができる。
【００２８】登録画像データベース４０は、利用者の個
人認証用画像を登録して格納しておくデータベースであ
る。登録画像に加え、登録画像の環境パラメータ、対象
状態パラメータが得られている場合はそれらパラメータ
も登録画像と対応付けて格納しておく。さらに、対象物
を撮影した登録画像として、異なる対象状態パラメータ
を持つ画像を複数登録しておくことが好ましい。もし、
登録画像の環境パラメータ、対象状態パラメータが事前
に得られていない場合は、登録画像のみを格納してお
く。この場合は、顔画像照合処理実行の際に環境パラメ
ータ、対象状態パラメータを求めることとなる。
【００２９】照合画像生成処理部３０は、画像入力部１
０から取り込んだ入力画像を調整して照合画像を生成す
る。その際、登録画像データベース４０から登録画像の
環境パラメータ、対象状態パラメータを取り出し、この
取り出したパラメータの数値を目標として、入力画像環
境対象推定処理部２０により推定した入力画像の環境パ
ラメータ、対象状態パラメータを調整し、入力画像から
照合画像を生成する。なお、画像登録データベース４０
に複数パターンの登録画像を登録しておくことにより、
入力画像の対象状態パラメータともっとも近い対象状態
パラメータを持つ登録画像を選定して、入力画像の調整
量を少なくして調整に基づく誤差を小さくすることがで
きる。
【００３０】画像照合処理部５０は、照合画像生成処理
部３０により生成した照合画像と登録画像を比較照合
し、一致度を計算する。本実施形態１では、一致度を両
画像をそれぞれ固有空間上の距離とする。固有空間への
投影手順の概略を図３を参照しつつ説明する。まず、入
力画像から顔領域を切り出して顔画像を得る。切り出し
た顔画像に対して、ＫＬ展開（Karhunen-Loeve展開。以
下、ＫＬ展開と略記する）を施して固有空間に投影す
る。固有空間は、顔画像の画素値を要素とする列ベクト
ルから構成される行列を作成し、その行列から固有ベク
トル行列を求め、この固有ベクトル行列で定義される空
間を固有空間とする。図３では、便宜上、Ｘ 1，Ｘ2，Ｘ
kの３軸のみを表示している。この固有空間へ投影す
る。登録画像の顔画像もＫＬ展開して固有空間に投影し
ておく。入力画像を調整するので登録画像は正面の基本
となる一枚のものがあれば良いが、この例では登録画像
として複数の角度から撮影したものを用意し、利用者ご
とに複数の投影点を求め、その投影点を連続的に結んで
いる。この例によれば、入力画像の調整は、一番近似す
る対象状態パラメータを持つ登録画像を目標としてパラ
メータ調整し、固有空間上での投影点間の距離を求めれ
ば良いこととなる。
【００３１】このように入力画像と登録画像の固有空間
への投影点間の距離を算出する。画像照合結果は、この
算出した距離を評価することにより行なう。アプリケー
ションの運用によるが、認証するか否かを判断する距離
のしきい値を設け、距離がしきい値以下ならば認証、そ
のしきい値より大きい場合は不一致とする。
【００３２】ユーザーインタフェース部６０は、画像表
示部６１、マウスなどのポインティングデバイス、キー
ボードなどの入力装置６２を備え、画像照合・検索シス
テム利用者（個人認証業務を管理する者）のデータ入出
力に利用される。ユーザーインタフェース部６０の画像
表示部６１に表示される画面例を図４に示す。この画面
例は、建物の入退室管理や、犯罪捜査などでの人物認証
などシステム管理者側が認証の様子を確認する場合など
に有効な画面である。もっとも図４の画面は一例であ
り、アプリケーションにより他の画面構成とすることも
できることは言うまでもない。図４の例では、利用者登
録画像の表示部分、認証対象人物の名前入力部分、顔の
向きの指定部分（対象状態パラメータの変更指定部
分）、入力画像中の認証人物の顔画像領域指定部分など
が設けられている。
【００３３】次に、図２は、本画像照合・検索システム
の動作の概略を処理ステップとして表わしたフローチャ
ートである。
【００３４】まず、あらかじめ利用者ごとに認証用の基
本画像となる登録画像を登録画像データベース４０に登
録、格納しておく（ステップＳ２０１）。精度の高い画
像照合処理を行なうために正面画像のほか、様々な方向
から写した顔画像を用意しておくことが好ましい。これ
は前処理、後方処理として個人認証を伴うアプリケーシ
ョンの管理者側が行なう。
【００３５】次に、画像入力部１０のカメラ１１より個
人認証を伴うアプリケーションの利用者の顔画像を撮影
する（ステップＳ２０２）。このカメラ１１は撮影の前
に、解像度、ピント、露光などのカメラパラメータをチ
ューニングしておくことが好ましい。撮影した顔画像は
入力画像環境対象推定処理部２０に渡される。
【００３６】次に、入力画像環境対象推定処理部２０
は、画像入力部１０から渡された顔画像を解析して、環
境パラメータ、対象状態パラメータを推定し、各パラメ
ータ値を求める（ステップＳ２０３）。例えば、照明パ
ラメータとして照度（ＨＳＩ系でのＩ＝０．６）、光源
の位置（上方）、光源の種類（蛍光灯）、ポジションパ
ラメータとして、撮影方向（正面）、画像顔サイズ（６
ｃｍ）、付随物パラメータとして、あご部分において黒
色認識されたひげ領域（領域Ｘ１Ｙ１〜Ｘ２Ｙ２）、表
情パラメータとして無表情（例えばコード“０”）など
を解析・推定する。なお、この例では画像顔サイズは画
像上での顔の縦の長さを示している。
【００３７】次に、照合画像生成処理部３０は、登録画
像データベース４０から認証対象の利用者の登録画像の
環境パラメータ、対象状態パラメータを取り出す（ステ
ップＳ２０４）。例えば、照明パラメータとして照度
（ＨＳＩ系でのＩ＝０．５）、光源の位置（上方）、光
源の種類（蛍光灯）、ポジションパラメータとして、撮
影方向（正面）、画像顔サイズ（１５ｃｍ）、付随物パ
ラメータとして、付随物なし（例えばコード“０”）、
表情パラメータとして無表情（例えばコード“０”）で
あるとする。
【００３８】照合画像生成処理部３０は、登録画像の環
境パラメータ、対象状態パラメータを目標として、入力
画像の環境パラメータ、対象状態パラメータを調整し、
登録画像と近似する照合画像を生成する。上記例で言う
と、入力画像の照明パラメータをＨＳＩ系でのＩ＝０．
６からＩ＝０．５に調整し、ポジションパラメータの画
像顔サイズ６ｃｍから１５ｃｍに調整し、付随物パラメ
ータのひげ領域（領域Ｘ１Ｙ１〜Ｘ２Ｙ２）を周辺の肌
色で消し込んで付随物なし（コード“０”）に調整す
る。
【００３９】次に、画像照合処理部５０により、入力画
像から生成した照合画像と登録画像を比較・照合する
（ステップＳ２０５）。一致度として両画像をそれぞれ
固有空間上の距離を計算する。あらかじめ設定した認証
するか否かを判断する距離のしきい値により認証判断す
る。そのしきい値以内であれば一致と認証する。このし
きい値はアプリケーションのセキュリティレベルに応じ
てチューニングする。なお、画像照合処理部５０は、入
力画像環境対象推定処理部２０が推定誤差を付与してい
る場合は（例えば１０％）、画像照合処理における画像
の一致度が推定誤差範囲内にあるものすべてを、画像一
致の候補とすれば良い。画像一致の候補が複数ある場合
の処理はアプリケーションの運用によるが、例えば、画
像一致候補すべてをユーザインタフェース部６０の画像
表示部６１に表示し、複数回答することもでき、また、
もっとも一致度の高いものを一次認証結果とし、詳細認
証が必要である事案として分類しても良い。
【００４０】以上が本画像照合・検索システムの処理概
略の流れである。
【００４１】以上のように本実施形態１の画像照合・検
索システムは、取り込んだ入力画像から環境パラメータ
値および対象状態パラメータ値を取得し、登録画像の環
境パラメータ値および対象状態パラメータ値を目標とし
て、入力画像のパラメータ値を調整して入力画像から照
合画像を生成して照合することができ、精度が高く、か
つ、ユーザフレンドリーなシステムを提供することがで
きる。
【００４２】（実施形態２）本発明の実施形態２の画像
照合・検索システムは、実施形態１と同様の手法によ
り、取り込んだ入力画像から環境パラメータ値および対
象状態パラメータ値を取得して登録画像の環境パラメー
タ値および対象状態パラメータ値を目標として入力画像
のパラメータ値を調整して入力画像から照合画像を生成
して照合画像と登録画像との照合処理を行なうが、アイ
ゲンウィンドウ法に基づく部分画像ごとの照合処理を行
なう。つまり、照合に際して画像を複数の領域に分割
し、アイゲンウィンドウ法による照合処理をそれぞれの
分割領域ごとに実行して一致度を計算し、前記それぞれ
分割領域ごとに得られた一致度に対して設定した重みづ
けを施した総計値を算出し、画像照合処理結果とするも
のである。本実施形態２においても、入力画像および登
録画像が人物の顔を写した顔画像であり、入力された利
用者の顔画像と登録されている利用者の顔画像とを比較
・照合し、個人認証を行なう画像照合・検索システムと
する。
【００４３】本実施形態２の画像照合・検索システムの
全体構成の概略と本システムによる処理流れの全体像を
図５と図６を参照しつつ説明する。
【００４４】図５は、本実施形態２の画像照合・検索シ
ステムの概略構成図を示している。図６は、本システム
による処理流れの全体像を処理ステップとして表わした
ものである。
【００４５】図５に示すように、本実施形態２の画像照
合・検索システムは、大別して、画像入力部１０、入力
画像環境対象推定処理部２０、照合画像生成処理部３
０、登録画像データベース４０、画像照合処理部５０
ａ、ユーザーインタフェース部６０を備えている。本実
施形態２では画像照合処理部５０ａは、画像領域分割部
５１、アイゲンウィンドウ照合処理部５２、重み付け評
価部５３が備えられている。なお、システム全体の制御
処理に必要なコントローラ、メモリなどは装備してい
る。
【００４６】画像照合処理部５０ａ以外の各要素は実施
形態１で示したものと同様であるので、ここでは説明を
適宜省略する。
【００４７】画像領域分割部５１は、画像を領域分割す
る部分である。本実施形態２の顔画像では、全体画像を
特徴的な部分画像に分割する。この時、分割対象領域を
顔全体としても良いし、左目領域、右目領域、鼻領域、
口領域などに限定しても良い。これら部分領域はアイゲ
ンウィンドウ法において、窓画像と呼ばれ、例えば図７
のように切り出される。なお、画像分割においては、各
画素位置における隣接画素との画素値の差の総和（以
下、エッジ強度と呼ぶ）を計算し、エッジ強度に基づい
て画像の一部を窓画像として切り出し、窓画像中に含ま
れる画素値を要素とするベクトル（以下、窓画像ベクト
ルと呼ぶ）に対して、その切り出し位置（以下、画像内
窓位置と呼ぶ）、識別子を付与し、窓データを作成す
る。なお、窓画像切り出しのためのエッジ強度を隣接画
素との画素値の差の総和としたが、エッジ強度を空間周
波数における高周波成分量とすることにより窓画像切り
出しを判断することもできる。
【００４８】アイゲンウィンドウ照合処理部５２は、実
施形態１で説明した固有空間における投影処理と同様の
処理を行って、窓画像データを固有空間に投影する。図
７においても便宜上、Ｘ1，Ｘ2，Ｘkの３軸のみを表示
した。切り出した窓画像をＫＬ展開して図７に示すよう
に固有空間に投影する。アイゲンウィンドウ照合処理部
５２は、固有空間上における入力画像の窓画像の投影点
群と登録画像の投影点群とを比較して一致度を計算す
る。両投影点の距離を一致度として計算する。ここで、
窓画像にＫＬ展開を施す代わりにＤＣＴ変換を施してＤ
ＣＴ変換係数から構成される特徴空間に投影する方法も
考えられる。
【００４９】重み付け評価部５３は、アイゲンウィンド
ウ照合処理部５２により計算した投影点間の距離に対し
て、窓画像ごとにあらかじめ決められた重み付けをし
て、総計値を求める。ここで重み付けの例としては、例
えば、目の窓画像には重み付けを３とし、鼻の窓画像、
口の窓画像を重み付け１とするなどである。算出した総
計値とあらかじめ設定した認証判断のためのしきい値と
を比較して認証判断する。つまり、そのしきい値以内で
あれば一致と認証する。
【００５０】図６は、本画像照合・検索システムの動作
の概略を処理ステップとして表わしたフローチャートで
ある。
【００５１】図６に示したステップＳ６０１からステッ
プＳ６０４までは、実施形態１において説明した図２の
フローチャートにおけるステップＳ２０１からステップ
Ｓ２０４と同様であり、ここでの説明は省略する。
【００５２】次に、画像照合処理部５０ａの画像領域分
割部５１により図７に示したように、入力画像および登
録画像から窓画像を切り出す（ステップＳ６０５）。
【００５３】次に、画像照合処理部５０ａのアイゲンウ
ィンドウ照合処理部５２により、各窓画像ごと入力画像
および登録画像の固有空間上の投影点間の距離を求める
（ステップＳ６０６）。
【００５４】次に、ステップＳ６０６で窓画像ごとに求
めた投影点間の距離を、画像照合処理部５０ａの重み付
け評価部５３により所定の重み付けを行なった後、総計
値を計算し、あらかじめ設定したしきい値との比較によ
り認証判断する（ステップＳ６０７）。そのしきい値以
内であれば一致と認証する。このしきい値はアプリケー
ションのセキュリティレベルに応じてチューニングす
る。なお、入力画像環境対象推定処理部２０が推定誤差
を付与している場合は、画像照合処理における画像の一
致度が推定誤差範囲内にあるものすべてを、画像一致の
候補とする。画像一致候補すべてをユーザインタフェー
ス部６０の画像表示部６１に表示し、複数回答すること
もでき、また、もっとも一致度の高いものを一次認証結
果とし、詳細認証が必要である事案として分類しても良
い。
【００５５】以上のように本実施形態２の画像照合・検
索システムは、取り込んだ入力画像から環境パラメータ
値および対象状態パラメータ値を調整して生成した照合
画像と登録画像を窓画像ごとに照合することができ、照
合精度が高い画像照合・検索システムを提供することが
できる。
【００５６】（実施形態３）本発明の実施形態３の画像
照合・検索システムは、実施形態１と同様に、環境パラ
メータ値および対象状態パラメータ値の調整により、入
力画像と登録画像の差異を取り除いてから画像照合を行
なうが、入力画像ではなく、登録画像の環境パラメータ
値および対象状態パラメータ値を、入力画像の環境パラ
メータ値および対象状態パラメータ値を目標として調整
して照合画像を生成し、入力画像と照合画像を照合処理
するものである。
【００５７】本実施形態３の画像照合・検索システムの
全体構成の概略を図８に示す。この例は画像照合処理部
５０がサブ構成として、画像領域分割部５１、アイゲン
ウィンドウ照合処理部５２、重み付け評価部５３を備
え、実施形態２と同様、画像の部分領域ごとに照合処理
を行うものであるが、実施形態１の図１に示したように
サブ構成を持たず、画像全体を照合するシステム構成も
可能であることは言うまでもない。実施形態１の画像照
合・検索システム、実施形態２の画像照合・検索システ
ムとは照合画像生成処理部３０ａにおける処理内容が異
なっている。
【００５８】照合画像生成処理部３０ａ以外の各要素は
実施形態１、実施形態２で示したものと同様であるの
で、ここでは説明を適宜省略する。
【００５９】照合画像生成処理部３０ａは、登録画像を
調整して照合画像を生成する。その際、画像入力部１０
から取り込んだ入力画像から推定した環境パラメータ、
対象状態パラメータを目標とし、登録画像データベース
４０から取り出した登録画像の環境パラメータ、対象状
態パラメータを調整して登録画像から照合画像を生成す
る。なお、登録画像データベース４０に複数パターンの
登録画像を登録しておくことにより、入力画像の対象状
態パラメータともっとも近い対象状態パラメータを持つ
登録画像を選定して、照合画像を生成して入力画像との
誤差を小さくすることができる。
【００６０】また、実施形態２で説明したように、本実
施形態３においても照合画像と登録画像との照合処理に
おいて、アイゲンウィンドウ法に基づく部分画像ごとの
照合処理を行なう。照合に際して画像を複数の領域に分
割し、アイゲンウィンドウ法による照合処理をそれぞれ
の分割領域ごとに実行して一致度を計算し、前記それぞ
れ分割領域ごとに得られた一致度に対して設定した重み
づけを施した総計値を算出し、画像照合処理結果とす
る。
【００６１】上記のように登録画像を調整することによ
っても照合画像を生成することができる。
【００６２】（実施形態４）本発明の実施形態４の画像
照合・検索システムは、実施形態３と同様に、入力画像
ではなく、登録画像の環境パラメータ値および対象状態
パラメータ値を調整して照合画像を生成して、入力画像
と登録画像の差異を取り除いてから画像照合を行なう
が、登録画像として３次元顔画像モデル（ワイヤフレー
ムの３次元顔形状モデルと２次元の顔画像テクスチャデ
ータ）を用意し、３次元顔画像モデルを調整して入力画
像と同様の環境パラメータ値、対象状態パラメータ値を
持つ２次元画像を生成するものである。
【００６３】本実施形態４の画像照合・検索システムの
全体構成の概略は、実施形態１で説明した図１、実施形
態２で説明した図５と同様で良いが、照合画像生成処理
部３０における処理内容、登録画像データベース４０に
格納されるデータが異なっている。登録画像データベー
ス４０にはあらかじめ利用者の登録顔画像が３次元顔画
像モデルが格納されている。
【００６４】まず、利用者の顔画像を登録して、３次元
顔形状モデルと顔画像テクスチャを作成して登録画像デ
ータベース４０に登録する方法について説明する。
【００６５】図９に示すように、３次元顔画像登録フェ
ーズでは、２次元顔画像データに加えて高精度な３次元
顔画像データを得るために、被登録者を取り囲む形で設
置されたマルチビュー構成の複数台のカメラ（この例で
は５台のカメラ１１ａ〜１１ｅ）から複数の角度から撮
影した顔画像を取り込む。このマルチビュー構成によ
り、多視点顔画像を一度に取り込むことができる。ただ
し、シングルビュー構成（１台のカメラ構成）であって
も、例えば、被登録者の座る方向を少しずつ変えつつ撮
影することにより、多視点顔画像を取得することが可能
である。
【００６６】次に、撮影して取り込んだ多視点顔画像を
基に、顔形状の３次元モデルを計算する。この３次元形
状モデルの計算方法としては、例えば、多視点画像のそ
れぞれから画像特徴点を抽出し、異なる画像間での画像
特徴点同士を対応付けながら、それら画像特徴点に対応
する顔対象上の特徴点の３次元座標を推定する方法が採
用できる。
【００６７】上記のように作成された顔対象特徴点の３
次元座標群は３次元顔形状データとして、２次元顔画像
テクスチャとともに、登録画像データベース４０へ保存
される。
【００６８】次に、照合画像生成処理部３０における処
理内容を説明する。本実施形態４では、登録画像データ
ベース４０から得た３次元顔形状データと２次元顔画像
テクスチャに基づいて、入力画像の環境パラメータ、対
象状態パラメータに合わせた２次元顔画像を生成する。
具体的には、対象状態パラメータにより指定された視点
に対応するように３次元顔形状データを回転、変形する
調整を施した後、その上に２次元顔画像テクスチャを貼
りつけるテクスチャマッピング処理を行う。投影面に投
影した２次元顔画像を得れば良い。
【００６９】なお、２次元顔画像テクスチャデータに代
え、撮影して取り込んだ多視点画像のまま保持し、対象
状態パラメータに基づき調整した３次元顔形状モデルへ
の貼り込みの際に、近い撮影方向を持つ２つの多視点画
像を重み付きで合成して２次元顔画像を生成する方法も
可能である。
【００７０】他の環境パラメータ、付随物パラメータ、
表情パラメータなどは実施形態１で説明した方法により
調整する。
【００７１】上記の過程により、任意の視点からの顔画
像を３次元顔画像モデルを基に、高い精度で生成するこ
とが可能となり、入力画像の環境パラメータ、対象状態
パラメータに近似した照合対象画像を生成することがで
きる。
【００７２】なお、入力画像に関しては、２次元顔画像
の撮影で良い。画像入力部１０のカメラ１１は、様々な
場所に多くの台数（金融機関の現金自動処理システム、
建物の入退室システム）設置されることが想定され、カ
メラの設置コストや処理時間を考慮すれば、一台のカメ
ラから構成されるシングルビュー構成で良い。なお、入
力画像取得環境において、マルチビュー構成を採用した
場合には、画像照合において、２次元顔画像データの照
合処理に加えて、入力画像から計算される３次元顔画像
データと、登録画像データベース４０に登録された３次
元顔画像データを比較して照合処理を行うことができ、
より高精度な照合、認証が可能となる。
【００７３】（実施形態５）実施形態５の画像照合・検
索システムについて図面を参照しながら説明する。本実
施形態５は、実施形態１〜４に示した画像照合・検索シ
ステムをクライアントサーバ構成で構築した例である。
【００７４】図１０は、システムの全体概略構成を示し
ている。図１０に示すように、１００は画像照合・検索
サーバ、１０１は画像照合・検索クライアント、１０２
はネットワーク網である。画像照合・検索サーバ１００
内に示された入力画像環境対象推定処理部２０、照合画
像生成処理部３０、登録画像データベース４０、画像照
合処理部５０、ユーザインタフェース部６０、および、
画像照合・検索クライアント１０１内に示された画像入
力部１０は、それぞれ実施形態１〜４において同じ構成
名で説明したものと基本的に同じものである。また、図
示していないが、画像照合・検索サーバ１００、画像照
合・検索クライアント１０１はそれぞれネットワーク接
続のための通信インタフェースを備えている。ネットワ
ーク１０２は、データを通信できるものであれば良く、
ローカルエリアネットワーク、インターネットなどのネ
ットワーク網であり、専用線、公衆回線、有線、無線を
問わない。
【００７５】クライアントサーバ構成の画像照合・検索
システムによる処理の流れの全体像は以下の通りであ
る。まず、利用者は、画像入力部１０のカメラ１１から
自分の顔画像を入力する。もっとも撮影自体は利用者が
所定位置に立つことにより、カメラ１１から自動的に画
像を取り込んでも良い。撮影された入力画像は、画像照
合・検索クライアント１０１から通信インタフェースを
介してネットワーク網を経由して送信され、通信インタ
フェースを介して画像照合・検索サーバ２００に受信さ
れる。画像照合・検索サーバ１００において実施形態１
〜４で説明したものと同様の処理が行われ、照合結果を
もって認証が行なわれる。認証結果を基にその後のアプ
リケーション処理を画像照合・検索クライアント１０１
と画像照合・検索サーバ１００の間で実行される。
【００７６】以上のように、本発明の画像照合・検索シ
ステムはクライアントサーバシステムとして構築するこ
とができる。
【００７７】（実施形態６）本発明の実施形態６とし
て、画像照合・検索システムを実現するプログラムを記
録した記録媒体から当該プログラムをコンピュータシス
テムに読み取らせ、コンピュータを用いて本発明の画像
照合・検索システムを構築する例を示す。当該プログラ
ムは、図１１に図示した記録媒体の例に示すように、Ｃ
Ｄ−ＲＯＭ２０２ａやフレキシブルディスク２０２ｂ等
の可搬型記録媒体２０２だけでなく、ネットワーク上に
ある記録装置内の記録媒体２０１や、コンピュータのハ
ードディスクなどの記録媒体２０４のいずれであっても
良い。プログラム実行時には、当該プログラムはコンピ
ュータ２０３上にローディングされ、主メモリ上で実行
される。
【００７８】さらに、ソースプログラムをコンパイルし
たもののみならず、いわゆるネットワーク２０５を介し
てクライアントコンピュータ２０３にアプレットを送信
し、クライアントコンピュータ２０３上でインタープリ
タとして動作する構成であっても良い。
【００７９】
【発明の効果】以上のように本発明の画像照合・検索シ
ステムによれば、取り込んだ入力画像から環境パラメー
タ値および対象状態パラメータ値を取得し、登録画像の
環境パラメータ値および対象状態パラメータ値を目標と
して、入力画像のパラメータ値を調整して入力画像から
照合画像を生成して照合することができ、精度が高く、
かつ、ユーザフレンドリーな画像照合・検索システムを
提供することができる。
【００８０】本発明の画像照合・検索システムは、照合
処理において、取り込んだ入力画像から環境パラメータ
値および対象状態パラメータ値を調整して生成した照合
画像と登録画像を窓画像ごとに照合することができ、さ
らに照合精度を向上させることができる。
【００８１】また、本発明の画像照合・検索システムに
よれば、登録画像の環境パラメータ値および対象状態パ
ラメータ値を、入力画像の環境パラメータ値および対象
状態パラメータ値を目標として調整して照合画像を生成
し、入力画像と照合画像を照合処理する画像照合・検索
システムを提供することができる。登録画像として３次
元顔画像モデルを用意し、パラメータ値を調整して入力
画像に合わせた２次元画像を照合画像として生成するこ
とができ、さらに照合精度を向上させることができる。
【００８２】また、本発明の画像照合・検索システムは
クライアントサーバシステムとして構築することがで
き、本発明の画像照合・検索システムを実現するプログ
ラムを記録した記録媒体をコンピュータに読み取らせる
ことにより、コンピュータシステムを用いて本発明の画
像照合・検索システムを実現することができる。
【図面の簡単な説明】
【図１】 本発明の実施形態１の画像照合・検索システ
ムの概略構成図
【図２】 本発明の実施形態１の画像照合・検索システ
ムの処理ステップを示したフローチャート
【図３】 固有空間への投影の様子を示す図
【図４】 ユーザインタフェース部６０の表示部６１の
画面例を示す図
【図５】 本発明の実施形態２の画像照合・検索システ
ムの概略構成図
【図６】 本発明の実施形態２の画像照合・検索システ
ムの処理ステップを示したフローチャート
【図７】 本発明の実施形態２の画像照合・検索システ
ムのアイゲンウィンドウ法における窓画像切り出しおよ
び切り出した窓画像データを固有空間に投影した様子を
説明する図
【図８】 本発明の実施形態３の画像照合・検索システ
ムの概略構成図
【図９】 本発明の実施形態４の画像照合・検索システ
ムの登録画像を生成するマルチビュー構成の複数台のカ
メラによる撮影の様子を説明した図
【図１０】 本発明の実施形態５のクライアントサーバ
システムによる画像照合・検索システムの構成図
【図１１】 記録媒体の例を示す図
【符号の説明】 １０ 画像入力部 １１ カメラ １２ センサ ２０ 入力画像環境対象推定処理部 ３０ 照合画像生成処理部 ４０ 登録画像データベース ５０，５０ａ 画像照合処理部 ５１ 画像領域分割部 ５２ アイゲンウィンドウ照合処理部 ５３ 重み付け評価部 ６０ ユーザーインタフェース部 ６１ 画像表示部 ６２ 入力装置 １００ 画像照合・検索サーバ １０１ 画像照合・検索クライアント １０２ ネットワーク網 ２０１ 回線先のハードディスク等の記録媒体 ２０２ ＣＤ−ＲＯＭやフレキシブルディスク等の可搬
型記録媒体 ２０２−１ ＣＤ−ＲＯＭ ２０２−２ フレキシブルディスク ２０３ コンピュータ ２０４ コンピュータ上のＲＡＭ／ハードディスク等の
記録媒体 ２０５ ネットワーク
フロントページの続き Ｆターム(参考） 5B043 AA09 BA04 CA09 DA05 EA12 EA13 EA15 FA02 FA03 FA07 GA18 5B057 AA20 BA02 CA12 CA16 CB12 CB16 DB02 DC33 5L096 AA13 BA08 CA02 FA28 GA19 HA09 JA09

Claims (16)

    【特許請求の範囲】
  1. 【請求項１】 入力された画像と、あらかじめ登録済み
    の登録画像を比較照合することにより、入力画像中に存
    在する対象物を照合、推定する画像照合・検索システム
    において、 入力画像を基に撮影環境の状態を示す環境パラメータお
    よび対象物の状態を示す対象状態パラメータを推定する
    入力画像環境対象推定処理部と、 前記登録画像の環境パラメータ値および対象状態パラメ
    ータ値に基づいて、前記入力画像環境対象推定処理部に
    より推定された入力画像の環境パラメータ値および対象
    状態パラメータ値を調整することにより、前記入力画像
    を基に前記登録画像の撮影環境および対象物状態に対応
    する照合画像を生成する照合画像生成処理部と、 前記照合画像と前記登録画像を比較・照合することによ
    り照合結果を出力する画像照合処理部とを備えたことを
    特徴とする画像照合・検索システム。
  2. 【請求項２】 入力された画像と、あらかじめ登録済み
    の登録画像を比較照合することにより、入力画像中に存
    在する対象物を照合、推定する画像照合・検索システム
    において、 入力画像を基に撮影環境の状態を示す環境パラメータお
    よび対象物の状態を示す対象状態パラメータを推定する
    入力画像環境対象推定処理部と、 前記入力画像環境対象推定処理部により推定された入力
    画像の環境パラメータ値および対象状態パラメータ値を
    目標として、前記登録画像の環境パラメータ値および対
    象状態パラメータ値を調整することにより、前記登録画
    像を基に前記入力画像の撮影環境および対象物状態に対
    応する照合画像を生成する照合画像生成処理部と、 前記入力画像と前記照合画像を比較・照合することによ
    り照合結果を出力する画像照合処理部とを備えたことを
    特徴とする画像照合・検索システム。
  3. 【請求項３】 前記入力画像の撮影場所に設置されたセ
    ンサから、撮影環境、対象物の状態に関する実測データ
    が得られる場合に、前記入力画像環境対象推定処理部
    は、入力画像および前記実測値を基に入力画像の環境パ
    ラメータおよび対象状態パラメータを推定する請求項１
    または２に記載の画像照合・検索システム。
  4. 【請求項４】 前記入力画像環境対象推定処理部が推定
    する入力画像の撮影環境が、撮影時の照明条件であり、
    前記環境パラメータが照明に関する状態を推定する照明
    パラメータを含む請求項１または２に記載の画像照合・
    検索システム。
  5. 【請求項５】 前記入力画像環境対象推定処理部が推定
    する入力画像の撮影環境が、撮影に利用したカメラの機
    器性能に依存するカメラ条件であり、前記環境パラメー
    タがカメラ条件を推定するカメラパラメータを含む請求
    項１または２に記載の画像照合・検索システム。
  6. 【請求項６】 前記入力画像環境対象推定処理部の推定
    する入力画像の対象状態が、対象物の撮影方向と撮影ポ
    ジションの条件であり、前記対象状態パラメータが対象
    物の撮影方向と撮影ポジションに関する状態を推定する
    ポジションパラメータを含む請求項１または２に記載の
    画像照合・検索システム。
  7. 【請求項７】 前記入力画像環境対象推定処理部が推定
    する入力画像の対象状態が、対象物に付随物を伴ってい
    るか否かの付随物条件であり、前記対象状態パラメータ
    が対象物に付随物を伴っているか否かに関する状態を推
    定する付随物パラメータを含む請求項１または２に記載
    の画像照合・検索システム。
  8. 【請求項８】 前記入力画像および登録画像が人物の顔
    を写した顔画像であり、前記画像照合処理部による比較
    ・照合結果により人物認証を行う請求項１または２に記
    載の画像照合・検索システム。
  9. 【請求項９】 前記入力画像環境対象推定処理部が推定
    する入力画像の対象状態が、入力顔画像の表情であり、
    前記対象状態パラメータが入力顔画像の表情に関する状
    態を推定する表情パラメータを含む請求項８に記載の画
    像照合・検索システム。
  10. 【請求項１０】 前記対象物を撮影した登録画像とし
    て、異なる対象状態パラメータを持つ画像を複数登録し
    ておき、前記照合画像生成処理部は、前記対象物を撮影
    した複数の登録画像のうち、前記入力画像の対象状態パ
    ラメータともっとも近い対象状態パラメータを持つ登録
    画像を選定し、前記選定した登録画像から前記入力画像
    撮影環境、撮影状態に合わせた照合画像を生成する請求
    項２に記載の画像照合・検索システム。
  11. 【請求項１１】 前記登録画像の画像データとともに３
    次元形状データを保持し、前記照合画像生成処理部は、
    前記入力画像環境対象推定処理部により推定された入力
    画像の環境パラメータ情報および対象状態パラメータに
    基づいて前記３次元形状データを調整し、前記入力画像
    撮影環境、撮影状態に合わせた２次元の照合画像を生成
    する請求項２に記載の画像照合・検索システム。
  12. 【請求項１２】 前記入力画像環境対象推定処理部は、
    前記環境パラメータおよび対象状態パラメータの推定処
    理における推定誤差を前記画像照合処理部に通知し、前
    記画像照合処理部は、前記推定誤差範囲内に対応するす
    べての照合画像と一致の度合が高いものを、照合結果の
    候補として出力する請求項１または２に記載の画像照合
    ・検索システム。
  13. 【請求項１３】 前記画像照合処理部は、画像を複数の
    領域に分割し、照合処理をそれぞれの分割領域ごとに実
    行して一致度を計算し、前記それぞれ分割領域ごとに得
    られた一致度に対して設定した重みづけを施した総計値
    を算出し、画像照合処理結果とする請求項１または２に
    記載の画像照合・検索システム。
  14. 【請求項１４】 前記入力画像の入力を受け付ける画像
    入力部を備えた画像照合・検索クライアントと、前記入
    力画像環境対象推定処理部と前記照合画像生成処理部と
    前記画像照合処理部とを備えた画像照合・検索サーバを
    備え、前記画像入力クライアントと前記画像照合・検索
    サーバがコンピュータネットワークを介して接続された
    請求項１または２に記載の画像照合・検索システム。
  15. 【請求項１５】 入力された画像と、あらかじめ登録済
    みの登録画像を比較照合することにより、入力画像中に
    存在する対象物を照合、推定する画像照合・検索システ
    ムを実現する処理プログラムを記録したコンピュータ読
    み取り可能な記録媒体であって、 入力画像を基に撮影環境の状態を示す環境パラメータお
    よび対象物の状態を示す対象状態パラメータを推定する
    入力画像環境対象推定処理ステップと、 前記登録画像の環境パラメータ値および対象状態パラメ
    ータ値に基づいて、前記入力画像環境対象推定処理ステ
    ップにより推定された入力画像の環境パラメータ値およ
    び対象状態パラメータ値を調整することにより、前記入
    力画像を基に前記登録画像の撮影環境および対象物状態
    に対応する照合画像を生成する照合画像生成処理ステッ
    プと、 前記照合画像と前記登録画像を比較・照合することによ
    り照合結果を出力する画像照合処理ステップとを備えた
    処理プログラムを記録したことを特徴とする記録媒体。
  16. 【請求項１６】 入力された画像と、あらかじめ登録済
    みの登録画像を比較照合することにより、入力画像中に
    存在する対象物を照合、推定する画像照合・検索システ
    ムを実現する処理プログラムを記録したコンピュータ読
    み取り可能な記録媒体であって、 入力画像を基に撮影環境の状態を示す環境パラメータお
    よび対象物の状態を示す対象状態パラメータを推定する
    入力画像環境対象推定処理ステップと、 前記入力画像環境対象推定処理ステップにより推定され
    た入力画像の環境パラメータ値および対象状態パラメー
    タ値を目標として、前記登録画像の環境パラメータ値お
    よび対象状態パラメータ値を調整することにより、前記
    登録画像を基に前記入力画像の撮影環境および対象物状
    態に対応する照合画像を生成する照合画像生成処理ステ
    ップと、 前記入力画像と前記照合画像を比較・照合することによ
    り照合結果を出力する画像照合処理ステップとを備えた
    処理プログラムを記録したことを特徴とする記録媒体。
JP11110020A 1999-04-16 1999-04-16 画像照合・検索システム Withdrawn JP2000306095A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP11110020A JP2000306095A (ja) 1999-04-16 1999-04-16 画像照合・検索システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP11110020A JP2000306095A (ja) 1999-04-16 1999-04-16 画像照合・検索システム

Publications (1)

Publication Number Publication Date
JP2000306095A true JP2000306095A (ja) 2000-11-02

Family

ID=14525096

Family Applications (1)

Application Number Title Priority Date Filing Date
JP11110020A Withdrawn JP2000306095A (ja) 1999-04-16 1999-04-16 画像照合・検索システム

Country Status (1)

Country Link
JP (1) JP2000306095A (ja)

Cited By (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002222421A (ja) * 2001-01-29 2002-08-09 Namco Ltd パターン認識処理装置、方法および情報記憶媒体
JP2003063747A (ja) * 2001-08-24 2003-03-05 Toshiba Elevator Co Ltd エレベータの監視システム
WO2003052690A1 (fr) * 2001-12-14 2003-06-26 Nec Corporation Creation de metadonnees faciales et calcul de similarites faciales
WO2004003832A2 (en) * 2002-06-27 2004-01-08 Koninklijke Philips Electronics N.V. Face recognition using evolutionary algorithms
WO2004025564A1 (ja) * 2002-08-30 2004-03-25 Nec Corporation 顔向き推定装置および顔向き推定方法ならびに顔向き推定プログラム
JP2004118627A (ja) * 2002-09-27 2004-04-15 Toshiba Corp 人物認証装置および人物認証方法
WO2004088590A1 (ja) * 2003-03-28 2004-10-14 Fujitsu Limited 撮影装置および個人識別システム
WO2005008593A1 (ja) * 2003-07-18 2005-01-27 Canon Kabushiki Kaisha 画像処理装置、撮像装置、画像処理方法
US6888955B2 (en) 2000-04-25 2005-05-03 Fujitsu Limited Picture recognition apparatus and method
WO2005111935A1 (ja) * 2004-05-19 2005-11-24 Global Seculity Design, Inc. ログインシステム
JP2006163950A (ja) * 2004-12-08 2006-06-22 Advanced Telecommunication Research Institute International 固有空間学習装置、固有空間学習方法及び固有空間プログラム
JP2006301970A (ja) * 2005-04-20 2006-11-02 Sharp Corp 認証装置、認証システム、認証方法、プログラム、および、プログラムを記録したコンピュータ読み取り可能な記録媒体
JP2007058397A (ja) * 2005-08-23 2007-03-08 Konica Minolta Holdings Inc 認証システム、登録システム及び証明用媒体
JP2007086868A (ja) * 2005-09-20 2007-04-05 Hitachi Ltd 認証装置、ｉｃカード、及び生体情報認証システム
US7227973B2 (en) 2000-04-03 2007-06-05 Nec Corporation Device, method and record medium for image comparison
JP2007520002A (ja) * 2004-01-30 2007-07-19 セダラ ソフトウェア コーポレイション 能動外観モデルを画像解析へ応用するシステム及び方法
US7248721B2 (en) 2002-03-29 2007-07-24 Nec Corporation Identification of facial image with high accuracy
JP2007257658A (ja) * 2007-05-07 2007-10-04 Fujitsu Ltd 撮影装置および個人識別システム
JP2008501172A (ja) * 2004-05-28 2008-01-17 ソニー・ユナイテッド・キングダム・リミテッド 画像比較方法
KR100815242B1 (ko) 2006-06-13 2008-03-19 한국과학기술원 진화 알고리즘을 이용한 얼굴 검출 방법
JP2008067788A (ja) * 2006-09-12 2008-03-27 Aruze Corp サンド装置、入金残高精算機、管理サーバ及び遊技システム
JP2008243217A (ja) * 2001-01-30 2008-10-09 Nec Corp ロボット装置、照合環境判定方法、及び照合環境判定プログラム
WO2009011401A1 (ja) * 2007-07-19 2009-01-22 Nec Corporation 生体情報記録装置、生体情報記録方法および生体情報記録用プログラム
JP2009246799A (ja) * 2008-03-31 2009-10-22 Secom Co Ltd 画像監視装置
JP2009253764A (ja) * 2008-04-08 2009-10-29 Fujifilm Corp 画像処理システム、画像処理方法、およびプログラム
JP2009258990A (ja) * 2008-04-16 2009-11-05 Panasonic Electric Works Co Ltd 顔認証装置及び顔認証方法
JP2009273117A (ja) * 2008-04-07 2009-11-19 Fujifilm Corp 画像処理システム、画像処理方法、およびプログラム
US7706601B2 (en) 2003-08-29 2010-04-27 Nec Corporation Object posture estimation/correlation system using weight information
JP2011018362A (ja) * 2003-07-18 2011-01-27 Canon Inc 画像処理装置、撮像装置、画像処理方法
JP2011070623A (ja) * 2009-08-31 2011-04-07 Sony Corp 画像処理装置および画像処理方法、並びにプログラム
EP2367139A1 (en) 2010-03-15 2011-09-21 Omron Corporation Matching device, digital image processing system, matching device control program, computer-readable recording medium, and matching device control method
JP2011203822A (ja) * 2010-03-24 2011-10-13 Sony Corp 生体認証装置、生体認証方法及びプログラム
JP2011210114A (ja) * 2010-03-30 2011-10-20 Secom Co Ltd 顔画像処理装置
JP2012073905A (ja) * 2010-09-29 2012-04-12 Hitachi Ltd 生体認証装置
US8249313B2 (en) 2007-09-25 2012-08-21 Casio Computer Co., Ltd. Image recognition device for performing image recognition including object identification on each of input images
JP2012160001A (ja) * 2011-01-31 2012-08-23 Secom Co Ltd 顔画像認証装置
US8447128B2 (en) 2008-04-07 2013-05-21 Fujifilm Corporation Image processing system
JP2013210844A (ja) * 2012-03-30 2013-10-10 Secom Co Ltd 画像照合装置
JP2014071610A (ja) * 2012-09-28 2014-04-21 Keyware Solutions Inc データ処理装置、名寄せ処理方法及びコンピュータプログラム
US8792686B2 (en) 2011-01-25 2014-07-29 Fujitsu Limited Biometric authentication device, method of controlling biometric authentication device and non-transitory, computer readable storage medium
JP2016128733A (ja) * 2015-01-09 2016-07-14 三菱電機株式会社 加熱調理器
JP2016212615A (ja) * 2015-05-08 2016-12-15 雅之 澤田 同一人物映像に対する顔画像間欠切出し制御機構を用いたターゲット発見システム
JP6246440B1 (ja) * 2016-10-31 2017-12-13 株式会社オプティム 画像解析システム、画像解析方法、およびプログラム
JP6246441B1 (ja) * 2016-10-31 2017-12-13 株式会社オプティム 画像解析システム、画像解析方法、およびプログラム
JP2019200447A (ja) * 2018-05-14 2019-11-21 富士ゼロックス株式会社 同一性判定装置、同一性判定システムおよびプログラム
JP2020107038A (ja) * 2018-12-27 2020-07-09 日本電気株式会社 情報処理装置、情報処理方法及びプログラム
WO2020179240A1 (ja) * 2019-03-01 2020-09-10 株式会社日立国際電気 画像照合システム
JP2021043995A (ja) * 2020-11-10 2021-03-18 株式会社ニコン 電子機器
US10956717B2 (en) 2016-08-08 2021-03-23 Panasonic Intellectual Property Management Co., Ltd. Collator and method for displaying result of collation
US11157760B2 (en) 2017-12-21 2021-10-26 Samsung Electronics Co., Ltd. Liveness test method and apparatus
JP7199134B1 (ja) 2022-03-29 2023-01-05 株式会社オプティム プログラム、方法、情報処理装置、システム
US11971924B2 (en) 2017-12-21 2024-04-30 Samsung Electronics Co., Ltd. Liveness test method and apparatus

Cited By (74)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7227973B2 (en) 2000-04-03 2007-06-05 Nec Corporation Device, method and record medium for image comparison
US6888955B2 (en) 2000-04-25 2005-05-03 Fujitsu Limited Picture recognition apparatus and method
JP4578000B2 (ja) * 2001-01-29 2010-11-10 株式会社バンダイナムコゲームス パターン認識処理装置、方法および情報記憶媒体
JP2002222421A (ja) * 2001-01-29 2002-08-09 Namco Ltd パターン認識処理装置、方法および情報記憶媒体
JP2008243217A (ja) * 2001-01-30 2008-10-09 Nec Corp ロボット装置、照合環境判定方法、及び照合環境判定プログラム
JP2003063747A (ja) * 2001-08-24 2003-03-05 Toshiba Elevator Co Ltd エレベータの監視システム
WO2003052690A1 (fr) * 2001-12-14 2003-06-26 Nec Corporation Creation de metadonnees faciales et calcul de similarites faciales
US7593551B2 (en) 2001-12-14 2009-09-22 Nec Corporation Face meta-data generation and face similarity calculation
US7248721B2 (en) 2002-03-29 2007-07-24 Nec Corporation Identification of facial image with high accuracy
US7308120B2 (en) 2002-03-29 2007-12-11 Nec Corporation Identification of facial image with high accuracy
WO2004003832A2 (en) * 2002-06-27 2004-01-08 Koninklijke Philips Electronics N.V. Face recognition using evolutionary algorithms
WO2004003832A3 (en) * 2002-06-27 2004-05-21 Koninkl Philips Electronics Nv Face recognition using evolutionary algorithms
WO2004025564A1 (ja) * 2002-08-30 2004-03-25 Nec Corporation 顔向き推定装置および顔向き推定方法ならびに顔向き推定プログラム
JP2004118627A (ja) * 2002-09-27 2004-04-15 Toshiba Corp 人物認証装置および人物認証方法
KR100732136B1 (ko) * 2003-03-28 2007-06-27 후지쯔 가부시끼가이샤 촬영 장치 및 개인 식별 시스템
WO2004088590A1 (ja) * 2003-03-28 2004-10-14 Fujitsu Limited 撮影装置および個人識別システム
CN100361160C (zh) * 2003-03-28 2008-01-09 富士通株式会社 摄影装置及个人识别系统
US7340159B2 (en) 2003-03-28 2008-03-04 Fujitsu Limited Image taking device and personal identification system
JP2011018362A (ja) * 2003-07-18 2011-01-27 Canon Inc 画像処理装置、撮像装置、画像処理方法
US8515136B2 (en) 2003-07-18 2013-08-20 Canon Kabushiki Kaisha Image processing device, image device, image processing method
US8942436B2 (en) 2003-07-18 2015-01-27 Canon Kabushiki Kaisha Image processing device, imaging device, image processing method
WO2005008593A1 (ja) * 2003-07-18 2005-01-27 Canon Kabushiki Kaisha 画像処理装置、撮像装置、画像処理方法
US7706601B2 (en) 2003-08-29 2010-04-27 Nec Corporation Object posture estimation/correlation system using weight information
JP2007520002A (ja) * 2004-01-30 2007-07-19 セダラ ソフトウェア コーポレイション 能動外観モデルを画像解析へ応用するシステム及び方法
WO2005111935A1 (ja) * 2004-05-19 2005-11-24 Global Seculity Design, Inc. ログインシステム
JP2008501172A (ja) * 2004-05-28 2008-01-17 ソニー・ユナイテッド・キングダム・リミテッド 画像比較方法
JP4505616B2 (ja) * 2004-12-08 2010-07-21 株式会社国際電気通信基礎技術研究所 固有空間学習装置、固有空間学習方法及び固有空間プログラム
JP2006163950A (ja) * 2004-12-08 2006-06-22 Advanced Telecommunication Research Institute International 固有空間学習装置、固有空間学習方法及び固有空間プログラム
JP4633527B2 (ja) * 2005-04-20 2011-02-16 シャープ株式会社 認証装置、認証システム、認証装置の制御方法、プログラム、および、プログラムを記録したコンピュータ読み取り可能な記録媒体
JP2006301970A (ja) * 2005-04-20 2006-11-02 Sharp Corp 認証装置、認証システム、認証方法、プログラム、および、プログラムを記録したコンピュータ読み取り可能な記録媒体
JP2007058397A (ja) * 2005-08-23 2007-03-08 Konica Minolta Holdings Inc 認証システム、登録システム及び証明用媒体
JP2007086868A (ja) * 2005-09-20 2007-04-05 Hitachi Ltd 認証装置、ｉｃカード、及び生体情報認証システム
KR100815242B1 (ko) 2006-06-13 2008-03-19 한국과학기술원 진화 알고리즘을 이용한 얼굴 검출 방법
JP2008067788A (ja) * 2006-09-12 2008-03-27 Aruze Corp サンド装置、入金残高精算機、管理サーバ及び遊技システム
JP2007257658A (ja) * 2007-05-07 2007-10-04 Fujitsu Ltd 撮影装置および個人識別システム
WO2009011401A1 (ja) * 2007-07-19 2009-01-22 Nec Corporation 生体情報記録装置、生体情報記録方法および生体情報記録用プログラム
US8249313B2 (en) 2007-09-25 2012-08-21 Casio Computer Co., Ltd. Image recognition device for performing image recognition including object identification on each of input images
JP2009246799A (ja) * 2008-03-31 2009-10-22 Secom Co Ltd 画像監視装置
JP2009273117A (ja) * 2008-04-07 2009-11-19 Fujifilm Corp 画像処理システム、画像処理方法、およびプログラム
US8447128B2 (en) 2008-04-07 2013-05-21 Fujifilm Corporation Image processing system
JP2009253764A (ja) * 2008-04-08 2009-10-29 Fujifilm Corp 画像処理システム、画像処理方法、およびプログラム
JP2009258990A (ja) * 2008-04-16 2009-11-05 Panasonic Electric Works Co Ltd 顔認証装置及び顔認証方法
JP2011070623A (ja) * 2009-08-31 2011-04-07 Sony Corp 画像処理装置および画像処理方法、並びにプログラム
EP2367139A1 (en) 2010-03-15 2011-09-21 Omron Corporation Matching device, digital image processing system, matching device control program, computer-readable recording medium, and matching device control method
US8929611B2 (en) 2010-03-15 2015-01-06 Omron Corporation Matching device, digital image processing system, matching device control program, computer-readable recording medium, and matching device control method
JP2011203822A (ja) * 2010-03-24 2011-10-13 Sony Corp 生体認証装置、生体認証方法及びプログラム
JP2011210114A (ja) * 2010-03-30 2011-10-20 Secom Co Ltd 顔画像処理装置
JP2012073905A (ja) * 2010-09-29 2012-04-12 Hitachi Ltd 生体認証装置
US8792686B2 (en) 2011-01-25 2014-07-29 Fujitsu Limited Biometric authentication device, method of controlling biometric authentication device and non-transitory, computer readable storage medium
JP2012160001A (ja) * 2011-01-31 2012-08-23 Secom Co Ltd 顔画像認証装置
JP2013210844A (ja) * 2012-03-30 2013-10-10 Secom Co Ltd 画像照合装置
JP2014071610A (ja) * 2012-09-28 2014-04-21 Keyware Solutions Inc データ処理装置、名寄せ処理方法及びコンピュータプログラム
JP2016128733A (ja) * 2015-01-09 2016-07-14 三菱電機株式会社 加熱調理器
JP2016212615A (ja) * 2015-05-08 2016-12-15 雅之 澤田 同一人物映像に対する顔画像間欠切出し制御機構を用いたターゲット発見システム
US10956717B2 (en) 2016-08-08 2021-03-23 Panasonic Intellectual Property Management Co., Ltd. Collator and method for displaying result of collation
WO2018078862A1 (ja) * 2016-10-31 2018-05-03 株式会社オプティム 画像解析システム、画像解析方法、およびプログラム
WO2018078861A1 (ja) * 2016-10-31 2018-05-03 株式会社オプティム 画像解析システム、画像解析方法、およびプログラム
US10440331B2 (en) 2016-10-31 2019-10-08 Optim Corporation System, method, and program for image analysis
US10535154B2 (en) 2016-10-31 2020-01-14 Optim Corporation System, method, and program for image analysis
JP6246441B1 (ja) * 2016-10-31 2017-12-13 株式会社オプティム 画像解析システム、画像解析方法、およびプログラム
JP6246440B1 (ja) * 2016-10-31 2017-12-13 株式会社オプティム 画像解析システム、画像解析方法、およびプログラム
US11157760B2 (en) 2017-12-21 2021-10-26 Samsung Electronics Co., Ltd. Liveness test method and apparatus
US11971924B2 (en) 2017-12-21 2024-04-30 Samsung Electronics Co., Ltd. Liveness test method and apparatus
JP2019200447A (ja) * 2018-05-14 2019-11-21 富士ゼロックス株式会社 同一性判定装置、同一性判定システムおよびプログラム
JP7043967B2 (ja) 2018-05-14 2022-03-30 富士フイルムビジネスイノベーション株式会社 同一性判定装置、同一性判定システムおよびプログラム
JP2020107038A (ja) * 2018-12-27 2020-07-09 日本電気株式会社 情報処理装置、情報処理方法及びプログラム
JP7247579B2 (ja) 2018-12-27 2023-03-29 日本電気株式会社 情報処理装置、情報処理方法及びプログラム
JPWO2020179240A1 (ja) * 2019-03-01 2021-12-16 株式会社日立国際電気 画像照合システム
JP7214830B2 (ja) 2019-03-01 2023-01-30 株式会社日立国際電気 画像照合システム
WO2020179240A1 (ja) * 2019-03-01 2020-09-10 株式会社日立国際電気 画像照合システム
JP2021043995A (ja) * 2020-11-10 2021-03-18 株式会社ニコン 電子機器
JP7167973B2 (ja) 2020-11-10 2022-11-09 株式会社ニコン 電子機器
JP7199134B1 (ja) 2022-03-29 2023-01-05 株式会社オプティム プログラム、方法、情報処理装置、システム
JP2023145964A (ja) * 2022-03-29 2023-10-12 株式会社オプティム プログラム、方法、情報処理装置、システム

Similar Documents

Publication Publication Date Title
JP2000306095A (ja) 画像照合・検索システム
JP4241763B2 (ja) 人物認識装置及びその方法
EP1629415B1 (en) Face identification verification using frontal and side views
JP3954484B2 (ja) 画像処理装置およびプログラム
TW202026948A (zh) 活體檢測方法、裝置以及儲存介質
JP2014182480A (ja) 人物認識装置、及び方法
JP6822482B2 (ja) 視線推定装置、視線推定方法及びプログラム記録媒体
JP2016170542A (ja) 画像処理装置、画像処理方法及びプログラム
JP7192872B2 (ja) 虹彩認証装置、虹彩認証方法、虹彩認証プログラムおよび記録媒体
JPWO2009004916A1 (ja) なりすまし検知システム、なりすまし検知方法およびなりすまし検知用プログラム
JP4952267B2 (ja) ３次元形状処理装置、３次元形状処理装置の制御方法、および３次元形状処理装置の制御プログラム
JP2008204200A (ja) 顔解析システム及びプログラム
WO2020065954A1 (ja) 認証装置、認証方法および記憶媒体
Dospinescu et al. Face detection and face recognition in android mobile applications
KR20020022295A (ko) 3차원 정보를 이용한 얼굴 인식 장치 및 방법
JP3577908B2 (ja) 顔画像認識システム
JP2002189724A (ja) 画像データ検索装置
JP4814666B2 (ja) 顔解析システム
JP2001092963A (ja) 画像照合方法および装置
JP2006293720A (ja) 顔検出装置、顔検出方法、及び顔検出プログラム
JP4141090B2 (ja) 画像認識装置、陰影除去装置、陰影除去方法及び記録媒体
JP7386630B2 (ja) 画像処理装置、画像処理装置の制御方法及びプログラム
CN108875472A (zh) 图像采集装置及基于该图像采集装置的人脸身份验证方法
JP2019032694A (ja) 情報処理装置、システム、情報処理方法及びプログラム
KR19990079823A (ko) 조명변화를 고려한 얼굴 인식 방법

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20060704