WO2025230002A1 - 個人認証システム、個人認証方法、およびプログラム、並びに個人認証システムを用いたシステム - Google Patents

Abstract

認証性能の保証や改善、または利便性の向上などを実現し得る個人認証システム等を提供する。 個人認証システムは、利用者の耳の外耳孔に挿入され、外耳道内の複数の画像データを取得するセンサ２０を備えている。また、センサ２０により取得された複数の画像データを学習データとして特徴量を抽出する特徴量抽出部１０５，１０６と、得られた特徴量から、利用者を特定し得る登録モデルを生成する特徴量統合部１０７と、登録モデルを用いて、センサ２０により取得された複数の画像データに基づいて利用者を認証する認証部１０９と、を有する個人認証装置１０を備えている。

Description

個人認証システム、個人認証方法、およびプログラム、並びに個人認証システムを用いたシステム

　本発明は、外耳道内の撮影画像に基づいて個人認証を行う個人認証システム、個人認証方法、およびプログラム、並びに個人認証システムを用いたシステムに関する。

　近年、様々な分野において生体認証（バイオメトリクス）技術が使われている。生体認証とは、人間の身体的特徴や行動的特徴などといった生体的特徴によって個人を認証する技術である。生体認証に用いられる主な身体的特徴として、指紋、網膜、虹彩、掌形、顔などがある。また、生体認証に用いられる主な行動的特徴として、筆跡、音声、歩き方などがある。なお、生体認証が使用される場面においては、金庫を開ける鍵や入退出時に提示するＩＤカードなどをユーザが持ち歩く必要がない。そのため、鍵やＩＤカードを紛失したり、盗まれたり、偽造されたりする恐れもない。また、ＩＤ（アカウント）やパスワードを記憶する必要もない。よって、生体認証は利便性やセキュリティ性が高く、大変有用な技術として知られている。

　ここで、特に耳に着目した生体認証に関する先行技術として、特許文献１に記載の個人認証装置等がある。
　特許文献１に記載の個人認証装置は、外耳道における異なる複数の生体情報を取得して、当該異なる複数の生体情報の特徴量を、機械学習を用いて抽出し個人認証を行う装置である。また、この個人認証装置は、利用者の外耳道内の音響データを取得する第１のセンサ、利用者の外耳道内の画像データを取得する第２のセンサ、利用者の外耳道内の生化学データを取得する第３のセンサ、のうち、２以上のセンサから取得されるデータに基づいて特徴量を抽出する特徴量抽出部と、特徴量抽出部により抽出された２以上の特徴量に基づいて、個人性統合ニューラルネットワークを構築し、利用者を統合データに基づいて判定する判定部と、を有している。

特開２０２３－１４８１２８号公報

　特許文献１に記載の個人認証装置等は、従来の生体認証方法と比較して、複数の近接する認証方法を組み合わせることが容易にできるため、認証性能を大幅に改善することができ得るものである。また、利用環境や個人の体調などが変化しても、異なる認証方法間で互いに補い合うことができるため、頑健性の向上が期待できるものである。

　しかし、生体認証に関する技術において、周囲環境の影響を受けない安定した認証性能の保証や、認証性能の改善、または利用者等にとっての利便性の向上などが求められている。
　よって、本発明は、認証性能の保証や改善、または利便性の向上などを実現し得る個人認証システム、個人認証方法、およびプログラム、並びに個人認証システムを用いたシステムを提供する。

　本発明の個人認証システムは、外耳道内の撮影画像に基づいて個人認証を行う個人認証システムであって、
　利用者の右耳の外耳孔に挿入され、外耳道内の画像データを取得する第１のセンサおよび／または利用者の左耳の外耳孔に挿入され、外耳道内の画像データを取得する第２のセンサと、
　第１のセンサおよび／または第２のセンサと通信可能な個人認証装置であり、第１のセンサにより取得された画像データを学習データとして第１の特徴量を抽出する第１の特徴量抽出部および／または第２のセンサにより取得された画像データを学習データとして第２の特徴量を抽出する第２の特徴量抽出部と、第１の特徴量および／または第２の特徴量により得られた統合特徴量から、利用者を特定し得る登録モデルを生成する特徴量統合部と、登録モデルを用いて、第１のセンサおよび／または第２のセンサにより取得された画像データに基づいて利用者を認証する認証部と、を有する個人認証装置と、
を備えている。

　ここで、第１のセンサおよび／または第２のセンサは動画撮影機能を有しており、認証部は、第１のセンサおよび第２のセンサにより撮影された外耳道内の入り口から鼓膜付近までの動画における複数の画像データに基づいて、利用者を認証する構成であることが好ましい。

　また、第１のセンサおよび／または第２のセンサは外耳道内を照らすライトを有しており、個人認証装置は、第１のセンサおよび／または第２のセンサにより取得された画像データが不明瞭なものであるか否かを判定する画像判定部を有しており、画像判定部は、画像データが不明瞭なものであると判定した場合、第１のセンサおよび／または第２のセンサのライトの照射方向を制御する構成であることが好ましい。

　若しくは、第１のセンサおよび／または第２のセンサは通話機能を有しており、個人認証装置は、第１のセンサおよび／または第２のセンサにより取得された画像データが不明瞭なものであるか否かを判定する画像判定部を有しており、画像判定部は、画像データが不明瞭なものであると判定した場合、第１のセンサおよび／または第２のセンサを介して、利用者に第１のセンサおよび／または第２のセンサの装着位置を動かす旨を伝える構成であることが好ましい。

　若しくは、個人認証装置は、第１のセンサおよび／または第２のセンサにより取得された画像データが不明瞭なものであるか否かを判定する画像判定部と、画像判定部が、画像データが不明瞭なものであると判定した場合、当該画像データに含まれるノイズを除去する画像処理部と、を有する構成であることが好ましい。

　若しくは、第１のセンサおよび／または第２のセンサは、定められたタイミングおよび／または外部装置から指示を受けたタイミングで外耳道内の画像データを取得し、個人認証装置は、当該画像データに基づいて得られた統合特徴量に基づいて登録モデルを更新する構成であることが好ましい。

　若しくは、個人認証装置は、第１のセンサおよび／または第２のセンサにより取得された画像データに耳垢および／または耳毛が含まれているか否かを判定する画像判定部と、画像判定部が、画像データに耳垢および／または耳毛が含まれていると判定した場合、当該画像データに含まれている耳垢および／または耳毛を除去する画像処理部と、を有する構成であることが好ましい。

　若しくは、個人認証装置は、第１のセンサおよび／または第２のセンサにより取得された画像データに耳垢および／または耳毛が含まれているか否かを判定する画像判定部を有しており、第１の特徴量抽出部、第２の特徴量抽出部、および特徴量統合部は、画像判定部が、画像データに耳垢および／または耳毛が含まれていると判定した場合、当該画像データに基づいて統合特徴量を得て、認証部は、当該統合特徴量から生成された登録モデルを用いて、第１のセンサおよび第２のセンサにより取得された耳垢および／または耳毛が含まれている画像データに基づいて利用者を認証する構成であることが好ましい。

　若しくは、個人認証装置は、第１のセンサおよび／または第２のセンサにより取得された画像データに耳垢および／または耳毛が含まれているか否かを判定する画像判定部と、画像判定部が、画像データに耳垢および／または耳毛が含まれていないと判定した場合、当該画像データに耳垢および／または耳毛が含まれるように当該画像データを加工する画像処理部と、を有し、第１の特徴量抽出部、第２の特徴量抽出部、および特徴量統合部は、画像処理部により加工された画像データに基づいて統合特徴量を得て、登録モデルを生成する構成であることが好ましい。

　なお、第１のセンサおよび／または第２のセンサは、本体部と、カメラと、本体部に取り付けられ本体部とカメラとを連結する突起状の土台と、を有し、土台の取り付け位置は、利用者の外耳道内の形状および／または鼓膜の位置に応じて変更可能ものである構成であることが好ましい。

　さらに、本発明の個人認証システムは、外耳道内の撮影画像に基づいて個人認証を行う個人認証システムであって、
　利用者の右耳の外耳孔に挿入され、外耳道内の画像データを取得する第１のセンサと、利用者の左耳の外耳孔に挿入され、外耳道内の画像データを取得する第２のセンサと、
　第１のセンサおよび第２のセンサと通信可能な個人認証装置であり、第１のセンサにより取得された画像データを学習データとして第１の特徴量を抽出する第１の特徴量抽出部と、第２のセンサにより取得された画像データを学習データとして第２の特徴量を抽出する第２の特徴量抽出部と、第１の特徴量および第２の特徴量を統合することにより得られた統合特徴量から、利用者を特定し得る登録モデルを生成する特徴量統合部と、登録モデルを用いて、第１のセンサおよび第２のセンサにより取得された画像データに基づいて利用者を認証する認証部と、を有する個人認証装置と、
を備えている。

　そして、これらの個人認証システムは、医療情報システム、健康診断システム、入館管理システム、自動引き落としシステム、または配送管理システムのうちいずれか１つに用いられることが好ましい。

　一方、本発明の個人認証方法は、外耳道内の撮影画像に基づいて個人認証を行う個人認証方法であって、
　利用者の右耳の外耳孔に挿入される第１のセンサにより、外耳道内の画像データを取得する工程および／または利用者の左耳の外耳孔に挿入される第２のセンサにより、外耳道内の画像データを取得する工程と、
　個人認証装置により、第１のセンサにより取得された画像データを学習データとして第１の特徴量を抽出する工程および／または第２のセンサにより取得された画像データを学習データとして第２の特徴量を抽出する工程と、
　個人認証装置により、第１の特徴量および／または第２の特徴量により得られた統合特徴量から、利用者を特定し得る登録モデルを生成する工程と、
　個人認証装置により、登録モデルを用いて、第１のセンサおよび／または第２のセンサにより取得された画像データに基づいて利用者を認証する工程と、を含む。

　また、本発明のプログラムは、コンピュータを、
　利用者の右耳の外耳孔に挿入され、外耳道内の画像データを取得する第１のセンサおよび／または利用者の左耳の外耳孔に挿入され、外耳道内の画像データを取得する第２のセンサと通信可能な個人認証装置であり、
　第１のセンサにより取得された画像データを学習データとして第１の特徴量を抽出する第１の特徴量抽出部および／または第２のセンサにより取得された画像データを学習データとして第２の特徴量を抽出する第２の特徴量抽出部と、第１の特徴量および／または第２の特徴量により得られた統合特徴量から、利用者を特定し得る登録モデルを生成する特徴量統合部と、登録モデルを用いて、第１のセンサおよび／または第２のセンサにより取得された画像データに基づいて利用者を認証する認証部と、を有する個人認証装置として動作させるためのプログラムである。

　本発明の個人認証システムによれば、認証性能の保証や改善、または利便性の向上などを実現し得る個人認証システムを提供することができる。また、本発明の個人認証方法またはプログラムによれば、本発明の個人認証システムと同等の作用効果を奏することができる。

本発明の実施の形態に係る個人認証システムの概略全体構成図である。 本発明の実施の形態に係る個人認証装置の概略機能ブロック図である。 本発明の実施の形態に係るセンサを示す図であり、（Ａ）は概略構成図、（Ｂ）は（Ａ）に示す矢印方向から見た挿入部の概略構成図である。 本発明の実施の形態に係るセンサの使用イメージを示す図である。 本発明の実施の形態に係る個人認証方法の登録時におけるフロー図である。 本発明の実施の形態に係る個人認証方法の登録時におけるフロー図である。 本発明の実施の形態に係る個人認証方法の認証時におけるフロー図である。 本発明の実施の形態に係る個人認証方法の認証時におけるフロー図である。

　以下に本発明の実施の形態を詳細に説明するが、以下に記載する構成要件の説明は、本発明の実施形態の一例（代表例）であり、本発明はその要旨を変更しない限り、以下の内容に限定されない。

［個人認証システム］
　まず、図１～図４を参照し、本発明の実施の形態に係る個人認証システムについて説明する。
　本発明の実施の形態に係る個人認証システム１は、第１のセンサ２０（２０Ｒ）と、第２のセンサ２０（２０Ｌ）と、個人認証装置１０と、を備えている（図１参照）。

［１］センサ
　センサ２０は、利用者（個人認証システム１を利用する者）の外耳道内の画像データを取得するセンサである。本実施形態では、センサ２０はイヤホン型のものであり、利用者Ｕの耳Ｙの外耳孔に挿入される（図１，図３，図４参照）。なお、本説明において便宜上、利用者の右耳の外耳孔に挿入されるセンサ２０を第１のセンサ２０Ｒと、利用者の左耳の外耳孔に挿入されるセンサ２０を第２のセンサ２０Ｌという。

　センサ２０は例えば、赤外線センサである。また、センサ２０は外耳道内の画像データを取得するものであるが、当該画像データには外耳道内の形状の画像（外耳道内の形状が分かる画像）、外耳道内の血管網の画像、外耳道内の温度分布を示す画像などが含まれる。なお、ＲＧＢカメラやサーマルカメラなどの解析技術を用いて取得した、個人特有の脈拍推定データも用いることができる。また、センサ２０として、ＣＣＤカメラやＣＭＯＳセンサなども用いることができる。

　ここで、本実施形態のセンサ２０は、本体部（制御部）２１、通信部２２、および挿入部２３を有している（図３（Ａ）参照）。また、挿入部２３には、カメラ２４および複数のライト２５が設けられている（図３（Ｂ）参照）。
　さらに、センサ２０は、本体部に取り付けられる土台２６を有しており、本実施形態では、土台２６は、本体部２１とカメラ２４とを連結する突起状のものである。この土台２６の取り付け位置は、センサ２０を装着する利用者Ｕの外耳道内の形状および／または鼓膜の位置に応じて変更可能である。

　本体部２１は、カメラ２４による画像データの取得や、通信部２２による撮影された画像データの送信などといった各種制御を行う。
　通信部２２は、ネットワーク通信網Ｎを介して、個人認証装置１０や端末３０などの外部装置との通信を行う。

　挿入部２３は、外耳孔に挿入される部分であり、前述したとおりカメラ２４やライト２５が設けられている。また、挿入部２３は、外耳道内に挿入された際、カメラ２４から鼓膜までの距離や３次元スキャン画像（図４（Ｂ）参照）を取得する機能（例えば、ＬｉＤＡＲ：Light Detection And Ranging）を有する。

　挿入部２３に設けられるカメラ２４の数や位置などは任意に設計変更可能であり、また、カメラ２４の撮影方向も任意に変えることができる。例えば、本体部２１からの制御指示によりカメラ２４の向きを変えることで、外耳孔内の撮影箇所を任意に変えることができる。もちろん、カメラ２４はズームイン／ズームアウトといった機能も有している。
　同様に、挿入部２３に設けられるライト２５の数や位置なども任意に設計変更可能であり、ライト２５の照射方向も任意に変えることができる。その他、ライト２５は本体部２１からの制御指示により光の量や光の色（白、オレンジ、赤、紫）、または光の種類（赤外線／紫外線）などを変えることができる。

　この場合、カメラ２４の撮像性能が発揮できる波長でライト２５を点燈させることが好ましい。また、本実施形態のように、ライト２５を複数の個片で形成し、かつ個片を円環状に分散して配置し、外耳孔内部をカメラ２４で最適に照らすようにするために、光らせる個片と光らせない個片とを設けるように制御することもできる。一例として、まず全個片を光らせて、明る過ぎてカメラ２４での撮像に不具合が生じた場合、個片を１個～数個消灯していき、良好な撮像ができるように調整する。逆に、個片を１個～数個順次点燈させていき、良好な撮像ができるように調整する。また、本実施形態では、ライト２５は複数の個片で構成したが、円環状に連続した構成であってもよい。
　なお、挿入部２３は、図示していないが、ライト２５の外側に柔軟なゴムなどを装着し、耳への装着性を向上させることもできるし、ライト２５の個片を、ゴムなどの柔軟な部材の中にはめ込む構成とすることもできる。

　なお、センサ２０（カメラ２４）は動画撮影機能を有しており、外耳道内の入り口から鼓膜付近までの動画を撮影する。
　そして、センサ２０はネットワーク通信網Ｎを介して個人認証装置１０および端末３０と有線または無線で接続されており（図１参照）、センサ２０により取得された動画を含む画像データ（情報）は、ネットワーク通信網Ｎを介して個人認証装置１０や端末３０へと送信される。
　さらに、本実施の形態では、外耳道内の入り口から鼓膜付近までの動画を個人認証装置１０に送信したが、動画に加え、センサ２０にて撮影した静止画を送信してもよく、この場合、認証の仕様などによって、動画のみ、あるいは動画に加え静止画などを送信することが好ましい。また、後述するように、センサ２０自身が動画や静止画から特徴量を抽出し、個人認証装置１０に特徴量を送信することも可能である。

　その他、センサ２０は、スピーカーやマイクなど一般的なイヤホンの機能を有している。よって、外部装置等からセンサ２０を装着している利用者へ音声を伝えたり、当該利用者の音声を外部装置等へ伝えたりすることができる。また、センサ２０に、ノイズキャンセラーなどの機能も設けることができる。

［２］個人認証装置
　個人認証装置１０は、センサ２０により取得された外耳道内の画像データに基づいて個人認証を行う装置であり、受信部１０１、送信部１０２、画像判定部１０３、画像処理部１０４、第１の特徴量抽出部１０５、第２の特徴量抽出部１０６、特徴量統合部１０７、記憶部１０８、認証部１０９、および制御部１１０を有する（図２参照）。本説明において、第１の特徴量抽出部１０５、第２の特徴量抽出部１０６をそれぞれ単に「特徴量抽出部」といったり、これらをまとめたものを「特徴量抽出部」といったりする。

　受信部１０１および送信部１０２は、ネットワーク通信網Ｎを介してセンサ２０や端末３０などの外部装置との通信を行う。

　画像判定部１０３は、センサ２０により取得された外耳道内の画像データが不明瞭なものであるか否かに関する各種判定を行う。一例を挙げると、画像判定部１０３は、以下の場合に画像データが不明瞭であると判定する。
（１）取得された画像データが暗すぎる／明るすぎる（光の量が足りない・光の量が過剰等）
（２）取得された画像データの撮影箇所が不適切である（挿入部２３が外耳孔に十分に挿入されておらず外耳道の入り口のみしか写っていない、挿入部２３が傾いて挿入されている等）
（３）取得された画像データに白飛び、黒つぶれ（影）などのノイズが含まれている
（４）取得された画像データに耳垢や耳毛などが含まれている

　また、画像処理部１０４は、画像判定部１０３が上記（３）に示す要因により画像データが不明瞭なものであると判定した場合、当該画像データに含まれるノイズを除去する。なお、その他の要因により不明瞭なものであると判定された画像データの扱いについては、後述する。

　第１の特徴量抽出部１０５は、第１のセンサ２０Ｒにより取得された画像データを学習データとして第１の特徴量を抽出する。一方、第２の特徴量抽出部１０６は、第２のセンサ２０Ｌにより取得された画像データを学習データとして第２の特徴量を抽出する。
　さらに、特徴量統合部１０７は、第１の特徴量および第２の特徴量を統合することにより、利用者を特定し得る統合特徴量を得る。なお、特徴量統合部１０７は、この統合特徴量から登録モデルを生成する。登録モデルは、統合特徴量と利用者の個人情報（氏名、年齢（生年月日）、身長、体重、住所、電話番号、会社名、部署名、役職、職種などのうち、少なくとも１つ以上の情報）とを紐づけるものであり、生成された登録モデルは、記憶部１０８に記憶される。

　記憶部１０８には、登録モデルや利用者の情報を始め、センサ２０により取得された外耳道内の画像データ、第１の特徴量、第２の特徴量、統合特徴量、設定ファイルなど、個人認証システム１に必要な各種情報が記憶される。記憶部１０８はＨＤＤやＳＳＤなど個人認証装置１０の一部として構成されてもよく、外部ストレージ（例えば、クラウド型データベース）としてもよい。

　認証部１０９は、記憶部１０８に記憶された登録モデルを用いて（参照して）、第１のセンサ２０Ｒおよび第２のセンサ２０Ｌにより取得された画像データに基づいて利用者を認証（特定）する。

　要するに、本実施形態に係る個人認証装置１０は、利用者Ｕの右耳の外耳道内の画像データ（形状的特徴）に基づく特徴量（第１の特徴量）と、利用者Ｕの左耳の外耳道内の画像データ（形状的特徴）に基づく特徴量（第２の特徴量）とが統合された特徴量（統合特徴量）から生成された登録モデルを用いて、利用者を認証（特定）する。もちろん、第１の特徴量のみ、または第２の特徴量のみから登録モデルを生成することもできる。

　制御部１１０は、個人認証装置１０自身の制御、およびセンサ２０や端末３０などの外部装置に対する制御を行う。

［３］端末
　端末３０は、利用者Ｕが所有するパソコンやスマートフォン、タブレットなどである（図１参照）。端末３０は、ネットワーク通信網Ｎを介して、個人認証装置１０やセンサ２０などの外部装置との通信を行う。

　以上のように本実施形態の個人認証システム１について説明したが、個人認証システム１の個人認証装置１０、センサ２０、および端末３０は、ネットワーク通信網Ｎを介さずに相互に通信することもできる。例えば、センサ２０と端末３０は、近距離無線通信（Ｂｌｕｅｔｏｏｔｈ等）により相互に通信可能である。

［個人認証方法］
　次に、さらに図５～図８を参照し、本実施形態の個人認証システム１を用いた本発明の実施の形態に係る個人認証方法について説明する。なお、本実施形態の個人認証方法は、登録（登録フェーズ）と認証（認証フェーズ）に分けて説明する。

［１］登録（正常）
　個人認証システム１を利用する利用者は、最初に、前述したような個人情報と共に、自身の左右の耳に基づく特徴量（登録モデル）を個人認証装置１０に登録する（図５参照）。

　例えば、利用者Ｕ１（図１参照）が、自身の所有する第１のセンサ２０Ｒを右耳に、同じく自身の所有する第２のセンサ２０Ｌを左耳に装着すると、センサ２０（２０Ｒ，２０Ｌ）は、カメラ２４から鼓膜までの距離（図４（Ｂ）参照）を取得する（ステップＳ１１０）。

　そして、センサ２０（２０Ｒ，２０Ｌ）は、ライト２５を照射して、カメラ２４により外耳道内の動画（登録用動画）を撮影する（ステップＳ１２０）。

　その後、センサ２０（２０Ｒ，２０Ｌ）は、通信部２２により、撮影した動画を個人認証装置１０へ送信する（ステップＳ１３０）。

　一方、個人認証装置１０は受信部１０１によりその動画を受信し、受信した動画における複数の画像データを学習データとして、第１の特徴量抽出部１０５、第２の特徴量抽出部１０６、および特徴量統合部１０７により、利用者Ｕ１を特定し得る統合特徴量を得る（ステップＳ２１０）。

　最後に、個人認証装置１０は特徴量統合部１０７により、統合特徴量から登録モデルを生成し、記憶部１０８に記憶する（ステップＳ２２０）。

　この登録モデルに関して、個人認証システム１は、予め定められたタイミングや、外部装置（個人認証装置１０や端末３０など）から指示を受けたタイミング、あるいはセンサ２０（２０Ｒ，２０Ｌ）が両耳に装着されたタイミングで、センサ２０が外耳道内の画像データを取得し直し、個人認証装置１０が、当該取得し直された画像データから登録モデルを生成し直す（更新する）ことができる。
　予め定められたタイミングとは、センサ２０の本体部２１や個人認証装置１０の記憶部１０８が管理しているタイミングで、日に１回（その日初めて装着した際）、週に１回（週の始め）、月に１回（月の始め）などの更新タイミングである。

［２］認証（正常）
　登録を済ませた利用者Ｕ１は、必要な場合に、個人認証システム１を利用して認証を行う（図７参照）。本説明において、必要な場合とは、利用者Ｕ１が自身の所有する端末３０１（パソコン）にログインしたい場合とする。なお、当該端末３０１は、利用者Ｕ１以外はログインできない（ログイン権限がない）とする。

　この場合、利用者Ｕ１は、自身の所有する第１のセンサ２０Ｒを右耳に、同じく自身の所有する第２のセンサ２０Ｌを左耳に装着する。そうすると、登録フェーズの場合と同様に、センサ２０（２０Ｒ，２０Ｌ）は、カメラ２４から鼓膜までの距離を取得し、ライト２５を照射してカメラ２４により外耳道内の動画を撮影し、撮影した動画（認証用動画）を個人認証装置１０へ送信する（ステップＳ３１０～ステップＳ３３０）。

　この時、センサ２０は、端末３０の情報および利用者Ｕ１の認証依頼も個人認証装置１０へ送信する。例えば、センサ２０は近距離無線通信により端末３０の情報を取得し、端末３０へ利用者Ｕ１がログインするための認証依頼、および撮影した動画（認証用動画）を個人認証装置１０へ送信する。端末３０へ利用者Ｕ１がログインするための認証依頼は、端末３０から個人認証装置１０へ送信してもよい。

　一方、個人認証装置１０は受信部１０１によりその動画を受信し、受信した動画における複数の画像データに基づいて、第１の特徴量抽出部１０５、第２の特徴量抽出部１０６、および特徴量統合部１０７により、利用者Ｕ１を特定し得る（利用者Ｕ１であるか否かを判定し得る）統合特徴量を得る（ステップＳ４１０）。

　そして、個人認証装置１０は認証部１０９により、ステップＳ３１０で得られた統合特徴量と、記憶部１０８に記憶されている登録モデルとを比較し、利用者の認証を行う（ステップＳ４２０）。

　最後に、個人認証装置１０は、その結果（認証結果）を送信部１０２により通知する（ステップＳ４３０）。例えば、認識結果がＯＫであれば、個人認証装置１０は端末３０１に対して利用者Ｕ１のアカウントでログインを行う旨の指示を送信することができる。
　逆に、認識結果がＮＧであれば、個人認証装置１０は端末３０１に対してエラーメッセージを表示させる指示を送信することができる。若しくは、個人認証装置１０はセンサ２０を介してエラーを示すビープ音やメッセージを通知することもできる。

　そのため、利用者Ｕ１しかログイン権限を有していない端末３０１に対して、利用者Ｕ２がログインしようと利用者Ｕ１が所有するセンサ２０を装着した場合、認識結果はＮＧとなり、端末３０１にエラーメッセージが表示されたり、センサ２０を介してエラーを示すビープ音やメッセージが通知されたりする。
　もちろん、利用者Ｕ１が、利用者Ｕ２しかログイン権限を有していない端末３０２に対してログインしようとすると、認証ＮＧとなる。

　ここで、特徴量統合部１０７により得られる統合特徴量は、第１の特徴量と第２の特徴量の特徴量間相違データとして算出される。この他にも、加減乗除のうちいずれかの演算により算出する構成や、これらの演算を組み合わせて算出する構成にしてもよい。

　外耳道内の形状は、利用者毎に異なるものである。また、同じ利用者であっても、右耳の外耳道内の形状と左耳の外耳道内の形状はそれぞれ異なるものである。
　そのため、片方の耳の外耳道内の形状が極端に似ている利用者が複数人存在していたとしても、両方の耳の外耳道内の形状が極端に似ている利用者が存在している可能性は極めて低いため、高精度で利用者を認証（特定）することができる。

　また、センサ２０は外耳道内の動画を撮影し、個人認証装置１０は当該動画における複数の画像データに基づいて利用者を認証する（第１の特徴量、第２の特徴量、統合特徴量、および登録モデルを生成する）ものである。動画に含まれる複数の画像データは、それぞれ撮影箇所や写っている角度、倍率などが異なるため、単一の静止画に基づいて利用者を認証する場合よりも、認証精度が高い。

　なお、本説明では、個人認証システム１は、利用者Ｕ１が端末３０１にログインする場合に認証を行ったが、その他、ある利用者が端末にインストールされているアプリケーションやデータベースなどにアクセスする場合などにも認証を行うことができる。
　そして、本発明のようにイヤホン型のセンサ２０を採用した個人認証システムは、本人が意識することなく認証できるため認証の手間が少なく、また常に本人認証が行える。よって、簡易かつ即時にログイン許可やアクセス許可などが行えると共に、セキュリティレベルの大幅な向上を実現することができる。

　補足として、認証部１０９の処理としては様々な方法が考えられるが、例えば判別関数やユークリッド距離やマハラノビス距離などの統計的距離尺度を用いる方法、決定木やＳＶＭ、ニューラルネットなどのような機械学習モデルを用いる方法などが考えられる。
　また、登録モデルに判別関数や統計的距離尺度を用いる場合は、判別閾値や平均・分散などの統計量が利用者を特定し得る特徴量に相当する。一方、登録モデルに決定木やＳＶＭ（Ｓｕｐｐｏｒｔ　Ｖｅｃｔｏｒ　Ｍａｃｈｉｎｅ）、ニューラルネットなどのような機械学習モデルを用いる場合は、閾値やＳＶＭパラメータ、ニューラルネットモデルパラメータなどが利用者を特定し得る特徴量に相当する。

［３］登録（準正常）
　前述した登録および認証（図５，図７参照）はイレギュラーが発生しない正常系であるが、以下、イレギュラーが発生した場合の登録および認証について説明する（図６，図８参照）。

　まず、利用者Ｕ１は、最初に、自身の左右の耳に基づく特徴量（登録モデル）を個人認証装置１０に登録するが、図６に示すように、利用者Ｕ１が、自身の所有するセンサ２０を両耳に装着すると、センサ２０は、カメラ２４により外耳道内の動画を撮影し、撮影した動画（登録用動画）を個人認証装置１０へ送信する（ステップＳ１３０）。

　一方、個人認証装置１０は受信部１０１によりその動画を受信し、画像判定部１０３により、当該動画から選択された画像データ（第１の特徴量および第２の特徴量の抽出に用いる画像データ）に対して、不明瞭なものであるか否かに関する各種判定を行う（ステップＳ２０１）。

　この判定結果が問題なければ（明瞭であれば）、図５に示すフローのとおりに登録が行われる。

　しかし、取得された画像データが暗すぎる／明るすぎると判定された場合は、個人認証装置１０は、センサ２０のライト２５の照射方向を制御する（ステップＳ２０２）。具体的には、個人認証装置１０の制御部１１０が、センサ２０に対してライト２５の照射方向を指定する（変える）指示を送信することで、センサ２０の本体部２１が、当該指示に応じてライト２５の照射方向を制御する。
　この場合、個人認証装置１０は、センサ２０のライト２５の光の量や光の色なども制御することができ、また、複数あるライト２５のうち、どのライト２５の照射方向、光の量、または光の色を変えるのか、についても細かく制御することができる。

　これにより、暗すぎない／明るすぎない、外耳道内の形状がきれいに分かる画像データを安定して取得することができ、当該画像データを学習データとして統合特徴量および登録モデルを生成することができる。よって、当該登録モデルを用いた認証の認証性能が担保される。

　または、取得された画像データの撮影箇所が不適切であると判定された場合は、個人認証装置１０は、センサ２０を介して利用者Ｕ１にセンサ２０の装着位置を動かす旨を伝える（ステップＳ２０３）。

　前述したように、センサ２０は、スピーカーやマイクなど一般的なイヤホンの機能を有しているため、画像判定部１０３が予め記憶部１０８に記憶されていた音声指示データ（例えば、「正しく装着されていません」や「傾いています」など）を利用者Ｕ１に送信することで、センサ２０を正しく装着してもらえるよう利用者Ｕ１に促すことができる。
　若しくは、センサ２０から送信されてきた動画（登録用動画）を第三者が個人認証装置１０側でリアルタイムに閲覧・確認し、第三者からこのような指示を利用者Ｕ１へ伝えることもできる。

　これにより、外耳道内の形状がきれいに分かる画像データを安定して取得することができ、当該画像データを学習データとして統合特徴量および登録モデルを生成することができるため、認証の認証性能が担保される。

　若しくは、取得された画像データに白飛びや黒つぶれ（影）などのノイズが含まれていると判定された場合は、個人認証装置１０は、画像処理部１０４により当該ノイズを除去する（ステップＳ２０４）。画像処理部１０４が当該ノイズを除去する手法としては、白飛びや黒つぶれ（影）などのノイズを有する画像データを学習させたＡＩモデルを用いて、ノイズ有りの画像データからノイズ無しの画像データを生成する手法が考えられる。

　これにより、白飛びや黒つぶれ（影）などのノイズが含まれていない外耳道内の形状がきれいに分かる画像データを学習データとして統合特徴量および登録モデルを生成することができるため、認証の認証性能が担保される。

　さらには、取得された画像データに耳垢や耳毛などが含まれていると判断された場合は、個人認証装置１０は、第１の特徴量抽出部１０５、第２の特徴量抽出部１０６、および特徴量統合部１０７により耳垢や耳毛などが含まれた画像データを学習データとして統合特徴量を得る（ステップＳ２０５）。

　外耳道内に耳垢や耳毛などが存在していることは、全ての利用者に起こり得ることである。そのため、画像判定部１０３により取得された画像データに耳垢や耳毛などが含まれていると判断された場合は、個人認証装置１０は、利用者Ｕ１について、外耳道内に耳垢や耳毛などが存在している画像から生成された登録モデルと、外耳道内に耳垢や耳毛などが存在していない画像から生成された登録モデルの２つを生成する。それぞれの登録モデルは、利用者Ｕ１と紐づけられて記憶部１０８に記憶される。

［４］認証（準正常）
　続けて、イレギュラーが発生した場合の認証について説明するが（図８参照）、利用者Ｕ１は、認証のために自身の所有するセンサ２０を両耳に装着し、センサ２０は、カメラ２４により外耳道内の動画を撮影し、撮影した動画（認証用動画）を個人認証装置１０へ送信する（ステップＳ３３０）。

　一方、個人認証装置１０は受信部１０１によりその動画を受信し、画像判定部１０３により、当該動画から選択された画像データ（第１の特徴量および第２の特徴量の抽出に用いる画像データ）に対して、不明瞭なものであるか否かに関する各種判定を行う（ステップＳ４０１）。

　この判定結果が問題なければ（明瞭であれば）、図６に示すフローのとおりに認証が行われる。
　しかし、取得された画像データが暗すぎる／明るすぎると判定された場合は、個人認証装置１０は、ステップＳ２０２と同様に、センサ２０のライト２５の照射方向を制御する（ステップＳ４０２）。
　また、取得された画像データの撮影箇所が不適切であると判定された場合は、個人認証装置１０は、ステップＳ２０３と同様に、センサ２０を介して利用者Ｕ１にセンサ２０の装着位置を動かす旨を伝える（ステップＳ４０３）。
　なお、取得された画像データに白飛びや黒つぶれ（影）などのノイズが含まれていると判定された場合は、個人認証装置１０は、ステップＳ２０４と同様に、画像処理部１０４により当該ノイズを除去する（ステップＳ４０４）。

　これらにより、外耳道内の形状がきれいに分かる画像データに基づいて認証を行うことができるため、画像データの不明瞭さに起因した誤認識を防ぐことができ、安定した認証性能が担保される。

　さらに、取得された画像データに耳垢や耳毛などが含まれていると判断された場合は、個人認証装置１０は、ステップＳ２０５と同様に、第１の特徴量抽出部１０５、第２の特徴量抽出部１０６、および特徴量統合部１０７により耳垢・耳毛などが含まれた画像データを学習データとして統合特徴量を得る（ステップＳ４０５）。
　そして、この場合、認証部１０９は、ステップＳ２０５を経て生成された登録モデル（外耳道内に耳垢や耳毛などが存在している画像から生成された登録モデル）を用いて、認証を行う（ステップＳ４０６）。

　これにより、利用者Ｕ１の外耳道内に、耳垢や耳毛などが存在していても／存在していなくても、安定した認証性能が担保することができる。
　なお、画像判定部１０３により取得された画像データに耳垢や耳毛などが含まれていると判断された場合は、白飛びや黒つぶれ（影）などのノイズが含まれていると判定された場合と同様に、画像処理部１０４により当該耳垢や耳毛などを除去することもできる。この処理は登録フェーズにおいても同様であり、個人認証装置１０は、取得された画像データに耳垢や耳毛などが含まれていると判断した場合は、当該耳垢や耳毛などを除去した画像データから登録モデルを生成することもできる。

［変形例］
　以上のように説明した本発明の実施の形態に係る個人認証システム１等は、本発明の実施形態の一例（代表例）であり、本説明においては第１のセンサ２０Ｒと第２のセンサ２０Ｌの両方を利用するものとしたが、どちらか一方のみを利用してもよく、また、本発明の要旨を変更しない限り、以下に示すように任意に設計変更可能である。

　例えば、センサ２０により取得された外耳道内の画像データが不明瞭なものであるか否かに関する各種判定を行う画像判定部１０３は、本実施形態では個人認証装置１０が有するものとしたが、センサ２０が画像判定部１０３を有していてもよい。
　この場合、センサ２０は、例えば画像判定部１０３により取得した画像データが暗すぎる／明るすぎると判定した場合は、個人認証装置１０へ動画を送信する前に、センサ２０自身で（本体部２１により）、ライト２５の照射方向や光の量、光の色などを制御（調節）することができる。

　同様に、センサ２０が、第１の特徴量抽出部１０５、第２の特徴量抽出部１０６、および特徴量統合部１０７を有していてもよい。
　この場合、センサ２０は、動画（画像データ）に代わって特徴量（統合特徴量）を個人認証装置１０へ送信する。

　なお、登録モデルを用いて、センサ２０（２０Ｒ，２０Ｌ）により取得された画像データに基づいて利用者を認証（特定）する認証部１０９についても、本実施形態では個人認証装置１０が有するものとしたが、端末３０が認証部１０９を有していてもよい。
　この場合、端末３０は、センサ２０から外耳道内の動画および認証依頼を受信して、個人認証装置１０の記憶部１０８や外部ストレージに記憶されている登録モデルを参照し、認証を行うことができる。

　また、本実施形態では、センサ２０を装着したのが利用者Ｕ１であるか否かを認証する例を説明したが、本発明に係る個人認証システム等は、センサ２０を装着したのがどの利用者であるのか（例えば、利用者Ｕ１であるのか／利用者Ｕ２であるのか（図１参照））を認証（特定）することもできる。
　この場合、個人認証装置１０は、センサ２０により取得された外耳道内の画像データに基づいて統合特徴量を得て、当該統合特徴量と記憶部１０８に記憶されている複数の登録モデルとによりパターンマッチングを行い、マッチする登録モデル（利用者）を特定する。

　その他、個人認証装置１０は、受信した動画から統合特徴量や登録モデルを生成した後、セキュリティ向上のため、記憶部１０８から当該動画を削除してもよい。

［応用例］
　本発明の応用例として、建設業界が挙げられる。近年、日本の建設業界では労働者数の減少に伴い、建設現場の作業環境の改善が求められている。例えば、騒音下でもクリアな（ノイズキャンセリング機能を有した）音声通話が可能な業務用ヘッドセットの利用が拡大している。
　そこで、本発明はセンサ２０としてこのような業務用ヘッドセットを採用し、利用者（話者）識別の性能改善を実現し得るシステム等として応用することができる。さらに、話者識別を用いて、作業現場おける免許所持の確認や、情報漏洩防止のための人物判断を行うシステム等にも応用することができる。

　その他、本発明は医療情報システムや健康診断システム、または入館管理システムへ応用することができる。例えば、同じ形状がないとされる外耳道内の形状に基づいて個人認証を行うことにより、認証精度が必要とされるセキュリティの高い部屋や施設への入館を管理する入館管理システムを実現することができる。つまり、認証誤りにより関係者以外の入館を許可してしまうといったトラブルがない入館管理システムを実現することができる。また、入管管理のための新たな装置を必要としないので導入がしやすく、機器設置に伴うトラブルなども生じない。

　または、文書の閲覧や機器の使用についての権限が決められ医療情報システムにおいて、医師、看護師、薬剤師などの様々な役割の担当者ごとにシステム内のアクセス権限を付与する際に、リアルタイムでの認証許可が行えるため、アクセス権限付与の際の手間と時間を削減することができる。

　さらに、本発明は外耳道内の画像データに基づいて個人認証を行うと同時に、当該データから外耳道内の異常（ケガ、できもの）や体調の変化などを判断し得る健康診断システムを実現することができる。
　また、本発明は、室温計測機能や湿度機能、および利用者Ｕの体温計測機能なども有するセンサ２０を用いることで、利用者Ｕが居る場所の室温や湿度などの環境データ、および利用者Ｕの体温変化や使用時間（センサ２０の装着時間）などのバイタルデータに基づいて、使用環境下での使い方や休憩時間などをレコメンドするような構成とすることもできる。

　なお、本実施形態では、人間の認証について説明したが、家畜やペットなどの外耳道が存在する生物にも適応でき、家畜等が自分が所有するものなのか否か等を判定することも可能である。

　また、センサ２０に関して、センサ２０を装着している途中でも、外部の音声が取り込めるように挿入部２３に外部まで連通した穴を設けたり、センサ２０自体に外部音取り込み用マイクを取り付けてもよい。

　なお、センサ２０は個人認証を行う重要なデバイスであるため、挿入部２３に図示しない圧力センサおよび発音部材を設け、圧力の急激な変化（挿入部２３が耳から外れ、圧力センサの出力が急激に変化）を検知して、センサ２０が耳から外れた際、当該発音部材を鳴らすことで、センサ２０の耳から脱落したことを利用者に知らせることができる。また、装置が大型化する可能性はあるが、ＧＰＳチップなどをセンサ２０に組み込んで、センサ２０を落とした時に、すぐに利用者が所有する端末等から位置情報に基づいて発見できるようにしてもよい。

　さらに、センサ２０が故障したり紛失したりした場合、認証に基づいたスマートフォンやパソコンへのログイン等ができなることがあるが、その際は、スマートフォン等に別途設けられるパスワード入力でログインしたり、スマートフォンに非接触カードリーダー部材を搭載し、カードキーなどで、ログインできるようにしてもよい。さらに、音声や指紋などでスマートフォンを起動できるように、音声認証デバイスや指紋認証デバイスなどをスマートフォンに設けることもできる。この時、音声認証や指紋認証などと、本発明による外耳道認証とを組み合わせることで、さらにセキュリティを高めることができる。

　また、センサ２０の装着回数分、測定可能となることで、装着回数に応じて、利用者へ挿入部２３のクリーニングを促したり、または、利用者の勤務時間（開始時間、終了時間）なども記録することも可能になり、様々な利便性を発揮することができる。なお、センサ２０により外耳道内の動画を取得することができるので、利用者の中耳炎経過観察や耳垢の溜まり具合なども把握することができ、より利便性の向上を図ることができる。

　その他、センサ２０には、図示していない充電用の接点や無接点充電用のコイル、センサ２０を充電器にセットして充電する際にカメラ２４表面の汚れ度合いを測定する測定手段などが設けられており、測定手段とカメラの表面を例えば接触させて、センサ２０の電気容量や電気抵抗などを測定することで、カメラ２４の汚れ度合いを測定することができる。そして、その測定状況に応じた汚れ度合いを充電器に設けられた表示器などに表示させ、利用者に知らせることもできる。

　本発明は、認証性能の保証や改善、または利便性の向上などを実現し得る個人認証システム等であり、入館管理システムや健康診断システム、および医療機関で利用される医療情報システムなど様々な分野にその生体認証技術を活かすことができるため、産業上有用である。

　１　個人認証システム
　１０　個人認証装置
　１０１　受信部
　１０２　送信部
　１０３　画像判定部
　１０４　画像処理部
　１０５　第１の特徴量抽出部
　１０６　第２の特徴量抽出部
　１０７　特徴量統合部
　１０８　記憶部
　１０９　認証部
　１１０　制御部
　２０　センサ
　２０Ｒ　第１のセンサ
　２０Ｌ　第２のセンサ
　２１　本体部
　２２　通信部
　２３　挿入部
　２４　カメラ
　２５　ライト
　２６　土台
　３０，３０１，３０２　端末
　Ｕ，Ｕ１，Ｕ２　利用者
　Ｙ　利用者の耳
　Ｎ　ネットワーク通信網

Claims (16)

1. 　外耳道内の撮影画像に基づいて個人認証を行う個人認証システムであって、
   　利用者の耳の外耳孔に挿入され、外耳道内の複数の画像データを取得するセンサと、
   　前記センサと通信可能な個人認証装置であり、
   　前記センサにより取得された複数の画像データを学習データとして特徴量を抽出する特徴量抽出部と、
   　前記特徴量抽出部により得られた特徴量から、前記利用者を特定し得る登録モデルを生成する特徴量統合部と、
   　前記登録モデルを用いて、前記センサにより取得された複数の画像データに基づいて前記利用者を認証する認証部と、を有する個人認証装置と、
   を備えた個人認証システム。
2. 　前記利用者の耳の外耳孔に挿入された前記センサの装着位置を異ならせることで、複数の画像データを取得する請求項１に記載の個人認証システム。
3. 　前記センサは、前記外耳道内における撮影箇所、撮影角度、撮影倍率のうち少なくとも１以上を異ならせることで複数の画像データを取得する請求項１に記載の個人認証システム。
4. 　前記センサは動画撮影機能を有しており、
   　前記認証部は、前記センサにより撮影された外耳道内の入り口から鼓膜付近までの動画における複数の画像データに基づいて、前記利用者を認証する請求項１に記載の個人認証システム。
5. 　前記センサは外耳道内を照らすライトを有しており、
   　前記個人認証装置は、前記センサにより取得された画像データが不明瞭なものであるか否かを判定する画像判定部を有しており、
   　前記画像判定部は、画像データが不明瞭なものであると判定した場合、前記センサの前記ライトの照射方向を制御する請求項１に記載の個人認証システム。
6. 　前記センサは通話機能を有しており、
   　前記個人認証装置は、前記センサにより取得された画像データが不明瞭なものであるか否かを判定する画像判定部を有しており、
   　前記画像判定部は、画像データが不明瞭なものであると判定した場合、前記センサを介して、前記利用者に前記センサの装着位置を動かす旨を伝える請求項１に記載の個人認証システム。
7. 　前記個人認証装置は、前記センサにより取得された画像データが不明瞭なものであるか否かを判定する画像判定部と、
   　前記画像判定部が、画像データが不明瞭なものであると判定した場合、当該画像データに含まれるノイズを除去する画像処理部と、を有する請求項１に記載の個人認証システム。
8. 　前記センサは、定められたタイミングおよび／または外部装置から指示を受けたタイミングで外耳道内の画像データを取得し、
   　前記個人認証装置は、当該画像データに基づいて得られた前記統合特徴量に基づいて前記登録モデルを更新する請求項１に記載の個人認証システム。
9. 　前記個人認証装置は、前記センサにより取得された画像データに耳垢および／または耳毛が含まれているか否かを判定する画像判定部と、
   　前記画像判定部が、画像データに耳垢および／または耳毛が含まれていると判定した場合、当該画像データに含まれている耳垢および／または耳毛を除去する画像処理部と、を有する請求項１に記載の個人認証システム。
10. 　前記個人認証装置は、前記センサにより取得された画像データに耳垢および／または耳毛が含まれているか否かを判定する画像判定部を有しており、
    　前記特徴量抽出部および前記特徴量統合部は、前記画像判定部が、画像データに耳垢および／または耳毛が含まれていると判定した場合、当該画像データに基づいて前記統合特徴量を得て、
    　前記認証部は、当該統合特徴量から生成された登録モデルを用いて、前記センサにより取得された耳垢および／または耳毛が含まれている画像データに基づいて前記利用者を認証する請求項１に記載の個人認証システム。
11. 　前記個人認証装置は、前記センサにより取得された画像データに耳垢および／または耳毛が含まれているか否かを判定する画像判定部と、
    　前記画像判定部が、画像データに耳垢および／または耳毛が含まれていないと判定した場合、当該画像データに耳垢および／または耳毛が含まれるように当該画像データを加工する画像処理部と、を有し、
    　前記特徴量抽出部および前記特徴量統合部は、前記画像処理部により加工された画像データに基づいて前記統合特徴量を得て、前記登録モデルを生成する請求項８に記載の個人認証システム。
12. 　前記センサは、本体部と、カメラと、前記本体部に取り付けられ前記本体部と前記カメラとを連結する突起状の土台と、を有し、
    　前記土台の取り付け位置は、前記利用者の外耳道内の形状および／または鼓膜の位置に応じて変更可能ものである請求項１に記載の個人認証システム。
13. 　前記センサは、
    　利用者の右耳の外耳孔に挿入され、外耳道内の複数の画像データを取得する第１のセンサと、
    　前記利用者の左耳の外耳孔に挿入され、外耳道内の複数の画像データを取得する第２のセンサと、で構成され、
    　前記特徴量抽出部は、
    　前記第１のセンサにより取得された複数の画像データを学習データとして第１の特徴量を抽出する第１の特徴量抽出部と、
    　前記第２のセンサにより取得された複数の画像データを学習データとして第２の特徴量を抽出する第２の特徴量抽出部と、で構成され、
    　前記第１の特徴量および前記第２の特徴量を統合することにより得られた統合特徴量から、前記利用者を特定し得る登録モデルを生成する特徴量統合部と、
    　前記登録モデルを用いて、前記第１のセンサおよび前記第２のセンサにより取得された複数の画像データに基づいて前記利用者を認証する認証部と、を有する個人認証装置と、
    を備えた請求項１～１２のうちいずれか１項に記載の個人認証システム。
14. 　請求項１～１２のいずれか１項に記載の個人認証システムを用いた医療情報システム、健康診断システム、入館管理システム、自動引き落としシステム、または配送管理システムのうちいずれか１つのシステム。
15. 　外耳道内の撮影画像に基づいて個人認証を行う個人認証方法であって、
    　利用者の耳の外耳孔に挿入されるセンサにより、外耳道内の複数の画像データを取得する工程と、
    　個人認証装置により、前記センサにより取得された複数の画像データを学習データとして特徴量を抽出する工程と、
    　個人認証装置により得られた特徴量から、前記利用者を特定し得る登録モデルを生成する工程と、
    　個人認証装置により、前記登録モデルを用いて、前記センサにより取得された複数の画像データに基づいて前記利用者を認証する工程と、
    を含む個人認証方法。
16. 　コンピュータを、
    　利用者の耳の外耳孔に挿入され、外耳道内の複数の画像データを取得するセンサと通信可能な個人認証装置であり、
    　前記センサにより取得された複数の画像データを学習データとして特徴量を抽出する特徴量抽出部と、
    　前記特徴量抽出部により得られた特徴量から、前記利用者を特定し得る登録モデルを生成する特徴量統合部と、
    　前記登録モデルを用いて、前記センサにより取得された複数の画像データに基づいて前記利用者を認証する認証部と、を有する個人認証装置として動作させるためのプログラム。