JP7028339B2 - 情報処理装置、装着型機器、情報処理方法及び記憶媒体 - Google Patents

情報処理装置、装着型機器、情報処理方法及び記憶媒体 Download PDF

Info

Publication number
JP7028339B2
JP7028339B2 JP2020560713A JP2020560713A JP7028339B2 JP 7028339 B2 JP7028339 B2 JP 7028339B2 JP 2020560713 A JP2020560713 A JP 2020560713A JP 2020560713 A JP2020560713 A JP 2020560713A JP 7028339 B2 JP7028339 B2 JP 7028339B2
Authority
JP
Japan
Prior art keywords
operation mode
biometric authentication
wearable device
user
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020560713A
Other languages
English (en)
Other versions
JPWO2020129198A1 (ja
Inventor
隆行 荒川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of JPWO2020129198A1 publication Critical patent/JPWO2020129198A1/ja
Priority to JP2022022534A priority Critical patent/JP7315045B2/ja
Application granted granted Critical
Publication of JP7028339B2 publication Critical patent/JP7028339B2/ja
Priority to JP2023114825A priority patent/JP2023126420A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234—Power saving characterised by the action undertaken
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/117—Identification of persons
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802—Sensor mounted on worn items
    • A61B5/6803—Head-worn items, e.g. helmets, masks, headphones or goggles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1016—Earpieces of the intra-aural type
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1041—Mechanical or electronic switches, or control elements
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2560/00—Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
    • A61B2560/02—Operational features
    • A61B2560/0204—Operational features of power management
    • A61B2560/0209—Operational features of power management adapted for power saving
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02—Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0204—Acoustic sensors
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6813—Specially adapted to be attached to a specific body part
    • A61B5/6814—Head
    • A61B5/6815—Ear
    • A61B5/6817—Ear canal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00—Details of connection covered by H04R, not provided for in its groups
    • H04R2420/07—Applications of wireless loudspeakers or wireless microphones

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Biophysics (AREA)
  • General Health & Medical Sciences (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Telephone Function (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Headphones And Earphones (AREA)

Description

本発明は、情報処理装置、装着型機器、情報処理方法及び記憶媒体に関する。
特許文献１には、ユーザの外耳道等の音響特性に基づいて個人認証を行うイヤホンが開示されている。
国際公開第２０１８／０３４１７８号
特許文献１に示されているような音響特性を用いた生体認証の処理には多くの電力を要する。そのため、音響特性に基づく生体認証を行う装着型装置において、消費電力の低減が求められる場合がある。
本発明は、音響特性に基づく生体認証を行う装着型装置における消費電力を低減することができる情報処理装置、装着型機器、情報処理方法及び記憶媒体を提供することを目的とする。
本発明の一観点によれば、音響特性に基づく生体認証を行うための音波をユーザの頭部の一部に発する装着型機器を、前記ユーザが装着しているか否かを判定する装着判定部と、前記装着判定部による判定の結果に基づいて、前記生体認証のための処理を実行可能でない第１動作モードと、前記生体認証のための処理を実行可能な第２動作モードとを含む複数の動作モードの間で前記装着型機器の動作モードを切り替える動作モード制御部と、を備える、情報処理装置が提供される。
本発明の他の一観点によれば、音響特性に基づく生体認証を行うための音波をユーザの頭部の一部に発する装着型機器であって、前記装着型機器を前記ユーザが装着しているか否かを判定する装着判定部と、前記装着判定部による判定の結果に基づいて、前記生体認証のための処理を実行可能でない第１動作モードと、前記生体認証のための処理を実行可能な第２動作モードとを含む複数の動作モードの間で前記装着型機器の動作モードを切り替える動作モード制御部と、を備える、装着型機器が提供される。
本発明の他の一観点によれば、音響特性に基づく生体認証を行うための音波をユーザの頭部の一部に発する装着型機器を、前記ユーザが装着しているか否かを判定するステップと、判定の結果に基づいて、前記生体認証のための処理を実行可能でない第１動作モードと、前記生体認証のための処理を実行可能な第２動作モードとを含む複数の動作モードの間で前記装着型機器の動作モードを切り替えるステップと、を備える、情報処理方法が提供される。
本発明の他の一観点によれば、コンピュータに、音響特性に基づく生体認証を行うための音波をユーザの頭部の一部に発する装着型機器を、前記ユーザが装着しているか否かを判定するステップと、判定の結果に基づいて、前記生体認証のための処理を実行可能でない第１動作モードと、前記生体認証のための処理を実行可能な第２動作モードとを含む複数の動作モードの間で前記装着型機器の動作モードを切り替えるステップと、を実行させるためのプログラムが記憶された記憶媒体が提供される。
本発明によれば、音響特性に基づく生体認証を行う装着型装置における消費電力を低減することができる情報処理装置、装着型機器、情報処理方法及び記憶媒体を提供することができる。
第１実施形態に係る情報処理システムの全体構成を示す模式図である。 第１実施形態に係るイヤホンのハードウェア構成を示すブロック図である。 第１実施形態に係る情報通信装置のハードウェア構成を示すブロック図である。 第１実施形態に係るイヤホン制御装置の機能ブロック図である。 第１実施形態に係るイヤホンの状態遷移図である。 第１実施形態に係るイヤホン制御装置により行われる動作モードの遷移の一例を示すフローチャートである。 第１実施形態に係るイヤホンの消費電力の変化の一例を示すグラフである。 第２実施形態に係るイヤホン制御装置及び情報通信装置の機能ブロック図である。 第２実施形態に係る耳音響認証の処理を示すフローチャートである。 第３実施形態に係るイヤホン制御装置及び情報通信装置の機能ブロック図である。 第３実施形態に係るイヤホンの状態遷移図である。 第３実施形態に係るイヤホン制御装置により行われる動作モードの遷移の一例を示すフローチャートである。 第３実施形態に係るイヤホンの消費電力の変化の一例を示すグラフである。 第４実施形態に係る情報処理装置の機能ブロック図である。
以下、図面を参照して、本発明の例示的な実施形態を説明する。図面において同様の要素又は対応する要素には同一の符号を付し、その説明を省略又は簡略化することがある。
［第１実施形態］
本実施形態に係る情報処理システムについて説明する。本実施形態の情報処理システムは、イヤホン等の装着型機器の装着検出と生体認証を行うためのシステムである。
図１は、本実施形態に係る情報処理システムの全体構成を示す模式図である。情報処理システムは、互いに無線通信接続され得る情報通信装置１とイヤホン２とを備える。
イヤホン２は、イヤホン制御装置２０、スピーカ２６、マイクロホン２７及び赤外線センサ２９を備える。イヤホン２は、ユーザ３の耳に装着可能な音響機器であり、典型的にはワイヤレスイヤホン、ワイヤレスヘッドセット等のワイヤレス機器である。スピーカ２６は、装着時にユーザ３の外耳道に向けて音波を発する音波発生部として機能するものであり、イヤホン２の装着面側に配されている。マイクロホン２７も装着時にユーザ３の外耳道等で反響した音波を受けることができるようにイヤホン２の装着面側に配されている。また、赤外線センサ２９は、装着時にユーザ３から発せられた赤外線を検出する装着検出部として機能するものであり、フォトダイオード等により構成される。赤外線センサ２９は、イヤホン２の装着面側に配されている。イヤホン制御装置２０は、スピーカ２６、マイクロホン２７及び赤外線センサ２９の制御及び情報通信装置１との通信を行う。
なお、本明細書において、音波、音声等の「音」は、周波数又は音圧レベルが可聴範囲外である非可聴音を含むものとする。
情報通信装置１は、例えば、イヤホン２と通信可能に接続されるコンピュータであり、イヤホン２の動作の制御、イヤホン２から発せられる音波の生成用の音声データの送信、イヤホン２が受けた音波から得られた音声データの受信等を行う。具体例としては、ユーザ３がイヤホン２を用いて音楽鑑賞を行う場合には、情報通信装置１は、音楽の圧縮データをイヤホン２に送信する。また、イヤホン２がイベント会場、病院等における業務指令用の電話装置である場合には、情報通信装置１は業務指示の音声データをイヤホン２に送信する。この場合、更に、ユーザ３の発話の音声データをイヤホン２から情報通信装置１に送信してもよい。また、情報通信装置１又はイヤホン２は、イヤホン２が受けた音波を用いた耳音響認証の機能を備えていてもよい。
なお、この全体構成は一例であり、例えば、情報通信装置１とイヤホン２が有線接続されていてもよい。また、情報通信装置１とイヤホン２が一体の装置として構成されていてもよく、情報処理システム内に更に別の装置が含まれていてもよい。
図２は、イヤホン制御装置２０のハードウェア構成例を示すブロック図である。イヤホン制御装置２０は、ＣＰＵ（Central Processing Unit）２０１、ＲＡＭ（Random Access Memory）２０２、ＲＯＭ（Read Only Memory）２０３及びフラッシュメモリ２０４を備える。また、イヤホン制御装置２０は、スピーカＩ／Ｆ（Interface）２０５、マイクロホンＩ／Ｆ２０６、通信Ｉ／Ｆ２０７、バッテリ２０８及び赤外線センサＩ／Ｆ２１０を備える。なお、イヤホン制御装置２０の各部は、不図示のバス、配線、駆動装置等を介して相互に接続される。
ＣＰＵ２０１は、ＲＯＭ２０３、フラッシュメモリ２０４等に記憶されたプログラムに従って所定の演算を行うとともに、イヤホン制御装置２０の各部を制御する機能をも有するプロセッサである。ＲＡＭ２０２は、揮発性記憶媒体から構成され、ＣＰＵ２０１の動作に必要な一時的なメモリ領域を提供する。ＲＯＭ２０３は、不揮発性記憶媒体から構成され、イヤホン制御装置２０の動作に用いられるプログラム等の必要な情報を記憶する。フラッシュメモリ２０４は、不揮発性記憶媒体から構成され、データの一時記憶、イヤホン制御装置２０の動作用プログラムの記憶等を行う記憶装置である。
通信Ｉ／Ｆ２０７は、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｗｉ－Ｆｉ（登録商標）等の規格に基づく通信インターフェースであり、情報通信装置１との通信を行うためのモジュールである。
スピーカＩ／Ｆ２０５は、スピーカ２６を駆動するためのインターフェースである。スピーカＩ／Ｆ２０５は、デジタルアナログ変換回路、増幅器等を含む。スピーカＩ／Ｆ２０５は、音声データをアナログ信号に変換し、スピーカ２６に供給する。これによりスピーカ２６は、音声データに基づく音波を発する。
マイクロホンＩ／Ｆ２０６は、マイクロホン２７から信号を取得するためのインターフェースである。マイクロホンＩ／Ｆ２０６は、アナログデジタル変換回路、増幅器等を含む。マイクロホンＩ／Ｆ２０６は、マイクロホン２７が受け取った音波により生じたアナログ信号をデジタル信号に変換する。これにより、イヤホン制御装置２０は、受け取った音波に基づく音声データを取得する。
バッテリ２０８は、例えば二次電池であり、イヤホン２の動作に必要な電力を供給する。バッテリ２０８がイヤホン２に内蔵されていることにより、イヤホン２は、外部の電源に有線接続することなく、ワイヤレスで動作することができる。
赤外線センサＩ／Ｆ２１０は、赤外線センサ２９から信号を取得するためのインターフェースである。赤外線センサＩ／Ｆ２１０は、アナログデジタル変換回路、増幅器等を含む。赤外線センサＩ／Ｆ２１０は、赤外線センサ２９が受け取った赤外線により生じたアナログ信号をデジタル信号に変換する。これにより、イヤホン制御装置２０は、受け取った赤外線に基づくユーザ３の検出データを取得する。
なお、図２に示されているハードウェア構成は例示であり、これら以外の装置が追加されていてもよく、一部の装置が設けられていなくてもよい。また、一部の装置が同様の機能を有する別の装置に置換されていてもよい。例えば、イヤホン２はユーザ３による操作を受け付けることができるようにボタン等の入力装置を更に備えていてもよく、ユーザ３に情報を提供するためのディスプレイ、表示灯等の表示装置を更に備えていてもよい。このように図２に示されているハードウェア構成は適宜変更可能である。
図３は、情報通信装置１のハードウェア構成例を示すブロック図である。情報通信装置１は、ＣＰＵ１０１、ＲＡＭ１０２、ＲＯＭ１０３及びＨＤＤ（Hard Disk Drive）１０４を備える。また、情報通信装置１は、通信Ｉ／Ｆ１０５、入力装置１０６及び出力装置１０７を備える。なお、情報通信装置１の各部は、不図示のバス、配線、駆動装置等を介して相互に接続される。
図３では、情報通信装置１を構成する各部が一体の装置として図示されているが、これらの機能の一部は外付け装置により提供されるものであってもよい。例えば、入力装置１０６及び出力装置１０７は、ＣＰＵ１０１等を含むコンピュータの機能を構成する部分とは別の外付け装置であってもよい。
ＣＰＵ１０１は、ＲＯＭ１０３、ＨＤＤ１０４等に記憶されたプログラムに従って所定の演算を行うとともに、情報通信装置１の各部を制御する機能をも有するプロセッサである。ＲＡＭ１０２は、揮発性記憶媒体から構成され、ＣＰＵ１０１の動作に必要な一時的なメモリ領域を提供する。ＲＯＭ１０３は、不揮発性記憶媒体から構成され、情報通信装置１の動作に用いられるプログラム等の必要な情報を記憶する。ＨＤＤ１０４は、不揮発性記憶媒体から構成され、イヤホン２と送受信するデータの一時記憶、情報通信装置１の動作用プログラムの記憶等を行う記憶装置である。
通信Ｉ／Ｆ１０５は、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｗｉ－Ｆｉ（登録商標）等の規格に基づく通信インターフェースであり、イヤホン２等の他の装置との通信を行うためのモジュールである。
入力装置１０６は、キーボード、ポインティングデバイス等であって、ユーザ３が情報通信装置１を操作するために用いられる。ポインティングデバイスの例としては、マウス、トラックボール、タッチパネル、ペンタブレット等が挙げられる。
出力装置１０７は、例えば表示装置である。表示装置は、液晶ディスプレイ、ＯＬＥＤ（Organic Light Emitting Diode）ディスプレイ等であって、情報の表示、操作入力用のＧＵＩ（Graphical User Interface）等の表示に用いられる。入力装置１０６及び出力装置１０７は、タッチパネルとして一体に形成されていてもよい。
なお、図３に示されているハードウェア構成は例示であり、これら以外の装置が追加されていてもよく、一部の装置が設けられていなくてもよい。また、一部の装置が同様の機能を有する別の装置に置換されていてもよい。更に、本実施形態の一部の機能がネットワークを介して他の装置により提供されてもよく、本実施形態の機能が複数の装置に分散されて実現されるものであってもよい。例えば、ＨＤＤ１０４は、半導体メモリを用いたＳＳＤ（Solid State Drive）に置換されていてもよく、クラウドストレージに置換されていてもよい。このように図３に示されているハードウェア構成は適宜変更可能である。
図４は、本実施形態に係るイヤホン制御装置２０の機能ブロック図である。イヤホン制御装置２０は、装着判定部２１１、耳音響認証部２１２、動作モード制御部２１３、及び記憶部２１４を有する。
ＣＰＵ２０１は、ＲＯＭ２０３、フラッシュメモリ２０４等に記憶されたプログラムをＲＡＭ２０２にロードして実行する。これにより、ＣＰＵ２０１は、装着判定部２１１、耳音響認証部２１２及び動作モード制御部２１３の機能を実現する。また、ＣＰＵ２０１は、当該プログラムに基づいてフラッシュメモリ２０４を制御することにより記憶部２１４の機能を実現する。これらの各部で行われる具体的な処理については後述する。
本実施形態においては図４の機能ブロックの各機能はイヤホン制御装置２０に設けられているものとするが、図４の機能ブロックの機能の一部が情報通信装置１に設けられていてもよい。すなわち、上述の各機能は、イヤホン制御装置２０によって実現されてもよく、情報通信装置１によって実現されてもよく、情報通信装置１とイヤホン制御装置２０とが協働することにより実現されてもよい。情報通信装置１及びイヤホン制御装置２０は、より一般的に情報処理装置と呼ばれることもある。
図５は、本実施形態に係るイヤホン２の状態遷移図である。まず、図５を参照して、イヤホン制御装置２０の動作の概略を説明する。
イヤホン２は、第１動作モード、第２動作モード及び第３動作モードの３つのモードで動作可能であり、イヤホン制御装置２０の動作モード制御部２１３によりモード間の遷移が制御される。各動作モード間では、イヤホン２が実行できる機能の制限の有無が互いに異なっている。第１動作モード及び第２動作モードは、それぞれ、イヤホン２の装着判定及び生体認証のための動作モードである。これらのモードにおいて、イヤホン２の本来の機能（音声の聴取等）は制限されている。
第１動作モードにおいては、装着判定部２１１は、ユーザ３がイヤホン２を装着しているか否かを判定することができる。ユーザ３がイヤホン２を装着している場合には、ユーザ３から発せられた赤外線が赤外線センサ２９に入射されるため、赤外線センサ２９で受け取られる赤外線の強度は大きくなる。したがって、装着判定部２１１は、赤外線センサ２９で受け取られた赤外線の強度を示すデジタル信号に基づいて装着の有無を判定することができる。装着判定部２１１による判定基準は、例えば、赤外線の強度が閾値以上である場合にユーザ３がイヤホン２を装着していると判定するものであり得る。あるいは、当該判定基準は、赤外線の強度又はその変化に基づいて装着スコアを算出し、装着スコアが閾値以上である場合にユーザ３がイヤホン２を装着していると判定するものであり得る。
第１動作モードにおいて、装着判定部２１１がユーザ３がイヤホン２を装着していると判定した場合には、動作モード制御部２１３は、イヤホン２の動作モードを第２動作モードに遷移させる。第１動作モードにおいて、装着判定部２１１がユーザ３がイヤホン２を装着していないと判定した場合には、動作モード制御部２１３は、イヤホン２の動作モードを第１動作モードのままに維持する。
しかしながら、第１動作モードにおいては、耳音響認証部２１２による耳音響認証の機能は制限されており、耳音響認証は実行可能でない。第２動作モードは、耳音響認証が実行可能な動作モードである。言い換えると、動作モード制御部２１３は、イヤホン２の動作モードを第１動作モードから第２動作モードに遷移させることにより、耳音響認証の機能制限を解除する。
第２動作モードにおいては、耳音響認証部２１２は、耳音響認証によりユーザ３が登録者であるか否かを判定することができる。耳音響認証とは、ユーザ３の外耳道の音響特性を照合する生体認証である。スピーカ２６によりユーザ３の外耳道に検査用音波を発し、マイクロホン２７によりユーザ３の外耳道等で反響した音波を受けることにより、イヤホン２は、ユーザ３の外耳道の音響特性を取得することができる。耳音響認証部２１２は、取得した外耳道の音響特性から抽出された特徴量と、登録者の外耳道の音響特性から抽出された特徴量とを照合することによりユーザ３が登録者であるか否かを判定することができる。登録者とは、イヤホン２の正規の使用者として、外耳道の音響特性又は特徴量が登録されている人物のことである。この認証を行うことにより、権限のない人物に対してイヤホン２の機能を制限することができ、権限のない人物にイヤホン２を使用されることを防ぐことができる。
なお、本実施形態においては、登録者の外耳道の音響特性は記憶部２１４にあらかじめ記憶されているものとするが、認証時に登録者の外耳道の音響特性を情報通信装置１等の他の装置から取得してもよい。
なお、耳音響認証において取得される音響特性は、典型的には外耳道での共鳴に起因する音響特性であるが、頭蓋骨等の外耳道の周辺の組織での反響に起因する音響特性の特徴も含まれ得る。また、検査用音波は外耳道に向けて直接発せられなくてもよく、例えば、骨伝導スピーカによりユーザ３の頭部の一部に発せられてもよい。
第２動作モードにおいて、耳音響認証部２１２がユーザ３が登録者であると判定した場合には、動作モード制御部２１３は、イヤホン２の動作モードを第３動作モードに遷移させる。第２動作モードにおいて、耳音響認証部２１２がユーザ３が登録者でないと判定した場合には、動作モード制御部２１３は、イヤホン２の動作モードを第１動作モードに遷移させる。
第３動作モードは、ユーザ３がイヤホン２を利用可能な動作モードである。第３動作モードにおいて、イヤホン２の機能制限が解除されることにより、ユーザ３は、イヤホン２の本来の機能を享受することができる。例えば、イヤホン２が業務司令用の電話装置である場合には、第３動作モードにおいて、イヤホン２は業務司令の音声データを受け取ってスピーカ２６からその音声を発することができる。なお、第３動作モードは、イヤホン２の機能制限がすべて解除されるモードであってもよい。また、ユーザごとに利用可能な機能が異なる場合には、第３動作モードは、イヤホン２の機能制限のうち、認証されたユーザに許容された部分が解除されるモードであってもよい。
また、第３動作モードにおいては、装着判定部２１１による装着検出が行われてもよい。第３動作モードにおいて、装着判定部２１１がユーザ３がイヤホン２を装着していないと判定した場合には、動作モード制御部２１３は、イヤホン２の動作モードを第１動作モードに遷移させる。
次に、図６及び図７を参照して、イヤホン２の動作モードの遷移とこれに伴う消費電力の変化を説明する。図６は、本実施形態に係るイヤホン制御装置２０により行われる動作モードの遷移の一例を示すフローチャートである。また、図７は、本実施形態に係るイヤホン２の消費電力の変化の一例を示すグラフである。図６及び図７は、ユーザ３がイヤホン２を装着し、使用する際の典型的な処理を示すものであるが、動作モードの遷移の状況によっては図示したものと異なるフローとなる場合もある。なお、本グラフのスケールは必ずしも正確なものではなく、本グラフは、処理に伴う消費電力の変化を模式的に示したものにすぎない。
図６の処理は、例えば、イヤホン２の電源がオンであるときに所定の時間が経過するごとに実行される。あるいは、図６の処理は、ユーザ３がイヤホン２を操作してイヤホン２の使用を開始したときに実行されてもよい。
ステップＳ１０１において、動作モード制御部２１３は、イヤホン２の動作モードを第１動作モードに設定する。ステップＳ１０１の処理時刻は、図７における時刻ｔ１に対応する。図７に示されるように、時刻ｔ１においてイヤホン２の消費電力はＰ１である。
ステップＳ１０２において、装着判定部２１１は、装着判定のための処理を行う。この装着判定のための処理は、上述の赤外線の強度を示すデータの取得等を含み得る。
ステップＳ１０３において、装着判定部２１１は、ユーザ３がイヤホン２を装着しているか否かを判定する。ユーザ３がイヤホン２を装着していると判定された場合（ステップＳ１０３におけるＹＥＳ）、処理は、ステップＳ１０４に移行する。ユーザ３がイヤホン２を装着していないと判定された場合（ステップＳ１０３におけるＮＯ）、処理はステップＳ１０１に戻り、動作モードが第１動作モードに維持される。
ステップＳ１０４において、動作モード制御部２１３は、イヤホン２の動作モードを第２動作モードに遷移させる。ステップＳ１０４の処理時刻は、図７における時刻ｔ２に対応する。図７に示されるように、時刻ｔ２においてイヤホン２の消費電力はＰ１から、Ｐ１よりも大きいＰ２に変化する。
第１動作モードと第２動作モードの消費電力の違いについて説明する。上述のように第２動作モードは、耳音響認証が実行可能である点が第１動作モードと相違する。耳音響認証は、例えば、音響特性のデータから特徴量を抽出する処理、特徴量の照合処理といった演算処理を含む。この場合、耳音響認証に必要な電力消費量は、｛（特徴量抽出の計算量＋照合の計算量）×単位計算量あたりに要する電力消費量｝となる。この消費電力は、イヤホン２がワイヤレスデバイスであるため、内蔵のバッテリ２０８から電力供給を受けており、かつイヤホン２が耳に装着する小型のデバイスであるためバッテリ２０８の電力容量があまり大きくないことを考慮すると無視できないほど大きい。したがって、第２動作モードでは、第１動作モードの場合よりもイヤホン２の消費電力が増大する。
ステップＳ１０５において、耳音響認証部２１２は、耳音響認証のための処理を行う。この耳音響認証のための処理は、上述の外耳道の音響特性の取得、特徴量の抽出、特徴量の照合等を含み得る。
ステップＳ１０６において、耳音響認証部２１２は、ユーザ３が登録者であるか否かを判定する。ユーザ３が登録者であると判定された場合（ステップＳ１０６におけるＹＥＳ）、処理は、ステップＳ１０７に移行する。ユーザ３が登録者ではないと判定された場合（ステップＳ１０６におけるＮＯ）、処理はステップＳ１０１に戻り、動作モードは第１動作モードに遷移する。
ステップＳ１０７において、動作モード制御部２１３は、イヤホン２の動作モードを第３動作モードに遷移させる。ステップＳ１０７の処理時刻は、図７における時刻ｔ３に対応する。図７に示されるように、時刻ｔ３においてイヤホン２の消費電力はＰ２から、Ｐ２よりも大きいＰ３に変化する。第３動作モードでは、情報通信装置１とイヤホン２の間の音声データの通信、スピーカ２６による音波の送出等の処理が行われるため、第２動作モードの場合よりも更に消費電力が増大する。
ステップＳ１０８及びステップＳ１０９において、ステップＳ１０２及びステップＳ１０３と同様にしてイヤホン２の装着検出処理が行われる。ユーザ３がイヤホン２を装着していると判定された場合（ステップＳ１０９におけるＹＥＳ）、動作モードは第３動作モードに維持され、その後も所定の間隔で装着検出処理が行われる。ユーザ３がイヤホン２を装着していないと判定された場合（ステップＳ１０９におけるＮＯ）、処理はステップＳ１０１に戻り、動作モードは第１動作モードに遷移する。認証の完了後にイヤホン２が装着されていないと判定される可能性としては、例えば、ユーザ３がイヤホン２の使用を中断又は終了し、イヤホン２を外す場面が想定される。この場合、動作モードが第１動作モードに遷移することにより、他人にイヤホン２が使用されないようにイヤホン２の機能が制限される。
ステップＳ１０９においてユーザ３がイヤホン２を装着していないと判定された時刻は、図７における時刻ｔ４に対応する。図７に示されるように、時刻ｔ４においてイヤホン２の消費電力はＰ３から、Ｐ３よりも小さいＰ１に変化する。
本実施形態のイヤホン制御装置２０は、耳音響認証のための処理を実行可能でない第１動作モードと、耳音響認証のための処理を実行可能な第２動作モードとの間でイヤホン２の動作モードを切り替えることができる。本実施形態では、この動作モードの切り替えを装着判定の結果に基づいて行うため、人物がイヤホン２を装着していないときには耳音響認証を実行しないような制御が実現される。これにより、イヤホン２の耳音響認証に起因する電力の消費が低減される。したがって、本実施形態によれば、音響特性に基づく生体認証を行う装着型装置における消費電力を低減することができる情報処理装置が提供される。
イヤホン２は、典型的には耳に装着されるワイヤレスの装着型機器であるため、イヤホン２を駆動するバッテリ２０８の電力容量が少ない。したがって、上述の制御により消費電力を低減することが有効であり、イヤホン２の使用可能時間を長くすることができる。
［第２実施形態］
本実施形態の情報処理システムは、耳音響認証の処理の一部がイヤホン２の外部で行われる点が第１実施形態と相違する。以下では主として第１実施形態との相違点について説明するものとし、共通部分については説明を省略又は簡略化する。
図８は、本実施形態に係るイヤホン制御装置２０及び情報通信装置１の機能ブロック図である。イヤホン制御装置２０は、第１実施形態の耳音響認証部２１２に代えて特徴量取得部２１５を有する。情報通信装置１は、特徴量照合部１１１及び記憶部１１２を有する。
イヤホン制御装置２０のＣＰＵ２０１は、ＲＯＭ２０３、フラッシュメモリ２０４等に記憶されたプログラムを実行することにより、特徴量取得部２１５の機能を実現する。情報通信装置１のＣＰＵ１０１は、ＲＯＭ１０３、ＨＤＤ１０４等に記憶されたプログラムを実行することにより、特徴量照合部１１１の機能を実現する。また、ＣＰＵ１０１は、当該プログラムに基づいてＨＤＤ１０４を制御することにより記憶部１１２の機能を実現する。これらの各部で行われる具体的な処理については後述する。
図９は、本実施形態に係る耳音響認証の処理を示すフローチャートである。図９の処理は、第１実施形態の図６におけるステップＳ１０５の処理をより詳細に示したものである。それ以外の処理は、図６と同様であるため説明を省略する。
ステップＳ１１０において、イヤホン制御装置２０の特徴量取得部２１５は、ユーザ３の外耳道の音響特性を取得し、当該音響特性から特徴量を抽出する。これにより、特徴量取得部２１５は、ユーザ３の外耳道の音響特性に基づく特徴量を取得する。
ステップＳ１１１において、イヤホン２は情報通信装置１に特徴量を送信する。情報通信装置１は取得した特徴量を記憶部１１２に記憶する。
ステップＳ１１２において、情報通信装置１の特徴量照合部１１１は、ユーザ３の特徴量と、あらかじめ記憶部１１２に記憶されている登録者の特徴量とを照合する。
ステップＳ１１３において、情報通信装置１はイヤホン２に照合結果を送信する。イヤホン２のＣＰＵ２０１は、この照合結果を用いて、図６におけるステップＳ１０６の分岐処理を行う。
本実施形態では、耳音響認証の処理のうちの照合処理がイヤホン２の外部の情報通信装置１で行われている。本構成であっても、第１実施形態と同様に耳音響認証を行うことができる。したがって、第１実施形態と同様に音響特性に基づく生体認証を行う装着型装置における消費電力を低減することができる情報処理装置が提供される。
第１実施形態のように耳音響認証をイヤホン２で行う構成と、第２実施形態のように耳音響認証の処理のうちの照合処理をイヤホン２の外部の装置で行う構成には一長一短がある。したがって、要求される仕様に応じて上述の２つの構成を適宜選択することが望ましい。以下では両者のメリットとデメリットを説明する。
第１実施形態の構成では、耳音響認証の処理がイヤホン２の内部で完結するため、耳音響認証時に他の装置と通信を行う必要がなく、通信に起因する消費電力を低減できる可能性がある点がメリットとなり得る。これに対し、第１実施形態の構成では、イヤホン２の内部にあらかじめ登録者の特徴量を記憶しておく必要がある点、及び、計算量が大きい照合アルゴリズムが用いられる場合には逆に消費電力が増大するおそれがある点がデメリットとなり得る。
第２実施形態の構成では、耳音響認証に必要な電力消費量は、（特徴量抽出の計算量×単位計算量あたりに要する電力消費量＋特徴量送信の通信量×単位通信量あたりに要する電力消費量）となる。したがって、通信に要する電力消費量が照合に要する電力消費量よりも少ない場合には、第２実施形態の構成の方が消費電力を低減できる場合がある。また、第２実施形態の構成では、イヤホン２の内部にあらかじめ登録者の特徴量を記憶しておく必要がない点、及び上位側の装置で登録者を管理しているため、使用者が不特定である場合又は使用者の更新が行われる場合の対応が容易である点もメリットとなり得る。一方、通信量が大きい場合には第１実施形態の構成よりも消費電力が大きくなる点、及び通信が必須であるため、通信障害時にはイヤホン２が使用できなくなる点がデメリットとなり得る。
［第３実施形態］
本実施形態の情報処理システムは、耳音響認証の処理がイヤホン２の内部と外部の両方で行われ得る点が第１実施形態又は第２実施形態と相違する。以下では主として第１実施形態又は第２実施形態との相違点について説明するものとし、共通部分については説明を省略又は簡略化する。
図１０は、本実施形態に係るイヤホン制御装置２０及び情報通信装置１の機能ブロック図である。イヤホン制御装置２０は、図８に示した構成に加えて第１特徴量照合部２１６を有する。情報通信装置１は、図８に示した特徴量照合部１１１に代えて第２特徴量照合部１１３を有する。
イヤホン制御装置２０のＣＰＵ２０１は、ＲＯＭ２０３、フラッシュメモリ２０４等に記憶されたプログラムを実行することにより、第１特徴量照合部２１６の機能を実現する。情報通信装置１のＣＰＵ１０１は、ＲＯＭ１０３、ＨＤＤ１０４等に記憶されたプログラムを実行することにより、第２特徴量照合部１１３の機能を実現する。これらの各部で行われる具体的な処理については後述する。
図１１は、本実施形態に係るイヤホン２の状態遷移図である。まず、図１１を参照して、イヤホン制御装置２０の動作の概略を説明する。図５に示した状態遷移図との相違点は、第４動作モードが更に追加されている点である。
本実施形態において、第２動作モードは、イヤホン２において耳音響認証のための照合処理（第１生体認証）が可能な動作モードであり、第４動作モードは、情報通信装置１において耳音響認証のための照合処理（第２生体認証）が可能な動作モードである。情報通信装置１における第２生体認証のアルゴリズムは、イヤホン２における第１生体認証のアルゴリズムよりも、高精度であるが消費電力が大きい。
第２動作モードにおいて、特徴量取得部２１５は、ユーザ３の外耳道の音響特性から特徴量を抽出することにより、特徴量を取得する。第１特徴量照合部２１６は、特徴量取得部２１５により取得されたユーザ３の特徴量と、登録者の特徴量とを照合することによりユーザ３が登録者であるか否かを判定する。
第２動作モードにおいて、第１特徴量照合部２１６がユーザ３が登録者であると判定した場合には、動作モード制御部２１３は、イヤホン２の動作モードを第３動作モードに遷移させる。第２動作モードにおいて、第１特徴量照合部２１６がユーザ３が登録者でないと判定した場合には、動作モード制御部２１３は、イヤホン２の動作モードを第１動作モードに遷移させる。これに対し、第２動作モードにおいて、ユーザ３が登録者であるか否かが判定困難である場合には、動作モード制御部２１３は、イヤホン２の動作モードを第４動作モードに遷移させる。なお、判定困難な場合とは、例えば、２つの特徴量の類似度を示すスコアが、登録者であるか否かを判定するための閾値の近傍である場合である。このような場合、より高精度な照合を行うことが望ましいため、イヤホン２の動作モードは、より高精度な照合が可能な第４動作モードに遷移する。
第４動作モードにおいて、第２特徴量照合部１１３は、イヤホン２からユーザ３の特徴量を取得して、ユーザ３の特徴量と、登録者の特徴量とを照合することによりユーザ３が登録者であるか否かを判定する。
第４動作モードにおいて、第２特徴量照合部１１３がユーザ３が登録者であると判定した場合には、動作モード制御部２１３は、イヤホン２の動作モードを第３動作モードに遷移させる。第４動作モードにおいて、第２特徴量照合部１１３がユーザ３が登録者でないと判定した場合には、動作モード制御部２１３は、イヤホン２の動作モードを第１動作モードに遷移させる。
次に、図１２及び図１３を参照して、イヤホン２の動作モードの遷移とこれに伴う消費電力の変化を説明する。図１２は、本実施形態に係るイヤホン制御装置２０により行われる動作モードの遷移の一例を示すフローチャートである。また、図１３は、本実施形態に係るイヤホン２の消費電力の変化の一例を示すグラフである。図１２及び図１３は、ユーザ３がイヤホン２を装着し、使用する際の典型的な処理を示すものであるが、動作モードの遷移の状況によっては図示したものと異なるフローとなる場合もある。
ステップＳ１１４において、イヤホン制御装置２０の特徴量取得部２１５は、ユーザ３の外耳道の音響特性を取得し、当該音響特性から特徴量を抽出する。これにより、特徴量取得部２１５は、ユーザ３の外耳道の音響特性に基づく特徴量を取得する。その後、第１特徴量照合部２１６は、ユーザ３の特徴量と、あらかじめ記憶部２１４に記憶されている登録者の特徴量とを照合する。
ステップＳ１１５において、第１特徴量照合部２１６は、ユーザ３が登録者であるか否かを判定する。ユーザ３が登録者であると判定された場合（ステップＳ１１５におけるＹＥＳ）、処理は、ステップＳ１０７に移行する。ユーザ３が登録者ではないと判定された場合（ステップＳ１１５におけるＮＯ）、処理はステップＳ１０１に戻り、動作モードは第１動作モードに遷移する。ユーザ３が登録者であるか否かが判定困難である場合（ステップＳ１１５における「判定困難」）、処理はステップＳ１１６に移行する。
ステップＳ１１６において、動作モード制御部２１３は、イヤホン２の動作モードを第４動作モードに遷移させる。ステップＳ１１６の処理時刻は、図１３における時刻ｔ５に対応する。図１３に示されるように、時刻ｔ５においてイヤホン２の消費電力はＰ２から、Ｐ２よりも大きいＰ４に変化する。消費電力が増大する理由は、第２耳音響認証は通信を要する処理であるため、第１耳音響認証よりも多くの電力を必要とするためである。
ステップＳ１１７において、イヤホン２及び情報通信装置１は、第２耳音響認証を行う。この処理は、図９のステップＳ１１１からステップＳ１１３の処理と同様である。すなわち、第２耳音響認証において、第２特徴量照合部１１３は、イヤホン２から特徴量を取得して、ユーザ３の特徴量と、登録者の特徴量とを照合する。この照合結果は、情報通信装置１からイヤホン２に送信される。このように、照合処理が情報通信装置１側で行われる点が第２耳音響認証における第１耳音響認証との相違点である。
イヤホン２のＣＰＵ２０１は、この照合結果を用いてステップＳ１１８の分岐処理を行う。ユーザ３が登録者であると判定された場合（ステップＳ１１８におけるＹＥＳ）、処理は、ステップＳ１０７に移行する。ユーザ３が登録者ではないと判定された場合（ステップＳ１１８におけるＮＯ）、処理はステップＳ１０１に戻り、動作モードは第１動作モードに遷移する。
本実施形態では、第１耳音響認証の照合処理がイヤホン２で行われ、第２耳音響認証の照合処理が情報通信装置１で行われている。本構成であっても、第１実施形態と同様に耳音響認証を行うことができる。したがって、第１実施形態と同様に音響特性に基づく生体認証を行う装着型装置における消費電力を低減することができる情報処理装置が提供される。また、本実施形態では、第１実施形態のようにイヤホン２で照合を行う構成と、第２実施形態のように情報通信装置１で照合を行う構成が組み合わされている。そして、イヤホン２での低消費電力かつ簡易な照合で判定困難な場合にのみ情報通信装置１で高精度な照合を行うことにより、消費電力の低減と認証精度の確保を両立することができる。
上述の実施形態において説明したシステムは以下の第４実施形態のようにも構成することができる。
［第４実施形態］
図１４は、第４実施形態に係る情報処理装置３０の機能ブロック図である。情報処理装置３０は、装着判定部３１１及び動作モード制御部３１２を備える。装着判定部３１１は、音響特性に基づく生体認証を行うための音波をユーザの頭部の一部に発する装着型機器を、ユーザが装着しているか否かを判定する。動作モード制御部３１２は、装着判定部３１１による判定の結果に基づいて、生体認証のための処理を実行可能でない第１動作モードと、生体認証のための処理を実行可能な第２動作モードとを含む複数の動作モードの間で装着型機器の動作モードを切り替える。
本実施形態によれば、音響特性に基づく生体認証を行う装着型装置における消費電力を低減することができる情報処理装置３０が提供される。
［変形実施形態］
本発明は、上述の実施形態に限定されることなく、本発明の趣旨を逸脱しない範囲において適宜変更可能である。例えば、いずれかの実施形態の一部の構成を他の実施形態に追加した例や、他の実施形態の一部の構成と置換した例も、本発明の実施形態である。
上述の実施形態では、装着型機器の例としてイヤホン２を例示しているが、処理に必要な音響情報を取得可能であれば、耳に装着されるものに限定されるものではない。例えば、装着型機器は、骨伝導型の音響装置であってもよい。
また、上述の実施形態では、装着判定の手段として赤外線センサ２９が例示されているが、装着の判定が可能であればこれに限られるものではない。例えば、ユーザ３の外耳道に音波を発し、反響音の強度、反響時間等の反響音の音響特性を取得することで、反響音の音響特性に基づいて装着判定を行ってもよい。この場合、スピーカ２６及びマイクロホン２７が耳音響認証のみならず装着判定用の装置として機能する。したがって、装置構成を簡略化することができる。
また、上述の第２実施形態及び第３実施形態では、イヤホン２から情報通信装置１に特徴量が送信されるものとしているが、外耳道の音響特性のデータを送付してもよい。この場合、特徴量の抽出の処理を情報通信装置１で行ってもよい。この例では、通信量は増大するが、イヤホン２内での計算量を低減することができる。
上述の実施形態の機能を実現するように該実施形態の構成を動作させるプログラムを記憶媒体に記録させ、記憶媒体に記録されたプログラムをコードとして読み出し、コンピュータにおいて実行する処理方法も各実施形態の範疇に含まれる。すなわち、コンピュータ読取可能な記憶媒体も各実施形態の範囲に含まれる。また、上述のプログラムが記録された記憶媒体だけでなく、そのプログラム自体も各実施形態に含まれる。また、上述の実施形態に含まれる１又は２以上の構成要素は、各構成要素の機能を実現するように構成されたＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field Programmable Gate Array）等の回路であってもよい。
該記憶媒体としては例えばフロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ（Compact Disk）－ＲＯＭ、磁気テープ、不揮発性メモリカード、ＲＯＭを用いることができる。また該記憶媒体に記録されたプログラム単体で処理を実行しているものに限らず、他のソフトウェア、拡張ボードの機能と共同して、ＯＳ（Operating System）上で動作して処理を実行するものも各実施形態の範疇に含まれる。
上述の各実施形態の機能により実現されるサービスは、ＳａａＳ（Software as a Service）の形態でユーザに対して提供することもできる。
なお、上述の実施形態は、いずれも本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。
上述の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
（付記１）
音響特性に基づく生体認証を行うための音波をユーザの頭部の一部に発する装着型機器を、前記ユーザが装着しているか否かを判定する装着判定部と、
前記装着判定部による判定の結果に基づいて、前記生体認証のための処理を実行可能でない第１動作モードと、前記生体認証のための処理を実行可能な第２動作モードとを含む複数の動作モードの間で前記装着型機器の動作モードを切り替える動作モード制御部と、
を備える、情報処理装置。
（付記２）
前記第２動作モードの消費電力は、前記第１動作モードの消費電力よりも大きい、
付記１に記載の情報処理装置。
（付記３）
前記動作モード制御部は、前記装着判定部により前記ユーザが前記装着型機器を装着していると判定された場合に、前記装着型機器の動作モードを前記第１動作モードから前記第２動作モードに切り替える、
付記１又は２に記載の情報処理装置。
（付記４）
前記複数の動作モードは、前記ユーザが前記装着型機器を利用可能な第３動作モードを更に含み、
前記第３動作モードの消費電力は前記第２動作モードの消費電力よりも大きい、
付記１乃至３のいずれか１項に記載の情報処理装置。
（付記５）
前記動作モード制御部は、前記生体認証により前記ユーザが前記装着型機器を利用可能であると認められた場合に、前記装着型機器の動作モードを前記第２動作モードから前記第３動作モードに切り替える、
付記４に記載の情報処理装置。
（付記６）
前記生体認証のための前記音響特性の照合は、前記装着型機器により実行される、
付記１乃至５のいずれか１項に記載の情報処理装置。
（付記７）
前記生体認証のための前記音響特性の照合は、前記装着型機器と通信可能な装置により実行される、
付記１乃至５のいずれか１項に記載の情報処理装置。
（付記８）
前記生体認証は、第１生体認証及び前記第１生体認証よりも精度が高い第２生体認証を含み、
前記第２動作モードは、前記第１生体認証のための処理を実行可能であり、
前記複数の動作モードは、更に前記第２生体認証のための処理を実行可能な第４動作モードを含む、
付記１乃至３のいずれか１項に記載の情報処理装置。
（付記９）
前記第４動作モードの消費電力は、前記第２動作モードの消費電力よりも大きい、
付記８に記載の情報処理装置。
（付記１０）
前記動作モード制御部は、前記ユーザが前記装着型機器を利用可能であるか否かを前記第１生体認証によって判定することが困難である場合に、前記装着型機器の動作モードを前記第２動作モードから前記第４動作モードに切り替える、
付記８又は９に記載の情報処理装置。
（付記１１）
前記第１生体認証のための前記音響特性の照合は、前記装着型機器により実行され、
前記第２生体認証のための前記音響特性の照合は、前記装着型機器と通信可能な装置により実行される、
付記８乃至１０のいずれか１項に記載の情報処理装置。
（付記１２）
前記複数の動作モードは、前記ユーザが前記装着型機器の機能を利用可能な第３動作モードを更に含み、
前記第３動作モードの消費電力は、前記第４動作モードの消費電力よりも大きい、
付記８乃至１１のいずれか１項に記載の情報処理装置。
（付記１３）
前記動作モード制御部は、前記第１生体認証又は前記第２生体認証により前記ユーザが前記装着型機器を利用可能であると認められた場合に、前記装着型機器の動作モードを前記第２動作モード又は前記第４動作モードから前記第３動作モードに切り替える、
付記１２に記載の情報処理装置。
（付記１４）
前記生体認証は、外耳道の音響特性を照合することにより行われる、
付記１乃至１３のいずれか１項に記載の情報処理装置。
（付記１５）
前記装着型機器は、前記ユーザの耳に装着される音響機器である、
付記１乃至１４のいずれか１項に記載の情報処理装置。
（付記１６）
前記装着型機器は、前記装着型機器に内蔵されたバッテリから電力の供給を受けて動作するワイヤレス機器である、
付記１乃至１５のいずれか１項に記載の情報処理装置。
（付記１７）
音響特性に基づく生体認証を行うための音波をユーザの頭部の一部に発する装着型機器であって、
前記装着型機器を前記ユーザが装着しているか否かを判定する装着判定部と、
前記装着判定部による判定の結果に基づいて、前記生体認証のための処理を実行可能でない第１動作モードと、前記生体認証のための処理を実行可能な第２動作モードとを含む複数の動作モードの間で前記装着型機器の動作モードを切り替える動作モード制御部と、
を備える、装着型機器。
（付記１８）
音響特性に基づく生体認証を行うための音波をユーザの頭部の一部に発する装着型機器を、前記ユーザが装着しているか否かを判定するステップと、
判定の結果に基づいて、前記生体認証のための処理を実行可能でない第１動作モードと、前記生体認証のための処理を実行可能な第２動作モードとを含む複数の動作モードの間で前記装着型機器の動作モードを切り替えるステップと、
を備える、情報処理方法。
（付記１９）
コンピュータに、
音響特性に基づく生体認証を行うための音波をユーザの頭部の一部に発する装着型機器を、前記ユーザが装着しているか否かを判定するステップと、
判定の結果に基づいて、前記生体認証のための処理を実行可能でない第１動作モードと、前記生体認証のための処理を実行可能な第２動作モードとを含む複数の動作モードの間で前記装着型機器の動作モードを切り替えるステップと、
を実行させるためのプログラムが記憶された記憶媒体。
１ 情報通信装置
２ イヤホン
３ ユーザ
２０ イヤホン制御装置
２６ スピーカ
２７ マイクロホン
２９ 赤外線センサ
３０ 情報処理装置
１０１、２０１ ＣＰＵ
１０２、２０２ ＲＡＭ
１０３、２０３ ＲＯＭ
１０４ ＨＤＤ
１０５、２０７ 通信Ｉ／Ｆ
１０６ 入力装置
１０７ 出力装置
１１１ 特徴量照合部
１１２、２１４ 記憶部
１１３ 第２特徴量照合部
２０４ フラッシュメモリ
２０５ スピーカＩ／Ｆ
２０６ マイクロホンＩ／Ｆ
２０８ バッテリ
２１０ 赤外線センサＩ／Ｆ
２１１、３１１ 装着判定部
２１２ 耳音響認証部
２１３、３１２ 動作モード制御部
２１５ 特徴量取得部
２１６ 第１特徴量照合部

Claims (18)

  1. 音響特性に基づく生体認証を行うための音波をユーザの頭部の一部に発する装着型機器を、前記ユーザが装着しているか否かを判定する装着判定部と、
    前記装着判定部による判定の結果に基づいて、前記生体認証のための処理を実行可能でない第１動作モードと、前記生体認証のための処理を実行可能な第２動作モードとを含む複数の動作モードの間で前記装着型機器の動作モードを切り替える動作モード制御部と、
    を備え、
    前記第２動作モードの消費電力は、前記第１動作モードの消費電力よりも大きい、
    情報処理装置。
  2. 前記動作モード制御部は、前記装着判定部により前記ユーザが前記装着型機器を装着していると判定された場合に、前記装着型機器の動作モードを前記第１動作モードから前記第２動作モードに切り替える、
    請求項１に記載の情報処理装置。
  3. 音響特性に基づく生体認証を行うための音波をユーザの頭部の一部に発する装着型機器を、前記ユーザが装着しているか否かを判定する装着判定部と、
    前記装着判定部による判定の結果に基づいて、前記生体認証のための処理を実行可能でない第１動作モードと、前記生体認証のための処理を実行可能な第２動作モードとを含む複数の動作モードの間で前記装着型機器の動作モードを切り替える動作モード制御部と、
    を備え、
    前記複数の動作モードは、前記ユーザが前記装着型機器を利用可能な第３動作モードを更に含み、
    前記第３動作モードの消費電力は前記第２動作モードの消費電力よりも大きい、
    情報処理装置。
  4. 前記動作モード制御部は、前記生体認証により前記ユーザが前記装着型機器を利用可能であると認められた場合に、前記装着型機器の動作モードを前記第２動作モードから前記第３動作モードに切り替える、
    請求項３に記載の情報処理装置。
  5. 前記生体認証のための前記音響特性の照合は、前記装着型機器により実行される、
    請求項１乃至４のいずれか１項に記載の情報処理装置。
  6. 前記生体認証のための前記音響特性の照合は、前記装着型機器と通信可能な装置により実行される、
    請求項１乃至４のいずれか１項に記載の情報処理装置。
  7. 音響特性に基づく生体認証を行うための音波をユーザの頭部の一部に発する装着型機器を、前記ユーザが装着しているか否かを判定する装着判定部と、
    前記装着判定部による判定の結果に基づいて、前記生体認証のための処理を実行可能でない第１動作モードと、前記生体認証のための処理を実行可能な第２動作モードとを含む複数の動作モードの間で前記装着型機器の動作モードを切り替える動作モード制御部と、
    を備え、
    前記生体認証は、第１生体認証及び前記第１生体認証よりも精度が高い第２生体認証を含み、
    前記第２動作モードは、前記第１生体認証のための処理を実行可能であり、
    前記複数の動作モードは、更に前記第２生体認証のための処理を実行可能な第４動作モードを含む、
    情報処理装置。
  8. 前記第４動作モードの消費電力は、前記第２動作モードの消費電力よりも大きい、
    請求項７に記載の情報処理装置。
  9. 前記動作モード制御部は、前記ユーザが前記装着型機器を利用可能であるか否かを前記第１生体認証によって判定することが困難である場合に、前記装着型機器の動作モードを前記第２動作モードから前記第４動作モードに切り替える、
    請求項７又は８に記載の情報処理装置。
  10. 前記第１生体認証のための前記音響特性の照合は、前記装着型機器により実行され、
    前記第２生体認証のための前記音響特性の照合は、前記装着型機器と通信可能な装置により実行される、
    請求項７乃至９のいずれか１項に記載の情報処理装置。
  11. 前記複数の動作モードは、前記ユーザが前記装着型機器の機能を利用可能な第３動作モードを更に含み、
    前記第３動作モードの消費電力は、前記第４動作モードの消費電力よりも大きい、
    請求項７乃至１０のいずれか１項に記載の情報処理装置。
  12. 前記動作モード制御部は、前記第１生体認証又は前記第２生体認証により前記ユーザが前記装着型機器を利用可能であると認められた場合に、前記装着型機器の動作モードを前記第２動作モード又は前記第４動作モードから前記第３動作モードに切り替える、
    請求項１１に記載の情報処理装置。
  13. 前記生体認証は、外耳道の音響特性を照合することにより行われる、
    請求項１乃至１２のいずれか１項に記載の情報処理装置。
  14. 前記装着型機器は、前記ユーザの耳に装着される音響機器である、
    請求項１乃至１３のいずれか１項に記載の情報処理装置。
  15. 前記装着型機器は、前記装着型機器に内蔵されたバッテリから電力の供給を受けて動作するワイヤレス機器である、
    請求項１乃至１４のいずれか１項に記載の情報処理装置。
  16. 音響特性に基づく生体認証を行うための音波をユーザの頭部の一部に発する装着型機器であって、
    前記装着型機器を前記ユーザが装着しているか否かを判定する装着判定部と、
    前記装着判定部による判定の結果に基づいて、前記生体認証のための処理を実行可能でない第１動作モードと、前記生体認証のための処理を実行可能な第２動作モードとを含む複数の動作モードの間で前記装着型機器の動作モードを切り替える動作モード制御部と、
    を備え、
    前記第２動作モードの消費電力は、前記第１動作モードの消費電力よりも大きい、
    装着型機器。
  17. 音響特性に基づく生体認証を行うための音波をユーザの頭部の一部に発する装着型機器を、前記ユーザが装着しているか否かを判定するステップと、
    判定の結果に基づいて、前記生体認証のための処理を実行可能でない第１動作モードと、前記生体認証のための処理を実行可能な第２動作モードとを含む複数の動作モードの間で前記装着型機器の動作モードを切り替えるステップと、
    を備え、
    前記第２動作モードの消費電力は、前記第１動作モードの消費電力よりも大きい、
    情報処理方法。
  18. コンピュータに、
    音響特性に基づく生体認証を行うための音波をユーザの頭部の一部に発する装着型機器を、前記ユーザが装着しているか否かを判定するステップと、
    判定の結果に基づいて、前記生体認証のための処理を実行可能でない第１動作モードと、前記生体認証のための処理を実行可能な第２動作モードとを含む複数の動作モードの間で前記装着型機器の動作モードを切り替えるステップと、 を実行させるためのプログラムであって、
    前記第２動作モードの消費電力は、前記第１動作モードの消費電力よりも大きい、
    プログラム。
JP2020560713A 2018-12-19 2018-12-19 情報処理装置、装着型機器、情報処理方法及び記憶媒体 Active JP7028339B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2022022534A JP7315045B2 (ja) 2018-12-19 2022-02-17 情報処理装置、装着型機器、情報処理方法及び記憶媒体
JP2023114825A JP2023126420A (ja) 2018-12-19 2023-07-13 情報処理装置、装着型機器、情報処理方法及び記憶媒体

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2018/046880 WO2020129198A1 (ja) 2018-12-19 2018-12-19 情報処理装置、装着型機器、情報処理方法及び記憶媒体

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022022534A Division JP7315045B2 (ja) 2018-12-19 2022-02-17 情報処理装置、装着型機器、情報処理方法及び記憶媒体

Publications (2)

Publication Number Publication Date
JPWO2020129198A1 JPWO2020129198A1 (ja) 2021-09-27
JP7028339B2 true JP7028339B2 (ja) 2022-03-02

Family

ID=71102152

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020560713A Active JP7028339B2 (ja) 2018-12-19 2018-12-19 情報処理装置、装着型機器、情報処理方法及び記憶媒体

Country Status (5)

Country Link
US (1) US20220026975A1 (ja)
EP (1) EP3900630A4 (ja)
JP (1) JP7028339B2 (ja)
CN (1) CN113242719A (ja)
WO (1) WO2020129198A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017038766A (ja) 2015-08-19 2017-02-23 凸版印刷株式会社 生体情報による個人認証装置ならびに個人認証方法
WO2018034178A1 (ja) 2016-08-19 2018-02-22 日本電気株式会社 個人認証システム、個人認証装置、個人認証方法および記録媒体
WO2018079139A1 (ja) 2016-10-24 2018-05-03 ソニー株式会社 音響出力装置、音響出力装置の機能実行方法及びプログラム

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5787187A (en) * 1996-04-01 1998-07-28 Sandia Corporation Systems and methods for biometric identification using the acoustic properties of the ear canal
JP2004065363A (ja) * 2002-08-02 2004-03-04 Sony Corp 個人認証装置と個人認証方法、及び信号伝送装置
GB0423194D0 (en) * 2004-10-19 2004-11-24 Racal Acoustics Ltd Attachment apparatus
CN101437449B (zh) * 2005-09-22 2012-02-01 皇家飞利浦电子股份有限公司 用于声学外耳表征的方法和设备
US7873849B2 (en) * 2009-09-02 2011-01-18 Apple Inc. Motion sensor data processing using various power management modes
JP5880340B2 (ja) * 2012-08-02 2016-03-09 ソニー株式会社 ヘッドホン装置、装着状態検出装置、装着状態検出方法
US9402124B2 (en) * 2013-04-18 2016-07-26 Xiaomi Inc. Method for controlling terminal device and the smart terminal device thereof
US9558336B2 (en) * 2013-10-04 2017-01-31 Salutron Inc. Persistent authentication using sensors of a user-wearable device
US9396643B2 (en) * 2013-10-23 2016-07-19 Quanttus, Inc. Biometric authentication
KR101645087B1 (ko) * 2014-07-10 2016-08-02 아이리텍 잉크 홍채인식용 착용 감지 기능을 가진 손 부착형 웨어러블 장치를 이용한 보안강화세트 및 그 제어방법
KR102297193B1 (ko) * 2014-12-24 2021-09-02 삼성전자 주식회사 사용자 식별 기능을 가지는 전자장치 및 사용자 인증 방법
KR20160101497A (ko) * 2015-02-17 2016-08-25 삼성전자주식회사 웨어러블 디바이스 및 웨어러블 디바이스의 동작 방법.
KR102342559B1 (ko) * 2015-07-24 2021-12-23 엘지전자 주식회사 이어셋 및 그 제어 방법
US10318958B2 (en) * 2015-07-28 2019-06-11 Jong Ho Kim Smart watch and operating method using the same
JP6855381B2 (ja) * 2015-10-21 2021-04-07 日本電気株式会社 個人認証装置、個人認証方法および個人認証プログラム
US10063979B2 (en) * 2015-12-08 2018-08-28 Gn Hearing A/S Hearing aid with power management
KR102501759B1 (ko) * 2016-01-05 2023-02-20 삼성전자주식회사 오디오 출력 장치 및 오디오 출력 장치의 동작 방법
CN108697380A (zh) * 2016-03-15 2018-10-23 索尼公司 电子装置、认证方法和程序
JP2019523581A (ja) * 2016-05-27 2019-08-22 ブガトーン リミテッド ユーザの耳におけるイヤピースの存在の判定
US10516930B2 (en) * 2016-07-07 2019-12-24 Bragi GmbH Comparative analysis of sensors to control power status for wireless earpieces
CN106291121B (zh) * 2016-07-29 2023-10-13 歌尔股份有限公司 一种可穿戴设备的佩戴状态检测方法和可穿戴设备
US10291975B2 (en) * 2016-09-06 2019-05-14 Apple Inc. Wireless ear buds
US10678502B2 (en) * 2016-10-20 2020-06-09 Qualcomm Incorporated Systems and methods for in-ear control of remote devices
KR102534724B1 (ko) * 2016-11-10 2023-05-22 삼성전자주식회사 전자 장치 및 그의 동작 방법
EP3625718B1 (en) * 2017-05-19 2021-09-08 Plantronics, Inc. Headset for acoustic authentication of a user
GB201801527D0 (en) * 2017-07-07 2018-03-14 Cirrus Logic Int Semiconductor Ltd Method, apparatus and systems for biometric processes
US10334347B2 (en) * 2017-08-08 2019-06-25 Bose Corporation Earbud insertion sensing method with capacitive technology
US10896682B1 (en) * 2017-08-09 2021-01-19 Apple Inc. Speaker recognition based on an inside microphone of a headphone
JP7121330B2 (ja) * 2017-09-26 2022-08-18 カシオ計算機株式会社 電子機器、音響機器、電子機器の制御方法及び制御プログラム
CN111149369B (zh) * 2017-10-10 2022-05-31 思睿逻辑国际半导体有限公司 头戴式受话器耳上状态检测
US20190187950A1 (en) * 2017-12-19 2019-06-20 Onkyo Corporation Electronic device
KR102488001B1 (ko) * 2018-01-22 2023-01-13 삼성전자주식회사 오디오 신호를 이용하여 사용자를 인증하는 전자 장치 및 그 방법
US11475899B2 (en) * 2018-01-23 2022-10-18 Cirrus Logic, Inc. Speaker identification
CN110413134B (zh) * 2018-04-26 2023-03-14 Oppo广东移动通信有限公司 佩戴状态检测方法及相关设备
CN108847012A (zh) * 2018-04-26 2018-11-20 Oppo广东移动通信有限公司 控制方法及相关设备
US10856064B2 (en) * 2018-04-27 2020-12-01 Avnera Corporation Operation of a personal audio device during insertion detection
US10956546B2 (en) * 2018-06-05 2021-03-23 Cirrus Logic, Inc. Methods, apparatus and computer-readable mediums related to biometric authentication
US10838450B2 (en) * 2018-09-28 2020-11-17 Apple Inc. Methods and apparatus for synchronization of time between independently operable processors
GB2584496B (en) * 2019-04-29 2021-10-06 Cirrus Logic Int Semiconductor Ltd Methods, apparatus and systems for biometric processes
GB2588958B (en) * 2019-11-15 2023-02-08 Prevayl Innovations Ltd Method of authenticating the identity of a user wearing a wearable device
US11089429B1 (en) * 2020-09-18 2021-08-10 Plantronics, Inc. Indication for correct audio device orientation
US20240061918A1 (en) * 2022-08-16 2024-02-22 Meta Platforms Technologies, Llc Techniques to provide user authentication for a near-eye display device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017038766A (ja) 2015-08-19 2017-02-23 凸版印刷株式会社 生体情報による個人認証装置ならびに個人認証方法
WO2018034178A1 (ja) 2016-08-19 2018-02-22 日本電気株式会社 個人認証システム、個人認証装置、個人認証方法および記録媒体
WO2018079139A1 (ja) 2016-10-24 2018-05-03 ソニー株式会社 音響出力装置、音響出力装置の機能実行方法及びプログラム

Also Published As

Publication number Publication date
EP3900630A1 (en) 2021-10-27
CN113242719A (zh) 2021-08-10
US20220026975A1 (en) 2022-01-27
EP3900630A4 (en) 2021-12-22
WO2020129198A1 (ja) 2020-06-25
JPWO2020129198A1 (ja) 2021-09-27

Similar Documents

Publication Publication Date Title
US10016673B1 (en) System and method for dynamically managing sound in a gaming environment
KR102659414B1 (ko) Em 센서 모듈을 포함하는 전자 장치 및 이의 제어 방법
KR102052153B1 (ko) 보청기를 제어하는 휴대 단말 및 방법
US20170164092A1 (en) Wearable electronic device
US20150294662A1 (en) Selective Noise-Cancelling Earphone
WO2018045536A1 (zh) 声音信号处理的方法、终端和耳机
US20190028792A1 (en) Earphone control device, earphone and control method for earphone
US12120480B2 (en) Information processing device, wearable device, information processing method, and storage medium
CN106096360B (zh) 一种解锁控制方法及终端设备
US10681451B1 (en) On-body detection of wearable devices
US20180132029A1 (en) Earpiece with Added Ambient Environment
JP7028339B2 (ja) 情報処理装置、装着型機器、情報処理方法及び記憶媒体
CN111212371A (zh) 蓝牙耳机控制方法、装置、存储介质和电子设备
JP7315045B2 (ja) 情報処理装置、装着型機器、情報処理方法及び記憶媒体
KR20130010193A (ko) 파라미터가 적용된 음원을 이용한 보청기 피팅 방법 및 그 방법을 이용한 보청기
WO2022195795A1 (ja) 報知システム、報知方法及び記録媒体
KR102157304B1 (ko) 웨어러블 장치 및 웨어러블 장치의 인터페이스 방법
US20240311458A1 (en) Authentication management device, estimation method, and recording medium
US20240160709A1 (en) Authentication management device, authentication method, and recording medium
WO2024157726A1 (ja) 情報処理装置、情報処理方法及び記憶媒体
KR20210122568A (ko) 전자 장치 및 그의 오디오 출력을 제어하는 방법
KR20200031062A (ko) 이어셋 제어 방법 및 시스템
US20240056759A1 (en) Audio control system, audio control method, and recording medium
WO2020149175A1 (ja) 情報処理装置、装着型機器、情報処理方法及び記憶媒体
KR100922813B1 (ko) 멀티채널 방식 충격음 검출 장치와 방법

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210428

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210428

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211102

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211228

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220118

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220131

R151 Written notification of patent or utility model registration

Ref document number: 7028339

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151