JP6931175B2 - 情報処理装置、情報処理システム、および、プログラム - Google Patents

Description

本発明は、情報処理装置、情報処理システム、および、プログラムに関する。

近年、自身で発話して声を出すことが難しい人は、代用音声でコミュニケーションをとることができる。例えば、喉頭がんなどで喉頭を摘出した人や、気管切開や声門閉鎖術をした人など、声帯で発話することが難しい人は、喉頭原音の代替音を電気的に生成する人工喉頭装置による代用音声や、食道発声法による代用音声などを利用する場合がある。代用音声を利用すれば、他者と声でコミュニケーションをとることが可能になるが、短所もある。

例えば、人工喉頭装置による代用音声は、電気的な振動音（ブザー音）を音源としているため、音質が機械的で単調でロボットのような声であり、聞き取りにくい。そこで、音声変換技術を使えば、このような聞き取りにくい声を、聞きやすい声に変換することが可能となる。つまり、音声変換技術を使えば、人工喉頭装置による機械的な代用音声を自然な声に変換することができ、人の声に近い自然な声でコミュニケーションをとることが可能となる。

しかしながら、音声変換技術を使えば、例えば、音声通信による通話（例えば電話）において、発声させた音声を他人の声にそっくりな音声に変換してから通話相手に伝えることができるため、他人の声をまねる「なりすまし」に悪用される可能性がある。

そこで、開示の技術は、上記事情に鑑みてなされたものであって、音声通信による通話における音声変換技術を用いたなりすましを抑制することができる情報処理装置、情報処理システム、および、プログラムを提供することを目的とする。

本発明の第１態様に係る情報処理装置は、ユーザまたはユーザが用いる音声発声補助装置によって発声された音声の情報を取得する第１取得部と、前記ユーザに関する音声以外の生体情報を取得する第２取得部と、前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、声紋認証を行う第１認証部と、前記生体情報、および、前記ユーザの登録生体情報に基づいて、生体認証を行う第２認証部と、他の通話装置との音声通信による通話状態を制御する通話制御部と、音声を所定の登録音声に変換する音声変換部と、を備える。前記第１認証部による前記声紋認証の結果が成功であり、かつ、前記第２認証部による前記生体認証の結果が成功であった場合に、前記通話制御部は通話相手の通話装置との音声通信による通話状態を確立し、前記音声変換部は前記通話状態で前記ユーザまたは前記ユーザが用いる前記音声発声補助装置によって発声された音声を前記登録音声に変換してから通話相手の通話装置に伝達する。また、前記第１認証部は、前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、前記声紋認証を行う場合に、複数のボリュームそれぞれについて登録されている前記ユーザの登録声紋情報のうち、前記音声とボリューム同士が近い前記登録声紋情報に基づいて前記声紋認証を行う。あるいは、前記第１認証部は、前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、前記声紋認証を行う場合に、前記音声のボリュームと、前記ユーザの登録声紋情報のボリュームに基づいて、前記ユーザに、発声させる音声のボリュームの増加または減少の要請を通知する。

本発明の第２態様に係る情報処理システムは、ユーザの喉頭原音の代替音を電気的に生成する人工喉頭装置と、情報処理装置と、を備える情報処理システムであって、前記情報処理装置は、前記ユーザが用いる前記人工喉頭装置によって発声された音声の情報を取得する第１取得部と、前記ユーザに関する音声以外の生体情報を取得する第２取得部と、前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、声紋認証を行う第１認証部と、前記生体情報、および、前記ユーザの登録生体情報に基づいて、生体認証を行う第２認証部と、他の通話装置との音声通信による通話状態を制御する通話制御部と、音声を所定の登録音声に変換する音声変換部と、を備える。前記第１認証部による前記声紋認証の結果が成功であり、かつ、前記第２認証部による前記生体認証の結果が成功であった場合に、前記通話制御部は通話相手の通話装置との音声通信による通話状態を確立し、前記音声変換部は前記通話状態で前記ユーザが用いる前記人工喉頭装置によって発声された音声を前記登録音声に変換してから通話相手の通話装置に伝達する。また、前記第１認証部は、前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、前記声紋認証を行う場合に、複数のボリュームそれぞれについて登録されている前記ユーザの登録声紋情報のうち、前記音声とボリューム同士が近い前記登録声紋情報に基づいて前記声紋認証を行う。あるいは、前記第１認証部は、前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、前記声紋認証を行う場合に、前記音声のボリュームと、前記ユーザの登録声紋情報のボリュームに基づいて、前記ユーザに、発声させる音声のボリュームの増加または減少の要請を通知する。

本発明の第３態様に係るプログラムは、ユーザまたはユーザが用いる音声発声補助装置によって発声された音声の情報を取得する第１取得ステップと、前記ユーザに関する音声以外の生体情報を取得する第２取得ステップと、前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、声紋認証を行う第１認証ステップと、前記生体情報、および、前記ユーザの登録生体情報に基づいて、生体認証を行う第２認証ステップと、前記第１認証ステップによる前記声紋認証の結果が成功であり、かつ、前記第２認証ステップによる前記生体認証の結果が成功であった場合に、通話相手の通話装置との音声通信による通話状態を確立し、前記通話状態で前記ユーザまたは前記ユーザが用いる前記音声発声補助装置によって発声された音声を登録音声に変換してから通話相手の通話装置に伝達する通話制御ステップと、をコンピュータに実行させるためのプログラムである。また、前記第１認証ステップは、前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、前記声紋認証を行う場合に、複数のボリュームそれぞれについて登録されている前記ユーザの登録声紋情報のうち、前記音声とボリューム同士が近い前記登録声紋情報に基づいて前記声紋認証を行う。あるいは、前記第１認証ステップは、前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、前記声紋認証を行う場合に、前記音声のボリュームと、前記ユーザの登録声紋情報のボリュームに基づいて、前記ユーザに、発声させる音声のボリュームの増加または減少の要請を通知する。

本発明の各態様によれば、音声通信による通話における音声変換技術を用いたなりすましを抑制することができる。

図１は、実施形態の情報処理システムを含むシステム全体の構成及び処理の流れを説明する図である。 図２は、実施形態の情報処理システムの全体構成の概要を示す図である。 図３は、実施形態における第１のスペクトログラムデータを模式的に示す図である。 図４は、実施形態における第２のスペクトログラムデータを模式的に示す図である。 図５は、実施形態の情報処理装置における処理を示すフローチャートである。

以下、添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。図１は、実施形態の情報処理システムＳを含むシステム全体の構成及び処理の流れを説明する図である。

図１に示すように、システムは、ユーザが使用する情報処理装置１及び人工喉頭装置１００を有する情報処理システムＳと、ユーザの通話相手が使用する通話装置２００とを有する。通話装置２００は、携帯電話またはスマートフォン等の通信機器であってよい。情報処理システムＳは、情報処理装置１で指紋等の生体情報で生体認証をする。情報処理システムＳは、生体認証が成功したと判定すると、人工喉頭装置１００によって発声させたユーザの声によって声紋認証をする。情報処理システムＳは、声紋認証に成功したと判定すると、通話相手の通話装置２００に本人である旨を示す本人通知及び通話を希望する旨をメール等によって通知する。尚、情報処理装置１は、更にユーザのＩＤ及びＰＷによる認証をした後、通話を希望する旨を通話装置２００に通知してもよい。通話相手がユーザとの通話を了承する旨を通話装置２００に入力すると、通話装置２００は、了承する旨をユーザの情報処理装置１にメール等によって返信する。これにより、ユーザは、情報処理装置１及び通話装置２００を介して、通話相手との会話を開始する。ここで、ユーザが予め登録した登録音声による通話を希望する場合、情報処理装置１は、人工喉頭装置１００により発声させた声を登録音声に変換して、通話装置２００に送信してよい。

次に、図２を参照して、実施形態の情報処理システムＳの全体構成について説明する。図２は、実施形態の情報処理システムＳの全体構成の概要を示す図である。情報処理システムＳは、情報処理装置１と、人工喉頭装置１００（電気式人工喉頭）と、を備える。人工喉頭装置１００は、ユーザの喉頭原音の代替音を電気的に生成する装置である。ユーザが人工喉頭装置１００を首の所定箇所に当てて発声時と同じ口の動きをすると、人工喉頭装置１００はユーザの喉頭原音の代替音を電気的に生成する。

情報処理装置１は、例えば、パーソナルコンピュータ、スマートフォン、タブレット端末等により実現される。また、情報処理装置１は、内蔵装置または外付け装置により、音声通信による通話機能も有している。情報処理装置１は、処理部２と、記憶部３と、入力部４と、表示部５と、通信部６と、音声入力部７と、生体情報入力部８と、を備える。

記憶部３は、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）等から構成され、各種プログラム、各種データ、各種演算結果等を記憶する。また、記憶部３は、音声変換技術を実現するための音声変換プログラムを記憶する。また、記憶部３は、声紋認証に用いるための所定の登録声紋情報を記憶する。また、記憶部３は、声紋認証以外の生体認証を行うための所定の登録生体情報（例えば登録指紋情報等）を記憶する。また、記憶部３は、後述する第３認証を行うためのユーザの登録ＩＤ（Identifier）と登録ＰＷ（Pass Word）を記憶する。

また、記憶部３は、所定の登録音声を記憶する。登録音声の一例は、ユーザが声を失う前に録音された音声である。そして、音声変換プログラムを用いることで、入力音声をその登録音声に変換することができる。したがって、例えば、音声通信による通話（電話等）において、登録音声のユーザの入力音声をその登録音声に変換するのはよいが、他のユーザの入力音声をその登録音声に変換することは「なりすまし」を可能にしてしまうので回避すべきである。そこで、以下では、音声通信による通話における音声変換技術を用いたなりすましを抑制する技術について説明する。

入力部４は、ユーザによる情報入力手段であり、例えば、マウス、キーボード、タッチパネル等である。表示部５は、情報表示手段であり、例えば、ＣＲＴ（Cathode Ray Tube）ディスプレイ装置、ＬＣＤ（Liquid Crystal Display）装置などである。

通信部６は、外部装置と通信するための通信インタフェースである。音声入力部７は、音声入力手段であり、例えば、マイクロフォンである。

生体情報入力部８は、ユーザに関する音声以外の生体情報を入力する手段である。生体情報入力部８は、例えば、ユーザの指紋を読み取る指紋センサである。しかし、生体情報入力部８で対象とする生体情報は、指紋に限定されず、ほかに、静脈、虹彩、顔などであってもよい。

処理部２は、情報処理手段であり、例えば、ＭＰＵ（Micro Processing Unit）やＣＰＵ（Central Processing Unit）などのプロセッサである。処理部２は、プロセッサがＲＡＭ等のメモリ上にプログラムを展開することにより、各機能部を実現させる。なお、処理部２は、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）などのハードワイヤードロジックによって実現してもよい。

処理部２は、機能部として、取得部２１と、第１認証部２２と、第２認証部２３と、第３認証部２４と、通話制御部２５と、音声変換部２６と、通知部２７と、を備える。

取得部２１は、各種情報を取得する。例えば、取得部２１は、ユーザまたはユーザが用いる人工喉頭装置１００（音声発声補助装置）によって発声された音声の情報を音声入力部７から取得する第１取得部として機能する。また、取得部２１は、ユーザに関する音声以外の生体情報を生体情報入力部８から取得する第２取得部として機能する。

第１認証部２２は、取得部２１が取得した音声の情報、および、記憶部３に記憶された登録声紋情報に基づいて、声紋認証を行う。声紋認証は、例えば、スペクトログラムを使用することによって実現できる。

図３は、実施形態における第１のスペクトログラムデータを模式的に示す図である。図３（ａ）〜（ｅ）は、５人の被験者に人工喉頭装置１００を使って同一の所定の単語を発声してもらった場合の音声のスペクトログラムを示すデータである。図３（ａ）〜（ｅ）において、縦軸は周波数で、横軸は時間である。

図３（ａ）〜（ｅ）からわかるように、人工喉頭装置１００によって発声した機械的な音声であっても、発話者の身体的特徴や口の動かし方により、スペクトログラムの特徴が異なるため、声紋認証を行うことができる。

ここで、図４は、実施形態における第２のスペクトログラムデータを模式的に示す図である。図４（ａ）〜（ｉ）は、同一の被験者によって、人工喉頭装置１００を使って同一の一文字分の音を発声してもらった場合の音声のスペクトログラムを示すデータである。図４（ａ）〜（ｉ）において、縦軸は周波数で、横軸は時間である。また、人工喉頭装置１００において、音の高さの設定を所定の低音、中音、高音の三段階とし、音のボリューム（大きさ）の設定を所定の小、中、大の三段階とした。

図４（ａ）、（ｂ）、（ｃ）は、低音で、それぞれ、ボリュームを小、中、大に設定した場合のデータである。
図４（ｄ）、（ｅ）、（ｆ）は、中音で、それぞれ、ボリュームを小、中、大に設定した場合のデータである。
図４（ｇ）、（ｈ）、（ｉ）は、高音で、それぞれ、ボリュームを小、中、大に設定した場合のデータである。

図４（ａ）〜（ｉ）からわかるように、同一の被験者によって人工喉頭装置１００によって発声した機械的な音声であっても、人工喉頭装置１００の音の高さやボリュームの設定によって、スペクトログラムの特徴がやや異なる。また、一般に、人工喉頭装置１００のユーザは、環境音の種類や大きさによって人工喉頭装置１００の音のボリュームの設定を変更することは多いが、声の高さの設定を変更することは少ない。

そこで、例えば、第１認証部２２は、取得部２１が取得した音声の情報、および、記憶部３に記憶された登録声紋情報に基づいて、声紋認証を行う場合に、複数のボリュームそれぞれについて登録されている登録声紋情報のうち、取得した音声とボリューム同士が近い登録声紋情報に基づいて声紋認証を行うようにしてもよい。そうすれば、声紋認証の精度がさらに向上する。その場合、記憶部３に、予め、複数のボリュームそれぞれについての登録声紋情報を記憶させておく。

なお、第１認証部２２は、当該声紋認証を行う場合に、複数の声の高さそれぞれについて登録されている登録声紋情報のうち、取得した音声と声の高さ同士が近い登録声紋情報に基づいて声紋認証を行うようにしてもよい。その場合、記憶部３に、予め、複数の声の高さそれぞれについての登録声紋情報を記憶させておく。

図２に戻って、第１認証部２２は、取得部２１が取得した音声の情報、および、記憶部３に記憶された登録声紋情報に基づいて、声紋認証を行う場合に、音声のボリュームと、登録声紋情報のボリュームに基づいて、ユーザに、発声させる音声のボリュームの増加または減少の要請を通知するようにしてもよい。そうすれば、ユーザがその通知に応じて発声させる音声のボリュームを増加または減少させることが期待できるので、声紋認証の精度がさらに向上する。

第２認証部２３は、生体情報入力部８が取得した生体情報、および、記憶部３に記憶された登録生体情報に基づいて、生体認証を行う。例えば、生体認証が指紋認証の場合であれば、第２認証部２３は、生体情報入力部８が取得した指紋情報と、記憶部３に記憶されている登録指紋情報を用いてパターンマッチング等を行うことで指紋認証を行う。

第３認証部２４は、入力部４によって入力されたＩＤとＰＷ、および、記憶部３に記憶された登録ＩＤと登録ＰＷに基づいて、第３認証を行う。

通話制御部２５は、音声通信による通話状態を制御する。通話制御部２５は、例えば、通話相手の通話装置２００との音声通信による通話状態を確立したり、終了させたりする。

音声変換部２６は、音声入力部７によって入力された音声を、音声変換プログラムを用いて所定の登録音声等に変換する。また、音声変換部２６は、音声変換プログラムの利用の許可、制限付き許可、不許可を判定する（詳細は後述）。

通知部２７は、外部装置を使用するユーザに対して所定の通知を行う。例えば、第１認証部２２による声紋認証の結果が成功であり、かつ、第２認証部２３による生体認証の結果が成功であった場合に、通話制御部２５による通話状態の確立前に、情報処理装置１のユーザによる通話希望の旨を通話相手（通話予定の相手）の通話装置２００に通知する。この通知は、例えば、電子メールによって行えばよい。この通知を受けた通話相手は、承認か非承認を通話装置２００に入力することによって、承認または非承認の返答を情報処理装置１に返すことができる。

通知部２７が通話相手の通話装置２００から通話を承認する旨の返答を受信したとき、通話制御部２５は通話相手の通話装置２００との音声通信による通話状態を確立することができる。そして、音声変換部２６は通話状態でユーザまたはユーザが用いる人工喉頭装置１００によって発声された音声を登録音声に変換してから通話相手の通話装置２００に伝達する。

また、第１認証部２２による声紋認証の結果と、第２認証部２３による生体認証の結果と、の少なくともいずれか失敗であった場合に、音声変換部２６はユーザまたはユーザが用いる人工喉頭装置１００によって発声された音声を登録音声に変換することを抑止する。

次に、図５を参照して、実施形態の情報処理装置１における処理について説明する。図５は、実施形態の情報処理装置１における処理を示すフローチャートである。ここでは、所定のユーザが、情報処理装置１を用いて、音声通信による通話をする場合に、自身の発声した音声を音声変換プログラムによって登録音声に変換しながら通話することを希望する場合を想定する。なお、所定のユーザは、登録音声のユーザと同一の場合もあれば同一でない場合もある。

まず、ユーザが生体情報入力部８に指を当て、取得部２１が生体情報入力部８からユーザの指紋情報を取得すると、ステップＳ１において、第２認証部２３は、取得部２１が取得した指紋情報、および、記憶部３に記憶された登録指紋情報に基づいて指紋認証を行う。第２認証部２３は、指紋認証が成功した場合はステップＳ５に進み、失敗した場合はステップＳ２に進む。

ステップＳ２において、ユーザが入力部４によってＩＤとＰＷを入力すると、第３認証部２４は、入力されたＩＤとＰＷ、および、記憶部３に記憶された登録ＩＤと登録ＰＷに基づいて第３認証を行う。第３認証部２４は、第３認証が成功した場合はステップＳ３に進み、失敗した場合はステップＳ４に進む。

ステップＳ３において、音声変換部２６は、制限付きで音声変換プログラムの使用を許可する。つまり、音声変換部２６は、人工喉頭装置１００によって発声させたユーザの声を、登録音声以外の音声への音声変換を許可する。ステップＳ４において、音声変換部２６は、音声変換プログラムの使用を許可しない。

ステップＳ５において、ユーザが人工喉頭装置１００を用いて音声入力部７に対して発声し、取得部２１が音声入力部７から発声した音声の情報を取得すると、第１認証部２２は、取得した音声の情報、および、記憶部３に記憶された登録声紋情報に基づいて声紋認証を行う。第１認証部２２は、声紋認証に成功した場合はステップＳ６に進み、失敗した場合はステップＳ３に進む。

ステップＳ６において、通知部２７は、通話相手（通話予定の相手）の通話装置２００に対して、ユーザによる通話希望の旨を電子メール等で通話相手の通話装置２００に通知する。この通知を受けた通話相手は、承認か非承認を通話装置２００に入力する。通話装置２００は、通話相手が入力した承認または非承認を示す返答を情報処理装置１に返す。尚、通話装置２００は、通話相手が非承認を入力した場合、情報処理装置１に返答を返さなくてもよい。

ステップＳ７において、通知部２７は、通話相手の通話装置２００からの返答を受信する。次に、ステップＳ８において、通知部２７は、返答が承認であるか否かを判定し、Ｙｅｓの場合はステップＳ１１に進み、Ｎｏの場合はステップＳ９に進む。尚、通知部２７は、承認の返答を受信した場合、ステップＳ１１に進み、一定の時間経過しても返答を受信しなかった場合、ステップＳ９に進んでもよい。

ステップＳ９において、通話制御部２５は、ユーザと通話相手との通話を許可しない。次に、ステップＳ１０において、音声変換部２６は、音声変換プログラムの使用を許可する。ここでは、通話相手の通話装置２００からの回答が非承認であったので、通話は許可しないが、２つの生体情報の認証で成功していて、なりすましの可能性は低い（つまり、ユーザは登録音声のユーザである可能性が高い）ので、音声通信による通話以外での音声変換プログラムの使用を許可しても問題はない。

ステップＳ１１において、通話制御部２５は、ユーザと通話相手との通話を許可する。次に、ユーザは、入力部４を用いて音声変換プログラムを利用するか否かを選択する。これを受けて、ステップＳ１２において、音声変換部２６は、ユーザが音声変換プログラムを利用するか否かを判定し、ユーザが音声変換プログラムを利用する旨を入力した場合、即ち、Ｙｅｓの場合はステップＳ１３に進み、ユーザが音声変換プログラムを利用する旨を入力しない場合、即ち、Ｎｏの場合はステップＳ１４に進む。

ステップＳ１３において、音声変換部２６は、音声変換プログラムを起動する。これ以降、ユーザは、音声変換プログラムを用いて自身の声（人工喉頭装置１００を用いて発声させた声）を登録音声に変換することができる。

次に、通話制御部２５は、通話状態を確立する。次に、ステップＳ１４において、音声変換部２６は通話状態でユーザが用いる人工喉頭装置１００によって発声された音声を登録音声に変換してから通話相手の通話装置２００に伝達する。

次に、ステップＳ１５において、通話制御部２５は、通話が終了したか否かを判定し、Ｙｅｓの場合は処理を終了し、Ｎｏの場合はステップＳ１４に戻る。

このように、本実施形態の情報処理システムＳによれば、情報処理装置１において、声紋認証と声紋認証以外の生体認証の２つの認証を行って、両方の結果が成功だった場合にのみ、音声通信による通話における発声音声から登録音声への変換を可能とすることで、音声通信による通話における音声変換技術を用いたなりすましを抑制することができる。つまり、２つの生体情報の認証により、セキュリティ対策を強化し、個人の特定の確実性を向上させ、音声変換プログラムの使用の可否をより的確に判定できる。

また、音声通信による通話前に通話相手に事前に通知することで注意喚起をすることができ、さらに、通話の承認の可否を選択可能とすることで利便性や安全性が向上する。

また、図５のステップＳ２のＩＤ／ＰＷ認証で「成功」の場合や、ステップＳ５の声紋認証で「失敗」の場合、制限付きでの音声変換プログラムの利用を許可して一定の利便性を確保しつつ、登録音声への音声変換を許可しないことで、音声通信による通話以外でのなりすましも抑制することができる。

なお、本実施形態の情報処理装置１で実行されるプログラムは、これらの装置にインストール可能な形式または実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Digital Versatile Disk）等のコンピュータで読み取り可能な記録媒体に記録されて提供するように構成してもよい。

また、当該プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。また、当該プログラムを、インターネット等のネットワーク経由で提供または配布するように構成してもよい。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

例えば、上述の実施形態では、ユーザが人工喉頭装置１００を用いて発声するものとしたが、これに限定されない。ユーザが人工喉頭装置１００以外の音声発声補助装置によって発声した場合や、ユーザが装置無しで発声した場合についても、本発明を適用できる。

１…情報処理装置、２…処理部、３…記憶部、４…入力部、５…表示部、６…通信部、７…音声入力部、８…生体情報入力部、２１…取得部、２２…第１認証部、２３…第２認証部、２４…第３認証部、２５…通話制御部、２６…音声変換部、２７…通知部、１００…人工喉頭装置、２００…通話装置、Ｓ…情報処理システム

Claims (8)

1. ユーザまたはユーザが用いる音声発声補助装置によって発声された音声の情報を取得する第１取得部と、
   前記ユーザに関する音声以外の生体情報を取得する第２取得部と、
   前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、声紋認証を行う第１認証部と、
   前記生体情報、および、前記ユーザの登録生体情報に基づいて、生体認証を行う第２認証部と、
   通話相手の通話装置との音声通信による通話状態を制御する通話制御部と、
   音声を所定の登録音声に変換する音声変換部と、を備え、
   前記第１認証部による前記声紋認証の結果が成功であり、かつ、前記第２認証部による前記生体認証の結果が成功であった場合に、前記通話制御部は前記通話相手の通話装置との音声通信による通話状態を確立し、前記音声変換部は前記通話状態で前記ユーザまたは前記ユーザが用いる前記音声発声補助装置によって発声された音声を前記登録音声に変換してから前記通話相手の通話装置に伝達し、
   前記第１認証部は、前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、前記声紋認証を行う場合に、複数のボリュームそれぞれについて登録されている前記ユーザの登録声紋情報のうち、前記音声とボリューム同士が近い前記登録声紋情報に基づいて前記声紋認証を行う、情報処理装置。
2. ユーザまたはユーザが用いる音声発声補助装置によって発声された音声の情報を取得する第１取得部と、
   前記ユーザに関する音声以外の生体情報を取得する第２取得部と、
   前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、声紋認証を行う第１認証部と、
   前記生体情報、および、前記ユーザの登録生体情報に基づいて、生体認証を行う第２認証部と、
   通話相手の通話装置との音声通信による通話状態を制御する通話制御部と、
   音声を所定の登録音声に変換する音声変換部と、を備え、
   前記第１認証部による前記声紋認証の結果が成功であり、かつ、前記第２認証部による前記生体認証の結果が成功であった場合に、前記通話制御部は前記通話相手の通話装置との音声通信による通話状態を確立し、前記音声変換部は前記通話状態で前記ユーザまたは前記ユーザが用いる前記音声発声補助装置によって発声された音声を前記登録音声に変換してから前記通話相手の通話装置に伝達し、
   前記第１認証部は、前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、前記声紋認証を行う場合に、前記音声のボリュームと、前記ユーザの登録声紋情報のボリュームに基づいて、前記ユーザに、発声させる音声のボリュームの増加または減少の要請を通知する、情報処理装置。
3. 前記第１認証部による前記声紋認証の結果が成功であり、かつ、前記第２認証部による前記生体認証の結果が成功であった場合に、前記通話状態の確立前に、前記ユーザによる通話希望の旨を前記通話相手の通話装置に通知する通知部を、さらに備え、
   前記通知部が前記通話相手の通話装置から通話を承認する旨の返答を受信したとき、前記通話制御部は前記通話相手の通話装置との音声通信による通話状態を確立することができる、請求項１または請求項２に記載の情報処理装置。
4. 前記第１認証部による前記声紋認証の結果と、前記第２認証部による前記生体認証の結果と、の少なくともいずれか失敗であった場合に、前記音声変換部は前記ユーザまたは前記ユーザが用いる前記音声発声補助装置によって発声された音声を前記登録音声に変換することを抑止する、請求項１または請求項２に記載の情報処理装置。
5. ユーザの喉頭原音の代替音を電気的に生成する人工喉頭装置と、情報処理装置と、を備える情報処理システムであって、
   前記情報処理装置は、
   前記ユーザが用いる前記人工喉頭装置によって発声された音声の情報を取得する第１取得部と、
   前記ユーザに関する音声以外の生体情報を取得する第２取得部と、
   前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、声紋認証を行う第１認証部と、
   前記生体情報、および、前記ユーザの登録生体情報に基づいて、生体認証を行う第２認証部と、
   通話相手の通話装置との音声通信による通話状態を制御する通話制御部と、
   音声を所定の登録音声に変換する音声変換部と、を備え、
   前記第１認証部による前記声紋認証の結果が成功であり、かつ、前記第２認証部による前記生体認証の結果が成功であった場合に、前記通話制御部は前記通話相手の通話装置との音声通信による通話状態を確立し、前記音声変換部は前記通話状態で前記ユーザが用いる前記人工喉頭装置によって発声された音声を前記登録音声に変換してから前記通話相手の通話装置に伝達し、
   前記第１認証部は、前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、前記声紋認証を行う場合に、複数のボリュームそれぞれについて登録されている前記ユーザの登録声紋情報のうち、前記音声とボリューム同士が近い前記登録声紋情報に基づいて前記声紋認証を行う、情報処理システム。
6. ユーザの喉頭原音の代替音を電気的に生成する人工喉頭装置と、情報処理装置と、を備える情報処理システムであって、
   前記情報処理装置は、
   前記ユーザが用いる前記人工喉頭装置によって発声された音声の情報を取得する第１取得部と、
   前記ユーザに関する音声以外の生体情報を取得する第２取得部と、
   前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、声紋認証を行う第１認証部と、
   前記生体情報、および、前記ユーザの登録生体情報に基づいて、生体認証を行う第２認証部と、
   通話相手の通話装置との音声通信による通話状態を制御する通話制御部と、
   音声を所定の登録音声に変換する音声変換部と、を備え、
   前記第１認証部による前記声紋認証の結果が成功であり、かつ、前記第２認証部による前記生体認証の結果が成功であった場合に、前記通話制御部は前記通話相手の通話装置との音声通信による通話状態を確立し、前記音声変換部は前記通話状態で前記ユーザが用いる前記人工喉頭装置によって発声された音声を前記登録音声に変換してから前記通話相手の通話装置に伝達し、
   前記第１認証部は、前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、前記声紋認証を行う場合に、前記音声のボリュームと、前記ユーザの登録声紋情報のボリュームに基づいて、前記ユーザに、発声させる音声のボリュームの増加または減少の要請を通知する、情報処理システム。
7. ユーザまたはユーザが用いる音声発声補助装置によって発声された音声の情報を取得する第１取得ステップと、
   前記ユーザに関する音声以外の生体情報を取得する第２取得ステップと、
   前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、声紋認証を行う第１認証ステップと、
   前記生体情報、および、前記ユーザの登録生体情報に基づいて、生体認証を行う第２認証ステップと、
   前記第１認証ステップによる前記声紋認証の結果が成功であり、かつ、前記第２認証ステップによる前記生体認証の結果が成功であった場合に、通話相手の通話装置との音声通信による通話状態を確立し、前記通話状態で前記ユーザまたは前記ユーザが用いる前記音声発声補助装置によって発声された音声を登録音声に変換してから前記通話相手の通話装置に伝達する通話制御ステップと、をコンピュータに実行させるためのプログラムであって、
   前記第１認証ステップは、前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、前記声紋認証を行う場合に、複数のボリュームそれぞれについて登録されている前記ユーザの登録声紋情報のうち、前記音声とボリューム同士が近い前記登録声紋情報に基づいて前記声紋認証を行う、プログラム。
8. ユーザまたはユーザが用いる音声発声補助装置によって発声された音声の情報を取得する第１取得ステップと、
   前記ユーザに関する音声以外の生体情報を取得する第２取得ステップと、
   前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、声紋認証を行う第１認証ステップと、
   前記生体情報、および、前記ユーザの登録生体情報に基づいて、生体認証を行う第２認証ステップと、
   前記第１認証ステップによる前記声紋認証の結果が成功であり、かつ、前記第２認証ステップによる前記生体認証の結果が成功であった場合に、通話相手の通話装置との音声通信による通話状態を確立し、前記通話状態で前記ユーザまたは前記ユーザが用いる前記音声発声補助装置によって発声された音声を登録音声に変換してから前記通話相手の通話装置に伝達する通話制御ステップと、をコンピュータに実行させるためのプログラムであって、
   前記第１認証ステップは、前記音声の情報、および、前記ユーザの登録声紋情報に基づいて、前記声紋認証を行う場合に、前記音声のボリュームと、前記ユーザの登録声紋情報のボリュームに基づいて、前記ユーザに、発声させる音声のボリュームの増加または減少の要請を通知する、プログラム。

Images