JP4819642B2

JP4819642B2 - 通信装置及び通信方法

Info

Publication number: JP4819642B2
Application number: JP2006277074A
Authority: JP
Inventors: 宗子片山
Original assignee: NEC Engineering Ltd
Current assignee: NEC Engineering Ltd
Priority date: 2006-10-11
Filing date: 2006-10-11
Publication date: 2011-11-24
Anticipated expiration: 2026-10-11
Also published as: JP2008098875A

Description

本発明は、携帯電話やＰＨＳ等の電話回線を通信路として利用する通信装置等に関し、特に、通信音声に重ねて背景音を再生し、背景音を聞きながら通話可能な通信装置等に関する。

携帯電話やＰＨＳ等の通信装置を用いて日常的に通話が行われているが、こうした通信装置による通話では、電話機から聞こえるのは音声のみであるため、通話が事務的になる傾向がある。そこで、近年、通話音声のバックで背景音を再生し、それによって、雰囲気のある通話を行うことを可能にした種々の通信装置が提案されている。

例えば、特許文献１には、複数の背景音が記録された記録手段と、通話内容に応じて背景音を選択し、その背景音を通話音声に重ねて出力する背景音出力手段とを備えた通信装置が開示されている。この通信装置においては、通話者の状況に応じて雨の音や電車の音等を背景音として再生することにより、通話者の状況に即した背景音を通話相手と共有し、通話の雰囲気を盛り上げることを可能としている。

また、特許文献２には、通話音声と背景音を独立に符号化する符号化手段と、符号化された通話音声及び符号化された背景音を多重化する多重化手段と、背景音の音量を通話者と通話相手で独立に調整可能な音量調整手段とを備えた通信装置が開示されている。この通信装置においては、通話音声と背景音を別個に符号化することにより、良質な背景音を通話中に再生することを可能にするとともに、送信側及び受信側の各々にて、好みの音量で背景音を再生することを可能としている。

特開平１１−１９１７９６号公報特開２００２−１８５５７３号公報

特許文献１及び２に記載された通信装置においては、通話中の背景音が通話開始時の状況に応じて決定されるが、通話者の状況は、時間の経過に伴って変化するのが通常であり、通話開始時から通話終了時まで、そのまま維持されることは希である。このため、通話を進めていくうちに、背景音が通話者の状況に即しないものになり、却って通話の妨げになるという問題がある。

そこで、本発明は、上記諸点に鑑みてなされたものであり、通話中の通話者の状況の変化に応じて背景音を変更することができ、常時、通話者の状況に即した背景音を再生することが可能な通信装置等を提供することを目的とする。

上記目的を達成するため、本発明は、通信網を介して通話音声とともに背景音を送受信し、背景音を再生した状態で通話可能な通信装置であって、通話者の音声を集音して通話音声を生成する集音手段と、該集音手段で生成された通話音声の音量及び周波数の少なくとも１つに基づいて、通話時の通話者の音声の平均音量及び／又は音圧レベルがピークとなるピーク周波数の変化を検出する変化検出手段と、該変化検出手段の検出結果に基づいて背景音を変更する変更手段と、変更された背景音を通話音声とともに前記通信網に送信する通信手段とを備えることを特徴とする。

そして、本発明によれば、通話時の通話者の音声の平均音量及び／又は音圧レベルがピークとなるピーク周波数の変化を検出するとともに、その検出結果に基づいて背景音を変更するため、通話中の通話者の状況の変化に応じて背景音を変更することができ、常時、通話者の状況に即した背景音を再生することが可能となる。

前記通信装置において、前記変化検出手段が、平常時の通話者の音声を保持する保持手段と、平常時の通話者の音声の平均音量と通話時の通話者の音声の平均音量との差分、及び／又は平常時の通話者の音声のピーク周波数と通話時の通話者の音声のピーク周波数との差分を算出して変化ポイントを生成する算出手段とを備え、前記変化ポイントに基づいて通話者の音声の前記平均音量及び／又は前記ピーク周波数の変化を検出するように構成することができる。上記構成によれば、通話者の音声の平均音量及び／又はピーク周波数の変化を精度良く検出することが可能となる。

前記通信装置において、他の通信装置から、該他の通信装置で生成された変化ポイントとともに背景音の変更要求を受信したときに、前記他の通信装置で生成された変化ポイントと前記算出手段で生成された変化ポイントとを比較する比較手段を備え、前記変更手段は、前記比較手段の比較結果に基づいて背景音の変更の可否を決定するように構成することができる。上記構成によれば、通話中の背景音が一方的に変更され、一方の通話者の要望に偏ることを防止することが可能となる。

前記通信装置において、前記算出手段で算出された変化ポイントが所定値以上のときに、他の通信装置に向けて背景音の変更要求を送信する送信手段を備え、前記変更手段は、前記他の通信装置に向けて送信した背景音の変更要求に応答して、前記他の通信装置から背景音の変更を承諾する承諾応答が送信されたときに、背景音を変更するように構成することができる。上記構成によれば、通話中の背景音が一方的に変更され、一方の通話者の要望に偏ることを防止することが可能となる。

前記通信装置において、複数の背景音を記憶する記憶手段と、通話者の音声を解析し、該音声に含まれる所定のキーワードを検出する音声認識手段と、該音声認識手段で検出されたキーワードに基づいて、前記記憶手段に記憶された複数の背景音のうちから１つを選択する選択手段とを備えるように構成することができる。

また、本発明は、通信網を介して通話音声とともに背景音を送受信し、背景音を再生した状態で通話可能な通信方法であって、集音手段により、通話者の音声を集音して通話音声を生成する第１ステップと、前記集音手段で生成された通話音声の音量及び周波数の少なくとも１つに基づいて、変化検出手段により、通話時の通話者の音声の平均音量及び／又は音圧レベルがピークとなるピーク周波数の変化を検出する第２ステップと、前記第２ステップの検出結果に基づいて、変更手段により背景音を変更する第３ステップと、通信手段により、前記変更手段で変更された背景音を通話音声とともに前記通信網に送信する第４ステップとを有することを特徴とする。本発明によれば、前記発明と同様に、通話中の通話者の状況の変化に応じて背景音を変更することができ、常時、通話者の状況に即した背景音を再生することが可能となる。

また、本発明は、プログラムであって、集音手段により、通話者の音声を集音して通話音声を生成する第１ステップと、変化検出手段により、通話者の音声の平均音量及び／又は音圧レベルがピークとなるピーク周波数の変化を検出し、検出結果に基づいて、変更手段により背景音を変更する第２ステップと、通信手段により、前記変更手段で変更された背景音を通話音声とともに前記通信網に送信する第３ステップとを実行させることを特徴とする。本発明によれば、前記発明と同様に、通話中の通話者の状況の変化に応じて背景音を変更することができ、常時、通話者の状況に即した背景音を再生することが可能となる。

また、本発明は、記録媒体であって、集音手段により、通話者の音声を集音して通話音声を生成する第１ステップと、変化検出手段により、通話者の音声の平均音量及び／又は音圧レベルがピークとなるピーク周波数の変化を検出し、検出結果に基づいて、変更手段により背景音を変更する第２ステップと、通信手段により、前記変更手段で変更された背景音を通話音声とともに前記通信網に送信する第３ステップとを実行させるプログラムが記録されていることを特徴とする。前記発明と同様に、通話中の通話者の状況の変化に応じて背景音を変更することができ、常時、通話者の状況に即した背景音を再生することが可能となる。

以上のように、本発明によれば、通話中の通話者の状況の変化に応じて背景音を変更することができ、常時、通話者の状況に即した背景音を再生することが可能な通信装置等を提供することができる。

次に、本発明にかかる通信装置の一実施の形態について図面を参照しながら詳細に説明する。

図１は、本発明にかかる通信装置の一実施の形態を示すブロック図であり、通信装置としての携帯電話機１は、無線通信網３を介して、携帯電話機１と同一構成を有する携帯電話機２と無線接続され、携帯電話機２との間で通話音声、背景音等の通信を行う。

同図に示すように、携帯電話機１は、通話者の音声を集音するマイク入力部４と、通話者の音声を解析して音声の変化を検出し、後述する変化ポイントＰ１を生成する音声変化検出部６と、通話者の音声からキーワードを検出する音声認識部８と、通話音声や背景音等を発するスピーカー出力部１０と、複数の音データ（音楽や環境音等）を背景音として記憶する背景音記憶部１２と、携帯電話機２から送信された変化ポイントＰ２を保持する相手側変化ポイント保持部１４と、背景音の再生時間を計時する背景音タイマー１６と、無線通信網３を介して、携帯電話機２と無線通信を行う無線部１８と、携帯電話機１全体の動作を統括的に制御する制御部２０とを備える。

背景音タイマー１６は、所定時間単位でダウンカウントするダウンカウンターであり、背景音の再生が開始されるのに応答してダウンカウントをスタートする。この背景音タイマー１６のカウント時間は、ユーザが自由に設定することが可能である。

制御部２０は、音声認識部８で検出されたキーワードに基づき、背景記憶部１２に記憶された複数の背景音のうちから１つの背景音を選択し、無線部１８に出力する。制御部２０には、音声認識部８に設定された複数のキーワードと、各キーワードに対応する背景音との対応テーブルが保持されており、制御部２０は、その対応テーブルを参照して、キーワードに対応する背景音を選択する。これにより、例えば、携帯電話機１のユーザが「雨が降っている」という言葉を発した場合には、それと対応するように、雨音の背景音を流したり、「公園に居る」という言葉を発した場合には、自然をイメージさせる音楽を背景音として流すことができる。

また、制御部２０は、変化ポイントＰ１を監視し、変化ポイントＰ１が所定値以上となったときには、背景音の変更を要求する変更要求Ｃ１を無線部１８に出力し、無線通信網３を介して、携帯電話機２に送信する。さらに、制御部２０は、携帯電話機２からの変更要求Ｃ２を受信したときには、変化ポイントＰ１と携帯電話機２側の変化ポイントＰ２とを比較し、背景音の変更の可否を決定する。

図２は、音声変化検出部６の構成を示すブロック図であり、音声変化検出部６は、マイク入力された通話者の通話音声を一定期間に亘って保持する音声データ保持部３０と、通話時の平均音量Ｇ１を算出する平均音量算出部３２と、平常時の平均音量Ｇ２を保持する平常音量保持部３４と、通話時のピーク周波数Ｆ１を算出する周波数変換部３６と、平常時のピーク周波数Ｆ２を保持する平常周波数保持部３８と、変化ポイントＰ１を算出する変化ポイント算出部４０と、変化ポイント算出部４０から出力された変化ポイントＰ１を保持する自側変化ポイント保持部４２とを備える。

平均音量算出部３２は、音声データ保持部３０で保持された音声データを解析して、通話時の音量の平均値を算出し、算出した平均値を平均音量Ｇ１として出力する（図３（ａ））。この平均音量Ｇ１の算出処理は、通話相手との通話が継続されている間、所定の時間間隔で継続的に実行される。

周波数変換部３６は、音声データを周波数変換して、音圧レベルがピーク値となる周波数を算出し、算出した周波数をピーク周波数Ｆ１として出力する。ピーク周波数Ｆ１を求めるにあたっては、図３（ｂ）に示すように、音圧レベルがピーク値となる周波数を、音圧レベルの上位から順に、複数点（例えば、１０点）サンプリングして、それらの周波数の平均値を算出し、その算出平均値をピーク周波数Ｆ１とする。ピーク周波数Ｆ１の算出処理も、平均音量Ｇ１の算出処理と同様に、通話相手との通話が継続されている間、所定の時間間隔で継続的に実行される。

平常音量保持部３４及び平常周波数保持部３８は、平常時の通話者の音声に基づいて算出された平均音量Ｇ２及びピーク周波数Ｆ２を保持する。平均音量Ｇ２及びピーク周波数Ｆ２の算出処理は、平均音量Ｇ１及びピーク周波数Ｆ１の算出処理と異なり、通常、携帯電話機１の初期設定時の１回のみ実行される。

変化ポイント算出部４０は、平均音量算出部３２及び周波数変換部３６から出力される平均音量Ｇ１及びピーク周波数Ｆ１、並びに、平常音量保持部３４及び平常周波数保持部３８から出力される平均音量Ｇ２及びピーク周波数Ｆ２に基づいて、変化ポイントＰ１を生成する。具体的には、通話時の平均音量Ｇ１と平常時の平均音量Ｇ２との差分を算出するとともに、通話時のピーク周波数Ｆ１と平常時のピーク周波数Ｆ２との差分を算出し、それらの差分の加算値を変化ポイントＰ１として出力する。変化ポイントＰ１は、平均音量算出部３２及び周波数変換部３６から平均音量Ｇ１及びピーク周波数Ｆ１が出力される都度、生成され、制御部２０に出力される。

次に、図１の携帯電話機１の動作について説明する。

携帯電話機１を用いて通話するにあたっては、通話処理に先立ち、初期設定として、平常時の平均音量Ｇ２及びピーク周波数Ｆ２の設定処理が行われる。

図４は、平均音量Ｇ２及びピーク周波数Ｆ２の設定手順を示すフローチャートである。

携帯電話機１の機能選択メニューから平常時音声登録メニューが選択されると、フローがスタートし、まず、ユーザがマイク入力部４に向かって音声を発生するとともに、その発した音声の数秒間分のデータが音声データ保持部３０に保持される（ステップＳ１）。次に、平均音量算出部３２によって、音声データ保持部３０に保持された音声データが解析されて、図５（ａ）に示すように、平均音量Ｇ２が算出される（ステップＳ２）。算出された平均音量Ｇ２は、平常音量保持部３４に出力され、平常音量保持部３４によって保持される（ステップＳ３）。

平均音量Ｇ２が保持されると、周波数変換部３６によって、図５（ｂ）に示すように、音声データ保持部３０に保持された音声データが周波数変換され、ピーク周波数Ｆ２が求められる（ステップＳ４）。ピーク周波数Ｆ２を求めるにあたっては、ピーク周波数Ｆ１と同様に、音圧レベルがピーク値となる周波数が複数点サンプリングされ、それらの周波数の平均値がピーク周波数Ｆ２とされる。最後に、算出されたピーク周波数Ｆ２が平常周波数保持部３８に出力され、平常周波数保持部３８で保持される（ステップＳ５）。

こうして、平均音量Ｇ２及びピーク周波数Ｆ２の設定処理が終了すると、携帯電話機１の通話準備が完了し、携帯電話機２との間で通話処理が実行される。尚、以下の説明においては、携帯電話機１から発信される通話音声及び背景音と、携帯電話機２から発信される通話音声及び背景音とを区別するため、携帯電話機１から発信される通話音声をＶ１、背景音をＨ１とし、携帯電話機２から発信される通話音声をＶ２、背景音をＨ２とする。

携帯電話機１は、無線通信網３を介して、携帯電話機１のユーザが発した通話音声Ｖ１を背景音Ｈ１とともに携帯電話機２に送信することが可能であり、また、携帯電話機２から送信される携帯電話機２のユーザの通話音声Ｖ２を背景音Ｈ２とともに受信することが可能である。その一方で、背景音は、携帯電話機１内に記憶されている背景音と、携帯電話機２に記憶されている背景音とがあり、通話者同士が同一の背景音を聞きながら通話を進めるためには、携帯電話機１、２から発信される背景音の何れを、通話中の背景音として用いるかを決定する必要がある。

そこで、本実施の形態においては、携帯電話機１、２の何れか一方に背景音の選択主導権を持たせ、選択主導権を有する側の携帯電話機から発信される背景音を、通話中の背景音に決定することにより、双方の背景音が対立するのを防止し、通話者同士が同一の背景音を聞くことを可能にする。

まずは、通話開始時における背景音の設定手順を説明する。ここでは、携帯電話機１から携帯電話機２に電話をかけ、通話が開始されるものとする。

上述のように、本実施の形態においては、携帯電話機１、２の何れか一方に背景音の選択主導権を持たせるが、通話開始の時点では、電話をかけた側の携帯電話機に背景音の選択主導権を持たせる。従って、ここでは、携帯電話機１が背景音の選択主導権を有している。

携帯電話機１側からの呼応に応答して、携帯電話機２との通信チャンネルが確立されると、携帯電話機１側では、まず、マイク入力部４によって通話者の音声が集音され、デジタル変換を経て、デジタル信号の通話音声Ｖ１が生成される。この通話音声Ｖ１は、音声変化検出部６、音声認識部８及び制御部２０に出力される。

次に、音声認識部８によって、通話音声Ｖ１が音声認識処理され、通話音声Ｖ１に含まれるキーワードが取り出されるとともに、取り出されたキーワードが制御部２０に出力される。次に、制御部２０によって、背景音記憶部１２に記憶されている複数の背景音のうちから、認識音声部８で取り出されたキーワードに対応する背景音Ｈ１が選択される。

ここでは、携帯電話機１が背景音の選択主導権を有するため、選択された背景音Ｈ１は、通話音声Ｖ１とともに無線部１８に出力され、無線通信網３を介して、携帯電話機２に送信される。また、背景音Ｈ１は、制御部２０からスピーカー出力部１０にも出力され、携帯電話機１のスピーカーから背景音Ｈ１が出力される。

携帯電話機２では、携帯電話機１から送信された通話音声Ｖ１及び背景音Ｈ１が受信され、受信された通話音声Ｖ１及び背景音Ｈ１は、携帯電話機２のスピーカー出力部１０に出力される。また、携帯電話機２では、マイク入力部４によって集音された集音音声が通話音声Ｖ２に変換された後、無線通信網３を介して、携帯電話機１に送信される。

こうして、携帯電話機１から通話音声Ｖ１及び背景音Ｈ１が携帯電話機２に送信されるとともに、携帯電話機２から通話音声Ｖ２が携帯電話機１に送信され、背景音Ｈ１を再生した状態で、携帯電話機１のユーザと携帯電話機２のユーザとの通話が進められる。

続いて、通話の途中で背景音を変更する手順を、図６を参照しながら説明する。

以下の説明においては、携帯電話機１から携帯電話機２に電話をかけ、背景音Ｈ１を再生した状態で携帯電話機１、２が通話状態になっているものとする。

尚、図６に示す処理は、携帯電話機１、２の双方の制御部２０で実行されるが、説明の便宜上、ここでは、主として、携帯電話機１の制御部２０で実行される処理を対象にして説明を行う。

通話の途中で背景音を変更するに際しては、まず、携帯電話機２からの背景音の変更要求Ｃ２を受信したか否かが判定される（ステップＳ２１）。例えば、通話の途中で、携帯電話機２のユーザが興奮気味となり、発する声が大きくなったり、早口になると、携帯電話機２の平均音量算出部３２及び周波数変換部３６で算出される平均音量Ｇ１が大きくなり、ピーク周波数Ｆ１が高くなる。その結果、携帯電話機２の変化ポイントＰ２が増大するが、このとき、変化ポイントＰ２が所定値以上となっていれば、携帯電話機２から携帯電話機１に向けて、変化ポイントＰ２とともに変更要求Ｃ２が送信される。

携帯電話機２からの変更要求Ｃ２を受信した場合には（ステップＳ２１：ＹＥＳ）、音声変化検出部６によって、そのときの携帯電話機１側（以下、「自側」という）の変化ポイントＰ１が算出されて、自側変化ポイント保持部４２に保持されるとともに、自側変化ポイント保持部４２に保持された自側の変化ポイントＰ１と、相手側変化保持部１４に保持されている携帯電話機２側（以下、「相手側」という）の変化ポイントＰ２とが制御部２０に読み込まれる（ステップＳ２２）。

次に、自側の変化ポイントＰ１と相手側の変化ポイントＰ２とが比較され（ステップＳ２３）、自側の変化ポイントＰ１より相手側の変化ポイントＰ２が高い場合には（ステップＳ２３：ＹＥＳ）、無線部１８を介して、背景音を変更することを承諾する変更承諾応答が携帯電話機２に向けて送信される（ステップＳ２４）。携帯電話機１から送信された変更承諾応答が携帯電話機２によって受信されると、背景音の選択主導権が携帯電話機１から携帯電話機２に移行し、携帯電話機２によって、背景音の変更処理が実行される（ステップＳ２５）。

図７は、携帯電話機２側で実行される背景音の変更処理の手順を示すフローチャートである。同図に示すように、背景音の変更処理にあたっては、まず、背景音の選択主導権が携帯電話機２側にあるか否かが判定される（ステップＳ３１）。変更承諾応答を受信し、選択主導権が携帯電話機２側に移行されている場合には（ステップＳ３１：ＹＥＳ）、その時点で再生されている背景音Ｈ１を停止するとともに、携帯電話機１に対して、背景音Ｈ１の再生及び送信を停止するよう要求する（ステップＳ３２）。

次に、携帯電話機２の制御部２０によって選択された背景音Ｈ２が無線部１８に出力され、無線通信網３を介して、携帯電話機１に送信されるとともに、携帯電話機２のスピーカー出力部１０に出力され、背景音Ｈ２が再生される（ステップＳ３３）。こうして、通話中の背景音が、通話開始時に設定された背景音Ｈ１から携帯電話機２で選択された背景音Ｈ２に変更される。

これに対して、変更承諾応答を受信しておらず、携帯電話機２が選択主導権を有しない場合には（ステップＳ３１：ＮＯ）、携帯電話機１から受信した背景音Ｈ１が携帯電話機２のスピーカー出力部１０に出力され、背景音Ｈ１が再生される（ステップＳ３４）。このため、この時点で、携帯電話機２で背景音Ｈ１とは異なる背景音Ｈ２が選択されていたとしても、携帯電話機２で選択された背景音Ｈ２は、通話中の背景音には採用されず、携帯電話機１で選択されている背景音Ｈ１が継続的に再生される。

図６に戻り、携帯電話機２からの変更要求Ｃ２を受信していない場合（ステップＳ２１：ＮＯ）、又は、変更要求Ｃ２を受信していても、自側の変化ポイントＰ１より相手側の変化ポイントＰ２が低い場合には（ステップＳ２３：ＮＯ）、自側の変化ポイントＰ１が所定値以上であるか否かが判定される（ステップＳ２６）。

携帯電話機１のユーザの声が大きくなるなどして、携帯電話機１の変化ポイントＰ１が増大し、変化ポイントＰ１が所定値以上になっている場合には（ステップＳ２６：ＹＥＳ）、音声認識部８によって、音声認識処理が実行されて、ユーザの通話内容から所定のキーワードが取り出されるとともに（ステップＳ２７）、制御部２０によって、そのキーワードに対応した背景音Ｈ１が選択される（ステップＳ２８）。

次に、携帯電話機２に向けて、そのときの変化ポイントＰ１とともに背景音の変更要求Ｃ１が送信され（ステップＳ２９）、携帯電話機２側で、携帯電話機１の変化ポイントＰ１と携帯電話機２の変化ポイントＰ２とが比較され、携帯電話機１に選択主導権を持たせて良いか否かが判定される。

次に、背景音の選択主導権を携帯電話機１が有するか否かが判定され（ステップＳ３０）、携帯電話機２からの変更承諾応答を受信せず、携帯電話機１が選択主導権を有しない場合には（ステップＳ３０：ＮＯ）、再生中の背景音Ｈ１をそのまま継続再生する（ステップＳ３１）。

これに対し、携帯電話機２からの変更承諾応答を受信し、携帯電話機１が選択主導権を有する場合には（ステップＳ３０：ＹＥＳ）、選択した背景音Ｈ１が、再生中の背景音Ｈ１と同一であるか否かが判定される（ステップＳ３２）。

選択した背景音Ｈ１と再生中の背景音Ｈ１とが同一である場合には（ステップＳ３２：ＮＯ）、背景音を変更する必要がないため、再生中の背景音Ｈ１をそのまま継続再生する（ステップＳ３１）。

これに対し、選択した背景音Ｈ１と再生中の背景音Ｈ１とが異なる場合には（ステップＳ３２：ＮＯ）、背景音タイマー１６で計時される再生時間が設定時間に達し、再生中の背景音Ｈ１の再生時間が満了しているか否かが判定される（ステップＳ３３）。再生時間が満了している場合には（ステップＳ３３：ＹＥＳ）、再生中の背景音Ｈ１の再生及び送信が停止されるとともに、新たに選択された背景音Ｈ１の再生及び送信が開始される（ステップＳ３４）。こうして、通話中の背景音が、通話開始時に設定された背景音Ｈ１から新たに選択された背景音Ｈ１に変更される。

一方、再生時間が満了していない場合には（ステップＳ３３：ＮＯ）、再生時間が満了するまで、再生中の背景音Ｈ１の再生及び送信が継続され（ステップＳ３５）、再生時間が満了した場合には、上記と同様にして、新たに選択された背景音Ｈ１の再生及び送信が開始される。

以上のように本実施の形態によれば、通話中、通話者の音声の変化度合いを示す変化ポイントＰ１を監視し、通話者の音声が大きく変化して変化ポイントＰ１が所定値以上になるのに応じて、背景音を変更するため、通話中の通話者の状況の変化に応じて背景音を変更することができ、常時、通話者の状況に即した背景音を再生することが可能となる。

また、本実施の形態によれば、平常時の通話者の音声を予め保持し、平常時の通話者の音声と通話時の通話者の音声との差分を求めて変化ポイントを生成するため、通話者の音声の変化を精度良く検出することができる。

さらに、本実施の形態によれば、変化ポイントＰ１が所定値以上になった場合に、相手側の携帯電話機に対して、背景音の変更要求を送信し、相手側の携帯電話機からの承諾応答を受けてから、背景音を変更するとともに、相手側の携帯電話機から背景音の変更要求を受信した場合に、相手側の携帯電話機の変化ポイントＰ２と自側の携帯電話機の変化ポイントＰ１を比較し、その比較結果に基づいて、背景音の変更の可否を決定するため、通話中の背景音が一方的に変更され、一方の通話者の要望に偏ることを防止することが可能となる。

本発明は、以上の実施形態に限定されることなく、特許請求の範囲に記載された発明の範囲内で種々の変更が可能であり、それらも本発明の範囲内に包含される。

例えば、上記実施の形態においては、音声認識部８を備え、通話者の音声に含まれるキーワードを検出し、そのキーワードに対応する背景音を選択しているが、音声認識部８で認識されるキーワードに加え、平均音量やピーク周波数をパラメータとして用い、それらを背景音と対応させて、背景音を選択するようにしてもよい。

また、上記実施の形態においては、平均音量及びピーク周波数に基づいて、通話者の音声の変化を検出しているが、通話者の音声の変化を検出することができれば、平均音量及びピーク周波数以外のパラメータを用いて、通話者の音声の変化を検出するようにしてもよい。

さらに、上記実施の形態においては、平均音量及びピーク周波数の双方を用いて変化ポイントを生成しているが、平均音量又はピーク周波数の何れか一方のみを用いて変化ポイントを生成するようにしてもよい。

また、上記実施の形態においては、通信装置として携帯電話機やＰＨＳ等の携帯型の通信装置を例示しているが、本発明は、それらの通信装置の他、一般家庭用の固定電話機や、ファクシミリ装置に付属する電話機等の通信装置にも広く適用することが可能である。

本発明にかかる通信装置の一実施の形態を示すブロック図である。図１の音声変化検出部の構成を示すブロック図である。通話中の通話者の音声の音量及び周波数の一例を示すグラフである。平均音量Ｇ２及びピーク周波数Ｆ２の設定手順を示すフローチャートである。平常時の通話者の音声の音量及び周波数の一例を示すグラフである。通話の途中で背景音を変更する手順を示すフローチャートである。通話相手側の携帯電話機で実行される背景音の変更処理の手順を示すフローチャートである。

符号の説明

１携帯電話機
２携帯電話機
４マイク入力部
６音声変化検出部
８音声認識部
１０スピーカー出力部
１２背景音記憶部
１４相手側変化ポイント保持部
１６背景音タイマー
１８無線部
２０制御部
３０音声データ保持部
３２平均音量算出部
３４平常音量保持部
３６周波数変換部
３８平常周波数保持部
４０変化ポイント算出部
４２自側変化ポイント保持部

Claims

通信網を介して通話音声とともに背景音を送受信し、背景音を再生した状態で通話可能な通信装置であって、
通話者の音声を集音して通話音声を生成する集音手段と、
該集音手段で生成された通話音声の音量及び周波数の少なくとも１つに基づいて、通話時の通話者の音声の平均音量及び／又は音圧レベルがピークとなるピーク周波数の変化を検出する変化検出手段と、
該変化検出手段の検出結果に基づいて背景音を変更する変更手段と、
変更された背景音を通話音声とともに前記通信網に送信する通信手段とを備えることを特徴とする通信装置。
前記変化検出手段は、平常時の通話者の音声を保持する保持手段と、平常時の通話者の音声の平均音量と通話時の通話者の音声の平均音量との差分、及び／又は平常時の通話者の音声のピーク周波数と通話時の通話者の音声のピーク周波数との差分を算出して変化ポイントを生成する算出手段とを備え、前記変化ポイントに基づいて通話者の音声の前記平均音量及び／又は前記ピーク周波数の変化を検出することを特徴とする請求項１に記載の通信装置。
他の通信装置から、該他の通信装置で生成された変化ポイントとともに背景音の変更要求を受信したときに、前記他の通信装置で生成された変化ポイントと前記算出手段で生成された変化ポイントとを比較する比較手段を備え、前記変更手段は、前記比較手段の比較結果に基づいて背景音の変更の可否を決定することを特徴とする請求項２に記載の通信装置。
前記算出手段で算出された変化ポイントが所定値以上のときに、他の通信装置に向けて背景音の変更要求を送信する送信手段を備え、前記変更手段は、前記他の通信装置に向けて送信した背景音の変更要求に応答して、前記他の通信装置から背景音の変更を承諾する承諾応答が送信されたときに、背景音を変更することを特徴とする請求項２又は３に記載の通信装置。
複数の背景音を記憶する記憶手段と、通話者の音声を解析し、該音声に含まれる所定のキーワードを検出する音声認識手段と、該音声認識手段で検出されたキーワードに基づいて、前記記憶手段に記憶された複数の背景音のうちから１つを選択する選択手段とを備えることを特徴とする請求項１乃至４のいずれかに記載の通信装置。
通信網を介して通話音声とともに背景音を送受信し、背景音を再生した状態で通話可能な通信方法であって、
集音手段により、通話者の音声を集音して通話音声を生成する第１ステップと、
前記集音手段で生成された通話音声の音量及び周波数の少なくとも１つに基づいて、変化検出手段により、通話時の通話者の音声の平均音量及び／又は音圧レベルがピークとなるピーク周波数の変化を検出する第２ステップと、
前記第２ステップの検出結果に基づいて、変更手段により背景音を変更する第３ステップと、
通信手段により、前記変更手段で変更された背景音を通話音声とともに前記通信網に送信する第４ステップとを有することを特徴とする通信方法。
前記変化検出手段による前記第２ステップは、平常時の通話者の音声の平均音量と通話時の通話者の音声の平均音量との差分、及び／又は平常時の通話者の音声のピーク周波数と通話時の通話者の音声のピーク周波数との差分を算出して変化ポイントを生成するステップと、前記変化ポイントに基づいて前記通話者の音声の前記平均音量及び／又は前記ピーク周波数の変化を検出するステップとを有することを特徴とする請求項６に記載の通信方法。
前記変更手段による前記第３ステップは、他の通信装置から、該他の通信装置で生成された変化ポイントとともに背景音の変更要求を受信したときに、前記他の通信装置で生成された変化ポイントと前記変化ポイントを生成するステップで生成された変化ポイントとを比較するステップと、比較結果に基づいて背景音の変更の可否を決定するステップとを有することを特徴とする請求項７に記載の通信方法。
前記変更手段による前記第３ステップは、算出された変化ポイントが所定値以上のときに、他の通信装置に向けて背景音の変更要求を送信するステップと、前記他の通信装置に向けて送信した背景音の変更要求に応答して、前記他の通信装置から背景音の変更を承諾する承諾応答が送信されたときに、背景音を変更するステップとを有することを特徴とする請求項７又は８に記載の通信方法。
音声認識手段により、前記通話者の音声を解析し、該音声に含まれる所定のキーワードを検出するステップと、選択手段により、前記検出されたキーワードに基づいて、複数の背景音のうちから１つを選択するステップとを有することを特徴とする請求項６乃至９のいずれかに記載の通信方法。
請求項６乃至１０のいずれかに記載の通信方法を実行させるためのプログラム。
請求項１１に記載されたプログラムが記録された記録媒体。