JP5803132B2 - 音声切替装置、プログラム及び方法 - Google Patents

Description

本発明は、音声切替装置、ならびにそのプログラム及び方法に関する。

携帯電話機において、カメラ、ＴＶ画像受信機の搭載は、一般的な仕様となりつつある。このような進歩を反映して、携帯電話の用途は、大幅に拡大した。これまでは、携帯電話を使った通信は、２者間か、多くても３者間の、音声や文字だけの通信が主流であったが、同じ動画の視聴を３者以上が同時に行うことも可能となった。録画された動画や録音された音楽、スピーチ、会議録等についての会話を、これらの視聴と同時に行うことは、上記通信形態の発展形として求められている通信形態の一つである。

このような通信形態においては、通話の音声と、録音、録画されたコンテンツの再生音声の両立が、重要な課題である。これまでは音声を含む動画音声の再生時に通話する場合は、動画の音声信号は遮断することが一般的であった。

例えば、特許文献１は、携帯電話を折り畳んだ状態でテレビ放送受信中に着信があった場合に、携帯電話を開くと、自動的にテレビ受信部の出力によるテレビ画面表示を中断して、通話モードに移行させる技術を公開している。また、特許文献１は、携帯に着信があり、かつ携帯電話が開かれていることを検知すると、テレビの画面表示はそのままにして、テレビの音声だけをオフとする技術も開示している。

動画や音声の内容に関する会話を動画の音声を中断して行うと、会話中に出力された動画の内容に関する音声情報が欠落するため、正確な情報を見落とすことが、往々にしてある。

特開２００５−１０９８１９号公報

本発明が解決しようとする課題は、通話機能を持った端末間において、記憶されたコンテンツの再生された音声を聴取しつつ、通話の音声を聞き取ることを可能とすることである。

動画の内容に関する会話を、動画の音声を中断して行うと、会話中に出力された動画の内容に関する音声情報が欠落した状態で会話が進行するため、通話者双方が誤った情報を得がちである。また、コンサート等のライブ公演を記録した動画の場合、互いに会話をしながら音楽を楽しむということができなくなる。

特許文献１の場合、着信時にテレビ画面表示を中断して、通話モードに移行させるため、動画の音声を聴取しつつ、動画の内容について、通話を行うことはできなかった。

本発明は、上記課題を解決する音声切替装置、プログラムならび方法を提供することを目的とする。

本発明によれば、音声付きの記録データを再生する再生手段と、通話機能を有する他の端末装置との通話を行う通話手段と、前記再生中に、前記音声付き記録データを受信して再生している、前記他の端末装置から通話優先要求信号を受信すると、前記再生手段に前記再生の音量を低下させるか、または前記通話手段に通話音声を増大させる音声切替制御手段と、を備える音声切替装置を備える音声切替装置が得られる。

本発明によれば、音声付きの記録データを再生する再生処理と、通話機能を有する他の端末装置との通話を行う通話処理と、前記再生中に、前記音声付き記録データを受信して再生している、前記他の端末装置から通話優先要求信号を受信すると、前記再生の音量を低下させるか、または通話音声を増大させる音声切替制御処理、とをコンピュータに実行させる音声切替プログラムが得られる。

本発明によれば、音声付きの記録データを再生し、通話機能を有する他の端末装置との通話を行い、前記再生中に、前記音声付き記録データを受信して再生している、前記他の端末装置から通話優先要求信号を受信すると、前記再生の音量を低下させるか、または通話音声を増大させる、音声切替方法が得られる。

本発明によれば、サーバ装置と、前記サーバ装置から、音声付き記録データを取得し、これを再生する再生手段と、通話機能を有する他の端末装置との通話を行う通話手段と、
前記再生中に、前記サーバ装置から前記音声付き記録データを受信して再生している、
前記他の端末装置から通話優先要求信号を受信すると、前記再生手段に前記再生の音量を低下させるか、または前記通話手段に通話音声を増大させる音声切替制御手段と、
を有する音声切替システムが得られる。

本発明の効果は、通話機能を持った端末間において、記憶されたコンテンツの再生された音声を聴取しつつ、通話の音声を聞き取ることを可能とすることである。

図１は第１の実施形態の構成図である。 図２は第１の実施形態の音声切替装置の動作を表すシーケンスチャートである。 図３は第１の実施形態の通話要求ボタンを示す図である。 図４は第２の実施形態の構成図である。 図５は第２の実施形態の音声切替装置の動作を表すシーケンスチャートである。 図６は第３の実施形態の構成図である。 図７は第３の実施形態の音声切替装置の動作を表すシーケンスチャートである。 図８は第４の実施形態の構成図である。 図９は第４の実施形態の助言データの流れを示す図である。 図１０は第４の実施形態の音声切替装置の動作を表すシーケンスチャートである。 図１１は指示マークを示す図である。 図１２は第５の実施形態の音声切替装置の動作を表すシーケンスチャートである。 図１３は第６の実施形態の構成図である。

（第１の実施形態）以下は、本発明を携帯電話に適用させた場合の実施の形態の構成について、図面を参照して詳細に説明するものである。図１は、音声切替システムの構成を示している。図１において各部をつなぐ実線は、電気的な結合関係を示している。また、音声切替装置１００、音声切替装置２００、サーバ３００は、共通バス等のネットワークを通じて、電気的に接続する。

音声切替装置１００は、コンテンツ受信部１０、再生部１１、再生制御通信部１２、通話部１３、音声切替制御部１４、音声切替通信部１５、通話要求受信部１９を含んでいる。音声切替装置１００は、携帯電話をはじめとする通話機能付の端末である。

コンテンツ受信部１０は、記憶部３１に保存されたコンテンツを、配信部３２を介して受信し、再生部１１に送信する。

再生部１１は、このコンテンツを再生する。再生部１１は、スピーカ１０２の出力を調節する機能を有している。したがって、再生する音声の音量の大小を、この出力調節により調整できる。なお、スピーカ１０２が出力する音量Ｖは、その音量を与える音圧Ｐと、基準となる音圧Ｐ０との比の対数関数で表され、
Ｖ（ｄＢ）＝−２０ｌｏｇ（Ｐ／Ｐ０）で計算される。ここでＰ０は、人間の耳が聴取可能な、最低限の音圧である０．００００２Ｐａ（パスカル）に設定している。この実施形態において、音量の調整可能範囲は０ｄＢから１３０ｄＢまでである。なお、この範囲は一例に過ぎず、別な調整可能範囲を設定することが、可能である。

再生制御通信部１２は、ユーザが所定のボタン操作により入力した、コンテンツの再生の開始、再生の停止、再生画像、再生音声の早送り、巻き戻しの命令を、これらの命令のそれぞれに対応させた電気信号として再生部１１に出力し、再生部１１を制御する。なおこれらの電気信号は、再生制御信号と総称する。このうち再生を開始する電気信号は、再生開始信号と呼ばれる。

また、再生制御通信部１２は、コンテンツの再生中に継続して再生信号を発信する。これらの電気信号は、共通バス等のネットワークを介して通話部１３、通話要求受信部１９で、監視できるものとする。再生制御信号のうち再生開始信号は、後述するサーバ３００の再生制御通信部３４を介して、音声切替装置２００の再生制御通信部２２に入力され、音声切替装置２００の再生部２１においても、同じコンテンツの再生を開始させる。

通話部１３は、通話時にユーザが発声する音声（通話音声）を取得し、マイクロフォン１０４を介してこれを電気信号に変換したものを通話部２３に送信する。また、通話部１３は、通話部２３から取得した電気信号を、スピーカ１０３を介して聴取可能な通話音声に変換する。それぞれのユーザが、通話部１３、２３のマイクロフォン１０４、２０４に通話音声を入力し、通話部１３、２３のスピーカ１０３、２０３からこれらを聴取することによって、音声切替装置１００のユーザと音声切替装置２００のユーザとは、通話を行うことができる。通話部１３が取得した通話音声の音量は、コンテンツの音量と同様、通話部１３が、スピーカ１０３の出力調節を行うことにより、大小を調整することができる。

通話要求ボタン１７は、ユーザにより押下されることにより、通話優先要求信号を発信することができる。

通話要求受信部１９は、通話要求ボタン１７の押下による通話優先要求信号を検出して、音声切替装置２００の音声切替通信部２５に音声切替信号を送信する。また通話要求受信部１９は、再生制御信号を受信し、再生信号を受信していない場合に通話優先要求信号を受けた場合、警告音を含むエラーメッセージを発することができる。

音声切替通信部１５は、通話要求受信部２９から送信された音声切替信号を受信して、音声切替制御部１４に通知する。

音声切替制御部１４は、この通知を受けて、再生部１１に、コンテンツの音声の音量低下を指示する。または、音声切替制御部１４は、この通知を受けて、通話部１３に通話音声の増大を指示する。

音声切替装置２００は、音声切替装置１００と同一の構成であり、同一の機能を有している。すなわち、音声切替装置２００は、コンテンツ受信部２０、再生部２１、再生制御通信部２２、通話部２３、音声切替制御部２４、音声切替通信部２５、通話要求受信部２９を含んでいる。音声切替装置２００においては、通話要求ボタン２７の押下による通話優先要求信号を検出する。音声切替装置２００は、音声切替装置１００と同様、携帯電話をはじめとする通話機能付の端末である。

音声切替装置１００と音声切替装置２００は、それぞれ異なった装置識別番号を有している。音声切替装置１００と音声切替装置２００は、それぞれ相手の装置識別番号を図示しないテンキーにより、やはり図示しないセッション開始部に入力することによって、セッション開始の依頼を、サーバ３００のＳＩＰ通信部３６に送信することができる。

サーバ３００は、記憶部３１、配信部３２、再生状態管理部３３、再生制御通信部３４、セッション管理部３５、ＳＩＰ通信部３６を含んでいる。なお、ＳＩＰとはＳｅｓｓｉｏｎ Ｉｎｉｔｉａｔｉｏｎ Ｐｒｏｔｏｃｏｌの略語であり、端末間の接続の開始、変更、終了を制御するプロトコルである。ＳＩＰ通信部３６は、このプロトコルに基づいて、端末間の通信を成立させる。

サーバ３００の記憶部３１は、動画及び音声のコンテンツのデータを格納しており、配信部３２を介して、音声切替装置１００、及び音声切替装置２００に配信する。

セッション管理部３５は、音声切替装置１００と音声切替装置２００との間のＳＩＰ通信を実行するＳＩＰ通信部３６を制御する。セッション管理部３５は、ＳＩＰ通信部３６が取得した音声切替装置１００、２００の装置識別番号（以降、装置番号）が、セッション確立可能な装置番号として登録されているものか否かを、セッション管理部３５が有する不図示の記憶部を照合して判断する。
また、セッション管理部３５は再生状態管理部３３の要求に応じて、セッションを確立している装置番号を、再生状態管理部３３に通知することもできる。なお、装置識別番号は、ＳＩＰ ＵＲＩ（ＵＲＩ：Ｕｎｉｆｏｒｍ Ｒｅｓｏｒｃｅ Ｉｄｅｎｔｉｆｉｅｒ）に対応しており、この記憶部は、その対応関係をも格納している。

ＳＩＰ通信部３６は、音声切替装置１００のセッション開始部から装置番号の入力を受けて、セッション管理部３５に登録の有無を問合せる。ＳＩＰ通信部３６が、セッション管理部３５から、この装置番号に対応するＳＩＰ ＵＲＩが登録されていることを通知された場合は、ＳＩＰ通信部３６は、音声切替装置１００と、入力された装置番号の音声切替装置との間にセッションを確立する。入力された装置番号が音声切替装置２００の装置番号である場合、音声切替装置１００と音声切替装置２００との間にセッションが確立する。セッションの確立後、音声切替装置１００のユーザと音声切替装置２００のユーザはそれぞれ通話部１３、通話部２３を介して、会話が可能となり、音声切替装置１００で再生されているコンテンツを、音声切替装置２００でも、同期して視聴することができる。

さらに、セッションが確立した音声切替装置同志は、各々が有する再生制御通信部１２、２２から指令を出すことにより、この再生コンテンツの停止、早送り、巻き戻し、を実施することが可能である。

再生状態管理部３３は、再生制御通信部３４から取得した再生制御信号により、音声切替装置１００、音声切替装置２００の、再生部１１、再生部２１の状態を監視する。また、再生状態管理部３３は、セッション管理部３５に、セッションを確立している音声切替装置のＳＩＰ ＵＲＩを問い合わせ、再生制御通信部３４に通知する。

再生制御通信部３４は、音声切替装置１００、音声切替装置２００から再生制御信号を受信して、これを再生状態管理部３３に通知する。また、再生制御通信部３４は、再生状態管理部３３から通知されたＳＩＰ ＵＲＩを有する音声切替装置に、再生制御信号を送信する。

コンテンツ受信部１０、再生制御通信部１２、音声切替通信部１５、通話部１３、音声切替制御部１４、通話要求受信部１９は、論理素子の組合せであるハードウェアで構成されてもよいし、コンピュータプログラムを実行するソフトウェアで構成されてもよい。

コンテンツ受信部２０、再生制御通信部２２、音声切替通信部２５、通話部２３、音声切替制御部２４、通話要求受信部２９は、論理素子の組合せであるハードウェアで構成されてもよいし、コンピュータプログラムを実行するソフトウェアで構成されてもよい。

配信部３２、再生状態管理部３３、再生制御信号通信部３４、セッション管理部３５、ＳＩＰ通信部３６は論理素子を組み合わせて構成したハードウェアで構成されてもよいし、コンピュータプログラムを実行するソフトウェアで構成されてもよい。なお、動画コンテンツのデータや、音声記録のデータは、総称して記録データと呼ぶこともある。

図２は音声切替装置１００、音声切替装置２００の動作を表すシーケンスチャートである。音声切替装置１００のセッション開始部はテンキー入力による、音声切替装置２００の装置番号の入力を受ける（Ｓ１）。装置番号は電気信号に変換されてサーバ３００に送信される。サーバ３００のＳＩＰ通信部３６はこの電気信号を受け、セッション管理部３５に、この装置番号に対応するＳＩＰ ＵＲＩが登録されているか否かを確認する。セッション管理部３５がＳＩＰ ＵＲＩの登録を確認する（Ｓ２）と、ＳＩＰ通信部３６は音声切替装置１００と音声切替装置２００の間にセッションを確立させる（Ｓ３）。音声切替装置１００と音声切替装置２００とは、互いに通話すること及び同じコンテンツの再生を視聴可することが可能な状態となる。音声切替装置１００のユーザは、図示しないコンテンツ配信要求部から、サーバ３００の配信部３２に指定したコンテンツの配信を要求する（Ｓ３−２）。サーバ３００の配信部３２は、この要求が音声切替装置１００から発せられたものであることを認識し、セッション管理部３５に問い合わせて、音声切替装置１００とセッションを確立している音声切替装置が、音声切替装置２００であることを確認する。配信部３２は、指定されたコンテンツを記憶部３１から取得し、これを音声切替装置１００と音声切替装置２００に配信する（Ｓ３−３）。第１の実施形態では、このようにして、音声切替装置１００と音声切替装置２００に、共通の動画コンテンツが配信される。詳細には、音声切替装置１００の再生制御通信部１２に再生開始信号が入力されると、再生制御通信部１２はこの再生開始信号をサーバ３００の再生制御通信部３４に送信する（Ｓ３−２）。再生制御通信部３４は、再生開始信号が音声切替装置１００から送信されたことを再生状態管理部３３に通知する。この通知を受けた再生状態管理部３３は、セッション管理部３５に問い合わせて、音声切替装置１００がセッションを確立している音声切替装置２００のＳＩＰ ＵＲＩを取得し、再生制御通信部３４に出力する。再生制御信号通信部３４は、音声切替装置２００のＳＩＰ ＵＲＩに再生開始信号を送り、音声切替装置２００の再生部２１でも、音声切替装置１００の再生部１１と同時にこの共通の動画コンテンツの再生が行われる（Ｓ３−３）。

音声切替装置１００の通話要求受信部１９に、通話要求ボタン１７が押下されて、通話優先要求信号が入力されると（Ｓ４）、通話要求受信部１９は、同時に再生しているコンテンツがあるか否かを、再生制御通信部１２が送信する再生信号の有無によって、判断する（Ｓ５）。上記の動画コンテンツを同時に再生している場合、通話要求受信部１９が、セッションを確立している相手であるところの音声切替装置２００の音声切替通信部２５に向けて、音声切替信号を送信する（Ｓ６）。音声切替信号は、音声切替装置２００の音声切替通信部２５により受信される（Ｓ７）。

音声切替装置２００の音声切替制御部２４は、音声切替通信部２５からの通知を受けて、再生部２１に、動画コンテンツの音声（動画音声）の音量を下げさせる（Ｓ８）。一例として、音声切替制御部２４から通知を受けた、再生部２１は、スピーカ２０２の出力を調整することにより、動画音声の音量を６０ｄＢ以下に下げる。なお、このように、再生部２１に音量を下げさせる指示は、音声切替指示とも呼ばれる。一方、Ｓ５で通話要求受信部１９が同時に再生しているコンテンツがないと判断した場合、通話要求受信部１９は、一例として警告音を含むエラーメッセージを発信する（Ｓ９）。

この実施形態においては、通話優先要求信号は、ユーザによる通話要求ボタン１７の押下により、通話要求受信部１９に入力され、通話要求受信部１９がこれを音声切替信号として音声切替通信部２５に送信する。

通話要求ボタン１７は、一例として図３に示すように音声切替装置１００の側面に設置されることができる。音声切替装置１００のユーザが側面方向（紙面右から左）にこれを押下することによって、通話要求受信部１９から通話優先要求信号が発信され、音声切替装置２００の音声切替通信部２５に送信される。

通話優先要求信号の送信は、このボタンを通話の間、押し続けることによって送信されてもよい。また、通話優先要求信号の送信は、一回の通話要求ボタン１７の押圧により、送信される方式でもよい。ボタンは、一回の押圧で押下された状態となる構造でもよいし、押圧されていないと復帰する構造でも構わない。また、通話優先要求信号の送信は、必ずしもボタンによるものには限定されない。通話優先要求信号の送信は、レバーや、キーボードの操作によって行うこともできる。

本実施形態では、音声切替制御部２４は、音声切替指示により、再生部２１の動画音声の低下を指示しているが、代わりに又は同時に、音声切替制御部２４は、通話部２３の通話音声の音量増大を指示することができる。この場合、音声切替指示を受けた通話部２３は、スピーカ２０３の出力を調整することにより、５０ｄＢ以上の音声信号の音量を保持する。

なお、上記の説明では音声切替装置１００が通話優先要求信号を送信する場合について取り上げているが、音声切替装置２００が通話優先要求信号を送信する場合にも、同様の処理の実行により、同様の機能が実現される。

本実施形態は、コンテンツとして動画コンテンツをとりあげているが、必ずしも動画に限定されるものではない。コンテンツは、画像を伴わない音声のみの音声コンテンツであってもよい。

また、本実施形態では、コンテンツの配信をサーバから受けているが、コンテンツの配信は、必ずしもサーバからである必要はない。コンテンツの配信は、音声切替装置間で行なわれてもよい。

本実施形態では、音声切替装置１００が、通話部１３、音声切替通信部１５、通話要求受信部１９を、音声切替制御部１４とは別に有しているが、通話部１３、音声切替通信部１５、通話要求受信部１９の機能は、音声切替制御部１４に組み込まれてもよい。また、本実施形態では、音声切替装置１００が、コンテンツ受信部１０、再生制御通信部１２を再生部１１とは別に有しているが、コンテンツ受信部１０、再生制御通信部１２の機能が、再生部１１に組み込まれてもよい。

本実施形態では、サーバ３００のＳＩＰ通信部３６が、音声切替装置１００と音声切替装置２００の間にセッションを形成したが、必ずしも音声切替装置１００と音声切替装置２００の間にセッションを確立する必要はない。コンテンツを同時再生する複数の音声切替装置からなるグループ中での通信が、すべてサーバ３００のＳＩＰ通信部３６を介して行う方式が取られてもよい。

また、本実施形態では、サーバ３００のＳＩＰ通信部３６が、音声切替装置１００と音声切替装置２００の間にセッションを形成したが、セッションの形成は必ずしもＳＩＰによる必要はなく、ＳＩＰ以外の方法を使ってセッションを形成してもよい。

上記説明は、音声切替装置１００と音声切替装置２００の２台の間にセッションが確立している場合についてであるが、コンテンツを同時再生する音声切替装置が３台以上の場合の説明も、同様である。

本実施形態によれば、通話優先要求信号を受けた場合、再生中の動画音声の音量を低下させることにより、通話と動画視聴の両方を同時に行うことができる。
（第２の実施形態）
第１の実施形態は、通話要求ボタン１７の押下が、通話要求受信部１９に向けて、通話優先要求信号を発信させていた。通話優先要求信号の発信は、必ずしも、このような外部操作を伴うものではない。通話音声を電気信号に変換した音声信号そのものが通話優先要求信号であってもよい。

第２の実施形態では、後述するように、着信した音声信号を変換した通話音声の音量を基準として、通話部１３、２３が、音声レベル判定部１６、２６の判定結果を元に、音声切替制御部１４、２４に、音声切替指示を発令させるか否かを判断する。この場合は、音声信号の音量に対して、一定の閾値が設定される。音声切替制御部１４、２４は、音声信号がこの閾値を上回った場合に音声切替指示を発令し、下回った場合には音声切替指示を発令しない。すなわち、一定の閾値を越えた音量の通話音声を変換した音声信号が、通話優先要求信号となる。

図４は第２の実施形態の構成を表す。第２の実施形態の構成は、通話部１３、２３と接続した音声レベル判定部１６、２６を有する構成である。これらの相違点以外は、第１の実施形態の構成と同じである。図４において各部をつなぐ実線は、図１と同様、電気的な結合関係を示している。第２の実施形態の構成は、通話要求ボタン１７、２７、通話優先要求信号受信部１９、２９を有する構成でも、有さない構成でも構わない。

図５は第２の実施形態の音声切替装置１００の動作を表すシーケンスチャートである。Ｓ２１〜Ｓ２３−３は第１の実施形態におけるＳ１〜Ｓ３−３と同じ処理を行うステップである。音声切替装置１００の通話部１３が、ユーザが発声した通話音声をマイクロフォン１０４を通じて受信する（Ｓ２４）。通話部１３は、マイクロフォン１０４により通話音声から変換された音声信号を、音声切替装置２００の通話部２３に送信する（Ｓ２５）。通話部２３はこの音声信号を受信する（Ｓ２６）。通話部２３から音声信号を取得した、音声レベル判定部２６は、取得した音声信号を変換した通話音声の音量が閾値５０ｄＢより大きいか否かを判定し、判定結果を通話部２３に通知する（Ｓ２７）。音声レベル判定部２６が、大きいと判断した場合（Ｓ２７：ＹＥＳ）、通話部２３は、再生制御通信部２２が送信する、再生中を示す再生信号の有無によって、同時に再生しているコンテンツが有るか否かを判断する（Ｓ２９）。通話部２３は、同時に再生しているコンテンツがあると判断した場合（Ｓ２９：ＹＥＳ）、音声切替制御部２４に音声切替指示の発令を指示する。

音声切替制御部２４は、再生部２１に、音声切替指示を発令する。再生部２１は、スピーカ２０２の出力を調整し、動画音声の音量を、６０ｄＢ以下に下げる（Ｓ３０）。音声レベル判定部２６が、音声信号の音量が閾値５０ｄＢ以下であると判定した場合（Ｓ２７：ＮＯ）、後述する第４の実施形態で説明する助言が表示される。または、図示しない音声メッセージ記憶部に格納されたエラーメッセージが通話部２３から通話部１３に送信される（Ｓ２８）。

なお、上記は、音声切替装置１００が音声信号を送信する場合について説明したものだが、音声切替装置２００が音声信号を送信する場合にも、上記と同様の処理の実行により、上記と同様の機能が実現される。

本実施形態では、音声切替制御部２４は、音声切替指示により、再生部２１の動画音声の音量低下を指示しているが、代わりに又は同時に、音声切替制御部２４は、通話部２３のスピーカ２０３から出力された通話音声の音量増大を、通話部２３に指示することができる。この場合、音声切替指示を受けた通話部２３は、スピーカ２０３の出力を調整することにより、５０ｄＢ以上の音声信号の音量を保持する。

本実施形態によれば、音声レベル判定部１６の閾値は５０ｄＢ、音声切替指示における動画音声の音量は６０ｄＢに設定されている。しかし、閾値は、必ずしもこれらの値である必要はなく、閾値、及び、音声切替指示における動画音声の音量は、必要に応じて適宜設定することができる。

本実施形態によれば、通話音声を電気信号に変換した音声信号による通話優先要求信号を受けた場合、再生中の動画音声の音量を低下させることにより、通話と動画視聴の両方を同時に行うことができる。
（第３の実施形態）
通話優先要求信号は、画像を一時停止させる画像停止要求信号でもよい。第３の実施形態は、動画を一時停止することを命じる画像停止要求信号を通話優先要求信号として、音声切替制御部１４、２４が、再生部１１、２１に対して、音声切替指示を発令する。

図６は第３の実施形態の構成を表す。第３の実施形態の構成は、音声切替装置１００において、停止要求受信部１０１を、音声切替装置２００において、停止要求受信部２０１を、それぞれ有する。その他は第１の実施形態の構成と同じである。第３の実施形態の構成は、通話要求受信部１９、２９、通話要求ボタン１７、２７を有する構成でも、有さない構成でも構わない。また、第３の実施形態の構成は、音声レベル判定部１６、２６を有する構成でも、有さない構成でも構わない。なお、図１、図４と同様、図６の実線は、各部の電気的な結合関係を示している。

図７は第２の実施形態の音声切替装置１００の動作を表すシーケンスチャートである。Ｓ４１〜Ｓ４３−３は第１の実施形態におけるＳ１〜Ｓ３−３と同じである。第２の実施形態においては、セッションの確立後、再生部１１、再生部２１が同じ動画コンテンツを再生している。この再生の最中に、音声切替装置１００の停止要求受信部１０１に、音声切替装置１００のユーザによる、画像停止要求信号の入力が発生する（Ｓ４４）。停止要求受信部１０１はこの画像停止要求信号を再生制御通信部１２に送信する。

再生制御通信部１２は、再生部１１に、再生中の画像を一時停止させる。また、この画像停止要求信号は、再生制御通信部１２を介してサーバ３００の再生制御通信部３４に送信される（Ｓ４５）。再生制御通信部３４は、画像停止要求信号を受信する（Ｓ４６）。再生制御通信部３４から画像停止要求信号を受信して、音声切替装置１００が再生画像を一時停止状態にあることを検出した再生状態管理部３３は、セッション管理部３５にこれを通知する。

セッション管理部３５は、Ｓ４１で入力された装置番号に対応するＳＩＰ ＵＲＩを確認して音声切替装置２００を特定し、再生状態管理部３３に通知する。再生状態管理部３３は再生制御通信部３４に、音声切替装置２００の再生制御通信部２２に向けて、画像停止要求信号を送信させる。再生制御通信部３４は、音声切替装置２００の再生制御通信部２２に画像停止要求信号を送信する（Ｓ４７）。この信号を受けた再生制御通信部２２は、再生部２１に動画の再生を一時停止させる（Ｓ４８）。画像停止通話信号を受信した音声切替通信部２５は、この画像停止通話信号を音声切替制御部２４に送信する。音声切替制御部２４は、一時停止後、再生部２１に、動画音声の音量を６０ｄＢ以下に下げさせて再生を再開させる。再生部２１は、スピーカ２０２の出力を調整することにより、動画音声の音量を６０ｄＢ以下に下げて、一時停止後、再生を再開する（Ｓ４９）。なお、動画音声の音量は必ずしも６０ｄＢ以下である必要はない。

この実施形態で送信される画像停止要求信号は、画像を一時停止した後、所定の時間を経過した後に自動的に停止を解除され、一時停止が解除された後は、動画音声の音量が低下された状態での、通話が可能な状態となる。

なお、本実施形態では、音声切替制御部２４は、一時停止後、動画音声の音量を低下させて、再生部２１に動画を再生させているが、音声切替制御部２４は、一時停止後、通話部２３に、通話音声を一定以上の音量に増大させてもよい。

なお、この実施形態では、画像停止要求信号により、画像を一時停止した後、動画音声の音量が低下された状態で、動画を再開する例について説明したが、必ずしも動画が再開される必要はない。画像停止要求信号により、再生部２１が動画の再生を一時停止した後、動画を静止画像として、音声切替制御部２４が、通話部２３に通話音声の音量を増大させる構成でもよい。

なお、本実施形態は、音声切替装置１００が画像停止要求信号を送信する場合について説明したものだが、音声切替装置２００が送信する場合にも、上記と同様の処理の実行により、上記と同様の機能が実現される。

また、本実施形態は、コンテンツとして動画コンテンツをとりあげているが、必ずしも動画に限定されるものではない。コンテンツは、画像を伴わない音声のみの音声コンテンツであってもよい。この場合、音声停止要求信号が、通話優先要求信号となる。なお、画像停止要求信号と音声停止要求信号は総称して、再生停止信号と呼ばれる。

本実施形態によれば、画像停止要求信号である通話優先要求信号を受けた場合、再生中の動画音声の音量を低下させることにより、通話と動画視聴の両方を同時に行うことができる。
（第４の実施形態）
第２の実施形態では、音量レベル判定部１６、２６は、自身の通話部１３、２３が受けた通話音声の音量レベルが、閾値以下である場合、ユーザに対してエラーメッセージを出すよう、設定することができる。同じコンテンツを同時再生するグループの、すべての音声切替装置において、同一の閾値が設定されている場合は、このエラーメッセージによって、ユーザは自らの発する通話音声の音量が不足していることを知ることができる。したがって、それぞれの音声レベル判定部１６、２６に、独立にエラーメッセージ表示機能を設定することで、ユーザへのサポートが可能となる。

しかし、音量の閾値は、音声切替装置１００と音声切替装置２００とで、それぞれが置かれた環境により異なることがある。例えば、音声切替装置１００における閾値が、２００における閾値より小さい場合、ユーザの発する通話音声が１００の閾値より大きければ、音声切替装置２００の閾値を下回っていても、音声切替装置１００からエラーメッセージが発せられることはない。この場合、音声切替装置２００の、音声切替制御部２４は、音声切替指を発令しない。それぞれ異なる閾値が設定された音声切替装置のグループに対して、ユーザのサポートを可能とするには、通話音声を受信した音声切替装置から、通話音声を発信した音声切替装置に、エラーメッセージを発信し、ユーザにより大きな声で話すことを要請する必要がある。

第４の実施形態は、第２の実施形態において、それぞれの音声切替装置の閾値が異なる場合でも、より大きな音量の音声信号を送信することを、ユーザに要請する表示を行う実施形態である。

図８は第４の実施形態の構成を示す。第４の実施形態の構成は、図４で示した実施形態２の構成に加えて、助言表示部１８、２８、助言配信部３７を有する。第２の実施形態において設定された閾値を越えない音量の音声信号を音声レベル判定部２６が検知した場合、通話部２３は、助言表示部２８に対し助言表示要求を指示する。助言表示部２８は助言表示を要求する助言要求信号を助言配信部３７に向けて発信する。

図９は、助言要求信号の伝播経路を示す。音声切替装置２００の音声レベル判定部２６は、通話部２３が受けた通話音声を取得し（Ａ）、取得した通話音声の音量が、閾値より大きいか否かを判定する。音声レベル判定部２６は、判定の結果を通話部２３に通知する（Ｂ）。通話音声の音量が閾値以下であるという判定の場合、通話部２３は助言表示部２８に助言要求信号の発信を指示する（Ｃ）。助言表示部２８は、サーバ３００の助言配信部３７に助言の配信を要求する助言要求信号を発信する（Ｄ）。助言配信部３７は、助言要求信号を受信し、送信元が音声切替装置２００であることを認識すると、セッション管理部３５に、音声切替装置２００とセッション中のＳＩＰ ＵＲＩを問い合わせ（Ｅ）、音声切替装置１００のＳＩＰ ＵＲＩを取得する（Ｆ）。助言配信部３７は、図示しないメモリから助言のデータを取得し、音声切替装置１００の助言表示部１８に助言のデータを送信する（Ｇ）。助言表示部１８は助言データを受信し、画面４０にこれを表示する（Ｈ）。

助言の表示は、図１１（ａ）のような所定の図形の点滅する形態の指示マーク４１であってもよいし、図１１（ｂ）のような「もっと大きな声で話してください」等のメッセージで表された指示マーク４１であってもよい。また、助言の表示は、図１１（ｃ）のように、メッセージを画面４０に走引させることによって行ってもよい。

図１０は、第４の実施形態の音声切替装置の動作を表すシーケンスチャートである。Ｓ２７までのステップは、第２の実施形態と同じである。音声レベル判定部２６が通話部２３から取得した通話音声の音量が閾値以下と判定（Ｓ２７：ＮＯ）した場合、この判定を通知された通話部２３は、助言表示部２８に助言配信を要求するよう指示する。助言表示部２８は、サーバ３００の助言配信部３７に助言要求信号を送信する（Ｓ３２）。

サーバ３００の助言配信部３７は、この助言要求信号を受信する（Ｓ３３）。サーバ３００は、助言データを音声切替装置１００の助言表示部１８に送信する（Ｓ３４）。助言表示部１８は音声切替装置１００の画面４０に、指示マーク４１で表される助言を表示する（Ｓ３５）。

なお画面４０が、タッチパネルで構成されている場合、指示マーク４１は、メッセージ表示の機能の他に、別の機能を持つことも可能である。例えば、大きな音量を求められた音声切替装置１００のユーザが、指で指示マーク４１に触れることにより、マイクロフォン１０４の感度が段階的に増大する、という方式が実現できる。この方式は、例えば、以下のような構成である。タッチパネルの指示マーク４１にユーザの指が触れることにより、タッチパネルを構成するマトリクススイッチの指示マーク４１の部分がＯＮ状態となり、マイクロスイッチに接続したマイクロフォン１０４の感度調整部の回路に信号が入力される。この信号によってマイクロフォン１０４の感度の大小が調整される。タッチパネルの方式は、マトリクススイッチ以外の方式でも構わない。マイクロフォン２０４は、マイクロフォン１０４と同様に感度を調整することができる。

なお、必要に応じて、下限閾値＜音量＜上限閾値（第２の実施形態で設定した閾値）の範囲の音量を音声レベル判定部２６が検出した場合に、通話部２３は、助言表示部２８に対して助言表示要求を指示するという、下限閾値の設定が可能である。このような下限閾値を設定することによって、ノイズレベルの音量を取り込んで助言表示が頻出する事態を避けることができる。下限閾値としては、一例として２０ｄＢ（ささやき声レベル）程度の音量を設定することができる。

なお、上記は、音声切替装置１００の音声信号を受けた音声切替装置２００が助言配信を要求する場合について説明したものだが、音声切替装置１００が助言配信を要求する場合にも、上記と同様の処理の実行により、上記と同様の機能が実現される。

本実施形態によれば、助言表示により、通話要求側が確実に通話優先要求信号を送信することができ、通話優先要求信号を受けた側が再生中の動画音声の音量を低下させることにより、通話と動画視聴の両方を同時に行うことができる。
（第５の実施形態）
第２の実施形態は、着信した通話音声の音量が一定の閾値を上回っているか否かで、通話部１３、２３が、音声切替制御部１４、２４に、音声切替指示の発令をさせるか否かを判断する。したがって、音声切替装置１００、２００のユーザは一定の音量以上の音声信号に変換し得る通話音声を発声する必要があり、このことを知らないユーザは、第４の実施形態のような助言配信部３７からの信号を受けてはじめて通話が可能となる。

これに対して、第５の実施形態は、通話音声の音量に閾値を設定せず、通話音声の音量に対して、一定の比率で動画の音量を下げる実施形態である。第５の実施形態では、音声レベル判定部２６が、通話音声の音量と所定の比率から算出される設定音量を音声切替制御部２４に通知し、音声切替制御部２４は、再生部２１にこの設定音量以下になるように、動画音量を下げさせる。音声レベル判定部１６、２６と音声切替制御部１４、２４の機能が上述するように異なる他は、第５の実施形態の構成は、図４に示した第２の実施形態の構成と同じである。

図１２は第５の実施形態の音声切替装置の動作を表すシーケンスチャートである。Ｓ６１〜Ｓ６３−３は第１の実施形態におけるＳ１〜Ｓ３−３と同じである。音声切替装置１００の通話部１３が、ユーザが発声した通話音声を受信する（Ｓ６４）。通話部１３は、マイクロフォン１０４により通話音声を音声信号に変換して、音声切替装置２００の通話部２３に送信する（Ｓ６５）。音声切替装置２００の通話部２３はこの音声信号を受信する（Ｓ６６）。通話部２３は、再生制御通信部２２が送信する再生信号の有無によって、同時に再生しているコンテンツが有るか否かを判断する（Ｓ６７）。通話部２３が、有ると判断した場合（Ｓ６７：ＹＥＳ）、通話部２３は、音声レベル判定部２６に音声信号をスピーカ２０３により変換した通話音声を出力する。音声レベル判定部２６は、通話部２３から取得した通話音声の音量に、あらかじめ定めた比率を乗算することによって、設定すべき動画音声の音量（設定音量）を決定（Ｓ６８）し、通話部２３に通知する。一例として、比率を１に設定した場合（音声信号の音量＝動画音声の音量）、動画音声の設定音量は音声信号の音量が５０ｄＢの場合、これと等しい５０ｄＢとなる。

通話部２３は、音声切替制御部２４に設定音量を通知する。音声切替制御部２４は、再生部２１に、動画音声の音量を、Ｓ６９で決定した設定音量に設定させる。再生部２１は、スピーカ２０３の出力を調整し、動画音声の音量を設定音量に設定する（Ｓ６９）。

本実施形態によれば、通話音声の音量に制限されることなく、通話要求側が確実に通話優先要求信号を送信することができ、通話優先要求信号を受けた側が再生中の動画音声の音量を低下させることにより、通話と動画視聴の両方を同時に行うことができる。

なお、上記は、音声切替装置１００が音声信号を送信する場合について説明したものだが、音声切替装置２００が音声信号を送信する場合にも、上記と同様の処理の実行により、上記と同様の機能が実現される。

本実施形態によれば、通話音声の音量に制限されることなく、通話要求側が確実に通話優先要求信号を送信することができ、通話優先要求信号を受けた側が再生中の動画音声の音量を低下させることにより、通話と動画視聴の両方を同時に行うことができる。
（第６の実施形態）
図１３は、第６の実施形態の構成を表す。第６の実施形態は、音声付きの記録データを再生する再生部１１と、通話機能を有する他の端末装置との通話を行う通話部１３この再生中にこの音声付き記録データを受信して再生している、通話機能を有する、音声切替装置２００から通話優先要求信号を受信すると、前記再生部１１にこの再生の音量を低下させる音声切替制御部１４と、音声切替装置２００との通話を行う通話部１３と、を備える音声切替装置１００である。

なお、音声切替装置２００は、複数であっても構わない。

本実施形態によれば、通話優先要求信号を受けた場合、再生中の動画音声の音量を低下させることにより、通話と動画視聴の両方を同時に行うことができる。

１０ コンテンツ受信部
１１ 再生部
１２ 再生制御通信部
１３ 通話部
１４ 音声切替制御部
１５ 音声切替通信部
１６ 音声レベル判定部
１７ 通話要求ボタン
１８ 助言表示部
１９ 通話要求受信部
２０ コンテンツ受信部
２１ 再生部
２２ 再生制御通信部
２３ 通話部
２４ 音声切替制御部
２５ 音声切替通信部
２６ 音声レベル判定部
２７ 通話要求ボタン
２８ 助言表示部
２９ 通話要求受信部
２００ 音声切替装置
３１ 記憶部
３２ 配信部
３３ 再生状態管理部
３４ 再生制御通信部
３５ セッション管理部
３６ ＳＩＰ通信部
３７ 助言配信部
４０ 画面
４１ 指示マーク
１００ 音声切替装置
１０１ 停止要求受信部
１０２ スピーカ
１０３ スピーカ
１０４ マイクロフォン
２００ 音声切替装置
２０１ 停止要求受信部
２０２ スピーカ
２０３ スピーカ
２０４ マイクロフォン
３００ サーバ

Claims (16)

1. 音声及び動画付きの記録データを再生する再生手段と、
   通話機能を有する他の端末装置との通話を行う通話手段と、
   前記再生中に、前記音声及び動画付き記録データを受信して再生している、前記他の端末装置から通話優先要求信号を受信すると、前記再生手段に前記再生の音量を低下させるか、または前記通話手段に通話音声を増大させる音声切替制御手段と、
   を備え、
   前記音声切替制御手段は、前記他の端末からの前記動画の再生を一時停止する画像停止要求信号を前記通話優先要求信号として受信した場合に、前記再生手段に前記再生の音量を低下させるか、または前記通話手段に通話音声を増大させる、音声切替装置。
2. 前記音声切替制御手段は、前記他の端末装置から発信された通話の音声を電気信号に変換した音声信号を、前記通話優先要求信号として受けた場合に、前記再生手段に再生中の前記音声及び動画付き記録データの音量を低下させるか、または、前記通話手段に前記通話音声を増大させる、請求項１の音声切替装置。
3. 前記音声切替制御手段は、前記音声信号を音声に変換した音量が、あらかじめ設定した閾値より大きい場合は、前記再生手段に再生中の前記記録データの音声の音量を低下させるか、または、前記通話手段に前記通話音声を増大させ、前記閾値以下の大きさである場合は、前記他の端末装置に対して警告を発する請求項２の音声切替装置。
4. 前記音声切替制御手段は、前記記録データの再生される音量の、前記通話の音声の音量に対する比率が一定値となるよう、前記再生手段に、再生中の前記記録データの音量を低下させるかまたは、前記通話手段に前記通話音声を増大させる請求項２の音声切替装置。
5. 前記音声切替制御手段は、前記他の端末装置から発信された前記記録データの再生停止信号を、前記通話優先要求信号として受けた場合に、前記通話手段に前記通話音声を増大させる請求項１の音声切替装置。
6. 前記音声切替制御手段は、前記画像停止要求信号による前記動画の一時停止の後、所定の時間を経過した後に、前記再生手段に前記再生の音量を低下させるか、または前記通話手段に通話音声を増大させて前記動画の前記一時停止を解除するように前記再生手段及び前記通話手段を制御する請求項１から５のいずれか一項の音声切替装置。
7. 前記音声切替制御手段は、前記動画の一時停止の後、前記動画を一時停止した静止画像として、前記通話音声を増大させるように前記再生手段及び前記通話手段を制御する請求項１から６のいずれか一項の音声切替装置。
8. 音声及び動画付きの記録データを再生する再生処理と、
   通話機能を有する他の端末装置との通話を行う通話処理と、
   前記再生中に、前記音声及び動画付き記録データを受信して再生している、前記他の端末装置から通話優先要求信号を受信すると、前記再生の音量を低下させるか、または通話音声を増大させ、かつ、前記他の端末からの前記動画の再生を一時停止する画像停止要求信号を前記通話優先要求信号として受信した場合に、前記再生の音量を低下させるか、または通話音声を増大させる音声切替制御処理、
   とをコンピュータに実行させる音声切替プログラム。
9. 前記他の端末装置から発信された通話の音声を電気信号に変換した音声信号を、前記通話優先要求信号として受けた場合に、再生中の前記音声及び動画付き記録データの音量を低下させるか、または前記通話音声を増大させる、前記音声切替制御処理を前記コンピュータに実行させる請求項８の音声切替プログラム。
10. 前記音声信号を音声に変換した音量が、あらかじめ設定した閾値より大きい場合は、再生中の前記記録データの音声の音量を低下させるか、または前記通話音声を増大させ、前記閾値以下の大きさである場合は、前記他の端末装置に対して警告を発する前記音声切替制御処理を前記コンピュータに実行させる請求項９の音声切替プログラム。
11. 前記記録データの再生される音量の、前記通話の音声の音量に対する比率が一定値となるよう、再生中の前記記録データの音量を低下させるか、または前記通話音声を増大させる前記音声切替制御処理を前記コンピュータに実行させる請求項９の音声切替プログラム。
12. 前記他の端末装置から発信された前記記録データの再生停止信号を、前記通話優先要求信号として受けた場合に、前記通話処理に関する前記通話音声を増大させる請求項８の音声切替プログラム。
13. 音声及び動画付きの記録データを再生し、
    通話機能を有する他の端末装置との通話を行い、
    前記再生中に、前記音声及び動画付き記録データを受信して再生している、前記他の端末装置から通話優先要求信号を受信すると、前記再生の音量を低下させるか、または通話音声を増大させ、かつ、前記他の端末からの前記動画の再生を一時停止する画像停止要求信号を前記通話優先要求信号として受信した場合に、前記再生の音量を低下させるか、または通話音声を増大させる、音声切替方法。
14. 前記他の端末装置から発信された通話の音声を電気信号に変換した音声信号を、前記通話優先要求信号として受けた場合に、再生中の前記音声及び動画付き記録データの音量を低下させるか、または前記通話音声を増大させる、請求項１３の音声切替方法。
15. 前記音声信号を音声に変換した音量が、あらかじめ設定した閾値より大きい場合は、再生中の前記記録データの音声の音量を低下させるか、または前記通話音声を増大させ、前記閾値以下の大きさである場合は、前記他の端末装置に対して警告を発する請求項１４の音声切替方法。
16. サーバ装置と、
    前記サーバ装置から、音声及び動画付き記録データを取得し、これを再生する再生手段と、
    通話機能を有する他の端末装置との通話を行う通話手段と、
    前記再生中に、前記サーバ装置から前記音声及び動画付き記録データを受信して再生している、
    前記他の端末装置から通話優先要求信号を受信すると、前記再生手段に前記再生の音量を低下させるか、または前記通話手段に通話音声を増大させる音声切替制御手段と、
    を有し、
    前記音声切替制御手段は、前記他の端末からの前記動画の再生を一時停止する画像停止要求信号を前記通話優先要求信号として受信した場合に、前記再生手段に前記再生の音量を低下させるか、または前記通話手段に通話音声を増大させる、音声切替システム。

Images