JP5305049B2 - 伝送装置、伝送システム、プログラムおよび情報記憶媒体 - Google Patents

Description

本発明は、音声データ等を伝送する伝送装置、伝送システム、プログラムおよび情報記憶媒体に関する。

特開２００８−９２５３号公報では、画像をキャプチャして画像データを外部の装置に送信する画像表示装置が記載されている。また、特開２００６−１９１４１２号公報では、音声をキャプチャすることが記載されている。これらの手法を組み合わせることにより、音声をキャプチャして音声データを外部の再生装置に伝送する手法が考えられる。

特開２００８−９２５３号公報 特開２００６−１９１４１２号公報

しかし、音声をキャプチャして音声データを生成する手法の場合、ユーザの一時停止操作や繰り返しの音声再生等によって有音状態と無音状態が切り替わる際に音声のキャプチャにおいて時間的誤差が生じ、当該時間的誤差が蓄積することにより、再生装置において音声データが不足し、再生途中で音声が途切れたりすることにより、音声が適切に再生されない事態が発生し得る。

本発明の目的は、音声をキャプチャして音声データを生成、伝送する場合に伝送先の再生装置が音声を適切に再生することが可能な伝送装置、伝送システム、プログラムおよび情報記憶媒体を提供することにある。

上記課題を解決するため、本発明に係る伝送装置は、再生用音声を生成する再生用音声生成部と、連続音声を生成する連続音声生成部と、前記再生用音声と、前記連続音声とを合成して合成音声を生成する合成音声生成部と、前記合成音声をキャプチャしてキャプチャ音声データを生成するキャプチャ音声データ生成部と、前記キャプチャ音声データを再生装置へ向け伝送する伝送部と、を含むことを特徴とする。

また、本発明に係る伝送システムは、前記伝送装置と、前記再生装置とを含むことを特徴とする。

また、本発明に係るプログラムは、伝送部を制御するコンピュータを、再生用音声を生成する再生用音声生成部と、連続音声を生成する連続音声生成部と、前記再生用音声と、前記連続音声とを合成して合成音声を生成する合成音声生成部と、前記合成音声をキャプチャしてキャプチャ音声データを生成するキャプチャ音声データ生成部と、前記キャプチャ音声データを再生装置へ向け前記伝送部に伝送させる伝送制御部として機能させることを特徴とする。

また、本発明に係る情報記憶媒体は、コンピュータにより読み取り可能なプログラムを記憶した情報記憶媒体であって、上記プログラムを記憶したことを特徴とする。

本発明によれば、伝送装置等は、連続音声を生成して当該連続音声を含む合成音声をキャプチャしたキャプチャ音声データを伝送することにより、伝送先の再生装置は、再生用音声の内容にかかわらず、連続音声も再生することができる。これにより、再生装置では、音声データが不足することがないため、再生装置は、音声を適切に再生することができる。

また、前記連続音声は、連続的に出力される音声であって、かつ、振幅が所定値以下の音声であってもよい。

これによれば、伝送装置は、再生用音声への影響が少ない状態で再生装置に音声を再生させることができる。

また、前記連続音声は、連続的に出力される音声であって、かつ、周波数が可聴域外の音声であってもよい。

これによれば、伝送装置は、再生用音声への影響がない状態で再生装置に音声を再生させることができる。

また、前記再生用音声と同期して表示される再生用画像をキャプチャしてキャプチャ画像データを生成するキャプチャ画像データ生成部を含み、前記伝送部は、前記キャプチャ画像データを前記再生装置へ向け伝送してもよい。

これによれば、伝送装置は、再生装置に再生用画像と再生用音声を適切に同期させて再生させることができる。

また、前記再生装置は、キャプチャ音声データに基づき、前記合成音声を出力する再生側音声出力部を含んでもよい。

これによれば、伝送装置は、再生装置と適切に同期して合成音声を出力することができる。

第１の実施例における伝送システムの外観図である。 従来の合成音声の一例を示す図である。 従来のプロジェクタでの音声データの蓄積状況の一例を示す図である。 第１の実施例の合成音声の一例を示す図である。 第１の実施例のプロジェクタでの音声データの蓄積状況の一例を示す図である。 第１の実施例における伝送システムの機能ブロック図である。 第１の実施例におけるＰＣ側の処理手順を示すフローチャートの一例を示す図である。 第１の実施例におけるプロジェクタ側の処理手順を示すフローチャートの一例を示す図である。 第２の実施例における伝送システムの機能ブロック図である。 第２の実施例におけるＰＣ側の処理手順を示すフローチャートの一例を示す図である。 第２の実施例におけるプロジェクタ側の処理手順を示すフローチャートの一例を示す図である。

以下、本発明をＰＣ(Personal Computer)とプロジェクタを含む伝送システムに適用し
た実施例について、図面を参照しつつ説明する。なお、以下に示す実施例は、特許請求の範囲に記載された発明の内容を何ら限定するものではない。また、以下の実施例に示す構成のすべてが、特許請求の範囲に記載された発明の解決手段として必須であるとは限らない。

（第１の実施例）
図１は、第１の実施例における伝送システムの外観図である。伝送システムは、伝送装置の一種であるＰＣ１００と、ＰＣ１００からの音声データに基づいて音声を再生する再生装置の一種であるプロジェクタ２００を含んで構成されている。また、ＰＣ１００とプロジェクタ２００とはＵＳＢケーブル３００を介して接続されている。

図２は、従来の合成音声の一例を示す図である。また、図３は、従来のプロジェクタでの音声データの蓄積状況の一例を示す図である。

例えば、従来の手法でアプリケーションプログラムＡ、アプリケーションプログラムＢ、アプリケーションプログラムＣが、それぞれ図２の斜線で示す音声を生成した場合、合成後の音声には、音声のない部分（斜線以外の部分）が生じてしまう。

このような有音部分と無音部分がある場合、音声処理時の誤差が発生しやすい。当該誤差により、プロジェクタが必要としている量のデータをキャプチャできないケースが生じ
てしまう。プロジェクタは、このようなケースが発生する度に不足分のデータをバッファから読み出して補う。このバッファからの読み出しが繰り返されると、当該誤差がバッファのデータ残量の目減りという形で蓄積されていき、プロジェクタが必要とするだけのデータがバッファから読み出しできなくなるため、プロジェクタが音声を再生すると音声が途切れてしまう場合がある。

図４は、第１の実施例の合成音声の一例を示す図である。また、図５は、第１の実施例のプロジェクタでの音声データの蓄積状況の一例を示す図である。

本実施例のＰＣ１００は、図４に示すように、連続的に出力される音声であって、かつ、周波数が可聴域外の音声である連続音声を生成している。これにより、合成後の音声には、無音部分が生じることがないため、誤差も生じず、プロジェクタ２００のバッファの領域に音声データではない部分が生じず、プロジェクタ２００が音声を再生しても音声が途切れることなく、適切に音声が再生される。

次に、このような機能を有する伝送システムの機能ブロックについて説明する。図６は、第１の実施例における伝送システムの機能ブロック図である。

ＰＣ１００は、ユーザによる一時停止等の操作指示情報を入力する操作部１１０と、伝送側処理部１２０と、伝送側音声処理部１４０と、伝送側音声出力部１５０と、キャプチャ音声データ等をプロジェクタ２００へ向け伝送する伝送部１９０を含んで構成されている。

また、伝送側処理部１２０は、再生用音声を生成する再生用音声生成部１２２と、連続音声を生成する連続音声生成部１２３と、再生用音声と、連続音声とを合成して合成音声を生成する合成音声生成部１２４と、合成音声をキャプチャしてキャプチャ音声データを生成するキャプチャ音声データ生成部１２５を含んで構成されている。

また、プロジェクタ２００は、キャプチャ音声データ等を受信する受信部２９０と、音声生成部２２２を有する再生側処理部２２０と、再生側音声処理部２４０と、再生側音声出力部２５０を含んで構成されている。

なお、これらの各部の機能をＰＣ１００およびプロジェクタ２００に実装するためのハードウェアとしては、例えば、以下のものが採用されてもよい。例えば、伝送側処理部１２０、再生側処理部２２０としてはＣＰＵ等、伝送側音声処理部１４０、再生側音声処理部２４０としては音声処理回路等、伝送側音声出力部１５０、再生側音声出力部２５０としてはスピーカ等、伝送部１９０、受信部２９０としてはＣＰＵ、ＵＳＢポート等が採用されてもよい。

より具体的には、例えば、ＣＰＵが、再生用音声生成部１２２としてマルチディア再生プログラム等を実行し、連続音声生成部１２３として連続音声再生プログラム等を実行し、合成音声生成部１２４としてオーディオ再生ＡＰＩ(Application Program Interface)およびＯＳ(Operating System)を動作させ、キャプチャ音声データ生成部１２５としてオーディオドライバ、仮想オーディオデバイスおよびバッファを用いてもよい。また、伝送部１９０または受信部２９０の機能を実装する場合、ＣＰＵが、ネットワーク通信プログラム、ネットワーク通信ＡＰＩ、ＯＳ、ネットワークドライバ、ＵＳＢ通信モジュール等を用いてもよい。また、音声生成部２２２の機能を実装する場合、ＣＰＵが、バッファ、オーディオ再生プログラム、オーディオ再生ＡＰＩ、ＯＳ、オーディオドライバ等を用いてもよい。

また、ＰＣ１００は、これらの各部の機能を、情報記憶媒体４００からプログラムを読み取って実装してもよい。このような情報記憶媒体４００としては、例えば、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、ＲＯＭ、ＲＡＭ、ＨＤＤ等を適用できる。

次に、これらの各部を用いたキャプチャ音声データの生成、伝送、音声の再生等の処理手順について説明する。図７は、第１の実施例におけるＰＣ側の処理手順を示すフローチャートの一例を示す図である。

再生用音声生成部１２２は、操作部１１０からの情報に基づき、再生の一時停止指示があるかどうかを判定する（ステップＳ１）。再生の一時停止指示がない場合、再生用音声生成部１２２は、再生用音声を生成する（ステップＳ２）。なお、再生用音声としては、例えば、マルチメディア再生プログラムがマルチメディアコンテンツ（例えば、ＤＶＤの映画等）を読み込んだ場合に再生する音声、ＣＤ再生プログラムが音声ＣＤを読み込んだ場合に再生する音声、ブラウザが音声再生機能付きのＷＥＢページを読み込んだ場合に再生する音声等が該当する。

連続音声生成部１２３は、一時停止指示の有無にかかわらず、連続的に音声を生成する（ステップＳ３）。なお、この音声（連続音声）は、連続的に出力される音声であって、かつ、周波数が可聴域（一般的には２０Ｈｚ〜２００００Ｈｚ）外の音声である。

合成音声生成部１２４は、連続的に再生用音声と連続音声を合成して合成音声を生成する（ステップＳ４）。なお、連続音声は常に存在するが、再生用音声は存在しない場合もあるため、再生用音声が存在しない場合は、合成音声は連続音声のみとなる。

キャプチャ音声データ生成部１２５は、合成音声をキャプチャしてキャプチャ音声データを生成する（ステップＳ５）。より具体的には、キャプチャ音声データ生成部１２５は、例えば、プロジェクタ２００の音声再生仕様や伝送方式等に応じて合成音声に対して周波数変換やデータ長の調整等を行ってバッファにデータとして記憶する。

伝送部１９０は、キャプチャ音声データを、ＵＳＢケーブル３００を介してプロジェクタ２００へ向け伝送する（ステップＳ６）。

伝送側処理部１２０は、再生の停止指示や電源オフの指示等によって一連の処理（ステップＳ１〜Ｓ６）を終了すべきかどうかを判定し（ステップＳ７）、終了すべき場合は当該一連の処理を終了し、終了すべきでない場合は当該一連の処理を続行する。

次に、プロジェクタ側の処理手順について説明する。図８は、第１の実施例におけるプロジェクタ側の処理手順を示すフローチャートの一例を示す図である。

受信部２９０は、ＰＣ１００からのキャプチャ音声データを受信する（ステップＰ１）。音声生成部２２２は、キャプチャ音声データを順次バッファリングし、キャプチャ音声データに基づき、音声を生成する（ステップＰ２）。

再生側音声処理部２４０は、当該音声を出力に適した形式に変換し、再生側音声出力部２５０は、変換された音声を出力（再生）する（ステップＰ３）。なお、再生側音声処理部２４０は、動作開始直後は短い時間（例えば、２５０ミリ秒程度）のプリバッファリングを行ってもよい。プロジェクタ２００は、このプリバッファリングにより、伝送されるキャプチャ音声データの量の増減のぶれを吸収することができる。

再生側処理部２２０は、再生の停止指示や電源オフの指示等によって一連の処理（ステ
ップＰ１〜Ｐ３）を終了すべきかどうかを判定し（ステップＰ４）、終了すべき場合は当該一連の処理を終了し、終了すべきでない場合は当該一連の処理を続行する。

以上のように、本実施例によれば、ＰＣ１００は、連続音声を生成して当該連続音声を含む合成音声をキャプチャしたキャプチャ音声データを伝送することにより、伝送先のプロジェクタ２００は、再生用音声の内容にかかわらず、連続音声も再生することができる。これにより、プロジェクタ２００では、音声データが不足することがなく、図５に示すようにバッファに空きが生じないため、プロジェクタ２００は、音声を適切に再生することができる。

また、連続音声は周波数が可聴域外の音声であるため、ユーザが再生用音声を聴く際の妨げとはならず、ユーザは再生用音声を快適に聴くことができる。

（第２の実施例）
第１の実施例では、音声のみのキャプチャ、伝送、再生が行われたが、これらの処理と同期して画像のキャプチャ、伝送、再生が行われてもよい。

図９は、第２の実施例における伝送システムの機能ブロック図である。ＰＣ１０１に含まれる伝送側処理部１２１は、第１の実施例の伝送側処理部１２０の構成に加えて再生用画像生成部１２６と、キャプチャ画像データ生成部１２７を含んで構成されている。また、ＰＣ１０１は、キャプチャ画像データを表示に適した形式に変換する伝送側画像処理部１６０と、変換された画像データに基づき、画像を表示する表示部１７０を含んで構成されている。

また、プロジェクタ２０１は、第１の実施例のプロジェクタ２００の構成に加えて再生側画像処理部２６０と、投写部２７０と、再生側処理部２２１内の画像生成部２２３を含んで構成されている。

なお、再生用画像生成部１２６、画像生成部２２３としてはＣＰＵ等、キャプチャ画像データ生成部１２７、再生側画像処理部２６０としては画像処理回路、ＶＲＡＭ等、投写部２７０としてはランプ、ランプ駆動回路、液晶パネル、レンズ等が採用されてもよい。

また、ＰＣ１０１は、再生用画像生成部１２６等の機能を、情報記憶媒体４０１に記憶されたプログラムを読み取って実装してもよい。

次に、これらの各部を用いたキャプチャ画像データの生成、伝送、画像の再生等の処理手順について説明する。なお、これらの処理と同期してキャプチャ音声データの処理も実行されるが、キャプチャ音声データの処理は第１の実施例と同様であるため、説明を省略する。

図１０は、第２の実施例におけるＰＣ側の処理手順を示すフローチャートの一例を示す図である。再生用画像生成部１２６は、操作部１１０からの情報に基づき、再生の一時停止指示があるかどうかを判定する（ステップＳ１１）。再生の一時停止指示がない場合、再生用画像生成部１２６は、再生用画像を生成する（ステップＳ１２）。なお、再生用画像としては、例えば、マルチメディア再生プログラムがマルチメディアコンテンツ（例えば、ＤＶＤの映画等）を読み込んだ場合に再生する画像、ブラウザが再生する画像等が該当する。

キャプチャ画像データ生成部１２７は、再生用画像をキャプチャしてキャプチャ画像データを生成する（ステップＳ１３）。より具体的には、キャプチャ画像データ生成部１２７は、例えば、プロジェクタ２００の画像再生仕様や伝送方式等に応じて再生用画像に対して周波数変換やデータ長の調整等を行ってバッファにデータとして記憶する。

伝送部１９０は、キャプチャ画像データおよびキャプチャ音声データ生成部１２５によって生成されるキャプチャ音声データをプロジェクタ２０１へ向け伝送する（ステップＳ１４）。

伝送側処理部１２１は、再生の停止指示や電源オフの指示等によって一連の処理（ステップＳ１〜Ｓ６、Ｓ１１〜Ｓ１４）を終了すべきかどうかを判定し（ステップＳ１５）、終了すべき場合は当該一連の処理を終了し、終了すべきでない場合は当該一連の処理を続行する。

次に、プロジェクタ側の処理手順について説明する。図１１は、第２の実施例におけるプロジェクタ側の処理手順を示すフローチャートの一例を示す図である。

受信部２９０は、ＰＣ１０１からのキャプチャ画像データおよびキャプチャ音声データを受信する（ステップＰ１１）。画像生成部２２３は、キャプチャ画像データを順次バッファリングし、キャプチャ画像データに基づき、画像を生成する（ステップＰ１２）。

再生側画像処理部２６０は、当該画像を表示に適した形式に変換し、投写部２７０は、変換された画像を投写（再生）する（ステップＰ１３）。

再生側処理部２２１は、再生の停止指示や電源オフの指示等によって一連の処理（ステップＰ１〜Ｐ３、Ｐ１１〜Ｐ１３）を終了すべきかどうかを判定し（ステップＰ１４）、終了すべき場合は当該一連の処理を終了し、終了すべきでない場合は当該一連の処理を続行する。

以上のように、本実施例によれば、ＰＣ１０１は、プロジェクタ２０１に再生用画像と再生用音声を適切に同期させて再生させることができる。特に、画像と音声が同期している場合、映画の登場人物のセリフが途中で途切れると観察者に気付かれやすいが、本実施例によれば、セリフが途中で途切れることなく、プロジェクタ２０１は、適切に画像と音声を同期させて再生することができる。

（その他の実施例）
なお、本発明の適用は上述した実施例に限定されず、種々の変形が可能である。例えば、伝送側音声処理部１４０および伝送側音声出力部１５０は、プロジェクタ２００、２０１での音声の再生と同期して音声を出力してもよい。これによれば、ＰＣ１００、１０１は、プロジェクタ２００、２０１と適切に同期して音声を出力することができる。

また、伝送側画像処理部１６０および表示部１７０は、プロジェクタ２０１での画像の再生と同期して画像を表示してもよい。これによれば、ＰＣ１０１は、プロジェクタ２０１と適切に同期して画像を表示することができる。

また、連続音声は、周波数が可聴域外の音声には限定されない。例えば、連続音声は、振幅が所定値以下の音声であってもよい。これによれば、出力時の音が小さくなるため、再生用音声をほとんど妨げないで済む。

また、連続音声は、連続音声は、一時停止指示等の有無にかかわらず連続的に生成される音声であれば、振幅が上記所定値を超える音声であってもよい。例えば、連続音声は、ＢＧＭ、自然環境の音（水の流れる音等）等であってもよい。これによれば、再生用音声をほとんど妨げないで済む。

また、伝送部１９０は、キャプチャ音声データやキャプチャ画像データを同時に複数のプロジェクタ２００、２０１に伝送してもよい。これによれば、同時に複数のプロジェクタ２００、２０１が音声や画像を適切に同期させて再生することができる。

また、ＰＣ１００、１０１とプロジェクタ２００、２０１との間の伝送路はＵＳＢケーブル３００には限定されず、例えば、いわゆるＬＡＮケーブル等であってもよい。また、当該伝送路は、インターネットであってもよい（すなわち、ＰＣ１００、１０１とプロジェクタ２００、２０１が離れて配置されてもよい。）。また、当該伝送路は無線の伝送路であってもよい。

また、伝送装置は、ＰＣ１００、１０１には限定されず、音声キャプチャ機能および音声伝送機能を有する種々の装置（例えば、携帯電話、ゲーム装置、セットトップボックス等）であってもよい。また、再生装置は、プロジェクタ２００、２０１には限定されず、音声受信機能および音声再生機能を有する種々の装置（例えば、フォトビューワ、テレビ等）であってもよい。

また、プロジェクタ２００、２０１は、液晶プロジェクタには限定されず、例えば、ＤＭＤ(Digital Micromirror Device)を用いたプロジェクタ等であってもよい。なお、ＤＭＤは米国テキサス・インスツルメンツ社の商標である。

１００、１０１ ＰＣ（伝送装置）、１１０ 操作部、１２０、１２１ 伝送側処理部、１２２ 再生用音声生成部、１２３ 連続音声生成部、１２４ 合成音声生成部、１２５ キャプチャ音声データ生成部、１２６ 再生用画像生成部、１２７ キャプチャ画像データ生成部、１４０ 伝送側音声処理部、１５０ 伝送側音声出力部、１６０ 伝送側画像処理部、１７０ 表示部、１９０ 伝送部、２００、２０１ プロジェクタ、２２０、２２１ 再生側処理部、２２２ 音声生成部、２２３ 画像生成部、２４０ 再生側音声処理部、２５０ 再生側音声出力部、２６０ 再生側画像処理部、２７０ 投写部、３００ ＵＳＢケーブル、４００、４０１ 情報記憶媒体

Claims (6)

1. 再生の一時停止指示を示す一時停止指示情報が入力される操作部と、
   前記一時停止指示情報が入力されていない状態で再生用音声を生成するとともに、前記一時停止指示情報が入力された状態で前記再生用音声の生成を一時停止する再生用音声生成部と、
   前記一時停止指示情報の入力有無にかかわらず、連続的に出力される音声であって、かつ、振幅が所定値以下の音声である連続音声を生成する連続音声生成部と、
   前記一時停止指示情報が入力されていない状態で、前記再生用音声と、前記連続音声とを合成して合成音声を生成して出力し、前記一時停止指示情報が入力された状態で、前記連続音声を前記合成音声として出力する合成音声生成部と、
   前記一時停止指示情報の入力有無にかかわらず、前記合成音声をキャプチャしてキャプチャ音声データを生成するキャプチャ音声データ生成部と、
   前記一時停止指示情報の入力有無にかかわらず、前記キャプチャ音声データを再生装置へ向け伝送する伝送部と、
   を含む、
   伝送装置。
2. 請求項１に記載の伝送装置において、
   前記再生用音声と同期して表示される再生用画像をキャプチャしてキャプチャ画像データを生成するキャプチャ画像データ生成部を含み、
   前記伝送部は、前記キャプチャ画像データを前記再生装置へ向け伝送する、
   伝送装置。
3. 請求項１または請求項２に記載の前記伝送装置と、前記再生装置とを含む、
   伝送システム。
4. 請求項３に記載の伝送システムにおいて、
   前記再生装置は、前記キャプチャ音声データに基づき、前記合成音声を出力する再生側音声出力部を含む、
   伝送システム。
5. 再生の一時停止指示を示す一時停止指示情報が入力される操作部を含み、伝送部を制御するコンピュータを、
   前記一時停止指示情報が入力されていない状態で再生用音声を生成するとともに、前記一時停止指示情報が入力された状態で前記再生用音声の生成を一時停止する再生用音声生成部と、
   前記一時停止指示情報の入力有無にかかわらず、連続的に出力される音声であって、かつ、振幅が所定値以下の音声である連続音声を生成する連続音声生成部と、
   前記一時停止指示情報が入力されていない状態で、前記再生用音声と、前記連続音声とを合成して合成音声を生成して出力し、前記一時停止指示情報が入力された状態で、前記連続音声を前記合成音声として出力する合成音声生成部と、
   前記一時停止指示情報の入力有無にかかわらず、前記合成音声をキャプチャしてキャプチャ音声データを生成するキャプチャ音声データ生成部と、
   前記一時停止指示情報の入力有無にかかわらず、前記キャプチャ音声データを再生装置へ向け前記伝送部に伝送させる伝送制御部として機能させる、
   プログラム。
6. 再生の一時停止指示を示す一時停止指示情報が入力される操作部を含み、伝送部を制御するコンピュータにより読み取り可能なプログラムを記憶した情報記憶媒体であって、
   請求項５に記載のプログラムを記憶した、
   情報記憶媒体。

Images