JP2016082422A - 音響信号処理装置 - Google Patents

Abstract

【課題】複数の音響信号を容易に選択して混合することが可能な音響信号処理装置を提供する。
【解決手段】複数の端末装置１により収録された音響信号が位置情報と対応付けられ、記録データとしてデータベース２に記憶される。同期混合装置３は、データベース２から記録データを取得し、各記録データの位置情報に基づいて収録マークを地図画像上に表示する。ユーザが抽出条件を指定すると、抽出条件を満たす記録データが抽出される。それにより、同期混合装置３は、地図画像上に表示される収録マークを更新する。ユーザが地図画像上の収録マークを選択すると、同期混合装置３は、該当する記録データ中の音響信号の同期混合処理を行う。
【選択図】図１

Description

本発明は、複数の位置で収録された音響信号を合成する音響信号処理装置に関する。

異なる複数の位置で収録された音声信号を合成する音声合成装置が知られている（例えば、特許文献１参照）。特許文献１に記載された音声合成装置では、記憶装置は、空間内の異なる位置にて収集された音声を示す音声データを記憶する。設定部は、受音点の位置を利用者からの指示に応じて可変に設定する。音声合成部は、複数個の音声データの各々を、当該音声データに対応する収音点の位置と受音点の位置との関係に応じて処理することにより、音声を合成する。

特開２００９−３００５７６号公報

特許文献１に記載された音声合成装置では、記憶装置に多数の音声データが記憶されている場合、多数の音声データから合成対象となる複数の音声データを選択する作業が煩雑になることがある。

本発明の目的は、複数の音響信号を容易に選択して混合することが可能な音響信号処理装置を提供することである。

（１）本発明に係る音響信号処理装置は、音響空間内の複数の位置で収録された音を示す複数の音響信号を、収録位置を示す位置情報と対応付けて取得する取得手段と、取得手段により取得された複数の位置情報に基づいて、取得手段により取得された複数の音響信号から混合対象となる音響信号を選択する選択手段と、選択手段により選択された複数の音響信号を混合する混合手段とを備える。

その音響信号処理装置において、音響空間内の複数の位置で収録された音を示す複数の音響信号が位置情報と対応付けて取得される。それにより、複数の位置情報に基づいて複数の音響信号を容易に選択して混合することが可能となる。

（２）選択手段は、取得手段により取得された複数の位置情報を提示する提示手段と、提示手段により提示された位置情報の選択操作を検出する操作検出手段と、選択操作の検出に基づいて、選択された位置情報に対応する音響信号を選択する音響信号選択手段とを含んでもよい。

このような構成により、ユーザは、提示された複数の位置情報に基づいて、混合対象となる複数の音響信号を容易に選択することができる。

（３）提示手段は、地図画像を表示するとともに、複数の位置情報を地図画像上に表示する表示手段を含み、操作検出手段は、地図画像上での位置情報の選択操作を検出してもよい。

このような構成により、ユーザは、地図画像上に表示された複数の位置情報に基づいて、同一の音響空間内で取得された複数の音響信号を視覚的にかつ容易に選択することができる。

（４）音響信号処理装置は、音響信号の抽出条件を設定する設定手段と、取得手段により取得された複数の音響信号および複数の位置情報のうち抽出条件を満足する音響信号および位置情報を抽出する抽出手段とをさらに備え、提示手段は、抽出手段により抽出された位置情報を提示してもよい。

この場合、抽出条件を満足する音響信号が抽出されるので、抽出条件を適切に設定することにより選択対象となる音響信号および位置情報を絞り込むことができる。

（５）取得手段は、各音響信号の収録時刻を示す時間情報を音響信号に対応付けて取得し、設定手段は、音の収録時刻に関する時間条件を抽出条件として設定し、抽出手段は、時間条件を満足する時間情報に対応する音響信号および位置情報を抽出してもよい。

この場合、選択対象となる音響信号および位置情報を所望の時間帯に取得された音響信号および位置情報に絞り込むことができる。それにより、選択された複数の音響信号の同期および混合が容易になる。

（６）本発明に係る音響信号処理プログラムは、音響空間内の複数の位置で収録された音を示す複数の音響信号を、収録位置を示す位置情報と対応付けて取得する取得ステップと、取得された複数の位置情報に基づいて、取得された複数の音響信号から混合対象となる音響信号を選択する選択ステップと、選択された複数の音響信号を混合する混合ステップとを、コンピュータに実行させる。

その音響信号処理プログラムによれば、音響空間内の複数の位置で収録された音を示す複数の音響信号が位置情報と対応付けて取得される。それにより、複数の位置情報に基づいて複数の音響信号を容易に選択して混合することが可能となる。

本発明によれば、複数の位置情報に基づいて複数の音響信号を容易に選択して混合することが可能となる。

本発明の一実施の形態に係る音響信号処理システムの構成を示すブロック図である。 端末装置の構成を示すブロック図である。 同期混合装置の構成を示すブロック図である。 データベースに記憶される記録データの構成を示す模式図である。 同期混合装置の機能的な構成を示すブロック図である。 同期混合装置のタッチパネルディスプレイに表示される地図画像および収録マークの例を示す図である。 端末装置の動作を示すフローチャートである。 端末装置の動作を示すフローチャートである。

以下、本発明の実施の形態に係る音響信号処理システムについて図面を用いて詳細に説明する。

（１）音響信号処理システム
図１は本発明の一実施の形態に係る音響信号処理システムの構成を示すブロック図である。図１の音響信号処理システム１００は、複数の端末装置１、データベース２および同期混合装置３により構成される。複数の端末装置１は、演奏ホール、野外コンサート会場または収録スタジオ等の音響空間内で発音源Ｓ０から放射された音を収録するために用いられる。発音源Ｓ０は、例えば、１または複数の楽器、歌手等である。音は、例えば楽器の演奏音、歌手の発声音等である。音響空間とは、発音源Ｓ０から放射された音が到達する範囲の空間である。

端末装置１としては、例えば携帯電話機、スマートフォンまたはタブレット端末等の携帯可能な装置を用いることができる。データベース２には、各端末装置１により収録された音を表す音響信号が収録位置を示す位置情報とともに記憶される。端末装置１の詳細については後述する。データベース２は、例えばウェブサーバ等のサーバ装置に構築される。また、同期混合装置３は、データベース２に記憶される複数の音響信号の同期を取ってそれらの音響信号を混合する。同期混合装置３としては、例えばパーソナルコンピュータ、スマートフォン、タブレット端末またはサーバ装置等を用いることができる。同期混合装置３の詳細については後述する。

図２は端末装置１の構成を示すブロック図である。端末装置１は、制御装置１０、記憶装置１１、計時装置１２、収音装置１３、放音装置１４、表示装置１５、入力装置１６、位置センサ１７、撮像装置１８、および通信装置１９を含む。制御装置１０は、例えばＣＰＵ（中央演算処理装置）およびメモリを含む。記憶装置１１は、ハードディスク、光学ディスク、磁気ディスクまたはメモリカード等の記憶媒体を含む。この記憶装置１１には、後述するデータ取得処理プログラムおよび後述する複数の記録データが記憶される。なお、データ取得処理プログラムは、電話回線またはインターネット等の通信網を介した配信の形態で提供されて記憶装置１１にインストールされてもよい。制御装置１０は、記憶装置１１に記憶されるデータ取得処理プログラムを実行することによりデータ取得処理を行う。

計時装置１２は、タイマ等を含み、現在の時刻を時間情報として生成する。収音装置１３は、マイクロフォン等を含み、音響空間内の音を収集し、音を表す音響信号を生成する。放音装置１４は、スピーカまたはヘッドフォン等を含み、音響信号を音として放射する。

表示装置１５は、液晶表示装置または有機ＥＬ（エレクトロルミネッセンス）表示装置等からなる。入力装置１６は、各種ボタン、キーボード、マウス等を含む。本実施の形態では、表示装置１５および入力装置１６がタッチパネルディスプレイＴＰ１として一体化されている。位置センサ１７は、例えばＧＰＳ（Global Positioning System）からなり、端末装置１の現在の位置を示す位置情報を生成する。撮像装置１８は、ＣＣＤ（電荷結合素子）カメラ等を含み、撮像により画像データを生成する。

通信装置１９は、電話回線またはインターネット等の通信網を介してデータベース２に記録データを送信する。また、通信装置１９は、通信網を介して他の端末装置１と通信を行うことができる。さらに、通信装置１９は、音響空間内の他の端末装置１との間で例えばＢｌｕｅｔｏｏｔｈ（登録商標）またはＷｉ−Ｆｉ（登録商標）等の通信方式で近距離無線通信を行うことができる。

上記の記憶装置１１には、収音装置１３により生成された音響信号、位置センサ１７により生成された位置情報、計時装置１２により生成された時間情報およびユーザの操作により付与されたタグが記録データとして記憶される。

図３は同期混合装置３の構成を示すブロック図である。同期混合装置３は、制御装置３０、記憶装置３１、放音装置３２、表示装置３３、入力装置３４および通信装置３５を含む。制御装置３０、記憶装置３１、放音装置３２、表示装置３３、入力装置３４および通信装置３５の構成は、端末装置１の制御装置１０、記憶装置１１、放音装置１４、表示装置１５、入力装置１６および通信装置１９の構成とそれぞれ同様である。本実施の形態では、表示装置３３および入力装置３４がタッチパネルディスプレイＴＰ２として一体化されている。

記憶装置３１には、後述する同期混合処理プログラムが記憶されるとともに、端末装置１から取得された複数の記録データが記憶される。なお、同期混合処理プログラムは、電話回線またはインターネット等の通信網を介した配信の形態で提供されて記憶装置３１にインストールされてもよい。制御装置３０は、記憶装置３１に記憶される同期混合処理プログラムを実行することにより同期混合処理を行う。通信装置３５は、電話回線またはインターネット等の通信網を介してデータベース２から記録データを取得する。また、通信装置３５は、通信網を介して端末装置１と通信を行うことができる。さらに、通信装置３５は、音響空間内の端末装置１との間で近距離無線通信を行うことができる。

（２）記録データ
図４はデータベース２に記憶される記録データの構成を示す模式図である。データベース２には、複数の端末装置１から送信された複数の記録データが記憶される。図４に示すように、各記録データは、音響信号、位置情報、時間情報およびタグを含む。図４の例では、記憶装置３１に、記録データＤ１〜Ｄ１０が記憶される。記録データＤ１〜Ｄ１０は、音響信号ａ１〜ａ１０、位置情報ｐ１〜ｐ１０および時間情報ｔ１〜ｔ１０を含む。また、記録データＤ１〜Ｄ３は共通のタグｇ１を含み、記録データＤ４〜Ｄ１０は共通のタグｇ２を含む。記録データが端末装置１の撮像装置１８により生成された画像データを含んでいてもよい。

音響信号は、音の波形信号を所定のサンプリング周期でサンプリングすることにより得られる複数のサンプリング値からなるオーディオデータであってもよく、ＭＩＤＩ（Musical Instrument Digital Interface）データ等の他の形式の信号であってもよい。位置情報は、音響信号の収録時の端末装置１の位置を表すデータであり、端末装置１の絶対位置を示していてもよく、他の端末装置１との相対位置を示していてもよい。時間情報は、音響信号の収録の開始日時および終了日時を含む。タグは、音響信号のグループを表す。各タグは、ユーザの操作により付与される。なお、データベース２において、音響信号の類似性分析により各記録データにタグが自動的に付与されてもよい。この場合、予め設定された類似性を有する音響信号に共通のタグが付与される。

（３）同期混合装置３の機能的な構成
図５は同期混合装置３の機能的な構成を示すブロック図である。図１の制御装置３０が記憶装置３１に記憶される同期混合処理プログラムを実行することにより、図５に示す取得部３１０、表示部３２０、抽出部３３０、音響信号選択部３４０、記憶部３５０、操作検出部３６０、設定部３７０および混合部３８０の機能が実現される。

取得部３１０は、図１のデータベース２から記録データを取得する。記憶部３５０は、取得部３１０により取得された記録データを記録する。表示部３２０は、タッチパネルディスプレイＴＰ２に地図画像および収録マークを表示させる。操作検出部３６０は、タッチパネルディスプレイＴＰ２を用いたユーザの操作を検出する。設定部３７０は、抽出条件を設定する。抽出部３３０は、記憶部３５０に記憶される記録データから抽出条件を満足する記録データを抽出する。音響信号選択部３４０は、ユーザの操作に基づいて抽出部３３０により抽出された記録データのいずれかを選択する。混合部３８０は、選択された記録データ中の音響信号について同期混合処理を行う。

（４）地図画像および収録マークの表示
図６（ａ），（ｂ），（ｃ）は同期混合装置３のタッチパネルディスプレイＴＰ２に表示される地図画像および収録マークの例を示す図である。図６の例では、野外コンサート会場を含む地図画像２００の領域が表示される。

図６（ａ）に示すように、複数の端末装置１による音響信号の収録位置に収録マーク３００が表示される。初期状態では、同期混合装置３の記憶装置３１に記憶される複数の記録データに対応する収録マーク３００のうち地図画像２００の範囲内にある収録マーク３００が表示される。同じ位置で異なる複数の日時で収録が行われた場合には、同じ位置に複数の収録マーク３００が重なって表示される。

ユーザが抽出条件を指定すると、抽出条件を満たす記録データが抽出される。それにより、図６（ｂ）に示すように、抽出された記録データに対応する収録マーク３００が表示される。さらに、ユーザが表示された収録マーク３００を選択すると、図６（ｃ）に示すように、選択された収録マーク３００のみが表示される。以下に示すように、選択された複数の収録マーク３００に対応する複数の音響信号についての同期混合処理が行われる。

（５）端末装置１の動作
図７および図８は図２の端末装置１によるデータ取得処理を示すフローチャートである。まず、図２の制御装置１０は、ユーザによる収録開始指示がタッチパネルディスプレイＴＰ１により検出された否かを判定する（ステップＳ１）。収録開始指示が検出された場合には、制御装置１０は、計時装置１２により生成される現在の時刻を開始日時として取得する（ステップＳ２）。また、制御装置１０は、位置センサ１７により生成される位置情報を取得し（ステップＳ３）、収音装置１３により生成される音響信号の収録動作を行う（ステップＳ４）。

その後、制御装置１０は、ユーザによる収録終了指示がタッチパネルディスプレイＴＰ１により検出された否かを判定する（ステップＳ５）。収録終了指示が検出されない場合には、ステップＳ４に戻り、収録動作を継続する。収録終了指示が検出された場合には、制御装置１０は、計時装置１２により生成される現在の時刻を終了日時として取得する（ステップＳ６）。これにより、開始日時および終了日時を含む時間情報が得られる。その後、制御装置１０は、収録動作により取得した音響信号、位置情報および時間情報を１組の記録データとして記憶装置１１に記憶する（ステップＳ７）。

さらに、制御装置１０は、ユーザによるタグの付与指示がタッチパネルディスプレイＴＰ１により検出されたか否かを判定する（ステップＳ８）。ユーザは、収録した音響信号をグループ分けするためのグループ識別子としてタグを収録データに付与することができる。例えば、同一の発音源Ｓ０からの同一の楽曲に対応する音響信号に同一のタグを付与することができる。また、同一の日時に収録された同一の楽曲に対応する音響信号に同一のタグを付与してもよく、異なる日時に収録された同一の楽曲に対応する音響信号に同一のタグを付与してもよい。類似性分析により類似性の高い音響信号に同一のタグが付与されてもよい。

タグの付与指示が検出された場合には、制御装置１０は記憶装置１１に記憶される記録データにタグを付与する（ステップＳ９）。タグの付与指示が検出されない場合には、制御装置１０はステップＳ１０に進む。

ステップＳ１０では、制御装置１０は、ユーザによる音響信号の編集操作がタッチパネルディスプレイＴＰ１により検出されたか否かを判定する。編集操作が検出された場合には、制御装置１０は音響信号を編集する（ステップＳ１１）。この場合、タッチパネルディスプレイＴＰ１に音響信号の波形等を含む編集画面が表示される。ユーザは、編集画面上で音響信号の編集操作を行うことができる。音響信号の編集操作としては、例えば音量の調整または音響効果の付与等が挙げられる。また、編集操作として、例えば、ユーザがタッチパネルディスプレイＴＰ１に表示される地図画像２００上の各収録マーク３００を２本の指で拡大または縮小することにより音響信号の音量を調整してもよい。あるいは、ユーザが各収録マーク３００の周囲を右回りまたは左回りに指でなぞることにより音響信号の音量を調整してもよい。ステップＳ１０で編集操作が検出されない場合には、制御装置１０はステップＳ１２に進む。

ステップＳ１２では、制御装置１０は、ユーザによる再収録指示がタッチパネルディスプレイＴＰ１により検出されたか否かを判定する（ステップＳ１２）。再収録指示が検出された場合には、制御装置１０はステップＳ１に戻る。

ステップＳ１２で再収録指示が検出されない場合には、制御装置１０は、ユーザによる記録データの送信指示がタッチパネルディスプレイＴＰ１により検出されたか否かを判定する（ステップＳ１３）。送信指示が検出されない場合には、制御装置１０はステップＳ１２に戻る。送信指示が検出された場合には、制御装置１０は、通信装置１９により記録データをデータベース２に送信し（ステップＳ１４）、ステップＳ１２に戻る。

（６）同期混合装置３の動作
図８は同期混合装置３による同期混合処理を示すフローチャートである。まず、図３の制御装置３０は、タッチパネルディスプレイＴＰ２に地図画像の既定の範囲を表示させる（ステップＳ２１）。既定の表示範囲は、同期混合装置３が存在する位置を含む範囲であってもよく、前回の同期混合処理の終了時に表示された範囲であってもよい。

制御装置３０は、ユーザによる表示範囲の変更操作がタッチパネルディスプレイＴＰ２により検出されたか否かを判定する（ステップＳ２２）。表示範囲の変更操作が検出された場合には、制御装置３０は、タッチパネルディスプレイＴＰ２に地図画像の変更後の範囲を表示させる（ステップＳ２３）。表示範囲の変更操作が検出されない場合には、制御装置３０はステップＳ２４に進む。

ステップＳ２４では、制御装置３０は、地図画像の表示範囲内の位置情報を有する記録データを記憶装置３１から取得し（ステップＳ２４）、該当する位置情報を収録マークとしてタッチパネルディスプレイＴＰ２の地図画像上に表示させる（ステップＳ２５）。例えば、図６（ａ）に示すように、地図画像２００の範囲内に複数の収録マーク３００が表示される。

この状態で、制御装置３０は、ユーザによる抽出条件の指定がタッチパネルディスプレイＴＰ２により検出されたか否かを判定する（ステップＳ２６）。抽出条件の指定が検出されていない場合には、制御装置３０はステップＳ２９に進む。

抽出条件の指定が検出された場合には、制御装置３０は、抽出条件に基づいて記録データを抽出する（ステップＳ２７）。抽出条件としては、時間範囲を指定することができる。この場合、指定された時間範囲内の時間情報を含む記録データを抽出することができる。それにより、同じ場所で複数回の収録が行われた場合に、同じ日時に収録された複数の記録データを抽出することができる。なお、ユーザが複数の時間範囲を指定した場合に、各時間範囲に属する収録マークが異なる色のレイヤーに表示されてもよい。

また、抽出条件として、タグを指定することができる。この場合、タッチパネルディスプレイＴＰ２にタグ一覧が表示される。それにより、同一グループに属する記録データを抽出することができる。タグが類似性分析により付与されている場合には、類似性の高い楽曲の記録データを抽出することができる。同じ楽曲が複数回収録された場合に、それらの楽曲の記録データを抽出することができる。

次に、制御装置３０は、抽出された記録データの位置情報に基づいて地図画像上に表示される収録マークを更新する（ステップＳ２８）。例えば、図６（ｂ）に示されるように、抽出された記録データに対応する収録マーク３００が表示される。

次に、制御装置３０は、ユーザによる音響信号の編集操作がタッチパネルディスプレイＴＰ２により検出されたか否かを判定する（ステップＳ２９）。編集操作が検出された場合には、制御装置１０は音響信号を編集する（ステップＳ３０）。この場合、タッチパネルディスプレイＴＰ２に音響信号の波形等を含む編集画面が表示される。ユーザは、編集画面上で音響信号の編集操作を行うことができる。編集操作が検出されない場合には、制御装置３０はステップＳ３１に進む。

ステップ３１では、制御装置３０は、ユーザによる収録マークの選択操作がタッチパネルディスプレイＴＰ２により検出されたか否かを判定する（ステップＳ３１）。ユーザは、タッチパネルディスプレイＴＰ２の地図画像上に表示された複数の収録マークのいずれかを混合対象として選択することができる。収録マークの選択操作が検出された場合には、制御装置３０は、選択された収録マークに対応する記録データを選択する（ステップＳ３２）。収録マークの選択操作が検出されない場合には、制御装置３０は、ステップＳ２７で抽出された記録データを混合対象として選択し、ステップＳ２７で記録データが抽出されていない場合には、ステップＳ２４で取得された記録データを混合対象として選択する。

その後、制御装置３０は、ユーザによる同期混合指示がタッチパネルディスプレイＴＰ２により検出されたか否かを判定する（ステップＳ３３）。同期混合指示が検出された場合には、制御装置３０は同期混合処理を実行する（ステップＳ３４）。この場合、選択された複数の記録データ中の音響信号が時間情報に基づいて同期され、同期された音響信号が混合される。なお、音響信号の一般的な相互相関に基づいて音響信号の同期を行ってもよい。さらに、サンプリング周波数補正技術を用いることにより同期の精度を向上させてもよい。混合後の音響信号は、記憶装置３１に記憶される。同期混合指示が検出されない場合には、制御装置３０はステップＳ３５に進む。

ステップＳ３５では、制御装置３０は、ユーザによる再生指示がタッチパネルディスプレイＴＰ２により検出されたか否かを判定する（ステップＳ３５）。再生指示が検出された場合には、制御装置３０は、記憶装置３１に記憶された混合後の音響信号を放音装置１４により音として再生する（ステップＳ３６）。再生指示が検出されない場合には、制御装置３０はステップＳ３７に進む。

ステップＳ３７では、制御装置３０は、ユーザによる終了指示がタッチパネルディスプレイＴＰ２により検出されたか否かを判定する。終了指示が検出されない場合には、制御装置３０はステップＳ２１に戻り、終了指示が検出された場合には同期混合処理を終了する。

（７）実施の形態の効果
本実施の形態に係る音響信号処理システム１００においては、地図画像上に音響信号の収録位置を示す複数の収録マークが表示される。ユーザは、地図画像上の複数の収録マークに基づいて、複数の音響信号から混合対象となる複数の音響信号を視覚的にかつ容易に選択することができる。

この場合、ユーザは、抽出条件を適切に指定することにより選択対象となる記録データを容易に絞り込むことができる。特に、選択対象となる記録データを所望の時間帯に取得された記録データまたは所望のグループの記録データに絞り込むことができる。それにより、所望の音響信号の同期および混合が容易になる。

（８）他の実施の形態
上記実施の形態では、音響信号処理装置として同期混合装置３が用いられるが、音響信号処理装置として複数の端末装置１のうちいずれか１つが用いられてもよい。その場合、その端末装置１の記憶装置１１がデータベース２の代わりに用いられてもよい。また、上記実施の形態では、図１の端末装置１がデータ取得処理を行い、同期混合装置３が同期混合処理を行っているが、サーバ装置がデータ取得処理の一部を行ってもよく、サーバ装置が同期混合処理を行ってもよい。さらに、データ取得処理プログラムがウェブプログラムとして提供され、端末装置１がウェブプログラムを実行することによりデータ取得処理を行ってもよい。また、同期混合処理プログラムがウェブプログラムとして提供され、同期混合装置３またはサーバ装置がウェブプログラムを実行することにより同期混合処理を行ってもよい。

また、上記実施の形態では、複数の端末装置１が非同期に動作しているが、複数の端末装置１が互いに同期して動作してもよい。例えば、複数の端末装置１が互いに通信を行うことにより、収録開始および収録終了の指示が相互に送信されてもよい。この場合、収録開始タイミングおよび収録終了タイミングが同期するように収録開始および収録終了の指示が送信されてもよい。それにより、複数の音響信号の同期混合処理が容易になる。なお、収録開始タイミングおよび収録終了タイミングは、厳密に一致していなくてもよい。その場合には、時間情報または音響信号の相互相関に基づいて複数の音響信号の同期が取られる。

上記実施の形態では、音響信号処理プログラムの一実施の形態として同期混合処理プログラムが実行されているが、音響信号処理プログラムは、上記実施の形態の同期混合処理プログラムに限定されない。音響信号処理プログラムは、音響空間内の複数の位置で収録された音を示す複数の音響信号を、収録位置を示す位置情報と対応付けて取得する取得ステップと、取得された複数の位置情報に基づいて、取得された複数の音響信号から混合対象となる音響信号を選択する選択ステップと、選択された複数の音響信号を混合する混合ステップとを、コンピュータに実行させるものである。

また、音響信号処理プログラムは、上記実施の形態における記憶装置３１に限らず、ディジタルバーサタイルディスク（ＤＶＤ）、フラッシュメモリ、メモリカード等の各種記録媒体に格納された状態で提供されてもよい。

（９）請求項の各構成要素と実施の形態の各部との対応
以下、請求項の各構成要素と実施の形態の各部との対応の例について説明するが、本発明は下記の例に限定されない。

上記実施の形態では、制御装置３０および通信装置３５が取得手段の例であり、制御装置３０およびタッチパネルディスプレイＴＰ２が選択手段の例であり、制御装置３０が混合手段の例である。タッチパネルディスプレイＴＰ２が提示手段、操作検出手段、表示手段および設定手段の例であり、制御装置３０が音声信号選択手段および抽出手段の例である。

また、取得部３１０が取得手段の例であり、表示部３２０、操作検出部３６０および音響信号選択部３４０が選択手段の例であり、混合部３８０が混合手段の例であり、表示部３２０が提示手段または表示手段の例であり、操作検出部３６０が操作検出手段の例であり、音響信号選択部３４０が音声信号検出手段の例であり、抽出部３３０が抽出手段の例であり、設定部３７０が設定手段の例である。

請求項の各構成要素として、請求項に記載されている構成または機能を有する他の種々の要素を用いることができる。

本発明は、音響空間内の複数の位置で収録した複数の音響信号の同期混合処理等に利用することができる。

１…端末装置、２…データベース、３…同期混合装置、１０，３０…制御装置、１１，３１…記憶装置、１２…計時装置、１３…収音装置、１４，３２…放音装置、１５，３３…表示装置、１６，３４…入力装置、１７…位置センサ、１８…撮像装置、１９，３５…通信装置、１００…音響信号処理システム、３１０…取得部、３２０…表示部、３３０…抽出部、３４０…音響信号選択部、３５０…記憶部、３６０…操作検出部、３７０…設定部、３８０…混合部、Ｓ０…発音源、ＴＰ１，ＴＰ２…タッチパネルディスプレイ

Claims (5)

1. 音響空間内の複数の位置で収録された音を示す複数の音響信号を、収録位置を示す位置情報と対応付けて取得する取得手段と、
   前記取得手段により取得された複数の位置情報に基づいて、前記取得手段により取得された複数の音響信号から混合対象となる音響信号を選択する選択手段と、
   前記選択手段により選択された複数の音響信号を混合する混合手段とを備える、音響信号処理装置。
2. 前記選択手段は、
   前記取得手段により取得された複数の位置情報を提示する提示手段と、
   前記提示手段により提示された位置情報の選択操作を検出する操作検出手段と、
   前記選択操作の検出に基づいて、選択された位置情報に対応する音響信号を選択する音響信号選択手段とを含む、請求項１記載の音響信号処理装置。
3. 前記提示手段は、地図画像を表示するとともに、前記複数の位置情報を前記地図画像上に表示する表示手段を含み、
   前記操作検出手段は、前記地図画像上での位置情報の選択操作を検出する、請求項２記載の音響信号処理装置。
4. 音響信号の抽出条件を設定する設定手段と、
   前記取得手段により取得された複数の音響信号および複数の位置情報のうち前記抽出条件を満足する音響信号および位置情報を抽出する抽出手段とをさらに備え、
   前記提示手段は、前記抽出手段により抽出された位置情報を提示する、請求項２または３記載の音響信号処理装置。
5. 前記取得手段は、各音響信号の収録時刻を示す時間情報を音響信号に対応付けて取得し、
   前記設定手段は、音の収録時刻に関する時間条件を前記抽出条件として設定し、
   前記抽出手段は、前記時間条件を満足する時間情報に対応する音響信号および位置情報を抽出する、請求項４記載の音響信号処理装置。

Images