JP2022090748A - 録音装置、音再生装置、録音方法、および音再生方法 - Google Patents

Abstract

【課題】複数のスピーカーから出力される音のタイミングが実際の音の発生のタイミングに対応した臨場感の高い音を聞くことができる録音装置等を提供する。【解決手段】録音装置は、１以上のマイクによって取得された１以上の音信号に、それぞれ、マイク情報入力部によって入力された前記１以上のマイクの位置情報または前記１以上のマイクの方向情報を付加する録音信号処理部を備え、前記録音信号処理部は、前記１以上のマイクの位置情報または前記１以上のマイクの方向情報と前記１以上の音信号とを１対１の関係で関連付けて録音記憶部に記憶させる。【選択図】図１

Description

本開示は、録音装置、音再生装置、録音方法、および音再生方法に関する。

特許文献１～３に開示されているように、音をマイクで取得し、その音をスピーカーで再生する録音装置および音再生装置の開発が行われている。

特開２００６－２１１０４７号公報 特開２００６－２８７６０６号公報 特開２００９－０４４２６１号公報

特許文献１～３に開示された技術においては、マイクから聴取想定位置へ向かう方向と実際のスピーカーから実際の聴取者へ向かう方向が同一であっても、マイクから聴取想定位置までの距離とスピーカーから実際の聴取者までの距離とが異なる場合がある。この場合、実際に発生した音が聴取想定位置で聴取されると推定される仮想の聴取タイミングと、聴取者がスピーカーから出力された音を聴取する実際の聴取タイミングとの間にずれが生じてしまう。そのため、マイクによって取得された音をスピーカーによって再生しても、臨場感が高い音を聴取することができない。

本開示は、上述の問題に鑑みてなされたものである。本開示の目的は、マイクによって取得された音をスピーカーによって再生しても、臨場感が高い音を聴取することができる録音装置、音再生装置、録音方法、および音再生方法を提供することである。

本開示の一形態の録音装置は、１以上のマイクによって取得された１以上の音信号に、それぞれ、マイク情報入力部によって入力された前記１以上のマイクの位置情報または前記１以上のマイクの方向情報を付加する録音信号処理部を備え、前記録音信号処理部は、前記１以上のマイクの位置情報または前記１以上のマイクの方向情報と前記１以上の音信号とを１対１の関係で関連付けて録音記憶部に記憶させる。

本開示の一形態の音再生装置は、スピーカー位置入力部によって入力された１以上のスピーカーの位置情報に基づいて、１以上の音信号を記憶する音再生記憶部から送信されてきた前記１以上の音信号の１以上の遅延時間を決定する音再生コントロール部と、前記音再生コントロール部によって決定された前記１以上の遅延時間を前記１以上の音信号にそれぞれ付与する遅延時間付与部と、前記１以上の音信号に対応する１以上の音を、それぞれ、前記１以上の遅延時間だけ遅延させて、１以上のスピーカーに発生させるスピーカー駆動部と、を備えている。

本開示の一形態の録音方法は、１以上のマイクによって取得された１以上の音信号に、マイク情報入力部によって入力された前記１以上のマイクの位置情報または前記１以上のマイクの方向情報を、それぞれ付加するステップと、前記１以上のマイクの位置情報または前記１以上のマイクの方向情報と前記１以上の音信号とを１対１の関係で関連付けて記憶させるステップと、を備えている。

本開示の一形態の音再生方法は、スピーカー位置入力部によって入力された１以上のスピーカーの位置情報に基づいて、１以上の音信号の１以上の遅延時間を決定するステップと、前記１以上の遅延時間を前記１以上の音信号にそれぞれ付与するステップと、前記１以上の音信号に対応する１以上の音を、それぞれ、前記１以上の遅延時間だけ遅延させて、１以上のスピーカーに発生させるステップと、を備えている。

実施の形態１の録音装置の機能ブロック図である。 実施の形態１の録音装置における１以上のマイクの位置と傾聴者が存在する基準位置との関係を示す模式図である。 実施の形態１の録音装置および音再生装置において、１以上の位置情報と１以上の音信号とが１対１の関係で関連付けられたデータ列の一例を示す図である。 実施の形態１の録音装置および音再生装置において、１以上の位置情報と１以上の音信号とが１対１の関係で関連付けられたデータ列の他の例を示す図である。 １以上のマイクの位置情報を特定するためのＸＹＺ座標を説明するための第１模式図である。 １以上のマイクの位置情報を特定するためのＸＹＺ座標を説明するための第２模式図である。 １以上のマイクの位置情報を特定するためのＸＹＺ座標を説明するための第３模式図である。 １以上のマイクの位置情報を特定するための極座標を説明するための模式図である。 実施の形態１の音再生装置の機能ブロック図である。 実施の形態１の音再生装置における１以上のスピーカーと傾聴者が存在する基準位置との位置関係の一例を示す模式図である。 実施の形態２の録音装置の１以上のマイクの全体構成の一例を示す図である。 実施の形態２の１以上のマイクの全体構成を特定可能な情報と１以上のマイクの方向情報とが関連付けられていることを説明するための図である。 実施の形態２の音再生装置における１以上のスピーカーと傾聴者が存在する基準位置との位置関係の一例を示す模式図である。 実施の形態３の録音装置および音再生装置において、１以上の位置情報と１以上の音信号とが１対１の関係で関連付けられたデータ列の一例を示す図である。 実施の形態４の録音装置および音再生装置において、１以上の位置情報と１以上の音信号とが１対１の関係で関連付けられたデータ列の一例を示す図である。

図面を参照しながら、本開示の実施形態の録音装置および音再生装置を説明する。なお、図面については、同一又は同等の要素には同一の符号を付し、重複する説明は省略する。

（実施の形態１）
図１～図９を用いて、実施の形態１の録音装置ＳＲＥＣおよび音再生装置ＳＲＥＧを説明する。

本実施の形態の録音装置ＳＲＥＣは、たとえば、野外の自然環境の下で発生する風の音、川の流れる音、または、雷の音、または動物の鳴き声等を録音するために使用されることが想定されている。ただし、室内の音楽の演奏等を録音するために使用されてもよい。

図１は、１以上の音信号、より具体的には、１以上のオーディオ信号を記録する録音装置ＳＲＥＣの機能ブロック図である。図１に示されるように、録音装置ＳＲＥＣは、１以上のマイクＭｉｃ（Ｋ）＜以下、Ｋ＝１，２，３，・・・，Ｎ：Ｎは自然数＞を備えている。録音装置ＳＲＥＣは、１以上のアナログ－デジタル変換部Ａ／Ｄ（Ｋ）＜以下、Ｋ＝１，２，３，・・・，Ｎ：Ｎは自然数＞を備えている。

録音装置ＳＲＥＣは、録音信号処理部ＳＰ１を備えている。このように、録音装置ＳＲＥＣは、録音信号処理部ＳＰ１を備えていれば、前述したマイクＭｉｃ（Ｋ）およびアナログ－デジタル変換部Ａ／Ｄ（Ｋ）、ならびに、後述される録音記憶部Ｒ１および後述されるマイク情報入力部ＭＩＮＰは、必須の構成ではない。マイクＭｉｃ（Ｋ）およびアナログ－デジタル変換部Ａ／Ｄ（Ｋ）は、録音装置ＳＲＥＣの使用目的に応じて異なる性能および構造のものに交換可能であってもよい。後述される録音記憶部Ｒ１および後述されるマイク情報入力部ＭＩＮＰは、録音装置ＳＲＥＣ以外の装置に含まれていてもよい。

１以上のマイクＭｉｃ（Ｋ）のそれぞれは、音、すなわち、空気振動をダイヤフラム等で受け止め、ダイヤフラム等で受け止められた空気振動を電気信号に変換する。１以上のアナログ－デジタル変換部Ａ／Ｄ（Ｋ）は、それぞれ、空気振動から生成されたアナログ電気信号をデジタル信号に変換する。

１以上のアナログ－デジタル変換部Ａ／Ｄ（Ｋ）のそれぞれは、前述のデジタル信号を録音信号処理部ＳＰ１へ送信する。以下、前述のデジタル信号を、Ａｕｄｉｏ Ｓｔｒｅａｍ（Ｋ）＜以下、Ｋ＝１，２，３，・・・，Ｎ：Ｎは自然数＞と言う（図9参照）。ただし、前述のデジタル信号を、単に、音信号ＳＳ（Ｋ）＜以下、Ｋ＝１，２，３，・・・，Ｎ：Ｎは自然数＞と言うこともある。

マイク情報入力部ＭＩＮＰは、録音装置ＳＲＥＣの使用者が予め定められた座標上の１以上のマイクＭｉｃ（Ｋ）のそれぞれの位置情報（Ｘ，Ｙ，Ｚ）を入力するための操作部である。ただし、マイク情報入力部ＭＩＮＰは、実施の形態２で説明されるように、録音装置ＳＲＥＣの使用者が予め定められた１以上のマイクＭｉｃ（Ｋ）のそれぞれの方向情報（α，β）を入力するための操作部としても機能する。マイク情報入力部ＭＩＮＰは、録音装置ＳＲＥＣの必須の構成ではなく、交換可能なタッチパネル、キーボード、またはマウス等のいかなる入力装置であってもよい。

録音コントロール部ＣＴ１は、録音信号処理部ＳＰ１を制御する。本実施の形態においては、録音コントロール部ＣＴ１は、マイク情報入力部ＭＩＮＰで入力された１以上のマイクＭｉｃ（Ｋ）のそれぞれの位置情報（Ｘ，Ｙ，Ｚ）を録音信号処理部ＳＰ１へ送信する。

録音信号処理部ＳＰ１は、１以上のマイクＭｉｃ（Ｋ）によって取得された１以上の音信号に、それぞれ、マイク情報入力部ＭＩＮＰによって入力された１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）を付加する。１以上の音信号は、それぞれ、１以上のマイクＭｉｃ（Ｋ）によって取得されたものである。録音記憶部Ｒ１は、１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）と１以上の音信号ＳＳ（Ｋ）とを１対１の関係で関連付けて記憶する。つまり、録音信号処理部ＳＰ１は、１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）と１以上の音信号ＳＳ（Ｋ）とを１対１の関係で関連付けて録音記憶部Ｒ１に記憶させる。

本明細書における１対１の関係は、マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）と音信号ＳＳ（Ｋ）とが１対１で対応してればよい。この場合、マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）と音信号ＳＳ（Ｋ）とに関連付けられた他の信号または情報が録音記憶部Ｒ１に記憶されていても、前述の１対１の関係は成立する。

本実施の形態においては、１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）のそれぞれは、直交座標を示す座標情報である。ただし、１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）のそれぞれは、極座標を示す座標情報であってもよい。

図２は、実施の形態１の録音装置ＳＲＥＣにおける１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）と傾聴者が存在する基準位置Ｐとの関係を示す模式図である。図２を用いて、たとえば、２４個のマイクＭｉｃ（Ｋ）＜Ｋ＝１～２４の自然数＞を用いて、たとえば、野外で発生した音を収録した場合のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）を決定する方法を説明する。

図２に示されるように、本実施の形態の録音装置ＳＲＥＣは、たとえば、８個の上層、８個の中層、および８個の下層からなる２４個のマイクＭｉｃ（Ｋ）を備えているものとする。基準位置Ｐは、２４個のマイクＭｉｃ（Ｋ）の中央の位置に設定されている。基準位置Ｐは、録音装置ＳＲＥＣを用いて記録された１以上の音信号ＳＳ（Ｋ）を、以下に説明される音再生装置ＳＲＥＧを用いて再生するときに、聴取者が聴取すると想定される仮想の位置を示している。基準位置ＰからマイクＭｉｃ（Ｋ）の位置までの相対的な位置関係が、位置情報（Ｘ，Ｙ，Ｚ）である。

マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）は、次のようにして、マイク情報入力部ＭＩＮＰを用いて入力される。たとえば、Ｘ軸方向、Ｙ軸方向、およびＺ軸方向の３軸のそれぞれに沿って、まず、聴取者が聴取すると想定される基準位置Ｐから１以上のマイクＭｉｃ（Ｋ）のそれぞれまでの距離をメジャー等で測定する。それにより、Ｘ軸方向、Ｙ軸方向、およびＺ軸方向の３軸方向に沿った距離がそれぞれ測定される。この３軸方向に沿った距離が、ユーザによるマイク情報入力部ＭＩＮＰの操作によって、マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）として、録音コントロール部ＣＴ１を経由して、録音信号処理部ＳＰ１へ送信される。

また、１以上のマイクＭｉｃ（Ｋ）のそれぞれがＧＰＳ（Global Positioning System）とディスプレイ（図示せず）とを備えている場合には、次のようにしてもよい。たとえば、その位置情報（Ｘ，Ｙ，Ｚ）を発信する発信機を基準位置Ｐに設置する。それにより、発信機（図示せず）が発信する基準位置Ｐの情報を１以上のマイクＭｉｃ（Ｋ）が受信し、基準位置Ｐに対する１以上のマイクＭｉｃ（Ｋ）の３軸座標系における座標を位置情報（Ｘ，Ｙ，Ｚ）としてディスプレイ（図示せず）に表示してもよい。

さらに、マイクＭｉｃ（Ｋ）のディスプレイ（図示せず）に現在のＭｉｃ（Ｋ）の位置と所望のマイクＭｉｃ（Ｋ）の設置予定位置との間の差を表示してもよい。この場合、Ｍｉｃ（Ｋ）の所望の設置予定位置へマイクＭｉｃ（Ｋ）を移動させることを促すガイド情報、たとえば、Ｍｉｃ（Ｋ）の移動すべき方向を、マイクＭｉｃ（Ｋ）のディスプレイに表示してもよい。

その後、ユーザがマイク情報入力部ＭＩＮＰを操作することによって、１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）のそれぞれが、録音コントロール部ＣＴ１を経由して録音信号処理部ＳＰ１へ入力される。

図３は、１以上の位置情報（Ｘ，Ｙ，Ｚ）と１以上の音信号ＳＳ（Ｋ）とが１対１の関係で関連付けられた一例を示す図である。ここでいう１対１の関係とは、１つの位置情報（Ｘ，Ｙ，Ｚ）と１つの音信号ＳＳ（Ｋ）とが対応関係を有していれば、１つの位置情報（Ｘ，Ｙ，Ｚ）と１つの音信号ＳＳ（Ｋ）との組合せに他の１または２以上の情報または他の１または２以上の信号が付されていてもよい。

本実施の形態においては、図３に示されるフォーマットで、録音記憶部Ｒ１は、マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）が付加された音信号ＳＳ（Ｋ）を記憶する。録音記憶部Ｒ１は、１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）のそれぞれを出力した後に、１対１の関係で関連付けられた順序で、１以上の音信号ＳＳ（Ｋ）のそれぞれを出力する。録音記憶部Ｒ１は、このような態様で、マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）と音信号ＳＳ（Ｋ）とを記憶している。

具体的には、まず、マイクＭｉｃ（１）の位置情報（Ｘ，Ｙ，Ｚ）、マイクＭｉｃ（２）の位置情報（Ｘ，Ｙ，Ｚ）、・・・マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）、・・・、マイクＭｉｃ（２４）の位置情報（Ｘ，Ｙ，Ｚ）がこの順番で出力される。その後、音信号（１）、音信号（２）、・・・、音信号ＳＳ（Ｋ）、・・・音信号（２４）がこの順番で出力される。つまり、マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）がＫの数字（自然数）の順番で出力された後に、音信号ＳＳ（Ｋ）がＫの数字（自然数）の順番で出力される。

なお、後述される音再生信号処理部ＳＰ２は、位置情報（Ｘ，Ｙ，Ｚ）と音信号のいずれが送信されてきたのかを識別する必要がある。そのため、本実施の形態においては、録音信号処理部ＳＰ１は、出力するコンテンツの最初のデータにおいて、伝送フォーマットを指定する。たとえば、コンテンツの最初のデータは、その次のデータがマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）が付加されたデータ列であることを指定する。また、コンテンツの最初のデータは、その指定の後に最初のＹ個のＸバイトの位置情報（Ｘ，Ｙ，Ｚ）のデータが続きくこと、および、さらにその後にＹ個のＺバイトの音声ストリームが続くことを指定する。

しかしながら、前述の指定の代わりに、録音信号処理部ＳＰ１は、マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）の出力を開始する時に、マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）の出力を開始することを示す位置情報出力開始情報を送信してもよい。この位置情報出力開始情報は、各マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）内に含まれていてもよい。また、音信号ＳＳ（Ｋ）の出力を開始する時に、音信号ＳＳ（Ｋ）の出力を開始する音信号出力開始情報を送信してもよい。この音信号出力開始情報は、各マイクＭｉｃ（Ｋ）の音信号ＳＳ（Ｋ）に含まれていてもよい。録音信号処理部ＳＰ１は、前述の位置情報出力開始信号と音信号出力開始情報とを出力することにより、後述される受信側の音再生信号処理部ＳＰ２が、送信されてきたデータがいかなるデータであるかを容易に識別することができる。

図４は、１以上の位置情報（Ｘ，Ｙ，Ｚ）と１以上の音信号ＳＳ（Ｋ）とが１対１の関係で関連付けられた他の例を示す図である。ここでいう１対１の関係とは、１つの位置情報（Ｘ，Ｙ，Ｚ）と１つの音信号ＳＳ（Ｋ）とが対応関係を有していれば、１つの位置情報（Ｘ，Ｙ，Ｚ）と１つの音信号ＳＳ（Ｋ）とに他の１または２以上の情報または他の１または２以上の信号が付されていてもよい。

録音記憶部Ｒ１は、図４に示されるフォーマットで、マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）が付加された音信号ＳＳ（Ｋ）を記憶してもよい。より具体的に言うと、録音記憶部Ｒ１は、１対１の関係で関連付けられた順序で、１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）のうちのいずれか１つと１以上の音信号ＳＳ（Ｋ）のうちのいずれか１つとを交互に出力することができる。

具体的には、マイクＭｉｃ（１）の位置情報（Ｘ，Ｙ，Ｚ）、音信号（１）、マイクＭｉｃ（２）の位置情報（Ｘ，Ｙ，Ｚ）、音信号（２）、・・・、マイクＭｉｃ（２４）の位置情報（Ｘ，Ｙ，Ｚ）音信号（２４）が、この順番で出力される。つまり、マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）と音信号ＳＳ（Ｋ）とがＫの値の順番で交互に出力される。言い換えると、マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）とマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）の後に続く音信号ＳＳ（Ｋ）との組合せが、Ｋの数字（自然数）の順番に出力される。

図５～図７は、１以上のマイクの位置情報を特定するためのＸＹＺ座標を説明するための図である。図５～図７に示されるように、本実施の形態においては、１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）は、Ｘ軸、Ｙ軸、およびＺ軸からなる３軸座標系を用いて表される。具体的には、１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）の左右方向の位置は、Ｌｅｆｔ／Ｃｅｎｔｅｒ／Ｒｉｇｈｔ（図５参照）の文言で表される。１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）の上下方向の位置は、Ｔｏｐ／Ｍｉｄｄｌｅ／Ｂｏｔｔｏｍ（図６参照）の文言で表される。１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）の奥行方向の位置は、Ｆｏｒｎｔ／Ｓｉｄｅ／Ｂａｃｋ（図７参照）の文言で表現されている。

図８は、１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｒ，α，β）を特定するための極座標を説明するための模式図である。図８に示すように、マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）は、基準平面ＲＰにおける基準位置Ｐからの距離Ｒと、基準方向ＲＤからの回転角αと、基準方向ＲＤからの仰角βとを用いる極座標の形式を用いて表されてもよい。

図９は、本実施の形態の音再生装置ＳＲＥＧの機能ブロック図である。

音再生装置ＳＲＥＧは、音再生記憶部Ｒ２および音再生信号処理部ＳＰ２を備えている。音再生装置ＳＲＥＧは、遅延時間付与部ＤＬ（Ｋ）＜Ｋ＝１,２，３，・・・，Ｎ：Ｎは自然数＞、スピーカー駆動部ＳＤＲ（Ｋ）＜以下、Ｋ＝１，２，３，・・・Ｎ：Ｎは自然数＞、およびスピーカーＳＰ（Ｋ）＜Ｋ＝１,２，３，・・・，Ｎ：Ｎは自然数＞を備えている。

音再生記憶部Ｒ２は、録音装置ＳＲＥＣの録音記憶部Ｒ１で記憶された１以上の音信号ＳＳ（Ｋ）と同一の１以上の音信号ＳＳ（Ｋ）を記憶している。つまり、録音記憶部Ｒ１に記憶された１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）および１以上音信号ＳＳ（Ｋ）が、電気通信情報網または記憶媒体を経由して、音再生記憶部Ｒ２に記憶されている。したがって、音再生記憶部Ｒ２は、１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）と１以上の音信号ＳＳ（Ｋ）とを１対１の関係で関連付けて記憶している。なお、音再生装置ＳＲＥＧは、音再生記憶部Ｒ２を有していなくてもよい。たとえば、インターネット等の電気通信網上に設置されたサーバーが音再生記憶部Ｒ２を含んでいてもよい。この場合、サーバーからのストリーミングによって、各家庭内の音再生装置ＳＲＥＧに１以上の音信号が配信されてもよい。つまり、音再生装置ＳＲＥＧは、音再生コントロール部ＣＴ２、遅延時間付与部ＤＬ（Ｋ）およびスピーカー駆動部ＳＤＲ（Ｋ）を含んでいれば、いかなるなるものであってもよい。

１以上の音信号ＳＳ（Ｋ）は、いわゆる、マルチチャンネル音声データである。１以上の音信号ＳＳ（Ｋ）は、それぞれ、音再生記憶部Ｒ２から遅延時間付与部ＤＬ（Ｋ）へ送信される。

音再生装置ＳＲＥＧは、音再生信号処理部ＳＰ２、マイク情報読出部ＭＩＲ、音再生コントロール部ＣＴ２、およびスピーカー位置入力部ＳＩＮＰを備えている。音再生装置ＳＲＥＧは、１以上の遅延時間付与部ＤＬ（Ｋ））＜Ｋ＝１、２、３、・・・、Ｎ：Ｎは自然数＞およびスピーカー駆動部ＳＤＲ（Ｋ）を備えている。音再生装置ＳＲＥＧは、１以上のスピーカーＳＰ（Ｋ）を備えている。

音再生記憶部Ｒ２は、１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）と１以上の音信号ＳＳ（Ｋ）とを、音再生信号処理部ＳＰ２へ送信する。音再生信号処理部ＳＰ２は、１以上の音信号ＳＳ（Ｋ）を１以上の遅延時間付与部ＤＬ（Ｋ）へ送信する。また、音再生信号処理部ＳＰ２は、マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）を、マイク情報読出部ＭＩＲを経由して音再生コントロール部ＣＴ２へ送信する。

ユーザは、スピーカー位置入力部ＳＩＮＰの操作によって、１以上のスピーカーＳＰ（Ｋ）の位置情報（ｘ，ｙ，ｚ）のそれぞれを音再生コントロール部ＣＴ２へ送信する。

音再生コントロール部ＣＴ２は、１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）および１以上のスピーカーＳＰ（Ｋ）の位置情報（ｘ，ｙ，ｚ）に基づいて、１以上の音信号ＳＳ（Ｋ）の１以上の遅延時間ＤＴ（Ｋ）＜Ｋ＝１、２、３、・・・、Ｎ：Ｎは自然数＞を決定する。音再生コントロール部ＣＴ２は、１以上の遅延時間付与部ＤＬ（Ｋ）へ１以上の遅延時間ＤＴ（Ｋ）を送信する。遅延時間付与部ＤＬ（Ｋ）は、１以上に音信号（Ｋ）にそれぞれ１以上の遅延時間ＤＴ（Ｋ）を付与する。

スピーカー駆動部ＳＤＲ（Ｋ）は、１以上の音信号ＳＳ（Ｋ）に対応する１以上の音を、それぞれ、１以上の遅延時間ＤＴ（Ｋ）だけ遅延させて、１以上のスピーカーＳＰ（Ｋ）＜以下、Ｋ＝１，２，３，・・・Ｎ：Ｎは自然数＞に発生させる。なお、スピーカー駆動部ＳＤＲ（Ｋ）は、１以上のスピーカーＳＰ（Ｋ）にそれぞれ対応した１以上の増幅器Ａｍｐ（Ｋ）＜以下、Ｋ＝１，２，３，・・・Ｎ：Ｎは自然数＞を含んでいる。

より具体的には、音再生装置ＳＲＥＧで１以上の音信号ＳＳ（Ｋ）を再生するときには、音再生記憶部Ｒ２から、１以上の音信号ＳＳ（Ｋ）が録音装置ＳＲＥＣで録音された時の１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）が読み出される。それにより、音再生コントロール部ＣＴ２は、１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）および１以上のスピーカーＳＰ（Ｋ）の位置情報（ｘ，ｙ，ｚ）にそれぞれ応じた１以上の遅延時間ＤＴ（Ｋ）を決定する。遅延時間付与部ＤＬ（Ｋ）は、１以上の音信号ＳＳ（Ｋ）にそれぞれ１以上の遅延時間ＤＴ（Ｋ）を付与する。スピーカー駆動部ＳＤＲ（Ｋ）は、算出された１以上の遅延時間ＤＴ（Ｋ）だけ、１以上のマイクＭｉｃ（Ｋ）によりそれぞれ取得された１以上の音信号ＳＳ（Ｋ）に基づく音の発生を遅らせる。

そのため、１以上のマイクＭｉｃ（Ｋ）の基準位置Ｐ（図２参照）で音が聴取されたであろう想定されたタイミングと、聴取者が音を基準位置Ｐ（図１０参照）で実際に聴取するタイミングとが一致する。その結果、１以上のスピーカーＳＰ（Ｋ）が発生する音の臨場感を向上させることが可能になる。つまり、上記した本実施の形態の録音装置ＳＲＥＣと音再生装置ＳＲＥＧとを用いれば、聴取者は、臨場感が高い音を聴取することができる。

図１０は、実施の形態１の音再生装置ＳＲＥＧにおける１以上のスピーカーＳＰ（Ｋ）と傾聴者が存在する基準位置Ｐとの位置関係の一例を示す模式図である。

図１０においては、録音装置ＳＲＥＣで録音したときのマイクＭｉｃ（２）の位置を表す〇印が、基準位置Ｐから所定距離、たとえば、Ｘ軸方向およびＺ軸方向に、それぞれ、３ｍだけ離れ、かつ、Ｙ軸方向に、０ｍだけ離れた位置に配置されている。また、図１０においては、スピーカーＳＰ（２）の位置を表す◎が基準位置Ｐから特定距離、たとえば、Ｘ軸方向およびＺ軸方向に、それぞれ、１ｍだけ離れ、かつ、Ｙ軸方向に、０ｍだけ離れた位置に配置されている。スピーカーＳＰ（２）の位置は、録音装置ＳＲＥＣで録音されたマイクＭｉｃ（２）の音を音再生装置ＳＲＥＧで再生するときの位置であり、１以上のスピーカーＳＰ（Ｋ）のそれぞれは、基準位置Ｐから対応する１以上のマイクＭｉｃ（Ｋ）のいずれか１つへ延びる直線上に配置される。

スピーカーＳＰ（Ｋ）の位置情報（ｘ，ｙ，ｚ）の入力方法としては、次のものが考えられる。たとえば、Ｘ軸方向、Ｙ軸方向、およびＺ軸方向の３軸のそれぞれに沿って、まず、聴取者が聴取すると想定される基準位置Ｐから１以上のスピーカーＳＰ（Ｋ）のそれぞれまでの距離をメジャー等で測定する。それにより、Ｘ軸方向、Ｙ軸方向、およびＺ軸方向の３軸方向に沿った距離がそれぞれ測定される。この３軸方向に沿った距離が、ユーザによるスピーカー位置入力部ＳＩＮＰの操作によって、スピーカーＳＰ（Ｋ）の位置情報（ｘ，ｙ，ｚ）として、音再生信号処理部ＳＰ２へ送信される。

また、１以上のスピーカーＳＰ（Ｋ）のそれぞれがＧＰＳ（Global Positioning System）とディスプレイ（図示せず）とを備えている場合には、次のようにしてもよい。たとえば、位置情報（ｘ，ｙ，ｚ）を発信する発信機（図示せず）を基準位置Ｐに設置する。それにより、発信機が発信する基準位置Ｐの情報を１以上のスピーカーＳＰ（Ｋ）が受信し、基準位置Ｐに対する１以上のスピーカーＳＰ（Ｋ）の３軸座標系における座標を位置情報（ｘ，ｙ，ｚ）としてディスプレイに表示してもよい。

さらに、スピーカーＳＰ（Ｋ）のディスプレイに現在のスピーカーＳＰ（Ｋ）の位置と所望のスピーカーＳＰ（Ｋ）の所望の設置予定位置との間の差を表示してもよい。この場合、スピーカーＳＰ（Ｋ）の所望の設置予定位置へスピーカーＳＰ（Ｋ）を移動させることを促すスピーカーＳＰ（Ｋ）の移動すべき方向をスピーカーＳＰ（Ｋ）のディスプレイに表示してもよい。

たとえば、ＦｒｏｎｔＬｅｆｔの位置に対応する音信号（２）に付与されたマイクＭｉｃ（２）の位置情報（－３ｍ，０ｍ，＋３ｍ）と、ＦｒｏｎｔＬｅｆｔの位置にあるスピーカーＳＰ（２）の位置情報（－１ｍ，０ｍ，＋１ｍ）と、を用いる。マイクＭｉｃ（２）の位置情報（－３ｍ，０ｍ，＋３ｍ）とスピーカーＳＰ（２）の位置情報（－１ｍ，０ｍ，＋１ｍ）とから、マイクＭｉｃ（Ｋ）とスピーカーＳＰ（Ｋ）との間の距離Ｄを求める。

距離Ｄは、マイクＭｉｃ（２）の位置情報（Ｘｍ，Ｙｍ，Ｚｍ）、スピーカーＳＰ（２）の位置情報（Ｘｓ，Ｙｓ，Ｚｓ）とすると、√（Ｘｍ＾２＋Ｚｍ＾２）－√（Ｘｓ＾２＋Ｚｓ＾２）である。そのため、具体的には、図９に示される遅延時間付与部ＤＬ（２）におけるＦｒｏｎｔＬｅｆｔチャンネルの遅延時間ＤＴ（Ｋ）は、√（３＾２＋３＾２）－√（１＾２＋１＾２）＝√１８－√２＝２．８２ｍである。

算出された距離Ｄを用いて、音信号（２）の進む時間ｔを、ｔ＝Ｄ［ｍ］／３４０［ｍ／ｓ］として算出する。図９に示される遅延時間付与部ＤＬ（２）における遅延時間ｔは、２．８２［ｍ］／３４０［ｍ／ｓ］＝８．２９［ｍｓ］である。

音再生コントロール部ＣＴ２は、１以上のスピーカーＳＰ（Ｋ）がそれぞれ発する１以上の音信号ＳＳ（Ｋ）のそれぞれついて、１以上の遅延時間ＤＴ（Ｋ）を決定する。遅延時間付与部ＤＬ（Ｋ）は、１以上の音信号ＳＳ（Ｋ）にそれぞれ１以上の遅延時間ＤＴ（Ｋ）を付与する。１以上の遅延時間付与部ＤＬ（Ｋ）によりそれぞれ決定された１以上の遅延時間ＤＴ（Ｋ）だけ、１以上のスピーカーＳＰ（Ｋ）により発する音を遅延させる。

それにより、基準位置ＰからマイクＭｉｃ（Ｋ）へ向かう方向の延長線上の位置から基準位置Ｐへ向かって進行する音に関しては、次のことが言える。つまり、実際にスピーカーＳＰ（Ｋ）から発せられた音が基準位置Ｐへ到達するタイミングが実際の音が基準位置Ｐへ到達するタイミングと一致する。そのため、本実施の形態の録音装置ＳＲＥＣおよび音再生記憶部Ｒ２によれば、１以上のマイクＭｉｃ（Ｋ）によって取得された音を１以上のスピーカーＳＰ（Ｋ）によって再生しても、臨場感が高い音を聴取することができる。

（実施の形態２）
実施の形態２の録音装置ＳＲＥＣおよび音再生装置ＳＲＥＧを説明する。なお、下記において前述の実施の形態の録音装置ＳＲＥＣおよび音再生装置ＳＲＥＧと同様である点については、その説明は繰り返さない。本実施の形態の録音装置ＳＲＥＣおよび音再生装置ＳＲＥＧは、１以上のマイクＭｉｃ（Ｋ）の全体構成が実施の形態１の１以上のマイクＭｉｃ（Ｋ）の全体構成と異なる。

図１１に示されるように、１以上のマイクＭｉｃ（Ｋ）の全体構成においては、中心から放射状に延びた、すなわち、四方八方へ向かって突出した複数の棒状の部材の先端にそれぞれ複数のマイクＭｉｃ（Ｋ）が設置されている。複数のＭｉｃ（Ｋ）それぞれは、仮想の球面上に設けられているものとする。

図１１に示されたマイクＭｉｃ（Ｋ）の全体構成によれば、１以上のマイクＭｉｃ（Ｋ）が設けられた仮想球面の中心位置が、音再生装置ＳＲＥＧによって音が再生されるときの聴取者の聴取位置である基準位置Ｐになる。そのため、１以上の棒状部材の先端の位置が、１以上のマイクＭｉｃ（Ｋ）のそれぞれの位置情報（Ｘ，Ｙ，Ｚ）になる。たとえば、１以上の棒状部材のそれぞれの長さが１０ｃｍである場合には、１以上のマイクＭｉｃ（Ｋ）の座標が基準位置Ｐを中心とした半径１０ｃｍの仮想球面上のいずれかの位置である。

１以上のマイクＭｉｃ（Ｋ）の全体構成の小型化により、１以上の棒状部材のそれぞれの長さがほぼ０ｃｍとなった場合、１以上のマイクＭｉｃ（Ｋ）のそれぞれの位置情報（Ｘ，Ｙ、Ｚ）は（０，０，０）となる。この場合は、１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）がなくても、１以上のマイクＭｉｃ（Ｋ）の方向情報（α，β）があれば、１以上のスピーカーＳＰ（Ｋ）の位置情報（ｘ，ｙ，ｚ）および１以上の遅延時間ＤＴ（Ｋ）を決定することができる。マイクＭｉｃ（Ｋ）の方向情報（α，β）は、図８に示される極座標における回転角αおよび仰角βを用いて表される。

図１２は、実施の形態２の１以上のマイクＭｉｃ（Ｋ）の全体構成を特定可能な情報と１以上のマイクＭｉｃ（Ｋ）の方向情報（α，β）とが関連付けられていることを説明するための図である。

そのため、図１２に示されるように、音信号ＳＳ（Ｋ）としての音声ストリーム
Audio Stream)のデータに付加されている情報は、［一点収録フラグ／多点収録フラグ］および［マイクの方向情報］である。

［一点収録フラグ]および[多点収録フラグ］のいずれの情報が音信号ＳＳ（Ｋ）に付加されるかは、マイク情報入力部ＭＩＮＰを用いて使用者の選択によって決定される。 [一点収録フラグ]は、１以上のマイクＭｉｃ（Ｋ）の全体構成が、図１１に示されるように、ほぼ１点に集約されていると仮定され得るものであることを示すフラグである。[多点収録フラグ］は、１以上のマイクＭｉｃ（Ｋ）の全体構成は、図２に示されるように、１以上のマイクＭｉｃ（Ｋ）の位置が分散されているものであることを示すフラグである。

音信号ＳＳ（Ｋ）に付加されている情報が、[一点収録フラグ]である場合は、その後に続く情報は、[マイクの方向情報]である。[マイクの方向情報]は、基準位置Ｐに対するマイクＭｉｃ（Ｋ）の方向情報(α，β)を示す情報である。方向情報（α，β）は、極座標の一部の要素である回転角αと仰角βで示される。[マイクの方向情報]は、マイク情報入力部ＭＩＮＰを用いて使用者によって入力された情報である。

本実施の形態においては、１以上のマイクＭｉｃ（Ｋ）の方向情報（α，β）は、基準位置Ｐに設定された方位磁針が示す１以上のマイクＭｉｃ（Ｋ）の方向を使用者がマイク情報入力部ＭＩＮＰを用いて入力してもよい。入力された１以上のマイクＭｉｃ（Ｋ）の方向情報（α，β）のそれぞれが、マイク情報入力部ＭＩＮＰから録音コントロール部ＣＴ１を経由して、録音信号処理部ＳＰ１へ各マイクＭｉｃ（Ｋ）の方向情報（α，β）として送信されるものである。

しかしながら、また、１以上のマイクＭｉｃ（Ｋ）がＧＰＳ（Global Positioning System）とディスプレイ（図示せず）とを備えている場合には、次のようにしてもよい。たとえば、その位置情報（Ｘ，Ｙ，Ｚ）を発信する発信機（図示せず）を基準位置Ｐに設置する。それにより、発信機が発信する基準位置Ｐの情報を１以上のマイクＭｉｃ（Ｋ）が受信し、基準位置Ｐの位置情報とＭｉｃ（Ｋ）の位置情報とから、基準位置Ｐに対する１以上のマイクＭｉｃ（Ｋ）の方向情報（α，β）を算出し、ディスプレイに表示してもよい。この１以上のマイクＭｉｃ（Ｋ）の方向情報（α，β）がユーザの操作によってマイク情報入力部ＭＩＮＰから録音信号処理部ＳＰ１へ送信されてもよい。

また、音信号ＳＳ（Ｋ）に付加されている情報が、[多点収録]である場合は、その後に続く情報は、図３および図４に示したように、マイクＭｉｃ（Ｋ）の位置情報である。マイクＭｉｃ（Ｋ）の位置情報は、実施の形態１において説明したように、基準位置Ｐに対するマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）を示す情報である。１以上のマイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）は、実施の形態１と同様の方法により決定されたものである。

図１３は、実施の形態２の音再生装置ＳＲＥＧにおける１以上のスピーカーＳＰ（Ｋ）と傾聴者が存在する基準位置Ｐとの位置関係の一例を示す模式図である。

本実施の形態においては、録音装置ＳＲＥＣのマイクＭｉｃ（Ｋ）の位置は、音再生装置ＳＲＥＧにおける聴取者の位置である基準位置Ｐと同一とみなされ得る。したがって、マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）は、（０，０，０）である。本実施の形態においては、たとえば、音再生装置ＳＲＥＧのスピーカーＳＰ（２）の位置情報（ｘ，ｙ，ｚ）は、基準位置Ｐを（０，０，０）とすると、（－１ｍ，０，１ｍ）であるものとする。

１以上のスピーカーＳＰ（Ｋ）のそれぞれは、基準位置ＰからスピーカーＳＰ（Ｋ）に対応するＫの値を有するマイクＭｉｃ（Ｋ）が存在する位置へ向かう方向に延びる仮想直線の上に配置されている。

たとえば、音再生装置ＳＲＥＧのＦｒｏｎｔＬｅｆｔの位置に設置されたスピーカーＳＰ（２）の位置情報（－１ｍ，０ｍ，＋１ｍ）に基づいて、基準位置ＰとスピーカーＳＰ（２）との間の距離Ｄを求める。それにより、実施の形態１で説明した方法と同様の方法で、遅延時間（２）＝ｔを求める。その後、図８の遅延時間付与部ＤＬ（２）にそれぞれ設定する。それにより、基準位置Ｐで聴取される音のタイミングが実際に聴取される音のタイミングと一致するため、臨場感を向上させることができる。

以上をまとめると次のようになる。

本実施の形態の録音装置ＳＲＥＣは、実施の形態１と同様に、録音信号処理部ＳＰ１および録音記憶部Ｒ１を備えている。録音信号処理部ＳＰ１は、１以上のマイクＭｉｃ（Ｋ）によって取得された１以上の音信号ＳＳ（Ｋ）に、それぞれ、マイク情報入力部ＭＩＮＰによって入力された１以上のマイクＭｉｃ（Ｋ）の方向情報（α，β）を付加する。録音記憶部Ｒ１は、１以上のマイクＭｉｃ（Ｋ）の方向情報（α，β）と１以上の音信号ＳＳ（Ｋ）とを１対１の関係で関連付けて記憶する。つまり、録音信号処理部ＳＰ１は、１以上のマイクＭｉｃ（Ｋ）の方向情報（α，β）と１以上の音信号ＳＳ（Ｋ）とを１対１の関係で関連付けて録音記憶部Ｒ１に記憶させる。

音再生装置ＳＲＥＧは、音再生記憶部Ｒ２、遅延時間付与部ＤＬ（Ｋ）、およびスピーカー駆動部ＳＤＲ（Ｋ）を備えている。音再生記憶部Ｒ２は、１以上の音信号ＳＳ（Ｋ）を記憶する。音再生コントロール部ＣＴ２は、スピーカー位置入力部ＳＩＮＰによって入力された１以上のスピーカーＳＰ（Ｋ）位置情報（ｘ，ｙ，ｚ）に基づいて１以上の音信号ＳＳ（Ｋ）の１以上の遅延時間ＤＴ（Ｋ）を決定する。遅延時間付与部ＤＬ（Ｋ）は、１以上の音信号ＳＳ（Ｋ）に１以上の遅延時間ＤＴ（Ｋ）をそれぞれ付与する。スピーカー駆動部ＳＤＲ（Ｋ）は、１以上の音信号ＳＳ（Ｋ）に対応する実際の１以上の音を、それぞれ、１以上の遅延時間ＤＴ（Ｋ）だけ遅延させて、１以上のスピーカーＳＰ（Ｋ）に発生させる。

音再生記憶部Ｒ２は、１以上のマイクＭｉｃ（Ｋ）の方向情報（α，β）と１以上の音信号ＳＳ（Ｋ）とを１対１の関係で関連付けて記憶している。音再生コントロール部ＣＴ２は、１以上のマイクＭｉｃ（Ｋ）の方向情報（α，β）が音再生記憶部Ｒ２から送信されてきた場合に、１以上のスピーカーＳＰ（Ｋ）位置情報（ｘ，ｙ，ｚ）のみに基づいて、１以上の音信号ＳＳ（Ｋ）の１以上の遅延時間のそれぞれを決定する。なお、音再生記憶部Ｒ２から送信されてきた場合には、音再生記憶部Ｒ２から音再生信号処理部ＳＲ２およびマイク情報読出部ＭＩＲ等の他の部分を経由して送信されてきた場合を含む。音再生コントロール部ＣＴ２は、１以上のマイクＭｉｃ（Ｋ）の方向情報（α，β）が音再生記憶部Ｒ２から送信されてきたか否かを判定する。音再生コントロール部ＣＴ２は、前述の判定を、１以上のマイクＭｉｃ（Ｋ）の方向情報（α，β）に付加された１以上のマイクＭｉｃ（Ｋ）の全体構成の種類を示す構成情報としての[一点収録／他点収録]に基づいて実行する。

本実施の形態の録音装置ＳＲＥＣおよび音再生記憶部Ｒ２によっても、１以上のマイクＭｉｃ（Ｋ）によって取得された音を１以上のスピーカーＳＰ（Ｋ）によって再生しても、臨場感が高い音を聴取することができる。

（実施の形態３）
実施の形態３の録音装置ＳＲＥＣおよび音再生装置ＳＲＥＧを説明する。なお、下記において前述の実施の形態の録音装置ＳＲＥＣおよび音再生装置ＳＲＥＧと同様である点については、その説明は繰り返さない。本実施の形態の録音装置ＳＲＥＣおよび音再生装置ＳＲＥＧは、以下の点で、実施の形態の録音装置ＳＲＥＣおよび音再生装置ＳＲＥＧと異なる。

録音装置ＳＲＥＣで録音された１以上の音信号ＳＳ（Ｋ）に、音再生装置ＳＲＥＧにおいて、ナレーション音声または音楽等の他の１つの音信号（Ｎ＋１）＜Ｎは自然数＞を付加する。この場合、ナレーション音声または音楽等の他の音信号（Ｎ＋１）は、録音装置ＳＲＥＣで録音された音信号ＳＳ（Ｋ）の音声ストリームから独立した別の音声ストリームとして伝送される。これにより、ナレーションまたは音楽の録音装置ＳＲＥＣによって録音された１以上の音信号ＳＳ（Ｋ）との混合を避けることができる。

本実施の形態においては、ナレーション音声または音楽等の他の音信号（Ｎ＋１）に付与するマイクＭｉｃ（Ｎ＋１）の位置情報、すなわち、座標は、基準位置Ｐを表す（０，０，０）である。

ただし、ナレーションまたは音楽等の他の音信号（Ｎ＋１）に、その位置情報（Ｘ，Ｙ，Ｚ）、すなわち、再生座標を付与しなくてもよい。この場合、たとえば、音声ストリーム（Audio Stream）に付与するデータは、図１４に示されるように、［マイク座標フラグ］、[アフレコフラグ]、および［マイク座標データ］である。［マイク座標フラグ］は、後続のマイク座標データを有効にするフラグである。[アフレコフラグ]は、後続の音信号が、１以上のマイクＭｉｃ（Ｋ）によって取得された１以上の音信号ＳＳ（Ｋ）以外の他の音信号（Ｎ＋１）であることを示すフラグであり、後続の[マイク座標データ]を無効化するフラグである。[マイク座標データ]は、マイクＭｉｃ（Ｋ）の座標情報である、つまり、[マイク座標データ]は、Ｍｉｃ（Ｋ）の位置情報（Ｘ,Ｙ，Ｚ）として機能する。

［マイク座標フラグ］がなければ、[アフレコフラグ]に続く[マイク座標データ]は、無効化される。つまり、［マイク座標フラグ］がなければ、マイクＭｉｃ（Ｋ）の位置情報（Ｘ,Ｙ，Ｚ）は、無いものとみなされる。したがって、他の音信号（Ｎ＋１）は、マイクＭｉｃ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）に基づく遅延時間ＤＴ（Ｋ）なしに、スピーカーＳＰ（Ｋ）に他の音を発生させる。

本実施の形態においては、次のことが言える。

音再生記憶部Ｒ２は、１以上の音信号ＳＳ（Ｋ）とは異なる他の音信号ＳＳ（Ｋ）を記憶している。スピーカー駆動部ＳＤＲ（Ｋ）は、他の音信号（Ｎ＋１）に対応する他の音を、前述の１以上の遅延時間ＤＴ（Ｋ）に基づく遅延時間なしに、１以上のスピーカーＳＰ（Ｋ）の少なくともいずれか１つに発生させる。他の音信号（Ｎ＋１）は、他の音信号（Ｎ＋１）を１以上の音信号ＳＳ（Ｋ）から識別可能な識別情報としてのフラグに関連付けて音再生記憶部Ｒ２に記憶されている。

本実施の形態の録音装置ＳＲＥＣにおいては、録音記憶部Ｒ１は、１以上のマイクＭｉｃ（Ｋ）の位置情報または１以上のマイクＭｉｃ（Ｋ）の方向情報と関連付けられていない他の音信号（Ｎ＋１）を記憶している。他の音信号（Ｎ＋１）は、１以上の音信号ＳＳ（Ｋ）から他の音信号（Ｎ＋１）を区別可能な識別情報としてのフラグに関連付けて録音記憶部Ｒ１に記憶されている。

（実施の形態４）
実施の形態４の録音装置ＳＲＥＣおよび音再生装置ＳＲＥＧを説明する。なお、下記において前述の実施の形態の録音装置ＳＲＥＣおよび音再生装置ＳＲＥＧと同様である点については、その説明は繰り返さない。本実施の形態の録音装置ＳＲＥＣおよび音再生装置ＳＲＥＧは、以下の点で、実施の形態の録音装置ＳＲＥＣおよび音再生装置ＳＲＥＧと異なる。

音再生装置ＳＲＥＧによって音を再生するときに、録音装置ＳＲＥＣによって録音された音信号ＳＳ（Ｋ）に、他の音信号（Ｎ＋１）としてのナレーション音声または音楽を付加する。この場合に、ナレーション音声または音楽を出力する位置、すなわち、スピーカーＳＰ（Ｋ）を選択するための処理は、次のようなものである。

スピーカーＳＰ（Ｋ）で音を再生するときに、ナレーションまたは音楽の聴こえてくる位置を指定する場合、ナレーションまたは音楽が聴こえてくる位置情報を「再生座標」として、ナレーションまたは音楽等の他の音信号（Ｎ＋１）に付与する。他の音信号（Ｎ＋１）も音声ストリームである。

この場合、音声ストリームには、図１５に示すように、［マイク座標フラグ］に加え、［再生位置フラグ]および[再生座標］が付されている。本実施の形態の［マイク座標フラグ］は、実施の形態３の［マイク座標フラグ］と同一である。

［再生位置フラグ]、ナレーションまたは音楽等の他の音信号ＳＳ（Ｋ）の再生位置を特定可能な[再生座標]が後続することを示すフラグである。[再生座標］は、他の音信号（Ｎ＋１）の再生位置を特定可能な座標情報である。他の音の再生位置を特定すれば、他の音信号（Ｎ＋１）によって特定された他の音であるナレーションまたは音楽を発するスピーカーＳＰ（Ｋ）の位置が特定される。

［再生座標］は、録音装置ＳＲＥＣのスピーカーＳＰ（Ｋ）の位置情報そのものではなく、音が聞こえている位置を特定可能なデータである。したがって、音が聞こえてくる方向および音の発生源から基準位置Ｐまでの距離を特定できれば、ナレーションまたは音楽情報は、２以上のスピーカーＳＰ（Ｋ）によって生成されてもよい。

ただし、[再生座標]は、音再生装置ＳＲＥＧにおいて追加された他の音信号（Ｎ＋１）によって特定される音が発せられるスピーカーＳＰ（Ｋ）の位置情報（Ｘ，Ｙ，Ｚ）そのものであってもよい。言い換えると、[再生座標]は、音再生装置ＳＲＥＧによって音が再生されるときに、ナレーションまたは音楽等の他の音が発生するスピーカーＳＰ（Ｋ）の座標データ、すなわち、位置情報（ｘ，ｙ，ｚ）であってもよい。

以上から分かるように、音再生記憶部Ｒ２は、１以上の音信号ＳＳ（Ｋ）とは異なる他の音信号（Ｎ＋１）に対応する他の音を発せさせる少なくとも１つのスピーカーＳＰ（Ｋ）を特定可能な情報を記憶している。スピーカー駆動部ＳＤＲ（Ｋ）は、少なくとも１つのスピーカーＳＰ（Ｋ）を特定可能な情報によって特定された少なくとも１つのスピーカーＳＰ（Ｋ）に他の音信号（Ｎ＋１）に対応する他の音を発生させる。

ＤＬ（Ｋ） 遅延時間付与部
ＤＴ（Ｋ）遅延時間
Ｍｉｃ（Ｋ） マイク
ＭＩＮＰ マイク情報入力部
ＳＰ１ 録音信号処理部
ＳＲＥＣ 録音装置
Ｒ１ 録音記憶部
Ｒ２ 音再生記憶部
ＳＤＲ（Ｋ） スピーカー駆動部
ＳＲＥＧ 音再生装置

Claims (15)

1. １以上のマイクによって取得された１以上の音信号に、それぞれ、マイク情報入力部によって入力された前記１以上のマイクの位置情報または前記１以上のマイクの方向情報を付加する録音信号処理部を備え、
   前記録音信号処理部は、前記１以上のマイクの位置情報または前記１以上のマイクの方向情報と前記１以上の音信号とを１対１の関係で関連付けて録音記憶部に記憶させる、録音装置。
2. 前記１以上のマイクの位置情報のそれぞれは、直交座標または極座標を示す座標情報である、請求項１に記載の録音装置。
3. 前記録音信号処理部は、
   前記１以上のマイクの方向情報に、前記マイク情報入力部によって入力された前記１以上のマイクの全体構成の種類を示す構成情報を付加し、
   前記１以上のマイクの方向情報と前記構成情報とを関連付けて前記録音記憶部に記憶させる、請求項１または２に記載の録音装置。
4. 前記録音信号処理部は、前記１以上のマイクの位置情報または前記１以上のマイクの方向情報と関連付けられていない他の音信号を、前記１以上の音信号から前記他の音信号を区別可能な識別情報に関連付けて、前記録音記憶部に記憶させる、請求項１～３のいずれかに記載の録音装置。
5. スピーカー位置入力部によって入力された１以上のスピーカーの位置情報に基づいて、１以上の音信号を記憶する音再生記憶部から送信されてきた前記１以上の音信号の１以上の遅延時間を決定する音再生コントロール部と、
   前記音再生コントロール部によって決定された前記１以上の遅延時間を前記１以上の音信号にそれぞれ付与する遅延時間付与部と、
   前記１以上の音信号に対応する１以上の音を、それぞれ、前記１以上の遅延時間だけ遅延させて、１以上のスピーカーに発生させるスピーカー駆動部と、を備えた、音再生装置。
6. １以上のマイクの位置情報と前記１以上の音信号とは１対１の関係で関連付けられており、
   前記音再生コントロール部は、前記１以上のマイクの位置情報と前記１以上のスピーカーの位置情報とに基づいて、前記１以上の遅延時間のそれぞれを決定する、請求項５に記載の音再生装置。
7. 前記音再生記憶部をさらに備え、
   前記音再生記憶部は、前記１以上のマイクの位置情報のそれぞれを出力した後に、前記１対１の関係で関連付けられた順序で、前記１以上の音信号のそれぞれを出力する、請求項６に記載の音再生装置。
8. 前記音再生記憶部をさらに備え、
   前記音再生記憶部は、前記１対１の関係で関連付けられた順序で、前記１以上のマイクの位置情報のうちのいずれか１つと前記１以上の音信号のうちのいずれか１つとを交互に出力する、請求項６に記載の音再生装置。
9. １以上のマイクの方向情報と前記１以上の音信号とは１対１の関係で関連付けられており、
   前記音再生コントロール部は、前記１以上のマイクの方向情報が前記音再生記憶部から送信されてきた場合に、前記１以上のスピーカーの位置情報のみに基づいて、前記１以上の音信号の１以上の遅延時間のそれぞれを決定する、請求項５に記載の音再生装置。
10. 前記音再生コントロール部は、前記１以上のマイクの方向情報が前記音再生記憶部から送信されてきたか否かを、前記１以上のマイクの方向情報に付加された前記１以上のマイクの全体構成の種類を特定可能な情報に基づいて判定する、請求項９に記載の音再生装置。
11. 前記スピーカー駆動部は、前記１以上の音信号とは異なる他の音信号に対応する他の音を、前記１以上の遅延時間に基づいた遅延時間なしに、前記１以上のスピーカーの少なくともいずれか１つに発生させる、請求項５～９のいずれかに記載の音再生装置。
12. 前記他の音信号は、前記１以上の音信号から識別可能な識別情報に関連付けられている、請求項１１に記載の音再生装置。
13. 前記スピーカー駆動部は、前記少なくとも１つのスピーカーを特定可能な情報によって特定された前記少なくとも１つのスピーカーに前記他の音を発生させる、請求項１１または１２に記載の音再生装置。
14. １以上のマイクによって取得された１以上の音信号に、マイク情報入力部によって入力された前記１以上のマイクの位置情報または前記１以上のマイクの方向情報を、それぞれ付加するステップと、
    前記１以上のマイクの位置情報または前記１以上のマイクの方向情報と前記１以上の音信号とを１対１の関係で関連付けて記憶させるステップと、を備えた、録音方法。
15. スピーカー位置入力部によって入力された１以上のスピーカーの位置情報に基づいて、１以上の音信号の１以上の遅延時間を決定するステップと、
    前記１以上の遅延時間を前記１以上の音信号にそれぞれ付与するステップと、
    前記１以上の音信号に対応する１以上の音を、それぞれ、前記１以上の遅延時間だけ遅延させて、１以上のスピーカーに発生させるステップと、を備えた、音再生方法。

Images