JP4692095B2 - 記録装置、記録方法、再生装置、再生方法、記録方法のプログラムおよび記録方法のプログラムを記録した記録媒体 - Google Patents

Description

本発明は、記録装置、記録方法、再生装置、再生方法、記録方法のプログラム及び記録方法のプログラムを記録した記録媒体に関し、例えばＤＶＤ（Digital Versatile Disk）の光ディスクを用いたビデオカメラに適用することができる。本発明は、撮像結果による映像信号の映像に対応するように、マルチチャンネルによる音声信号の特性を可変することにより、個人ユーザーがビデオカメラ等によりマルチチャンネルによる音声信号を記録する場合でも、従来に比して高い臨場感によりマルチチャンネルによる音声信号を楽しむことができるようにする。

従来、ＤＶＤの光ディスクにより提供される映像コンテンツは、５．１チャンネルにより音声信号が記録されており、これによりこの５．１チャンネルの音声信号をマルチチャンネルにより再生して、臨場感の高いサラウンド音場を作成することができる。

これに対してＤＶＤの光ディスクを用いたビデオカメラでも、内蔵のマイクロホン等により音声信号を取得して５．１チャンネルの音声信号を生成し、この５．１チャンネルの音声信号を映像信号と共に光ディスクに記録するものが提供されている。これによりこのビデオカメラを使用すれば、個人ユーザーでも、簡易にマルチチャンネルによる音声信号を映像信号と共に記録することができる。

このような映像信号及び音声信号の記録媒体への記録に関して、例えば特開２０００−２９９８４２号公報には、複数のマイクロホンによりマルチチャンネルの音声信号を取得し、このマルチチャンネルの音声信号を多重化して映像信号と共に記録する方法が提案されている。また特開２０００−３５４１９０号公報には、ステレオによる音声信号の記録に関して、撮影モードに応じて音声信号の処理モードを切り換えることにより、撮影モードに適した音声信号処理を施して音声信号を記録する方法が提案されている。

ところでＤＶＤの光ディスクによる映像コンテンツは、高い臨場感を確保することができるように、各シーンに応じて音声信号が種々に編集処理されて記録されている。なおここでこのような編集処理は、特定周波数帯域の強調、効果音の挿入等である。

これによりこの種の映像コンテンツを見慣れたユーザーにとって、ビデオカメラにより個人ユーザーが記録したマルチチャンネルの音声信号は、臨場感に欠ける物足りないものになってしまう問題がある。
特開２０００−２９９８４２号公報 特開２０００−３５４１９０号公報

本発明は以上の点を考慮してなされたもので、個人ユーザーがビデオカメラ等によりマルチチャンネルによる音声信号を記録する場合でも、従来に比して高い臨場感によりマルチチャンネルによる音声信号を楽しむことができる記録装置、記録方法、再生装置、再生方法、記録方法のプログラム及び記録方法のプログラムを記録した記録媒体を提案しようとするものである。

上記課題を解決するために、本発明のある観点によれば、複数のマイクロホンを含んで構成され、各マイクロホンに入力される音声から入力音声信号を出力するマイクロホンユニットと、前記入力音声信号に基づいて複数のチャンネルの出力音声信号を生成する際に、各チャンネルの指向性に応じて第１の遅延時間を各入力音声信号に与える可変遅延器を備えるベクトル領域可変部と、前記マイクロホンに前記音声が入力される際の記録モードに応じて各チャンネルの前記出力音声信号が時間差をもって出力されるように、該複数の出力音声信号に対して選択的に第２の遅延時間を与える時間領域可変部と、を備える記録装置が提供される。

また本発明の別の観点によれば、複数のマイクロホンに入力される音声に基づいて各マイクロホンから入力音声信号を出力する入力音声信号処理ステップと、前記入力音声信号処理ステップにより出力される入力音声信号に基づいて複数のチャンネルの出力音声信号を生成する際に、各チャンネルの指向性に応じて第１の遅延時間を各入力音声信号に与える出力音声信号生成ステップと、前記マイクロホンに前記音声が入力される際の記録モードに応じて各チャンネルの前記出力音声信号が時間差をもって出力されるように、複数の前記出力音声信号に対して選択的に第２の遅延時間を与える出力音声信号遅延処理ステップと、を含む記録方法が提供される。

また本発明の別の観点によれば、複数のマイクロホンに入力される音声に基づいて各マイクロホンから入力音声信号を出力する入力音声信号処理と、前記入力音声信号処理により出力される入力音声信号に基づいて複数のチャンネルの出力音声信号を生成する際に、各チャンネルの指向性に応じて第１の遅延時間を各入力音声信号に与える出力音声信号生成処理と、前記マイクロホンに前記音声が入力される際の記録モードに応じて各チャンネルの前記出力音声信号が時間差をもって出力されるように、複数の前記出力音声信号に対して選択的に第２の遅延時間を与える出力音声信号遅延処理と、をコンピュータに実行させる記録方法のプログラムが提供される。

また本発明の別の観点によれば、複数のマイクロホンを含んで構成され、各マイクロホンに入力される音声から入力音声信号を出力するマイクロホンユニットと、前記入力音声信号に基づいて複数のチャンネルの出力音声信号を生成する際に、各チャンネルの指向性に応じた第１の遅延時間を各音声信号に与える可変遅延器を備えるベクトル領域可変部と、前記第１の遅延時間を与えられた出力音声信号および前記マイクロホンに前記音声が入力される際の記録モードに関する情報を記録媒体に記録する記録部と、前記記録媒体に記録されている出力音声信号を再生する際に、前記記録媒体に記録されている記録モードに応じて、前記記録媒体に記録されている複数の前記出力音声信号が時間差をもって再生されるように、該複数の出力音声信号に対して選択的に第２の遅延時間を与えて再生する再生部と、を備える再生装置が提供される。

また本発明の別の観点によれば、複数のマイクロホンに入力される音声に基づいて各マイクロホンから入力音声信号を出力する入力音声信号処理ステップと、前記入力音声信号処理ステップにより出力される入力音声信号に基づいて複数のチャンネルの出力音声信号を生成する際に、各チャンネルの指向性に応じて第１の遅延時間を各入力音声信号に与える出力音声信号生成ステップと、前記第１の遅延時間を与えられた出力音声信号および前記マイクロホンに前記音声が入力される際の記録モードに関する情報を記録媒体に記録する記録ステップと、前記記録媒体に記録されている出力音声信号を再生する際に、前記記録媒体に記録されている記録モードに応じて、前記記録媒体に記録されている複数の前記出力音声信号が時間差をもって再生されるように、該複数の出力音声信号に対して選択的に第２の遅延時間を与えて再生する再生ステップと、を含む再生方法が提供される。

請求項１の構成により、マイクロホンユニットは、複数のマイクロホンを含んで構成され、各マイクロホンに入力される音声から入力音声信号を出力することができる。また、ベクトル領域可変部は、可変遅延器を備えることにより、入力音声信号に基づいて複数のチャンネルの出力音声信号を生成する際に、各チャンネルの指向性に応じて第１の遅延時間を各入力音声信号に与えることができる。また、時間領域可変部は、マイクロホンに前記音声が入力される際の記録モードに応じて各チャンネルの出力音声信号が時間差をもって出力されるように、該複数の出力音声信号に対して選択的に第２の遅延時間を与えることができる。これにより個人ユーザーがビデオカメラ等によりマルチチャンネルによる音声信号を記録する場合でも、従来に比して高い臨場感によりマルチチャンネルによる音声信号を楽しむことができる。

本発明によれば、個人ユーザーがビデオカメラ等によりマルチチャンネルによる音声信号を記録する場合でも、従来に比して高い臨場感によりマルチチャンネルによる音声信号を楽しむことができる。

以下、適宜図面を参照しながら本発明の実施例を詳述する。

（１）実施例の構成
図２は、本発明の実施例に係るビデオカメラを示すブロック図である。このビデオカメラ１は、所望の被写体による映像信号を音声信号と共に光ディスク等の記録媒体に記録し、またこの記録媒体に記録された音声信号及び映像信号を再生して出力する。

すなわちこのビデオカメラ１において、レンズ２は、マイクロコンピュータ（マイコン）３の制御によるズーム倍率、フォーカスにより入射光を集光し、撮像素子４の撮像面に光学像を形成する。絞り５は、マイクロコンピュータ３の制御により可動してこのレンズ２による光量を可変する。撮像素子４は、マイクロコンピュータ３により指示されるシャッター速度により、撮像面に形成された光学像の撮像結果を出力する。

カメラ系信号処理部６は、撮像素子４から出力される撮像結果を入力し、相関二重サンプリング処理、自動利得制御による信号レベル補正処理、オートホワイトバランス調整処理、手振れ補正処理、ガンマ補正処理等の各種処理を実行する。またマイクロコンピュータ３の制御により、ユーザーにより設定された撮影モードに応じて、撮像結果の画質、アスペクト比を補正し、赤色色信号、緑色色信号、青色色信号による映像信号ＳＶをこれら一連の処理結果より生成して出力する。また自動絞り調整、自動フォーカス制御に必要な情報を取得してマイクロコンピュータ３に通知する。

マイクロホンユニット７は、マルチチャンネルによる音声信号を取得する複数のマイクロホンであり、この実施例では、それぞれ前方及び後方に指向性を有するアレイマイクロホン７Ａ及び７Ｂが適用される。ここでアレイマイクロホン７Ａ及び７Ｂは、複数の無指向性マイクロホンを一定のピッチにより配置して形成され、この実施例において、この配列が水平方向に直線状に設定される。アレイマイクロホン７Ａ及び７Ｂは、各無指向性マイクロホンで取得される音声信号を出力する。

音声信号処理部８は、このアレイマイクロホン７Ａ及び７Ｂの各無指向性マイクロホンから出力される音声信号を処理して５．１チャンネルの音声信号ＳＡを生成する。この一連の処理において、音声信号処理部８は、マイクロコンピュータ３から出力される制御信号により、音声信号ＳＡの特性を可変する。この実施例では、この特性の可変が、音声信号ＳＡのベクトルドメイン、周波数ドメイン、時間ドメインで、映像信号ＳＶに設定された撮影モードに応じて実行され、これにより映像信号ＳＶに応じたサラウンド音響効果をこの音声信号ＳＡに付加する。これによりビデオカメラ１では、撮影モードによる映像信号の映像に対応するように、マルチチャンネルの音声信号によるサラウンド音場を可変する。

記録系９は、カメラ系信号処理部６、音声信号処理部８から出力される映像信号ＳＶ及び音声信号ＳＡをそれぞれエンコードした後、誤り訂正符号等を付加して記録媒体への記録に適したフォーマットに変換し、その変換結果によるストリーミング信号を出力する。

記録再生手段１１は、マイクロコンピュータ３の制御により動作を切り換え、記録時、記録系９から出力されるストリーミング信号を選択回路１０を介して入力し、このストリーミング信号を記録媒体に記録する。また再生時、記録媒体に記録されたストリーミング信号を再生して出力する。なおこの実施例において、この記録媒体は、ＤＶＤによる光ディスクであるが、このようなＤＶＤによる光ディスクに代えて、種々の光ディスクを適用することができ、また光ディスクに代えて、メモリカード、磁気ディスク等、種々の記録媒体を広く適用することができる。

再生系１２は、マイクロコンピュータ３の制御により動作を切り換え、再生時、記録再生手段１１で再生されるストリーミング信号を選択回路１０を介して入力し、このストリーミング信号から映像信号ＳＶ及び音声信号ＳＡを再生する。このビデオカメラ１は、この再生した映像信号ＳＶを内蔵のモニタにより表示し、また外部出力端子により外部のモニタ装置に出力する。またこの再生した音声信号ＳＡを増幅回路１３により所定利得で増幅して外部の音響機器に出力し、また内蔵のスピーカより出力する。

マイクロコンピュータ３は、このビデオカメラ１の動作を制御する制御手段であり、各種操作子、タッチパネルの操作に応動して各部の動作を制御する。この制御において、マイクロコンピュータ３は、記録時、カメラ系信号処理部６から得られる自動絞り調整、自動フォーカス調整に必要な情報により絞り５、レンズ２を制御し、これにより自動絞り制御、自動フォーカス制御の処理を実行する。

さらにマイクロコンピュータ３は、ユーザーにより指示された撮影モード、撮影時の条件により、カメラ系信号処理部６における画質補正、画角補正等を指示し、また音声信号処理部８における音声信号の補正を制御する。

ここで撮影モードは、撮影のシーンに応じてアスペクト比、画質を設定するモードであり、例えば図３に示すように、このビデオカメラ１では、ＨＤ（High Definition ）モード、ＳＤ（Standard Definition ）モード、人物モード、風景／スタジアムモード等が設けられる。マイクロコンピュータ３は、ユーザーによる操作に応動してモニタ装置に撮影モードの一覧を表示してユーザーによるタッチパネルの操作を受け付けることにより、これら撮影モードの設定を受け付ける。

ここでＨＤモードは、ＨＤＶ（High Definition Video ）規格ビデオテープレコーダフォーマットにより映像信号を記録するモードであり、１６：９のアスペクト比により撮像結果を記録する。ＳＤモードは、ＤＶ（Digital Video ）規格ビデオテープレコーダフォーマットにより映像信号を記録するモードであり、４：３のアスペクト比により撮像結果を記録する。マイクロコンピュータ３は、これらＨＤモード、ＳＤモードの設定によりカメラ系信号処理部６の動作を制御し、これにより映像信号ＳＶのアスペクト比を切り換え、さらには各部の動作を制御してこれら各モードによる映像信号を記録する。

また人物モードは、人物の撮影に適したモードであり、ポートレートモードなどとも呼ばれる。マイクロコンピュータ３は、人物モードに設定されると、被写界深度が浅くなるように、絞り、シャッター速度を設定し、また人物の撮影に適した画質により撮像結果を画質補正するようにカメラ系信号処理部６の動作を制御する。

これに対して風景／スタジアムモードは、遠景の撮影に適したモードであり、マイクロコンピュータ３は、このモードに設定されると、被写界深度が深くなるように、絞り、シャッター速度を設定し、また風景の撮影に適した画質により撮像結果を画質補正するようにカメラ系信号処理部６の動作を制御する。

これに対して音楽／ホールモード、祭り／ハウスモードは、それぞれホールにおける音楽会等の撮影、お祭り、家庭内の撮影に適したモードであり、マイクロコンピュータ３は、このモードに設定されると、このようなホールにおける撮影、家庭内の撮影に適した画質により撮像結果を画質補正するようにカメラ系信号処理部６の動作を制御する。

またシネマＡモード及びシネマＢモードは、それぞれ最新の劇場映画、古い劇場映画の雰囲気により撮影するモードである。マイクロコンピュータ３は、シネマＡモードに設定されると、カメラ系信号処理部６の動作を制御して映像信号ＳＶのアスペクト比を１６：９に設定する。またシネマＢモードに設定されると、カメラ系信号処理部６の動作を制御して映像信号ＳＶのアスペクト比を４：３に設定し、さらには色相を補正してセピア色の色味により映像信号ＳＶを出力する。

これに対してスポーツ／レースモードは、動きの激しい被写体の撮影に適したモードであり、マイクロコンピュータ３は、このモードに設定されると、シャッター速度を短く設定し、またスポーツ、レースの撮影に適した画質により撮像結果を画質補正するようにカメラ系信号処理部６の動作を制御する。

また夜景モード、花火モードは、それぞれ夜景、花火の撮影に適したモードであり、マイクロコンピュータ３は、このモードに設定されると、同様にしてそれぞれ夜景、花火の撮影に適した撮影の条件、画質補正モードに設定する。

これら映像系の設定に対応するように、マイクロコンピュータ３は、音声信号ＳＡについて、ベクトルドメイン、周波数ドメイン、時間ドメインにおける補正を音声信号処理部８に指示する。

ここで図４は、このビデオカメラ１による収音特性の説明に供する略線図である。このビデオカメラ１は、撮影者（ビデオカメラ１）を基準に、撮影者の前方方向に指向性を有する指向性パターン１による音声信号、撮影者の左前方方向に指向性を有する指向性パターン２による音声信号、撮影者の右前方方向に指向性を有する指向性パターン３による音声信号、撮影者の左後方方向に指向性を有する指向性パターン４による音声信号、撮影者の右後方方向に指向性を有する指向性パターン５による音声信号により、５．１チャンネルの音声信号のうちの５チャンネルの音声信号を形成する。また全方向の指向性を有する指向性パターン６による音声信号により、５．１チャンネルの音声信号のうちの０．１チャンネルの音声信号を形成する。

ここでこの５チャンネルの音声信号に係る指向性パターン１〜５は、方向性を有するベクトルとして表すことができることにより、この実施例では、それぞれ指向性パターン１〜５をＦＲＴ（Ｆｒｏｎｔ）ベクトル、ＦＬ（Ｆｒｏｎｔ Ｌｅｆｔ）ベクトル、ＦＲ（Ｆｒｏｎｔ Ｒｉｇｈｔ）ベクトル、ＲＬ（Ｒｅａｒ Ｌｅｆｔ）ベクトル、ＲＲ（Ｒｅａｒ Ｒｉｇｈｔ）ベクトルと呼ぶ。これに対して０．１チャンネルの音声信号は、１００〔Ｈｚ〕以下程度の低音の重量感を得るためのものであり、方向性を有さず、大きさだけが問題となる。これによりこの指向性パターン６をＬＦ（Ｌｏｗ Ｆｒｅｑｕｅｎｃｙ）スカラーと呼ぶ。なお図３等においては、これらベクトル、スカラーの表記に係る符号ＦＲＴ、ＦＬ、ＦＲ、ＲＬ、ＲＲ、ＬＦにより各チャンネルの音声信号を示す。

図５に示すように、この実施例では、レンズ２の光軸の延長する正面方向を撮影方向と定義して、この撮影方向を基準にして、ＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルの向きをそれぞれ角度θａ、θｂ、θｃ、θｄ、θｅにより表わす。ベクトルドメインにおける補正は、この図５に示す角度θａ、θｂ、θｃ、θｄ、θｅの全て又は一部を変化させることにより、又は図６において指向性パターンＡ〜Ｃにより示すように、ＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルによる指向性の全て又は一部の鋭さを変化させることにより、又は指向性パターンの大きさに対応する収音レベルを相対的に変化させることにより、実行される。

なおここでこの角度θａ、θｂ、θｃ、θｄ、θｅは、撮影時の条件としては何ら規定されておらず、専ら、製作者のノウハウ等に委ねられている。しかしながら再生時については、ＩＴＵ（International Telecommunication Union ）−Ｒ規格により推奨条件として定義されている。ここでこの推奨条件は、角度θａ、θｂ、θｃ、θｄ、θｅがそれぞれ０度、３０度、３０度、１００〜１２０度、１００〜１２０度とされている。

これに対して周波数ドメインにおける補正は、ＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトル、ＬＦスカラーに対応する音声信号の全て又は一部の周波数特性を変化させることにより実行される。

また時間ドメインにおける補正は、これらＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに対応する音声信号に選択的に遅延時間を設けることにより実行される。なおこの時間ドメインにおける補正は、いわゆるハース効果である人間の聴覚における先行音効果を利用するものであり、遅延処理を施さない耳に早く到達した方向の音が、遅延処理を施して遅れて到達する音に比して、良く聞こえる現象を利用するものである。

マイクロコンピュータ３は、このようなベクトルドメイン、周波数ドメイン、時間ドメインにおける補正を、標準の設定を基準にして実行し、この実施例では、このベクトルドメインにおける標準の設定に、ＩＴＵ−Ｒ規格による推奨条件が適用される。但しＲＬベクトル及びＲＲベクトルに係る角度θｄ及びθｅは、１１０度を標準の設定とする。これにより図３及び以下の説明において、標準の設定を基準にして各要素の操作を説明し、また特に言及の無いドメインの要素にあっては、この標準の設定に保持される。

すなわちマイクロコンピュータ３は（図３）、ＨＤモードに設定されると、ＦＬベクトル、ＦＲベクトルに係る角度θｂ及びθｃが大きくなるように、音声信号を補正し、これによりアスペクト比１６：９による映像に対応するように、正面方向から到来する音の横方向の広がりを増大させる。またＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに対応する音声信号の周波数特性を広帯域化し、これにより周波数特性の上でも広がりのある音に設定する。またＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに対応する音声信号に何ら時間遅れを設定することなく、これら音声信号を記録し、これによりこれらＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトル、ＬＦスカラーによる音声信号の音響特性を設定する。

これに対してＳＤモードに設定されると、マイクロコンピュータ３は、ＦＬベクトル、ＦＲベクトルに係る角度θｂ及びθｃが小さくなるように、音声信号を補正し、これによりアスペクト比４：３による映像に対応するように、正面方向から到来する音の横方向の広がりを減少させる。またＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに対応する音声信号の周波数特性を、通過帯域幅の狭い標準の特性に設定し、これにより周波数特性の上でも音の広がりを低減する。またＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに対応する音声信号に何ら時間遅れを設定することなく、これら音声信号を記録し、これによりこれらＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトル、ＬＦスカラーによる音声信号の音響特性を設定する。

また人物モードに設定されると、ＦＲＴベクトルに係る指向性を鋭いものとすると共に、このＦＲＴベクトルに係る音声信号の収音レベルを増大させる。またＦＬベクトル、ＦＲベクトルに係る角度θｂ及びθｃが小さくなるように設定し、またＲＬベクトル、ＲＲベクトルに係る角度θｄ及びθｅが小さくなるように設定し、これらによりサラウンド効果を弱めて前方に位置する人物の音声を明瞭に取得する。またＦＲＴベクトルに対応する音声信号の周波数特性を、周波数４００〔Ｈｚ〕〜４〔ｋＨｚ〕付近の帯域を強調するように設定し、これによっても音声を明瞭にする。またＦＲＴベクトルに対応する音声信号に比して、他のベクトルに対応する音声信号を１〔ｍｓｅｃ〕〜３０〔ｍｓｅｃ〕だけ遅延させるようにし、これによっても前方から到来する音声信号が、他の方向からの音声信号に比して良く聞こえるようにする。これらによりマイクロコンピュータ３は、この場合、サラウンド効果を低減させて、前方から到来する音声信号を主体的に収音する。

また風景／スタジアムモードに設定されると、この場合、スタジアム内などの広大なシーン撮影時に適した撮影モードであり、音源が比較的に遠くにあり、環境音などが周囲全体から入射するため、サラウンド効果を最大にする必要がある。これによりこの場合、マイクロコンピュータ３は、ＦＲＴベクトルに係る音声信号の収音レベルを低減させる。また人物モードに比して、ＦＬベクトル、ＦＲベクトルに係る角度θｂ及びθｃ、ＲＬベクトル、ＲＲベクトルに係る角度θｄ及びθｅが大きくなるように設定し、これらによりサラウンド効果を高めて音の広がりを増大させる。また各ベクトルに対応する音声信号の周波数特性をＳＤモードの場合と同様に設定し、ＲＬベクトル、ＲＲベクトルに対応する音声信号に比して、残りのベクトルに対応する音声信号を１〔ｍｓｅｃ〕〜３０〔ｍｓｅｃ〕だけ遅延させるようにする。これらによりマイクロコンピュータ３は、サラウンド効果を十分に確保する。

これに対して音楽／ホールモードに設定されると、この場合、被写体までの距離が、人物モードの場合と風景／スタジアムモードの場合との中間の距離の場合の撮影時に適した撮影モードであり、これにより前方から到来する音声信号を主体的に収音しつつ、ある程度のサラウンド効果を確保することが必要になる。このためマイクロコンピュータ３は、ＦＲＴベクトルに係る音声信号の収音レベルを、人物モードの場合と風景／スタジアムモードとの中間のレベルに設定する。またＦＲＴベクトルに係る指向性パターンを人物モードの場合と同程度の鋭いものとする。またＦＬベクトル、ＦＲベクトルに係る角度θｂ及びθｃが大きくなるように設定する。また各ベクトルに係る音声信号の周波数特性を広帯域化し、ＦＲＴベクトル、ＦＬベクトル、ＦＲベクトルに対応する音声信号に比して、残りのベクトルに対応する音声信号を１〔ｍｓｅｃ〕〜３０〔ｍｓｅｃ〕だけ遅延させるようにする。

また祭り／ハウスモードに設定されると、この場合、人物モードまででは無いものの、ある程度近景での撮影時に適した撮影モードであることにより、音源が比較的に近距離にあり、全方向から平均的に収音して臨場感を確保することが必要になる。これによりマイクロコンピュータ３は、全ベクトルに対応する音声信号の収音レベルを標準に設定し、これによりこれら収音レベルを均一に設定する。また全ベクトルに係る指向性パターンを標準に設定する。また全ベクトルに対応する音声信号の周波数特性を標準に設定し、各ベクトルに対応する音声信号に何ら時間遅れを設定することなく、これら音声信号を記録する。

これに対してシネマＡモードに設定されると、この場合、映画館における迫力、臨場感を確保することができるように、音声信号ＳＡを補正する。すなわちマイクロコンピュータ３は、ＦＲＴベクトルに係る指向性パターンを鋭いものとし、他のベクトル係る指向性パターンを標準に設定し、これによりセリフに対応する被写体の音声を主体的に収音する。またアスペクト比１６：９による映像信号に対応するように、ＦＬベクトル、ＦＲベクトルに係る角度θｂ及びθｃが大きくなるように設定し、これにより音の広がりを確保する。またＬＦスカラーに係る音声信号の収音レベルを増大させ、これにより低音を強調して迫力を増大させる。またＦＲＴベクトルに係る音声信号について、人物モードの場合と同様の周波数特性の設定により、また他のベクトルに係る音声信号について、標準の周波数特性に設定することにより、被写体の音声を明瞭に取得する。またＲＬベクトル、ＲＲベクトルに係る音声信号を遅延させ、これによっても被写体の音声を明瞭に取得する。

またシネマＢモードに設定されると、オールドムービーに対応するように、シネマＡモードに比してサラウンド効果を低下させて、前方がら到来する音声を主体的に取得する。すなわちこの場合、マイクロコンピュータ３は、ＦＲＴベクトルに係る指向性パターンを鋭いものとし、他のベクトル係る指向性パターンを標準より鈍いものとする。またＲＬベクトル、ＲＲベクトルに係る音声信号の収音を中止し、またＦＬベクトル、ＦＲベクトルに係る角度θｂ及びθｃが小さくなるように設定し、これらによりサラウンド効果を低下させて被写体の音声を主体的に収音する。またＦＲＴベクトル、ＦＬベクトル、ＦＲベクトルに係る音声信号の周波数特性を狭帯域化する。

またスポーツ／レースモードに設定されると、音像の移動感を強調する。すなわちこの場合、マイクロコンピュータ３は、全ベクトルに係る音声信号の収音レベルを標準に設定し、これによりこれら音声信号の収音レベルを均一に設定する。また全ベクトルに係る指向性パターンを鋭いものとする。また全ベクトルに係る音声信号、ＬＦスカラーに係る音声信号について、若干低音を強調し、また遅延時間を設けないようにする。

また夜景モードに設定されると、マイクロコンピュータ３は、ＦＲＴベクトルに係る音声信号の収音レベルを小さくし、またＦＬベクトル、ＦＲベクトルに係る角度θｂ及びθｃ、ＲＬベクトル、ＲＲベクトルに係る角度θｄ及びθｅを大きくし、これにより音の広がりを確保する。また全てのベクトルに係る音声信号について、中域を強調するように周波数特性を設定する。

また花火モードに設定されると、マイクロコンピュータ３は、ＦＲＴベクトルに係る音声信号の収音レベルを標準に設定し、指向性パターンを鋭いものとする。またＦＬベクトル、ＦＲベクトルに係る角度θｂ及びθｃを大きくする。また全てのベクトルに係る音声信号について、低音を強調し、ＲＬベクトル、ＲＲベクトルに係る音声信号を遅延させて、前方方向に定位感をもたせる。

またさらに図７に示すように、マイクロコンピュータ３は、ユーザーによる各種撮影の条件によっても、このようなベクトルドメイン、周波数ドメイン、時間ドメインにおける補正を可変する。

すなわちマイクロコンピュータ３は、ユーザーによる操作子の操作に応動してレンズ２のズームレンズを可動するようにして、ズーム倍率を監視する。この監視結果により、現在の撮影の条件が所定の基準値よりズーム倍率の低い広角による撮影の場合、画角の拡大に応じて、ＦＲＴベクトルに係る音声信号の収音レベルを低下させ、また指向性パターンを標準から徐々に鈍いものとする。またＦＬベクトル、ＦＲベクトルに係る角度θｂ及びθｃを徐々に大きくする。全てのベクトルに係る音声信号の周波数特性を標準に設定し、遅延時間が設けないように設定する。

またこれとは逆に、現在の撮影の条件が所定の基準値よりズーム倍率の高い望遠による撮影の場合、又はマクロ撮影の場合、ズーム倍率に応じて、ＦＲＴベクトルに係る音声信号の収音レベルを増大させ、また指向性パターンを標準から徐々に鋭いものとする。またＦＬベクトル、ＦＲベクトルに係る角度θｂ及びθｃを徐々に小さくする。また全てのベクトルに係る音声信号の周波数特性を標準に設定し、倍率に応じてＲＬベクトル、ＲＲベクトルに係る音声信号の遅延時間を徐々に増大させる。これらによりマイクロコンピュータ３は、ズーム倍率に応じて音の広がりを変化させ、またこの音の広がりとは逆に、正面方向に係る主体的な録音を変化させる。

またマイクロコンピュータ３は、カメラ系信号処理部６におけるオートホワイトバランス調整に係る各色信号の利得より、被写体の照明に係る色温度を判定し、屋内における撮影か、屋外における撮影かを判定する。ここで屋内における撮影の場合、マイクロコンピュータ３は、全ベクトルに係る指向性パターンを鋭いものとし、また全ベクトルに係る音声信号の周波数特性を広帯域に設定し、ＲＬベクトル、ＲＲベクトルに係る音声信号に遅延時間を設定する。これによりマイクロコンピュータ３は、屋内の撮影における周囲からの音響反射を十分に取得できるように設定して、臨場感を向上する。

またこれとは逆に、屋外における撮影の場合、マイクロコンピュータ３は、全ベクトルに係る指向性パターンを標準のものとし、また全ベクトルに係る音声信号の周波数特性については、低域をカットして風切音を収音しないようにする。また全ベクトルに係る音声信号に遅延時間を設けないようにする。

またマイクロコンピュータ３は、カメラ系信号処理部６から得られる絞りの制御に必要な情報により絞り調整するようにして、現在の絞り量とズーム倍率（焦点距離）とから被写界深度を計算する。またこの被写界深度が基準値より浅い場合、正面方向の特定の被写体を撮影している場合であることが多いことにより、被写界深度が浅くなればなる程、ＦＲＴベクトルに係る音声信号の収音レベルを増大させ、また指向性パターンを標準から徐々に鋭いものとする。またＦＬベクトル、ＦＲベクトルに係る角度θｂ及びθｃを徐々に小さくする。また全てのベクトルに係る音声信号の周波数特性を標準に設定し、倍率に応じてＲＬベクトル、ＲＲベクトルに係る音声信号の遅延時間を徐々に増大させる。

また被写界深度が基準値より深い場合、この場合、正面方向の全範囲を撮影している場合であることが多いことにより、被写界深度が深くなればなる程、ＦＲＴベクトルに係る音声信号の収音レベルを低減させ、また指向性パターンを徐々に標準の設定に近づける。またＦＬベクトル、ＦＲベクトルに係る角度θｂ及びθｃを徐々に大きくする。また全てのベクトルに係る音声信号の周波数特性を標準に設定し、遅延時間は設けないようにする。

またマイクロコンピュータ３は、カメラ系信号処理部６における手振れ補正の処理の監視により、現在の撮影が手持ち撮影か、三脚等に固定した撮影か判断する。なおここでユーザーによる手振れ補正処理のオンオフ操作により、これら手持ち撮影か否かの判定を実行するようにしてもよい。ここで手持ち撮影の場合、マイクロコンピュータ３は、全ベクトルに係る指向性パターンを標準の設定又は鈍いものとし、これにより手振れによる音像の揺らぎを防止する。またこの場合、全ベクトルに係る音声信号の周波数特性を標準に設定し、遅延時間は設けないようにする。

これに対して三脚等に固定した撮影であると判断される場合、マイクロコンピュータ３は、全ベクトルに係る指向性パターンを鋭いもの又は標準に設定し、これにより音の到来方向に係る方向性を十分に感知できるようにする。また全ベクトルに係る音声信号の周波数特性を広帯域化し、遅延時間は設けないようにする。

またマイクロコンピュータ３は、ユーザーによる操作子の操作によりナレーションモードの設定を受け付ける。ここでナレーションモードは、カメラの後方に位置する撮影者が撮影と同時に音声ナレーションを付加するような場合に適した撮影モードである。この場合、マイクロコンピュータ３は、ＲＬベクトル、ＲＲベクトルに係る音声信号の収音レベルを増大させ、またＲＬベクトル、ＲＲベクトルに係る指向性パターンを鋭いものとする。またＲＬベクトル、ＲＲベクトルに係る角度θｄ及びθｅを大きくする。またＲＬベクトル、ＲＲベクトルに係る音声信号の周波数特性について、音声の周波数帯域を強調し、またＦＲＴベクトル、ＦＬベクトル、ＦＲベクトルに係る音声信号に遅延時間を設ける。これらによりマイクロコンピュータ３は、後方からのナレーションに係る音声信号を十分に把握可能に記録する。

なお実際上の撮影にあっては、図３及び図７に示す各種の項目が重複されてユーザーにより選択、指示されることにより、マイクロコンピュータ３は、各項目について上述した設定を基本の設定として、ユーザーにより選択、指示された各種の項目を総合的に判断して、ベクトルドメイン、周波数ドメイン、時間ドメインの可変量を設定する。なおこのような総合的な判定にあっては、各項目に係る各種の可変量を変数により表現して、ユーザーにより選択、指示された各種の項目について変数を集計し、この集計値により対応する可変量を設定する場合等、種々の設定方法を広く適用することができる。またユーザーによる設定により、これら図３及び図７について上述した各種の項目について優先順位を設定し、この優先順位の高い側の設定を優先する場合等、特定の項目に係る設定以外、無視するようにしてもよい。

図１は、このようなマイクロコンピュータ３の音声信号に係る制御対象である音声信号処理部８の構成を詳細に示すブロック図である。音声信号処理部８において、制御部２０は、マイクロコンピュータ３の指示によりベクトル領域可変部２１の動作を制御する。ベクトル領域可変部２１は、マイクロホンユニット７から出力される音声信号を演算処理して５．１チャンネルの音声信号ＦＲＴ、ＦＬ、ＦＲ、ＲＬ、ＲＲ、ＬＦを生成する。この処理において、ベクトル領域可変部２１は、各ベクトルに係る角度θａ〜θｅ、指向性パターン、収音レベルをマイクロコンピュータ３により指示された設定により出力する。

すなわち図８に示すように、ベクトル領域可変部２１は、ベクトルに係る各音声信号をそれぞれ生成する演算処理部２１ＦＲＴ、２１ＦＬ、２１ＦＲ、２１ＲＬ、２１ＲＲと、ＬＦスカラーに係る音声信号を生成する演算処理部とにより形成される。ベクトルに係る音声信号の演算処理部２１ＦＲＴ、２１ＦＬ、２１ＦＲ、２１ＲＬ、２１ＲＲは、前方又は後方のアレイマイクロホン７Ａ又は７Ｂを構成するマイクロホン７ＡＡ〜７ＡＤによる音声信号をそれぞれ入力し、可変遅延器３１Ａ〜３１Ｄにより角度θａ〜θｅに応じた遅延時間を各音声信号に与える。また各可変遅延器３１Ａ〜３１Ｄの出力信号を加算回路３２により加算した後、増幅回路３３により増幅し、これによりそれぞれ各ベクトルに係る音声信号を生成する。

すなわち図９及び図１０に示すように、各マイクロホン７ＡＡ〜７ＡＤを一定の間隔ｄにより直線状に配置した場合、各マイクロホン７ＡＡ〜７ＡＤで取得される音声信号は、その到来方向に応じて時間遅れＴ１〜Ｔ４が発生する。具体的に、図９により示すように、正面からマイクロホン７ＡＡ側に角度θだけ傾いた方向から音声が到来する場合、この音声の到来方向のマイクロホン７ＡＡに対して、他のマイクロホン７ＡＢ、７ＡＣ、７ＡＤは、ｄ・ｓｉｎθ、２（ｄ・ｓｉｎθ）、３（ｄ・ｓｉｎθ）だけ音声の伝搬距離が長くなり、これにより音速をｃとおくと、それぞれＴ１＝０、Ｔ２＝ｄ・ｓｉｎθ／ｃ、Ｔ３＝２（ｄ・ｓｉｎθ）／ｃ、Ｔ４＝３（ｄ・ｓｉｎθ）／ｃだけ遅延時間が発生する。また図１０に示すように、この図９の場合とは逆方向から音声が到来する場合、この音声が到来する側のマイクロホン７ＡＤに対して、他のマイクロホン７ＡＣ、７ＡＢ、７ＡＡでは、同様にＴ１＝３（ｄ・ｓｉｎθ）／ｃ、Ｔ２＝２（ｄ・ｓｉｎθ）／ｃ、Ｔ３＝ｄ・ｓｉｎθ／ｃ、Ｔ４＝０だけ遅延時間が発生する。

これによりこの時間遅れＴ１〜Ｔ４を打ち消すように、各マイクロホン７ＡＡ〜７ＡＤで取得される音声信号に遅延時間ΔＴ１、ΔＴ２、ΔＴ３、ΔＴ４を設けて加算すれば、この時間遅れＴ１〜Ｔ４に係る方向に指向性を確保することができる。

具体的に、図１１は、マイクロホンの間隔ｄを１０〔ｍｍ〕に設定した場合の、遅延時間を指向性の向きとの関係を示す図表である。ここで指向角は、マイクロホン７ＡＡ〜７ＡＤの並び方向に垂直な方向を０度に設定し、この０度の方向を基準にしたマイクロホン７ＡＡ〜７ＡＤの並び方向への指向性の方向を示す角度である。

これにより制御部２０は、マイクロコンピュータ３による指示に応動して、可変遅延器３１Ａ〜３１Ｄにおける遅延時間を設定して、指向性に係る角度θａ〜θｅを設定する。またこの可変遅延器３１Ａ〜３１Ｄにおける遅延時間の設定にばらつきを与えると、指向性が鈍くなることになる。これにより制御部２０は、この場合も、マイクロコンピュータ３による指示に応動して、可変遅延器３１Ａ〜３１Ｄにおける遅延時間を設定して、指向性パターンを可変する。また増幅回路３３の利得の制御により、収音レベルを可変する。

これに対してＬＦスカラーに係る演算処理部は、前方及び後方のマイクロホンユニットからの音声信号を全て入力して加算した後、ローパスフィルタにより帯域制限して０．１チャンネルに係る音声信号ＬＦを出力する。この処理において、ＬＦスカラーに係る演算処理部は、制御部２０による指示による利得により増幅回路で音声信号ＬＦを増幅して出力し、これにより収音レベルを可変する。

これに対して音声信号処理部８において、周波数領域可変部２２ＦＲＴ、２２ＦＬ、２２ＦＲ、２２ＲＬ、２２ＲＲ、２２ＬＦは、それぞれベクトル領域可変部２１から出力される対応するチャンネルの音声信号について、制御部２４ＦＲＴ、２４ＦＬ、２４ＦＲ、２４ＲＬ、２４ＲＲ、２４ＬＦの制御により周波数特性を可変して出力する。具体的には、ベクトルに係る周波数領域可変部２２ＦＲＴ、２２ＦＬ、２２ＦＲ、２２ＲＬ、２２ＲＲは、図１２及び図１３に示すように、対応する音声信号の周波数特性を補正する。なおここでこの図１２及び図１３に示す各周波数特性は、図４及び図７中における表記にそれぞれ対応するものである。これにより音声信号処理部８は、マイクロコンピュータ３により指示された周波数特性により音声信号を出力する。

具体的に、ＨＤモード等に適用される広帯域化にあっては、記録フォーマットにより制限される範囲で、低域から周波数２４〔ｋＨｚ〕〜５０〔ｋＨｚ〕の高域まで平坦な周波数特性により音声信号ＳＡを出力する。またＳＤモード等に適用され通常帯域では、広帯域の場合に比して、高域側を低い周波数（例えば２０〔ｋＨｚ〕以下）により制限して音声信号ＳＡを出力する。またシネマＢモードに適用される狭帯域では、通常帯域に比して低域及び高域を制限し、これによりオールドシネマ風に音声信号ＳＡを出力する。

時間領域可変部２５ＦＲＴ、２５ＦＬ、２５ＦＲ、２５ＲＬ、２５ＲＲ、２５ＬＦは、それぞれ周波数領域可変部２２ＦＲＴ、２２ＦＬ、２２ＦＲ、２２ＲＬ、２２ＲＲ、２２ＬＦから出力される音声信号に、制御部２４ＦＲＴ、２４ＦＬ、２４ＦＲ、２４ＲＬ、２４ＲＲ、２４ＬＦの指示による遅延時間を設定して出力する。すなわち図１４に示すように、各時間領域可変部２５ＦＲＴ、２５ＦＬ、２５ＦＲ、２５ＲＬ、２５ＲＲ、２５ＬＦは、それぞれ対応する制御部２４ＦＲＴ、２４ＦＬ、２４ＦＲ、２４ＲＬ、２４ＲＲ、２４ＬＦの指示により遅延時間を可変する遅延回路２６ＦＲＴ、２６ＦＬ、２６ＦＲ、２６ＲＬ、２６ＲＲ、２６ＬＦにより構成される。

（２）実施例の動作
以上の構成において、このビデオカメラ１では（図２）、レンズ２により撮像面に形成された光学像が撮像素子４により光電変換処理されて撮像結果が得られ、この撮像結果がカメラ系信号処理部６により処理されて映像信号ＳＶが取得される。またアレイマイクロホン７Ａ及び７Ｂによる音声信号が音声信号処理部８により処理されて５．１チャンネルの音声信号ＳＡが生成され、これら映像信号ＳＶ及び音声信号ＳＡが記録系９により処理されて記録媒体に記録される。またこのようにして記録された映像信号ＳＶ及び音声信号ＳＡが、記録再生手段１１、再生系１２により再生されて外部機器等に出力される。

この一連の処理において、このビデオカメラ１では、ユーザーにより選択された撮影モードによるアスペクト比、画質により映像信号ＳＶが取得されて記録され（図３）、これにより撮影場所の雰囲気、ユーザーの趣味、嗜好に合致した画像により撮像結果が記録される。

ビデオカメラ１では、このようなユーザーによる撮影モードの選択により、映像信号ＳＶのみならず、記録媒体に記録するマルチチャンネルの音声信号ＳＡについても、特性が可変され、これにより撮影モードによる映像信号ＳＶの映像に対応するように、マルチチャンネルの音声信号ＳＡによるサラウンド音場が設定される。

すなわちユーザーによりＨＤモードによる撮影モードが選択されると、このＨＤモードによるアスペクト比に対応するように、広がりのある音場を形成するように音声信号ＳＡの特性が切り換えられ、また周波数特性も広帯域化される。またＳＤモードによる撮影モードが選択されると、このＳＤモードによるアスペクト比に対応するように、音の広がりが制限され、また周波数特性も通常の特性に設定される。また同様に各種撮影モードに対応するように、種々に音場が設定される。

これによりこのビデオカメラ１では、撮影した映像に対応するようにサラウンド音場が種々に可変され、これにより単にマイクロホンで収音した音声信号によりマルチチャンネルの音声信号を記録する場合に比して、臨場感の高い、迫力のある音場を作成することができる。これにより市販の映像コンテンツを見慣れたユーザーにとっても、十分に満足するようにサラウンド効果を付与したサラウンド音場を作成することができ、個人ユーザーがビデオカメラ等によりマルチチャンネルによる音声信号を記録する場合でも、従来に比して高い臨場感によりマルチチャンネルによる音声信号を楽しむことができる。

具体的に、ビデオカメラ１では、このような音声信号ＳＡの補正が、ベクトルドメイン、周波数ドメイン、時間ドメインで実行され、これにより各撮影モードによる映像に対応するように音の広がり、音質等を設定して臨場感を向上することができる。

すなわち指向性の向き、指向性の鋭さの変更により音声信号の指向性を可変することにより、ベクトルドメインで音声信号が補正され、これにより画面のアスペクト比に対応するように音の方向性、広がりを種々に変更することができ、その分、臨場感を向上することができる。また収音レベルの変更によっても、ベクトルドメインで音声信号が補正され、これにより映像に対応するように音の方向性を種々に設定することができ、その分、臨場感を向上することができる。

また周波数特性の補正により周波数ドメインでこれら音声信号の特性が補正され、これによっても映像の雰囲気に合致するようにサラウンド音場を形成することができる。

またこれらマルチチャンネルの音声信号に遅延時間を設定して時間ドメインによる補正が実行され、これよりハース効果を有効に利用して特定方向から到来する音声を明瞭に再生することができ、その分、臨場感を向上することができる。

さらにこのビデオカメラ１では、このような撮影モードによる音声信号の特性の可変に加えて、ズーム倍率、絞り、照明光の色温度等の撮影時における条件によっても、音声信号の特性が可変され（図７）、これにより例えば徐々に被写体を拡大するようなズーム操作に連動させて、徐々に音場を変化させることができ、これによっても一段と臨場感の高い音場を作成することができる。

（３）実施例の効果
以上の構成によれば、撮像結果による映像信号の映像に対応するように、マルチチャンネルによる音声信号の特性を可変することにより、個人ユーザーがビデオカメラ等によりマルチチャンネルによる音声信号を記録する場合でも、従来に比して高い臨場感によりマルチチャンネルによる音声信号を楽しむことができる。

またこの音声信号の特性の補正を指向性の可変により実行することにより、より具体的には、指向性の向き、指向性の鋭さの変更により音声信号の指向性を可変することにより、映像信号による映像に対応するようにサラウンド音場を種々に変更して臨場感を向上することができる。

また周波数特性の補正により、さらには遅延時間の設定によっても、映像信号による映像に対応するようにサラウンド音場を種々に変更して臨場感を向上することができる。

またこのような映像信号における映像の可変をアスペクト比、画質の切り換えにより実行することにより、このような映像の可変に対応するようにサラウンド音場を種々に変更して臨場感を向上することができる。

またさらに、このような撮影モードによる可変に加えて、ズーム倍率、絞り、照明光の色温度等の撮影時における条件によっても、音声信号の特性を可変することにより、例えば徐々に被写体を拡大するようなズーム操作に連動させて、徐々に音場を変化させることができ、これによっても一段と臨場感の高い音場を作成することができる。

またこのような音声信号の取得に供するマイクロホンが、アレイマイクロホンであることにより、簡易な演算処理により所望のマルチチャンネルによる音声信号を生成して、この音声信号の特性を種々に設定することができる。

図１５は、本発明の実施例２に係るビデオカメラに適用されるマイクロホンユニットを示す平面図である。このマイクロホンユニット４７は、図１６（Ａ）〜（Ｃ）にそれぞれ対応する指向性パターンを示すように、無指向性マイクロホン４７Ａ、撮影方向に指向性を有する双指向性マイクロホン４７Ｂ、撮影方向と直交する方向に指向性を有する双指向性マイクロホン４７Ｃを、撮影方向に順次配置して形成される。この実施例２に係るビデオカメラは、このマイクロホンユニット４７と、このマイクロホンユニット４７に関連する構成を除いて、実施例１について上述したビデオカメラ１と同一に構成される。なおこの図１６において、符号＋及び−は、それぞれ音圧に対する出力音声信号の極性を示す。

図１７は、このマイクロホンユニット４７から出力される音声信号の処理に係る演算処理部の構成を示すブロック図である。このビデオカメラでは、実施例１について上述したベクトルに係る音声信号の演算処理部２１ＦＲＴ、２１ＦＬ、２１ＦＲ、２１ＲＬ、２１ＲＲに代えて、この演算処理部４１ＦＲＴ、４１ＦＬ、４１ＦＲ、４１ＲＬ、４１ＲＲが適用される。

ここで演算処理部４１ＦＲＴ、４１ＦＬ、４１ＦＲ、４１ＲＬ、４１ＲＲにおいて、レベル可変型加減算部４２は、双指向性マイクロホン４７Ｂ及び４７Ｃから得られる音声信号をそれぞれ入力し、これらを加算して出力する。この処理において、レベル可変型加減算部４２は、図示しない制御部の指示により、双指向性マイクロホン４７Ｂ及び４７Ｃから得られる音声信号をそれぞれ所定利得で増幅した後、極性を設定して加算する。

これによりレベル可変型加減算部４２から出力される音声信号は、レベル可変型加減算部４２における極性の設定により、図１８に示すように、前方右方向に指向性を有する指向性パターンＰ１により、又は前方左方向に指向性を有する指向性パターンＰ２により出力されることになる。なおここでこの図１８に示す例は、加算対象の音声信号が同一の収音レベルの場合であり、収音レベルの可変により指向性の方向が変化することになる。

レベル可変型加減算部４３は、レベル可変型加減算部４２から出力される音声信号と、無指向性マイクロホン４７ＡＣから得られる音声信号とをそれぞれ入力し、これらを加算して出力する。この処理において、レベル可変型加減算部４３は、図示しない制御部の指示により、これらの音声信号をそれぞれ所定利得で増幅した後、極性を設定して加算する。

これによりレベル可変型加減算部４３から出力される音声信号Ｓ２は、図１９に示すように、レベル可変型加減算部４２から出力される音声信号の指向性パターンＰ１、Ｐ２において、符号−により示した負極性の部分を打ち消すと共に、符号＋により示した正極性の部分を強調する指向性パターンにより出力されることになる。また極性の切り換えにより指向性パターンの向きが反転することになる。またさらに各音声信号の収音レベルの可変により、指向性の鋭さが変化することになる。なおこの図１９において、図１９（Ａ）は、レベル可変型加減算部４２から出力される音声信号Ｓ１に比して、無指向性マイクロホン４７Ａによる音声信号の収音レベルが低い場合であり、図１９（Ｂ）は、これらの収音レベルが等しい場合であり、図１９（Ｂ）は、無指向性マイクロホン４７Ａによる音声信号の方が収音レベルが大きい場合である。

増幅回路４４は、このレベル可変型加減算部４３から出力される音声信号Ｓ２の収音レベルを可変して出力する。

この実施例に係るビデオカメラでは、演算処理部４１ＦＲＴ、４１ＦＬ、４１ＦＲ、４１ＲＬ、４１ＲＲによりそれぞれＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに係る音声信号を生成し、このときレベル可変型加減算部４２、４３における利得の設定により、これらＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに係る角度θａ〜θｅ、指向性の鋭さを可変する。また各増幅回路４４における利得の設定により、これらＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに係る音声信号の収音レベルを可変する。

なおＬＦスカラーに係る音声信号は、無指向性マイクロホン４７Ａによる音声信号を帯域制限して生成する。

この実施例によれば、無指向性マイクロホンと双指向性マイクロホンにより音声信号を取得し、この音声信号の演算処理により、マルチチャンネルの音声信号を生成する場合であっても、実施例１と同様の効果を得ることができる。

図２０は、図１５との対比により本発明の実施例３に係るビデオカメラに適用されるマイクロホンユニットを示す平面図である。このマイクロホンユニット５７は、無指向性マイクロホン５７Ａ及び５７Ｂが、撮影方向に並べられて一定の間隔により配置される。また無指向性マイクロホン５７Ｃ及び５７Ｄが、この無指向性マイクロホン５７Ａ及び５７Ｂによる並び方向と直交する方向に並べられて一定の間隔により配置される。

このビデオカメラでは、この一定の間隔を隔てたマイクロホン５７Ａ〜５７Ｄの配置により、無指向性マイクロホン５７Ａ及び５７Ｂから出力される音声信号を減算して、撮影方向に指向性を有する双方向性の指向性パターンによる音声信号を生成する。また無指向性マイクロホン５７Ｃ及び５７Ｄから出力される音声信号を減算して、撮影方向と直交する方向に指向性を有する双方向性の指向性パターンによる音声信号を生成する。またこれらマイクロホン５７Ａ〜５７Ｄによる音声信号を全て加算して無指向性の指向性パターンによる音声信号を生成する。

このビデオカメラでは、このようにして生成した双方向性の指向性パターンによる音声信号、無指向性の指向性パターンによる音声信号を実施例２について上述したと同様に処理してマルチチャンネルの音声信号を生成し、さらにこの音声信号のベクトルドメインにおける特性を可変する。

この実施例のように、無指向性マイクロホンだけで音声信号を取得し、この音声信号の演算処理により、マルチチャンネルの音声信号を生成する場合であっても、実施例１と同様の効果を得ることができる。

図２１は、図１５との対比により本発明の実施例４に係るビデオカメラに適用されるマイクロホンユニットを示す平面図である。このマイクロホンユニット６７は、撮影方向に指向性を有する単一指向性マイクロホン６７Ａ、無指向性マイクロホン６７Ｂ、撮影方向とは逆方向に指向性を有する単一指向性マイクロホン６７Ｃを撮影方向から順次配置して形成される。

このビデオカメラは、撮影方向に指向性を有する単一指向性マイクロホン６７Ａ、無指向性マイクロホン６７Ｂから出力される音声信号を加算又は減算により合成して、正面方向に係るＦＲＴベクトル、ＦＬベクトル、ＦＲベクトルの音声信号を生成する。またこのときＦＬベクトル、ＦＲベクトルの音声信号については、加算比、減算比の可変により角度θｂ及びθｃを可変し、利得の可変により収音レベルを可変する。またＦＲＴベクトルに係る音声信号については、利得の可変により収音レベルを可変する。

また撮影方向とは逆方向に指向性を有する単一指向性マイクロホン６７Ｃ、無指向性マイクロホン６７Ｂから出力される音声信号を加算又は減算により合成して、後方に係るＲＬベクトル、ＲＲベクトルの音声信号を生成する。またこのとき加算比、減算比の可変により角度θｄ及びθｅを可変し、利得の可変により収音レベルを可変する。

またこのようにして生成した音声信号の加減算処理によりこれらベクトルに係る音声信号について、指向性の鋭さを可変する。

また単一指向性マイクロホン６７Ａ、６７Ｃから出力される音声信号を加算して帯域制限することによりＬＦスカラーに係る音声信号を生成する。

この実施例のように、単一指向性マイクロホンと双方向マイクロホンにより音声信号を取得し、この音声信号の演算処理により、マルチチャンネルの音声信号を生成する場合であっても、実施例１と同様の効果を得ることができる。

図２２は、図１５との対比により本発明の実施例５に係るビデオカメラに適用されるマイクロホンユニットを示す平面図である。このマイクロホンユニット７７は、撮影方向に指向性を有する双指向性マイクロホン７７Ａ、撮影方向と直交する方向に指向性を有する双指向性マイクロホン７７Ｂを撮影方向に並べて配置し、これら双指向性マイクロホン７７Ａ、７７Ｂの周囲に、４５度の角間隔により無指向性マイクロホン７７Ｃ〜７７Ｊが順次配置される。

これによりこのビデオカメラでは、これらマイクロホン７７Ａ〜７７Ｊから出力される音声信号を実施例２について上述したと同様に処理して、ＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに係る音声信号を生成する。

この音声信号の生成において、ビデオカメラでは、双指向性マイクロホン７７Ａ、７７Ｂに対して、異なる無指向性マイクロホン７７Ｃ〜７７Ｊの組み合わせにより、ＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに係る音声信号をそれぞれ２系統づつ作成し、各２系統の音声信号の演算処理により、指向性の鋭さを可変する。

すなわち図２３は、このマイクロホンユニット７７から出力される音声信号の処理に係る演算処理部の構成を示すブロック図である。このビデオカメラでは、実施例１について上述したベクトルに係る音声信号の演算処理部２１ＦＲＴ、２１ＦＬ、２１ＦＲ、２１ＲＬ、２１ＲＲに代えて、この演算処理部７７ＦＲＴ、７７ＦＬ、７７ＦＲ、７７ＲＬ、７７ＲＲが適用される。

この演算処理部７７ＦＲＴ、７７ＦＬ、７７ＦＲ、７７ＲＬ、７７ＲＲにおいて、演算部７２Ａ及び７２Ｂは、双指向性マイクロホン７７Ａ、７７Ｂに対して、異なる無指向性マイクロホン７７Ｃ〜７７Ｊの組み合わせにより、実施例１について上述した演算処理部２１ＦＲＴ、２１ＦＬ、２１ＦＲ、２１ＲＬ、２１ＲＲの処理を実行し、ＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに係る音声信号Ｓ３及びＳ４をそれぞれ出力する。

これによりこのビデオカメラでは、図２４（Ａ）に示すように、この２系統の音声信号の生成に供する無指向性マイクロホンの位置に応じた間隔ｄにより収音された、ＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルによる２系統の音声信号を生成する。

加減算部７３は、この演算部７２Ａ及び７２Ｂから出力される音声信号Ｓ３及びＳ４を入力し、これら音声信号Ｓ３及びＳ４の差成分を抽出することにより、図２４（Ｂ）に示すように、これら音声信号Ｓ３及びＳ４の指向性をさらに鋭いものとした音声信号を出力する。

イコライザ６４は、加減算部７３の処理により変化した周波数特性を元に戻すように、加減算部７３から出力される音声信号の周波数特性を補正して出力し、増幅回路７５は、このイコライザ６４から出力される音声信号の収音レベルを可変して出力する。

これによりこの実施例では、各音声信号の収音レベルにあっては、この増幅回路７５により可変する。また指向性の方向、指向性の鋭さにあっては、実施例１について上述したと同様に、各演算部７２Ａ及び７２Ｂにおける設定の可変により実行される。

この実施例によれば、複数系統によりマルチチャンネルの音声信号を生成し、この複数系統の音声信号を演算処理することにより、一段と鋭い指向性に音声信号を設定することができ、これにより一段と臨場感の高い音場を作成することができる。

図２５は、図２０との対比により本発明の実施例６に係るビデオカメラに適用されるマイクロホンユニットを示す平面図である。このマイクロホンユニット８７は、無指向性マイクロホン８７Ａの周囲に、４５度の角間隔により無指向性マイクロホン８７Ｂ〜８７Ｉが順次配置される。

これによりこのビデオカメラでは、これらマイクロホン８７Ａ〜８７Ｉから出力される音声信号を実施例３について上述したと同様に処理して、ＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに係る音声信号を生成する。

この音声信号の生成において、ビデオカメラでは、中央の無指向性マイクロホン８７Ａに対して、異なる無指向性マイクロホン８７Ｂ〜８７Ｉの組み合わせにより、ＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに係る音声信号をそれぞれ２系統づつ作成する。またこの各２系統の音声信号を実施例５について上述したと同一に処理して、一段と鋭い指向性によるＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに係る音声信号を生成する。

この実施例によれば、無指向性マイクロホンのみを使用するようにして、複数系統によりマルチチャンネルの音声信号を生成し、この複数系統の音声信号を演算処理することにより、一段と鋭い指向性に音声信号を設定することができ、これにより一段と臨場感の高い音場を作成することができる。

図２６は、図２１との対比により本発明の実施例７に係るビデオカメラに適用されるマイクロホンユニットを示す平面図である。このマイクロホンユニット９７は、撮影方向に指向性を有する双指向性マイクロホン９７Ａ及び９７Ｂ、撮影方向と直交する方向に指向性を有する双指向性マイクロホン９７Ｃ及び９７Ｄ、撮影方向と逆方向に指向性を有する双指向性マイクロホン９７Ｅ及び９７Ｆが２系統設けられる。

また各系統について実施例３について上述した処理を実行し、これにより異なるマイクロホンの系統により、ＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに係る音声信号をそれぞれ２系統づつ作成する。またこの各２系統の音声信号を実施例５について上述したと同一に処理して、一段と鋭い指向性によるＦＲＴベクトル、ＦＬベクトル、ＦＲベクトル、ＲＬベクトル、ＲＲベクトルに係る音声信号を生成する。

この実施例によれば、単一指向性マイクロホン及び双指向性マイクロホンを使用するようにして、複数系統によりマルチチャンネルの音声信号を生成し、この複数系統の音声信号を演算処理することにより、一段と鋭い指向性に音声信号を設定することができ、これにより一段と臨場感の高い音場を作成することができる。

図２７は、図２との対比により本発明の実施例８に係るビデオカメラを示すブロック図である。このビデオカメラ１０１において、図２について上述したビデオカメラ１と同一の構成は、対応する符号を付して示し、重複した説明は省略する。

この実施例において、音声信号処理部１０８は、マイクロホンユニット７から得られる音声信号を処理して、５．１チャンネルによる音声信号ＳＡを出力する。この処理において、音声信号処理部１０８は、ベクトルドメイン、周波数ドメインについてのみ、音声信号ＳＡの特性を補正して出力する。

マイクロコンピュータ１０３は、全体の動作を制御し、実施例１について上述したマイクロコンピュータ３と同様に、ユーザーにより指定された撮像モード、絞り量、照明光の色温度等の撮影時の条件により、音声信号ＳＡの特性の補正を音声信号処理部１０８に指示する。この処理において、マイクロコンピュータ１０３は、ベクトルドメイン、周波数ドメインについてのみ、音声信号ＳＡの特性の補正を指示し、時間ドメインの補正については、補正情報ＤＴによりこの補正量を記録媒体に記録する。

また記録媒体に記録された映像信号及び音声信号の再生時、この記録媒体に記録された補正情報ＤＴにより再生系に係る音声信号処理部１１３に時間ドメインによる補正を指示する。

ここで図２８に示すように、この音声信号処理部１１３は、それぞれこの補正情報ＤＴにより各音声信号に遅延時間を設定する遅延手段が設けられる。これによりこの実施例では、再生時にも合わせて音声信号ＳＡの特性を可変する。

この実施例のように、再生時に音声信号の特性を可変するようにしても、実施例１と同様の効果を得ることができる。

この実施例においては、コンピュータにおける撮像結果の処理に本発明を適用する。すなわちこの実施例に係るコンピュータでは、ビデオカメラで取得した音声信号、映像信号をダウンロードして内蔵のハードディスク装置に記録して保持する。またこのハードディスク装置に記録された音声信号の処理により５．１チャンネルの音声信号を生成する。このコンピュータでは、ユーザーによる編集処理により、この５．１チャンネルの音声信号を対応する映像信号と共に選択的にＤＶＤによる光ディスクに記録する。

このコンピュータは、このような映像信号及び音声信号のダウンロード時、記録時に取得された撮影モードの情報、絞り量、照明光の色温度等の撮影時の条件に係る情報により、ベクトルドメイン、周波数ドメイン、時間ドメインで音声信号の特性を可変する。

なおこの一連の処理に係るコンピュータのプログラムにあっては、事前のインストールにより提供するようにしてもよく、また光ディスク、磁気ディスク、メモリカード等の各種の記録媒体に記録して提供するようにしてもよい。

この実施例のように、コンピュータにおける処理に本発明を適用するようにしても、実施例１と同様の効果を得ることができる。

なお上述の実施例においては、再生時、時間ドメインについてのみ、音声信号の特性を可変する場合について述べたが、本発明はこれに限らず、ベクトルドメイン、周波数ドメインについても、再生時、音声信号の特性を可変するようにしてもよい。

また上述の実施例においては、ベクトルドメイン、周波数ドメイン、時間ドメインについて、音声信号の特性を可変する場合について述べたが、本発明はこれに限らず、必要に応じてこれらの何れかについてだけ特性を補正するようにしてもよく、またこれら何れかの特性の補正を省略するようにしてもよい。

また上述の実施例においては、双指向性マイクロホン等による代表的なマイクロホンの配置を説明したが、本発明はこれに限らず、音声信号の取得に供するマイクロホンの種類、配置等にあっては、必要に応じて種々に変更することができる。

また上述の実施例においては、撮影モードと撮影時の条件とにより音声信号の特性を可変する場合について述べたが、本発明はこれに限らず、撮影モードによってのみ、音声信号の特性を可変するようにしてもよい。また本願の範囲には含まれないものとなるが、撮影時の条件によってのみ、音声信号の特性を可変するようにしてもよい。

また上述の実施例においては、音声信号を５．１チャンネルにより記録してサラウンド音場を作成する場合について述べたが、本発明はこれに限らず、種々のチャンネル数によりサラウンド音場を作成する場合に広く適用することができる。

本発明は、例えばＤＶＤの光ディスクを用いたビデオカメラに適用することができる。

本発明の実施例１に係るビデオカメラにおける音声信号処理部を示すブロック図である。 本発明の実施例１に係るビデオカメラを示すブロック図である。 図２のビデオカメラにおける撮影モードを示す図表である。 図２のビデオカメラにおける収音特性の説明に供する略線図である。 各ベクトルと撮影方向との関係を示す略線図である。 指向性パターンの説明に供する略線図である。 撮影時の条件による音声信号の特性の可変を示す図表である。 図１の音声信号処理部におけるベクトル領域可変部の構成を示すブロック図である。 アレイマイクロホンにおける指向性設定の説明に供する略線図である。 図９の例とは異なる方向についての指向性設定の説明に供する略線図である。 アレイマイクロホンにおける指向性と遅延期間との関係を示す図表である。 音声信号の周波数特性を示す特性曲線図である。 図１２とは異なる例による音声信号の周波数特性を示す特性曲線図である。 図１の音声信号処理部における時間領域可変部の構成を示すブロック図である。 本発明の実施例２に係るビデオカメラに適用されるマイクロホンユニットを示す平面図である。 図１５のマイクロホンユニットに適用されるマイクロホンの指向性を示す特性曲線図である。 図１５のマイクロホンユニットに適用される演算処理部を示すブロック図である。 図１５のマイクロホンユニットによる指向性の説明に供する特性曲線図である。 図１７の演算処理部による音声信号の指向性を示す特性曲線図である。 本発明の実施例３に係るビデオカメラに適用されるマイクロホンユニットを示す平面図である。 本発明の実施例４に係るビデオカメラに適用されるマイクロホンユニットを示す平面図である。 本発明の実施例５に係るビデオカメラに適用されるマイクロホンユニットを示す平面図である。 図２２のマイクロホンユニットに適用される演算処理部を示すブロック図である。 図２２のマイクロホンに係る指向性の説明に供する特性曲線図である。 本発明の実施例６に係るビデオカメラに適用されるマイクロホンユニットを示す平面図である。 本発明の実施例７に係るビデオカメラに適用されるマイクロホンユニットを示す平面図である。 本発明の実施例８に係るビデオカメラを示すブロック図である。 図２７のビデオカメラにおける音声信号処理部を示すブロック図である。

符号の説明

１、１０１……ビデオカメラ、２……レンズ、３，１０３……マイクロコンピュータ、４……撮像素子、５……絞り、６……カメラ系信号処理部、７、４７、５７、６７、７７、８７、９７……マイクロホンユニット、７Ａ、７Ｂ……アレイマイクロホン、７ＡＡ〜７ＡＤ、７ＢＡ〜７ＢＤ、４７Ａ〜４７Ｃ、５７Ａ〜５７Ｄ、６７Ａ〜６７Ｃ、７７Ａ〜７７Ｊ、８７Ａ〜７７Ｉ、９７Ａ〜９７Ｅ……マイクロホン、８、１０８、１１３……音声信号処理部、１１……記録再生手段

Claims (15)

1. 複数のマイクロホンを含んで構成され、各マイクロホンに入力される音声から入力音声信号を出力するマイクロホンユニットと、
   前記入力音声信号に基づいて複数のチャンネルの出力音声信号を生成する際に、各チャンネルの指向性に応じて第１の遅延時間を各入力音声信号に与える可変遅延器を備えるベクトル領域可変部と、
   前記マイクロホンに音声が入力される際の記録モードに応じて各チャンネルの前記出力音声信号が時間差をもって出力されるように、該複数の出力音声信号に対して選択的に第２の遅延時間を与える時間領域可変部と、
   を備える記録装置。
2. 前記複数のチャンネルの出力音声信号には、前記記録装置の前方側に指向性を有する出力音声信号と、前記記録装置の後方側に指向性を有する出力音声信号と、が含まれる請求項１に記載の記録装置。
3. 前記記録モードが人物の撮影に適した人物モードである場合、
   前記時間領域可変部は、撮影方向以外の前記出力音声信号に対して前記第２の遅延時間を与える請求項２に記載の記録装置。
4. 前記記録モードが遠景の撮影に適した風景モードである場合、
   前記時間領域可変部は、前記前方側に指向性を有する出力音声信号に対して前記第２の遅延時間を与える請求項３に記載の記録装置。
5. 前記ベクトル領域可変部はさらに、前記入力音声信号に対して指向性の鋭さまたは向きを変化させて、前記複数のチャンネルの出力音声信号を生成する請求項４に記載の記録装置。
6. 前記出力音声信号に対して、周波数特性を変更する処理を行う周波数領域可変部をさらに備える請求項５に記載の記録装置。
7. 前記マイクロホンユニットは、複数のアレイマイクロホンから構成される請求項１に記載の記録装置。
8. 前記マイクロホンユニットは、無指向性マイクロホンおよび双指向性マイクロホンから構成される請求項１に記載の記録装置。
9. 前記マイクロホンユニットは、単一指向性マイクロホンおよび双指向性マイクロホンから構成される請求項１に記載の記録装置。
10. 前記記録モードに応じて、撮像結果を画質補正して映像信号を出力する映像信号処理部をさらに備える請求項１に記載の記録装置。
11. 複数のマイクロホンに入力される音声に基づいて各マイクロホンから入力音声信号を出力する入力音声信号処理ステップと、
    前記入力音声信号処理ステップにより出力される入力音声信号に基づいて複数のチャンネルの出力音声信号を生成する際に、各チャンネルの指向性に応じて第１の遅延時間を各入力音声信号に与える出力音声信号生成ステップと、
    前記マイクロホンに前記音声が入力される際の記録モードに応じて各チャンネルの前記出力音声信号が時間差をもって出力されるように、複数の前記出力音声信号に対して選択的に第２の遅延時間を与える出力音声信号遅延処理ステップと、
    を含む記録方法。
12. 複数のマイクロホンに入力される音声に基づいて各マイクロホンから入力音声信号を出力する入力音声信号処理と、
    前記入力音声信号処理により出力される入力音声信号に基づいて複数のチャンネルの出力音声信号を生成する際に、各チャンネルの指向性に応じて第１の遅延時間を各入力音声信号に与える出力音声信号生成処理と、
    前記マイクロホンに前記音声が入力される際の記録モードに応じて各チャンネルの前記出力音声信号が時間差をもって出力されるように、複数の前記出力音声信号に対して選択的に第２の遅延時間を与える出力音声信号遅延処理と、
    をコンピュータに実行させる記録方法のプログラム。
13. 請求項１２に記載の記録方法のプログラムが記録されている記録媒体。
14. 複数のマイクロホンを含んで構成され、各マイクロホンに入力される音声から入力音声信号を出力するマイクロホンユニットと、
    前記入力音声信号に基づいて複数のチャンネルの出力音声信号を生成する際に、各チャンネルの指向性に応じた第１の遅延時間を各音声信号に与える可変遅延器を備えるベクトル領域可変部と、
    前記第１の遅延時間を与えられた出力音声信号および前記マイクロホンに前記音声が入力される際の記録モードに関する情報を記録媒体に記録する記録部と、
    前記記録媒体に記録されている出力音声信号を再生する際に、前記記録媒体に記録されている記録モードに応じて、前記記録媒体に記録されている複数の前記出力音声信号が時間差をもって再生されるように、該複数の出力音声信号に対して選択的に第２の遅延時間を与えて再生する再生部と、
    を備える再生装置。
15. 複数のマイクロホンに入力される音声に基づいて各マイクロホンから入力音声信号を出力する入力音声信号処理ステップと、
    前記入力音声信号処理ステップにより出力される入力音声信号に基づいて複数のチャンネルの出力音声信号を生成する際に、各チャンネルの指向性に応じて第１の遅延時間を各入力音声信号に与える出力音声信号生成ステップと、
    前記第１の遅延時間を与えられた出力音声信号および前記マイクロホンに前記音声が入力される際の記録モードに関する情報を記録媒体に記録する記録ステップと、
    前記記録媒体に記録されている出力音声信号を再生する際に、前記記録媒体に記録されている記録モードに応じて、前記記録媒体に記録されている複数の前記出力音声信号が時間差をもって再生されるように、該複数の出力音声信号に対して選択的に第２の遅延時間を与えて再生する再生ステップと、
    を含む再生方法。
    
    

Images