JPH0721742A - 音響編集システム及び音響再生システム - Google Patents

Abstract

(57)【要約】 【目的】 映像に同期した臨場感創出のための音響信号
の実時間処理内容を、符号化された制御コードとして記
録・伝送し、一方、エンドユーザー側においては、制御
コードに基づいて、かつ各ユーザー固有の再生環境を考
慮した音響信号処理を実行することにより、ソフト制作
側の意図した臨場感をよりよく個々のユーザー側で実現
する。 【構成】 映像情報蓄積装置１上の映像情報を映像編集
部２で編集し、映像再生部３によりモニターする。この
映像に同期するように、音響情報蓄積装置４上の音素材
を音響素材編集部５で１次編集し、更に音響信号加工部
６にて臨場感創出のための信号処理がなされ、音響再生
部８によりモニターされる。信号処理の内容及び音響パ
ラメータは、制御コード作成部７において時系列データ
として符号化され、映像信号，１次編集後の音響信号と
ともに記録・伝送される。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、映像音響分野におい
て、ソフト制作側で意図する映像に合致した最適な音響
再生を、民生分野での一般的エンドユーザーの再生環境
において、できるだけ忠実に実現するための音響編集シ
ステム及び音響再生システムに関する。

【０００２】

【従来の技術】近年、映像分野においては大画面・高画
質化へと、音響分野においては原音再生から原音場再生
へと、その技術動向はともに臨場感重視の方向へと変化
しつつある。特に、音響再生に関しては、映像の流れに
合致して、すなわち時々刻々変化していく映像シーンに
リンクして、リアルタイムかつダイナミックに音響再生
状態をコントロールしていくことが不可欠となりつつあ
る。

【０００３】従来、上記臨場感再生を意図した映像音響
ソフトの、特に音響部分に関する制作・再生の方法とし
ては、制作側で、映像を考慮しながら、音響信号に臨場
感創出のための加工処理を施す場合が多い。すなわち、
制作側のスタジオ及び再生システムを基準として、制作
側の再生環境で最適な臨場感再生となるように編集作業
が実行され、テープ・ディスク等のメディアに記録・伝
送される。そして、エンドユーザー側では、上記メディ
アをユーザーの再生環境及び再生システムで、決められ
たデコーダを使用する場合があるにせよ、基本的にはそ
のまま再生する。

【０００４】

【発明が解決しようとする課題】しかし上記方法では、
制作側の再生環境において最適な音響再生が実現できて
も、エンドユーザーの再生環境では、必ずしも最適な音
響再生が実現できるとは限らない。すなわち、ユーザー
の再生環境及び再生システム、例えば再生室固有の音響
特性、再生用スピーカの特性や配置等の状況は様々であ
り、制作側の環境をリファレンスとして最適調整され編
集されたソフトが、ユーザー側環境で、制作側の意図を
十分に再現できない場合がある、という問題点があっ
た。

【０００５】本発明は上記課題を解決し、音響再生に関
する各エンドユーザーに固有の事情を吸収して、個々の
ユーザーそれぞれにとって最適な音響再生を実現するこ
とを目的とする。

【０００６】

【課題を解決するための手段】上記目的を達成するため
に本発明の音響編集システムは、映像情報蓄積装置と音
響情報蓄積装置と音響信号加工部と制御コード作成部と
を有し、映像情報蓄積装置から読み出されて再生された
映像の流れに合致するように、音響情報蓄積装置から読
み出された音響信号を音響信号加工部で加工処理して再
生するとともに、制御コード作成部において音響信号の
加工処理方法を時系列化した制御コードとして符号化し
て出力することを特徴とするものである。

【０００７】また、音響再生システムは、入力された制
御コードに基づいて音響信号の信号処理手段もしくは信
号処理のための音響パラメータ値を出力する制御コード
解読部と、入力された音響信号を前記制御コード解読部
から出力された情報に従って信号処理する信号処理部
と、前記信号処理部で信号処理された音響信号を再生す
る音響再生部とを有し、前記制御コード情報に従って、
音響再生装態を実時間にて可変制御することを特徴とす
るものである。

【０００８】

【作用】本発明は、ソフト制作側の編集過程において、
映像情報蓄積装置から再生される映像内容に合致するよ
うに、音響情報蓄積装置上の音響信号を音響信号加工部
にて加工処理して再生視聴するとともに、映像の変化に
合わせて時々刻々変化する加工処理方法や信号処理時の
音響パラメータを、制御コード作成部において符号化す
る。そして、加工処理前の音響信号と符号化された制御
コードをメディア等へ記録・伝送する。

【０００９】一方、エンドユーザー側の音響再生システ
ムでは、メディア等に記録された映像・音響信号、及び
制御コードを読みとり、映像信号はそのまま再生する。
音響信号は、制御コード解読部における時系列制御コー
ドの解読結果に基づき、そのコード情報に従って、信号
処理部にて信号処理された後に再生される。信号処理部
では、ユーザーの再生環境及び再生システムの特殊性を
考慮した処理がなされるために、個々のユーザーそれぞ
れにとって最適な音響再生が可能となる。

【００１０】すなわち、映像に合致した音響再生のため
のソースづくりをすべて、ソフト制作側に受け持たせる
ことを避けて、制作側の意図を制御コードとしてエンド
ユーザー側に伝達する。そして、ユーザー側では、制御
コードに反映された制作側の意図を、ユーザー環境の個
別性を考慮した信号処理によって実現することにより、
各ユーザー環境の差異を吸収して、それぞれに最適な映
像・音響再生が可能となる。

【００１１】

【実施例】以下、図面を参照しながら、本発明の音響編
集システム及び音響再生システムの実施例について説明
する。

【００１２】図１は、本発明の音響編集システムの一実
施例の構成を示すブロック図である。図２は、図１の音
響編集システムの１構成要素である音響信号加工部の具
体例を示す音像制御回路のブロック図である。図３は、
図２の音像制御回路によってコントロールされる音像の
方向を示す音像方向模式図である。図４は、記録・伝送
される制御コードの一例を示すタイミングチャート図で
ある。

【００１３】図１において、１は様々な映像素材が格納
されている映像情報蓄積装置で、テープ，ディスク等が
これに対応する。２は前記映像情報蓄積装置１からの映
像情報に基づいて映像編集を行う映像編集部、３は編集
された映像を再生する映像再生部、４は様々な音素材が
格納されている音響情報蓄積装置で、テープ，ディスク
等がこれに対応する。５は前記音響情報蓄積装置４から
の音素材に基づいて１次的な編集を行う音響素材編集
部、６は１次編集された音響信号に様々な信号処理を施
す音響信号加工部、７は前記音響信号加工部６において
実行された信号処理内容や信号処理のための音響パラメ
ータを時系列データとして符号化するための制御コード
作成部、８は信号処理された音響信号を再生する音響再
生部である。

【００１４】以上のように構成された本発明の音響編集
システムについて、その動作を説明する。

【００１５】図１中、映像編集部２において、映像情報
蓄積装置１に格納されている様々な映像素材を読み出し
て、編集作業が実行される。編集内容は、映像再生部３
を通してＴＶ，プロジェクター等のモニター再生系に送
られ、編集作業中、必要に応じてモニターされる。

【００１６】一方、音響情報は、音響素材編集部５にお
いて、音響情報蓄積装置４に格納されている様々な音素
材に基づき、編集された映像情報を参照しながら、ミッ
クスダウン等の１次的な編集作業が実行される。１次編
集された音響情報は、更に、音響信号加工部６におい
て、映像の流れに合致した臨場感創出のための信号処理
が施され、音響再生部８を通してスピーカ等によりモニ
ターされる。これと平行して、制御コード作成部７にお
いては、上記音響信号加工部６で実行された信号処理方
法及び信号処理の際の音響パラメータが、制御コードと
して、映像の流れに同期した形で時系列データとして符
号化される。

【００１７】上記一連の編集作業が完了した後に、編集
後の映像信号，１次編集後の音響信号，符号化された制
御コードが、テープ，ディスク等の伝送・記録系へ出力
される。

【００１８】図２は、図１を構成する音響信号加工部６
の一具体例を示している。本具体例では、図１の音響素
材編集部５にて２ｃｈステレオ信号にミックスダウンさ
れた音響信号に、２ｃｈスピーカ再生を前提とした音像
制御のためのフィルタ処理を実行する。

【００１９】図２において、９は第１のフィルタ、１０
は第２のフィルタであり、ともにＬｃｈ音響ソースの音
像方向制御のためのＦＩＲ型のディジタルフィルタリン
グを実行する。１１は第３のフィルタ，１２は第４のフ
ィルタであり、ともにＲｃｈ音響ソースの音像方向制御
のためのＦＩＲ型のディジタルフィルタリングを実行す
る。

【００２０】本実施例では、上記４つのフィルタ９，１
０，１１，１２はすべて可変タイプのフィルタとしてお
り、各フィルタのタップ係数をリアルタイムで変更する
ことにより、視聴者に対してＬｃｈ，Ｒｃｈそれぞれの
音像を任意の方向に移動させることが可能となる。

【００２１】図３は、制御される音像の方向を模式的に
示している。円の中央に位置する視聴者に対して、正面
方向を０°とし、上方から見て反時計回りに２２．５°
ずつ、合計１６方向の音像定位を任意に実現できること
を意味している。

【００２２】図３に対応して、図２の各フィルタ９，１
０，１１，１２は、それぞれ１６種類のタップ係数群が
あらかじめプリセットされている。そして、映像の流れ
に適合するように、各フィルタのタップ係数が時々刻々
切り換えられ、映像に合致した臨場感溢れる音響再生が
可能となる。ここで注意すべき事項は、上記タップ係数
群は、あくまでも、ソフト制作のためのスタジオ等の再
生室及び再生システム、すなわち、ソフト制作側の環境
にとって最適なものであり、かならずしもエンドユーザ
ーにとって最適ではない点である。

【００２３】図４は、図２の音像制御回路による信号処
理に対応して、図１の制御コード作成部において作成・
出力される符号化された制御コードの一具体例を示して
いる。本具体例では、図２の音像制御回路がＬ／Ｒ２ｃ
ｈ対応であることに起因して、Ｌ／Ｒクロックに同期す
る形で、１サンプリングレートごとに、それぞれＬｃｈ
ソース及びＲｃｈソースの信号処理方法及び付随するデ
ータが、符号化されて出力される。制御コードは、各サ
ンプリング周期において、Ｌ／Ｒｃｈソース用としてそ
れぞれ４ビット×２で構成されており、前半の４ビット
は図２に示す音像制御回路による音像方向のコントロー
ル処理を指示し、後半の４ビットは音像方向を指示す
る。後半の４ビットと音像方向との関係は、例えば図３
に示すように割り振られる。これらのビットは、例えば
ビットクロック（図示せず）に同期して出力される。

【００２４】このように、ソフト制作側において、音響
信号の編集・処理をすべて実行せずに、臨場感創出のた
めの信号処理内容を制御コードとして符号化して記録・
伝送することにより、エンドユーザー側にて、個々の再
生環境にあった固有の信号処理を実行できる余地が生じ
る。その結果、臨場感創出に関するソフト制作側の意図
を、ユーザー側において、より忠実に再現することが可
能となる。

【００２５】次に、本発明の音響再生システムについて
説明する。図５は、本発明の音響再生システムの一実施
例の構成を示すブロック図である。図５において、１３
は映像信号を再生する映像再生部、１４は符号化された
制御コードを解読して音響信号の信号処理方法や信号処
理のための音響パラメータ等を出力する制御コード解読
部、１５は音響信号を信号処理する信号処理部、１６は
処理された音響信号を再生するための音響再生部であ
る。

【００２６】以上のように構成された本発明の音響再生
システムについて、その動作を説明する。

【００２７】図５において、テープ，ディスク等の記録
・伝送系から、映像情報，音響情報，音響信号の処理内
容等を時系列的に示す制御コードが読み出される。映像
信号は、映像再生部１３によりそのまま再生のための処
理がなされて、ＴＶ等によりモニターされる。制御コー
ドは、制御コード解読部１４において復号化され、音響
信号の信号処理方法や信号処理の際の音響パラメータを
示すコードとして、信号処理部１５に出力される。音響
信号は、信号処理部１５において、前記制御コード解読
部１４からのコード情報に従って、信号処理された後、
音響再生部１６により再生される。

【００２８】信号処理部１５の具体例としては、例えば
図２に音像制御回路を例示する。この場合、図２の中の
４つのフィルタにあらかじめプリセットされている音像
制御のためのタップ係数群は、ユーザーの再生環境を考
慮して決定される。例えば、ユーザーの再生システム、
特にスピーカの音響特性や設置位置、あるいは再生室固
有の音響特性が音像定位に及ぼす影響を考慮して、ユー
ザー固有の環境で、映像に合致した最適な臨場感が創出
できるように決定される。

【００２９】以上のように、制御コードを媒介として、
臨場感創出のためのソフト制作側の意図をユーザー側に
伝達するとともに、ユーザー側の再生システムにおいて
は、制御コードに従って、個々のユーザー環境の特殊性
を考慮した音響信号処理を実行することにより、制作側
スタジオ等で実現される品質に近い臨場感をユーザー側
でも実現することが可能となる。

【００３０】なお、以上の実施例においては、信号処理
内容として、Ｌ／Ｒ２ｃｈ信号に関する音像制御として
いるが、これに限られるわけではなく、例えば、３ｃｈ
以上のマルチｃｈ信号を対象とした、反射音・残響成分
付加のための信号処理としてもよい。また、符号化され
た制御コードの内容及びフォーマットは、図４に示した
ものに限られるわけではない。

【００３１】

【発明の効果】以上のように、本発明の音響編集システ
ムは、映像の流れに合致した臨場感創出のための音響信
号の処理内容及び信号処理のための音響パラメータを、
符号化された時系列制御コードとして、映像・音響信号
とともに記録・伝送するため、エンドユーザー側での信
号処理の自由度が増えることになり、それぞれのユーザ
ー環境の下で最適な映像・音響再生の実現が可能とな
る。

【００３２】また、本発明の音響再生システムは、記録
・伝送系から映像情報，音響情報，制御コードを読み取
り、制御コードが指示する信号処理方法及び音響パラメ
ータを採用して、かつ、各ユーザーに固有な再生環境、
例えば、再生室固有の音響特性，再生用スピーカの音響
特性や設置位置等を考慮して、音響信号を処理するた
め、各ユーザーごとに最適な臨場感再生を実現すること
ができる。従って、ソフト制作側の臨場感再生に関する
意図を、よりよく個々のユーザー側に伝え、かつ実現す
ることができる。

【図面の簡単な説明】

【図１】本発明の音響編集システムの一実施例の構成を
示すブロック図

【図２】図１の音響編集システムの１構成要素である音
響信号加工部の具体例を示す音像制御回路のブロック図

【図３】図２の音像制御回路によってコントロールされ
る音像の方向を示す音像方向模式図

【図４】記録・伝送される制御コードの一例を示すタイ
ミングチャート図

【図５】本発明の音響再生システムの一実施例の構成を
示すブロック図

【符号の説明】

１ 映像情報蓄積装置 ２ 映像編集部 ３ 映像再生部 ４ 音響情報蓄積装置 ５ 音響素材編集部 ６ 音響信号加工部 ７ 制御コード作成部 ８ 音響再生部 ９ 第１のフィルタ １０ 第２のフィルタ １１ 第３のフィルタ １２ 第４のフィルタ １３ 映像再生部 １４ 制御コード解読部 １５ 信号処理部 １６ 音響再生部

Claims (2)

【特許請求の範囲】
1. 【請求項１】映像情報蓄積装置と音響情報蓄積装置と音
   響信号加工部と制御コード作成部とを有し、映像情報蓄
   積装置から読み出されて再生された映像の流れに合致す
   るように、音響情報蓄積装置から読み出された音響信号
   を音響信号加工部で加工処理して再生するとともに、制
   御コード作成部において音響信号の加工処理方法を時系
   列化した制御コードとして符号化して出力することを特
   徴とする音響編集システム。
2. 【請求項２】入力された制御コードに基づいて音響信号
   の信号処理手段もしくは信号処理のための音響パラメー
   タ値を出力する制御コード解読部と、入力された音響信
   号を前記制御コード解読部から出力された情報に従って
   信号処理する信号処理部と、前記信号処理部で信号処理
   された音響信号を再生する音響再生部とを有し、前記制
   御コード情報に従って、音響再生状態を実時間にて可変
   制御することを特徴とする音響再生システム。