JP5288219B2 - 重ね録音装置、重ね録音方法およびプログラム - Google Patents

Description

本発明は、再生音声に入力音声を重ねて録音する重ね録音に関し、特に、再生音声の再生レベルを適正に設定する重ね録音に関する。

音楽制作現場等において、複数の音声を重ね合わせる（ミックスする）ミキシング作業が広く行なわれている。商用音楽等の高品位の楽曲制作を目的とするミキシング作業では、一般に、図８（ａ）に示すような構成のマルチトラックレコーダ（MTR:Multi Track Recorder）が用いられる。マルチトラックレコーダでは、複数のトラックに対応させて、あらかじめ楽曲のパートを個別に録音しておき、それぞれの音量レベルを調整しながらミキシングを行なう。この際に、音色加工や音響効果を施したり、多チャンネル処理、定位処理等を行なう場合もある。

これに対し、マルチトラックレコーダを使用するほど高度なミキシングが要求されない場合には、重ね録音という手法が用いられることが多い。重ね録音は、個別のパートを独立したトラックに割り当ててミキシングするのではなく、再生音声に入力音声を重ねて録音するものである。そして、重ね録音された音声を再生音声として、さらに入力音声を重ねて録音することで、多声部の楽曲ファイルを生成することができる。なお、「声部」は１回の重ね録音で録音する楽器、歌等の音声を意味するものとする。

重ね録音はミキシング作業を簡易に行なうことができ、特許文献１に記載されているように、重ね録音を行なうための重ね録音装置も実用化されている。図８（ｂ）は、従来の重ね録音装置の概略構成を示すブロック図である。

本図に示すように、重ね録音装置は、マイクロフォン等の入力装置３１０からの入力音声と、再生音源ファイル３２０の再生音声とを重ねて（ミックスして）記録することで重ね録音ファイル３３０を生成する。重ね録音ファイル３３０を再生音源ファイル３２０として用いて、さらに入力音声を重ねていくことができる。

重ね録音装置において、入力音声は可変アッテネータ等の入力レベル設定部３４０においてレベル調整され、再生音声も可変アッテネータ等の再生レベル設定部３５０においてレベル調整された上で加算器３６０により重ね合わせられる。

特開２００４−１５４６１号公報

重ね録音は、音声を１つずつ重ねて録音していくため、録音の結果、各声部の音量バランスが適正でなかったとしても、後から個々の音声のレベルを調整することはできない。このため、録音時において入力レベルと再生レベルとを適正に設定しておく必要がある。

しかしながら、入力レベルと再生レベルとを適正に設定することは容易でない。特に、入力レベル（録音レベル）の設定は通常の録音においても行なわれるものであるのに対し、再生レベルは重ね録音に特有の設定であるため、ユーザは不慣れであることが多い。このため、再生レベルの設定をユーザに委ねるとすると、試行錯誤しながら重ね録音を行なうことになりかねず、ユーザの負担が大きくなる。一方で、単純に再生レベルを固定とすると、重ね録音を繰り返す過程で、各声部の音量バランスに問題が生じていくおそれがある。これは、始めに録音された声部ほど、再録音が繰り返され埋もれていくためである。

そこで、本発明は、入力音声と再生音声とを重ねて記録する重ね録音において、再生レベルを適切に設定できるようにすることを目的とする。

上記課題を解決するため、本発明の第１の態様である重ね録音装置は、設定された再生レベルに従って音源データを再生する再生処理部と、入力音声信号と前記再生処理部が出力する再生音声信号とを重ね合わせた信号に基づいた録音データを生成し、生成した録音データを記録媒体に記録させる録音処理部と、重ね録音の重ね回数を判定する重ね回数判定部と、判定された重ね回数が多いほど、再生レベルが大きくなるように、前記再生処理部における再生レベルを設定するレベル設定部と、を備えたことを特徴とする。

前記録音処理部によって生成された前記録音データに対して、重ね回数を示す情報を付加する重ね回数情報付加部をさらに備え、前記重ね回数判定部は、前記音源データに付加された重ね回数を示す情報に基づいて重ね録音の重ね回数を判定するようにしてもよい。

また、設定された入力レベルに従って前記入力音声信号の入力レベルを調整する入力レベル調整部をさらに備え、前記レベル設定部は、判定された重ね回数が多いほど、入力レベルが小さくなるように、前記入力レベル調整部における入力レベルを設定することができる。

このとき、前記レベル設定部は、元の信号レベルに対する比率で前記再生レベルおよび前記入力レベルを設定し、重ね回数がＫ＋１回目の場合、Ｋ＋１回目までの再生レベルの積と、Ｋ＋１回目の入力レベルとが等しくなるように、前記再生レベルおよび前記入力レベルを設定することができる。

また、前記入力音声信号が基準値を超えないように入力レベルを調整する自動レベル調整部をさらに備え、前記レベル設定部は、判定された重ね回数が多いほど小さくなるように、前記自動レベル調整部における基準値を設定するようにしてもよい。

上記課題を解決するため、本発明の第２の態様である録音装置における重ね録音方法は、設定された再生レベルに従って音源データを再生する再生ステップと、入力音声信号と前記再生処理部が出力する再生音声信号とを重ね合わせた信号に基づいた録音データを生成し、生成した録音データを記録媒体に記録させる録音ステップと、重ね録音の重ね回数を判定する重ね回数判定ステップと、判定された重ね回数が多いほど、再生レベルが大きくなるように、前記再生ステップにおける再生レベルを設定するレベル設定ステップと、を含むことを特徴とする。

上記課題を解決するため、本発明の第３の態様であるコンピュータプログラムは、設定された再生レベルに従って音源データを再生する再生処理部と、入力音声信号と前記再生処理部が出力する再生音声信号とを重ね合わせた信号に基づいた録音データを生成し、生成した録音データを記録媒体に記録させる録音処理部と、重ね録音の重ね回数を判定する重ね回数判定部と、判定された重ね回数が多いほど、再生レベルが大きくなるように、前記再生処理部における再生レベルを設定するレベル設定部として、情報処理装置を機能させる。

本発明によれば、入力音声と再生音声とを重ねて記録する重ね録音において、再生レベルを適切に設定することができる。

本発明の第１実施形態に係る重ね録音装置の構成を示すブロック図である。 再生レベル設定部における再生レベルの設定処理について説明する図である。 第１実施形態における重ね録音装置の重ね録音動作について説明するフローチャートである。 本発明の第２実施形態に係る重ね録音装置の構成を示すブロック図である。 入力・再生レベル設定部における入力レベルおよび再生レベルの設定処理について説明する図である。 第１実施形態における重ね録音装置の重ね録音動作について説明するフローチャートである。 入力レベル調整部に代え、ＡＬＣを用いた場合の構成を示すブロック図である。 マルチトラックレコーダおよび従来の重ね録音装置の構成を示すブロック図である。

＜第１実施形態＞
本発明の実施の形態について図面を参照して詳細に説明する。図１は、本発明の第１実施形態に係る重ね録音装置の構成を示すブロック図である。本図に示すように、重ね録音装置１０は、音声入力部１１０、入力レベル設定部１２０、入力レベル調整部１３０、再生処理部１４０、重ね回数判定部１５０、再生レベル設定部１６０、録音処理部１７０、重ね回数情報付加部１８０、記録媒体１９０を備えている。

重ね録音装置１０は、ＩＣレコーダ等の専用装置として構成したり、ＣＰＵ、メモリ、入出力インタフェース、デコーダ／エンコーダ、表示装置、操作キー、電源等を備えた情報処理装置を用いて構成することができる。この場合、ＣＰＵがメモリに記録されたプログラムを実行することで、第１実施形態および第２実施形態で説明する種々の処理の制御を行なう。

記録媒体１９０は、重ね録音ファイル１９２と再生音源ファイル１９１とを格納するための記憶領域である。再生音源ファイル１９１は、重ね録音に用いる音源ファイルであり、再生音源ファイル１９１に基づいて再生される音声に、入力音声を重ねた音声が、重ね録音ファイル１９２として記録される。記録媒体１９０は、重ね録音装置１０内蔵の固定式としてもよいし、メモリカードのように着脱可能としてもよい。また、重ね録音ファイル１９２および再生音源ファイル１９１の音源のフォーマットは任意の形式を用いることができ、例えば、リニアＰＣＭ等の非圧縮形式、ｍｐ３等の圧縮形式を用いることができる。また、アナログ音声データとしてもよい。

音声入力部１１０は、新規に録音する音声を入力するブロックであり、本実施形態では、マイクロフォン１１１と、マイクロフォン１１１が出力する音声信号を適正なレンジに増幅するマイクロフォンアンプ１１２とを備えて構成される。音声入力部１１０は、重ね録音装置１０に内蔵してもよいし、外部装置を接続して音声入力部１１０を構成するようにしてもよい。

入力レベル調整部１３０は、可変アッテネータ等を用いて構成することができ、入力レベル設定部１２０の設定に従って、音声入力部１１０から入力された音声信号を減衰して出力する。

本実施形態では、入力レベル調整部１３０が減衰して出力する信号のレベルを、入力レベル調整部１３０に入力される信号のレベルを基準に表わすものとする。具体的には、入力レベル調整部１３０が出力する信号のレベルを、入力レベル調整部１３０に入力される信号のレベルを１００％（＝１）とした割合（入出力比）で表わすようにする。したがって、例えば、入力レベルとして入力レベル調整部１３０における入出力比が７０％に設定されると、元の信号レベルが７０％に減衰することになり、入力レベルとして入力レベル調整部１３０における入出力比が５０％に設定されると、元の信号レベルが５０％に減衰することになる。ただし、入力レベル調整部１３０が減衰して出力する信号のレベルの表し方は入力レベル調整部１３０における入出力比に限られず、減衰率、減衰量、その他の指標を用いるようにしてもよい。

入力レベル設定部１２０は、入力レベル、すなわち入力レベル調整部１３０の入出力比を設定する。第１実施形態では、ユーザの操作により入力レベルが設定されるものとする。すなわち、ユーザは重ね録音に際し、入力する音声が適正なレンジで録音されるように入力レベルを調整することができる。

ユーザによる入力レベルの設定は、例えば、不図示の表示装置に表示される入力レベル値とレベルメータとを参照して、カーソルボタンを操作することで入力レベル値を上下させるようにする。一般に、入力する音声が大きいほど入力レベルを小さく設定し、入力する音声が小さいほど入力レベルを大きく設定し、入力音声がオーバーフローしない範囲で、なるべく大きなレベルで録音できるようにする。なお、重ね録音装置１０に、自動レベルコントローラ（ＡＬＣ）機能を備えさせ、ユーザの選択により、自動的に入力ベルを調整するようにしてもよい。この場合、入力音声の最大音量が、オーバーフローレベルを超えないように入力レベルを自動調整する。

再生処理部１４０は、再生音源ファイル１９１を音声信号へと再生する。この再生音声信号は、録音処理部１７０に出力されるとともに、イヤフォン等から音声出力することができ、ユーザは再生音を聴きながら重ね合わせる音声を入力することができるようになっている。

また、再生処理部１４０は、再生レベル調整部１４１を備えている。再生レベル調整部１４１は、可変アッテネータ、デジタル音声処理装置等を用いて構成することができ、再生レベル設定部１６０の設定に従って、再生処理部１４０が再生音源ファイル１９１に基づいて再生する音声信号を、減衰して出力する。

本実施形態では、再生レベル調整部１４１が減衰して出力する信号のレベルを、再生音源ファイル１９１に記録された信号のレベルを基準に表わすものとする．具体的には、再生音源ファイル１９１に記録された信号のレベルを１００％（＝１）とした割合（入出力比）で表わすようにする。したがって、例えば、再生レベルとして再生レベル調整部１４１における入出力比が７０％に設定されると、元の信号レベルが７０％に減衰することになり、再生レベルとして再生レベル調整部１４１における入出力比が５０％に設定されると、元の信号レベルが５０％に減衰することになる。ただし、再生レベル調整部１４１が減衰して出力する信号のレベルの表し方は再生レベル調整部１４１における入出力比に限られず、減衰率、減衰量、その他の指標を用いるようにしてもよい。

再生レベル設定部１６０は、再生レベル、すなわち再生レベル調整部１４１の入出力比を設定する。第１実施形態では、重ね合わせ録音における重ね合わせ回数に応じて、適切な再生レベル値を再生レベル設定部１６０が自動設定する。このように、本実施形態では、重ね合わせ回数に応じて再生レベルを変化させるようにする。再生レベル設定部１６０の再生レベル設定の詳細について後述する。なお、再生レベル設定部１６０が再生レベルを自動設定した後に、ユーザによる再生レベル調整を受け付け可能としてもよい。

なお、入力レベル設定部１２０と再生レベル設定部１６０とは、別個のブロックとせずに、１つのブロックで入力レベル設定と再生レベル設定とを行なうようにしてもよい。

録音処理部１７０は、加算器等によって構成された音声合成部１７１を備えており、入力レベル調整部１３０によってレベル調整された入力音声信号と、再生レベル調整部１４１によってレベル調整された再生音声信号とを重ね合わせて（加算して）出力し、重ね録音ファイル１９２を生成する。つまり、録音処理部１７０は、重ね合わせた信号に基づいた録音データを生成し、重ね録音ファイル１９２として記録媒体１９０に記憶させる。

なお、入力レベル調整部１３０、再生レベル調整部１４１、音声合成部１７１等における各処理は、デジタル音声信号、アナログ音声信号のいずれを用いてもよい。ここでは、音声入力部１１０からのアナログ音声信号を入力レベル調整部１３０でレベル調整した後、録音処理部１７０でデジタル変換して、デジタル音声信号のまま再生レベル調整部１４１でレベル調整されたデジタル再生信号と、音声合成部１７１で合成するものとする。

重ね回数情報付加部１８０は、録音処理部１７０が生成する重ね録音ファイル１９２に重ね回数を示す情報を付加する。重ね回数は、重ね録音に用いる再生音源ファイル１９１の重ね回数に１を加えた回数である。

重ね回数を示す情報は、例えば、重ね録音ファイル１９２に重ね回数を含んだファイル名を付すことで付加することができる。あるいは、重ね回数をタグ情報として重ね録音ファイル１９２に記録するようにしてもよい。

重ね回数判定部１５０は、再生音源ファイル１９１に付加された重ね回数を示す情報に基づいて、重ね回数を判定する。重ね録音の際には、重ね回数は、上述のように再生音源ファイル１９１に付加された重ね回数に１を加えた回数となる。また、再生音源ファイル１９１に重ね回数を示す情報が含まれていない場合には、その重ね録音が、１回目の重ね回数と判定する。判定した重ね回数は、再生レベル設定部１６０に出力する。再生レベル設定部１６０は、重ね回数に基づいて再生音源ファイル１９１の再生レベル、すなわち再生レベル調整部１４１における入出力比を設定する。

ここで、第１実施形態における、再生レベル設定部１６０が行なう再生レベルの設定処理の詳細について図２を参照して説明する。本例では、「元音声０」に対して、４回の重ね録音を行なうものとする。簡単のため、入力音量は、各回ともほぼ一定であり、「元音声０」と同程度であるとする。そして、ユーザによる入力レベルの設定も一定であるものとする。一般に、同じ音量の声部を重ねて録音していく場合は、入力レベルは変化させないからである。

まず、再生音声と入力音声とを同じ割合で重ねるようにするために、再生レベルの設定として再生レベル調整部１４１における入出力比を５０％で固定した場合を考える。入力レベルも入力レベル調整部１３０における入出力比を５０％で固定とする。すなわち、再生レベル調整部１４１は、再生音源ファイル１９１に基づく音声信号のレベルを５０％に減衰して出力し、入力レベル調整部１３０は、音声入力部１１０から入力された音声信号のレベルを５０％に減衰して出力することになる。

この結果、図２（ａ）に示すように、１回目の重ね録音では、「元音声０」と「新規録音１（音声１）」とが、録音結果に対して同じ割合で録音されることになる。このため、「元音声０」と「音声１」とは同じ音量となる。

しかしながら、２回目の重ね録音では、１回目の重ね録音結果に対して「新規録音２（音声２）」を重ねて録音するため、「新規録音２（音声２）」は、録音結果に対して５０％の割合で録音されるのに対し、「元音声０」と「音声１」とは、それぞれ１／４（＝２５％：以下では、必要に応じてパーセントと分数の簡易な方で記載する）の割合となる。このため、「音声２」に対して「元音声０」と「音声１」とは小さい音量となる。

さらに、３回目の重ね録音では、「新規録音３（音声３）」は、録音結果に対して５０％の割合で録音されるのに対し、「音声２」は、１／４の割合となり、「元音声０」と「音声１」とは１／８の割合まで小さく録音される。このため、「音声３」に対して「音声２」は小さい音量となり、「元音声０」と「音声１」とはさらに小さい音量となる。

４回目の重ね録音についても同様であり、重ね回数が増えるにつれて前に録音された音声ほど小さくなっていき、声部間の音量バランスが悪くなってしまう。この結果、１回の重ね録音につき１つの楽器の演奏を録音していく場合等において、各楽器間の音量バランスに歪みが生じることになる。

そこで、第１実施形態の再生レベル設定部１６０は、図２（ｂ）に示すように、重ね回数が増えるほど、再生レベルが大きくなるように、すなわち、再生レベル調整部１４１における入出力比を大きくして、減衰させる量が少なくなるように設定する。この結果、図２（ｃ）に示すように、入力レベルが変化しない場合であっても、前に録音した音声の録音結果に対する割合を相対的に大きくすることができる。このため、重ね回数が増えるにつれて声部間の音量バランスが悪くなることを防ぐことができる。なお、重ね回数が増えるにつれて再生レベルが大きくなるため、入力レベルが変化しない場合、録音結果全体としての音量は増加していくことになる。

また、ユーザによって入力レベルが変更された場合にも、重ね回数が増えるほど、再生レベルが大きく設定されるため、前に録音した音声が小さくなり過ぎることを防ぐことができ、重ね回数が増えるにつれて声部間の音量バランスが悪くなることを防ぐことができる。

重ね回数に応じて再生レベル調整部１４１における入出力比をどの程度大きくするかは、重ね録音装置１０のダイナミックレンジ等の特性、使用目的等に応じて柔軟に定めることができる。再生レベル調整部１４１における入出力比は無限に大きくすることはできないので、ある重ね回数を超えると固定値になるようにしてもよい。

次に、第１実施形態における重ね録音装置１０の重ね録音動作について図３のフローチャートを参照して説明する。

重ね録音動作開始に際して、重ね録音装置１０は、重ね録音に用いる再生音源ファイル１９１を特定する（Ｓ１０１）。再生音源ファイルの特定は、例えば、記録媒体１９０に記録されている音源ファイルの中から、ユーザの選択を受け付けることによって行なうことができる。

そして、選択された再生音源ファイルに付加されている重ね回数情報を参照して、重ね回数判定部１５０が、今回の重ね録音における重ね回数を判定する（Ｓ１０２）。上述のように、今回の重ね録音における重ね回数は、再生音源ファイル１９１に付加されている重ね回数情報が示す重ね回数に１を加えたものである。

重ね回数を判定すると、重ね回数に基づいて再生レベルを設定する（Ｓ１０３）。再生レベルは、再生レベル設定部１６０によって、重ね回数が多いほど、再生レベル調整部１４１における入出力比が大きくなるように設定される。この際に、再生レベル設定部１６０は、あらかじめ定められた関係式に従って入出力比を設定するようにしてもよいし、事前に作成したテーブルに従って入出力比を設定するようにしてもよい。

また、ユーザからは入力レベルの設定を受け付ける（Ｓ１０４）。入力レベルの設定は、重ね録音中を含め、任意のタイミングで受け付けることができ、リアルタイムに入力レベル値に反映することができる。また、ＡＬＣ機能を備えている場合は、入力音声がオーバーフローしないように入力レベルを自動的に設定するようにしてもよい。この場合、ユーザは、入力レベルの自動設定、手動設定を選択できることになる。

再生レベル設定部１６０によって再生レベルが設定されると、再生・録音を開始する（Ｓ１０５）。再生音声は、イヤフォン等に出力され、音声入力を行なうユーザが聴くことができる。また、録音処理部１７０は、重ね録音ファイル１９２を新規作成する（Ｓ１０６）。この際に、重ね回数情報付加部１８０が、重ね録音ファイル１９２に重ね回数情報を付加する。

その後は、重ね録音の終了指示をユーザから受け付けるまで（Ｓ１０９：Ｙｅｓ）、音声入力部１１０を介した音声入力（Ｓ１０７）を行ない、録音処理部１７０による、入力音声と再生音声との合成処理および合成音声の重ね録音ファイル１９２への記録（Ｓ１０８）を繰り返す（Ｓ１０９：Ｎｏ）。

この際に、入力音声に対しては、ユーザによって設定された入力レベルに従って入力レベル調整部１３０がレベル調整を行ない、再生音声に対しては、再生レベル設定部１６０によって設定された再生レベルに従った入出力比で再生レベル調整部１４１がレベル調整を行なう。

以上説明したように、第１実施形態によれば、重ね回数が増えるほど、再生レベルが大きくなるように設定するため、重ね回数が増えるにつれて声部間の音量バランスが悪くなることを防ぐことができる。したがって、再生レベルが適切に設定された重ね録音を行なうことができる。なお、本実施形態においては、再生レベル設定部１６０が、重ね回数が多いほど入出力比が大きくなるように、再生レベル調整部１４１における入出力比を設定している。これによって、重ね回数が増えるほど、再生レベルが大きくなるように設定されることとなる。

＜第２実施形態＞
次に、本発明の第２実施形態について説明する。図４は、本発明の第２実施形態に係る重ね録音装置の構成を示すブロック図である。第１実施形態と同じブロックについては同じ符号を付して、説明を簡略化する。また、第２実施形態においても、再生レベルの調整は、再生レベル調整部１４１における入出力比を変更することで行ない、入力レベルの調整は、入力レベル調整部１３０における入出力比を変更することで行なうものとする。

本図に示すように、重ね録音装置１０ａは、音声入力部１１０、入力レベル調整部１３０、再生処理部１４０、重ね回数判定部１５０、録音処理部１７０、重ね回数情報付加部１８０、記録媒体１９０、入力・再生レベル設定部２００を備えている。

第２実施形態に係る重ね録音装置１０ａの、第１実施形態に係る重ね録音装置１０との相違点は、入力レベル設定部１２０、再生レベル設定部１６０に代え、入力・再生レベル設定部２００を備えている点である。すなわち、第２実施形態に係る重ね録音装置１０ａは、重ね回数に応じて、再生レベルのみならず入力レベルの設定も行なう。ただし、再生レベル、入力レベルの設定を行なった後、ユーザからレベル値の変更を受け付け可能なようにしてもよい。また、入力・再生レベル設定部２００を、入力レベルを設定するブロックと再生レベルを設定するブロックとに分割してもよい。

第２実施形態における、入力・再生レベル設定部２００が行なう再生レベルと入力レベルの設定処理、すなわち再生レベル調整部１４１における入出力比と入力レベル調整部１３０における入出力比の設定処理について図５を参照して説明する。本例でも「元音声０」に対して、４回の重ね録音を行なうものとし、入力音声の音量が毎回ほぼ同じであり、「元音声０」と同程度であると仮定する。

また、適正レベルの再生音声と適正レベルの入力音声との合成音声がオーバーフローしてしまうことを確実に避けるために、再生レベルと入力レベルに対応する入出力比の合計値が１００％（＝１）となるように設定するものとする。

再生音声信号、入力音声信号ともオーバーフロー限界までの音量となっている場合は、再生レベルと入力レベルに対応する入出力比の合計値を１００％超とすると、重ね合わせ加算によりオーバーフローが生じることとなるが、実際は、入力音声信号と再生音声信号とが同時にオーバーフロー限界までの音量となることはまれである。このため、再生レベルと入力レベルに対応する入出力比の合計値を１００％超としても加算後の信号レベルがオーバーフローしないことが多いと考えられるが、理解を容易にするため、まず、再生レベルと入力レベルに対応する入出力比の合計値が１００％となるように設定する場合を例にして説明する。

ここでは、重ね録音の結果、各声部がほぼ同じ音量バランスで録音されている状態を理想と考える。このような状態を実現するためには、図５（ａ）に示すように、入力・再生レベル設定部２００は、１回目の重ね録音結果では、「元音声０」と「新規録音１（音声１）」とがそれぞれ１／２の割合となるように再生レベルと入力レベルとを設定すればよい。すなわち、再生レベル、入力レベルとも入出力比を５０％に設定する。

２回目の重ね録音結果では、「元音声０」と「音声１」と「新規録音２（音声２）」とがそれぞれ１／３の割合となるように再生レベルと入力レベルとを設定すればよい。すなわち、入力・再生レベル設定部２００は、再生レベル調整部１４１における入出力比を２／３（＝６６％）に設定し、入力レベル調整部１３０における入出力比を１／３（＝３３％）に設定する。

さらに、３回目の重ね録音結果では、「元音声０」と「音声１」と「音声２」と「新規録音３（音声３）」とがそれぞれ１／４の割合となるように再生レベルと入力レベルとに対応する入出力比を設定し、４回目の重ね録音結果では、「元音声０」と「音声１」と「音声２」と「音声３」と「新規録音４」とがそれぞれ１／５の割合となるように再生レベルと入力レベルとに対応する入出力比を設定すればよい。

このようなレベル設定を行なうため、入力・再生レベル設定部２００は、図５（ｂ）に示すような入出力比となるように再生レベルと入力レベルとを設定する。すなわち、１回目の重ね録音では再生レベル、入力レベルとも元信号が５０％（＝１／２）に減衰するようにし、以降は、重ね回数が増えるにつれて、再生レベルが大きくなるように、入力レベルが小さくなるように、再生レベル調整部１４１における入出力比と入力レベル調整部１３０における入出力比とを設定する。

ここでは、再生レベルと入力レベルに対応する入出力比の合計値が１００％（＝１）となるように設定しているため、重ね回数が増えるにつれて、再生レベルは、再生レベル調整部１４１における入出力比が、１／２、２／３、３／４、４／５と大きくなり、入力レベルは、入力レベル調整部１３０における入出力比が、１／２、１／３、１／４、１／５と小さくなるように設定しているが、必ずしも再生レベルと入力レベルに対応する入出力比の合計値が１００％（＝１）となる必要はない。

入力・再生レベル設定部２００は、再生レベルと入力レベルに対応する入出力比の合計値が１００％（＝１）よりも大きくなるように、入力レベル調整部１３０および再生レベル調整部１４１に対するレベル設定を行なってもよい。これは、上述のように、入力音声信号と再生音声信号とが同時にオーバーフロー限界までの音量となることはまれであり、再生レベルと入力レベルに対応する入出力比の合計値を１００％超としても加算後の信号レベルはオーバーフローしないことが多いと考えられるからである。

また、最大音量がダイナミックレンジの最大値に対して余裕がある場合には、オーバーフローを起こさない範囲で、再生レベルと入力レベルに対応する入出力比の合計値が１００％超となるように設定することで、重ね録音結果のダイナミックレンジを拡大させることができる。

ここでは、例えば、再生レベルと入力レベルに対応する入出力比の合計値が、１００％（＝１）に対して＋３ｄＢ（＝１４１．４％）となるように設定する場合を例にする。この場合は、図５（ｃ）に示すような値を再生レベルと入力レベルに対応する入出力比に設定すればよい。この場合も、重ね回数が増えるにつれて、再生レベルが大きくなるように、入力レベルが小さくなるように設定される。

さらに、再生レベルと入力レベルに対応する入出力比の合計値は、重ね回数毎に変化させるようにしてもよい。この場合は、図５（ｄ）に示すように一般化することができる。ここでは、ｋ＋１回目（ｋは自然数）の重ね録音時の再生レベルに対応する入出力比をａ_ｋ、入力レベルに対応する入出力比をｂ_ｋ、再生レベルに対応する入出力比と入力レベルに対応する入出力比の合計をＡ_ｋとしている。

良好な音量バランスを得るためには、ｋ＋１回目までの再生レベルに対応する入出力比の積と、ｋ＋１回目の入力レベルに対応する入出力比とが等しくなればよいことから、［数１］が得られる。

また、再生レベルに対応する入出力比ａ_ｋ、入力レベルに対応する入出力比ｂ_ｋ、合計Ａ_ｋは、［数２］の関係を満たす。

以上から、再生レベルに対応する入出力比ａ_ｋ、入力レベルに対応する入出力比ｂ_ｋは、［数３］で求めることができる。

［数３］を用いることで、重ね回数に応じて再生レベルと入力レベルに対応する入出力比の合計値を柔軟に設定することが可能となる。図５（ｃ）に示した値は、再生レベルと入力レベルに対応する入出力比の合計値が毎回１４１．４％（＝＋３ｄＢ）となるように定め、［数３］から得ることができる。

重ね回数に応じて合計値を変動させる場合には、例えば、重ね回数が少ないときは、オーバーフローを極力避けるために、入出力比の合計を１００％（＝１）付近とし、重ね回数が多くなったときは、入出力比の合計を大きくすることで、音量の低下を避けることができる。入力レベル、再生レベルに対応する入出力比の設定は、ユーザから合計値の入力を重ね録音毎に受け付けて毎回計算するようにしてもよいし、あらかじめテーブルを作成しておくようにしてもよい。

次に、第２実施形態における重ね録音装置１０ａの重ね録音動作について図６のフローチャートを参照して説明する。第２実施形態における重ね録音装置１０と同じ動作については説明を簡略化する。

重ね録音装置１０ａは、重ね録音に用いる再生音源ファイル１９１を特定する（Ｓ２０１）。そして、選択された再生音源ファイルに付加されている重ね回数情報を参照して、重ね回数判定部１５０が、今回の重ね録音における重ね回数を判定する（Ｓ２０２）。

重ね回数を判定すると、重ね回数に基づいて再生レベルと入力レベルとを設定する（Ｓ２０３）。再生レベルと入力レベルは、入力・再生レベル設定部２００によって、重ね回数が多いほど、再生レベルが大きくなるように、入力レベルが小さくなるように、すなわち再生レベル調整部１４１における入出力比が大きくなるように、入力レベル調整部１２０における入出力比が小さくなるように設定される。

再生レベル、入力レベルとも、自動設定後にユーザによる変更を受け付けるようにしてもよい。これにより、入力音声の音量に対応したり、ユーザの楽曲制作意図に従った重ね録音を行なうことができるようになる。例えば、新規に録音する入力音声が、比較的大きい音量であれば、入力レベルを下げることで、他の声部との均整を保つことができる。また、新規に録音する入力音声が、ソロパートであれば、入力レベルを上げることで、ソロを際立たせることができる。このように、自動設定後にユーザによる変更を受け付けるようにした場合でも、先に入力レベル設定部１２０および再生レベル設定部１６０によって、重ね録音するのに適切なレベルに自動設定されているため、ユーザは容易に所望のレベルに変更することができる。

入力・再生レベル設定部２００によって入力レベルおよび再生レベルが設定されると、再生・録音を開始する（Ｓ２０４）。また、録音処理部１７０は、重ね録音ファイル１９２を新規作成する（Ｓ２０５）。この際に、重ね回数情報付加部１８０が、重ね録音ファイル１９２に重ね回数情報を付加する。

その後は、重ね録音の終了指示をユーザから受け付けるまで（Ｓ２０８：Ｙｅｓ）、音声入力部１１０を介した音声入力（Ｓ２０６）を行ない、録音処理部１７０による、入力音声と再生音声との合成処理および合成音声の重ね録音ファイル１９２への記録（Ｓ２０７）を繰り返す（Ｓ２０８：Ｎｏ）。

以上説明したように、第２実施形態によれば、重ね回数が増えるほど、再生レベルが大きくなるように、入力レベルが小さくなるように設定するため、重ね回数が増えるにつれて声部間の音量バランスが悪くなることを防ぐことができるのに加え、各声部の音量が均一化される。したがって、再生レベルが適切に設定された重ね録音を行なうことができる。

なお、図７のブロック図に示すように、入力レベル調整部１３０に代え、ＡＬＣ（オート・レベル・コントロール）部（自動レベル調整部）１３２を用いたり、ユーザの選択に従って入力レベル調整部１３０とＡＬＣ部１３２とを切替えるようにしてもよい。

ＡＬＣ部１３２は、入力音声の最大音量が、ターゲットレベルと呼ばれる音量レベルを超えないように入力レベルを自動調整する。ターゲットレベルは、通常、オーバーフローレベルよりも少し小さい値が設定されるが、本実施形態のＡＬＣ部１３２は、入力・再生レベル設定部２００が設定する入力レベルに連動したターゲットレベルでオード・レベル・コントロールを行なう。

すなわち、図５（ｂ）に示す入力レベルを例にすると、ＡＬＣ部１３２は、１回目の重ね録音では、通常のターゲットレベルの１／２をターゲットレベルとして設定し、２回目の重ね録音では、通常のターゲットレベルの１／３をターゲットレベルとして設定し、３回目の重ね録音では、通常のターゲットレベルの１／４をターゲットレベルとして設定して、オート・レベル・コントロールを行なう。以降の回数についても同様である。

このように、重ね回数が増えるほど、ターゲットレベルが小さくなるように設定することで、再生レベルを適切に設定できるのに加え、入力音声が再生音声に比べて大きくなり過ぎることを防ぐことができる。

１０…重ね録音装置
１０ａ…重ね録音装置
１１０…音声入力部
１１１…マイクロフォン
１１２…マイクロフォンアンプ
１２０…入力レベル設定部
１３０…入力レベル調整部
１３２…ＡＬＣ部
１４０…再生処理部
１４１…再生レベル調整部
１５０…重ね回数判定部
１６０…再生レベル設定部
１７０…録音処理部
１７１…音声合成部
１８０…重ね回数情報付加部
１９０…記録媒体
１９１…再生音源ファイル
１９２…重ね録音ファイル
２００…入力・再生レベル設定部
３１０…入力装置
３２０…再生音源ファイル
３３０…重ね録音ファイル
３４０…入力レベル設定部
３５０…再生レベル設定部
３６０…加算器

Claims (7)

1. 設定された再生レベルに従って音源データを再生する再生処理部と、
   入力音声信号と前記再生処理部が出力する再生音声信号とを重ね合わせた信号に基づいた録音データを生成し、生成した録音データを記録媒体に記録させる録音処理部と、
   重ね録音の重ね回数を判定する重ね回数判定部と、
   判定された重ね回数が多いほど、再生レベルが大きくなるように、前記再生処理部における再生レベルを設定するレベル設定部と、
   を備えたことを特徴とする重ね録音装置。
2. 前記録音処理部によって生成された前記録音データに対して、重ね回数を示す情報を付加する重ね回数情報付加部をさらに備え、
   前記重ね回数判定部は、前記音源データに付加された重ね回数を示す情報に基づいて重ね録音の重ね回数を判定することを特徴とする請求項１に記載の重ね録音装置。
3. 設定された入力レベルに従って前記入力音声信号の入力レベルを調整する入力レベル調整部をさらに備え、
   前記レベル設定部は、判定された重ね回数が多いほど、入力レベルが小さくなるように、前記入力レベル調整部における入力レベルを設定することを特徴とする請求項１または２に記載の重ね録音装置。
4. 前記レベル設定部は、
   元の信号レベルに対する比率で前記再生レベルおよび前記入力レベルを設定し、
   重ね回数がＫ＋１回目の場合、Ｋ＋１回目までの再生レベルの積と、Ｋ＋１回目の入力レベルとが等しくなるように、前記再生レベルおよび前記入力レベルを設定することを特徴とする請求項３に記載の重ね録音装置。
5. 前記入力音声信号が基準値を超えないように入力レベルを調整する自動レベル調整部をさらに備え、
   前記レベル設定部は、判定された重ね回数が多いほど小さくなるように、前記自動レベル調整部における基準値を設定することを特徴とする請求項１または２に記載の重ね録音装置。
6. 設定された再生レベルに従って音源データを再生する再生ステップと、
   入力音声信号と前記再生処理部が出力する再生音声信号とを重ね合わせた信号に基づいた録音データを生成し、生成した録音データを記録媒体に記録させる録音ステップと、
   重ね録音の重ね回数を判定する重ね回数判定ステップと、
   判定された重ね回数が多いほど、再生レベルが大きくなるように、前記再生ステップにおける再生レベルを設定するレベル設定ステップと、
   を含むことを特徴とする録音装置における重ね録音方法。
7. 設定された再生レベルに従って音源データを再生する再生処理部と、
   入力音声信号と前記再生処理部が出力する再生音声信号とを重ね合わせた信号に基づいた録音データを生成し、生成した録音データを記録媒体に記録させる録音処理部と、
   重ね録音の重ね回数を判定する重ね回数判定部と、
   判定された重ね回数が多いほど、再生レベルが大きくなるように、前記再生処理部における再生レベルを設定するレベル設定部として、情報処理装置を機能させるためのコンピュータプログラム。