JPH0775438B2 - Signal processing method for converting stereophonic signal from monophonic signal - Google Patents

Signal processing method for converting stereophonic signal from monophonic signal

Info

Publication number
JPH0775438B2
JPH0775438B2 JP63065471A JP6547188A JPH0775438B2 JP H0775438 B2 JPH0775438 B2 JP H0775438B2 JP 63065471 A JP63065471 A JP 63065471A JP 6547188 A JP6547188 A JP 6547188A JP H0775438 B2 JPH0775438 B2 JP H0775438B2
Authority
JP
Japan
Prior art keywords
signal
stereo
time
stereophonic
transfer function
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP63065471A
Other languages
Japanese (ja)
Other versions
JPH01238400A (en
Inventor
輝雄 村岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Victor Company of Japan Ltd
Original Assignee
Victor Company of Japan Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Victor Company of Japan Ltd filed Critical Victor Company of Japan Ltd
Priority to JP63065471A priority Critical patent/JPH0775438B2/en
Publication of JPH01238400A publication Critical patent/JPH01238400A/en
Publication of JPH0775438B2 publication Critical patent/JPH0775438B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Stereophonic System (AREA)
  • Stereo-Broadcasting Methods (AREA)

Description

【発明の詳細な説明】 (産業上の利用分野) 本発明はモノフォニック信号をステレオフォニック信号
化するための信号処理方法に関する。
The present invention relates to a signal processing method for converting a monophonic signal into a stereophonic signal.

(従来の技術) 空間内に分布された多数の音源から放射された音響信号
をモノフォニック信号(以下、モノラル信号と記載され
ることもある)として円筒レコードや円盤レコードを用
いて記録再生することは古くから実用化されており、声
楽家や演奏家によって過去に演奏された音楽も、それら
が記憶されているレコードを再生すれば現在の時点でも
聴取可能である。
(Prior Art) It is not possible to record and reproduce an acoustic signal radiated from a large number of sound sources distributed in space as a monophonic signal (hereinafter also referred to as a monaural signal) using a cylindrical record or a disc record. It has been put to practical use for a long time, and even music played in the past by vocalists and performers can be heard at the present point in time by reproducing the record in which it is stored.

ところで、空間内に分布された多数の音源から放射され
た音響信号によって形成されている立体音場内で日常生
活を送っている我々は、通常、前記の多数の音源から放
射された音響信号を両耳における音のレベル差や位相差
などにより立体感のあるものとして聴取しているのに、
もともと立体音場を形成させる複数の音源から放射され
た音響信号がモノラル信号として記録されているレコー
ドから再生された音楽は聴感上で不自然なものであっ
た。
By the way, we, who live our daily lives in a three-dimensional sound field formed by acoustic signals radiated from a large number of sound sources distributed in space, usually use the acoustic signals radiated from the aforesaid large number of sound sources. Although it is heard as having a stereoscopic effect due to the level difference and phase difference of the sound in the ear,
Originally, music reproduced from a record in which acoustic signals radiated from a plurality of sound sources forming a three-dimensional sound field were recorded as monaural signals was unnatural to the sense of hearing.

それで、聴取者に立体音感を与えることのできる立体再
生音場を形成させうるステレオフォニック信号(以下、
ステレオ信号と記載されることもある)を記録した円盤
レコード(ステレオ・レコード)についても、従来から
各種の立体音響記録再生方式によるものが従来から実用
化されていることは周知であり、また、ステレオ・レコ
ード以外にも、記録済磁気テープ、その他、光学式高密
度記録媒体円盤、静電容量値の変化検出型の高密度記録
媒体円盤などによってステレオ信号の記録再生を行った
り、ステレオ信号の送受(伝送)を行うようにすること
も従来から実用化されている。
Therefore, a stereophonic signal (hereinafter, referred to as a stereophonic signal that can form a stereoscopic reproduction sound field that gives a listener a stereophonic effect)
It is well known that disc records (stereo records) that record (also referred to as stereo signals) have been put into practical use by various stereophonic recording / reproducing systems. In addition to stereo records, recorded and reproduced stereo signals using recorded magnetic tape, other optical high-density recording medium discs, high-density recording medium discs with change detection type of capacitance value, etc. Transmission and reception (transmission) has been put into practical use in the past.

そして、従来から最も一般的に実施されて来た立体音響
の記録再生(あるいは送受,伝送)方式における立体音
響の再生は、聴取者の前面に配置された2つの再生音源
から左,右の音響信号を放射させて空間内に立体再生音
場を形成させるようにしており、前記の左,右の音響信
号を発生させるのに使用される左チャンネル信号Lと右
チャンネル信号Rとの記録再生(あるいは送受,伝送)
態様としては、従来から次の2つのものが代表的なもの
として知られている。
The reproduction of stereophonic sound in the stereophonic sound recording / reproducing (or transmitting / receiving, transmitting) method that has been most commonly performed in the past is performed by two reproduction sound sources arranged in front of the listener. Recording and reproduction of a left channel signal L and a right channel signal R (used to generate the above left and right acoustic signals) by radiating a signal to form a stereoscopic reproduction sound field in space ( Or send / receive, transmit)
Conventionally, the following two aspects are known as typical aspects.

その1つは、例えば45−45方式のステレオ・レコードで
実施されているように、左チャンネル信号Lをレコード
音溝の左側壁面へ、また、右チャンネル信号Rをレコー
ド音溝の右側壁面へ記録する、というように、左,右チ
ャンネル信号L,Rに対して何等の演算も施すことなしに
記録再生(あるいは送受,伝送)を行うようにするもの
であり、また他の1つは例えばFM放送において実施され
ているように、左,右のチャンネル信号L,Rより、(左
チャンネル信号L+右チャンネル信号R)として示され
る和信号Wと、(左チャンネル信号L−右チャンネル信
号R)として示される差信号Sとを形成して前記の両信
号を記録(伝送)し、また、前記した和信号Wと差信号
Sとに対して、左チャンネル信号L=(和信号W+差信
号S)/2右チャネル信号R=(和信号W−差信号S)/2
前記の諸式に従う演算を行って左,右のチャンネル信号
L,Rを復原し、左,右の音響信号が再生されるようにす
る、という原理に基づいて記録再生(または送受,伝
送)を行うものであった。
One of them is to record the left channel signal L on the left wall surface of the record sound groove and the right channel signal R on the right wall surface of the record sound groove, for example, as implemented in a 45-45 stereo record. That is, the recording / reproducing (or transmitting / receiving / transmitting) is performed without performing any calculation on the left and right channel signals L and R, and the other one is, for example, FM. As carried out in broadcasting, from the left and right channel signals L and R, as a sum signal W shown as (left channel signal L + right channel signal R) and as (left channel signal L-right channel signal R) The difference signal S shown is formed to record (transmit) both of the above signals, and the left channel signal L = (sum signal W + difference signal S) with respect to the above sum signal W and difference signal S. / 2 right channel signal = (Sum signal W- difference signal S) / 2
The left and right channel signals are calculated by the calculation according to the above formulas.
Recording and reproduction (or transmission / reception, transmission) was performed based on the principle of restoring L and R so that left and right acoustic signals are reproduced.

(発明が解決しようとする問題点) さて、ステレオレコード、その他の立体音響情報のプロ
グラムソースによって提供される立体音響再生音場によ
る再生音楽の聴取が一般的になると、立体音響情報のプ
ログラムソースが普及する以前に広く使用されていたモ
ノラル信号によるレコード、その他のプログラムソース
からの再生音が物足りなく感じられるようになり、その
ために、モノラル信号を記録している記録済記録媒体
(例えば、古いモノラル・レコード)から再生したモノ
ラル信号をステレオ信号化し、それを用いて例えばステ
レオ・レコードが作られるようになったことも周知のと
おりである。
(Problems to be Solved by the Invention) Now, when it becomes common to listen to reproduced music in a stereophonic sound reproduction sound field provided by a stereophonic record or other stereophonic sound information program source, the stereophonic sound information program source becomes Recorded by a monaural signal that was widely used before it became popular, and the reproduced sound from other program sources became unsatisfactory.For that reason, a recorded recording medium (for example, an old mono. It is also well known that a monaural signal reproduced from a (record) is converted into a stereo signal and, for example, a stereo record is made by using the stereo signal.

前記のようにモノラル信号をステレオ信号化する際に従
来適用されていた信号処理の方法としては、(1)モノ
ラル信号に種々のフィルタを適用してそれぞれの楽器の
音を分離し、それぞれの楽器の音像の定位を行う。
(2)モノラル信号に移相回路(オール・パスフィル
タ)を適用して再生音場に拡がり感を与える。(3)モ
ノラル信号に反響や残響を付加して立体音響的な拡がり
感が感じられるようにする。(4)モノラル信号に前記
した(1)〜(3)の手数を組合わせて適用する。など
が代表的なものとして知られており、前記のようにして
作られたステレオ信号は「擬似ステレオ信号」と称され
て、その擬似ステレオ信号が記録された記録済記録媒体
も市販されているが、従来の(1)〜(4)の手段によ
ってモノラル信号をステレオ信号化した擬似ステレオ信
号において、前記した(1)については楽器の定位が不
自然、かつ、不安定であり、場合によっては全く定位が
無いこともあるなどの定位不良の問題があり、また、前
記した(2)については再生された左右の音の位相が大
きく異て聴取者に疲労感を与えるという問題があり、さ
らに、前記した(3)については擬似ステレオ信号にお
ける和信号をモノラル信号として聴取した場合に、もと
のモノラル信号とは全く異なった音として再生されてし
まうという問題があり、さらにまた、前記した(4)に
ついては前記した(1)〜(3)における諸欠点が表わ
れる。
As described above, as a signal processing method that has been conventionally applied when converting a monaural signal into a stereo signal, (1) various filters are applied to the monaural signal to separate the sounds of the respective musical instruments and the respective musical instruments. Localize the sound image of.
(2) A phase shift circuit (all-pass filter) is applied to a monaural signal to give a sense of expansion to the reproduced sound field. (3) Reverberation and reverberation are added to the monaural signal so that a stereophonic expansive feeling can be felt. (4) The monaural signal is applied in combination with the steps (1) to (3) described above. Are known as typical ones, and the stereo signal created as described above is called "pseudo stereo signal", and a recorded recording medium on which the pseudo stereo signal is recorded is also commercially available. However, in the pseudo-stereo signal obtained by converting the monaural signal into a stereo signal by the conventional means (1) to (4), with respect to the above (1), the localization of the musical instrument is unnatural and unstable. There is a problem of poor localization such that there is no localization at all, and with respect to (2) above, there is a problem that the phase of the left and right reproduced sounds is greatly different and the listener feels tired. Regarding the above (3), when the sum signal in the pseudo stereo signal is heard as a monaural signal, it is reproduced as a sound completely different from the original monaural signal. There are, furthermore, the above-mentioned (4) is divided various disadvantages in the above (1) to (3) a table.

(問題点を解決するための手段) 本発明はデジタル信号処理技術を適用してモノフォニッ
ク信号をステレオフォニック信号化する信号処理法であ
って、ステレオフォニック信号化の対象にされているモ
ノフォニック信号と、同一内容の曲目の2チャンネルに
よるステレオフォニック信号の右チャンネル信号と左チ
ャンネル信号とによって形成される和信号と差信号とに
おける差信号を和信号で除して時変伝達関数を得る手段
と、ステレオフォニック信号化の対象にされているモノ
フォニック信号に対して前記した時変伝達関数と同期さ
せるように、ステレオフォニック信号の和信号とステレ
オフォニック信号化の対象にされているモノフォニック
信号との、それぞれのエンベロープの対比を行なうこと
により、ステレオフォニック信号の和信号とステレオフ
ォニック信号化の対象にされているモノフォニック信号
の時間軸の同期関係を示す非線形関数を導出し、前記の
非線形関数に基づいて前記した時変伝達関数の時間軸を
変更し、ステレオフォニック信号化の対象にされている
モノフォニック信号に対して同期関係にある新たな時変
伝達関数を得る手段と、ステレオフォニック信号化の対
象にされているモノフォニック信号に対して、前記した
新たな時変伝達関数を適用して擬似差信号を得る手段
と、ステレオフォニック信号化の対象にされているモノ
フォニック信号と、前記した擬似差信号からステレオフ
ォニック信号を復原する演算を施す手段とからなるモノ
フォニック信号のステレオフォニック信号化のための信
号処理方法を提供するものである。
(Means for Solving Problems) The present invention is a signal processing method for converting a monophonic signal into a stereophonic signal by applying a digital signal processing technique, and a monophonic signal that is a target of stereophonic signal conversion, A means for obtaining a time-varying transfer function by dividing a difference signal between a sum signal and a difference signal formed by a right channel signal and a left channel signal of a stereophonic signal of two channels of the same music by a sum signal; The sum signal of the stereophonic signal and the monophonic signal targeted for stereophonic signal conversion of the monophonic signal targeted for phonic signal synchronization are synchronized with the time-varying transfer function described above. By comparing the envelope, the stereophonic signal Of the stereophonic signal by deriving a non-linear function indicating a time-axis synchronization relationship between the signal and the stereophonic signal, and changing the time axis of the time-varying transfer function based on the non-linear function. Means for obtaining a new time-varying transfer function in a synchronous relationship with the monophonic signal to be signaled, and the above-mentioned new time-varying variable with respect to the monophonic signal to be stereophonic signalized. Of a monophonic signal consisting of a means for obtaining a pseudo difference signal by applying a transfer function, a monophonic signal targeted for stereophonic signal conversion, and a means for performing an operation to restore the stereophonic signal from the pseudo difference signal A signal processing method for stereophonic signal conversion is provided.

(実施例) 以下、添付図面を参照して本発明のモノフォニック信号
のステレオフォニック信号化のための信号処理方法の具
体的な内容について詳細に説明するが、まず、本発明の
モノォニック信号のステレオフォニック信号化のための
信号処理方法の構成原理について説明する。
(Examples) Hereinafter, specific contents of a signal processing method for converting a monophonic signal into a stereophonic signal of the present invention will be described in detail with reference to the accompanying drawings. First, a stereophonic signal of a monophonic signal of the present invention will be described. The configuration principle of the signal processing method for signalization will be described.

既述もしたように、FMステレス放送のような立体音響記
録(伝送)方式では、左チャンネル信号Lと右チャンネ
ル信号Rとを(左チャンネル信号L+右チャンネル信号
R)として示される和信号W、すなわち、W=L+R…
(1) と、(左チャンネル信号L−右チャンネル信号R)とし
て示される差信号S、すなわち、 S=L−R …(2) との2種類の信号として記録,伝送し、また、前記した
和信号W=(L+R)と差信号S=(L−R)とに次の
(3),(4)式のような演算を施すことにより、左チ
ャンネル信号Lと右チャンネル信号Rとが復原できるよ
うにされている。
As described above, in the stereophonic sound recording (transmission) system such as the FM stereo broadcast, the sum signal W in which the left channel signal L and the right channel signal R are represented as (left channel signal L + right channel signal R), That is, W = L + R ...
(1) and a difference signal S represented as (left channel signal L-right channel signal R), that is, S = LR ... (2) are recorded and transmitted as two types of signals, and are also described above. The sum signal W = (L + R) and the difference signal S = (LR) are subjected to calculations as in the following equations (3) and (4) to restore the left channel signal L and the right channel signal R. It is made possible.

L=(和信号W+差信号S)/2 …(3) R=(和信号W−差信号S)/2 …(4) 前記した(1)式で示されている和信号Wは、モノラル
信号と略々同一内容の信号であり、この和信号Wがステ
レオ信号をモノラル信号Mとして再生する際に使用でき
ることは周知のとおりであり、また、前記した(2)式
で示されている差信号Sは、モノラル再生とステレオ再
生とのコンパチビリティが得られるような信号内容とさ
れている前記した(1)式の和信号Wと間で行われる簡
単なマトリックス計算によって左,右のチャンネル信号
L,Rが容易に得られるような信号内容のものである。
L = (sum signal W + difference signal S) / 2 (3) R = (sum signal W-difference signal S) / 2 (4) The sum signal W represented by the above formula (1) is monaural. It is well known that the sum signal W has substantially the same content as the signal and can be used when the stereo signal is reproduced as the monaural signal M, and the difference expressed by the equation (2) described above. The signal S is a left and right channel signal by a simple matrix calculation performed between the signal S and the sum signal W of the above-mentioned formula (1), which has a signal content such that compatibility between monaural reproduction and stereo reproduction is obtained.
The signal contents are such that L and R can be easily obtained.

さて、前記したモノラル信号Mやステレオ信号における
左右のチャンネル信号L,Rなどは、複数の発音体から放
射された音響信号を複数のマイクロホンによって音響電
気変換して得た電気信号を混合して作られるものである
が、ステレオ信号における左,右のチャンネル信号L,R
と、ステレオ信号における左,右のチャンネル信号L,R
の和信号Wと差信号Sとが前記した(3),(4)式で
示される関係にあり、また、モノラル信号Mがステレオ
信号における左,右のチャンネル信号L,Rの和信号Wと
略々同じ信号であることから、既述した(1)式で示さ
れているステレオ信号における左,右のチャンネル信号
L,Rの和信号Wを、 M=L+R …(5) 前記の(5)式のようにモノラル信号Mと置換えること
ができ、したがって、前記した(3),(4)式におけ
る和信号Wの代わりに前記の(5)式に示されるモノラ
ル信号Mを用いると、ステレオ信号における左,右のチ
ャンネル信号L,Rは、次の第(6),(7)式で示され
るものになる。
Now, the above-mentioned monaural signal M and left and right channel signals L and R in the stereo signal are produced by mixing the electric signals obtained by acoustoelectrically converting the acoustic signals radiated from a plurality of sound producing bodies by a plurality of microphones. However, the left and right channel signals L and R in the stereo signal are
And the left and right channel signals L and R in the stereo signal
The sum signal W and the difference signal S are in the relationship represented by the above equations (3) and (4), and the monaural signal M is the sum signal W of the left and right channel signals L and R in the stereo signal. Since the signals are almost the same, the left and right channel signals in the stereo signal shown in the above-mentioned equation (1)
The sum signal W of L and R can be replaced with the monaural signal M as in the above equation (5), and therefore the sum signal in the above equations (3) and (4) When the monaural signal M shown in the above formula (5) is used instead of W, the left and right channel signals L and R in the stereo signal become those shown in the following formulas (6) and (7). Become.

L=(モノラル信号M+差信号S)/2 …(6) R=(モノラル信号M−差信号S)/2 …(7) しかしながら、モノラル信号Mがステレオ信号における
左,右のチャンネル信号L,Rの和信号Wと同じであると
して、前記した(3),(4)式における和信号Wの代
わりに前記の(5)式に示されるモノラル信号Mを用い
たとしても、そのモノラル信号Mからは前記した
(6),(7)式における差信号S、すなわち、前記し
たモノラル信号Mを構成しているステレオ信号における
左,右のチャンネル信号L,Rの差の信号Sを得ることは
できないから、単にモノラル信号Mが与えられただけで
は第(6),(7)式の関係によってステレオ信号にお
ける左,右のチャンネル信号L,Rを発生させることがで
きないことは明らかである。
L = (monaural signal M + difference signal S) / 2 (6) R = (monaural signal M-difference signal S) / 2 (7) However, the monaural signal M is the left and right channel signals L in the stereo signal, Assuming that it is the same as the sum signal W of R, even if the monaural signal M shown in the above equation (5) is used instead of the sum signal W in the above equations (3) and (4), the monaural signal M From the above, it is possible to obtain the difference signal S in the above equations (6) and (7), that is, the signal S which is the difference between the left and right channel signals L and R in the stereo signal forming the monaural signal M. Since this is not possible, it is clear that the left and right channel signals L and R in the stereo signal cannot be generated simply by giving the monaural signal M, due to the relationships of the expressions (6) and (7).

それで、モノラル信号Mに基づいてステレオ信号におけ
る左,右のチャンネル信号L,Rが得られるようにするた
め、すなわち、モノラル信号をステレオ信号化するため
には、何等かの手段によって前記した(6),(7)式
における差信号Sの代わりに用いることができる擬似差
信号Gが発生させてそれを(8),(9)式のように用
いることが必要とされるのである。
Therefore, in order to obtain the left and right channel signals L and R in the stereo signal based on the monaural signal M, that is, in order to convert the monaural signal into a stereo signal, the above-mentioned method (6) is used. ), It is necessary to generate a pseudo difference signal G that can be used in place of the difference signal S in equations (7) and use it as in equations (8) and (9).

Ls=(モノラル信号M+擬似差信号G)/2 …(8) Rs=(モノラル信号M−擬似差信号G)/2 …(9) (8),(9)式においてLs,Rsは、それぞれモノラル
信号をステレオ信号化して得られる擬似ステレオ信号に
おける左チャンネル信号Lsと右チャンネル信号Rsとを示
している。
Ls = (monaural signal M + pseudo difference signal G) / 2 (8) Rs = (monaural signal M-pseudo difference signal G) / 2 (9) In equations (8) and (9), Ls and Rs are respectively The left channel signal Ls and the right channel signal Rs in the pseudo stereo signal obtained by converting a monaural signal into a stereo signal are shown.

さて、前記したステレオ信号における左チャンネル信号
Lと右チャンネル信号R、ステレオ信号における左,右
チャンネル信号L,Rの和信号Wと差信号S、モノラル信
号M、擬似差信号G、モノラル信号をステレオ信号化し
て得た擬似ステレオ信号における左チャンネル信号Ls、
モノラル信号をステレオ信号化して得た擬似ステレオ信
号における右チャンネル信号Rsなどを、それぞれ周波数
の関数として扱うと、前記の各信号はそれぞれ次のよう
に示されるものになる。
Now, the left channel signal L and the right channel signal R in the stereo signal, the sum signal W and the difference signal S of the left and right channel signals L and R in the stereo signal, the monaural signal M, the pseudo difference signal G, and the monaural signal are stereo. Left channel signal Ls in the pseudo stereo signal obtained by signalization,
When the right channel signal Rs in the pseudo stereo signal obtained by converting the monaural signal into a stereo signal is treated as a function of frequency, each of the above signals becomes as shown below.

ステレオ信号における左チャンネル信号Lは、 L(jω) ステレオ信号における右チャンネル信号Rは、 R(jω) ステレオ信号における左,右チャンネル信号L,Rの和信
号Wは、 W(jω) ステレオ信号における左,右チャンネル信号L,Rの差信
号Sは、 S(jω) モノラル信号Mは、(jω) 擬似差信号Gは、G(jω) モノラル信号をステレオ信号化して得た擬似ステレオ信
号における左チャンネル信号Lsは、 Ls(jω) モノラル信号をステレオ信号化して得た擬似ステレオ信
号における右チャンネル信号Rsは、 Rs(jω) したがって、前記した(1)〜(9)式は、それぞれ次
に(1ω)〜(9ω)式のように示されるものになる。
The left channel signal L in the stereo signal is L (jω) The right channel signal R in the stereo signal is R (jω) The sum signal W of the left and right channel signals L and R in the stereo signal is W (jω) in the stereo signal The difference signal S of the left and right channel signals L and R is: S (jω) Monaural signal M, (jω) Pseudo difference signal G is the left of the pseudo stereo signal obtained by converting the G (jω) monaural signal into a stereo signal. The channel signal Ls is Ls (jω) The right channel signal Rs in the pseudo stereo signal obtained by converting the monaural signal into a stereo signal is Rs (jω). Therefore, the above equations (1) to (9) are 1ω) to (9ω).

W(jω)=L(jω)+R(jω) …(1ω) S(jω)=L(jω)−R(jω) …(2ω) L(jω)={W(jω)+S(jω)}/2…(3ω) R(jω)={W(jω)−S(jω)}/2…(4ω) M(jω)=L(jω)+R(jω) …(5ω) L(jω)={M(jω)+S(jω)}/2…(6ω) R(jω)={M(jω)−S(jω)}/2…(7ω) Ls(jω)={M(jω)+G(jω)}/2…(8ω) Rs(jω)={M(jω)−G(jω)}/2…(9ω) (6)〜(9)式を参照して既述したことは、(6ω)
〜(9ω)式についても同様であり、モノラル信号M
(jω)に基づいてステレオ信号における左,右のチャ
ンネル信号L(jω),R(jω)が得られるようにする
ため、すなわち、モノラル信号をステレオ信号化するた
めには、何等かの手段によって前記した(6ω),(7
ω)式における差信号S(jω)の代わりに用いること
ができる擬似差信号G(jω)を発生させてそれを(8
ω),(9ω)式のように用いることが必要とされるの
であるが、前記した擬似差信号G(jω)をどのように
して発生させるがが問題である。
W (jω) = L (jω) + R (jω) ... (1ω) S (jω) = L (jω) −R (jω) ... (2ω) L (jω) = {W (jω) + S (jω)} /2...(3ω) R (jω) = {W (jω) −S (jω)} / 2 ... (4ω) M (jω) = L (jω) + R (jω) ・ ・ ・ (5ω) L (jω) = {M (jω) + S (jω)} / 2 ... (6ω) R (jω) = {M (jω) −S (jω)} / 2 ... (7ω) Ls (jω) = {M (jω) + G ( jω)} / 2 ... (8ω) Rs (jω) = {M (jω) −G (jω)} / 2 ... (9ω) What has been described with reference to the equations (6) to (9) is 6ω)
The same applies to the expressions (9ω) to
In order to obtain the left and right channel signals L (jω) and R (jω) in the stereo signal based on (jω), that is, to convert the monaural signal into a stereo signal, some means is used. (6ω), (7
Generate a pseudo difference signal G (jω) that can be used instead of the difference signal S (jω) in the expression (ω), and generate it by (8
ω) and (9ω) are required to be used, but the problem is how to generate the pseudo difference signal G (jω).

本発明者はステレオ信号における左,右のチャンネル信
号L(jω),R(jω)の和信号W(jω)と差信号S
(jω)との関係として、前記した差信号S(jω)を
和信号W(jω)で除して得られる関数F(jω)、す
なわち、 F(jω)=S(jω)/W(jω) …(10ω) を考え、前記の(10ω)式で示されるような伝達関数F
(jω)を有するフィルタが実現できれば、この(10)
式の関係を用いてステレオ信号における左,右のチャン
ネル信号L(jω),R(jω)の差信号S(jω)が、
ステレオ信号における左,右のチャンネル信号L(j
ω),R(jω)の和信号W(jω)と、前記したフィル
タの伝達関数F(jω)とによって、 S(jω)=W(jω)×F(jω) …(11ω) 前記の(11ω)式のように求めることができることに着
目した。
The inventor has found that the sum signal W (jω) and the difference signal S of the left and right channel signals L (jω) and R (jω) in the stereo signal.
As a relationship with (jω), a function F (jω) obtained by dividing the difference signal S (jω) by the sum signal W (jω), that is, F (jω) = S (jω) / W (jω) ) Considering (10ω), the transfer function F as shown in the above equation (10ω)
If a filter having (jω) can be realized, this (10)
The difference signal S (jω) between the left and right channel signals L (jω) and R (jω) in the stereo signal is
Left and right channel signals L (j
ω), R (jω) sum signal W (jω) and the filter transfer function F (jω) described above: S (jω) = W (jω) × F (jω) (11ω) We paid attention to the fact that it can be obtained by the equation (11ω).

そして、(1)式と(5)式とを参照して既述したと同
様に、(1ω)に示されているステレオ信号における
左,右のチャンネル信号L(jω),R(jω)の和親号
W(jω)、 W(jω)=L(jω)+R(jω) …(1ω)、 と(5ω)式に示されているモノラル信号M(jω)、 M(jω)=L(jω)+R(jω) …(5ω) とが略々同一であることから、前記した(11ω)式中の
和新信号W(jω)の代わりにモノラル信号M(jω)
を用いて、必要な擬似差信号G(jω)を、 G(jω)=M(jω)×F(jω) …(12ω) 前記の(12ω)式により求めることができるようにした
点が本発明のモノフォニック信号のステレオフォニック
信号化のための信号処理方法の基本的な構想の第1点で
ある。
Then, as described above with reference to the equations (1) and (5), the left and right channel signals L (jω) and R (jω) in the stereo signal shown in (1ω) are Japanese parent W (jω), W (jω) = L (jω) + R (jω) (1ω), and monaural signals M (jω) and M (jω) = L (shown in the formula (5ω). jω) + R (jω) (5ω) are substantially the same, and therefore the monaural signal M (jω) is used instead of the new sum signal W (jω) in the equation (11ω).
By using, the necessary pseudo difference signal G (jω) can be obtained by G (jω) = M (jω) × F (jω) (12ω) by the above equation (12ω). It is the first point of the basic concept of a signal processing method for converting a monophonic signal into a stereophonic signal of the invention.

モノフォニック信号をステレオフォニック信号化する際
に必要とされる擬似信号G(jω)が前記のように求め
られた場合には、前記した(8ω),(9ω)の関係、
すなわち、 Ls(jω)={M(jω)+G(jω)}/2…(8ω) Rs(jω)={M(jω)−G(jω)}/2…(9ω) により、モノラル信号M(jω)をステレオ信号化した
擬似ステレオ信号における左信号Ls(jω)と右信号Rs
(jω)とを発生させることができる。
When the pseudo signal G (jω) required for converting a monophonic signal into a stereophonic signal is obtained as described above, the relationship between (8ω) and (9ω) described above,
That is, Ls (jω) = {M (jω) + G (jω)} / 2 ... (8ω) Rs (jω) = {M (jω) −G (jω)} / 2 ... (9ω) Left signal Ls (jω) and right signal Rs in a pseudo stereo signal obtained by converting (jω) into a stereo signal.
(Jω) can be generated.

ところで、前記のように擬似信号G(jω)は G(jω)=M(jω)×F(jω)…(12ω)式から
も明らかなように、モノラル信号M(jω)にフィルタ
の伝達関数F(jω)を重み付けることによって得られ
るものであるから、ステレオ信号化の対象にされている
モノラル信号M(jω)から必要な擬似差信号G(j
ω)が得られるような伝達関数F(jω)を有するフィ
ルタが必要とされる。
By the way, as described above, the pseudo signal G (jω) is converted into the monaural signal M (jω) by the transfer function of the filter, as is clear from the equation: G (jω) = M (jω) × F (jω) (12ω). Since it is obtained by weighting F (jω), the necessary pseudo difference signal G (j) is obtained from the monaural signal M (jω) that is the target of stereo signalization.
A filter with a transfer function F (jω) such that ω) is obtained is needed.

そして、前記したフィルタの伝達関数F(jω)は(10
ω)式に示されているように、ステレオ信号における
左,右のチャンネル信号L(jω),R(jω)の差信号
S(jω)を和信号W(jω)で除して得た関数F(j
ω)であるが、音楽信号における前記した差信号S(j
ω)や和信号W(jω)などは、何れも時間の経過に従
って時々刻々内容が変化する所謂時変スペクトラムとな
るから、前記した関数F(jω)も時間の経過に従って
時々刻々内容が変化する時変伝達関数となる。
The transfer function F (jω) of the filter is (10
ω), the function obtained by dividing the difference signal S (jω) between the left and right channel signals L (jω) and R (jω) in the stereo signal by the sum signal W (jω) F (j
ω), but the difference signal S (j
[omega]) and the sum signal W (j [omega]) are so-called time-varying spectrums whose contents change with time, so that the function F (j [omega]) described above also changes with time. It becomes a time-varying transfer function.

そこで、今までは周波数の関数として記述して来た各種
の信号、すなわち、前記したステレオ信号における左チ
ャンネル信号L(jω)と右チャンネル信号R(j
ω)、ステレオ信号における左,右チャンネル信号L,R
の和信号W(jω)と差信号S(jω)、モノラル信号
M(jω)、擬似差信号G(jω)、モノラル信号をス
テレオ信号化して得た擬似ステレオ信号における左チャ
ンネル信号Ls(jω)、モノラル信号をステレオ信号化
して得た擬似ステレオ信号における右チャンネル信号Rs
(jω)などを、それぞれ時変関数として扱うことにし
て、次のような表示法に従った表示、すなわち、前記し
たステレオ信号における左チャンネル信号L(jω,t)
と右チャンネル信号R(jω,t)、ステレオ信号におけ
る左,右チャンネル信号L,Rの和信号W(jω,t)と差
信号S(jω,t)、モノラル信号M(jω,t)、擬似差
信号G(jω,t)、モノラル信号をステレオ信号化して
得た擬似ステレオ信号における左チャンネル信号Ls(j
ω,t),モノラル信号をステレオ信号化して得た擬似ス
テレオ信号における右チャンネル信号Rs(jω,t)のよ
うに表示する。
Therefore, various signals which have been described as a function of frequency, that is, the left channel signal L (jω) and the right channel signal R (j in the above-mentioned stereo signal are described.
ω), the left and right channel signals L and R in the stereo signal
Sum signal W (jω) and difference signal S (jω), monaural signal M (jω), pseudo difference signal G (jω), and left channel signal Ls (jω) in a pseudo stereo signal obtained by converting the monaural signal into a stereo signal. , Right channel signal Rs in pseudo stereo signal obtained by converting monaural signal to stereo signal
(Jω) and the like are treated as time-varying functions, and the display according to the following display method is performed, that is, the left channel signal L (jω, t) in the stereo signal described above.
And the right channel signal R (jω, t), the sum signal W (jω, t) of the left and right channel signals L, R in the stereo signal and the difference signal S (jω, t), the monaural signal M (jω, t), The pseudo difference signal G (jω, t) and the left channel signal Ls (j in the pseudo stereo signal obtained by converting the monaural signal into a stereo signal.
ω, t), and a right channel signal Rs (jω, t) in a pseudo stereo signal obtained by converting a monaural signal into a stereo signal is displayed.

したがって、前記した(1ω)〜(12ω)式は次の(1
ωt)〜(12ωt)式のように示されるものになる。
Therefore, the above equations (1ω) to (12ω) are
ωt) to (12ωt).

W(jω,t)=L(jω,t) +R(jω,t) …(1ωt) S(jω,t)=L(jω,t) −R(jω,t) …(2ωt) L(jω,t)={W(jω,t) +S(jω,t)}/2 …(3ωt) R(jω,t)={W(jω,t) −S(jω,t)}/2 …(4ωt) M(jω,t)=L(jω,t) +R(jω,t) …(5ωt) L(jω,t)={M(jω,t) +S(jω,t)}/2 …(6ωt) R(jω,t)={M(jω,t) −S(jω,t)}/2 …(7ωt) Ls(jω,t)={M(jω,t) +G(jω,t)}/2 …(8ωt) Rs(jω,t)={M(jω,t) −G(jω,t)}/2 …(9ωt) F(jω,t)=S(jω,t)/W(jω,t)…(10ωt) S(jω,t)=W(jω,t)×F(jω,t) …(11ω
t) G(jω,t)=M(jω,t)×F(jω,t) …(12ω
t) ところで、前記した(10ωt)式に示されている時変伝
達関数を有するフィルタの特性は、主として楽器の編成
と配置とに依存して曲の進行に伴って変化しているが、
特殊な場合を除き、モノラル信号M(jω,t)に何等か
の法則を適用して前記の時変伝達関数F(jω,t)を算
出するようなことは事実上不可能である。
W (jω, t) = L (jω, t) + R (jω, t) (1ωt) S (jω, t) = L (jω, t) −R (jω, t) (2ωt) L (jω , t) = {W (jω, t) + S (jω, t)} / 2 (3ωt) R (jω, t) = {W (jω, t) −S (jω, t)} / 2 (( 4ωt) M (jω, t) = L (jω, t) + R (jω, t) (5ωt) L (jω, t) = {M (jω, t) + S (jω, t)} / 2 ( 6ωt) R (jω, t) = {M (jω, t) -S (jω, t)} / 2 (7ωt) Ls (jω, t) = {M (jω, t) + G (jω, t) } / 2 (8ωt) Rs (jω, t) = {M (jω, t) −G (jω, t)} / 2 (9ωt) F (jω, t) = S (jω, t) / W (Jω, t) ... (10ωt) S (jω, t) = W (jω, t) × F (jω, t)… (11ω
t) G (jω, t) = M (jω, t) × F (jω, t) (12ω
t) By the way, the characteristics of the filter having the time-varying transfer function shown in the above equation (10ωt) change with the progression of the music mainly depending on the organization and arrangement of the musical instrument,
Except for special cases, it is virtually impossible to apply the law to the monaural signal M (jω, t) to calculate the time-varying transfer function F (jω, t).

そこで、本発明方法においては、ステレオ信号化の対象
にされているモノラル信号M(jω,t)と同一の曲目
(同一の曲目の音楽のことであり、前記の同一の曲目の
音楽は、ある特定の曲目の音楽が同一内容の楽譜に基づ
いて演奏されることによって得られる)のステレオ信号
から前記した(10ωt)式に示されるような時変伝達関
数 F(jω,t)=S(jω,t)/W(jω,t)…(10ωt) を導出し、その時変伝達関数F(jω,t)をステレス信
号化の対象にされているモノラル信号M(jω,t)に適
用して、ステレオ信号化の対象にされているモノラル信
号M(jω,t)の擬似差信号G(jω,t)を既述した
(12ωt)式、すなわち、 G(jω,t)=M(jω,t)×F(jω,t) …(12ω
t) の関係を用いて得るようにした点が本発明のモノフォニ
ック信号のステレオフオニック信号化のための信号処理
方法の基本的な構想の第2点である。
Therefore, in the method of the present invention, the same music (the same music as the monaural signal M (jω, t) targeted for stereo signal conversion (the same music), and the music of the same music is A time-varying transfer function F (jω, t) = S (jω) as shown in the above equation (10ωt) from a stereo signal of the music of a specific song obtained by playing based on the score of the same content). , t) / W (jω, t) ... (10ωt) is derived and the time-varying transfer function F (jω, t) is applied to the monaural signal M (jω, t) which is the target of the Steres signalization. , (12ωt) equation which has already described the pseudo difference signal G (jω, t) of the monaural signal M (jω, t) which is the object of stereo signalization, that is, G (jω, t) = M (jω, t) × F (jω, t)… (12ω
The point obtained by using the relationship of t) is the second point of the basic concept of the signal processing method for converting the monophonic signal into the stereophonic signal of the present invention.

第2図は、特定な曲目αの音楽を演奏者Aが演奏した際
に得られた音響信号に基づいて発生された各種の信号の
波形、フィルタの時変伝達関数などを説明するための図
であり、第2図の(a)は曲目αの音楽を演奏者Aが演
奏した際に得られた音響信号に基づいて発生された和信
号W(jω,t)の時間波形を示している図、第2図の
(b)は曲目αの音楽を演奏者Aが演奏した際に得られ
た音響信号に基づいて発生された和信号W(jω,t)の
エンベロープを示している図である。また、第2図の
(c)は曲目αの音楽を演奏者Aが演奏した際に得られ
た音響信号に適用されるフィルタの時変伝達関数F(j
ω,t)、すなわち、jωとtとの2変数関数であるフィ
ルタの時変伝達関数F(jω,t)を、音声のソナグラム
(声紋)に似た表現法を採用して表示した場合の図であ
り、フィルタの時変伝達関数F(jω,t)の振幅は音声
のソナラム(声紋)と同様に濃淡によって表わされる
(ただし特許出願の明細書に添付する添付図面におい
て、濃淡を付けて塗りつぶすような図面の記載は禁止さ
れているから、図中には濃淡の記載はなされていな
い)。
FIG. 2 is a diagram for explaining the waveforms of various signals generated based on the acoustic signals obtained when the performer A plays the music of the specific song α, the time-varying transfer function of the filter, and the like. 2A shows the time waveform of the sum signal W (jω, t) generated based on the acoustic signal obtained when the player A plays the music of the program α. FIG. 2B is a diagram showing the envelope of the sum signal W (jω, t) generated based on the acoustic signal obtained when the performer A plays the music of the program α. is there. Further, FIG. 2C shows a time-varying transfer function F (j of the filter applied to the acoustic signal obtained when the performer A plays the music of the program α.
ω, t), that is, when the time-varying transfer function F (jω, t) of the filter, which is a two-variable function of jω and t, is displayed using a representation method similar to a sonargram (voiceprint) of a voice. It is a figure, and the amplitude of the time-varying transfer function F (jω, t) of the filter is represented by shading similarly to the sonarlam (voiceprint) of the voice (however, in the accompanying drawings attached to the specification of the patent application, Since shaded drawings are prohibited, shades are not shown in the figure).

第2図の(d)は曲目αの音楽を演奏者Aが演奏した際
の音響信号に基づいて発生された差信号S(jω,t)の
時間波形を示している図である。
FIG. 2D is a diagram showing a time waveform of the difference signal S (jω, t) generated based on the acoustic signal when the performer A plays the music of the program α.

さて、ステレオ信号における左,右チャンネル信号の差
信号S(jω,t)は、既述の(11ω,t)式、 S(jω,t)=W(jω,t)×F(jω,t) …(11ω
t) に示されているように、ステレオ信号における左,右チ
ャンネル信号の和信号W(jω,t)に時変伝達関数F
(jω,t)を適用することによって得られるが、前記し
た(11ω,t)式に従って差信号S(jω,t)が正しく得
らるれるためには、和信号W(jω,t)と時変伝達関数
F(jω,t)とが同期していることが必要である。
Now, the difference signal S (jω, t) of the left and right channel signals in the stereo signal is expressed by the above-mentioned equation (11ω, t), S (jω, t) = W (jω, t) × F (jω, t) )… (11ω
t), the time-varying transfer function F is added to the sum signal W (jω, t) of the left and right channel signals in the stereo signal.
It can be obtained by applying (jω, t), but in order to correctly obtain the difference signal S (jω, t) according to the above-mentioned equation (11ω, t), the sum signal W (jω, t) It is necessary that the time-varying transfer function F (jω, t) is synchronized.

次に、モノラル信号M(jω,t)に時変伝達関数F(j
ω,t)を適用し、ステレオ信号化の対象にされているモ
ノラル信号M(jω,t)の擬似差信号G(jω,t)を作
り出す場合について説明する。
Next, the time-varying transfer function F (j) is added to the monaural signal M (jω, t).
ω, t) is applied to generate a pseudo difference signal G (jω, t) of the monaural signal M (jω, t) that is the target of stereo signal generation.

第3図は、第2図の内容の説明に際して述べた演奏者A
が演奏した曲目αの音楽を、前記の演奏者Aが曲目αの
音楽の演奏時に使用した楽譜と同一内容の楽譜を使用し
て曲目αの音楽を演奏者Bが演奏した際の音響信号によ
るモノラル信号M(jω,t)の時間波形{第3図の
(a)}とエンベロープ{第3図の(b)}とを示す図
である(演奏者は誰であってもよいが、ここの説明では
Bであるとしている)。
FIG. 3 shows the performer A mentioned in the explanation of the contents of FIG.
The music of the music piece α played by the player A is reproduced by the acoustic signal when the musician of the music piece α plays the music of the music piece α by using the same score as that used by the music player A when playing the music of the music piece α. FIG. 3 is a diagram showing a time waveform {(a) in FIG. 3} and an envelope {(b) in FIG. 3} of a monaural signal M (jω, t) (any performer, but here Is assumed to be B).

既述のように本発明のモノフォニック信号のステレオフ
ォニック信号化のための信号処理方法においては、ステ
レオ信号化の対象にされているモノラル信号M(jω,
t)と同一の曲目にステレオ信号から前記した(10ω
t)式に示されるような時変伝達関数 F(jω,t)=S(jω,t)/W(jω,t)…(10ωt) を導出し、その時変伝達関数F(jω,t)をステレオ信
号化の対象にされているモノラル信号M(jω,t)に適
用して、ステレオ信号化の対象にされているモノラル信
号M(jω,t)の擬似差信号G(jω,t)を既述した
(12ωt)式、すなわち、 Gg(jω,t)=M(jω,t)×F(jω,t) …(12ω
t) に従って作り出すようにするのであるが、(12ωt)式
の適用によって擬似差信号G(jω,t)を作り出す場合
にも、モノラル信号M(jω,t)と時変伝達関数F(j
ω,t)とが同期していることが必要とされる。
As described above, in the signal processing method for converting a monophonic signal into a stereophonic signal according to the present invention, a monaural signal M (jω,
(10) from the stereo signal in the same song as the above (10Ω
t) A time-varying transfer function F (jω, t) = S (jω, t) / W (jω, t) ... (10ωt) is derived, and the time-varying transfer function F (jω, t) is derived. Is applied to the monaural signal M (jω, t) targeted for stereo signalization, and the pseudo difference signal G (jω, t) of the monaural signal M (jω, t) targeted for stereo signalization is applied. (12ωt) equation described above, that is, Gg (jω, t) = M (jω, t) × F (jω, t) (12ωt)
However, even when the pseudo difference signal G (jω, t) is generated by applying the equation (12ωt), the monaural signal M (jω, t) and the time-varying transfer function F (j
ω, t) is required to be synchronized.

そして、前記したモノラル信号M(jω,t)と時変伝達
関数F(jω,t)とが良好な同期状態にあれば、このモ
ノラル信号M(jω,t)に時変伝達関数F(jω,t)を
適用して得た擬似差信号G(jω,t)を用いて、既述し
た(8ωt),(9ωt)式、すなわち、 Ls(jω,t)={M(jω,t) +G(jω,t)}/2 …8(ωt) Rs(jω,t)={M(jω,t) −G(jω,t)}/2 …(9ωt) により、擬似ステレオ信号の左右チャンネル信号Ls(j
ω,t),Rs(jω,t)を作り出すことができる。
If the monaural signal M (jω, t) and the time-varying transfer function F (jω, t) are in good synchronization, the time-varying transfer function F (jω) is added to the monaural signal M (jω, t). , t) is applied to the pseudo difference signal G (jω, t) to obtain the equations (8ωt) and (9ωt), that is, Ls (jω, t) = {M (jω, t) + G (jω, t)} / 2 ... 8 (ωt) Rs (jω, t) = {M (jω, t) −G (jω, t)} / 2 (9ωt), so that the left and right channels of the pseudo stereo signal are obtained. Signal Ls (j
ω, t), Rs (jω, t) can be created.

前記のように特定な曲目αの音楽を演奏者Bが演奏して
得たモノラル信号M(jω,t)を擬似ステレオ信号化す
る場合には、前記の演奏者Bが曲目αの音楽を演奏する
際に使用した楽譜と同一内容と楽譜を使用して、前記し
た前記の特定な曲目αと同一の曲目の音楽を演奏者Aが
演奏して得たステレオ信号における和信号W(jω,t)
と差信号S(jω,t)とに基づいて得た時変伝達関数F
(jω,t)を、前記したステレオ信号化の対象にされて
いるモノラル信号M(jω,t)に適用して擬似差信号G
(jω,t)を作って擬似ステレオ信号の左右チャンネル
信号Ls(jω,t),Rs(jω,t)を作り出した場合にお
ける擬似ステレス信号の左右チャンネル信号Ls(jω,
t),Rs(jω,t)によるステレオ再生の効果は、演奏者
Bによる特定な曲目αの音楽の演奏に対して、前記の特
定な曲目αと同じ音楽を演奏者Aが演奏したときのステ
レオ効果を付与したものになる。
As described above, when the performer B plays the music of the specific song α to convert the monaural signal M (jω, t) into a pseudo stereo signal, the performer B plays the music of the song α. The sum signal W (jω, t) in the stereo signal obtained by the performer A playing the music of the same music as the above-mentioned specific music α using the same content and music as the music used when )
And the time-varying transfer function F obtained based on the difference signal S (jω, t)
The pseudo difference signal G is obtained by applying (jω, t) to the monaural signal M (jω, t) which is the target of the stereo signalization.
(Jω, t) and the left and right channel signals Ls (jω, t) and Rs (jω, t) of the pseudo stereo signal are generated.
The effect of the stereo reproduction by t) and Rs (jω, t) is that when the performer A plays the same music as the specific song α, the performer B plays the music of the specific song α. It will have a stereo effect.

しかし、前記のようにモノラル信号を良好にステレオ信
号化できるのは既述のようにモノラル信号M(jω,t)
と時変伝達関数F(jω,t)とが良好な同期状態にあっ
た場合でけであり、モノラル信号M(jω,t)と時変伝
達関数F(jω,t)との同期がとれていない場合には良
好な状態でのステレオ信号化は実現できない。
However, as described above, the reason why the monaural signal can be converted into a good stereo signal is that the monaural signal M (jω, t) is already described.
And the time-varying transfer function F (jω, t) is in a good synchronization state, and the monaural signal M (jω, t) and the time-varying transfer function F (jω, t) can be synchronized. If it is not, stereo signalization in a good state cannot be realized.

そして、現実の問題としては、たとえ同一の演奏者が同
一の曲目の音楽を複数回演奏した場合に、常に同一の結
果が得られるとは限らないことからみても、前記したモ
ノラル信号M(jω,t)と時変伝達関数F(jω,t)と
が常に良好な同期状態になっていることは無いと考えら
れる。
As a practical matter, even if the same performer plays the same piece of music a plurality of times, the same result may not always be obtained, but the monaural signal M (jω) described above is not always obtained. , t) and the time-varying transfer function F (jω, t) are not always in good synchronization.

そこで、本発明のモノフォニック信号のステレオフォニ
ック信号化のための信号処理方法においては、ステレオ
信号化の対象にされているモノラル信号M(jω,t)を
発生させた音楽と、実質的に同一の音楽(曲目、楽譜、
楽器の種類等の諸要素を同じにして演奏した場合の音
楽)によって発生させたステレオ信号から導出した前記
した(10ωt)式に示されるような時変伝達関数 F(jω,t)=S(jω,t)/W(jω,t)…(10ωt) をステレオ信号化の対象にされているモノラル信号M
(jω,t)に同期させるように、時変伝達関数F(j
ω,t)を時間軸上で伸縮させるようにしているのであ
り、この点が本発明のモノフォニック信号のステレオフ
ォニック信号化のための信号処理方法の基本的な構想の
第3点である。
Therefore, in the signal processing method for converting a monophonic signal into a stereophonic signal according to the present invention, it is substantially the same as the music that generated the monaural signal M (jω, t) that is the target of the stereophonic signal conversion. Music (track, score,
A time-varying transfer function F (jω, t) = S (as shown in the above equation (10ωt) derived from a stereo signal generated by music when various elements such as musical instruments are played in the same manner) jω, t) / W (jω, t) ... (10ωt) is a monaural signal M that is the subject of stereo signalization
(Jω, t), so that the time-varying transfer function F (j
ω, t) is expanded / contracted on the time axis, and this is the third point of the basic concept of the signal processing method of the present invention for converting a monophonic signal into a stereophonic signal.

次に第4図を参照してステレオ信号化の対象にされてい
るモノラル信号M(jω,t)を発生させた音楽と、実質
的に同一の音楽(曲目、楽譜、楽器の種類等の諸要素を
同じにして演奏した場合の音楽)によって発生させたス
テレオ信号から導出した前記の(10ωt)式に示される
ような時変伝達関数F(jω,t)をステレオ信号化の対
象にされているモノラル信号M(jω,t)に同期させる
ように、時変伝達関数F(jω,t)を時間軸上で伸縮さ
せる場合の説明を行う。
Next, referring to FIG. 4, music that is substantially the same as the music that has generated the monaural signal M (jω, t) that is the target of stereo signal conversion (various items such as music, musical score, and type of musical instrument). The time-varying transfer function F (jω, t) as shown in the above equation (10ωt) derived from the stereo signal generated by the music (when the elements are played the same) is targeted for stereo signalization. A case will be described in which the time-varying transfer function F (jω, t) is expanded / contracted on the time axis so as to be synchronized with the monaural signal M (jω, t).

第4図(a)は曲目αの音楽を演奏者Aが演奏した際に
得られた音響信号に基づいて発生された和信号W(j
ω,t)のエンベロープを示している図、第4図の(b)
は曲目αの音楽を演奏者Bが演奏した際に得られた音響
信号に基づいて発生されたモノラル信号M(jω,t)の
エンベロープを示している図であり、さらに、第4図の
(c)は前記した演奏者Bが曲目αの音楽の演奏時に使
用した楽譜と同じ内容の楽譜を使用して、演奏者Aが曲
目αの音楽を演奏した際に得られた音響信号に適用され
るフィルタの時変伝達関数F(jω,t)、すなわち、j
ωとtとの2変数関数であるフィルタの時変伝達関数F
(jω,t)を、音声のソナグラム(音紋)に似た表現法
を採用して表示した場合の図であり、フィルタの時変伝
達関数F(jω,t)の振幅は音声のソナグラム(声紋)
と同様に濃淡によって表わされる(ただし、特許出願の
明細書に添付する添付図面において、濃淡を付けて塗り
つぶすような図面の記載は禁止されているから、図中に
は濃淡の記載はなされていない)。
FIG. 4 (a) is a sum signal W (j) generated based on the acoustic signal obtained when the performer A plays the music of the piece α.
Fig. 4 (b) showing the envelope of ω, t).
FIG. 4 is a diagram showing an envelope of a monaural signal M (jω, t) generated based on an acoustic signal obtained when the performer B plays the music of the program α, and further, FIG. c) is applied to the acoustic signal obtained when the performer A plays the music of the program α, using the same score as that used by the performer B when playing the music of the program α. Time-varying transfer function F (jω, t) of the filter, that is, j
Time-varying transfer function F of the filter, which is a two-variable function of ω and t
(Jω, t) is a diagram in the case where it is displayed by adopting an expression method similar to a sound sonargram (speech), and the amplitude of the time-varying transfer function F (jω, t) of the filter is the sound sonargram ( Voice print)
Similarly, it is represented by shading (however, in the accompanying drawings attached to the specification of the patent application, it is forbidden to describe drawings that are shaded to fill, so the shading is not shown in the drawings. ).

なお、第4図中においてはtaは演奏者Aによる演奏時の
時間軸、tbは演奏者Bによる演奏時の時間軸を示してい
る。また、第4図の(a)〜(c)間や第4図の(a)
〜(d)間における点線は、同一時刻のところを示すた
めのものである。
In FIG. 4, ta indicates a time axis when the performer A performs, and tb indicates a time axis when the performer B performs. Moreover, between (a) to (c) of FIG. 4 and (a) of FIG.
The dotted line between (d) to (d) is for indicating the same time point.

さて、既述もしたようにモラル信号を良好にステレオ信
号化できるのはモノラル信号M(jω,t)と時変伝達関
数F(jω,t)とが良好な同期状態にあった場合だけで
あるが、ステレオ信号化の対象にされるべきモノラル信
号として第4図の(b)にエンベロープにより例示して
いるものモノラル信号M(jω,t)、すなわち、曲目α
の音楽を演奏者Bが演奏した際に得られた音響信号に基
づいて発生されたモノラル信号M(jω,t)の時間軸tb
上における信号振幅の変化態様と、ステレオ信号化の対
象にされるべき前記したモノラル信号M(jω,t)のス
テレオ信号化に際して、そのモノラル信号M(jω,t)
に適用させるべき時変伝達関数F(jω,t)を作り出す
のに用いられるステレオ信号の和信号W(jω,t)、す
なわち、第4図の(a)にエンベロープが例示されてい
る曲目αの音楽を、演奏者Bが曲目αの音楽の演奏時に
使用した楽譜と同じ内容の楽譜を使用して、演奏者Aが
曲目αの音楽を演奏した際に得られた音響信号に基づい
て発生された和信号W(jω,t)の時間軸ta上における
信号振幅の変化態様とが、第4図の(a),(b)間に
実線矢印の表示で示してあるように互いに異なっている
場合には、第4図の(a)に示されている和信号W(j
ω,t)が得られたステレオ信号、すなわち、曲目αの音
楽を、演奏者Bが曲目αの音楽の演奏時に使用した楽譜
と同じ内容の楽譜を使用して、演奏者Aが曲目αの音楽
を演奏した際に得られた音響信号に基づいて得られたス
テレオ信号から作られる時変伝達関数F(jω,t){第
4図の(c)に音声のソナグラム(声紋)に似た表現法
を採用して表示されている}を前記した第4図の(b)
に示されているモノラル信号M(jω,t)に適用してみ
たところで良好なステレオ信号は発生できない。
As described above, the moral signal can be converted into a good stereo signal only when the monaural signal M (jω, t) and the time-varying transfer function F (jω, t) are in a good synchronization state. However, the monaural signal M (jω, t) shown in FIG. 4 (b) as an example of the monaural signal to be stereophonically converted, that is, the program α
Of the monaural signal M (jω, t) generated based on the acoustic signal obtained when the performer B plays the music of
When the above-mentioned signal amplitude variation mode and the above-mentioned monaural signal M (jω, t) to be stereo-signaled are converted into stereo signals, the monaural signal M (jω, t)
The sum signal W (jω, t) of the stereo signals used to create the time-varying transfer function F (jω, t) to be applied to, that is, the curve α whose envelope is illustrated in FIG. 4 (a). Is generated based on the acoustic signal obtained when the performer A plays the music of the song α, using the score of the same content as that used by the performer B when playing the music of the song α. The manner in which the signal amplitude of the added sum signal W (jω, t) changes on the time axis ta differs from each other as indicated by the solid arrow between (a) and (b) in FIG. In the case of the sum signal W (j) shown in FIG.
ω, t) is obtained, that is, the music of the program α is used by the performer A to reproduce the music of the program α using the same score as that used by the performer B when playing the music of the program α. A time-varying transfer function F (jω, t) created from a stereo signal obtained based on the acoustic signal obtained when playing music (similar to a sonargram of voice in (c) of FIG. 4) It is displayed using the expression method} (b) of FIG. 4 described above.
When applied to the monaural signal M (jω, t) shown in FIG. 1, a good stereo signal cannot be generated.

それで、本発明のモノフォニック信号のステレオフォニ
ック信号化のための信号処理方法においては、ステレオ
信号化の対象にされているモノラル信号M(jω,t)の
エンベロープと、ステレオ信号化の対象にされているモ
ノラル信号M(jω,t)を発生させた音楽と、実質的に
同一の音楽(曲目、楽譜、楽器の種類等の諸要素を同じ
にして演奏した場合の音楽)によって発生させたステレ
オ信号のエンベロープとを対比することにより、ステレ
オ信号化の対象にされているモノラル信号M(jω,t)
の時間軸tbと、ステレオ信号化の対象にされているモノ
ラル信号M(jω,t)を発生させた音楽と、実質的に同
一の音楽(曲目、楽譜、楽器の種類等の諸要素を同じに
して演奏した場合の音楽)によって発生させたステレオ
信号の時間軸taとの間の「進み」や「遅れ」の関係を見
出し、前記の時間軸ta,tbの「進み」「遅れ」の関係を
時変伝達関数F(jω,t)に適用して時変伝達関数F
(jω,t)の時間軸を伸縮し、時間軸補正が行われた状
態の第4図の(d)に例示されているような時変伝達関
数F′(jω,t)を得て、この時間軸補正が行われた状
態の時変伝達関数F′(jω,t)を、ステレオ信号化の
対象にされるべきモノラル信号として第4図の(b)に
エンベロープで例示しているモノラル信号M(jω,
t)、すなわち、既述のように同一の曲目αの同一内容
の音楽(同一内容の楽譜を使用して演奏した曲目αの音
楽)を演奏者Bが演奏した際に得られた音響信号に基づ
いて発生されたモノラル信号M(jω,t)に次式によう
に適用して、ステレオ信号化の対象にされているモノラ
ル信号M(jω,t)と同期している状態の擬似差信号 G(jω,t)=M(jω,t)×F′(jω,t)…(12′
ωt) を作り出すようにしているのである。
Therefore, in the signal processing method for converting a monophonic signal into a stereophonic signal according to the present invention, the envelope of the monaural signal M (jω, t), which is the target of stereo signalization, and the target of stereophonic signal conversion, The stereo signal generated by the music that generated the monaural signal M (jω, t) that is generated and the music that is substantially the same (the music when the musical composition, the musical score, the type of the musical instrument, and other elements are the same). By comparing with the envelope of, the monaural signal M (jω, t), which is the target of stereo signalization,
Time axis tb and the music that has generated the monaural signal M (jω, t) targeted for stereo signal conversion are substantially the same as each other (various elements such as music, musical score, and type of musical instrument are the same). The relationship between "advance" and "delay" with respect to the time axis ta of a stereo signal generated by the To the time-varying transfer function F (jω, t)
The time axis of (jω, t) is expanded / contracted to obtain the time-varying transfer function F ′ (jω, t) as illustrated in (d) of FIG. The time-varying transfer function F '(jω, t) in the state in which the time axis correction is performed is illustrated in the envelope of FIG. 4 (b) as a monaural signal to be stereo-converted. Signal M (jω,
t) In other words, as described above, the music signal of the same content of the same music α (the music of the music α played using the score of the same music) is added to the acoustic signal obtained when the performer B plays. The pseudo difference signal in a state of being synchronized with the monaural signal M (jω, t) that is the target of stereo signal conversion by applying the monaural signal M (jω, t) generated based on the following equation. G (jω, t) = M (jω, t) × F ′ (jω, t) ... (12 ′
ωt) is created.

第5図は前記した第4図の(a)に示されているステレ
オ信号の和信号W(jω,t)と、第4図の(b)に示さ
れているステレオ信号化の対象にされているモノラル信
号M(jω,t)との間の時間軸の整合を与えるための非
線形関数を例示したものであるが、これは例えば第4図
の(a)に示されているステレオ信号の和信号W(j
ω,t)のエンベロープにおける山谷と、第4図の(b)
に示されているステレオ信号比の対象にされているモノ
ラル信号M(jω,t)のエンベロープにおける山谷とを
対比することによって求めることができる。第4図にお
いて横軸taはステレオ信号の和信号W(jω,t)の時間
経過を示し、また、縦軸はステレス信号化の対象にされ
ているモノラル信号M(jω,t)の時間経過を示してい
る。
FIG. 5 shows the sum signal W (jω, t) of the stereo signals shown in FIG. 4 (a) and the stereo signal shown in FIG. 4 (b). The non-linear function for giving the matching of the time axis with the monaural signal M (jω, t) which is present is shown as an example. This is, for example, that of the stereo signal shown in (a) of FIG. Sum signal W (j
The peaks and valleys in the envelope of ω, t) and (b) in Fig. 4.
It can be obtained by comparing with the peaks and valleys in the envelope of the monaural signal M (jω, t) targeted for the stereo signal ratio shown in FIG. In FIG. 4, the horizontal axis ta shows the time passage of the sum signal W (jω, t) of the stereo signals, and the vertical axis shows the time passage of the monaural signal M (jω, t) which is the target of the steres signal. Is shown.

前記したステレオ信号の和信号W(jω,t)とステレオ
信号化の対象にされているモノラル信号M(jω,t)と
が同期関係にあれば、第4図の(a)中に示されている
,,…等の指標は、すべて第5図中に示されてい
る直線上に位置することになるが、現実にはステレオ信
号の和信号W(jω,t)とステレオ信号化の対象にされ
ているモノラル信号M(jω,t)とは、必らずしも同期
関係にはないので、例えば第4図の(a)中で時刻t1に
位置するステレオ信号の和信号W(jω,t)における指
標の点に対応するステレオ信号化の対象にされている
モノラル信号M(jω,t)の前記の指標に対応する点
は、第4図の(b)に示されているように時刻t1′に位
置している。そして、第4図の(a)中の各点から第4
図の(b)中の各点に向かって引かれている実線矢印
は、前記した両図中においてそれぞれ対応している2点
間の対応関係を明示するためのものである。
If the sum signal W (jω, t) of the stereo signals and the monaural signal M (jω, t) to be converted into the stereo signal are in a synchronous relationship, it is shown in (a) of FIG. , Etc. are all located on the straight line shown in FIG. 5, but in reality, the sum signal W (jω, t) of the stereo signal and the object of stereo signalization Since it does not necessarily have a synchronous relationship with the monaural signal M (jω, t) which is set to, the sum signal W (jω) of the stereo signals located at time t1 in FIG. , t) corresponding to the index point, the point corresponding to the index of the monaural signal M (jω, t) which is the object of stereo signalization is as shown in FIG. 4 (b). It is located at time t1 '. Then, from each point in FIG.
The solid arrow drawn toward each point in (b) of the figure is for clarifying the correspondence relationship between the two points corresponding to each other in the above-mentioned figures.

それで第5図においては、前記の指標に対応する座標
点は、直線を外れた所に位置することになり、前記の指
標の場合と同様にして、,…等の他の多くの指標
と対応する座標点を図5中に示して、それらの各座標点
を結ぶと第5図中に点線の曲線で示してあるような非直
線の関数が得られる。
Therefore, in FIG. 5, the coordinate point corresponding to the above-mentioned index is located outside the straight line, and in the same manner as the case of the above-mentioned index, it corresponds to many other indexes such as ... The coordinate points to be plotted are shown in FIG. 5 and the respective coordinate points are connected to obtain a non-linear function as shown by the dotted curve in FIG.

そこで、ステレオ信号から導出される時変伝達関数F
(jω,t)に対して、例えば指標に対応する時変伝達
関数F(jω,t)を、時刻t1′に移すような操作を、第
5図中に点線によって示されている非直線な関数に基づ
いて行なうことにより、第4図の(a)中で時刻t1に位
置するステレオ信号の和信号W(jω,t)における指標
の点に対応するステレオ信号化の対象にされているモ
ノラル信号M(jω,t)に対して同期関係にある新たな
時変伝達関数F′(jω,t)が得られるのである。前記
の操作が第4図の(c)と第4図の(d)との関係によ
って示されている。
Therefore, the time-varying transfer function F derived from the stereo signal
For (jω, t), for example, the operation of moving the time-varying transfer function F (jω, t) corresponding to the index to the time t1 ′ is performed by the non-linear operation shown by the dotted line in FIG. By carrying out based on the function, the monaural signal which is the target of stereo signalization corresponding to the index point in the sum signal W (jω, t) of the stereo signals located at time t1 in FIG. 4 (a). A new time-varying transfer function F ′ (jω, t) having a synchronous relationship with the signal M (jω, t) is obtained. The above operation is shown by the relationship between FIG. 4 (c) and FIG. 4 (d).

現実のステレオ信号の和信号W(jω,t)と、ステレオ
信号化の対象にされているモノラル信号M(jω,t)と
のエンベロープは、必らずしも第4図の(a),(b)
に例示してあるような明瞭な対応関係にあるとは限らな
いので、音声認識技術において実用されている線形マッ
チングあるいはDPマッチング等の手法の適用によって、
上記の目的を達成することができる。なお、前記した線
形マッチング、あるいはDPマッチング手法は、音声認識
における分野において広く使用されている公知の技術手
段なので、それの具体的な説明は省略するが、要するに
時変伝達関数F(jω,t)に対して第5図に示されてい
るような時間軸整合(補正)を施して時変伝達関数F
(jω,t)の時間軸を伸縮し、時間軸補正が行われた状
態の第4図の(d)に例示されているような新たな時変
伝達関数F′(jω,t)を形成させるのである。
The envelope of the sum signal W (jω, t) of the actual stereo signal and the monaural signal M (jω, t) to be converted into the stereo signal is necessarily (a) in FIG. (B)
Since it does not necessarily have a clear correspondence relationship as exemplified in the above, by applying a technique such as linear matching or DP matching which is practically used in the speech recognition technology,
The above object can be achieved. The above-mentioned linear matching or DP matching method is a well-known technical means that is widely used in the field of speech recognition, and a detailed description thereof will be omitted. In short, the time-varying transfer function F (jω, t). ) Is time-aligned (corrected) as shown in FIG.
The time axis of (jω, t) is expanded / contracted to form a new time-varying transfer function F ′ (jω, t) as illustrated in (d) of FIG. 4 with the time axis corrected. Let them do it.

これまでは、ステレス信号の和信号W(jω,t)とステ
レオ信号化の対象にされているモノラル信号M(jω,
t)とのエンベロープに着目して、時変伝達関数F(j
ω,t)に対して時間軸を操作する場合について説明して
来たが、時変伝達関数F(jω,t)の時間軸を操作し
て、新たな時変伝達関数F′(jω,t)を形成させるの
には、例えば、ステレオ信号の和信号W(jω,t)とス
テレオ信号化の対象にされているモノラル信号M(j
ω,t)との短時間のスペクトラムを細かく観察して、前
記両者の対比から非直線な関数を導出し、時変伝達関数
F(jω,t)の時間軸を操作して新たな時変伝達関数
F′(jω,t)を形成させることもできる。
So far, the sum signal W (jω, t) of the steres signal and the monaural signal M (jω,
Paying attention to the envelope with t), the time-varying transfer function F (j
Although the case of operating the time axis with respect to ω, t) has been described, the time axis of the time-varying transfer function F (jω, t) is manipulated to create a new time-varying transfer function F ′ (jω, t). t) is formed by, for example, the sum signal W (jω, t) of stereo signals and the monaural signal M (j
ω, t) is closely observed, a non-linear function is derived from the contrast between the two, and the time axis of the time-varying transfer function F (jω, t) is manipulated to create a new time-varying function. It is also possible to form the transfer function F '(jω, t).

本発明のモノフォニック信号のステレオフォニック信号
化のための信号処理方法の構成原理は以上のとおりであ
るが、次に第1図その他の各図を参照して、本発明のモ
ノフォニック信号のステレオフォニック信号化のための
信号処理方法についての具体的な説明を行う。
The configuration principle of the signal processing method for converting the monophonic signal of the present invention into a stereophonic signal is as described above. Next, referring to FIG. 1 and other drawings, the stereophonic signal of the monophonic signal of the present invention will be described. A specific description will be given of a signal processing method for conversion.

第1図は本発明のモノフォニック信号のステレオフォニ
ック信号化のための信号処理方法のブロック図である。
第1図において1は演奏者Bが曲目αの音楽を演奏して
得たモノラル信号の信号源であり、また、2は演奏者A
が曲目αの音楽を、演奏者Bが曲目αの音楽の演奏時に
使用した楽譜と同じ内容の楽譜を使用して、演奏者Aが
曲目αの音楽を演奏して得たステレオ信号の信号源であ
る。
FIG. 1 is a block diagram of a signal processing method for converting a monophonic signal into a stereophonic signal according to the present invention.
In FIG. 1, 1 is a signal source of a monaural signal obtained by the performer B playing the music of the program α, and 2 is a performer A.
Is a signal source of a stereo signal obtained by the performer A playing the music of the program α using the music of the program α as the music used by the performer B when playing the music of the program α. Is.

前記したモノラル信号の信号源1からの演奏者Bが曲目
αの音楽を演奏して得たモノラル信号はアナログ・デジ
タル変換器3によってデジタル信号に変換されたモノラ
ル信号M(jω,t)の波形データとしてメモリ5に記憶
される。
The waveform of the monaural signal M (jω, t), which is obtained by the performer B playing the music of the program α from the signal source 1 of the monaural signal, is converted into a digital signal by the analog-digital converter 3. It is stored in the memory 5 as data.

また、前記したステレオ信号の信号源2からのステレオ
信号、すなわち、演奏者Aが曲目αの音楽を、演奏者B
が曲目αの音楽の演奏時に使用した楽譜と同じ内容の楽
譜を使用して、演奏者Aが曲目αの音楽を演奏して得た
ステレオ信号の左右のチャンネル信号L(jω,t),R
(jω,t)は、アナログ・デジタル変換器4によってデ
ジタル信号に変換されたステレオ信号の左右のチャンネ
ル信号L(jω,t),R(jω,t)の波形データとしてメ
モリ6に記憶される。
In addition, the stereo signal from the signal source 2 of the stereo signal, that is, the music of the program α by the performer A is changed to the performer B.
, The left and right channel signals L (jω, t), R of the stereo signal obtained by the performer A playing the music of the music α using the music having the same contents as the music used when the music of the music α was played.
(Jω, t) is stored in the memory 6 as waveform data of the left and right channel signals L (jω, t) and R (jω, t) of the stereo signal converted into the digital signal by the analog / digital converter 4. .

デジタル信号形態のモノラル信号M(jω,t)や左右の
チャンネル信号L(jω,t),R(jω,t)を送出しうる
ような信号源が用いられている場合には、前記したアナ
ログ・デジタル変換器3,4が不要とされることはいうま
でもない。
When a signal source capable of transmitting a monaural signal M (jω, t) in the form of a digital signal and left and right channel signals L (jω, t), R (jω, t) is used, the above-mentioned analog is used. Needless to say, the digital converters 3 and 4 are unnecessary.

前記したメモリ5に記憶されているデジタル信号形態の
モノラル信号M(jω,t)の波形データは、メモリ5か
ら読出されてマトリクス計算回路20とデジタル・フィル
タ処理回路19及びエンベロープの計算回路7とに供給さ
れる。
The waveform data of the monaural signal M (jω, t) in the form of a digital signal stored in the memory 5 is read out from the memory 5 and the matrix calculation circuit 20, the digital filter processing circuit 19, and the envelope calculation circuit 7 are read. Is supplied to.

前記したエンベロープの計算回路7においては前記のメ
モリ5から読出されたデジタル信号形態のモノラル信号
M(jω,t)の波形データからモノラル信号M(jω,
t)のエンベロープデータを作り、それをモノラル信号
M(jω,t)のエンベロープデータの記憶装置として用
いられるメモリ8に記憶させる。
In the envelope calculation circuit 7, the monaural signal M (jω, t) is read from the waveform data of the digital signal form monaural signal M (jω, t) read from the memory 5.
t) envelope data is created and stored in the memory 8 used as a storage device for the envelope data of the monaural signal M (jω, t).

また、前記したデジタル信号に変換されたステレオ信号
の左右のチャンネル信号L(jω,t),R(jω,t)の波
形データを記憶しているメモリ6から読出された左右の
チャンネル信号L(jω,t),R(jω,t)の波形データ
は、時変伝達関数F(jω,t)の計算回路14と、ステレ
オ信号の和信号W(jω,t)の計算回路10とに供給され
る。
Also, the left and right channel signals L (read out from the memory 6 which stores the waveform data of the left and right channel signals L (jω, t), R (jω, t) of the stereo signal converted into the digital signal described above. The waveform data of jω, t) and R (jω, t) are supplied to the calculation circuit 14 for the time-varying transfer function F (jω, t) and the calculation circuit 10 for the sum signal W (jω, t) of stereo signals. To be done.

前記したステレオ信号の和信号W(jω,t)の計算回路
10から出力されたステレオ信号の和信号W(jω,t)
は、和信号W(jω,t)の波形データのメモリ11に記憶
される。
Calculation circuit for sum signal W (jω, t) of stereo signals described above
Sum signal W (jω, t) of stereo signals output from 10
Are stored in the memory 11 of the waveform data of the sum signal W (jω, t).

前記したメモリ11に記憶されているデジタル信号形態の
ステレオ信号の和信号W(jω,t)の波形データは、メ
モリ11から読出されてエンベロープの計算回路12に供給
される。
The waveform data of the sum signal W (jω, t) of the digital signal type stereo signal stored in the memory 11 is read from the memory 11 and supplied to the envelope calculation circuit 12.

前記したエンベロープの計算回路12においては前記のメ
モリ11から読出されたデジタル信号形態のステレオ信号
の和信号W(jω,t)の波形データからステレオ信号の
和信号W(jω,t)のエンベロープデータを作り、それ
をステレオ信号の和信号W(jω,t)のエンベロープデ
ータの記憶装置として用いられているメモリ13に記憶さ
せる。
In the envelope calculation circuit 12, the envelope data of the sum signal W (jω, t) of the stereo signal is obtained from the waveform data of the sum signal W (jω, t) of the stereo signal in the digital signal form read from the memory 11. Are stored in the memory 13 used as a storage device for the envelope data of the sum signal W (jω, t) of the stereo signals.

前記したメモリ8から読出されたモノラル信号M(j
ω,t)のエンベロープデータと、前記したメモリ13から
読出されたステレオ信号の和信号W(jω,t)のエンベ
ロープデータとは時間軸整合の計算回路9に供給され
て、そこで例えばDPマッチングなどにより時間軸整合の
計算が行われ、時間軸調整の計算回路9からの出力信号
は時間軸整合(非線形)関数のデータとしてメモリ16に
記憶される。
The monaural signal M (j
The envelope data of ω, t) and the envelope data of the sum signal W (jω, t) of the stereo signals read from the memory 13 are supplied to the time-axis matching calculation circuit 9, where, for example, DP matching or the like is performed. Thus, the time axis matching calculation is performed, and the output signal from the time axis adjusting calculation circuit 9 is stored in the memory 16 as the data of the time axis matching (non-linear) function.

また、前記したメモリ6から読出された左右のチャンネ
ル信号L(jω,t),R(jω,t)の波形データが供給さ
れた時変伝達関数F(jω,t)の計算回路14では、メモ
リ6から読出された左右のチャンネル信号L(jω,
t),R(jω,t)の波形データから時変伝達関数F(j
ω,t)を計算して、それから出力された時変伝達関数F
(jω,t)を作る。
Further, in the calculation circuit 14 of the time-varying transfer function F (jω, t) to which the waveform data of the left and right channel signals L (jω, t) and R (jω, t) read from the memory 6 is supplied, The left and right channel signals L (jω,
t), R (jω, t) waveform data, the time-varying transfer function F (j
ω, t) is calculated and the time-varying transfer function F output from it is calculated.
Make (jω, t).

すなわち、時変伝達関数F(jω,t)の計算回路14で
は、メモリ6から読出され左右のチャンネル信号L(j
ω,t),R(jω,t)の波形データから、既述した(1ω
t),(2ωt)式に従って和信号W(jω,t)と差信
号S(jω,t)とを作り、次に、前記の和信号W(j
ω,t)と差信号S(jω,t)とを用いて(10ω,t)式に
より時変数伝達関数F(jω,t)を作り出すのである。
That is, in the calculation circuit 14 for the time-varying transfer function F (jω, t), the left and right channel signals L (j
From the waveform data of ω, t) and R (jω, t), (1ω
t) and (2ωt), a sum signal W (jω, t) and a difference signal S (jω, t) are generated, and then the sum signal W (j
By using (ω, t) and the difference signal S (jω, t), the time variable transfer function F (jω, t) is created by the equation (10ω, t).

W(jω,t)=L(jω,t)+R(jω,t) …(1ω
t) S(jω,5)=L(jω,t)−R(jω,t) …(2ω
t) F(jω,t)=S(jω,t)/W(jω,t)…(10ωt) 時変伝達関数F(jω,t)の計算回路14によって作られ
た時変伝達関数F(jω,t)はメモリ15に記憶され、メ
モリ15から続出された時変伝達関数F(jω,t)は時間
軸整合の処理回路17に供給される。
W (jω, t) = L (jω, t) + R (jω, t) (1ω
t) S (jω, 5) = L (jω, t) −R (jω, t) (2ω
t) F (jω, t) = S (jω, t) / W (jω, t) ... (10ωt) Time-varying transfer function F (jω, t) generated by the calculation circuit 14 of the time-varying transfer function F (jω, t). jω, t) is stored in the memory 15, and the time-varying transfer function F (jω, t) output from the memory 15 is supplied to the time-axis matching processing circuit 17.

前記した時間軸整合の処理回路17には、前記したメモリ
16から読出された時間軸整合(非線形)関数のデータも
供給されており、時間軸整合の処理回路17ではメモリ15
から読出された時変伝達関数F(jω,t)の時間軸を、
前記したメモリ16から読出された時間軸整合(非線形)
関数のデータにより伸縮させて、時間軸補正の行われた
状態の新たな時変伝達関数F′(jω,t)を出力し、こ
の時間軸補正が行われた状態の新たな時変伝達関数F′
(jω,t)をメモリ18に記憶する。
The time axis matching processing circuit 17 described above includes the memory described above.
The data of the time-axis matching (non-linear) function read from 16 is also supplied.
The time axis of the time-varying transfer function F (jω, t) read from
Time axis alignment (non-linear) read from the memory 16 described above
A new time-varying transfer function F ′ (jω, t) in a state where the time axis is corrected is output by expanding and contracting with the function data, and a new time-varying transfer function in the state where the time axis is corrected is output. F '
(Jω, t) is stored in the memory 18.

第6図は前記した時間軸整合の処理回路17において行わ
れる時間軸整合の処理の内容を図示説明したものであ
り、第6図の(a)は時変伝達関数F(jω,t)を3次
元表示(振幅特性のみを示す)したものであり、また第
6図の(b)は第6図の(a)に示されている時変伝達
関数F(jω,t)に時間軸伸縮を施して得られる新たな
時変伝達関数F′(jω,t)、すなわち、第6図の
(a)に示されている時変伝達関数F(jω,t)に対し
て、既述した第4図及び第5図を参照して説明した時間
軸整合関数により時間軸を伸縮した状態のものを示した
ものである。
FIG. 6 illustrates the contents of the time-axis matching processing performed in the time-axis matching processing circuit 17 described above. FIG. 6 (a) shows the time-varying transfer function F (jω, t). It is a three-dimensional display (only the amplitude characteristic is shown), and FIG. 6B shows the time-varying transfer function F (jω, t) shown in FIG. The new time-varying transfer function F ′ (jω, t) obtained by applying the above, that is, the time-varying transfer function F (jω, t) shown in FIG. 6 shows a state in which the time axis is expanded and contracted by the time axis matching function described with reference to FIGS. 4 and 5.

すなわち、第6図の(a)にで示されている時刻t1に
おける時変伝達関数F(jω,t1)は、時間伸縮を施し
て得られた第6図の(b)においてはF(jω,t1′)
のように、時刻がt1から時刻t1′に変えられている。
That is, the time-varying transfer function F (jω, t1) at time t1 shown in (a) of FIG. 6 is F (jω) obtained by performing time expansion / contraction in FIG. 6 (b). , t1 ′)
, The time is changed from t1 to time t1 ′.

第6図の(c)は第6図の(b)に示されている時間伸
縮の施されている新たな時変伝達関数F′(jω,t)に
対して補間処理を施して得られる新たな時変伝達関数
F′(jω,t)を示したものであるが、このように時間
軸伸縮が施されている新たな時変伝達関数F′(jω,
t)に対して補間処理を施すのは、離散的なデジタル信
号によって信号処理が行われるために、新たな時変伝達
関数F′(jω,t)は時刻t1,t2,t3…のように波形デー
タの時刻と同期した時変伝達関数に変換されることが必
要とされるからであって、補間処理により例えば第6図
の(b)の′に示されている時刻t1における新たな時
変伝達関数F′(jω,t1)が求められる。
FIG. 6 (c) is obtained by performing interpolation processing on the new time-varying transfer function F ′ (jω, t) shown in FIG. The new time-varying transfer function F ′ (jω, t) is shown, and the new time-varying transfer function F ′ (jω, t) thus expanded / contracted in the time axis is shown.
Interpolation processing is performed on t) because the signal processing is performed by a discrete digital signal, so that the new time-varying transfer function F ′ (jω, t) is represented by time t1, t2, t3 ... This is because it is required to be converted into a time-varying transfer function that is synchronized with the time of the waveform data. For example, a new time at the time t1 shown in ′ of FIG. The variable transfer function F ′ (jω, t1) is obtained.

前記したメモリ18から読出された時間軸補正が行われた
状態の新たな時変伝達関数F′(jω,t)は、デジタル
・フィルタ処理回路19に供給されるが、このデジタル・
フィルタ処理回路19には、既述したようにメモリ5から
続出されたモノラル信号M(jω,t)の波形データも供
給されていて、このデジタル・フィルタ処理回路19で
は、時間軸補正が行われた状態の新たな時変伝達関数
F′(jω,t)を、ステレオ信号化の対象にされるべき
モノラル信号M(jω,t)、すなわち、曲目αの音楽を
演奏者Bが演奏した際に得られた音響信号に基づいて発
生されたモノラル信号M(jω,t)に次式にように適用
して、ステレオ信号化の対象にされているモノラル信号
M(jω,t)と同期している状態の擬似差信号 G(jω,t)=M(jω,t)×F′(jω,t)…(12′
ωt) を作り出し、その擬似差信号G(jω,t)の波形データ
をメモリ21に記憶させる。
The new time-varying transfer function F ′ (jω, t) read out from the memory 18 in the time-axis corrected state is supplied to the digital filter processing circuit 19.
As described above, the filter processing circuit 19 is also supplied with the waveform data of the monaural signal M (jω, t) output from the memory 5, and the digital filter processing circuit 19 performs time-axis correction. When the player B plays the monaural signal M (jω, t), that is, the music of the song α, which is the new time-varying transfer function F ′ (jω, t) in the above state. Is applied to the monaural signal M (jω, t) generated on the basis of the acoustic signal obtained as described below, and is synchronized with the monaural signal M (jω, t) that is the target of stereo signalization. Pseudo difference signal G (jω, t) = M (jω, t) × F ′ (jω, t) ... (12 ′
ωt) is generated, and the waveform data of the pseudo difference signal G (jω, t) is stored in the memory 21.

デジタル・フィルタ処理回路19においてステレオ信号化
の対象にされるべき曲目αの音楽を演奏者Bが演奏した
際に得られた音響信号に基づいて発生されたモノラル信
号M(jω,t)に次式のように適用して、ステレオ信号
化の対象にされているモノラル信号M(jω,t)と同期
している状態の擬似差信号 G(jω,t)=M(jω,t)×F′(jω,t)…(12′
ωt) を作り出す手順を図示説明しているのが第7図である。
In the digital filter processing circuit 19, a monaural signal M (jω, t) generated based on the acoustic signal obtained when the performer B plays the music of the music piece α to be stereophonicized is next generated. The pseudo difference signal G (jω, t) = M (jω, t) × F in a state of being synchronized with the monaural signal M (jω, t), which is the object of stereo signalization, by applying the equation ′ (Jω, t)… (12 ′
FIG. 7 illustrates the procedure for producing ωt).

第7図に示されているのは、周波数領域におけるデジタ
ル・フィルタリングと呼ばれているもので、モノラル信
号M(jω,t)は予め定められたタイミングで、予め定
められた時間巾だけ切出されてハニング窓処理を受け
る。
FIG. 7 shows what is called digital filtering in the frequency domain. The monaural signal M (jω, t) is cut out at a predetermined timing for a predetermined time width. And undergo Hanning window processing.

次いで、前記したモノラル信号M(jω,t)の部分波形
はフーリエ変換されて、前記のフーリエ変換のタイミン
グ(図示の例では時刻t2)に対応する時変伝達関数F′
(jω,t)によって重み付けされた後にフーリエ逆変換
されて、この段階で時刻t2における擬似差信号G(j
ω,t)の部分波形が得られる。
Next, the partial waveform of the monaural signal M (jω, t) is Fourier-transformed, and the time-varying transfer function F'corresponding to the timing of the Fourier transform (time t2 in the illustrated example).
After being weighted by (jω, t), the inverse Fourier transform is performed, and at this stage, the pseudo difference signal G (j
The partial waveform of ω, t) is obtained.

前記したと同様な信号処理が順次の時刻において次々に
行われることによって得られた擬似差信号G(jω,t)
の次々の部分波形が接続されることによって擬似差信号
G(jω,t)が形成されてメモリ21に記憶される。
The pseudo difference signal G (jω, t) obtained by sequentially performing the same signal processing as described above at successive times
The pseudo difference signal G (jω, t) is formed by connecting the subsequent partial waveforms of, and is stored in the memory 21.

メモリ21から読出された擬似差信号G(jω,t)の波形
データと、前記したメモリ5から読出されたモノラル信
号M(jω,t)の波形データとはマトリクス計算回路20
に供給され、マトリクス計算回路20では Ls(jω,t)={M(jω,t) +G(jω,t)}/2 …(8ωt) Rs(jω,t)={M(jω,t) −G(jω,t)}/2 …(9ωt) のような演算を行って擬似ステレオ信号の左,右チャン
ネル信号Ls(jω,t),Rs(jω,t)を作り、その擬似
ステレス信号の左,右チャンネル信号Ls(jω,t),Rs
(jω,t)の波形データはメモリ22に記憶される。メモ
リ22から読出された擬似ステレオ信号の左,右チャンネ
ル信号Ls(jω,t),Rs(jω,t)の波形データはデジ
タル・アナログ変換器23によってアナログ信号に変換さ
れるが、このアナログ信号は演奏者Bによって演奏され
た曲目αの音楽のモノラル信号M(jω,t)に対して、
演奏者Bが曲目αの音楽の演奏時に使用した楽譜と同じ
内容の楽譜を使用して、演奏者Aによって演奏された曲
目αの音楽のステレオ信号におけるステレオ音響効果が
付加された擬似ステレオ信号となされているのである。
The waveform data of the pseudo difference signal G (jω, t) read from the memory 21 and the waveform data of the monaural signal M (jω, t) read from the memory 5 are combined in the matrix calculation circuit 20.
And Ls (jω, t) = {M (jω, t) + G (jω, t)} / 2 (8ωt) Rs (jω, t) = {M (jω, t) in the matrix calculation circuit 20. -G (jω, t)} / 2 (9ωt) is performed to generate left and right channel signals Ls (jω, t) and Rs (jω, t) of the pseudo stereo signal, and the pseudo steres signal Left and right channel signals Ls (jω, t), Rs
The waveform data of (jω, t) is stored in the memory 22. The waveform data of the left and right channel signals Ls (jω, t) and Rs (jω, t) of the pseudo stereo signal read from the memory 22 is converted into an analog signal by the digital / analog converter 23. Is the monaural signal M (jω, t) of the music of the program α played by performer B,
Using a musical score having the same contents as the musical score used by the performer B when playing the music of the song α, a pseudo stereo signal added with a stereo sound effect in the stereo signal of the music of the song α played by the performer A It is done.

前記したメモリ21に記憶されている擬似ステレオ信号は
デジタル信号であるから、後続されている録音装置がデ
ジタル・テープレコーダの場合にはデジタル・アナログ
変換器23が不要であることはいうまでもない。
Since the pseudo-stereo signal stored in the memory 21 is a digital signal, it goes without saying that the digital / analog converter 23 is not necessary when the succeeding recording device is a digital tape recorder. .

(発明の効果) 以上、詳細に説明したところから明らかなように、デジ
タル信号処理技術を適用してモノフォニック信号をステ
レオフォニック信号化する信号処理方法を行うのに、ス
テレオフォニック信号化の対象にされているモノフォニ
ック信号と、同一内容の曲目の2チャンネルによるステ
レオフォニック信号の右チャンネル信号と左チャンネル
信号とによって形成される和信号と差信号とにおける差
信号を和信号で除して時変伝達関数を得る手段と、ステ
レオフォニック信号化の対象にされているモノフォニッ
ク信号に対して前記した時変伝達関数と同期させるよう
に、ステレオフォニック信号の和信号とステレオフォニ
ック信号化の対象にされているモノフォニック信号と
の、それぞれのエンベロープなどの対比を行なうことに
より、ステレオフォニック信号の和信号とステレオフォ
ニック信号化の対象にされているモノフォニック信号の
時間軸の同期関係を示す非線形関数を導出し、前記の非
線形関数に基づいて前記した時変伝達関数の時間軸を変
更し、ステレオフォニック信号化の対象にされているモ
ノフォニック信号に対して同期関係にある新たな時変伝
達関数を得る手段と、ステレオフォニック信号化の対象
にされているモノフォニック信号に対して、前記した新
たな時変伝達関数を適用して擬似差信号を得る手段と、
ステレオフォニック信号化の対象にされているモノフォ
ニック信号と、前記した擬似差信号からステレオフォニ
ック信号を復原する演算を施す手段とからなるモノフォ
ニック信号のステレオフォニック信号化のための信号処
理方法は、ステレオ信号における左,右のチャンネル信
号L(jω,t),R(jω,t)の和信号W(jω,t)と差
信号S(jω,t)との関係として、前記した差信号S
(jω,t)を和信号W(jω,t)で除して得られる関数
F(jω,t)、すなわち、 F(jω,t)=S(jω,t)/W(jω,t) …(A) を考え、前記の(A)式で示されるような伝達関数F
(jω,t)を有するフィルタが実現できれば、この
(A)式の関係を用いてステレオ信号における左,右の
チャンネル信号L(jω,t),R(jω,t)の差信号S
(jω,t)が、ステレオ信号における左,右のチャンネ
ル信号L(jω,t),R(jω,t)の和信号W(jω,t)
と、前記したフィルタの伝達関数F(jω,t)とによっ
て、 S(jω,t)=W(jω,t)×F(jω,t) …(B) 前記の(B)式のように求めることができることに着目
し、ステレオ信号における左,右のチャンネル信号L
(jω,t),R(jω,t)の和信号W(jω,t)、 W(jω,t)=L(jω,t)+R(jω,t)…(C)、 とモノラル信号M(jω,t)、 M(jω,t)=L(jω,t)+R(jω,t) …(D) とが略々同一であることから、前記した(B)式中の和
信号W(jω,t)の代わりにモノラル信号M(jω,t)
を用いて、必要な擬似差信号G(jω,t)を、 G(jω,t)=M(jω,t)×F(jω,t) …(E) 前記の(E)式により求めることができるようにし、ま
た、モノフォニック信号をステレオフォニック信号化す
る際に必要とされる擬似信号G(jω,t)が前記のよう
に求められた場合には、 Ls(jω,t)={M(jω,t) +G(jω,t)}/2 …(F) Rs(jω,t)={M(jω,t) −G(jω,t)}/2 …(G) 前式の関係により、モノラル信号M(jω,t)をステレ
オ信号化した擬似ステレオ信号における左信号Ls(j
ω,t)と右信号Rs(jω,t)とを発生させることができ
るのであるが、前記の擬似信号G(jω,t)は前記した
(E)式からも明らかなように、モノラル信号M(j
ω,t)にフィルタの伝達関数F(jω,t)を重み付ける
ことによって得られるものであるから、ステレオ信号化
の対象にされているモノラル信号M(jω,t)から必要
な擬似差信号G(jω,t)が得られるような伝達関数F
(jω,t)を有するフィルタが必要とされる。そして、
前記した伝達関数F(jω,t)は(A)式に示されてい
るように、ステレオ信号における左,右のチャンネル信
号L(jω,t),R(jω,t)の差信号S(jω,t)を和
信号W(jω,t)で除して得た伝達関数F(jω,t)で
あるが、音楽信号における前記した差信号S(jω,t)
や和信号W(jω,t)などは、何れも時間の経過に従っ
て刻々内容が変化する所謂時変スペクトラムであるか
ら、前記した関数F(jω,t)も時間の経過に従って時
々刻々内容が変化する時変伝達関数となるが、前記した
(A)式に示されている時変伝達関数を有するフィルタ
の特性は、主として楽器の編成と配置とに依存して曲の
進行に伴って変化していて、特殊な場合を除き、モノラ
ル信号M(jω,t)に何等かの法則を適用して前記の時
変伝達関数F(jω,t)を算出するようなことは事実上
不可能なものである。
(Effects of the Invention) As is clear from the above description, in order to perform a signal processing method for converting a monophonic signal into a stereophonic signal by applying a digital signal processing technique, it is targeted for stereophonic signal conversion. Time-varying transfer function by dividing the difference signal between the sum signal and the difference signal formed by the right channel signal and the left channel signal of the stereophonic signal by the second channel of the same music To obtain the sum signal of the stereophonic signals and the monophonic signals targeted for stereophonic signal synchronization so as to synchronize with the time-varying transfer function described above for the monophonic signals targeted for stereophonic signal conversion. By comparing each envelope with the signal , Deriving a non-linear function indicating a time axis synchronous relationship between the sum signal of the stereophonic signals and the monophonic signal that is the target of stereophonic signal conversion, and based on the non-linear function, the time axis of the time-varying transfer function described above. To obtain a new time-varying transfer function in synchronization with the monophonic signal that is the target of stereophonic signal conversion, and for the monophonic signal that is the target of stereophonic signal conversion, Means for applying the new time-varying transfer function described above to obtain a pseudo difference signal;
A signal processing method for converting a monophonic signal that is a target of stereophonic signal conversion to a monophonic signal that is a target of stereophonic signal conversion and a means for performing an operation of restoring the stereophonic signal from the pseudo difference signal is a stereo signal. In the relationship between the sum signal W (jω, t) of the left and right channel signals L (jω, t), R (jω, t) and the difference signal S (jω, t) in FIG.
A function F (jω, t) obtained by dividing (jω, t) by the sum signal W (jω, t), that is, F (jω, t) = S (jω, t) / W (jω, t) Considering (A), the transfer function F as shown in the above equation (A)
If a filter having (jω, t) can be realized, the difference signal S between the left and right channel signals L (jω, t) and R (jω, t) in the stereo signal is obtained by using the relationship of the equation (A).
(Jω, t) is the sum signal W (jω, t) of the left and right channel signals L (jω, t), R (jω, t) in the stereo signal.
And the transfer function F (jω, t) of the filter described above, S (jω, t) = W (jω, t) × F (jω, t) (B) As in the formula (B), Focusing on the fact that it can be obtained, the left and right channel signals L in the stereo signal
(Jω, t), R (jω, t) sum signal W (jω, t), W (jω, t) = L (jω, t) + R (jω, t) (C), and monaural signal M (Jω, t), M (jω, t) = L (jω, t) + R (jω, t) (D) are substantially the same, and therefore the sum signal W in the above equation (B) is Instead of (jω, t), monaural signal M (jω, t)
To obtain the required pseudo difference signal G (jω, t) = G (jω, t) = M (jω, t) × F (jω, t) (E) by the above equation (E) When the pseudo signal G (jω, t) required for converting the monophonic signal to the stereophonic signal is obtained as described above, Ls (jω, t) = {M (Jω, t) + G (jω, t)} / 2 (F) Rs (jω, t) = {M (jω, t) −G (jω, t)} / 2 (G) The left signal Ls (j in the pseudo stereo signal obtained by converting the monaural signal M (jω, t) into a stereo signal by
ω, t) and the right signal Rs (jω, t) can be generated, but the pseudo signal G (jω, t) is a monaural signal, as is apparent from the equation (E). M (j
.omega., t) is obtained by weighting the transfer function F (j.omega., t) of the filter, so that the pseudo difference signal required from the monaural signal M (j.omega., t) targeted for stereo signalization is obtained. Transfer function F such that G (jω, t) is obtained
A filter with (jω, t) is needed. And
The transfer function F (jω, t) described above is, as shown in equation (A), the difference signal S (of the left and right channel signals L (jω, t), R (jω, t) in the stereo signal. jω, t) is a transfer function F (jω, t) obtained by dividing the sum signal W (jω, t) by the sum signal W (jω, t).
Since the sum signal, the sum signal W (jω, t), and the like are so-called time-varying spectra whose contents change with time, the function F (jω, t) described above also changes with time. The characteristics of the filter having the time-varying transfer function shown in the above equation (A) change with the progression of the music mainly depending on the organization and arrangement of the musical instrument. However, except for a special case, it is practically impossible to calculate the time-varying transfer function F (jω, t) by applying some law to the monaural signal M (jω, t). It is one.

それで、本発明のモノフォニック信号のステレオフォニ
ック信号化のための信号処理方法においては、ステレオ
化の対象にされているモノラル信号M(jω,t)と同一
の曲目のステレオ信号S(jω,t)から前記した(A)
式に示されるような時変伝達関数 F(jω,t)=S(jω,t)/W(jω,t) …(A)を
導出し、その時変伝達関数F(jω,t)をステレオ化の
対象にされているモノラル信号M(jω,t)に適用し
て、ステレオ化の対象にされているモノラル信号M(j
ω,t)の擬似差信号G(jω,t)を既述した(E)式、
すなわち、 G(jω,t)=M(jω,t)×F(jω,t) …(E) 次の関係を用いて作り出すようにしており、さらにモノ
ラル信号M(jω,t)に時変伝達関数F(jω,t)を用
いてステレオ信号化の対象にされているモノラル信号M
(jω,t)の擬似差信号G(jω,t)を作り出す場合
に、ステレオ信号化の対象にされているモノラル信号M
(jω,t)と、それに適用されるべき時変伝達関数F
(jω,t)とが同期していることが必要とされる点につ
いては、ステレオ信号化の対象にされているモノラル信
号M(jω,t)と同一の曲目のステレオ信号から導出し
た前記した(A)式に示されるような時変伝達関数F
(jω,t)=S(jω,t)/W(jω,t) …(A)をス
テレオ信号化の対象にされているモノラル信号M(j
ω,t)に同期させるために、時変伝達関数F(jω,t)
を時間軸上で伸縮させることができるように、ステレオ
信号化の対象にされているモノラル信号M(jω,t)の
時間軸と、ステレオ信号化の対象にされているモノラル
信号M(jω,t)と同一の曲目の同一内容の音楽の演奏
によって発生されたステレオ信号の時間軸との間の「進
み」や「遅れ」の関係を見出し、前記の両時間軸の「進
み」「遅れ」の関係を時変伝達関数F(jω,t)に適用
して時変伝達関数F(jω,t)の時間軸を伸縮し、時間
軸補正が行われた状態の新しい時変伝達関数F′(j
ω,t)を得て、この時間軸補正が行われた状態の新しい
時変伝達関数F′(jω,t)を、ステレオ信号化の対象
にされるべきモノラル信号として、曲目αの音楽を演奏
者Bが演奏した際に得られた音響信号に基づいて発生さ
れたモノラル信号M(jω,t)に次式のように適用し
て、ステレオ信号化の対象にされているモノラル信号M
(jω,t)と同期している状態の擬似差信号 G(jω,t)=M(jω,t)×F′(jω,t)…
(E′)を作り出すようにしているのであり、この本発
明のモノフォニック信号のステレフォニック信号化のた
めの信号処理方法では、前記のように演奏者Bが特定な
曲目αの音楽を演奏して得たモノラル信号M(jω,t)
を擬似ステレオ信号化するのに、演奏者Bが前記の特定
な曲目αの音楽の演奏時に使用した楽譜と同じ内容の楽
譜を使用して、演奏者Aによって演奏された曲目αの音
楽によるステレオ信号における和信号W(jω,t)と差
信号S(jω,t)とに基づいて得た時変伝達関数F(j
ω,t)を、前記したステレオ信号化の対象にされている
モノラル信号M(jω,t)に適用して擬似差信号G(j
ω,t)を作って擬似ステレオ信号の左右チャンネル信号
Ls(jω,t),Rs(jω,t)を作り出した場合における
擬似ステレオ信号の左右チャンネル信号Ls(jω,t),R
s(jω,t)によるステレオ再生の効果は、演奏者Bに
よる特定な曲目αの音楽の演奏に対して、演奏者Bが前
記の特定な曲目αの音楽の演奏時に使用した楽譜と同じ
内容の楽譜を使用して、曲目αの音楽を演奏者Aが演奏
したときのステレオ効果を付与したものになるのであ
り、また、本発明のモノフォニック信号のステレオフォ
ニック信号化のための信号処理方法によって作られた擬
似ステレオ信号がモノラル再生された場合には擬似差信
号が打消されて再生されず、モノラル信号M(jω,t)
だけが再生されるのでステレオ信号の再生とモノラル信
号の再生とにおけるコンパチビリティは完全であり、本
発明のモノフォニック信号のステレオフォニック信号化
のための信号処理方法によれば従来の(1)モノラル信
号に種々のフィルタを適用してそれぞれの楽器の音を分
離し、それぞれの楽器の音像の定位を行う。(2)モノ
ラル信号に移送回路(オール・パスフィルタ)を適用し
て再生音場に拡がり感を与える。(3)モノラル信号に
反響や残響を付加して立体音響的な拡がり感が感じられ
るようにする。(4)モノラル信号に前記した(1)〜
(3)の手段を組合わせて適用する、などによって代表
されているモノフォニック信号のステレオフォニック信
号化方法における既述したような諸問題点がすべて良好
に解決できる。
Therefore, in the signal processing method for converting a monophonic signal into a stereophonic signal of the present invention, the stereo signal S (jω, t) of the same music as the monaural signal M (jω, t) to be stereophonicized is used. From above (A)
The time-varying transfer function F (jω, t) = S (jω, t) / W (jω, t) (A) is derived as shown in the equation, and the time-varying transfer function F (jω, t) is stereophonic. When applied to the monaural signal M (jω, t) targeted for conversion, the monaural signal M (j targeted for stereo conversion is used.
ω, t) pseudo-difference signal G (jω, t) already described in equation (E),
That is, G (jω, t) = M (jω, t) × F (jω, t) (E) The following relation is used to create the time-varying monaural signal M (jω, t). A monaural signal M to be stereo-signaled by using the transfer function F (jω, t)
When creating the pseudo difference signal G (jω, t) of (jω, t), the monaural signal M that is the target of stereo signalization
(Jω, t) and the time-varying transfer function F to be applied to it
As for the point that (jω, t) is required to be synchronized, it is derived from the stereo signal of the same music as the monaural signal M (jω, t) which is the target of stereo signalization. Time-varying transfer function F as shown in equation (A)
(Jω, t) = S (jω, t) / W (jω, t) (A) is a monaural signal M (j) that is the subject of stereo signalization.
ω, t), the time-varying transfer function F (jω, t)
So that it can be expanded and contracted on the time axis, the time axis of the monaural signal M (jω, t) targeted for stereo signalization and the monaural signal M (jω, t targeted for stereo signalization The relationship between “advance” and “delay” between t) and the time axis of the stereo signal generated by playing the same music of the same song is found, and the “advance” and “delay” of both time axes are found. Is applied to the time-varying transfer function F (jω, t) to expand / contract the time axis of the time-varying transfer function F (jω, t), and a new time-varying transfer function F ′ in the state where the time axis correction is performed is performed. (J
ω, t), and the new time-varying transfer function F ′ (jω, t) in the state where the time axis correction is performed is used as a monaural signal to be stereo-signalized, and the music of the track α is The monaural signal M (jω, t) generated based on the acoustic signal obtained when the performer B plays is applied as in the following equation to obtain a monaural signal M to be converted into a stereo signal.
Pseudo difference signal in the state of being synchronized with (jω, t) G (jω, t) = M (jω, t) × F ′ (jω, t) ...
(E ') is produced. In the signal processing method for converting the monophonic signal into the stereophonic signal of the present invention, the performer B plays the music of the specific song α as described above. Obtained monaural signal M (jω, t)
Is converted into a pseudo-stereo signal by using a musical score having the same contents as the musical score used by the performer B at the time of playing the music of the specific song α, and stereo by the music of the song α played by the performer A. Time-varying transfer function F (j) obtained based on the sum signal W (jω, t) and the difference signal S (jω, t) in the signal.
ω, t) is applied to the monaural signal M (jω, t) which is the target of the stereo signalization, and the pseudo difference signal G (j
ω, t) to generate the left and right channel signals of the pseudo stereo signal
Left and right channel signals Ls (jω, t), R of the pseudo stereo signal when Ls (jω, t), Rs (jω, t) are generated
The effect of the stereo reproduction by s (jω, t) is the same as the score used by the performer B when playing the music of the specific song α, with respect to the performance of the music of the specific song α by the performer B. The music of No. α is used to give a stereo effect when the performer A plays, and the signal processing method for converting a monophonic signal into a stereophonic signal according to the present invention is used. When the generated pseudo stereo signal is monaurally reproduced, the pseudo difference signal is canceled and is not reproduced, and the monaural signal M (jω, t)
Since only the audio signal is reproduced, the compatibility between the reproduction of the stereo signal and the reproduction of the monaural signal is perfect. According to the signal processing method for converting the monophonic signal into the stereophonic signal of the present invention, the conventional (1) monaural signal The sound of each musical instrument is localized by applying various filters to the sound of each musical instrument. (2) A transfer circuit (all-pass filter) is applied to a monaural signal to give a sense of expansion to the reproduced sound field. (3) Reverberation and reverberation are added to the monaural signal so that a stereophonic expansive feeling can be felt. (4) The above (1) to the monaural signal
It is possible to satisfactorily solve all the problems as described above in the method of converting a monophonic signal into a stereophonic signal, which is typified by applying the means of (3) in combination.

【図面の簡単な説明】[Brief description of drawings]

第1図は本発明のモノフォニック信号のステレオフォニ
ック信号化のための信号処理方法のブロック図、第2図
乃至第7図は本発明のモノフォニック信号のステレオニ
ック信号化のための信号処理方法の構成原理及び動作原
理を説明するための図である。 1……演奏者Bが曲目αの音楽を演奏して得たモノラル
信号の信号源、2……演奏者Aが曲目αの音楽を演奏し
て得たステレオ信号の信号源、3,4……アナログ・デジ
タル変換器、5……デジタル信号に変換されたモノラル
信号M(jω,t)の波形データのメモリ、6……デジタ
ル信号に変換されたステレオ信号の左右のチャンネル信
号L(jω,t),R(jω,t)の波形データとしてメモ
リ、7……エンベロープの計算回路、8……モノラル信
号M(jω,t)のエンベロープデータの記憶装置として
用いられるメモリ、9……時間軸整合の計算回路、10…
…ステレオ信号の和信号(jω,t)の計算回路、11……
和信号W(jω,t)の波形データのメモリ、12……エン
ベロープの計算回路、13……ステレオ信号の和信号W
(jω,t)のエンベロープデータの記憶装置として用い
られているメモリ、14……時変伝達関数F(jω,t)の
計算回路、15……時変伝達関数F(jω,t)のメモリ、
16……時間軸整合(非線形)関数のデータのメモリ、17
……時間軸整合の処理回路、18……時間軸補正が行われ
た状態の時変伝達関数F′(jω,t)のメモリ、19……
デジタル・フィルタ処理回路、20……マトリクス計算回
路、21……擬似差信号G(jω,t)の波形データのメモ
リ、22……擬似ステレオ信号のメモリ、23……デジタル
・アナログ変換器、
FIG. 1 is a block diagram of a signal processing method for converting a monophonic signal into a stereophonic signal according to the present invention, and FIGS. 2 to 7 are configurations of a signal processing method for converting a monophonic signal into a stereophonic signal according to the present invention. It is a figure for demonstrating a principle and an operation principle. 1 ... Signal source of monaural signal obtained by performer B playing music of song α, 2 ... Source of stereo signal obtained by performer A playing music of song α, 3, 4 ... ... analog / digital converter, 5 ... memory of waveform data of monaural signal M (jω, t) converted to digital signal, 6 ... left and right channel signals L (jω, of stereo signal converted to digital signal t), R (jω, t) waveform data, memory, 7 ... Envelope calculation circuit, 8 ... Memory used as monaural signal M (jω, t) envelope data storage device, 9 ... Time axis Matching calculation circuit, 10 ...
… Calculation circuit for sum signal (jω, t) of stereo signals, 11 ……
Memory for waveform data of sum signal W (jω, t), 12 ... Envelope calculation circuit, 13 ... Sum signal W of stereo signal
Memory used as a storage device for envelope data of (jω, t), 14 ... Calculation circuit for time-varying transfer function F (jω, t), 15 ... Memory for time-varying transfer function F (jω, t) ,
16 ... Memory of time axis matching (non-linear) function data, 17
...... Processing circuit for time-axis matching, 18 ... Memory of time-varying transfer function F '(jω, t) with time-axis correction performed, 19 ...
Digital filter processing circuit, 20 ... Matrix calculation circuit, 21 ... Memory for waveform data of pseudo difference signal G (jω, t), 22 ... Memory for pseudo stereo signal, 23 ... Digital / analog converter,

Claims (1)

【特許請求の範囲】[Claims] 【請求項1】デジタル信号処理技術を適用してモノフォ
ニック信号をステレオフォニック信号化する信号処理方
法であって、ステレオフォニック信号化の対象にされて
いるモノフォニック信号と、同一内容の曲目の2チャン
ネルによるステレオフォニック信号の右チャンネル信号
と左チャンネル信号とによって形成される和信号と差信
号とにおける差信号を和信号で除して時変伝達関数を得
る手段と、ステレオフォニック信号化の対象にされてい
るモノフォニック信号に対して前記した時変伝達関数と
同期させるように、ステレオフォニック信号の和信号と
ステレオフォニック信号化の対象にされているモノフォ
ニック信号との、それぞれのエンベロープの対比を行な
うことにより、ステレオフォニック信号の和親号とステ
レオフォニック信号化の対象にされているモノフォニッ
ク信号の時間軸の同期関係を示す非線形関数を導出し、
前記の非線形関数に基づいて前記した時変伝達関数の時
間軸を変更し、ステレオフォニック信号化の対象にされ
ているモノフォニック信号に対して同期関係にある新た
な時変伝達関数を得る手段と、ステレオフォニック信号
化の対象にされているモノフォニック信号に対して、前
記した新たな時変伝達関数を適用して擬似差信号を得る
手段と、ステレオフォニック信号化の対象にされている
モノフォニック信号と、前記した擬似差信号からステレ
オフォニック信号を復原する演算を施す手段とからなる
モノフォニック信号のステレオフォニック信号化のため
の信号処理方法
1. A signal processing method for converting a monophonic signal into a stereophonic signal by applying a digital signal processing technique, which comprises a monophonic signal targeted for stereophonic signal conversion and two channels of the same music. A means for obtaining a time-varying transfer function by dividing the difference signal in the sum signal and the difference signal formed by the right channel signal and the left channel signal of the stereophonic signal by the sum signal, and being a subject of stereophonic signal conversion. By synchronizing the respective signals of the sum signal of the stereophonic signals and the monophonic signal which is the target of the stereophonic signal conversion so as to synchronize with the above-mentioned time-varying transfer function with respect to the monophonic signal, Stereophonic signal's Japanese parent and stereophonic signal Deriving a non-linear function representing the synchronization relationship between the time axis of the monophonic signal is subject to reduction,
A means for changing the time axis of the time-varying transfer function based on the non-linear function to obtain a new time-varying transfer function in a synchronous relationship with a monophonic signal that is a target of stereophonic signal conversion, For a monophonic signal that is the subject of stereophonic signalization, means for obtaining a pseudo difference signal by applying the new time-varying transfer function described above, and a monophonic signal that is the subject of stereophonic signalization, A signal processing method for converting a monophonic signal into a stereophonic signal, which comprises means for performing an operation of restoring the stereophonic signal from the pseudo difference signal.
JP63065471A 1988-03-18 1988-03-18 Signal processing method for converting stereophonic signal from monophonic signal Expired - Lifetime JPH0775438B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP63065471A JPH0775438B2 (en) 1988-03-18 1988-03-18 Signal processing method for converting stereophonic signal from monophonic signal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP63065471A JPH0775438B2 (en) 1988-03-18 1988-03-18 Signal processing method for converting stereophonic signal from monophonic signal

Publications (2)

Publication Number Publication Date
JPH01238400A JPH01238400A (en) 1989-09-22
JPH0775438B2 true JPH0775438B2 (en) 1995-08-09

Family

ID=13288060

Family Applications (1)

Application Number Title Priority Date Filing Date
JP63065471A Expired - Lifetime JPH0775438B2 (en) 1988-03-18 1988-03-18 Signal processing method for converting stereophonic signal from monophonic signal

Country Status (1)

Country Link
JP (1) JPH0775438B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101263740A (en) * 2005-09-13 2008-09-10 皇家飞利浦电子股份有限公司 Method and equipment for generating 3D sound

Also Published As

Publication number Publication date
JPH01238400A (en) 1989-09-22

Similar Documents

Publication Publication Date Title
KR100739723B1 (en) Method and apparatus for audio reproduction supporting audio thumbnail function
US7773755B2 (en) Reproduction apparatus and reproduction system
JP2001125578A (en) Method and device for reproducing sound field
JP5611970B2 (en) Converter and method for converting audio signals
JPH04150200A (en) Sound field controller
JPS582519B2 (en) How do you know what to do?
US1765735A (en) Recording and reproducing system
JP5338053B2 (en) Wavefront synthesis signal conversion apparatus and wavefront synthesis signal conversion method
US20050047619A1 (en) Apparatus, method, and program for creating all-around acoustic field
US6925426B1 (en) Process for high fidelity sound recording and reproduction of musical sound
JPH04306100A (en) Compact disk for sound field reproduction and sound field controller
JPH0775438B2 (en) Signal processing method for converting stereophonic signal from monophonic signal
CN111405456B (en) Gridding 3D sound field sampling method and system
JPS61184594A (en) Musical sound source unit
KR200447608Y1 (en) Superior sound multi-channel audio system for karaoke using dsp
JP2991452B2 (en) Sound signal reproduction device
JPS59138200A (en) Reproducing system of car-mounted audio equipment
JP5743003B2 (en) Wavefront synthesis signal conversion apparatus and wavefront synthesis signal conversion method
JP5590169B2 (en) Wavefront synthesis signal conversion apparatus and wavefront synthesis signal conversion method
US5539833A (en) Audio signal amplifier device
US20230370797A1 (en) Sound reproduction with multiple order hrtf between left and right ears
JP2966176B2 (en) Sound field signal reproduction device
JPH0621097U (en) Sound source compatible playback device
JP3599831B2 (en) Pseudo-stereo device
JP3540435B2 (en) Pseudo stereo conversion method and apparatus