JPH08336199A - Sound signal processor - Google Patents

Sound signal processor

Info

Publication number
JPH08336199A
JPH08336199A JP7161583A JP16158395A JPH08336199A JP H08336199 A JPH08336199 A JP H08336199A JP 7161583 A JP7161583 A JP 7161583A JP 16158395 A JP16158395 A JP 16158395A JP H08336199 A JPH08336199 A JP H08336199A
Authority
JP
Japan
Prior art keywords
surround
pair
signal processing
processing device
sound
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP7161583A
Other languages
Japanese (ja)
Other versions
JP2953347B2 (en
Inventor
Toshiyuki Iida
敏之 飯田
Tomohiro Mori
智博 毛利
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Victor Company of Japan Ltd
Original Assignee
Victor Company of Japan Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Victor Company of Japan Ltd filed Critical Victor Company of Japan Ltd
Priority to JP7161583A priority Critical patent/JP2953347B2/en
Priority to EP96100990A priority patent/EP0724378B1/en
Priority to DE69635466T priority patent/DE69635466T2/en
Priority to US08/590,497 priority patent/US5844993A/en
Publication of JPH08336199A publication Critical patent/JPH08336199A/en
Application granted granted Critical
Publication of JP2953347B2 publication Critical patent/JP2953347B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Reverberation, Karaoke And Other Acoustics (AREA)
  • Stereophonic System (AREA)

Abstract

PURPOSE: To improve an acoustic effect by arranging an adjusting means making the sound signals reproduced from a pair of speakers have an amplitude difference in a circuit making the sound signals have uncorrelation with each other and making the signals into pseudo stereo. CONSTITUTION: This device is provided with a means making a pair of sound signals have an amplitude difference. As the means, an amplifier 4a is provided at the front stage of a circuit 11 on the side of the input in a first filter 23 and an amplifier 4b, is provided on the side of the input in a second filter 24. In order to differentiate the amplitude adjusting ratio of the both amplifiers 4a and 4b, the input of the first filter 23 is properly adjusted. Thus, an effect preventing unnatural localization feeling can be prevented without losing spread feeling at the time of a sound reproduction.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【産業上の利用分野】本発明は、ドルビーサラウンドあ
るいはハイビジョンの音響再生における前方3ch、後
方1chの3−1方式等の後方サラウンド信号が一系統
しかないモノラル音である場合に、特に、その後方音を
音像定位によって実現する際に頭内定位を防ぐべく自然
な音を提供するためのサラウンド信号処理装置に関す
る。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention is particularly applicable to a case where a rear surround signal such as a front 3ch and rear 1ch 3-1 system in sound reproduction of Dolby surround or high definition is a monaural sound having only one system, The present invention relates to a surround signal processing device for providing a natural sound so as to prevent in-head localization when realizing sound by sound image localization.

【0002】[0002]

【従来の技術】近年、オーディオ・ビジュアル分野で
は、マルチチャンネルステレオの技術が普及してきてお
り、音像を意図的に受聴者の側方又は後方へと制御する
方向を変化して音場制御する方式がある。しかし、一般
家庭では、スピーカを4つあるいは5つ必要とし、あま
り普及していない。そこで、この後方のスピーカを必要
とした音源を音像定位によって前方の2つのスピーカか
ら再生することにより、一般的なステレオの2スピーカ
によってマルチチャンネルステレオと同等な効果を得る
音場制御として、ドルビーサラウンドやハイビジョンの
3−1方式などの再生方式が知られている。
2. Description of the Related Art In recent years, a multi-channel stereo technique has become widespread in the audiovisual field, and a method of intentionally changing the direction of controlling the sound image to the side or the rear of the listener and controlling the sound field. There is. However, general households require four or five speakers and are not widely used. Therefore, by reproducing a sound source that requires a rear speaker from two front speakers by sound image localization, sound field control that obtains an effect equivalent to that of multi-channel stereo by two speakers of a general stereo is used as Dolby Surround. Playback systems such as the HDTV 3-1 system and the like are known.

【0003】[0003]

【発明が解決しようとする課題】しかし、ドルビーサラ
ウンドやハイビジョンの3−1方式などの再生方式で
は、リアの信号がモノラル1系統であり、そのまま電気
的に左右の位置に定位させるとサラウンド音が頭内定位
してしまう。また、通常の5スピーカ再生でもリア2ス
ピーカに対して左右対称な位置に定位させる場合、頭内
定位してしまうことが多い。そこで、この頭内定位を防
止するため、例えば特開平5−207597号公報のよ
うに、音像定位すべきリアのモノラル音を左右で異なる
信号とすべく、反射音の付加あるいは遅延時間を変える
などの手段を取ってきた。しかし、その場合、音像がど
ちらか一方に偏る場合があり、良好な効果が得られな
い。また、この問題を解決するため、本発明者等は既に
特願平6−197356号で、音像定位信号を左右で逆
位相再生とし、自然な音像でしかも音像感が得られる方
法を提案した。ところが、この場合でも逆相感が残り、
また、音質的にも不自然となり、良好な効果が得られな
かった。
However, in a reproduction system such as Dolby Surround or HDTV 3-1 system, the rear signal is one monaural system, and if the sound is electrically localized to the left and right positions, the surround sound is produced. Intracranial localization occurs. In addition, even when normal 5 speaker reproduction is performed, when localization is performed at a position symmetrical with respect to the rear 2 speakers, in-head localization is often performed. Therefore, in order to prevent this in-head localization, for example, as in Japanese Patent Laid-Open No. 5-207597, addition of reflected sound or changing of delay time is performed so that rear monaural sound to be sound-localized becomes different signals for left and right. I took the means of. However, in that case, the sound image may be biased to one side, and a good effect cannot be obtained. Further, in order to solve this problem, the present inventors have already proposed in Japanese Patent Application No. 6-197356 a method in which the sound image localization signal is reproduced in opposite phase on the left and right sides to obtain a natural sound image and a sound image feeling. However, even in this case, the opposite sense remains,
In addition, the sound quality was unnatural, and a good effect was not obtained.

【0004】そこで、本発明は、これらの問題点に鑑み
てなされたもので、リアサラウンド信号が一系統のモノ
ラル信号である場合に、受聴者後方の左右対称な位置に
音像定位処理によって虚音像を再現する際、頭内定位を
防止するために疑似ステレオ処理した場合の音響効果を
高めて自然で広がり感が向上したサラウンド空間を創出
できるサラウンド信号処理装置を得ることを目的とす
る。
Therefore, the present invention has been made in view of these problems. When the rear surround signal is a monophonic signal of one system, a virtual sound image is placed at a symmetrical position behind the listener by a sound image localization process. It is an object of the present invention to obtain a surround signal processing device capable of creating a surround space in which a natural and expansive feeling is enhanced by enhancing a sound effect when pseudo stereo processing is performed in order to prevent in-head localization when reproducing.

【0005】[0005]

【課題を解決するための手段及び作用】上記目的を達成
するために、本発明に係るサラウンド信号処理装置は、
リア用モノラルサラウンド信号の入力に基づいて受聴者
に対して略左右対称な前方位置に配置した一対のスピー
カからサラウンド音を再生するようにしたサラウンド信
号処理装置において、一対のスピーカから再生される左
右一対のサラウンド信号を互いに非相関性を持たせて疑
似ステレオ化する疑似ステレオ回路に、一対のリア用サ
ラウンド信号に振幅差を持たせる振幅調整手段を備える
ことにより、リアサラウンド信号が一系統のモノラル信
号である場合に、受聴者後方の左右対称な位置に虚音像
を再現する際、頭内定位を防止するために疑似ステレオ
処理に際して一対のリア用サラウンド信号の振幅を操作
することで逆位相感を和らげることができ、音響効果を
高めて自然で広がり感が向上したサラウンド空間を創出
できる。
In order to achieve the above object, a surround signal processing device according to the present invention comprises:
In a surround signal processing device configured to reproduce a surround sound from a pair of speakers arranged in a substantially symmetrical front position based on an input of a rear monaural surround signal, the left and right reproduced from the pair of speakers. A pseudo stereo circuit that makes a pair of surround signals pseudo-stereo by making them uncorrelated to each other is provided with an amplitude adjusting means for giving an amplitude difference to a pair of rear surround signals, so that the rear surround signal is a monophonic system. When a signal is a signal, when a virtual sound image is reproduced in a symmetrical position behind the listener, a pair of rear surround signals are manipulated during pseudo-stereo processing to prevent in-head localization and antiphase sense It is possible to create a surround space that enhances the sound effect and enhances the natural and expansive feeling.

【0006】また、上記振幅調整手段は、一対のリア用
サラウンド信号をそれぞれ振幅調整する一対の振幅調整
手段を有し、それら振幅調整率を異ならせることによ
り、一対のリア用サラウンド信号にレベル差を設けて効
果的な広がりのある音場を再現する。
Further, the amplitude adjusting means has a pair of amplitude adjusting means for adjusting the amplitude of each of the pair of rear surround signals, and the level difference between the pair of rear surround signals is changed by making the amplitude adjustment rates different. To reproduce an effective sound field.

【0007】また、上記疑似ステレオ回路に、一対のリ
ア用サラウンド信号に時間差を持たせる遅延手段を備
え、この遅延手段により非相関性を持たせて疑似ステレ
オ化した一対のリア用サラウンド信号を得ると共に、そ
の遅延時間を可変設定可能にすることにより、振幅と共
に遅延時間を自由に設定して効果的な広がりのある音場
を再現する。
Further, the pseudo stereo circuit is provided with a delay means for providing a time difference between the pair of rear surround signals, and the delay means provides decorrelation to obtain a pair of rear surround signals for pseudo stereo. At the same time, the delay time can be variably set, so that the delay time can be freely set together with the amplitude to reproduce an effective wide sound field.

【0008】また、上記遅延手段は、一対のリア用サラ
ウンド信号をそれぞれ遅延させる一対の遅延手段を有
し、それら遅延時間を異ならせることにより、一対のリ
ア用サラウンド信号の振幅と共に遅延時間をそれぞれ自
由に設定して最も効果の大きい値を選定し、虚音像を明
確にし様々な音場を演出することができる。
Further, the delay means has a pair of delay means for respectively delaying the pair of rear surround signals, and by making the delay times different, the delay time is respectively increased together with the amplitude of the pair of rear surround signals. It is possible to freely set and select the most effective value to clarify the virtual sound image and produce various sound fields.

【0009】また、上記疑似ステレオ回路から出力され
る疑似ステレオ化された一対のリア用サラウンド信号の
入力に基づいて受聴者に対して略左右対称な前方位置に
配置した一対のスピーカから再生される左右一対のサラ
ウンド信号を受聴者に対して略左右対称な後方位置に音
像を定位させる音像定位回路をさらに備えることによ
り、後方音について後方左右対称な位置に虚音像を定位
させることができ、自然で広がり感が向上したサラウン
ド空間を創出できる。
Further, based on the input of a pair of rear surround signals for pseudo stereo output from the above pseudo stereo circuit, reproduction is performed from a pair of speakers arranged at a front position substantially symmetrical to the listener. By further providing a sound image localization circuit that localizes a pair of left and right surround signals to a rear position that is substantially symmetrical to the listener, a virtual sound image can be localized to a rear symmetrical position for the rear sound. It is possible to create a surround space with an increased sense of spaciousness.

【0010】さらに、遅延時間の異なる複数のリア用サ
ラウンド信号を振幅調整して加算することにより疑似ス
テレオ化する一対のリア用サラウンド信号に反射音を付
加する反射音付加回路をさらに備えることにより、虚音
像に距離感を与えることができ、ホールや映画館のよう
な臨場感を得ることができると共に、様々な音響空間上
での音場再生が極めて良好に再現できる。
Further, by further providing a reflected sound adding circuit for adding a reflected sound to a pair of rear surround signals which are pseudo-stereo-converted by adjusting the amplitudes of a plurality of rear surround signals having different delay times and adding them, It is possible to give a sense of distance to the virtual sound image, to obtain a realistic sensation such as in a hall or a movie theater, and to reproduce the sound field in various acoustic spaces very well.

【0011】[0011]

【実施例】図1は既に本発明者等が特願平7−2866
5号にて提案した本発明の前提となるサラウンド信号処
理装置の構成を説明するためのもので、リアモノラル音
を疑似ステレオ化し定位処理する回路のブロック図であ
る。すなわち、図1に示すサラウンド信号処理装置は、
リア用モノサラウンド信号Sの入力に基づいて受聴者に
対して略左右対称な前方位置に配置した一対のスピーカ
3L、3Rからサラウンド音を再生するようにしたもの
で、前記一対のサラウンド信号に互いに非相関性を持た
せるべく信号処理するのに、リア用サラウンド信号Sの
遅延信号とその遅延前の信号との和信号及び差信号を生
成する櫛形フィルタを有する疑似ステレオ回路1と、こ
の疑似ステレオ回路1により出力された互いに非相関性
を持たせた一対のサラウンド音を受聴者に対して略左右
対称な後方位置に音像を定位させる音像定位回路2とを
備えている。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS FIG. 1 shows that the present inventors have already filed Japanese Patent Application No. 7-2866.
FIG. 5 is a block diagram of a circuit for demonstrating the configuration of a surround signal processing device which is a premise of the present invention proposed in No. 5, and which is a circuit for converting a rear monaural sound into pseudo stereo and performing localization processing. That is, the surround signal processing device shown in FIG.
Surround sound is reproduced from a pair of speakers 3L, 3R arranged at a front position that is substantially symmetrical to the listener based on the input of the rear mono surround signal S. A pseudo stereo circuit 1 having a comb-shaped filter for generating a sum signal and a difference signal between a delayed signal of the rear surround signal S and a signal before the delay for signal processing to have decorrelation, and the pseudo stereo circuit. A sound image localization circuit 2 is provided for locating a pair of surround sounds output from the circuit 1 and having a non-correlation with each other at a rear position substantially symmetrical to the listener.

【0012】ここで、前記疑似ステレオ回路1は、サラ
ウンド信号Sに遅延量を与えて遅延信号S’として出力
する遅延回路11と、元のサラウンド信号Sと遅延信号
S’とを加算した和信号S+S’を出力する加算器12
と、元のサラウンド信号Sに遅延信号S’を減算した差
信号S−S’を出力する加算器13とを備えている。
Here, the pseudo stereo circuit 1 adds a delay amount to the surround signal S and outputs it as a delay signal S ', and a sum signal obtained by adding the original surround signal S and the delay signal S'. Adder 12 that outputs S + S '
And an adder 13 that outputs a difference signal SS ′ obtained by subtracting the delay signal S ′ from the original surround signal S.

【0013】また、前記音像定位回路2は、前記疑似ス
テレオ回路1からの一対のサラウンド信号として出力さ
れる和信号と差信号との加算出力を得る加算器21と、
その和信号と差信号との減算出力を得る加算器22と、
前記加算器21の出力を入力してコンボルバなどの畳み
込み演算処理する第1のフィルタ23と、前記差分器2
2の出力を入力してコンボルバなどの畳み込み演算処理
する第2のフィルタ24と、第1のフィルタ出力と第2
のフィルタ出力とを減算する差分器25と、第1のフィ
ルタ出力と第2のフィルタ出力とを加算する加算器26
とを備えている。
Further, the sound image localization circuit 2 includes an adder 21 for obtaining an addition output of a sum signal and a difference signal output as a pair of surround signals from the pseudo stereo circuit 1.
An adder 22 for obtaining a subtraction output of the sum signal and the difference signal,
A first filter 23 that inputs the output of the adder 21 and performs a convolution operation such as a convolver, and the differencer 2
The second filter 24 which inputs the output of 2 and performs convolution operation processing such as a convolver, the first filter output and the second filter 24.
Differentiator 25 for subtracting the filter output of the second filter and an adder 26 for adding the first filter output and the second filter output
It has and.

【0014】そして、前記第1及び第2のフィルタ2
3、24の伝達特性P、Nは、 P=(F+K)/(S+A) (1.1) N=(F−K)/(S−A) (1.2) (ただし、Sは一対のスピーカから受聴者の同じ側の耳
までの伝達特性、Aは一対のスピーカから受聴者び反対
側の耳までの伝達特性、Fはサラウンド信号を音像定位
させたい位置から受聴者の同じ側の耳までの伝達関数、
Kはサラウンド信号を音像定位させたい位置から受聴者
の反対側の耳までの伝達関数)に設定されており、伝達
関数の設定によって音像定位位置に幅をもたせてサラウ
ンド再生される範囲を設定できるようになされている。
Then, the first and second filters 2
The transfer characteristics P and N of Nos. 3 and 24 are P = (F + K) / (S + A) (1.1) N = (F−K) / (S−A) (1.2) (where S is a pair of Transfer characteristics from the speaker to the ear on the same side of the listener, A is the transfer characteristics from the pair of speakers to the ear on the opposite side of the listener, and F is the ear on the same side of the listener from the position where the surround signal is desired to be localized. Transfer function up to,
K is set to the transfer function from the position where the surround signal is desired to be localized to the ear on the opposite side of the listener), and by setting the transfer function, the range for surround reproduction can be set with a width at the localization position of the sound image. It is done like this.

【0015】前述の構成を備えたサラウンド信号処理装
置においては、音場制御の際、後方左右のサラウンド音
に対し互いに無相関ないしは相関性を弱めることがで
き、極めて良好なサラウンド音場が得られ、特に、自然
で広がり感が向上したサラウンド空間を創出でき、後方
音について後方左右対称な位置に虚音像を定位させるこ
とができると共に、極めてシンプルな構成で、後方での
音場の表現や音像の移動が明確になり、十分なサラウン
ド効果が得られるものである。
In the surround signal processing device having the above-mentioned configuration, when controlling the sound field, it is possible to weaken the decorrelation or the correlation with the rear left and right surround sounds, so that an extremely good surround sound field can be obtained. , In particular, it is possible to create a surround space with a natural and expanded feeling, and it is possible to localize a virtual sound image in a position symmetrical to the rear with respect to the rear sound, and with a very simple configuration, the representation of the sound field in the rear and the sound image. The movement of is clear, and a sufficient surround effect can be obtained.

【0016】すなわち、図1に示す構成においては、入
力のサラウンド音Sは一系統のモノラル信号であるた
め、この入力信号Sを非相関化すべく櫛形フィルタでな
る疑似ステレオ処理回路1を通し、一方は遅延回路11
により遅延した信号S’との加算出力を加算器12によ
って得ると共に、もう一方は加算器13によって遅延し
た信号S’との減算出力を得て、既に本発明者等が提案
した特願平6−197356号の音像定位回路にそれぞ
れ虚音像の音源信号入力とすることによって、図2に示
すように、後方音について受聴者の後方左右対称な位置
にS+S’とS−S’の虚音像をそれぞれ定位させるこ
とができる。
That is, in the configuration shown in FIG. 1, since the input surround sound S is a monophonic signal of one system, the input surround signal S is passed through the pseudo-stereo processing circuit 1 which is a comb filter in order to decorrelate the input signal S. Is the delay circuit 11
Of the signal S'delayed by the adder 12 is obtained by the adder 12, and the other output is obtained by the adder 13 of the subtraction output of the signal S'delayed. By inputting the sound source signal of the virtual sound image to each of the sound image localization circuits of No. 197356, as shown in FIG. 2, the virtual sound images of S + S 'and S-S' are placed at the positions symmetrical to the rear of the listener for the rear sound. Each can be localized.

【0017】ところで、図1に示す構成を式の上で示す
と、第1と第2のフィルタ23、24への入力Pin、N
inは次式で示すことができる。 Pin=(S+S’)+(S−S’)=2S (2.1) Nin=(S+S’)−(S−S’)=2S’ (2.2) つまり、第1のフィルタ23への入力Pinはサラウンド
信号Sをそのままの入力とし、第2のフィルタ24への
入力Ninは入力されるサラウンド信号Sを遅延した信号
S’を入力することで実現できる。これを図に示すと、
図3のように変形することができる。
By the way, when the configuration shown in FIG. 1 is expressed above, the inputs P in and N to the first and second filters 23 and 24 are shown.
in can be expressed by the following equation. P in = (S + S ′) + (S−S ′) = 2S (2.1) N in = (S + S ′) − (S−S ′) = 2S ′ (2.2) That is, the first filter 23. The input P in is input to the surround signal S as it is, and the input N in to the second filter 24 is input to a signal S ′ obtained by delaying the input surround signal S. This is shown in the figure,
It can be modified as shown in FIG.

【0018】さらに、図1に示す構成において、遅延回
路11を経て遅延した信号S’を加算する際の加算器1
2、13に対する遅延信号S’の正負の関係を変えても
よく、遅延信号S’の符号を変えた場合には、第1と第
2のフィルタ23、24への入力Pin、Ninは Pin=(S−S’)+(S+S’)=2S (3.1) Nin=(S−S’)−(S+S’)=−2S’ (3.2) となり、また、同様に、音像定位回路2内の加算器21
と22への入力の符号を変えた場合には、 Pin=(S+S’)−(S−S’)=2S (4.1) Nin=(S+S’)+(S−S’)=2S (4.2) と変形することができる。これは、第1のフィルタ23
に遅延した信号S’を入力し、第2のフィルタ24には
サラウンド信号Sをそのまま入力すればよいことにな
る。
Further, in the configuration shown in FIG. 1, the adder 1 for adding the signal S'delayed through the delay circuit 11 is added.
The positive / negative relationship of the delayed signal S ′ with respect to 2 and 13 may be changed, and when the sign of the delayed signal S ′ is changed, the inputs P in and N in to the first and second filters 23 and 24 are P in = (S−S ′) + (S + S ′) = 2S (3.1) N in = (S−S ′) − (S + S ′) = − 2S ′ (3.2), and similarly. , The adder 21 in the sound image localization circuit 2
And when the sign of the input to 22 is changed, P in = (S + S ′) − (S−S ′) = 2S (4.1) N in = (S + S ′) + (S−S ′) = It can be transformed to 2S (4.2). This is the first filter 23
The delayed signal S ′ is input to the second filter 24, and the surround signal S is input to the second filter 24 as it is.

【0019】本発明では、前記の(4.1)、(4.
2)式で示す信号処理の際に、さらに、音場の広がり感
を増すために、第1と第2のフィルタ23と24に入力
する信号に振幅差を持たせるものである。この構成を図
4に示す。すなわち、図4は本発明に係るサラウンド信
号処理装置を示す構成図であり、一対のサラウンド信号
に振幅差を持たせる振幅調整手段として、第1のフィル
タ23への入力側には遅延回路11の前段に振幅調整用
増幅器4aを設けると共に、第2のフィルタ24の入力
側に振幅調整用増幅器4bを設け、振幅調整率を異なら
せて振幅差を持たせるもので、疑似ステレオ回路1内に
備えられる。
In the present invention, the above (4.1), (4.
In the signal processing shown by the equation (2), the signals input to the first and second filters 23 and 24 are given an amplitude difference in order to further increase the sense of sound field spread. This configuration is shown in FIG. That is, FIG. 4 is a block diagram showing a surround signal processing device according to the present invention. As the amplitude adjusting means for giving an amplitude difference to a pair of surround signals, the delay circuit 11 is provided on the input side to the first filter 23. The amplitude adjusting amplifier 4a is provided in the preceding stage, and the amplitude adjusting amplifier 4b is provided on the input side of the second filter 24 so that the amplitude adjusting rate is made different to provide the amplitude difference, which is provided in the pseudo stereo circuit 1. To be

【0020】図4において、もし、第1のフィルタ23
側の入力を0とした場合には、本発明者等が既に提案し
た特願平6−197356号の信号処理方法と等しくな
る。つまり、図2に示した虚音像の左右での定位関係
は、S’、−S’となり、遅延を考慮しなければ、虚音
を左右で逆位相に定位させたことに相当する。これは、
頭内定位を防ぎ、広がり感を得ることができるが、逆位
相感が残る。そこで、第1のフィルタ23側の入力を適
当に調整することによって広がり感を損なうことなく、
不自然な定位感を防ぐ効果を生む。
In FIG. 4, if the first filter 23
When the input on the side is set to 0, it becomes the same as the signal processing method of Japanese Patent Application No. 6-1973356 already proposed by the present inventors. That is, the localization relationship on the left and right of the virtual sound image shown in FIG. 2 is S ′, −S ′, which corresponds to the localization of the virtual sound in the opposite phase on the left and right unless delay is taken into consideration. this is,
It can prevent localization in the head and give a sense of spaciousness, but a sense of antiphase remains. Therefore, by appropriately adjusting the input on the side of the first filter 23, without impairing the feeling of spaciousness,
It produces the effect of preventing unnatural localization.

【0021】本実施例では、一対のリア用サラウンド信
号に時間差を持たせることにより非相関性を持たせて疑
似ステレオ化した一対のリア用サラウンド信号を得る遅
延手段としての遅延回路11による遅延量は例えば5m
sとすると共に、振幅調整用増幅器4aと4bの振幅調
整率を異ならせることにより、音像定位回路2の第1の
フィルタ23と第2のフィルタ24への入力レベル差
は、第2のフィルタ24に対して第1のフィルタ23側
の入力を2dB低い値とした。このため、第2のフィル
タ24側の入力は先行音効果に加えレベル差もあるた
め、効果的な広がりのある音場を再現することができる
ことになる。なお、図4の構成では、遅延回路11は、
第1のフィルタ23側に設けられた場合を示したが、第
2のフィルタ24側にのみ設けた場合であってもよい。
In the present embodiment, the delay amount by the delay circuit 11 as a delay means for obtaining a pair of rear surround signals pseudo-stereo-ized by giving a time difference to the pair of rear surround signals to give the decorrelation. Is 5m
s and the amplitude adjustment ratios of the amplitude adjusting amplifiers 4a and 4b are made different, the difference in the input levels to the first filter 23 and the second filter 24 of the sound image localization circuit 2 becomes equal to the second filter 24. On the other hand, the input on the side of the first filter 23 is set to a value lower by 2 dB. Therefore, since the input on the second filter 24 side has a level difference in addition to the preceding sound effect, it is possible to effectively reproduce a sound field having a spread. In the configuration of FIG. 4, the delay circuit 11 is
Although the case where it is provided on the first filter 23 side is shown, it may be provided only on the second filter 24 side.

【0022】さらに、上述した図4に示す構成例を発展
させて、遅延回路として遅延回路11aと11bを第1
と第2のフィルタ23と24のそれぞれの入力段に対し
て設けたものを図5に示す。このような構成をとること
によって、第1と第2のフィルタ23と24の遅延時間
の関係を自由に可変設定でき、また、振幅も自由に変え
られるため、最も効果の大きい振幅、遅延効果をとるこ
とができる。例えばリスニングルームの環境に応じて、
各フィルタ23と24への入力レベルを変えればよく、
デッドな部屋では、第1のフィルタ23側入力を適度に
加えて逆相関を和らげたり、ライブな部屋では、第1の
フィルタ23側の入力を絞って虚音像を明確にするな
ど、様々に音場を演出することが可能になる。
Further, by developing the configuration example shown in FIG. 4 described above, delay circuits 11a and 11b are first provided as delay circuits.
FIG. 5 shows what is provided for each input stage of the second filters 23 and 24. With such a configuration, the relationship between the delay times of the first and second filters 23 and 24 can be freely variably set, and the amplitude can be freely changed, so that the most effective amplitude and delay effect can be obtained. Can be taken. For example, depending on the environment of the listening room,
It is only necessary to change the input level to each filter 23 and 24,
In a dead room, the input of the first filter 23 side is appropriately added to soften the anti-correlation. In a live room, the input of the first filter 23 side is narrowed down to clarify the virtual sound image. It is possible to produce a place.

【0023】また、DSP(デジタルシグナルプロセッ
サ)で実際の信号処理を行う場合には、サラウンド音は
一系統しか存在しないため、遅延線は一つで良く効率も
よい。さらに、この遅延線から遅延時間の異なる信号を
適宜取り出すことによって反射音を付加することがで
き、虚音像に距離感を得ることができ、ホールや映画館
で受聴するような臨場感が得られる。この構成を図6に
示す。
When a DSP (digital signal processor) actually performs signal processing, since only one surround sound system exists, one delay line is sufficient and efficiency is high. Further, by appropriately extracting signals having different delay times from this delay line, reflected sound can be added, a sense of distance can be obtained in the virtual sound image, and a realistic sensation as heard in a hall or movie theater can be obtained. . This configuration is shown in FIG.

【0024】すなわち、図6は遅延時間の異なる複数の
リア用サラウンド信号を振幅調整して加算することによ
り疑似ステレオ化する一対のリア用サラウンド信号に反
射音を付加する反射音付加回路5を用いて音場を拡大す
ることを可能にしたサラウンド信号処理装置を示す構成
図である。この反射音付加回路5は、遅延手段としての
遅延線11cから遅延時間の異なる複数のリア用サラウ
ンド信号Sを取り出して、振幅調整用増幅器51により
適当に振幅調整し加算器52によって加算することによ
り、疑似ステレオ化する一対のリア用サラウンド信号に
反射音を付加することができ、ドームのような大きな空
間での受聴から小さい空間であるミニシアターまでの様
々な音響空間上での音場再生が極めて良好に再現でき
る。なお、各図に示される第1と第2のフィルタ23と
24はFIRフィルタで行い、頭部伝達特性の周波数位
相特性を完全にシュミレートできる構成とした。
That is, FIG. 6 uses a reflected sound adding circuit 5 for adding a reflected sound to a pair of rear surround signals which are pseudo-stereo-ized by adjusting the amplitudes of a plurality of rear surround signals having different delay times and adding them. It is a block diagram which shows the surround signal processing apparatus which enabled it to expand the sound field. The reflected sound adding circuit 5 extracts a plurality of rear surround signals S having different delay times from the delay line 11c as a delay unit, appropriately adjusts the amplitude by the amplitude adjusting amplifier 51, and adds them by the adder 52. , It is possible to add a reflected sound to a pair of rear surround signals that are made into pseudo-stereo, and it is possible to reproduce a sound field in various acoustic spaces from listening in a large space such as a dome to a mini theater which is a small space. It can be reproduced very well. The first and second filters 23 and 24 shown in each figure are FIR filters, and the frequency phase characteristics of the head-related transfer characteristics can be completely simulated.

【0025】[0025]

【発明の効果】以上のように、本発明によれば、リア用
モノラルサラウンド信号の入力に基づいて受聴者に対し
て略左右対称な前方位置に配置した一対のスピーカから
サラウンド音を再生するようにしたサラウンド信号処理
装置において、前記一対のスピーカから再生される左右
一対のサラウンド信号を互いに非相関性を持たせて疑似
ステレオ化する疑似ステレオ回路に、一対のリア用サラ
ウンド信号に振幅差を持たせる振幅調整手段を備えるこ
とにより、リアサラウンド信号が一系統のモノラル信号
である場合に、受聴者後方の左右対称な位置に虚音像を
再現する際、頭内定位を防止するために疑似ステレオ処
理に際して一対のリア用サラウンド信号の振幅を操作す
ることで逆位相感を和らげることができ、音響効果を高
めて自然で広がり感が向上したサラウンド空間を創出で
きるという効果がある。
As described above, according to the present invention, the surround sound is reproduced from the pair of loudspeakers arranged at the front position substantially symmetrical to the listener based on the input of the rear surround signal. In the surround signal processing device described above, the pair of left and right surround signals reproduced from the pair of speakers are pseudo-stereo-converted into a pseudo-stereo by making them uncorrelated to each other, and a pair of rear surround signals have an amplitude difference. When the rear surround signal is a monophonic signal of one system, a pseudo stereo process is performed to prevent in-head localization when reproducing a virtual sound image at a symmetrical position behind the listener when the rear surround signal is a monophonic signal. At that time, the sense of antiphase can be softened by manipulating the amplitude of a pair of rear surround signals, which enhances the acoustic effect and spreads naturally. But there is an effect that can create a surround space was improved.

【0026】また、前記振幅調整手段は、一対のリア用
サラウンド信号をそれぞれ振幅調整する一対の振幅調整
手段を有し、それら振幅調整率を異ならせることによ
り、一対のリア用サラウンド信号にレベル差を設けて効
果的な広がりのある音場を再現することができるという
効果がある。
The amplitude adjusting means has a pair of amplitude adjusting means for adjusting the amplitude of each of the pair of rear surround signals, and by making the amplitude adjusting rates different, the level difference between the pair of rear surround signals is increased. There is an effect that it is possible to reproduce an effective wide sound field by providing.

【0027】また、前記疑似ステレオ回路に、一対のリ
ア用サラウンド信号に時間差を持たせる遅延手段を備
え、この遅延手段により非相関性を持たせて疑似ステレ
オ化した一対のリア用サラウンド信号を得ると共に、そ
の遅延時間を可変設定可能にすることにより、振幅と共
に遅延時間を自由に設定して効果的な広がりのある音場
を再現することができるという効果がある。
Further, the pseudo stereo circuit is provided with a delay means for giving a time difference to the pair of rear surround signals, and the pair of rear surround signals pseudo-stereo are obtained by providing the decorrelation with the delay means. At the same time, by making the delay time variably set, there is an effect that the delay time can be freely set together with the amplitude, and an effective sound field with a spread can be reproduced.

【0028】また、前記遅延手段は、一対のリア用サラ
ウンド信号をそれぞれ遅延させる一対の遅延手段を有
し、それら遅延時間を異ならせることにより、一対のリ
ア用サラウンド信号の振幅と共に遅延時間をそれぞれ自
由に設定して最も効果の大きい値を選定し、虚音像を明
確にし様々な音場を演出することができるという効果が
ある。
Further, the delay means has a pair of delay means for delaying the pair of rear surround signals respectively, and by making the delay times different, the delay time and the amplitude of the pair of rear surround signals are respectively delayed. There is an effect that it is possible to freely set and select a value with the greatest effect to clarify the virtual sound image and produce various sound fields.

【0029】また、前記疑似ステレオ回路から出力され
る疑似ステレオ化された一対のリア用サラウンド信号の
入力に基づいて受聴者に対して略左右対称な前方位置に
配置した一対のスピーカから再生される左右一対のサラ
ウンド信号を受聴者に対して略左右対称な後方位置に音
像を定位させる音像定位回路をさらに備えることによ
り、後方音について後方左右対称な位置に虚音像を定位
させることができ、自然で広がり感が向上したサラウン
ド空間を創出できるという効果がある。
In addition, based on the input of a pair of pseudo-stereo-converted rear surround signals output from the pseudo-stereo circuit, reproduction is performed from a pair of speakers arranged at a front position substantially symmetrical to the listener. By further providing a sound image localization circuit that localizes a pair of left and right surround signals to a rear position that is substantially symmetrical to the listener, a virtual sound image can be localized to a rear symmetrical position for the rear sound. This has the effect of creating a surround space with an increased sense of spaciousness.

【0030】さらに、遅延時間の異なる複数のリア用サ
ラウンド信号を振幅調整して加算することにより疑似ス
テレオ化する一対のリア用サラウンド信号に反射音を付
加する反射音付加回路をさらに備えることにより、虚音
像に距離感を与えることができ、ホールや映画館のよう
な臨場感を得ることができると共に、様々な音響空間上
での音場再生が極めて良好に再現できるという効果があ
る。
Furthermore, by further providing a reflected sound adding circuit for adding a reflected sound to a pair of rear surround signals which are pseudo-stereo-converted by adjusting the amplitudes of a plurality of rear surround signals having different delay times and adding them, There is an effect that a virtual sound image can be given a sense of distance, a realistic sensation of a hall or a movie theater can be obtained, and sound field reproduction in various acoustic spaces can be reproduced extremely well.

【図面の簡単な説明】[Brief description of drawings]

【図1】本発明の前提技術となるもので、リアモノラル
音を疑似ステレオ化し定位処理するサラウンド信号処理
装置を示すブロック図である。
FIG. 1 is a block diagram showing a surround signal processing device which is a prerequisite technique of the present invention and which performs rearrangement processing of a rear monaural sound into pseudo-stereo.

【図2】受聴者前方の略左右対称位置に配置した一対の
スピーカからリアサラウンドの虚音像を定位させる場合
の定位位置を示す図である。
FIG. 2 is a diagram showing a localization position when a rear surround virtual sound image is localized from a pair of speakers arranged substantially symmetrically in front of a listener.

【図3】図1の構成を変形した場合の信号処理構成を示
したブロック図である。
3 is a block diagram showing a signal processing configuration when the configuration of FIG. 1 is modified.

【図4】本発明に係るサラウンド信号処理装置を示すも
ので、疑似ステレオ入力に振幅差を持たせたものを示す
ブロック図である。
FIG. 4 is a block diagram showing a surround signal processing device according to the present invention, in which a pseudo stereo input is provided with an amplitude difference.

【図5】本発明に係るサラウンド信号処理装置を示すも
ので、一対の疑似ステレオ入力にそれぞれ時間差を持た
せ任意の特性を得ることを特徴とする回路構成を示す図
である。
FIG. 5 is a diagram showing a surround signal processing device according to the present invention, and is a diagram showing a circuit configuration characterized in that a pair of pseudo stereo inputs are provided with respective time differences to obtain arbitrary characteristics.

【図6】本発明に係るサラウンド信号処理装置を示すも
ので、反射音付加回路を用いて音場を拡大することを可
能として音像定位処理をした回路構成を示す図である。
FIG. 6 is a diagram showing a surround signal processing device according to the present invention, and is a diagram showing a circuit configuration in which a sound image localization process is performed so that a sound field can be expanded by using a reflected sound adding circuit.

【符号の説明】[Explanation of symbols]

1 疑似ステレオ回路 2 音像定位回路 3L、3R 受聴者に対して略左右対称な前方位置に配
置した一対のスピーカ 11、11a、11b 遅延回路(遅延手段) 11c 遅延線(遅延手段) 4a、4b 振幅調整用増幅器(振幅調整手段) 5 反射音付加回路。
1 Pseudo Stereo Circuit 2 Sound Image Localization Circuit 3L, 3R A Pair of Speakers 11, 11a, 11b Arranged at Front Positions that are Approximately Left-Right Symmetrical to the Listener 11c Delay Line (Delay Means) 4a, 4b Amplitude Adjustment amplifier (amplitude adjusting means) 5 Reflection sound addition circuit.

Claims (6)

【特許請求の範囲】[Claims] 【請求項1】 リア用モノラルサラウンド信号の入力に
基づいて受聴者に対して略左右対称な前方位置に配置し
た一対のスピーカからサラウンド音を再生するようにし
たサラウンド信号処理装置において、前記一対のスピー
カから再生される左右一対のサラウンド信号を互いに非
相関性を持たせて疑似ステレオ化する疑似ステレオ回路
に、一対のリア用サラウンド信号に振幅差を持たせる振
幅調整手段を備えたことを特徴とするサラウンド信号処
理装置。
1. A surround signal processing device for reproducing surround sound from a pair of speakers arranged in a front position substantially symmetrical to a listener based on an input of a rear monaural surround signal. A pseudo stereo circuit that makes a pair of left and right surround signals reproduced from a speaker pseudo-stereo by making them non-correlated to each other is provided with amplitude adjusting means for giving an amplitude difference to a pair of rear surround signals. Surround signal processing device.
【請求項2】 請求項1記載のサラウンド信号処理装置
において、前記振幅調整手段は、一対のリア用サラウン
ド信号をそれぞれ振幅調整する一対の振幅調整手段を有
し、それら振幅調整率を異ならせることを特徴とするサ
ラウンド信号処理装置。
2. The surround signal processing device according to claim 1, wherein the amplitude adjusting means has a pair of amplitude adjusting means for adjusting the amplitude of each of the pair of rear surround signals, and the amplitude adjusting rates are made different. Surround signal processing device characterized by.
【請求項3】 請求項1又は2記載のサラウンド信号処
理装置において、前記疑似ステレオ回路に、一対のリア
用サラウンド信号に時間差を持たせる遅延手段を備え、
該遅延手段の遅延時間が可変設定可能なことを特徴とす
るサラウンド信号処理装置。
3. The surround signal processing device according to claim 1, wherein the pseudo stereo circuit is provided with a delay unit for providing a time difference between the pair of rear surround signals.
A surround signal processing device, wherein the delay time of the delay means can be variably set.
【請求項4】 請求項3記載のサラウンド信号処理装置
において、前記遅延手段は、一対のリア用サラウンド信
号をそれぞれ遅延させる一対の遅延手段を有し、それら
の遅延時間を異ならせることを特徴とするサラウンド信
号処理装置。
4. The surround signal processing device according to claim 3, wherein the delay means has a pair of delay means for respectively delaying the pair of rear surround signals, and makes the delay times different. Surround signal processing device.
【請求項5】 請求項1乃至4のいずれかに記載のサラ
ウンド信号処理装置において、前記疑似ステレオ回路か
ら出力される疑似ステレオ化された一対のリア用サラウ
ンド信号の入力に基づいて受聴者に対して略左右対称な
前方位置に配置した一対のスピーカから再生される左右
一対のサラウンド信号を受聴者に対して略左右対称な後
方位置に音像を定位させる音像定位回路をさらに備えた
ことを特徴とするサラウンド信号処理装置。
5. The surround signal processing device according to claim 1, wherein the listener receives a pair of rear surround signals that are pseudo-stereoized and output from the pseudo-stereo circuit. And a sound image localization circuit that localizes a pair of left and right surround signals reproduced from a pair of speakers arranged in a substantially symmetrical front position to a rear position that is substantially symmetrical to the listener. Surround signal processing device.
【請求項6】 請求項1乃至5のいずれかに記載のサラ
ウンド信号処理装置において、遅延時間の異なる複数の
リア用サラウンド信号を振幅調整して加算することによ
り疑似ステレオ化する一対のリア用サラウンド信号に反
射音を付加する反射音付加回路をさらに備えたことを特
徴とするサラウンド信号処理装置。
6. The surround signal processing device according to claim 1, wherein a pair of rear surrounds are pseudo-stereoized by amplitude-adjusting and adding a plurality of rear surround signals having different delay times. A surround signal processing device further comprising a reflected sound adding circuit for adding a reflected sound to a signal.
JP7161583A 1995-01-25 1995-06-06 Surround signal processing device Expired - Lifetime JP2953347B2 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP7161583A JP2953347B2 (en) 1995-06-06 1995-06-06 Surround signal processing device
EP96100990A EP0724378B1 (en) 1995-01-25 1996-01-24 Surround signal processing apparatus
DE69635466T DE69635466T2 (en) 1995-01-25 1996-01-24 Raumklangbzw. Surround signal processing apparatus
US08/590,497 US5844993A (en) 1995-01-25 1996-01-24 Surround signal processing apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP7161583A JP2953347B2 (en) 1995-06-06 1995-06-06 Surround signal processing device

Publications (2)

Publication Number Publication Date
JPH08336199A true JPH08336199A (en) 1996-12-17
JP2953347B2 JP2953347B2 (en) 1999-09-27

Family

ID=15737890

Family Applications (1)

Application Number Title Priority Date Filing Date
JP7161583A Expired - Lifetime JP2953347B2 (en) 1995-01-25 1995-06-06 Surround signal processing device

Country Status (1)

Country Link
JP (1) JP2953347B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6122382A (en) * 1996-10-11 2000-09-19 Victor Company Of Japan, Ltd. System for processing audio surround signal
JP2006523859A (en) * 2003-04-17 2006-10-19 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Audio signal synthesis
US7242782B1 (en) 1998-07-31 2007-07-10 Onkyo Kk Audio signal processing circuit
JP2008507184A (en) * 2004-07-14 2008-03-06 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Audio channel conversion
JP2013539643A (en) * 2010-09-10 2013-10-24 ストーミングスイス・ゲゼルシャフト・ミト・ベシュレンクテル・ハフツング Apparatus and method for temporally evaluating and optimizing stereo or pseudo-stereo signals

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6122382A (en) * 1996-10-11 2000-09-19 Victor Company Of Japan, Ltd. System for processing audio surround signal
US7242782B1 (en) 1998-07-31 2007-07-10 Onkyo Kk Audio signal processing circuit
US7801312B2 (en) 1998-07-31 2010-09-21 Onkyo Corporation Audio signal processing circuit
JP2006523859A (en) * 2003-04-17 2006-10-19 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Audio signal synthesis
JP4834539B2 (en) * 2003-04-17 2011-12-14 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Audio signal synthesis
JP2008507184A (en) * 2004-07-14 2008-03-06 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Audio channel conversion
US8793125B2 (en) 2004-07-14 2014-07-29 Koninklijke Philips Electronics N.V. Method and device for decorrelation and upmixing of audio channels
JP2013539643A (en) * 2010-09-10 2013-10-24 ストーミングスイス・ゲゼルシャフト・ミト・ベシュレンクテル・ハフツング Apparatus and method for temporally evaluating and optimizing stereo or pseudo-stereo signals

Also Published As

Publication number Publication date
JP2953347B2 (en) 1999-09-27

Similar Documents

Publication Publication Date Title
US7231053B2 (en) Enhanced multi-channel audio surround sound from front located loudspeakers
US5459790A (en) Personal sound system with virtually positioned lateral speakers
US5841879A (en) Virtually positioned head mounted surround sound system
US5661812A (en) Head mounted surround sound system
US6175631B1 (en) Method and apparatus for decorrelating audio signals
US6144747A (en) Head mounted surround sound system
NL1013313C2 (en) Method for simulating a three-dimensional sound field.
US6236730B1 (en) Full sound enhancement using multi-input sound signals
US7076071B2 (en) Process for enhancing the existing ambience, imaging, depth, clarity and spaciousness of sound recordings
US5844993A (en) Surround signal processing apparatus
JP2000152399A (en) Sound field effect controller
JP2924710B2 (en) Stereo sound field expansion device
JP2956545B2 (en) Sound field control device
JPH10336798A (en) Sound field correction circuit
JPH0851698A (en) Surround signal processor and video and audio reproducing device
JP2966181B2 (en) Sound field signal reproduction device
JPH07123498A (en) Headphone reproducing system
JP2953347B2 (en) Surround signal processing device
JP2985704B2 (en) Surround signal processing device
JP2947456B2 (en) Surround signal processing device and video / audio reproduction device
JPH05207597A (en) Sound field reproduction device
JP2966176B2 (en) Sound field signal reproduction device
JPH10336797A (en) Pseudo stereo circuit
KR970005609B1 (en) Method for regenerating voice and sound
JPS5814798B2 (en) 3D sound field expansion device

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 19990615

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080716

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080716

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090716

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090716

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100716

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110716

Year of fee payment: 12

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120716

Year of fee payment: 13

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120716

Year of fee payment: 13

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120716

Year of fee payment: 13

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120716

Year of fee payment: 13

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130716

Year of fee payment: 14

EXPY Cancellation because of completion of term