JPH05204395A - Audio gain controller and audio recording and reproducing device - Google Patents

Audio gain controller and audio recording and reproducing device

Info

Publication number
JPH05204395A
JPH05204395A JP4110527A JP11052792A JPH05204395A JP H05204395 A JPH05204395 A JP H05204395A JP 4110527 A JP4110527 A JP 4110527A JP 11052792 A JP11052792 A JP 11052792A JP H05204395 A JPH05204395 A JP H05204395A
Authority
JP
Japan
Prior art keywords
gain
audio
voice
amplitude
circuit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP4110527A
Other languages
Japanese (ja)
Other versions
JP2965788B2 (en
Inventor
Takahiko Nakano
貴彦 中野
Shuichi Yoshikawa
修一 吉川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP4110527A priority Critical patent/JP2965788B2/en
Publication of JPH05204395A publication Critical patent/JPH05204395A/en
Application granted granted Critical
Publication of JP2965788B2 publication Critical patent/JP2965788B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Control Of Amplification And Gain Control (AREA)
  • Complex Calculations (AREA)

Abstract

PURPOSE:To precisely perform a gain control without being affected by noise and intonation contained in audio signals. CONSTITUTION:A nonlinear transforming circuit 41 expands the smaller amplitude signals of audio signals sampled by an audio input device 10, nonlinear transform processes which extend amplitudes and time axes and the generation probability of amplitudes is averaged. An amplitude deciding circuit 42 computes an optimum amplitude for the gain control by these signals, a gain deciding circuit 43 decides the gain corresponding to the calculated amplitude and a multiplier 30, to which the audio signals from the device 10 through an audio CODEC 20, is given as amplitude coefficients. Then, optimum coefficients are multiplied to the audio signals and an optimum gain control is performed. The audio gain controller 20 has a nonlinear transforming section 21d which nonlinear transforms amplitudes so as to average the generation frequency of inputted amplitudes and obtains an optimum gain as to reduce the adverse effects caused by noise and conversation intonation. The gain is multiplied to the amplitudes of audio signals decoded by the voice codic 20 at the mutliplier 30.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【産業上の利用分野】本発明は、音声コーデック(CO
DEC:coderとdecoderとの合成語)に用
いられる音声用自動利得制御に関し、特に、マイクロフ
ォン等の音声入力装置から入力される音声信号の利得
(ゲイン)を適正値に自動的に制御する音声用自動利得
制御装置および該音声用自動利得制御装置を備えた音声
記録再生装置に関する。
BACKGROUND OF THE INVENTION The present invention relates to a voice codec (CO
DEC: Synthetic word of coder and decoder) for automatic gain control for voice, particularly for voice that automatically controls the gain of a voice signal input from a voice input device such as a microphone to an appropriate value. The present invention relates to an automatic gain control device and an audio recording / reproducing device equipped with the audio automatic gain control device.

【0002】[0002]

【従来の技術】音声コーデックは、一般に、アナログ信
号である音声を符号化する機能と符号化されたデータを
復号化する機能の両方を合わせ持つ装置である。このよ
うな音声コーデックにより、音声入力装置を通して入力
されるアナログの音声信号を符号化(コード)データに
変換し、しかる後、符号化データをテープカートリッジ
等の記録媒体に録音する構成を有する音声録音再生装置
がある。
2. Description of the Related Art Generally, a voice codec is a device having both a function of encoding voice which is an analog signal and a function of decoding encoded data. An audio recording having a configuration in which an analog audio signal input through an audio input device is converted into encoded data by such an audio codec, and then the encoded data is recorded on a recording medium such as a tape cartridge. There is a playback device.

【0003】留守番電話機能付き電話機に於ては、磁気
テープによる音声記録再生装置に代えて、半導体記憶装
置を使用した音声記録再生装置を採用するものがある。
このような半導体記憶装置による音声記録再生装置で
は、音声信号を符号化して一旦この半導体記憶装置に記
憶させておき、後にこれを復号化して音声として再生す
ることになる。
In some telephones with an answering machine function, a voice recording / reproducing apparatus using a semiconductor memory device is adopted instead of the voice recording / reproducing apparatus using a magnetic tape.
In an audio recording / reproducing apparatus using such a semiconductor memory device, an audio signal is encoded and temporarily stored in this semiconductor memory device, and then this is decoded and reproduced as audio.

【0004】再生された音質の向上を図るためには、音
声信号の振幅が適当な大きさになるように、音声用利得
制御装置によって音声信号の利得を適正値に制御する必
要がある。従来、この種の利得制御は、音声信号を監視
(統計処理)して得られる平均化された音声振幅または
音声パワーを、利得係数としてフィードバックするフィ
ードバック制御により、行われていた。例えば、音声信
号の特徴を抽出する方法として、統計的手法による度数
分布に基づく方法がある。
In order to improve the reproduced sound quality, it is necessary to control the gain of the audio signal to an appropriate value by the audio gain control device so that the amplitude of the audio signal becomes an appropriate size. Conventionally, this kind of gain control has been performed by feedback control in which an averaged voice amplitude or voice power obtained by monitoring (statistical processing) a voice signal is fed back as a gain coefficient. For example, as a method for extracting the characteristics of a voice signal, there is a method based on frequency distribution by a statistical method.

【0005】[0005]

【発明が解決しようとする課題】しかしながら、音声信
号を長い時間観測した場合、該度数分布はその形が振幅
の小さい音声信号の発生確率が高く、振幅の大きい音声
信号の発生確率が低い分布となり、一様分布にならな
い。このため、該度数分布法によれば、音声の性質を精
度よく把握できず、精度のよい振幅係数が得られないた
め、結局音質の低下を来すことになる。特に、短い会話
では音声を特定の性質に限定できず、適正な振幅情報を
得ることが困難であるため、より大きな問題になる。加
えて、会話の場合はイントーネーションの影響を受け易
いという問題もある。
However, when a voice signal is observed for a long time, the frequency distribution has a distribution in which the probability of occurrence of a voice signal of small amplitude is high and the probability of occurrence of a voice signal of large amplitude is low. , Not uniform distribution. Therefore, according to the frequency distribution method, the nature of the voice cannot be accurately grasped, and the accurate amplitude coefficient cannot be obtained, so that the sound quality is deteriorated. In particular, in a short conversation, the voice cannot be limited to a specific property, and it is difficult to obtain appropriate amplitude information, which becomes a larger problem. In addition, in the case of conversation, there is a problem that it is easily affected by intonation.

【0006】また、音声用利得制御装置が音声信号の振
幅に応じて随時フィードバックしながら利得制御を行っ
たのでは、音声が抑揚の乏しい単調なものとなる。しか
し、留守番電話機能付き電話機等に用いられる音声記録
再生装置では、音声信号の記録時と再生時とが時間的に
異なるために、事後的に利得をどのように調整するかを
決定することが可能である。そこで、音声信号を所定区
間ごとに区切り、この区間内の振幅の平均値に基づいて
利得の調整量を計算し、これを音声信号のディジタルデ
ータと共に記録する音声用利得制御装置が既に開発され
ている。このように音声信号の所定区間ごとに利得制御
を行えば、その間の音声の抑揚等を保存することができ
る。しかし、通常の話言葉の音声には、言葉が発せられ
る有音部分と、この言葉の区切りごとの無音部分とが存
在する。そして、この無音部分の多い話言葉では、所定
区間内に無音部分の占める割り合いが多くなり、音声信
号の振幅の平均値が異常に低くなる。このため、従来の
音声用利得制御装置は、音声信号を所定区間ごとに区切
って利得を調整する場合に、無音部分の多い音声では適
正な利得の調整を行うことができなくなるという問題が
生じていた。また、この問題を解決するために音声信号
を区切る区間を短くしたのでは、随時振幅をフィードバ
ックした場合と同様に、抑揚の乏しいものとなるだけで
あり問題の解決とならない。
If the voice gain control device performs the gain control while feeding back the voice signal in accordance with the amplitude of the voice signal, the voice becomes monotonous with little intonation. However, in a voice recording / reproducing apparatus used for a telephone with an answering machine, etc., it is possible to decide how to adjust the gain afterwards because the recording time and the reproducing time of the voice signal are different. It is possible. Therefore, an audio gain control device has been already developed, which divides an audio signal into predetermined intervals, calculates the gain adjustment amount based on the average value of the amplitudes in this interval, and records this together with the digital data of the audio signal. There is. By performing the gain control for each predetermined section of the audio signal in this manner, it is possible to save the intonation of the audio during that period. However, the sound of a normal spoken word has a voiced part in which a word is uttered and a silent part in each word segment. Then, in the spoken language having many silent portions, the proportion of the silent portions in the predetermined section increases, and the average value of the amplitude of the audio signal becomes abnormally low. For this reason, the conventional voice gain control device has a problem in that when the voice signal is divided into predetermined intervals and the gain is adjusted, it is impossible to properly adjust the gain for a voice having many silent portions. It was In addition, if the section that divides the audio signal is shortened in order to solve this problem, the intonation will be poor and the problem will not be solved, as in the case where the amplitude is fed back at any time.

【0007】さらに、上記従来の音声記録再生装置で
は、音声信号が利得制御されて符号化された後に記録媒
体に記憶されるため、再生時には常に利得制御後の音声
信号のみが復号化されることになる。このため、従来の
音声記録再生装置は、再生された音声の大きさや抑揚が
単調なものとなり、記録されたメッセージのニュアンス
を正確に伝えることができないという問題が生じてい
た。
Further, in the above-mentioned conventional audio recording / reproducing apparatus, since the audio signal is gain-controlled and encoded and then stored in the recording medium, only the audio signal after the gain control is always decoded during reproduction. become. For this reason, the conventional voice recording / reproducing apparatus has a problem in that the reproduced voice has a monotone in volume and intonation and cannot accurately convey the nuance of the recorded message.

【0008】本発明の目的は、音声信号に含まれるノイ
ズやイントネーシヨンに影響されず、精度のよい利得制
御が行える音声用利得制御装置を提供することにある。
It is an object of the present invention to provide a voice gain control device capable of performing accurate gain control without being affected by noise and intonation included in a voice signal.

【0009】本発明の他の目的は、所定区間の音声信号
について振幅の度数分布を作成し、この度数分布から有
音部分のみを抽出して平均値を計算することにより、無
音部分の影響を受けない利得制御を行うことができる音
声用利得制御装置を提供することにある。
Another object of the present invention is to create a frequency distribution of amplitude for a voice signal in a predetermined section, extract only a voiced part from this frequency distribution, and calculate an average value thereof, thereby eliminating the influence of a silent part. It is an object of the present invention to provide a voice gain control device capable of performing gain control without being affected.

【0010】本発明の更に他の目的は、音声信号の利得
制御を所定区間ごとに行い、また、この利得制御のため
の利得係数を音声信号のディジタルデータとは別に記録
しておくことにより、記録データの増加を最小限に留め
ながら、音声の大きさや抑揚を損なうことなく再生する
ことができる音声記録再生装置を提供することにある。
Still another object of the present invention is to perform gain control of a voice signal for each predetermined section, and to record a gain coefficient for this gain control separately from digital data of the voice signal. An object of the present invention is to provide an audio recording / reproducing apparatus capable of reproducing an audio without impairing the volume and intonation of audio while suppressing an increase in recorded data to a minimum.

【0011】[0011]

【課題を解決するための手段】本発明の音声用利得制御
装置は、音声入力装置から入力される音声信号の利得を
自動的に制御する音声用利得制御装置であって、該音声
信号の振幅の小さい信号の振幅を引き伸ばし、該振幅の
小さい信号と振幅の大きい信号の発生確率を平均化する
非線形変換回路と、該非線形変換回路により平均化され
た音声信号に基づき利得制御用の振幅値を算出し、算出
値により利得を決定する利得決定回路とを備え、決定さ
れた該利得により該音声信号の振幅を制御することによ
り、上記目的が達成される。
A voice gain control device according to the present invention is a voice gain control device for automatically controlling the gain of a voice signal input from a voice input device, and the amplitude of the voice signal. Of a small signal, a non-linear conversion circuit for averaging the occurrence probabilities of the small-amplitude signal and the large-amplitude signal, and an amplitude value for gain control based on the voice signal averaged by the non-linear conversion circuit. The above object is achieved by including a gain determination circuit that calculates and determines the gain based on the calculated value, and controls the amplitude of the audio signal by the determined gain.

【0012】前記非線形変換回路および前記利得決定回
路が乗算器、ROM、RAMおよび演算装置を備えたデ
ジタルシグナルプロセッサで構成され、該非線形変換回
路および前記利得決定回路の演算処理内容をソフトウェ
ア的に行ってもよい。
The non-linear conversion circuit and the gain determination circuit are constituted by a digital signal processor provided with a multiplier, a ROM, a RAM and an arithmetic unit, and the arithmetic processing contents of the non-linear conversion circuit and the gain determination circuit are performed by software. May be.

【0013】前記非線形変換回路のソフトウェア的演算
処理を非線形量子化法の一手法であるμ則圧縮特性法に
よって行ってもよい。
The software operation processing of the non-linear conversion circuit may be performed by the μ-law compression characteristic method which is one of the non-linear quantization methods.

【0014】前記利得決定回路のソフトウェア的演算処
理を、前記非線形変換回路から前記利得決定回路に与え
られる入力レベルと、予め設定された該入力レベルの最
大値とを比較し、該入力レベルが該最大値よりも大きい
場合に、該最大値を入力レベルとして採用し、該最大値
に従って利得を決定するソフトウェア的処理手順で行っ
てもよい。
In the software operation processing of the gain determination circuit, the input level given to the gain determination circuit from the non-linear conversion circuit is compared with a preset maximum value of the input level, and the input level is determined as follows. When it is larger than the maximum value, the maximum value may be adopted as an input level, and the gain may be determined according to the maximum value by a software processing procedure.

【0015】前記デジタルシグナルプロセッサの乗算機
能を用いて前記非線形変換回路からの入力信号をフィル
タ処理してもよい。
The input signal from the non-linear conversion circuit may be filtered using the multiplication function of the digital signal processor.

【0016】本発明の音声用利得制御装置は、音声信号
を符号化して記憶装置に記録する音声記録再生装置にお
いて用いられる音声用利得制御装置であって、音声信号
の所定区間ごとにおける振幅の度数分布を作成する度数
分布作成手段と、該度数分布作成手段が作成した度数分
布から有音部分のみを抽出する有音部分抽出手段と、該
有音部分抽出手段が抽出した有音部分の度数分布からそ
の振幅の平均値を計算する平均値計算手段と、該平均値
計算手段が計算した平均値に基づいて利得を決定する利
得決定手段とを備えており、そのことにより上記目的が
達成される。
The audio gain control device of the present invention is an audio gain control device used in an audio recording / reproducing device for encoding an audio signal and recording the encoded audio signal in a storage device. Frequency distribution creating means for creating a distribution, voiced part extracting means for extracting only voiced parts from the frequency distribution created by the frequency distribution creating means, and frequency distribution of voiced parts extracted by the voiced part extracting means And an average value calculating means for calculating an average value of the amplitude and a gain determining means for determining a gain based on the average value calculated by the average value calculating means, thereby achieving the above object. ..

【0017】本発明の音声記録再生装置は、音声信号を
符号化して記憶装置に記録し、これを復号化して再生す
る音声記録再生装置であって、音声信号を符号化して該
記憶装置に記録する符号化手段と、この音声信号の所定
区間ごとの振幅の平均値を計算する平均値計算手段と、
該平均値計算手段が計算した平均値から利得係数を計算
して該記憶装置に記録する利得係数計算手段と、該記憶
装置から符号化された信号を読み出し、復号化する復号
化手段と、該復号化手段が復号化した音声信号につい
て、該利得係数計算手段が計算した利得係数を該記憶装
置から読み出し、該利得計数に基づいて利得の調整を行
う利得制御手段とを備えており、そのことにより上記目
的が達成される。
An audio recording / reproducing apparatus of the present invention is an audio recording / reproducing apparatus which encodes an audio signal and records it in a storage device, and decodes and reproduces the audio signal. The audio signal is encoded and recorded in the storage device. Encoding means, and an average value calculating means for calculating the average value of the amplitude of each predetermined section of the audio signal,
Gain coefficient calculation means for calculating a gain coefficient from the average value calculated by the average value calculation means and recording the gain coefficient in the storage device; decoding means for reading and decoding the encoded signal from the storage device; Gain control means for reading the gain coefficient calculated by the gain coefficient calculation means from the storage device for the voice signal decoded by the decoding means, and adjusting the gain based on the gain count; and The above object is achieved by the above.

【0018】[0018]

【実施例】図1は、本発明の音声用利得制御装置が音声
コーデックを備えた音声記録再生装置に用いられたシス
テムのブロック図を示している。
1 is a block diagram of a system in which a voice gain control device of the present invention is used in a voice recording / reproducing device equipped with a voice codec.

【0019】音声入力装置10は、一連の音声信号列を
監視し、該音声信号列の振幅を所定のサンプリングピッ
チでサンプリングする。サンプリングされた信号は、音
声コーデック20に入力される。音声コーデック20は
入力信号を符号化されたデータに符号化し、次いで該符
号化データを復号して乗算器30に与える。より詳細に
は、音声コーデック20内の符号化回路により符号化さ
れた符号化データが、例えば、該音声録音再生装置の録
音部に出力され、続いてテープカートリッジ等の記録媒
体(不図示)に録音される。これにより会話内容等が録
音される。記録媒体から読みだされた符号化データは、
音声コーデック20内の復号化回路で復号され、乗算器
30に与えられる。
The voice input device 10 monitors a series of voice signal trains and samples the amplitude of the voice signal trains at a predetermined sampling pitch. The sampled signal is input to the audio codec 20. The audio codec 20 encodes the input signal into encoded data, decodes the encoded data, and supplies the decoded data to the multiplier 30. More specifically, the encoded data encoded by the encoding circuit in the audio codec 20 is output to, for example, the recording unit of the audio recording / reproducing apparatus, and then recorded on a recording medium (not shown) such as a tape cartridge. To be recorded. As a result, the conversation content and the like are recorded. The encoded data read from the recording medium is
It is decoded by the decoding circuit in the audio codec 20 and given to the multiplier 30.

【0020】乗算器30には、音声用利得制御装置40
により決定された利得係数が入力されるようになってお
り、復号化された信号に該利得係数を掛けた信号、すな
わち利得制御が行われた適正な振幅の信号を出力する。
The multiplier 30 includes an audio gain control device 40.
The gain coefficient determined by is input, and a signal obtained by multiplying the decoded signal by the gain coefficient, that is, a signal having an appropriate amplitude for which gain control is performed is output.

【0021】該音声用利得制御装置は40は、音声入力
装置10がサンプリングした音声信号が入力される非線
形変換回路41と、該非線形変換回路41により信号処
理された信号が入力される振幅計算回路42と、該振幅
計算回路42により計算された利得制御用の振幅値によ
り前記利得係数を計算し、これを乗算器30に与える利
得決定回路43で構成される。
The audio gain control device 40 includes a non-linear conversion circuit 41 to which the audio signal sampled by the audio input device 10 is input, and an amplitude calculation circuit to which the signal processed by the non-linear conversion circuit 41 is input. 42, and a gain determination circuit 43 that calculates the gain coefficient from the amplitude value for gain control calculated by the amplitude calculation circuit 42 and gives the calculated gain coefficient to the multiplier 30.

【0022】本発明の重要な特徴は、非線形変換回路4
1で非線形変換した音声信号に基づいて、振幅計算回路
42により振幅を計算することにある。非線形変換回路
41、振幅計算回路42及び利得決定回路43の回路そ
のものは、従来から存在する公知のものを用いてもよ
い。
An important feature of the present invention is that the nonlinear conversion circuit 4
The amplitude is calculated by the amplitude calculation circuit 42 based on the audio signal nonlinearly converted by 1. As the circuits themselves of the non-linear conversion circuit 41, the amplitude calculation circuit 42 and the gain determination circuit 43, known circuits existing in the past may be used.

【0023】本実施例の非線形変換回路41は、入力さ
れた音声信号を以下に示す内容で非線形変換する。すな
わち、音声信号中の振幅の小さい信号について、該信号
の振幅や時間軸を拡張する非線形変換処理を行う。これ
により、振幅の小さい信号と振幅の大きい信号の発生確
率が平均化される。それ故、該音声信号を統計処理して
その度数分布を求めると、一様な度数分布が得られる。
加えて、このような平均化処理によれば、音声信号に含
まれる信号振幅の大きなノイズが圧縮されるので、該ノ
イズの悪影響を排除できる。従って、平均化された音声
信号に基づき利得を制御すれば、ノイズやイントネーシ
ョンの影響の少ない適正な利得制御が可能になる。
The non-linear conversion circuit 41 of this embodiment performs non-linear conversion of the input audio signal with the following contents. That is, for a signal having a small amplitude in the audio signal, a non-linear conversion process for expanding the amplitude of the signal or the time axis is performed. As a result, the occurrence probabilities of the small amplitude signal and the large amplitude signal are averaged. Therefore, a uniform frequency distribution can be obtained by statistically processing the voice signal to obtain its frequency distribution.
In addition, according to such an averaging process, noise with a large signal amplitude included in the audio signal is compressed, so that the adverse effect of the noise can be eliminated. Therefore, if the gain is controlled based on the averaged audio signal, proper gain control with less influence of noise and intonation becomes possible.

【0024】振幅計算回路42は、非線形変換回路41
により発生確率を平均化された音声信号の振幅に基づい
て、利得制御に必要な振幅を計算する。振幅を計算する
方法には、種々の方法が知られている。非線形変換回路
41から入力されてくる信号の振幅の所定期間ごとの最
大値を得て、それぞれの期間の振幅の最大値を各々の期
間についての「振幅」とする方法や、所定期間内の度数
分布に基づいて平均振幅を得て、その平均振幅を各々の
期間についての「振幅」とする方法が公知である。
The amplitude calculation circuit 42 is a nonlinear conversion circuit 41.
The amplitude required for gain control is calculated based on the amplitude of the audio signal whose occurrence probability is averaged by. Various methods are known as methods for calculating the amplitude. A method of obtaining the maximum value of the amplitude of the signal input from the non-linear conversion circuit 41 for each predetermined period and setting the maximum value of the amplitude of each period as the “amplitude” for each period, or the frequency within the predetermined period A method is known in which an average amplitude is obtained on the basis of a distribution, and the average amplitude is used as “amplitude” for each period.

【0025】計算された振幅データは、利得決定回路4
3に入力され、ここで計算された振幅値に対応した利得
が決定(算出)され、振幅係数として乗算器30に出力
される。
The calculated amplitude data is used in the gain determination circuit 4
The gain corresponding to the amplitude value calculated here is determined (calculated) and output to the multiplier 30 as an amplitude coefficient.

【0026】上記の利得制御に必要な振幅計算と並行し
て、音声コーデック20においては、符号化処理が行わ
れる。すなわち、本実施例では、音声コーデックでの音
質に影響を与えないように、符号化処理に平行して利得
の決定が行われるシステム構成になっている。
In parallel with the amplitude calculation required for the above gain control, the voice codec 20 performs an encoding process. That is, the present embodiment has a system configuration in which the gain is determined in parallel with the encoding process so as not to affect the sound quality of the voice codec.

【0027】非線形変換回路41、振幅計算回路42お
よび利得決定回路43からなる本実施例の音声用利得制
御装置40は、アナログ回路によっても実現できるが、
DSP(Digital Signal Processor)で音声用利得制御
装置40を構成し、そのソフトウェアで非線形変換回路
41、振幅計算回路42および利得決定回路43の演算
処理を実行すれば、演算処理を迅速、かつ精度よく行え
る利点がある。以下にその詳細を説明する。
The voice gain control device 40 of this embodiment, which comprises the non-linear conversion circuit 41, the amplitude calculation circuit 42, and the gain determination circuit 43, can be realized by an analog circuit.
If the voice gain control device 40 is configured with a DSP (Digital Signal Processor) and the software executes the arithmetic processing of the non-linear conversion circuit 41, the amplitude calculation circuit 42, and the gain determination circuit 43, the arithmetic processing is performed quickly and accurately. There is an advantage that can be done. The details will be described below.

【0028】図2は、DSPのシステム構成を示す。D
SPのディジタル信号処理には、乗算、加算が頻繁に行
われる。このためのハードウェアとして、DSPには、
並列乗算器(以下単に乗算器という)104が設けられ
るる。乗算器104における乗算は、乗数のそれぞれの
行(ビット)毎に被乗数との間で掛算(AND操作)を
行って部分積を算出し、この部分積を加算して最終的な
積を求めるという形で行われる。並列乗算器104はこ
の部分積の算出、部分積の加算を並列に行うことで処理
を高速化している。
FIG. 2 shows the system configuration of the DSP. D
Multiplication and addition are frequently performed in the SP digital signal processing. As hardware for this, the DSP has
A parallel multiplier (hereinafter simply referred to as a multiplier) 104 is provided. The multiplication in the multiplier 104 is called multiplication for each row (bit) of the multiplier with the multiplicand (AND operation) to calculate a partial product, and the partial products are added to obtain a final product. Done in shape. The parallel multiplier 104 accelerates the processing by calculating the partial products and adding the partial products in parallel.

【0029】ここで、DSPで実行する演算処理は、乗
算結果を次々に累積する、いわゆる積和演算が多いのが
特徴である。このため、DSPの演算回路、すなわちA
LU100は乗算器104による乗算の結果の累積が連
続して毎サイクル実行できるように設計がなされてい
る。すなわち、乗算器104の乗算結果を直接ALU1
00に入力させることができ、また、ALU100の演
算結果は累積用のレジスタであるアキュームレータ10
5に格納(蓄積)されると共に、アキュームレータ10
5の出力はALU100に与えられるようになっている
(図2参照)。また、アキュームレータ105の出力
は、セレクタ103を介して乗算器104に与えられる
ようになっている。
Here, the arithmetic processing executed by the DSP is characterized in that there are many so-called product-sum operations for accumulating multiplication results one after another. Therefore, the DSP arithmetic circuit, that is, A
The LU 100 is designed so that accumulation of multiplication results by the multiplier 104 can be continuously executed in each cycle. That is, the multiplication result of the multiplier 104 is directly calculated by the ALU1.
00, and the operation result of the ALU 100 is an accumulator 10 which is a register for accumulation.
5 (stored) and accumulator 10
The output of 5 is given to the ALU 100 (see FIG. 2). The output of the accumulator 105 is given to the multiplier 104 via the selector 103.

【0030】このようにDSPでは、乗算・加算等を高
速に行うことができるが、ALU100の処理能力を引
き出し、該ALU100のスループットを上げるには次
々にデータをALU100に与える必要がある。このた
め、DSPでは、複数のデータ・バス107(図示例で
は1組のデータバスのみ示す)が設けられている。図示
するデータ・バス107は、アドレス・バス106から
与えられるアドレスにより、対応するアドレスにデータ
が書き込み/読み出されるROM101、RAM102
の出力と乗算器104の入力レジスタを結ぶバスとして
機能する。すなわち、このデータ・バス107は乗算器
104に対し乗数、被乗数を毎サイクル設定するための
バスであり、このデータ・バス107により、RAM1
02、ROM101から連続してデータが読み出されて
乗算が行われる。
As described above, the DSP can perform multiplication and addition at high speed, but it is necessary to successively provide data to the ALU 100 in order to bring out the processing capacity of the ALU 100 and increase the throughput of the ALU 100. For this reason, the DSP is provided with a plurality of data buses 107 (only one set of data buses is shown in the illustrated example). The data bus 107 shown in the drawing is a ROM 101, a RAM 102 in which data is written / read at a corresponding address according to an address given from the address bus 106.
Functions as a bus that connects the output of the above-mentioned and the input register of the multiplier 104. That is, the data bus 107 is a bus for setting a multiplier and a multiplicand for the multiplier 104 every cycle.
02, data is continuously read from the ROM 101 and multiplication is performed.

【0031】次に、図3および図4を参照して、ALU
100による非線形変換処理の内容について説明する。
ここで、この非線形変換処理は、上記の非線形変換回路
41の処理内容と同様であり、ROM101に格納され
た非線形変換処理のためのプログラム、すなわちROM
101に格納されたプログラムデータに従ったアルゴリ
ズムをALU100が実行することにより行われる。よ
り具体的には、非線形量子化法の一手法であるμ則圧縮
特性法に従った非線形変換処理が行われる。この非線形
変換処理は、下記(1)式で示す変換式のy(圧縮後信
号レベル)を算出し、このyを上記音声入力装置10か
らの入力レベルを平均化処理した一様な度数分布として
得る。
Next, referring to FIGS. 3 and 4, the ALU
The contents of the non-linear conversion processing by 100 will be described.
Here, this non-linear conversion processing is similar to the processing content of the above-mentioned non-linear conversion circuit 41, and is a program for the non-linear conversion processing stored in the ROM 101, that is, the ROM.
This is performed by the ALU 100 executing an algorithm according to the program data stored in 101. More specifically, the non-linear conversion process is performed according to the μ-law compression characteristic method, which is one of the non-linear quantization methods. In this non-linear conversion process, y (compressed signal level) in the conversion formula shown in the following formula (1) is calculated, and this y is set as a uniform frequency distribution obtained by averaging the input level from the voice input device 10. obtain.

【0032】 y=(x−a)・(16/b)+c …(1) 但し、x:圧縮前信号レベル(音声入力装置10からの
入力レベル) a、b、c:音声入力装置10の特性に合わせた係数 である。
Y = (x−a) · (16 / b) + c (1) where x: pre-compression signal level (input level from the voice input device 10) a, b, c: of the voice input device 10 It is a coefficient that matches the characteristics.

【0033】以下に、図3および図4に従いyの算出手
順をより詳細に説明する。まず、このプログラムがスタ
ートすると、ALU100はステップS1で、上記
(1)式の変換式を得るための係数a、b、cにそれぞ
れ0、32、0を設定する。続いて、ステップS2で音
声入力装置10からの入力レベルxの値が31より大き
いか否かを判定し、小さいことを確認すると、図4に示
すステップS16に進み、ここで入力レベル−aを入力
レベルに設定する。すなわち、ステップS16では、上
記(1)式中の(x−a)を算出する。
The procedure for calculating y will be described in more detail below with reference to FIGS. 3 and 4. First, when this program starts, the ALU 100 sets 0, 32, 0 to the coefficients a, b, c for obtaining the conversion formula of the above formula (1) in step S1. Succeedingly, in a step S2, it is determined whether or not the value of the input level x from the voice input device 10 is larger than 31, and if it is confirmed that the value is smaller, the process proceeds to a step S16 shown in FIG. Set to the input level. That is, in step S16, (x-a) in the above formula (1) is calculated.

【0034】一方、ステップS2で入力レベルxが31
以上であると判定すると、この場合には入力レベルxの
設定処理を行わず、次にステップS3で係数a、b、c
にそれぞれ31、64、16を設定する。そして、ステ
ップS4で入力レベルxが95より大きいか否かを判定
し、小さいことを確認すると、上記同様にしてステップ
S16に進み、ここでこのときの入力レベルx−aを入
力レベルxに設定する。
On the other hand, in step S2, the input level x is 31.
If it is determined that the above is the case, the setting process of the input level x is not performed in this case, and then the coefficients a, b, c
Are set to 31, 64, and 16, respectively. Then, in step S4, it is determined whether or not the input level x is higher than 95, and if it is confirmed that the input level x is lower than 95, the process proceeds to step S16 in the same manner as described above, where the input level x-a at this time is set to the input level x. To do.

【0035】ステップS4で入力レベルxが95以上で
あると判定すると、次にステップS5で係数a、b、c
をそれぞれ95、128、32に設定し、ステップS6
で入力レベルxが223より大きいか否かを判定する。
入力レベルxが223よりも小さいことを確認すると、
上記同様にステップS16に進み、ここで入力レベルx
の設定処理を行い、223以上である場合はステップS
7で新たな係数a、b、c設定を行う。以下同様にし
て、ステップS7〜ステップS15の処理を行ってステ
ップS16に進み、係数aに対応した入力レベルx−a
を設定する。
If it is determined in step S4 that the input level x is 95 or more, then in step S5, the coefficients a, b, c are calculated.
Are set to 95, 128, and 32, respectively, and step S6
Then, it is determined whether or not the input level x is larger than 223.
If you confirm that the input level x is smaller than 223,
Similarly to the above, the process proceeds to step S16, where the input level x
Is set, and if it is 223 or more, step S
In step 7, new coefficients a, b and c are set. In the same manner, the processes of steps S7 to S15 are performed, and the process proceeds to step S16 to input level x-a corresponding to the coefficient a.
To set.

【0036】ステップS16で入力レベルxの設定処理
が行われると、ALU100は、次にステップS17で
乗算器104に演算ステップS16で算出された入力レ
ベル(x−a)に(16/b)を掛ける乗算処理を行わ
せ、これにより算出される上記(1)式中の(x−a)
×(16/b)を新たな入力レベルとしてアキュームレ
ータ105に蓄積する。
When the input level x is set in step S16, the ALU 100 next sets (16 / b) to the input level (x-a) calculated in step S16 in the multiplier 104 in step S17. (X-a) in the above equation (1) calculated by multiplying by
Accumulator 105 stores x (16 / b) as a new input level.

【0037】続いて、ステップS18で、アキュームレ
ータ105に蓄積された入力レベル(x−a)×(16
/b)を読み出し、乗算器104に該入力レベル(x−
a)×(16/b)に係数cを加算させる処理を行わ
せ、この値(x−a)×(16/b)+cを最終的に入
力レベル、すなわち変換後の信号レベルyとして得、こ
ひの値をアキュームレータ105に蓄積する。
Subsequently, in step S18, the input level (x−a) × (16) accumulated in the accumulator 105 is stored.
/ B) is read out and the input level (x−
a) × (16 / b) is added to the coefficient c, and this value (x−a) × (16 / b) + c is finally obtained as the input level, that is, the signal level y after conversion, The accumulated value is stored in the accumulator 105.

【0038】次に、図6に従い上記の振幅計算回路42
の演算処理に相当する処理の内容について説明する。A
LU100は、ROM101に格納された振幅計算のた
めのプログラムがスタートすると、ALU100はステ
ップS61で、入力レベルxの値がデフォルト値より大
きいか否かを判定し、大きいことを確認すると、入力レ
ベルを最大値に設定する。一方、ステップS61で入力
レベルがデフォルト値以下であると判定すると、この場
合には最大値の設定処理を行わず、エンドに進む。こう
して、非線形変換回路から振幅計算回路に逐次入力され
る複数の入力レベルについて、上記処理と同様の処理を
繰り返し行うことにより、所定期間に於ける入力レベル
(非線形変換回路41の出力)の最大値を得ることがで
きる。この例では、入力レベルの最大値を得て、それを
各期間の「振幅」としている。しかし、DSPの有する
乗算機能を用いて、種々の方法で振幅を得ることが可能
である。例えば、雑音を「振幅」と計算しないように、
入力レベルに対してフィルタ処理を行い、振幅計算の際
に入力レベルから雑音を排除することも可能である。
Next, according to FIG. 6, the amplitude calculation circuit 42 described above is used.
The contents of the process corresponding to the calculation process of are described. A
When the program for amplitude calculation stored in the ROM 101 starts, the LU 100 determines whether or not the value of the input level x is larger than the default value in step S61. Set to maximum value. On the other hand, if it is determined in step S61 that the input level is less than or equal to the default value, in this case, the maximum value setting process is not performed, and the process proceeds to END. Thus, by repeating the same processing as the above processing for a plurality of input levels sequentially input from the non-linear conversion circuit to the amplitude calculation circuit, the maximum value of the input level (output of the non-linear conversion circuit 41) in a predetermined period. Can be obtained. In this example, the maximum value of the input level is obtained and used as the "amplitude" of each period. However, the multiplication function of the DSP can be used to obtain the amplitude in various ways. For example, not to calculate noise as "amplitude",
It is also possible to filter the input level and remove noise from the input level when calculating the amplitude.

【0039】このように、非線形変換回路により音声信
号中の振幅の小さい信号を引き伸ばして該信号の振幅や
時間軸を拡張すると、音声信号振幅の発生確率を平均化
できる。そして、この平均化により該音声信号に含まれ
る信号振幅の大きなノイズが圧縮される。従って、平均
化された音声信号に基づき利得を制御すれば、ノイズや
イントネーションの影響の少ない適正な利得制御が行え
る。
As described above, by expanding the signal having a small amplitude in the audio signal by the non-linear conversion circuit and expanding the amplitude and time axis of the signal, the occurrence probability of the audio signal amplitude can be averaged. Then, by this averaging, noise having a large signal amplitude included in the audio signal is compressed. Therefore, if the gain is controlled based on the averaged audio signal, proper gain control with less influence of noise and intonation can be performed.

【0040】図7は、本発明による他の音声用利得制御
装置の構成を示している。この音声利得制御装置によれ
ば、音声入力装置1から音声信号が入力されると、まず
度数分布作成手段2によって音声信号の所定区間ごとに
おける振幅の度数分布が作成される。この度数分布は、
音声信号の所定区間(例えばサンプリング期間)を細分
化すると共に、各期間ごとにその音声信号の振幅を量子
化し、この量子化した値が一致する期間の数を計数して
作成したヒストグラムである。
FIG. 7 shows the configuration of another voice gain control apparatus according to the present invention. According to this audio gain control device, when an audio signal is input from the audio input device 1, first, the frequency distribution creating means 2 creates an amplitude frequency distribution of the audio signal in each predetermined section. This frequency distribution is
It is a histogram created by subdividing a predetermined section (for example, a sampling period) of an audio signal, quantizing the amplitude of the audio signal for each period, and counting the number of periods in which the quantized values match.

【0041】次に、有音部分抽出手段3がこの度数分布
から有音部分のみを抽出する。度数分布は、その所定区
間内における音声信号の振幅レベルごとの度数を表すも
のであるため、ある一定の振幅レベル以下の度数を切り
捨てれば、有音部分のみの度数分布を抽出することがで
きる。
Next, the voiced part extraction means 3 extracts only the voiced part from this frequency distribution. Since the frequency distribution represents the frequency for each amplitude level of the audio signal in the predetermined section, the frequency distribution of only the voiced part can be extracted by discarding the frequency below a certain amplitude level. ..

【0042】そして、平均値計算手段4がこの有音部分
のみを抽出した度数分布からその振幅の平均値を計算
し、利得決定手段5がこの平均値に基づいて利得を決定
する。従って、音声信号の有音部分のレベルが一定であ
れば、無音部分の多い少ないにかかわりなく一定の平均
値を得ることができ、これによって有音部分にのみ基づ
いた利得を決定することができる。
Then, the average value calculating means 4 calculates the average value of the amplitudes from the frequency distribution obtained by extracting only this voiced portion, and the gain determining means 5 determines the gain based on this average value. Therefore, if the level of the voiced portion of the audio signal is constant, a constant average value can be obtained regardless of the number of silent portions, and thus the gain based only on the voiced portion can be determined. ..

【0043】この結果、本発明の音声用利得制御装置に
よれば、音声信号の無音部分の影響を受けることなく、
常に最適な利得制御を行うことができるようになる。
As a result, according to the audio gain control apparatus of the present invention, the audio gain control apparatus is not affected by the silent part of the audio signal,
It becomes possible to always perform optimum gain control.

【0044】図8は、本発明の音声用利得制御装置を備
えた音声記録再生装置の構成を示す。
FIG. 8 shows the configuration of an audio recording / reproducing apparatus equipped with the audio gain control apparatus of the present invention.

【0045】音声入力装置10から入力された音声信号
は、符号化回路12と度数分布作成回路13aとに送ら
れる。符号化回路12は、通常のPCM(pulse code m
odulation)方式によって音声信号をディジタルデータ
に変換する回路でもよいが、好ましくは、長時間記録を
可能にするために、ADPCM(adaptive differentia
l PCM)方式等によって符号化データの圧縮を行う回路
である。符号化回路17によって符号化されたディジタ
ルデータは、後に復号化回路16によって復号化され
る。復号化回路16は、符号化回路12によって符号化
されたディジタルデータを同じ方式の逆変換によって音
声信号に復号化する回路である。そして、復号化回路1
6によって復号化された音声信号は、振幅調整回路19
を介して音声出力装置18に送られ、音声として再生さ
れる。本実施例の音声コーデックは、符号化回路12と
復号化回路16とからなる。
The voice signal input from the voice input device 10 is sent to the encoding circuit 12 and the frequency distribution creating circuit 13a. The encoding circuit 12 uses a normal PCM (pulse code m).
Although it may be a circuit for converting an audio signal into digital data by an odulation method, it is preferable to use an ADPCM (adaptive differentia) in order to enable recording for a long time.
l PCM) is a circuit that compresses encoded data using the method. The digital data encoded by the encoding circuit 17 is later decoded by the decoding circuit 16. The decoding circuit 16 is a circuit that decodes the digital data encoded by the encoding circuit 12 into an audio signal by inverse conversion of the same method. And the decoding circuit 1
The audio signal decoded by 6 is an amplitude adjusting circuit 19
Is sent to the audio output device 18 and is reproduced as audio. The audio codec of this embodiment includes an encoding circuit 12 and a decoding circuit 16.

【0046】度数分布作成回路13aは、入力された音
声信号をサンプリング及び量子化して、所定サンプリン
グ数の期間ごとに量子化された振幅の度数分布を作成す
る回路である。この度数分布は、音声信号の所定サンプ
リング数の期間内において、量子化した音声信号の振幅
が一致するサンプリング期間の数を計数して作成したヒ
ストグラムである。度数分布作成回路13aの出力は、
有音部分抽出回路13bに接続されている。有音部分抽
出回路13bは、度数分布作成回路13aが作成した度
数分布から有音部分のみを抽出する回路である。また、
有音部分抽出回路13bの出力は、平均値計算回路13
cに接続されている。平均値計算回路13cは、入力さ
れた度数分布に基づいて、その所定サンプリング数の期
間内の振幅レベルの平均値を計算する回路である。そし
て、平均値計算回路13cが計算した振幅レベルの平均
値に基づいて、後に利得決定回路14が音声信号の利得
を決定する。
The frequency distribution creating circuit 13a is a circuit which samples and quantizes the input audio signal and creates a frequency distribution of the quantized amplitude for each period of a predetermined sampling number. This frequency distribution is a histogram created by counting the number of sampling periods in which the amplitudes of the quantized audio signals match within a predetermined number of sampling periods of the audio signals. The output of the frequency distribution creating circuit 13a is
It is connected to the voiced part extraction circuit 13b. The voiced part extraction circuit 13b is a circuit for extracting only the voiced part from the frequency distribution created by the frequency distribution creation circuit 13a. Also,
The output of the voiced part extraction circuit 13b is the average value calculation circuit 13
connected to c. The average value calculation circuit 13c is a circuit that calculates the average value of the amplitude levels within the period of the predetermined sampling number based on the input frequency distribution. Then, the gain determination circuit 14 later determines the gain of the audio signal based on the average value of the amplitude levels calculated by the average value calculation circuit 13c.

【0047】利得決定回路14の出力は、利得制御回路
17を介して振幅調整回路19に接続されている。利得
制御回路18は、利得決定回路14が決定した利得に基
づいて振幅調整回路19を制御し、復号化回路16が復
号化した音声信号の利得を調整する回路である。
The output of the gain determining circuit 14 is connected to the amplitude adjusting circuit 19 via the gain control circuit 17. The gain control circuit 18 is a circuit that controls the amplitude adjustment circuit 19 based on the gain determined by the gain determination circuit 14 and adjusts the gain of the audio signal decoded by the decoding circuit 16.

【0048】本実施例の度数分布作成回路13aと有音
部分抽出回路13bと平均値計算回路13cとを、図1
に示された実施例の振幅計算回路42として用いること
も可能である。
The frequency distribution creating circuit 13a, the voiced part extracting circuit 13b, and the average value calculating circuit 13c of this embodiment are shown in FIG.
It can also be used as the amplitude calculation circuit 42 of the embodiment shown in FIG.

【0049】以下に、上記構成の音声用利得制御装置を
備えた音声記録再生装置の動作を説明する。
The operation of the audio recording / reproducing apparatus equipped with the audio gain control device having the above-described structure will be described below.

【0050】音声入力装置10からの音声信号は、符号
化回路12と度数分布作成回路13aとに入力される。
符号化回路12に送られた音声信号は、ADPCM方式
等によってディジタルデータに符号化され、適宜図示し
ない半導体記憶装置に一旦記憶される。
The voice signal from the voice input device 10 is input to the encoding circuit 12 and the frequency distribution creating circuit 13a.
The audio signal sent to the encoding circuit 12 is encoded into digital data by the ADPCM system or the like, and is temporarily stored in a semiconductor memory device (not shown) as appropriate.

【0051】度数分布作成回路13aに送られた音声信
号は、まず所定サンプリング数の期間ごとに度数分布が
作成される。次に、この度数分布は、有音部分抽出回路
13bに送られて有音部分のみが抽出される。度数分布
は、その所定サンプリング数の期間内における音声信号
の振幅レベルごとの度数を表すものであるため、ある一
定の振幅レベル以下の度数を切り捨てることにより、有
音部分のみの度数分布を抽出することができる。そし
て、この有音部分のみを抽出した度数分布は、平均値計
算回路13cに送られて平均値が計算され、適宜図示し
ない半導体記憶装置に一旦記憶される。従って、音声信
号における有音部分のレベルが一定であれば、無音部分
の多い少ないにかかわりなく一定の平均値を得ることが
できる。
The frequency distribution of the voice signal sent to the frequency distribution creating circuit 13a is first created every predetermined sampling period. Next, this frequency distribution is sent to the voiced part extraction circuit 13b to extract only the voiced part. Since the frequency distribution represents the frequency for each amplitude level of the audio signal within the period of the predetermined sampling number, the frequency distribution of only the voiced part is extracted by truncating the frequency below a certain amplitude level. be able to. Then, the frequency distribution obtained by extracting only the voiced portion is sent to the average value calculation circuit 13c, the average value is calculated, and the average value is temporarily stored in a semiconductor memory device (not shown). Therefore, if the level of the voiced portion in the audio signal is constant, a constant average value can be obtained regardless of the number of silent portions.

【0052】上述のようにして半導体記憶装置に記憶さ
れたディジタルデータは、順次読み出されて復号化回路
16により音声信号に復号化される。そして、この音声
信号は、振幅調整回路19を介して音声出力装置18に
送られ音声として再生される。また、この半導体記憶装
置に記憶された平均値のデータは、ディジタルデータが
所定サンプリング数だけ読み出されるたびに1つずつ読
み出され、利得決定回路14に送られる。利得決定回路
14では、この平均値のデータに基づいて利得を決定
し、これを利得制御回路17に送ることにより、振幅調
整回路19を通過する音声信号の利得の調整を行う。
The digital data stored in the semiconductor memory device as described above is sequentially read and decoded by the decoding circuit 16 into a voice signal. Then, this audio signal is sent to the audio output device 18 via the amplitude adjusting circuit 19 and reproduced as audio. Further, the average value data stored in the semiconductor memory device is read one by one each time the digital data is read by a predetermined sampling number and sent to the gain determination circuit 14. The gain determination circuit 14 determines the gain based on the average value data and sends it to the gain control circuit 17 to adjust the gain of the audio signal passing through the amplitude adjustment circuit 19.

【0053】この結果、音声出力装置18から再生され
た音声は、元の音声における無音部分の多い少ないに影
響されることなく、有音部分のみに基づいて常に最適な
利得制御を行うことができるようになる。
As a result, the voice reproduced from the voice output device 18 can be always subjected to the optimum gain control based on only the voiced portion without being affected by the large amount of the silent portion in the original voice. Like

【0054】図9は、本発明による音声録音再生装置の
構成を示している。音声入力装置21から入力された音
声信号は、符号化手段22により必要に応じてデータ圧
縮されて符号化される。また、この音声信号は、平均値
計算手段23によって所定区間ごとの振幅の平均値を計
算され、利得決定(利得係数計算)手段24により利得
係数が計算される。このようにして計算された利得係数
は、符号化手段22によって符号化された所定区間ごと
のディジタルデータと共に半導体記憶装置25に記憶さ
れる。
FIG. 9 shows the structure of a voice recording / reproducing apparatus according to the present invention. The audio signal input from the audio input device 21 is data-compressed and encoded by the encoding means 22 as required. The average value calculating means 23 calculates the average value of the amplitude of each predetermined section, and the gain determining (gain coefficient calculating) means 24 calculates the gain coefficient of this audio signal. The gain coefficient calculated in this way is stored in the semiconductor memory device 25 together with the digital data for each predetermined section encoded by the encoding means 22.

【0055】この音声信号を再生する場合には、まず復
号化手段26がディジタルデータを半導体記憶装置25
から読み出し復号化する。また、利得制御手段27は、
所定区間のディジタルデータが復号化されるたびに、半
導体記憶装置25から利得係数を読み出し、この利得係
数に基づいて復号化された音声信号の利得を調整する。
When reproducing this audio signal, the decoding means 26 first converts the digital data into the semiconductor memory device 25.
Read from and decrypt. Further, the gain control means 27
Each time the digital data in the predetermined section is decoded, the gain coefficient is read from the semiconductor memory device 25, and the gain of the decoded audio signal is adjusted based on the gain coefficient.

【0056】この結果、本発明の音声記録再生装置によ
れば、従来と同様に音声信号の利得を調整して、例えば
音声出力装置28から出力することができる。しかも、
本発明の場合には、利得係数が所定区間にわたって一定
となるので、この区間内の音声の抑揚をある程度保存し
て再生することができる。さらに、この利得係数は、音
声の所定区間ごとに生成されるものであるため、音声信
号のディジタルデータに付加しても、データ量が大幅に
増加するようなこともない。また、利得制御手段27の
利得係数を強制的に固定すれば、元の音声の大きさや抑
揚をそのままにして再生することもできる。
As a result, according to the audio recording / reproducing apparatus of the present invention, the audio signal gain can be adjusted and output from the audio output device 28, as in the conventional case. Moreover,
In the case of the present invention, since the gain coefficient is constant over a predetermined section, it is possible to store and reproduce the voice intonation within this section to some extent. Furthermore, since this gain coefficient is generated for each predetermined section of voice, even if it is added to the digital data of the voice signal, the data amount does not increase significantly. Further, if the gain coefficient of the gain control means 27 is forcibly fixed, it is possible to reproduce the original voice with the original volume and intonation unchanged.

【0057】図10は、留守番電話機能付き電話機に用
いられた本発明の音声録音再生装置の構成を示すブロッ
ク図である。音声入力装置(電話回線)10から入力さ
れた音声信号は、スイッチ11の接点11a及び接点1
1bによって二方の回路に切り替えて送られる。スイッ
チ11の接点11a側の回路は、スイッチ9の接点9a
を介して受話器18bに接続されている。また、スイッ
チ11の接点11b側の回路は、二分岐されて符号化回
路12と平均値計算回路13dの入力に接続されてい
る。
FIG. 10 is a block diagram showing the structure of a voice recording / reproducing apparatus of the present invention used in a telephone having an answering machine function. The voice signal input from the voice input device (telephone line) 10 is the contact point 11 a and the contact point 1 of the switch 11.
It is switched to and sent from the two circuits by 1b. The circuit on the side of the contact 11a of the switch 11 is the contact 9a of the switch 9.
It is connected to the handset 18b via. The circuit on the side of the contact 11b of the switch 11 is branched into two and connected to the inputs of the encoding circuit 12 and the average value calculating circuit 13d.

【0058】符号化回路12は、通常のPCM(pulse
code modulation)方式によって音声信号をディジタル
データに変換する回路でもよいが、一般には長時間記録
を可能にするために、ADPCM(adaptive different
ial PCM)方式等によって符号化データの圧縮を行う回
路を使用する。符号化回路12によって符号化されたデ
ィジタルデータは、半導体記憶装置15に順次記憶され
る。また、半導体記憶装置15に記憶されたディジタル
データは、復号化回路16によって順次読み出される。
復号化回路16は、符号化回路12によって符号化され
たディジタルデータを同じ方式の逆変換によって音声信
号に復号化する回路である。
The encoding circuit 12 uses a normal PCM (pulse
A circuit for converting an audio signal into digital data by a code modulation) method may be used, but in general, ADPCM (adaptive different) is used to enable long-time recording.
A circuit that compresses the encoded data by the ial PCM) method is used. The digital data encoded by the encoding circuit 12 is sequentially stored in the semiconductor memory device 15. Further, the digital data stored in the semiconductor memory device 15 is sequentially read by the decoding circuit 16.
The decoding circuit 16 is a circuit that decodes the digital data encoded by the encoding circuit 12 into an audio signal by inverse conversion of the same method.

【0059】平均値計算回路13dは、入力された音声
信号をサンプリングして所定サンプリング数の期間ごと
にその振幅の大きさの平均値を計算する回路である。な
お、この音声信号のサンプリングは、符号化回路12に
おけるサンプリングと共に一括して行うこともできる。
平均値計算回路13dが計算した平均値は、利得決定回
路14に送られる。利得決定回路14は、平均値計算回
路13dが計算した平均値と所定の基準振幅値とを比較
して、その比から利得係数を計算する回路である。そし
て、利得決定回路14によって計算された利得係数も、
半導体記憶装置15の他の領域に順次記憶される。ただ
し、この利得係数は、音声信号の複数のサンプリング期
間ごとに1データが生成されるだけので、符号化回路1
2から出力されるディジタルデータと比較しても僅かな
記憶容量を占有するにすぎない。半導体記憶装置15に
記憶された利得係数は、利得制御回路17によって読み
出される。利得制御回路17は、復号化回路16から出
力された音声信号に、この音声信号の所定期間ごとに読
み出した利得係数を乗ずることにより、再生する音声信
号の利得を調整する回路である。そして、利得制御回路
17の出力も、スイッチ9の接点9bを介して受話器1
8bに接続されている。
The average value calculation circuit 13d is a circuit for sampling the input audio signal and calculating the average value of the amplitudes thereof for each period of a predetermined sampling number. It should be noted that the sampling of the audio signal can be performed together with the sampling in the encoding circuit 12.
The average value calculated by the average value calculation circuit 13d is sent to the gain determination circuit 14. The gain determination circuit 14 is a circuit that compares the average value calculated by the average value calculation circuit 13d with a predetermined reference amplitude value and calculates a gain coefficient from the ratio. The gain coefficient calculated by the gain determination circuit 14 is also
The data is sequentially stored in other areas of the semiconductor memory device 15. However, since only one data is generated for this gain coefficient for each of a plurality of sampling periods of the audio signal, the encoding circuit 1
It occupies only a small storage capacity as compared with the digital data output from 2. The gain coefficient stored in the semiconductor memory device 15 is read by the gain control circuit 17. The gain control circuit 17 is a circuit that adjusts the gain of the audio signal to be reproduced by multiplying the audio signal output from the decoding circuit 16 by the gain coefficient read out every predetermined period of the audio signal. The output of the gain control circuit 17 is also transmitted through the contact 9b of the switch 9 to the receiver 1
It is connected to 8b.

【0060】上記構成の音声記録再生装置の動作を説明
する。
The operation of the audio recording / reproducing apparatus having the above configuration will be described.

【0061】通常の通話時には、スイッチ11が接点1
1a側に接続され、スイッチ9が接点9a側に接続され
る。従って、電話回線10からの音声信号は、そのまま
受話器18bに送られ、通常の通話を行うことができ
る。
During a normal call, the switch 11 contacts the contact 1.
The switch 9 is connected to the contact 9a side. Therefore, the voice signal from the telephone line 10 is sent to the handset 18b as it is, and a normal call can be performed.

【0062】また、留守番電話機能が働いている場合に
は、スイッチ11が接点11b側に接続される。従っ
て、電話回線10からの音声信号は、まず符号化回路1
2と平均値計算回路13dとに入力される。
When the answering machine function is working, the switch 11 is connected to the contact 11b side. Therefore, the voice signal from the telephone line 10 is first transmitted to the encoding circuit 1
2 and the average value calculation circuit 13d.

【0063】符号化回路12に送られた音声信号は、A
DPCM方式等によってディジタル信号に符号化され、
半導体記憶装置15に順次記憶される。また、平均値計
算回路13dに送られた音声信号は、所定サンプリング
数の期間ごとにその振幅の大きさの平均値が計算され
る。そして、この平均値は、利得決定回路14に送られ
て所定の基準振幅値と比較され、その比から利得係数が
計算されると共に、この利得係数が半導体記憶装置15
の他の領域に順次記憶される。
The audio signal sent to the encoding circuit 12 is A
Is encoded into a digital signal by the DPCM method,
The data is sequentially stored in the semiconductor memory device 15. The average value of the amplitude of the audio signal sent to the average value calculation circuit 13d is calculated for each period of a predetermined sampling number. Then, this average value is sent to the gain determination circuit 14 and compared with a predetermined reference amplitude value, a gain coefficient is calculated from the ratio, and this gain coefficient is calculated in the semiconductor memory device 15.
Are sequentially stored in other areas.

【0064】上記のようにして留守中に記録された電話
のメッセージを再生する場合には、スイッチ11を接点
21b側に接続する。すると、復号化回路16が半導体
記憶装置15からディジタルデータを順次読み出しなが
らこれを音声信号に復号化する。また、この際、利得制
御回路17も、復号化された音声信号の所定期間ごとに
半導体記憶装置15の他の領域から利得係数を順次読み
出し、この利得係数を該当期間内の音声信号に乗ずるこ
とにより利得を調整する。従って、スイッチ22を介し
て受話器18に出力される音声信号は利得制御されたも
のとなる。ただし、この利得係数は、複数のサンプリン
グ期間について一定となるので、この期間内での音声の
抑揚はある程度保存される。
When reproducing the telephone message recorded during the absence as described above, the switch 11 is connected to the contact 21b side. Then, the decoding circuit 16 sequentially reads the digital data from the semiconductor memory device 15 and decodes it into an audio signal. At this time, the gain control circuit 17 also sequentially reads the gain coefficient from another area of the semiconductor memory device 15 for each predetermined period of the decoded audio signal, and multiplies the gain coefficient by the audio signal in the corresponding period. Adjust the gain by. Therefore, the voice signal output to the handset 18 via the switch 22 is gain-controlled. However, since this gain coefficient is constant for a plurality of sampling periods, the intonation of speech within this period is preserved to some extent.

【0065】また、上記メッセージを利得制御をせずに
聞きたい場合には、利得制御回路17の利得係数を半導
体記憶装置15から読み出さずに固定して設定する。す
ると、復号化回路16で復号化された音声信号を元の音
声の大きさや抑揚を保持したままで再生することができ
るようになる。
If the user wants to hear the above message without controlling the gain, the gain coefficient of the gain control circuit 17 is fixed without being read from the semiconductor memory device 15. Then, the audio signal decoded by the decoding circuit 16 can be reproduced while maintaining the original audio volume and intonation.

【0066】なお、本実施例の平均値計算回路13dの
代わりに、図8に示されている度数分布作成回路13
a、有音部分抽出回路13b及び平均値計算回路13c
を用いてもよい。
The frequency distribution creating circuit 13 shown in FIG. 8 is used instead of the average value calculating circuit 13d of this embodiment.
a, voiced part extraction circuit 13b, and average value calculation circuit 13c
May be used.

【0067】[0067]

【発明の効果】このように、本発明の音声用利得制御装
置によれば、非線形変換回路により音声信号の振幅の発
生確率を平均化する非線形変換処理を行い、続いて平均
化された信号により利得制御に必要な振幅を求め、求め
られた振幅に対応した利得により音声信号の利得制御を
行う構成をとるので、ノイズやイントネーションの悪影
響を排除できる。従って、利得制御の信頼性を向上で
き、音声コーデックを備えた音声録音再生装置に応用す
る場合は、音質の向上を格段に図れる利点がある。ま
た、音声信号に無音部分が占める割り合いの多い少ない
に影響されることなく、有音部分のみに基づいて常に最
適な利得制御を行うことができるようになる。
As described above, according to the voice gain control apparatus of the present invention, the non-linear conversion circuit performs the non-linear conversion processing for averaging the occurrence probabilities of the amplitude of the voice signal, and then the averaged signal is used. Since the amplitude required for gain control is obtained and the gain of the audio signal is controlled by the gain corresponding to the obtained amplitude, the adverse effect of noise and intonation can be eliminated. Therefore, the reliability of the gain control can be improved, and when applied to a voice recording / reproducing apparatus equipped with a voice codec, there is an advantage that the sound quality can be remarkably improved. Further, the optimum gain control can always be performed based on only the voiced portion without being affected by the large proportion of the silent portion occupied in the audio signal.

【0068】更に、記録データの増加を最小限に留めな
がら、音声の大きさや抑揚を損なうことなく再生するこ
とができるようになる。
Further, it becomes possible to reproduce the sound without impairing the loudness and the intonation of the sound, while suppressing the increase of the recorded data to the minimum.

【図面の簡単な説明】[Brief description of drawings]

【図1】本発明の音声用利得制御装置が音声コーデック
を備えた音声記録再生装置に用いられたときのブロック
図を示している。
FIG. 1 is a block diagram when a voice gain control device of the present invention is used in a voice recording / reproducing device equipped with a voice codec.

【図2】Digital Signal Processorの構成を示してい
る。
FIG. 2 shows a configuration of a Digital Signal Processor.

【図3】本発明の実施例に用いられる非線形変換回路の
変換動作の一部を示すフローチャートである。
FIG. 3 is a flowchart showing a part of conversion operation of the nonlinear conversion circuit used in the embodiment of the present invention.

【図4】実施例で行われる上記変換動作の残りを示すフ
ローチャートである。
FIG. 4 is a flowchart showing the rest of the conversion operation performed in the embodiment.

【図5】実施例で行われる非線形変換の変換関係を示す
グラフである。
FIG. 5 is a graph showing a conversion relationship of non-linear conversion performed in the example.

【図6】本発明の実施例に用いられる振幅計算回路の動
作を示すフローチャートである。
FIG. 6 is a flowchart showing the operation of the amplitude calculation circuit used in the embodiment of the present invention.

【図7】本発明による音声用利得制御装置の構成を示し
ている。
FIG. 7 shows a configuration of a voice gain control device according to the present invention.

【図8】本発明の音声用利得制御装置を備えた音声記録
再生装置の構成を示す。
FIG. 8 shows a configuration of an audio recording / reproducing apparatus including an audio gain control device of the present invention.

【図9】本発明による音声録音再生装置の構成を示して
いる。
FIG. 9 shows a configuration of a voice recording / reproducing apparatus according to the present invention.

【図10】留守番電話機能付き電話機に用いられた本発
明の音声録音再生装置の構成を示すブロック図である。
FIG. 10 is a block diagram showing a configuration of a voice recording / reproducing apparatus of the present invention used for a telephone with an answering machine function.

【符号の説明】[Explanation of symbols]

10 音声入力装置 20 音声コーデック装置 41 非線形変換回路 42 振幅計算回路 43 利得決定回路 10 voice input device 20 voice codec device 41 non-linear conversion circuit 42 amplitude calculation circuit 43 gain determination circuit

Claims (7)

【特許請求の範囲】[Claims] 【請求項1】音声入力装置から入力される音声信号の利
得を自動的に制御する音声用利得制御装置において、 該音声信号の振幅の小さい信号の振幅を引き伸ばし、該
振幅の小さい信号と振幅の大きい信号の発生確率を平均
化する非線形変換回路と、 該非線形変換回路により平均化された音声信号に基づき
利得制御用の振幅値を算出し、算出値により利得を決定
する利得決定回路とを備え、決定された該利得により該
音声信号の振幅を制御する音声用利得制御装置。
1. A voice gain control device for automatically controlling the gain of a voice signal input from a voice input device, wherein the amplitude of a voice signal having a small amplitude is extended, and the amplitude of the voice signal having a small amplitude is compared with that of the voice signal. A non-linear conversion circuit that averages the occurrence probabilities of large signals, and a gain determination circuit that calculates an amplitude value for gain control based on the audio signal averaged by the non-linear conversion circuit and determines the gain based on the calculated value. A gain control device for voice, which controls the amplitude of the voice signal according to the determined gain.
【請求項2】前記非線形変換回路および前記利得決定回
路が乗算器、ROM、RAMおよび演算装置を備えたデ
ジタルシグナルプロセッサで構成され、該非線形変換回
路および前記利得決定回路の演算処理内容をソフトウェ
ア的に行う請求項1に記載の音声用利得制御装置。
2. The non-linear conversion circuit and the gain determination circuit are constituted by a digital signal processor provided with a multiplier, a ROM, a RAM and an arithmetic unit, and the arithmetic processing contents of the non-linear conversion circuit and the gain determination circuit are realized by software. The audio gain control device according to claim 1, wherein
【請求項3】前記非線形変換回路のソフトウェア的演算
処理を非線形量子化法の一手法であるμ則圧縮特性法に
よって行う請求項2に記載の音声用利得制御装置。
3. The audio gain control device according to claim 2, wherein the software operation processing of the non-linear conversion circuit is performed by a μ-law compression characteristic method which is one of non-linear quantization methods.
【請求項4】前記利得決定回路のソフトウェア的演算処
理を、前記非線形変換回路から前記利得決定回路に与え
られる入力レベルと、予め設定された該入力レベルの最
大値とを比較し、該入力レベルが該最大値よりも大きい
場合に、該最大値を入力レベルとして採用し、該最大値
に従って利得を決定するソフトウェア的処理手順で行う
請求項2に記載の音声用利得制御装置。
4. A software operation process of the gain determination circuit, which compares an input level given to the gain determination circuit from the non-linear conversion circuit with a preset maximum value of the input level to obtain the input level. Is larger than the maximum value, the gain control device for voice according to claim 2, wherein the maximum value is adopted as an input level and the gain is determined according to the maximum value by a software processing procedure.
【請求項5】前記デジタルシグナルプロセッサの乗算機
能を用いて前記非線形変換回路からの入力信号をフィル
タ処理した請求項2に記載の音声用利得制御装置。
5. The audio gain control device according to claim 2, wherein the input signal from the non-linear conversion circuit is filtered by using the multiplication function of the digital signal processor.
【請求項6】音声信号を符号化して記憶装置に記録する
音声記録再生装置において用いられる音声用利得制御装
置であって、 音声信号の所定区間ごとにおける振幅の度数分布を作成
する度数分布作成手段と、 該度数分布作成手段が作成した度数分布から有音部分の
みを抽出する有音部分抽出手段と、 該有音部分抽出手段が抽出した有音部分の度数分布から
その振幅の平均値を計算する平均値計算手段と、 該平均値計算手段が計算した平均値に基づいて利得を決
定する利得決定手段とを備えている音声用利得制御装
置。
6. A voice gain control device used in a voice recording / reproducing device for encoding a voice signal and recording it in a storage device, wherein a frequency distribution creating means for creating a frequency distribution of amplitude in a predetermined section of the voice signal. And a voiced part extracting means for extracting only a voiced part from the frequency distribution created by the frequency distribution creating means, and an average value of the amplitudes thereof is calculated from the frequency distribution of the voiced parts extracted by the voiced part extracting means. A gain control device for voice, comprising: an average value calculating means for controlling the gain and a gain determining means for determining a gain based on the average value calculated by the average value calculating means.
【請求項7】音声信号を符号化して記憶装置に記録し、
これを復号化して再生する音声記録再生装置であって、 音声信号を符号化して該記憶装置に記録する符号化手段
と、 この音声信号の所定区間ごとの振幅の平均値を計算する
平均値計算手段と、 該平均値計算手段が計算した平均値から利得係数を計算
して該記憶装置に記録する利得係数計算手段と、 該記憶装置から符号化された信号を読み出し、復号化す
る復号化手段と、 該復号化手段が復号化した音声信号について、該利得係
数計算手段が計算した利得係数を該記憶装置から読み出
し、該利得計数に基づいて利得の調整を行う利得制御手
段とを備えている音声記録再生装置。
7. An audio signal is encoded and recorded in a storage device,
An audio recording / reproducing apparatus for decoding and reproducing the audio signal, comprising: an encoding means for encoding an audio signal and recording it in the storage device; and an average value calculation for calculating an average value of amplitudes of the audio signal for each predetermined section. Means, gain coefficient calculation means for calculating a gain coefficient from the average value calculated by the average value calculation means and recording it in the storage device, and decoding means for reading and decoding the encoded signal from the storage device And gain control means for reading the gain coefficient calculated by the gain coefficient calculation means from the storage device for the voice signal decoded by the decoding means, and adjusting the gain based on the gain count. Audio recording / playback device.
JP4110527A 1991-04-30 1992-04-28 Audio gain control device and audio recording / reproducing device Expired - Fee Related JP2965788B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP4110527A JP2965788B2 (en) 1991-04-30 1992-04-28 Audio gain control device and audio recording / reproducing device

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
JP9854191 1991-04-30
JP11738491 1991-05-22
JP3-117384 1991-05-23
JP3-98541 1991-05-23
JP11877591 1991-05-23
JP3-118775 1991-05-23
JP4110527A JP2965788B2 (en) 1991-04-30 1992-04-28 Audio gain control device and audio recording / reproducing device

Publications (2)

Publication Number Publication Date
JPH05204395A true JPH05204395A (en) 1993-08-13
JP2965788B2 JP2965788B2 (en) 1999-10-18

Family

ID=27468650

Family Applications (1)

Application Number Title Priority Date Filing Date
JP4110527A Expired - Fee Related JP2965788B2 (en) 1991-04-30 1992-04-28 Audio gain control device and audio recording / reproducing device

Country Status (1)

Country Link
JP (1) JP2965788B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0810722A2 (en) * 1996-05-28 1997-12-03 Nec Corporation Mobile telephone set with automatic level control means of sound signal
JP2005165021A (en) * 2003-12-03 2005-06-23 Fujitsu Ltd Device and method for noise reduction
JP2006191316A (en) * 2005-01-05 2006-07-20 Freescale Semiconductor Inc Voice signal processor
JP2020067531A (en) * 2018-10-23 2020-04-30 株式会社コーエーテクモゲームス Program, information processing method, and information processing device
CN113299310A (en) * 2020-02-21 2021-08-24 阿里巴巴集团控股有限公司 Sound signal processing method and device, electronic equipment and readable storage medium

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0810722A2 (en) * 1996-05-28 1997-12-03 Nec Corporation Mobile telephone set with automatic level control means of sound signal
EP0810722A3 (en) * 1996-05-28 1999-05-06 Nec Corporation Mobile telephone set with automatic level control means of sound signal
US6070088A (en) * 1996-05-28 2000-05-30 Nec Corporation Mobile telephone set with automatic sound level control
JP2005165021A (en) * 2003-12-03 2005-06-23 Fujitsu Ltd Device and method for noise reduction
JP4520732B2 (en) * 2003-12-03 2010-08-11 富士通株式会社 Noise reduction apparatus and reduction method
JP2006191316A (en) * 2005-01-05 2006-07-20 Freescale Semiconductor Inc Voice signal processor
JP2020067531A (en) * 2018-10-23 2020-04-30 株式会社コーエーテクモゲームス Program, information processing method, and information processing device
CN113299310A (en) * 2020-02-21 2021-08-24 阿里巴巴集团控股有限公司 Sound signal processing method and device, electronic equipment and readable storage medium

Also Published As

Publication number Publication date
JP2965788B2 (en) 1999-10-18

Similar Documents

Publication Publication Date Title
US5404315A (en) Automatic sound gain control device and a sound recording/reproducing device including arithmetic processor conducting a non-linear conversion
TW401671B (en) Silence compression for recorded voice messages
KR100477699B1 (en) Quantization noise shaping method and apparatus
US7369906B2 (en) Digital audio signal processing
JP2008504783A (en) Method and system for automatically adjusting the loudness of an audio signal
US20040128126A1 (en) Preprocessing of digital audio data for mobile audio codecs
EP1538602B1 (en) Wideband synthesis from a narrowband signal
JPH0644195B2 (en) Speech analysis and synthesis system having energy normalization and unvoiced frame suppression function and method thereof
JP4657570B2 (en) Music information encoding apparatus and method, music information decoding apparatus and method, program, and recording medium
JP3784583B2 (en) Audio storage device
US7565283B2 (en) Method and system for controlling potentially harmful signals in a signal arranged to convey speech
JPWO2005057550A1 (en) Audio compression / decompression equipment
JP2965788B2 (en) Audio gain control device and audio recording / reproducing device
JP2003280691A (en) Voice processing method and voice processor
JP3289512B2 (en) Automatic gain control by unvoiced sound detection
JP2000349893A (en) Voice reproduction method and voice reproduction device
JP4556866B2 (en) High efficiency encoding program and high efficiency encoding apparatus
JP2002149198A (en) Voice encoder and decoder
JPH08307277A (en) Method and device for variable rate voice coding
JP4530567B2 (en) Digital audio decoding device
KR100592926B1 (en) digital audio signal preprocessing method for mobile telecommunication terminal
JPH075900A (en) Voice recording device
JPH10124097A (en) Voice recording and reproducing device
JP3510493B2 (en) Audio signal encoding / decoding method and recording medium recording the program
US6853869B1 (en) Method and apparatus for generating surround-sound data

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 19990802

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20070813

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080813

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080813

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090813

Year of fee payment: 10

LAPS Cancellation because of no payment of annual fees