JPH08265657A - Multiplex transmitter for video audio signal, receiver and transmission device - Google Patents

Multiplex transmitter for video audio signal, receiver and transmission device

Info

Publication number
JPH08265657A
JPH08265657A JP6318095A JP6318095A JPH08265657A JP H08265657 A JPH08265657 A JP H08265657A JP 6318095 A JP6318095 A JP 6318095A JP 6318095 A JP6318095 A JP 6318095A JP H08265657 A JPH08265657 A JP H08265657A
Authority
JP
Japan
Prior art keywords
signal
audio
clock
video
audio signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP6318095A
Other languages
Japanese (ja)
Other versions
JP3010573B2 (en
Inventor
Kenji Taniguchi
憲司 谷口
Masatoshi Tanaka
正敏 田仲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP6318095A priority Critical patent/JP3010573B2/en
Priority to US08/616,191 priority patent/US5929921A/en
Publication of JPH08265657A publication Critical patent/JPH08265657A/en
Application granted granted Critical
Publication of JP3010573B2 publication Critical patent/JP3010573B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Television Receiver Circuits (AREA)
  • Television Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

PURPOSE: To allow a relation of phase of an audio signal with respect to a phase of a video signal to be kept in a transmitter side and a receiver side and to reproduce an audio signal with less jitter and high quality and a small circuit scale by multiplexing audio clock information onto the audio signal based on a horizontal phase signal and a vertical phase signal and transmitting the video signal and the audio signal while being multiplexed with each other. CONSTITUTION: A horizontal counter 105 and a vertical counter 106 use a video clock to count a horizontal phase signal and a vertical phase signal of a received video signal respectively and provides the count to an audio clock signal multiplexer circuit 107. The audio clock signal multiplexer circuit 107 generates audio clock information based on the audio clock, the horizontal phase signal and the vertical phase signal outputted from an audio clock oscillator 104 and multiplexes the audio clock information onto the audio signal. The audio signal multiplexed with the audio clock information is stored once in a buffer memory 108 and multiplexed onto the video signal for a blanking period by a signal multiplexer 109 and the resulting signal is outputted from a multiplex signal output terminal 110.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【産業上の利用分野】本発明は、映像信号のブランキン
グ期間に音声信号を多重する映像音声多重信号の送信及
び受信を行うための映像音声信号多重送信装置、受信装
置及びそれらを組み合わせた伝送装置に関するものであ
る。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a video / audio signal multiplex transmission apparatus, a reception apparatus and a combination thereof for transmitting and receiving a video / audio multiplex signal for multiplexing an audio signal during a blanking period of the video signal. It relates to the device.

【0002】[0002]

【従来の技術】近年、映像信号又は音声信号の伝送、記
録において、従来のアナログ方式の機器に代わり、画質
劣化又は音質劣化の少ないディジタル方式の機器が普及
し始めている。特に、スタジオ機器においては、映像信
号と音声信号とを一本の伝送路で伝送する方式として、
SMPTE259M 規格が制定されている(例えば、テレビジョ
ン学会誌Vol.46,pp409〜413(1992)「2-1-3 局内伝送の
ディジタル化 (1)10Bスクランブル方式」)。これは、
シリアルディジタルインターフェースの規格であり、こ
のSMPTE259M 方式では、音声信号は映像信号のブランキ
ング期間に多重されて伝送される。
2. Description of the Related Art In recent years, in transmission and recording of a video signal or an audio signal, a digital type device with little deterioration in image quality or sound quality is beginning to prevail in place of the conventional analog type device. Especially in the studio equipment, as a method of transmitting the video signal and the audio signal through one transmission path,
The SMPTE259M standard has been established (for example, Journal of Television Engineering Vol. 46, pp409 to 413 (1992) "2-1-3 Digitization of in-station transmission (1) 10B scramble system"). this is,
This is a standard for serial digital interface. In this SMPTE259M system, audio signals are multiplexed and transmitted during the blanking period of video signals.

【0003】以下図面を参照して、従来のSMPTE259M 方
式の映像音声信号多重伝送装置について説明する。
A conventional SMPTE259M video / audio signal multiplex transmission apparatus will be described below with reference to the accompanying drawings.

【0004】図6は、従来の映像音声信号多重送信装置
の構成を示すブロック図である。この送信装置は、音声
信号を一時蓄積するバッファメモリ5、音声クロックを
出力する音声クロック発振器3、映像クロックを出力す
る映像クロック発振器4、及び映像信号及び音声信号を
多重する信号多重器6等により構成されている。
FIG. 6 is a block diagram showing the configuration of a conventional video / audio signal multiplex transmission apparatus. This transmitter includes a buffer memory 5 for temporarily storing an audio signal, an audio clock oscillator 3 for outputting an audio clock, a video clock oscillator 4 for outputting a video clock, and a signal multiplexer 6 for multiplexing a video signal and an audio signal. It is configured.

【0005】図6において、映像信号入力端子1から入
力されたディジタルの映像信号は、信号多重器6に入力
される。一方、音声信号入力端子2から入力されたディ
ジタルの音声信号は、音声クロック発振器3から出力さ
れる音声クロックによりバッファメモリ5に一旦蓄積さ
れ、その後、映像クロック発振器4から出力される映像
クロックによりバッファメモリ5から読み出され、読み
出された音声信号は信号多重器6へ入力される。このと
き、映像クロックの周波数は音声クロックの周波数より
大きいので、音声信号の読み出しが書き込みを追い越す
ことになるため、音声信号の読み出しが一時停止され、
ブランキング期間には音声信号以外のデータが多重され
る。
In FIG. 6, the digital video signal input from the video signal input terminal 1 is input to the signal multiplexer 6. On the other hand, the digital audio signal input from the audio signal input terminal 2 is temporarily stored in the buffer memory 5 by the audio clock output from the audio clock oscillator 3, and then buffered by the video clock output from the video clock oscillator 4. The audio signal read out from the memory 5 is input to the signal multiplexer 6. At this time, since the frequency of the video clock is higher than the frequency of the audio clock, the reading of the audio signal will overtake the writing, so the reading of the audio signal is suspended,
During the blanking period, data other than the audio signal is multiplexed.

【0006】信号多重器6は、映像信号入力端子1から
入力された映像信号のブランキング期間に、バッファメ
モリ5から読み出された音声信号を多重した後、その多
重信号を多重信号出力端子7へ出力する。ここで、映像
クロック発振器4から出力される映像クロックは入力さ
れる映像信号の周波数に同期したクロックであり、音声
クロック発振器5から出力される音声クロックは入力さ
れる音声信号の周波数に同期したクロックである。
The signal multiplexer 6 multiplexes the audio signal read from the buffer memory 5 in the blanking period of the video signal input from the video signal input terminal 1 and then outputs the multiplexed signal to the multiplexed signal output terminal 7 Output to. Here, the video clock output from the video clock oscillator 4 is a clock synchronized with the frequency of the input video signal, and the audio clock output from the audio clock oscillator 5 is a clock synchronized with the frequency of the input audio signal. Is.

【0007】音声信号入力端子2及び信号多重器6の間
にバッファメモリ5を用いるのは、映像信号と音声信号
が異なる周波数でディジタル化されているため、音声信
号を映像信号の周波数に変換する必要があり、これを音
声信号を音声クロックによりバッファメモリ5へ蓄積
し、バッファメモリ5からの読み出しを映像クロックで
行うことにより実現している。
The reason why the buffer memory 5 is used between the audio signal input terminal 2 and the signal multiplexer 6 is that the audio signal is converted into the frequency of the video signal because the video signal and the audio signal are digitized at different frequencies. This is necessary, and this is realized by accumulating an audio signal in the buffer memory 5 by the audio clock and reading from the buffer memory 5 by the video clock.

【0008】また、図7は、従来の映像音声信号多重受
信装置の構成を示すブロック図である。この受信装置
は、多重信号を映像信号及び音声信号に分離する信号分
離器12、分離された音声信号を一時蓄積するバッファ
メモリ14、映像クロックを出力する映像クロック発振
器15、映像クロックにより書き込みアドレスを発生す
る書き込みアドレス発生器16、音声クロックを出力す
る音声クロック発振器17、音声クロックにより読み出
しアドレスを発生する読み出しアドレス発生器18、書
き込みアドレスと読み出しアドレスとを比較する位相比
較器19等により構成されている。
FIG. 7 is a block diagram showing the structure of a conventional video / audio signal multiplex receiver. This receiving device includes a signal separator 12 for separating a multiplexed signal into a video signal and an audio signal, a buffer memory 14 for temporarily storing the separated audio signal, a video clock oscillator 15 for outputting a video clock, and a write address by the video clock. A write address generator 16 for generating, a voice clock oscillator 17 for outputting a voice clock, a read address generator 18 for generating a read address by the voice clock, a phase comparator 19 for comparing a write address and a read address, and the like. There is.

【0009】図7において、多重信号入力端子11から
入力された多重信号(例えば、図6の映像音声信号多重
送信装置から出力される多重信号)は、信号分離器12
によって、映像信号及び音声信号に分離され、映像信号
は映像信号出力端子13へ出力される。他方の音声信号
は送信側で映像信号の周波数に変換されているため、も
との音声信号の周波数に変換する必要がある。そこで、
分離された音声信号は、映像クロック発振器15から出
力される映像クロックを利用して、書き込みアドレス発
生器16から発生される書き込みアドレスによりバッフ
ァメモリ14に一旦蓄積する。このとき、送信側とは逆
に、書き込みを一時停止することにより、音声信号のみ
を選択して書き込みが行われる。バッファメモリ14に
蓄積された音声信号は、音声クロック発振器17から出
力される音声クロックを利用して、読み出しアドレス発
生器18から出力される読み出しアドレスにより読み出
される。送信と同じ周波数の音声クロックを再生するた
めに、書き込みアドレスと読み出しアドレスとの位相を
位相比較器19により比較し、その比較結果に基づい
て、音声クロック発振器17の発振クロックを制御して
いる。ここで、音声クロック発振器17及び位相比較器
19により構成される回路は、位相同期ループ(以後、
PLLと略記する)である。バッファメモリ14から読
み出された音声信号は、音声信号出力端子20へ出力さ
れる。
In FIG. 7, the multiplex signal input from the multiplex signal input terminal 11 (for example, the multiplex signal output from the video / audio signal multiplex transmitter of FIG. 6) is a signal separator 12.
Is separated into a video signal and an audio signal, and the video signal is output to the video signal output terminal 13. Since the other audio signal is converted to the frequency of the video signal on the transmitting side, it is necessary to convert it to the frequency of the original audio signal. Therefore,
The separated audio signal is temporarily stored in the buffer memory 14 by the write address generated by the write address generator 16 using the video clock output from the video clock oscillator 15. At this time, contrary to the transmitting side, by temporarily suspending writing, only the audio signal is selected and writing is performed. The audio signal stored in the buffer memory 14 is read by the read address output from the read address generator 18 using the audio clock output from the audio clock oscillator 17. In order to reproduce the audio clock having the same frequency as the transmission, the phase of the write address and the read address are compared by the phase comparator 19, and the oscillation clock of the audio clock oscillator 17 is controlled based on the comparison result. Here, the circuit constituted by the audio clock oscillator 17 and the phase comparator 19 is a phase locked loop (hereinafter,
It is abbreviated as PLL). The audio signal read from the buffer memory 14 is output to the audio signal output terminal 20.

【0010】[0010]

【発明が解決しようとする課題】しかしながら、上記の
ような多重伝送方法では、クロックの再生はバッファメ
モリの蓄積量による影響を受けるので、これを制御する
ために回路規模が大きくなり、又、PLL制御電圧レベ
ルが、バッファメモリのR,Wアドレスの位相差単位で
しか調節できないため、微調節ができず、PLL回路に
より平滑化されたクロックに残留位相変化が生じ、音声
信号の映像信号に対する位相関係を送信側と受信側で保
存することができないという課題がある。
However, in the above-mentioned multiplex transmission method, since the clock reproduction is affected by the amount of accumulation in the buffer memory, the circuit scale becomes large in order to control it, and the PLL is also used. Since the control voltage level can be adjusted only by the phase difference unit of the R and W addresses of the buffer memory, fine adjustment cannot be performed, and the residual phase change occurs in the clock smoothed by the PLL circuit, and the phase of the audio signal with respect to the video signal is changed. There is a problem that the relationship cannot be saved on the sending side and the receiving side.

【0011】本発明は、従来の映像音声信号多重伝送に
おけるこのような課題を考慮し、回路規模が小さくで
き、音声信号の映像信号に対する位相関係を送信側と受
信側で保存することができ、かつ、ジッタの少ない高品
質な音声信号が再生可能な映像音声信号多重送信装置、
受信装置及び伝送装置を提供することを目的とするもの
である。
In consideration of such a problem in the conventional video / audio signal multiplex transmission, the present invention can reduce the circuit scale and save the phase relationship of the audio signal with respect to the video signal on the transmitting side and the receiving side. Also, a video / audio signal multiplex transmission device capable of reproducing a high-quality audio signal with little jitter,
It is an object to provide a receiving device and a transmitting device.

【0012】[0012]

【課題を解決するための手段】請求項1の本発明は、映
像信号の水平位相信号を出力する水平カウンタと、映像
信号の垂直位相信号を出力する垂直カウンタと、それら
出力される水平位相信号及び垂直位相信号に基づいて、
音声信号に音声クロック情報を多重する音声クロック信
号多重回路と、その音声クロック情報が多重された音声
信号及び映像信号を多重し、その多重信号を送出する信
号多重手段とを備えた映像音声信号多重送信装置であ
る。
According to a first aspect of the present invention, there is provided a horizontal counter for outputting a horizontal phase signal of a video signal, a vertical counter for outputting a vertical phase signal of the video signal, and a horizontal phase signal output therefrom. And based on the vertical phase signal,
Video / audio signal multiplexing including an audio clock signal multiplexing circuit for multiplexing audio clock information on an audio signal, and a signal multiplexing means for multiplexing the audio signal and the video signal with the audio clock information multiplexed and sending the multiplexed signal It is a transmitter.

【0013】請求項2の本発明は、請求項1の映像音声
信号多重送信装置から、固定長データのフォーマットを
持つディジタル信号の、映像信号のブランキング期間に
音声信号が多重された多重信号を受信し、その受信した
多重信号を映像信号及び音声クロック情報が多重されて
いる音声信号に分離する信号分離手段と、その分離され
た映像信号の水平位相信号を出力する水平カウンタと、
映像信号の垂直位相信号を出力する垂直カウンタと、そ
れら出力される水平位相信号及び垂直位相信号に基づい
て、音声信号に多重された音声クロック情報から音声ク
ロックを再生する音声クロック再生回路と、分離された
音声信号を一時蓄積し、その蓄積された音声信号を再生
された音声クロックを用いて読み出すバッファメモリ
と、その読み出された音声信号を音声クロックに基づい
て処理する音声信号処理回路とを備えた映像音声信号多
重受信装置である。
According to a second aspect of the present invention, from the video / audio signal multiplex transmitting apparatus according to the first aspect, a multiplex signal of a digital signal having a fixed length data format in which an audio signal is multiplexed in a blanking period of the video signal is provided. A signal separating means for receiving and separating the received multiplexed signal into an audio signal in which a video signal and audio clock information are multiplexed, and a horizontal counter for outputting a horizontal phase signal of the separated video signal,
A vertical counter that outputs a vertical phase signal of a video signal, an audio clock reproduction circuit that reproduces an audio clock from audio clock information multiplexed in an audio signal based on the output horizontal phase signal and vertical phase signal, and a separation A buffer memory for temporarily storing the read audio signal and reading the stored audio signal using the reproduced audio clock; and an audio signal processing circuit for processing the read audio signal based on the audio clock. The video / audio signal multiplex receiver is provided.

【0014】請求項4の本発明は、請求項1の映像音声
信号多重送信装置から、固定長データのフォーマットを
持つディジタル信号の、映像信号のブランキング期間に
音声信号が多重された多重信号を受信し、その受信した
多重信号を映像信号及び音声クロック情報が多重されて
いる音声信号に分離する信号分離手段と、その分離され
た映像信号の水平位相信号を出力する水平カウンタと、
映像信号の垂直位相信号を出力する垂直カウンタと、そ
れら出力される水平位相信号及び垂直位相信号に基づい
て、音声信号に多重された音声クロック情報から音声ク
ロックを再生する音声クロック再生回路と、制御電圧に
より制御されるクロックを発振するクロック発振器と、
そのクロック発振器の制御電圧を得るために、クロック
発振器の出力と音声クロック再生回路からの出力とを比
較する位相比較器と、分離された音声信号を一時蓄積
し、その蓄積された音声信号をクロック発振器の出力を
用いて読み出すバッファメモリと、その読み出された音
声信号をクロック発振器の出力に基づいて処理する音声
信号処理回路とを備えた映像音声信号多重受信装置であ
る。
According to a fourth aspect of the present invention, from the video / audio signal multiplex transmitting apparatus according to the first aspect, a multiplex signal of a digital signal having a fixed length data format in which an audio signal is multiplexed in a blanking period of the video signal is provided. A signal separating means for receiving and separating the received multiplexed signal into an audio signal in which a video signal and audio clock information are multiplexed, and a horizontal counter for outputting a horizontal phase signal of the separated video signal,
A vertical counter that outputs a vertical phase signal of a video signal, an audio clock reproduction circuit that reproduces an audio clock from audio clock information multiplexed in an audio signal based on the output horizontal phase signal and vertical phase signal, and control A clock oscillator that oscillates a clock controlled by voltage,
In order to obtain the control voltage of the clock oscillator, a phase comparator that compares the output of the clock oscillator and the output from the audio clock regeneration circuit and the separated audio signal are temporarily stored, and the accumulated audio signal is clocked. A video / audio signal multiplex reception device comprising a buffer memory for reading using an output of an oscillator, and an audio signal processing circuit for processing the read audio signal based on an output of a clock oscillator.

【0015】請求項5の本発明は、請求項1の映像音声
信号多重送信装置から、固定長データのフォーマットを
持つディジタル信号の、映像信号のブランキング期間に
音声信号が多重された多重信号を受信し、その受信した
多重信号を映像信号及び音声クロック情報が多重されて
いる音声信号に分離する信号分離手段と、その分離され
た映像信号の水平位相信号を出力する水平カウンタと、
分離された音声信号を一時蓄積するバッファメモリと、
そのバッファメモリからの出力と出力される水平位相信
号とを比較するディジタル位相比較器と、そのディジタ
ル位相比較器の出力に基づいて、クロックを発振するク
ロック発振器とを備え、クロック発振器の出力を用い
て、バッファメモリに蓄積された音声信号を出力する映
像音声信号多重受信装置である。
According to a fifth aspect of the present invention, from the video / audio signal multiplex transmitting apparatus according to the first aspect, a multiplex signal of a digital signal having a fixed length data format in which an audio signal is multiplexed in a blanking period of the video signal is provided. A signal separating means for receiving and separating the received multiplexed signal into an audio signal in which a video signal and audio clock information are multiplexed, and a horizontal counter for outputting a horizontal phase signal of the separated video signal,
A buffer memory that temporarily stores the separated audio signals,
A digital phase comparator for comparing the output from the buffer memory with the output horizontal phase signal and a clock oscillator for oscillating a clock based on the output of the digital phase comparator are provided, and the output of the clock oscillator is used. The audio / video signal multiplex receiver outputs the audio signal stored in the buffer memory.

【0016】請求項6の本発明は、請求項1の前記映像
音声信号多重送信装置から、固定長データのフォーマッ
トを持つディジタル信号の、映像信号のブランキング期
間に音声信号が多重された多重信号を受信し、その受信
した多重信号を映像信号及び音声クロック情報が多重さ
れている音声信号に分離する信号分離手段と、その分離
された音声信号を一時蓄積するバッファメモリと、その
バッファメモリから出力される音声信号から音声クロッ
クを再生する音声クロック再生回路と、バッファメモリ
から出力される音声信号を音声クロック再生回路の出力
に基づいて処理する音声信号処理回路とを備え、バッフ
ァメモリに蓄積された音声信号は、音声クロック再生回
路の出力を用いて出力するものである映像音声信号多重
受信装置である。
According to a sixth aspect of the present invention, a multiplexed signal obtained by multiplexing the audio signal from the video / audio signal multiplex transmission device according to the first aspect in a blanking period of the video signal is a digital signal having a fixed length data format. Signal separating means for separating the received multiplexed signal into an audio signal in which a video signal and audio clock information are multiplexed, a buffer memory for temporarily storing the separated audio signal, and an output from the buffer memory And a voice signal processing circuit for processing the voice signal output from the buffer memory based on the output of the voice clock reproducing circuit. The audio signal is a video / audio signal multiplex receiving device which outputs the audio signal by using the output of the audio clock reproducing circuit.

【0017】[0017]

【作用】本発明は、映像音声信号多重送信装置において
は、水平カウンタにより映像信号の水平位相信号を出力
し、垂直カウンタにより映像信号の垂直位相信号を出力
し、それら出力される水平位相信号及び垂直位相信号に
基づいて、音声クロック信号多重回路が音声信号に音声
クロック情報を多重し、信号多重手段が、音声信号及び
映像信号を多重して送出する。
In the video / audio signal multiplex transmission device of the present invention, the horizontal counter outputs the horizontal phase signal of the video signal, the vertical counter outputs the vertical phase signal of the video signal, and the horizontal phase signal and the output horizontal phase signal are output. The audio clock signal multiplexing circuit multiplexes the audio clock information with the audio signal based on the vertical phase signal, and the signal multiplexing means multiplexes the audio signal and the video signal and sends them.

【0018】また本発明は、映像音声信号多重受信装置
においては、信号分離手段が、映像音声信号多重送信装
置から送出された映像信号のブランキング期間に音声信
号が多重された多重信号を受信して、多重信号を映像信
号及び音声クロック情報が多重されている音声信号に分
離し、水平カウンタが分離された映像信号の水平位相信
号を出力し、垂直カウンタが映像信号の垂直位相信号を
出力し、それら水平位相信号及び垂直位相信号に基づい
て、音声クロック再生回路が、音声信号に多重された音
声クロック情報から音声クロックを再生し、バッファメ
モリが、分離された音声信号を一時蓄積し、その蓄積さ
れた音声信号を音声クロックを用いて読み出し、音声信
号処理回路が、バッファメモリから読み出された音声信
号を音声クロックに基づいて処理する。
According to the present invention, in the video / audio signal multiplex receiver, the signal separating means receives the multiplex signal in which the audio signals are multiplexed in the blanking period of the video signal sent from the video / audio signal multiplex transmitter. Separates the multiplexed signal into an audio signal in which the video signal and audio clock information are multiplexed, the horizontal counter outputs the horizontal phase signal of the separated video signal, and the vertical counter outputs the vertical phase signal of the video signal. The audio clock reproduction circuit reproduces the audio clock from the audio clock information multiplexed on the audio signal based on the horizontal phase signal and the vertical phase signal, and the buffer memory temporarily stores the separated audio signal. The stored audio signal is read using the audio clock, and the audio signal processing circuit reads the audio signal read from the buffer memory into the audio clock. On the basis of the process.

【0019】[0019]

【実施例】以下に、本発明をその実施例を示す図面に基
づいて説明する。
DESCRIPTION OF THE PREFERRED EMBODIMENTS The present invention will be described below with reference to the drawings showing its embodiments.

【0020】図1は、本発明にかかる第1の実施例の映
像音声信号多重送信装置の構成を示すブロック図であ
る。すなわち、本実施例の映像音声信号多重送信装置に
は、ディジタルの映像信号を入力するための映像信号入
力端子101及びディジタルの音声信号を入力するため
の音声信号入力端子102が設けられ、一方の映像信号
入力端子101には、映像信号と音声信号とを多重する
信号多重器109、映像信号の水平位相信号を出力する
水平カウンタ105、及び映像信号の垂直位相信号を出
力する垂直カウンタ106が接続されている。又、もう
一方の音声信号入力端子102には、入力された音声信
号に音声クロック情報を多重する音声クロック信号多重
回路107が接続され、その音声クロック信号多重回路
107の出力には、音声信号を一時蓄積するバッファメ
モリ(又は音声信号レジスタ)108が接続されてい
る。そのバッファメモリ108の出力には、上述の信号
多重器109が接続され、その信号多重器109の出力
は多重された信号を出力する多重信号出力端子110に
接続されている。ここで、信号多重器109及び多重信
号出力端子110が信号多重手段を構成している。
FIG. 1 is a block diagram showing the configuration of a video / audio signal multiplex transmission apparatus according to the first embodiment of the present invention. That is, the video / audio signal multiplex transmission apparatus of this embodiment is provided with a video signal input terminal 101 for inputting a digital video signal and an audio signal input terminal 102 for inputting a digital audio signal, and one of them is provided. The video signal input terminal 101 is connected with a signal multiplexer 109 that multiplexes a video signal and an audio signal, a horizontal counter 105 that outputs a horizontal phase signal of the video signal, and a vertical counter 106 that outputs a vertical phase signal of the video signal. Has been done. Further, the other audio signal input terminal 102 is connected to an audio clock signal multiplexing circuit 107 for multiplexing audio clock information with the input audio signal, and the audio signal is output to the output of the audio clock signal multiplexing circuit 107. A buffer memory (or audio signal register) 108 for temporarily storing is connected. The output of the buffer memory 108 is connected to the above-mentioned signal multiplexer 109, and the output of the signal multiplexer 109 is connected to the multiple signal output terminal 110 for outputting the multiplexed signal. Here, the signal multiplexer 109 and the multiplexed signal output terminal 110 constitute a signal multiplexing means.

【0021】又、映像信号に同期するクロックを発振す
る映像クロック発振器103及び音声信号に同期するク
ロックを発振する音声クロック発振器104が設けら
れ、その映像クロック発振器103の出力は、水平カウ
ンタ105及び垂直カウンタ106に接続され、音声ク
ロック発振器104の出力は、音声クロック信号多重回
路107に接続されている。
A video clock oscillator 103 that oscillates a clock that synchronizes with a video signal and an audio clock oscillator 104 that oscillates a clock that synchronizes with an audio signal are provided. The output of the video clock oscillator 103 is a horizontal counter 105 and a vertical counter. It is connected to the counter 106, and the output of the audio clock oscillator 104 is connected to the audio clock signal multiplexing circuit 107.

【0022】ここで、映像信号と音声信号との関係につ
いて説明する。音声ディジタル信号は、所定の音声グル
ープ単位毎に音声パケットに小分けされる。その音声パ
ケットは、主信号である映像信号のブランキング期間
(水平補助信号領域)に送信される。つまり、1ライン
の映像ディジタル信号送信毎に1つの音声パケットが送
信される。ここで、送信順序に関しては、ブランキング
期間の後に、映像デジタル信号に関するデータが割り当
てられるディジタルアクティブラインが続く。そのた
め、音声ディジタル信号は、映像ディジタル信号に対し
て1ライン遅れて伝送されることになる。ただし、本ラ
インが映像ディジタル信号のスイッチングポイントであ
る場合は、音声パケットは、規定により次のラインに多
重できないために、2ライン遅れて伝送される。前述の
音声パケットは固定長データであり、その中に、音声パ
ケットとは別に独立している映像信号と同期を取るため
の音声クロック情報が設けられている。この音声クロッ
ク情報は、その映像信号を基準にして設定されるクロッ
ク情報のことであり、図1の音声クロック信号多重化回
路107で多重される。
Here, the relationship between the video signal and the audio signal will be described. The voice digital signal is subdivided into voice packets for each predetermined voice group unit. The audio packet is transmitted during the blanking period (horizontal auxiliary signal area) of the video signal which is the main signal. That is, one audio packet is transmitted for each transmission of the video digital signal of one line. Here, regarding the transmission order, the blanking period is followed by a digital active line to which data regarding the video digital signal is assigned. Therefore, the audio digital signal is transmitted one line behind the video digital signal. However, when this line is the switching point of the video digital signal, the audio packet cannot be multiplexed on the next line by definition, and is therefore transmitted with a delay of two lines. The above-mentioned audio packet is fixed length data, and audio clock information for synchronizing with a video signal which is independent of the audio packet is provided therein. The audio clock information is clock information set based on the video signal, and is multiplexed by the audio clock signal multiplexing circuit 107 in FIG.

【0023】次に、上記第1の実施例の映像音声信号多
重送信装置の動作について、図面を参照しながら説明す
る。
Next, the operation of the video / audio signal multiplex transmission apparatus of the first embodiment will be described with reference to the drawings.

【0024】まず、ディジタル化された映像信号が、映
像信号入力端子101から入力され、水平カウンタ10
5、垂直カウンタ106、及び信号多重器109へ、そ
れぞれ分岐されて入力される。又、ディジタル化された
音声信号が、音声信号入力端子102から入力され、音
声クロック信号多重回路107へ入力される。
First, the digitized video signal is input from the video signal input terminal 101, and the horizontal counter 10
5, the vertical counter 106, and the signal multiplexer 109 are branched and input. Further, the digitized audio signal is input from the audio signal input terminal 102 and input to the audio clock signal multiplexing circuit 107.

【0025】映像クロック発振器103から出力された
映像クロックは、水平カウンタ105及び垂直カウンタ
106へ入力され、この映像クロックを用いて、水平カ
ウンタ105は入力されてくる映像信号の水平位相信号
をカウントして音声クロック信号多重回路107へ出力
し、垂直カウンタ106は入力されてくる映像信号の垂
直位相信号をカウントして音声クロック信号多重回路1
07へ出力する。そうすると、音声クロック信号多重回
路107では、音声クロック発振器104から出力され
る音声クロック、水平位相信号及び垂直位相信号に基づ
いて音声クロック情報を生成し、その音声クロック情報
を音声信号に多重する。
The video clock output from the video clock oscillator 103 is input to the horizontal counter 105 and the vertical counter 106, and the horizontal counter 105 counts the horizontal phase signal of the input video signal using this video clock. And outputs it to the audio clock signal multiplex circuit 107, and the vertical counter 106 counts the vertical phase signal of the input video signal to obtain the audio clock signal multiplex circuit 1
It outputs to 07. Then, the audio clock signal multiplexing circuit 107 generates audio clock information based on the audio clock, the horizontal phase signal and the vertical phase signal output from the audio clock oscillator 104, and multiplexes the audio clock information with the audio signal.

【0026】音声クロック情報が多重された音声信号
は、一旦バッファメモリ108に蓄積された後、信号多
重器109へ出力され、更に、信号多重器109により
映像信号のブランキング期間に多重されて多重信号出力
端子110から出力される。
The audio signal in which the audio clock information is multiplexed is temporarily stored in the buffer memory 108, then output to the signal multiplexer 109, and further multiplexed by the signal multiplexer 109 in the blanking period of the video signal. It is output from the signal output terminal 110.

【0027】以上のように、本実施例では、受信側で用
いる音声クロックを音声クロック情報として音声信号に
多重して送信する。又、音声クロック情報を多重する位
置を映像信号の水平位相信号及び垂直位相信号を用いて
決めることにより、映像信号に同期させることができ
る。
As described above, in this embodiment, the audio clock used on the receiving side is multiplexed with the audio signal as audio clock information and transmitted. Further, by determining the position where the audio clock information is multiplexed by using the horizontal phase signal and the vertical phase signal of the video signal, it is possible to synchronize with the video signal.

【0028】図2は、本発明にかかる第2の実施例の映
像音声信号多重受信装置の構成を示すブロック図であ
る。すなわち、本実施例の映像音声信号多重受信装置は
上記第1の実施例の送信装置に対応するものであり、以
下の実施例における受信装置についても同様である。
FIG. 2 is a block diagram showing the configuration of a video / audio signal multiplex receiver according to the second embodiment of the present invention. That is, the video / audio signal multiplex receiver of this embodiment corresponds to the transmitter of the first embodiment, and the same applies to receivers of the following embodiments.

【0029】この受信装置には、映像信号及び音声信号
が多重された多重信号を受信して入力するための多重信
号入力端子201が設けられ、その多重信号入力端子2
01には、受信した多重信号を映像信号と音声信号に分
離する信号分離器202が接続されている。又、映像信
号に同期するクロックを発振する映像クロック発振器2
03が設けられ、その出力は、分離された映像信号を処
理する映像信号処理回路204、分離された音声信号に
含まれる音声クロック情報から音声クロックを再生する
音声クロック再生回路207、及び音声信号を一時蓄積
するバッファメモリ208に接続されている。
This receiving device is provided with a multiplex signal input terminal 201 for receiving and inputting a multiplex signal in which a video signal and an audio signal are multiplexed, and the multiplex signal input terminal 2 is provided.
A signal separator 202 that separates the received multiplexed signal into a video signal and an audio signal is connected to 01. Also, a video clock oscillator 2 that oscillates a clock synchronized with the video signal
03 is provided, and the output thereof is a video signal processing circuit 204 for processing the separated video signal, an audio clock reproduction circuit 207 for reproducing an audio clock from the audio clock information included in the separated audio signal, and an audio signal. It is connected to a buffer memory 208 for temporarily storing.

【0030】信号分離器202の映像信号出力は、映像
信号処理回路204に接続され、信号分離器202の音
声信号出力は、音声クロック再生回路207及びバッフ
ァメモリ208に分岐して接続されている。映像信号処
理回路204の出力は、1つが映像信号出力端子210
に接続され、もう1つの出力が、映像信号の水平位相信
号をカウントする映像信号水平カウンタ205及び映像
信号の垂直位相信号をカウントする映像信号垂直カウン
タ206に接続されている。又、音声クロック再生回路
207の出力は、バッファメモリ208、音声信号を処
理する音声信号処理回路209、及び後述の位相比較器
211に接続され、バッファメモリ208の出力は、音
声信号処理回路209に接続されている。
The video signal output of the signal separator 202 is connected to the video signal processing circuit 204, and the audio signal output of the signal separator 202 is branched and connected to the audio clock reproduction circuit 207 and the buffer memory 208. One of the outputs of the video signal processing circuit 204 is the video signal output terminal 210.
The other output is connected to a video signal horizontal counter 205 for counting the horizontal phase signal of the video signal and a video signal vertical counter 206 for counting the vertical phase signal of the video signal. The output of the audio clock reproduction circuit 207 is connected to a buffer memory 208, an audio signal processing circuit 209 for processing an audio signal, and a phase comparator 211 described later, and the output of the buffer memory 208 is output to the audio signal processing circuit 209. It is connected.

【0031】前述の位相比較器211の出力には、ロー
パスフィルタ(以後、LPFと略記する)212が接続
され、そのLPF212には、電圧制御発振器によるク
ロック発振器213が接続され、そのクロック発振器2
13の出力が、位相比較器211のもう一方の入力、及
び音声信号処理回路209から出力される音声信号をホ
ールドさせるためのフリップフロップ214に接続され
ている。更に、フリップフロップ214の出力は音声信
号出力端子215に接続されている。ここで、位相比較
器211、LPF212、及びクロック発振器213
が、いわゆる位相同期ループ(PLL)を構成してい
る。又、多重信号入力端子201及び信号分離器202
が信号分離手段を構成している。
A low-pass filter (hereinafter abbreviated as LPF) 212 is connected to the output of the above-mentioned phase comparator 211, and a clock oscillator 213 of a voltage controlled oscillator is connected to the LPF 212, and the clock oscillator 2 thereof is connected.
The output of 13 is connected to the other input of the phase comparator 211 and a flip-flop 214 for holding the audio signal output from the audio signal processing circuit 209. Further, the output of the flip-flop 214 is connected to the audio signal output terminal 215. Here, the phase comparator 211, the LPF 212, and the clock oscillator 213
Form a so-called phase locked loop (PLL). In addition, the multiplex signal input terminal 201 and the signal separator 202
Constitutes the signal separation means.

【0032】次に、上記第2の実施例の映像音声信号多
重受信装置の動作について、図面を参照しながら説明す
る。
Next, the operation of the video / audio signal multiplex receiver of the second embodiment will be described with reference to the drawings.

【0033】まず、多重信号入力端子201から受信さ
れた多重信号は、信号分離器202によって映像信号と
音声信号に分離される。ここで、多重信号は、例えば第
1の実施例の映像音声信号多重送信装置から送信された
ディジタル多重信号であり、固定長データのフォーマッ
トを持ち、映像信号のブランキング期間に音声信号が多
重化されており、更に、音声信号には音声クロック情報
が多重されている。
First, the multiplexed signal received from the multiplexed signal input terminal 201 is separated by the signal separator 202 into a video signal and an audio signal. Here, the multiplexed signal is, for example, a digital multiplexed signal transmitted from the video / audio signal multiplex transmission device of the first embodiment, has a fixed-length data format, and the audio signal is multiplexed in the blanking period of the video signal. Further, voice clock information is multiplexed on the voice signal.

【0034】一方、映像クロック発振器203からは映
像信号に同期する映像クロックが出力され、映像信号処
理回路204は、その映像クロックを用いて、信号分離
器202からの映像信号を処理して、映像信号水平カウ
ンタ205、映像信号垂直カウンタ206、及び映像信
号出力端子210へ出力する。映像信号水平カウンタ2
05は映像信号の水平位相信号をカウントして音声クロ
ック再生回路207へ出力し、映像信号垂直カウンタ2
06は映像信号の垂直位相信号をカウントして音声クロ
ック再生回路207へ出力する。
On the other hand, a video clock that is synchronized with the video signal is output from the video clock oscillator 203, and the video signal processing circuit 204 processes the video signal from the signal separator 202 using the video clock and outputs the video signal. The signal is output to the signal horizontal counter 205, the video signal vertical counter 206, and the video signal output terminal 210. Video signal horizontal counter 2
05 counts the horizontal phase signal of the video signal and outputs it to the audio clock reproduction circuit 207, and the video signal vertical counter 2
Reference numeral 06 counts the vertical phase signal of the video signal and outputs it to the audio clock reproduction circuit 207.

【0035】そうすると、音声クロック再生回路207
は、映像信号水平カウンタ205からの出力、映像信号
垂直カウンタ206からの出力、及び映像クロックを用
いて、信号分離器202により分離された音声信号に多
重されている音声クロック情報から音声クロックを再生
して、すなわち、水平位相信号、垂直位相信号、音声ク
ロック情報から音声クロックを再生して、バッファメモ
リ208、音声信号処理回路209、及び位相比較器2
11に出力する。ただし、音声クロック再生回路207
から出力される音声クロック信号と信号処理が行われる
バッファメモリ208から出力中の音声信号の位相を合
わせることにより、送信側での映像信号と音声信号の位
相関係を受信側で再生することができる。このため、送
信側での映像信号と音声信号の位相関係を保つために
は、バッファメモリ208で発生する遅延量と同じ遅延
量を持つバファメモリを音声クロック再生回路207の
中に持たなければならない。ただし、位相は関係なく音
声クロックの周波数のみを正確に再生すればよい場合
は、前述のような音声クロック再生回路207内のバッ
ファメモリは必要でない。その場合でも音声信号は問題
なく再生される。バッファメモリ208は、分離された
音声信号を映像クロックを用いて一旦蓄積し、その後、
音声クロック再生回路207から出力される音声クロッ
クによって読み出す。バッファメモリ208から読み出
された音声信号は、音声クロック再生回路207からの
音声クロックを用いて音声信号処理回路209で処理さ
れてフリップフロップ214に入力される。
Then, the audio clock reproducing circuit 207
Uses the output from the video signal horizontal counter 205, the output from the video signal vertical counter 206, and the video clock to reproduce the audio clock from the audio clock information multiplexed in the audio signal separated by the signal separator 202. That is, the audio clock is reproduced from the horizontal phase signal, the vertical phase signal, and the audio clock information, and the buffer memory 208, the audio signal processing circuit 209, and the phase comparator 2 are reproduced.
Output to 11. However, the audio clock reproduction circuit 207
The phase relationship between the video signal and the audio signal on the transmitting side can be reproduced on the receiving side by matching the phase of the audio clock signal output from the buffer memory 208 for signal processing with the audio clock signal output from the receiving side. . Therefore, in order to maintain the phase relationship between the video signal and the audio signal on the transmission side, the audio clock reproduction circuit 207 must have a buffer memory having the same delay amount as the delay amount generated in the buffer memory 208. However, if only the frequency of the audio clock needs to be accurately reproduced regardless of the phase, the buffer memory in the audio clock reproduction circuit 207 as described above is not necessary. Even in that case, the audio signal is reproduced without any problem. The buffer memory 208 temporarily stores the separated audio signal using a video clock, and thereafter,
The audio clock reproduction circuit 207 reads the audio clock. The audio signal read from the buffer memory 208 is processed by the audio signal processing circuit 209 using the audio clock from the audio clock reproduction circuit 207 and input to the flip-flop 214.

【0036】更に、位相比較器211は、音声クロック
再生回路207の出力とクロック発振器213の出力と
を比較し、LPF212を介して制御電圧をクロック発
振器213に出力する。このクロック発振器213の出
力は分岐されてフリップフロップ214に出力され、フ
リップフロップ214は、音声信号処理回路209から
の音声信号をホールドし、映像クロックからの位相ずれ
を除去して音声信号出力端子215に出力する。
Further, the phase comparator 211 compares the output of the audio clock reproduction circuit 207 and the output of the clock oscillator 213 and outputs the control voltage to the clock oscillator 213 via the LPF 212. The output of the clock oscillator 213 is branched and output to the flip-flop 214, which holds the audio signal from the audio signal processing circuit 209, removes the phase shift from the video clock, and outputs the audio signal output terminal 215. Output to.

【0037】なお、上記第2の実施例では、PLL回路
及びフリップフロップ214を備える構成としたが、こ
れに代えて、破線で示すブロック200及び映像クロッ
ク発振器203のみの構成としてもよい。ここで、ブロ
ック200内の回路は、基本的に映像クロックの一つの
システムクロックで動作するため、LSI化が可能であ
り、受信装置の小型化に有利である。
In the second embodiment, the PLL circuit and the flip-flop 214 are provided. However, instead of this, only the block 200 and the video clock oscillator 203 indicated by the broken line may be provided. Here, since the circuit in the block 200 basically operates with one system clock of the video clock, it can be implemented as an LSI, which is advantageous for downsizing the receiving device.

【0038】図3は、本発明にかかる第3の実施例の映
像音声信号多重受信装置の構成を示すブロック図であ
る。本実施例の受信装置が、図2の第2の実施例と異な
る点は、第2の実施例では、バッファメモリ208から
の音声信号の読み出し及び音声信号処理回路209にお
ける音声信号の処理に音声クロック再生回路207の出
力を用いていたのに対し、図3に示すように、クロック
発振器213の出力を用いた点であり、PLL回路によ
り平滑化された音声クロックを用いることにより、図2
のフリップフロップ214をなくすことができる。
FIG. 3 is a block diagram showing the configuration of a video / audio signal multiplex receiver according to the third embodiment of the present invention. The receiving apparatus of this embodiment is different from the second embodiment of FIG. 2 in that in the second embodiment, audio signals are read from the buffer memory 208 and audio signals are processed by the audio signal processing circuit 209. While the output of the clock recovery circuit 207 is used, the output of the clock oscillator 213 is used as shown in FIG. 3, and by using the audio clock smoothed by the PLL circuit,
The flip-flop 214 can be eliminated.

【0039】本実施例の受信装置において、多重信号入
力端子201より多重信号が入力されてから、信号分離
器202により多重信号を映像信号と音声信号とに分離
し、その分離された映像信号を映像信号処理回路204
で処理した後、映像信号の水平位相信号及び垂直位相信
号をカウントして、それらの位相信号を用いて音声クロ
ックを再生し、又、映像クロックにより音声信号をバッ
ファメモリ301に一時蓄積するところまでは、第2の
実施例と同様である。
In the receiving apparatus of this embodiment, after the multiplexed signal is input from the multiplexed signal input terminal 201, the signal separator 202 separates the multiplexed signal into a video signal and an audio signal, and the separated video signal is separated. Video signal processing circuit 204
After the processing, the horizontal phase signal and the vertical phase signal of the video signal are counted, the audio clock is reproduced using these phase signals, and the audio signal is temporarily stored in the buffer memory 301 by the video clock. Is the same as in the second embodiment.

【0040】次に、音声クロック再生回路207により
再生された音声クロックは、PLL回路の位相比較器2
11に入力され、クロック発振器213の出力と比較さ
れる。位相比較器211での比較結果は、LPF212
を介して制御電圧としてクロック発振器213へ出力さ
れる。クロック発振器213の出力は、分岐されてバッ
ファメモリ301からの音声信号の読み出しと、音声信
号処理回路302での音声信号の処理に用いられる。従
って、クロック発振器213からの出力、すなわち、平
滑化された音声クロックによって、音声信号がバッファ
メモリ301から読み出され、更に、音声信号処理回路
302で処理されて音声信号出力端子215へ出力され
る。
Next, the audio clock reproduced by the audio clock reproducing circuit 207 is supplied to the phase comparator 2 of the PLL circuit.
11 and is compared with the output of the clock oscillator 213. The comparison result of the phase comparator 211 is the LPF 212.
Is output to the clock oscillator 213 as a control voltage via. The output of the clock oscillator 213 is branched and used for reading the audio signal from the buffer memory 301 and for processing the audio signal in the audio signal processing circuit 302. Therefore, the audio signal is read from the buffer memory 301 by the output from the clock oscillator 213, that is, the smoothed audio clock, further processed by the audio signal processing circuit 302, and output to the audio signal output terminal 215. .

【0041】図4は、本発明にかかる第4の実施例の映
像音声信号多重受信装置の構成を示すブロック図であ
る。図4において、図2、あるいは図3と同じ番号を付
したものは、第2、又は第3の実施例で説明したものと
同じものである。すなわち、本実施例の映像音声信号多
重受信装置は、信号分離器202、映像クロック発振器
203、映像信号処理回路204、バッファメモリ30
1、映像信号水平カウンタ205、映像信号垂直カウン
タ206、音声信号処理回路401、LPF212、ク
ロック発振器213、及び映像信号水平カウンタ205
から出力される水平位相信号と、映像信号垂直カウンタ
206から出力される垂直位相信号と、バッファメモリ
301から読み出される音声信号とをディジタルの値で
比較するディジタル位相比較器402等により構成され
ている。
FIG. 4 is a block diagram showing the configuration of a video / audio signal multiplex receiver according to the fourth embodiment of the present invention. In FIG. 4, the same reference numerals as those in FIG. 2 or 3 are the same as those described in the second or third embodiment. That is, the video / audio signal multiplex reception apparatus of this embodiment includes the signal separator 202, the video clock oscillator 203, the video signal processing circuit 204, and the buffer memory 30.
1, video signal horizontal counter 205, video signal vertical counter 206, audio signal processing circuit 401, LPF 212, clock oscillator 213, and video signal horizontal counter 205
From the video signal vertical counter 206, and the audio signal read from the buffer memory 301 with a digital value, which is composed of a digital phase comparator 402 and the like. .

【0042】本実施例では、多重信号入力端子201よ
り入力された多重信号は、信号分離器202によって映
像信号及び音声信号に分離され、その分離された映像信
号は映像クロック発振器203から出力される映像クロ
ックを用いて、映像信号処理回路204で処理されて映
像信号出力端子210、映像信号水平カウンタ205及
び映像信号垂直カウンタ206へ出力される。又、音声
信号は映像クロックを用いてバッファメモリ301に一
旦蓄積される。
In this embodiment, the multiplexed signal input from the multiplexed signal input terminal 201 is separated into a video signal and an audio signal by the signal separator 202, and the separated video signal is output from the video clock oscillator 203. The video signal is processed by the video signal processing circuit 204 using the video clock and output to the video signal output terminal 210, the video signal horizontal counter 205, and the video signal vertical counter 206. The audio signal is temporarily stored in the buffer memory 301 using the video clock.

【0043】バッファメモリ301に蓄積された音声信
号は、クロック発振器213から出力される音声クロッ
クにより読み出されて音声信号処理回路401に出力さ
れると共に、ディジタル位相比較器402に入力され
る。ディジタル位相比較器402では、バッファメモリ
301から読み出された音声信号と、映像信号水平カウ
ンタ205によりカウントされた水平位相信号及び映像
信号垂直カウンタ206によりカウントされた垂直位相
信号とをディジタルの値により位相比較し、LPF21
2を介してクロック発振器213に制御電圧を供給す
る。これによりバッファメモリ301に対する読み出し
は、位相変化が平滑化されたクロックを用いることがで
きる。そして、音声信号処理回路401は、バッファメ
モリ301から読み出された音声信号を処理した後、音
声信号出力端子215へ出力する。
The audio signal stored in the buffer memory 301 is read by the audio clock output from the clock oscillator 213 and output to the audio signal processing circuit 401 and also to the digital phase comparator 402. In the digital phase comparator 402, the audio signal read from the buffer memory 301, the horizontal phase signal counted by the video signal horizontal counter 205 and the vertical phase signal counted by the video signal vertical counter 206 are converted into digital values. Phase comparison, LPF21
A control voltage is supplied to the clock oscillator 213 via 2. As a result, the clock whose phase change is smoothed can be used for reading from the buffer memory 301. Then, the audio signal processing circuit 401 processes the audio signal read from the buffer memory 301 and then outputs the processed audio signal to the audio signal output terminal 215.

【0044】本実施例では、ディジタルの値で位相比較
を行うことにより、位相比較器をディジタルLSIの中
に取り込むことができ、回路構成が非常に簡単になる。
In this embodiment, the phase comparator can be incorporated in the digital LSI by performing the phase comparison with the digital value, and the circuit configuration becomes very simple.

【0045】なお、上記第4の実施例では、映像信号垂
直カウンタ206の垂直位相信号をディジタル位相比較
器402に入力する構成としたが、映像信号と音声信号
の位相が1ライン単位でずれていても構わない場合は、
垂直位相信号を用いない構成とすることができる。
In the fourth embodiment, the vertical phase signal of the video signal vertical counter 206 is input to the digital phase comparator 402, but the phases of the video signal and the audio signal are deviated by one line unit. If you don't mind,
It is possible to adopt a configuration that does not use the vertical phase signal.

【0046】図5は、本発明にかかる第5の実施例の映
像音声信号多重受信装置の構成を示すブロック図であ
る。本実施例の映像音声信号多重受信装置は、信号分離
器202、映像クロック発振器203、映像信号処理回
路204、映像信号水平カウンタ205、映像信号垂直
カウンタ206、バッファメモリ208、音声信号処理
回路209、位相比較器211、LPF212、クロッ
ク発振器213、フリップフロップ214、及びバッフ
ァメモリ208から読み出された音声信号から音声クロ
ックを再生する音声クロック再生回路501等により構
成されている。
FIG. 5 is a block diagram showing the configuration of a video / audio signal multiplex receiver according to the fifth embodiment of the present invention. The video / audio signal multiplex receiver of this embodiment includes a signal separator 202, a video clock oscillator 203, a video signal processing circuit 204, a video signal horizontal counter 205, a video signal vertical counter 206, a buffer memory 208, an audio signal processing circuit 209, and The phase comparator 211, the LPF 212, the clock oscillator 213, the flip-flop 214, the audio clock reproduction circuit 501 for reproducing an audio clock from the audio signal read from the buffer memory 208, and the like.

【0047】本実施例では、多重信号入力端子201よ
り入力された多重信号は、信号分離器202によって映
像信号及び音声信号に分離され、その分離された映像信
号は映像クロック発振器203から出力される映像クロ
ックを用いて、映像信号処理回路204で処理されて映
像信号出力端子210、映像信号水平カウンタ205及
び映像信号垂直カウンタ206へ出力される。又、音声
信号は映像クロックを用いてバッファメモリ208に一
旦蓄積される。
In this embodiment, the multiplexed signal input from the multiplexed signal input terminal 201 is separated into a video signal and an audio signal by the signal separator 202, and the separated video signal is output from the video clock oscillator 203. The video signal is processed by the video signal processing circuit 204 using the video clock and output to the video signal output terminal 210, the video signal horizontal counter 205, and the video signal vertical counter 206. Further, the audio signal is temporarily stored in the buffer memory 208 using the video clock.

【0048】バッファメモリ208に蓄積された音声信
号は、音声クロック再生回路501により再生された音
声クロックにより読み出されて音声信号処理回路209
に出力される。ここで、音声クロック再生回路501
は、第2、又は第3の実施例の場合と異なり、バッファ
メモリ208から読み出される音声信号を入力して、そ
の音声信号に含まれる音声クロック情報から音声クロッ
クを再生する。
The audio signal accumulated in the buffer memory 208 is read by the audio clock reproduced by the audio clock reproducing circuit 501 and is reproduced by the audio signal processing circuit 209.
Is output to. Here, the audio clock reproduction circuit 501
Is different from the case of the second or third embodiment, the audio signal read from the buffer memory 208 is input and the audio clock is reproduced from the audio clock information included in the audio signal.

【0049】音声クロック再生回路501から出力され
た音声クロックは、バッファメモリ208に出力される
と共に、音声信号処理回路209及び位相比較器211
にも入力され、音声信号処理回路209では、その音声
クロックを用いて、バッファメモリ208から読み出さ
れた音声信号の処理が行われた後、フリップフロップ2
14に出力される。一方、位相比較器211では、クロ
ック発振器213の出力と音声クロックとを比較し、L
PF212を介してクロック発振器213に制御電圧を
供給する。
The audio clock output from the audio clock reproduction circuit 501 is output to the buffer memory 208, and at the same time, the audio signal processing circuit 209 and the phase comparator 211.
Also, the audio signal processing circuit 209 processes the audio signal read from the buffer memory 208 by using the audio clock, and then the flip-flop 2
It is output to 14. On the other hand, in the phase comparator 211, the output of the clock oscillator 213 is compared with the audio clock and L
A control voltage is supplied to the clock oscillator 213 via the PF 212.

【0050】更に、クロック発振器213の出力は、フ
リップフロップ214に入力され、音声信号処理回路2
09から出力された音声信号をホールドすることによ
り、映像信号からの位相変化のずれを除去した音声信号
を音声信号出力端子215へ出力する。
Further, the output of the clock oscillator 213 is input to the flip-flop 214, and the audio signal processing circuit 2
By holding the audio signal output from 09, the audio signal from which the deviation of the phase change from the video signal is removed is output to the audio signal output terminal 215.

【0051】本実施例では、音声クロックの再生をバッ
ファメモリ208の出力を用いて行っているので、音声
クロック再生回路501内のクロック情報信号を蓄積す
るバッファをなくすことができる。
In this embodiment, since the audio clock is reproduced by using the output of the buffer memory 208, the buffer for accumulating the clock information signal in the audio clock reproducing circuit 501 can be eliminated.

【0052】なお、上記実施例では、第1の実施例とし
て送信装置を、第2〜第5の実施例として受信装置を取
り上げたが、第1の実施例の送信装置と第2〜第5の実
施例のいずれかの受信装置を組み合わせることにより、
映像音声信号多重伝送装置を構成することができる。
In the above embodiment, the transmitting device is taken as the first embodiment and the receiving device is taken as the second to fifth embodiments, but the transmitting device of the first embodiment and the second to fifth embodiments are taken. By combining the receiving device of any of the embodiments of
A video / audio signal multiplex transmission device can be configured.

【0053】また、上記実施例における音声クロック情
報としては、本発明の主旨に反しない限り、どのような
フォーマット構成のものでもよい。
Further, the audio clock information in the above embodiment may have any format configuration unless it goes against the gist of the present invention.

【0054】また、上記第5の実施例では、PLL回路
及びフリップフロップ214を備える構成としたが、こ
の回路はなくてもほぼ同様の効果を得ることができる。
In the fifth embodiment, the PLL circuit and the flip-flop 214 are provided. However, substantially the same effect can be obtained without this circuit.

【0055】[0055]

【発明の効果】以上述べたところから明らかなように本
発明は、回路規模が小さくなり、音声信号の映像信号に
対する位相関係を送信側と受信側で保存することがで
き、かつ、ジッタの少ない高品質な音声信号を再生する
ことができるという長所を有する。
As is apparent from the above description, according to the present invention, the circuit scale is reduced, the phase relationship between the audio signal and the video signal can be preserved on the transmitting side and the receiving side, and the jitter is small. It has an advantage that a high quality audio signal can be reproduced.

【図面の簡単な説明】[Brief description of drawings]

【図1】本発明にかかる第1の実施例の映像音声信号多
重送信装置の構成を示すブロック図である。
FIG. 1 is a block diagram showing a configuration of a video / audio signal multiplex transmission apparatus according to a first embodiment of the present invention.

【図2】本発明にかかる第2の実施例の映像音声信号多
重受信装置の構成を示すブロック図である。
FIG. 2 is a block diagram showing a configuration of a video / audio signal multiplex receiver according to a second embodiment of the present invention.

【図3】本発明にかかる第3の実施例の映像音声信号多
重受信装置の構成を示すブロック図である。
FIG. 3 is a block diagram showing the configuration of a video / audio signal multiplex receiver according to a third embodiment of the present invention.

【図4】本発明にかかる第4の実施例の映像音声信号多
重受信装置の構成を示すブロック図である。
FIG. 4 is a block diagram showing a configuration of a video / audio signal multiplex receiver according to a fourth embodiment of the present invention.

【図5】本発明にかかる第5の実施例の映像音声信号多
重受信装置の構成を示すブロック図である。
FIG. 5 is a block diagram showing the configuration of a video / audio signal multiplex receiver according to a fifth embodiment of the present invention.

【図6】従来の映像音声信号多重送信装置の構成を示す
ブロック図である。
FIG. 6 is a block diagram showing a configuration of a conventional video / audio signal multiplex transmission device.

【図7】従来の映像音声信号多重受信装置の構成を示す
ブロック図である。
FIG. 7 is a block diagram showing a configuration of a conventional video and audio signal multiplex receiver.

【符号の説明】[Explanation of symbols]

1、101 映像信号入力端子 2、102 音声信号入力端子 3、17、103 音声クロック発振器 4、15、104 映像クロック発振器 5、14、108、208、301 バッファメモリ 6、109 信号多重器 12、202 信号分離器 19、211 位相比較器 105 水平カウンタ 106 垂直カウンタ 107 音声クロック信号多重回路 205 映像信号水平カウンタ 206 映像信号垂直カウンタ 207、501 音声クロック再生回路 213 クロック発振器 214 フリップフロップ 402 ディジタル位相比較器 1, 101 Video signal input terminal 2, 102 Audio signal input terminal 3, 17, 103 Audio clock oscillator 4, 15, 104 Video clock oscillator 5, 14, 108, 208, 301 Buffer memory 6, 109 Signal multiplexer 12, 202 Signal separator 19, 211 Phase comparator 105 Horizontal counter 106 Vertical counter 107 Audio clock signal multiplexing circuit 205 Video signal horizontal counter 206 Video signal vertical counter 207, 501 Audio clock reproduction circuit 213 Clock oscillator 214 Flip-flop 402 Digital phase comparator

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.6 識別記号 庁内整理番号 FI 技術表示箇所 H04N 7/087 7/088 7/30 ─────────────────────────────────────────────────── ─── Continuation of the front page (51) Int.Cl. 6 Identification code Office reference number FI technical display location H04N 7/087 7/088 7/30

Claims (8)

【特許請求の範囲】[Claims] 【請求項1】 映像信号の水平位相信号を出力する水平
カウンタと、前記映像信号の垂直位相信号を出力する垂
直カウンタと、それら出力される水平位相信号及び垂直
位相信号に基づいて、音声信号に音声クロック情報を多
重する音声クロック信号多重回路と、その音声クロック
情報が多重された音声信号及び前記映像信号を多重し、
その多重信号を送出する信号多重手段とを備えたことを
特徴とする映像音声信号多重送信装置。
1. A horizontal counter that outputs a horizontal phase signal of a video signal, a vertical counter that outputs a vertical phase signal of the video signal, and an audio signal based on the horizontal phase signal and the vertical phase signal output from the horizontal counter. An audio clock signal multiplexing circuit for multiplexing audio clock information, an audio signal in which the audio clock information is multiplexed, and the video signal are multiplexed,
A video / audio signal multiplex transmission device comprising: a signal multiplex means for transmitting the multiplex signal.
【請求項2】 請求項1の前記映像音声信号多重送信装
置から、固定長データのフォーマットを持つディジタル
信号の、映像信号のブランキング期間に音声信号が多重
された多重信号を受信し、その受信した多重信号を映像
信号及び音声クロック情報が多重されている音声信号に
分離する信号分離手段と、その分離された映像信号の水
平位相信号を出力する水平カウンタと、前記映像信号の
垂直位相信号を出力する垂直カウンタと、それら出力さ
れる水平位相信号及び垂直位相信号に基づいて、前記音
声信号に多重された音声クロック情報から音声クロック
を再生する音声クロック再生回路と、前記分離された音
声信号を一時蓄積し、その蓄積された音声信号を前記再
生された音声クロックを用いて読み出すバッファメモリ
と、その読み出された音声信号を前記音声クロックに基
づいて処理する音声信号処理回路とを備えたことを特徴
とする映像音声信号多重受信装置。
2. A multiplex signal of a digital signal having a fixed-length data format, in which an audio signal is multiplexed in a blanking period of the video signal, is received from the video / audio signal multiplex transmission device of claim 1, and the reception thereof is performed. Signal separation means for separating the multiplexed signal into an audio signal in which the video signal and audio clock information are multiplexed, a horizontal counter for outputting the horizontal phase signal of the separated video signal, and a vertical phase signal of the video signal. A vertical counter for outputting, an audio clock reproducing circuit for reproducing an audio clock from audio clock information multiplexed on the audio signal based on the output horizontal phase signal and vertical phase signal, and the separated audio signal. A buffer memory that temporarily stores and reads the stored audio signal using the reproduced audio clock, and And an audio signal processing circuit for processing the audio signal based on the audio clock.
【請求項3】 更に、制御電圧により制御されるクロッ
クを発振するクロック発振器と、そのクロック発振器の
制御電圧を得るために、前記クロック発振器の出力と前
記音声クロック再生回路からの出力とを比較する位相比
較器と、前記音声信号処理回路の出力を前記クロック発
振器の出力によりホールドさせるフリップフロップとを
備えたことを特徴とする請求項2記載の映像音声信号多
重受信装置。
3. A clock oscillator that oscillates a clock controlled by a control voltage, and the output of the clock oscillator and the output from the audio clock reproduction circuit are compared to obtain the control voltage of the clock oscillator. 3. The video / audio signal multiplex receiving apparatus according to claim 2, further comprising a phase comparator and a flip-flop for holding the output of the audio signal processing circuit by the output of the clock oscillator.
【請求項4】 請求項1の前記映像音声信号多重送信装
置から、固定長データのフォーマットを持つディジタル
信号の、映像信号のブランキング期間に音声信号が多重
された多重信号を受信し、その受信した多重信号を映像
信号及び音声クロック情報が多重されている音声信号に
分離する信号分離手段と、その分離された映像信号の水
平位相信号を出力する水平カウンタと、前記映像信号の
垂直位相信号を出力する垂直カウンタと、それら出力さ
れる水平位相信号及び垂直位相信号に基づいて、前記音
声信号に多重された音声クロック情報から音声クロック
を再生する音声クロック再生回路と、制御電圧により制
御されるクロックを発振するクロック発振器と、そのク
ロック発振器の制御電圧を得るために、前記クロック発
振器の出力と前記音声クロック再生回路からの出力とを
比較する位相比較器と、前記分離された音声信号を一時
蓄積し、その蓄積された音声信号を前記クロック発振器
の出力を用いて読み出すバッファメモリと、その読み出
された音声信号を前記クロック発振器の出力に基づいて
処理する音声信号処理回路とを備えたことを特徴とする
映像音声信号多重受信装置。
4. A multiplex signal of a digital signal having a fixed-length data format, in which an audio signal is multiplexed in a blanking period of the video signal, is received from the video / audio signal multiplex transmitter of claim 1, and the reception thereof is performed. Signal separation means for separating the multiplexed signal into an audio signal in which the video signal and audio clock information are multiplexed, a horizontal counter for outputting the horizontal phase signal of the separated video signal, and a vertical phase signal of the video signal. A vertical counter for outputting, an audio clock reproducing circuit for reproducing an audio clock from audio clock information multiplexed in the audio signal based on the output horizontal phase signal and vertical phase signal, and a clock controlled by a control voltage And a clock oscillator for oscillating the clock oscillator, and to obtain the control voltage of the clock oscillator, the output of the clock oscillator and the sound A phase comparator for comparing the output from the voice clock reproduction circuit, a buffer memory for temporarily storing the separated voice signal and reading the stored voice signal using the output of the clock oscillator, and its reading And an audio signal processing circuit for processing the generated audio signal based on the output of the clock oscillator.
【請求項5】 請求項1の前記映像音声信号多重送信装
置から、固定長データのフォーマットを持つディジタル
信号の、映像信号のブランキング期間に音声信号が多重
された多重信号を受信し、その受信した多重信号を映像
信号及び音声クロック情報が多重されている音声信号に
分離する信号分離手段と、その分離された映像信号の水
平位相信号を出力する水平カウンタと、前記分離された
音声信号を一時蓄積するバッファメモリと、そのバッフ
ァメモリからの出力と前記出力される水平位相信号とを
比較するディジタル位相比較器と、そのディジタル位相
比較器の出力に基づいて、クロックを発振するクロック
発振器とを備え、前記クロック発振器の出力を用いて、
前記バッファメモリに蓄積された音声信号を出力するこ
とを特徴とする映像音声信号多重受信装置。
5. A multiplex signal of a digital signal having a fixed-length data format, in which an audio signal is multiplexed in a blanking period of the video signal, is received from the video / audio signal multiplex transmission device of claim 1, and reception thereof. Signal separation means for separating the multiplexed signal into an audio signal in which the video signal and audio clock information are multiplexed, a horizontal counter for outputting a horizontal phase signal of the separated video signal, and the separated audio signal temporarily. A buffer memory for accumulating, a digital phase comparator for comparing the output from the buffer memory with the output horizontal phase signal, and a clock oscillator for oscillating a clock based on the output of the digital phase comparator , Using the output of the clock oscillator,
A video / audio signal multiplex reception device, which outputs an audio signal stored in the buffer memory.
【請求項6】 請求項1の前記映像音声信号多重送信装
置から、固定長データのフォーマットを持つディジタル
信号の、映像信号のブランキング期間に音声信号が多重
された多重信号を受信し、その受信した多重信号を映像
信号及び音声クロック情報が多重されている音声信号に
分離する信号分離手段と、その分離された音声信号を一
時蓄積するバッファメモリと、そのバッファメモリから
出力される音声信号から音声クロックを再生する音声ク
ロック再生回路と、前記バッファメモリから出力される
音声信号を前記音声クロック再生回路の出力に基づいて
処理する音声信号処理回路とを備え、前記バッファメモ
リに蓄積された音声信号は、前記音声クロック再生回路
の出力を用いて出力するものであることを特徴とする映
像音声信号多重受信装置。
6. The video / audio signal multiplex transmitting apparatus according to claim 1, receives a multiplex signal of a digital signal having a fixed-length data format in which an audio signal is multiplexed during a blanking period of the video signal, and receives the same. Signal separation means for separating the multiplexed signal into an audio signal in which the video signal and audio clock information are multiplexed, a buffer memory for temporarily storing the separated audio signal, and an audio signal output from the buffer memory. An audio clock reproduction circuit that reproduces a clock and an audio signal processing circuit that processes an audio signal output from the buffer memory based on the output of the audio clock reproduction circuit, and the audio signal stored in the buffer memory is And a video / audio signal multiplex reception, which is output using the output of the audio clock reproduction circuit. apparatus.
【請求項7】 更に、制御電圧により制御されるクロッ
クを発振するクロック発振器と、そのクロック発振器の
制御電圧を得るために、前記クロック発振器の出力と前
記音声クロック再生回路からの出力とを比較する位相比
較器と、前記音声信号処理回路の出力を前記クロック発
振器の出力によりホールドさせるフリップフロップとを
備えたことを特徴とする請求項6記載の映像音声信号多
重受信装置。
7. A clock oscillator that oscillates a clock controlled by a control voltage, and compares the output of the clock oscillator with the output of the audio clock reproduction circuit to obtain the control voltage of the clock oscillator. 7. The video / audio signal multiplex receiving apparatus according to claim 6, further comprising a phase comparator and a flip-flop that holds the output of the audio signal processing circuit by the output of the clock oscillator.
【請求項8】 請求項1の前記映像音声信号多重送信装
置と、請求項2〜7のいずれかの前記映像音声信号多重
受信装置とを備えたことを特徴とする映像音声信号多重
伝送装置。
8. A video / audio signal multiplex transmission apparatus comprising: the video / audio signal multiplex transmission apparatus according to claim 1; and the video / audio signal multiplex reception apparatus according to claim 2.
JP6318095A 1995-03-16 1995-03-22 Video / audio signal multiplex transmission device, reception device, and transmission device Expired - Fee Related JP3010573B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP6318095A JP3010573B2 (en) 1995-03-22 1995-03-22 Video / audio signal multiplex transmission device, reception device, and transmission device
US08/616,191 US5929921A (en) 1995-03-16 1996-03-15 Video and audio signal multiplex sending apparatus, receiving apparatus and transmitting apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP6318095A JP3010573B2 (en) 1995-03-22 1995-03-22 Video / audio signal multiplex transmission device, reception device, and transmission device

Publications (2)

Publication Number Publication Date
JPH08265657A true JPH08265657A (en) 1996-10-11
JP3010573B2 JP3010573B2 (en) 2000-02-21

Family

ID=13221796

Family Applications (1)

Application Number Title Priority Date Filing Date
JP6318095A Expired - Fee Related JP3010573B2 (en) 1995-03-16 1995-03-22 Video / audio signal multiplex transmission device, reception device, and transmission device

Country Status (1)

Country Link
JP (1) JP3010573B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1429555A1 (en) * 2002-06-12 2004-06-16 Matsushita Electric Industrial Co., Ltd. Data transmission device and data reception device
JP2010103776A (en) * 2008-10-23 2010-05-06 Sony Corp Signal processing apparatus and method
JP2011250434A (en) * 2011-06-27 2011-12-08 Sony Corp Information transmitter, information transmission method, and information transmission/reception system
JP2012253517A (en) * 2011-06-01 2012-12-20 Miharu Communications Co Ltd Video transmission device

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1429555A1 (en) * 2002-06-12 2004-06-16 Matsushita Electric Industrial Co., Ltd. Data transmission device and data reception device
EP1429555A4 (en) * 2002-06-12 2007-10-10 Matsushita Electric Ind Co Ltd Data transmission device and data reception device
US7855751B2 (en) 2002-06-12 2010-12-21 Panasonic Corporation Data transmission device and data reception device
US8351516B2 (en) 2002-06-12 2013-01-08 Panasonic Corporation Data transmitter and data receiver
JP2010103776A (en) * 2008-10-23 2010-05-06 Sony Corp Signal processing apparatus and method
JP2012253517A (en) * 2011-06-01 2012-12-20 Miharu Communications Co Ltd Video transmission device
JP2011250434A (en) * 2011-06-27 2011-12-08 Sony Corp Information transmitter, information transmission method, and information transmission/reception system

Also Published As

Publication number Publication date
JP3010573B2 (en) 2000-02-21

Similar Documents

Publication Publication Date Title
US5929921A (en) Video and audio signal multiplex sending apparatus, receiving apparatus and transmitting apparatus
JP3479518B2 (en) Synchronizing device and synchronizing method
CA2102928C (en) Video and audio signal multiplexing apparatus and separating apparatus
JP4845156B2 (en) Data transmission device
KR100226528B1 (en) Decoder for compressed and multiplexed video and audio data
PL174674B1 (en) Video and audio signals synchronising system
US20070286245A1 (en) Digital signal processing apparatus and data stream processing method
US8104067B2 (en) Apparatus for receiving and playing back data
JP3045715B2 (en) Transmission system, transmitting device, recording / reproducing device, and recording device
JP3010573B2 (en) Video / audio signal multiplex transmission device, reception device, and transmission device
JP2959225B2 (en) Digital data transmission device and transmission / reception system using the same
KR100562817B1 (en) Transmitting apparatus and control method therefor and receiving apparatus and control method therefor
JP3123511B2 (en) Phase controller
JP2876878B2 (en) Data transmitter and data receiver
JP3052585B2 (en) Data transmitter and data receiver
JP2000187940A (en) Recording/reproducing device and recorder
JP2605435B2 (en) PCM transmission device, PCM reception device, digital audio interface format data transmission device, and digital audio interface format data reception device
JP3380120B2 (en) Transmission device
JPH09130643A (en) Data transmission system
JPH0630028A (en) Clock reproducing method/circuit
JPH07162855A (en) Digital transmission system for video signal
JPH04192732A (en) Video signal transmission system
JPH02154576A (en) Dc recovery device
JPH05199523A (en) Descrambling device

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071210

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081210

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091210

Year of fee payment: 10

LAPS Cancellation because of no payment of annual fees