JP2001169277A - Data transmission/reception system, data receiver and program recording medium - Google Patents

Data transmission/reception system, data receiver and program recording medium

Info

Publication number
JP2001169277A
JP2001169277A JP35037499A JP35037499A JP2001169277A JP 2001169277 A JP2001169277 A JP 2001169277A JP 35037499 A JP35037499 A JP 35037499A JP 35037499 A JP35037499 A JP 35037499A JP 2001169277 A JP2001169277 A JP 2001169277A
Authority
JP
Japan
Prior art keywords
data
error
frame
audio
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP35037499A
Other languages
Japanese (ja)
Inventor
Hiroshi Mitani
浩 三谷
Yoshihiro Morioka
芳宏 森岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP35037499A priority Critical patent/JP2001169277A/en
Publication of JP2001169277A publication Critical patent/JP2001169277A/en
Pending legal-status Critical Current

Links

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

PROBLEM TO BE SOLVED: To solve a problem such that an effective transmission speed is lowered because of the transmission delay of a network itself when a compensation means for transmission errors and omissions by retransmission is used in the network transmission. SOLUTION: This data receiver is provided with a buffer 101 for restoring video and sound data for which the data of respective frames are divided into a plurality of data units, identifiers for the respective frames are attached and also redundant data for error detection are attached, a buffer 102 for outputting the data of the frame directly before the frame restored by the buffer 101, a transmission error/omission detection part 104 for detecting whether an error or an omission is present in the data constituting the video and sound data on the basis of the identifiers and the redundant data and a selector 103 for selecting the data from the buffer 101 and/or the buffer 102 and preparing the frame without data omissions.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、ネットワークを通
じて例えば遠隔地にある2地点間においてDV方式に準
拠した映像信号を送受信するデータ送受信システムと、
データ受信装置とに関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a data transmission / reception system for transmitting / receiving a video signal conforming to the DV system between two remote locations via a network, for example.
The present invention relates to a data receiving device.

【0002】[0002]

【従来の技術】近年のデータ通信用のネットワーク伝送
帯域の拡大にともない、映像信号を映像専用の伝送路を
用いて伝送する方法に代わり、データ通信と共通のネッ
トワークを使って映像信号を伝送することが可能となっ
てきている。
2. Description of the Related Art With the recent expansion of a network transmission band for data communication, a video signal is transmitted using a common network for data communication instead of a method of transmitting a video signal using a transmission line dedicated to video. It is becoming possible.

【0003】ネットワークを通じて伝送を行うにあたっ
てはネットワーク上で発生した伝送誤りや欠落に対応す
ることが必要である。データ通信用のネットワークで
は、伝送誤りや欠落を検出するための冗長な情報やシリ
アル番号を伝送すべきデータに付加した上で送出し、受
信側では伝送誤りや欠落の発生をこの冗長な情報やシリ
アル番号をもとに調べる。
In transmitting data through a network, it is necessary to deal with transmission errors and omissions occurring on the network. In a network for data communication, redundant information for detecting transmission errors and omissions and a serial number are added to the data to be transmitted and then transmitted, and the receiving side reports the occurrence of transmission errors and omissions with this redundant information and Find out based on your serial number.

【0004】伝送誤りや欠落が発見された場合は、受信
側は送信側に対して、再送を要求し、送信側ではそれに
応えて同じ情報を送り直すことで最終的に伝送誤りや欠
落のないデータ伝送が行われている(例えば、IETF RFC
793 Transmission Control Protocol)。
[0004] When a transmission error or loss is found, the receiving side requests retransmission to the transmitting side, and the transmitting side retransmits the same information in response to the transmission error or loss so that there is no transmission error or loss. Data transmission is taking place (for example, IETF RFC
793 Transmission Control Protocol).

【0005】図6は再送を行うデータ伝送システムの一
例のブロック図である。送信部1001から送出されたデー
タはネットワーク1000を通じて受信部1002に送られる。
受信されたデータはバッファ1003に蓄えられるとともに
伝送誤り/欠落検出部1004に送られる。伝送誤り/欠落
検出部1004によって、伝送誤りあるいは欠落が検出され
た場合には、再送要求部1005から送信部1001に対して再
送要求が出される。
FIG. 6 is a block diagram showing an example of a data transmission system for performing retransmission. Data transmitted from the transmission unit 1001 is transmitted to the reception unit 1002 via the network 1000.
The received data is stored in the buffer 1003 and sent to the transmission error / loss detection unit 1004. When a transmission error or loss is detected by the transmission error / loss detection unit 1004, a retransmission request is issued from the retransmission request unit 1005 to the transmission unit 1001.

【0006】[0006]

【発明が解決しようとする課題】しかしながら、数百キ
ロメートルから数千キロメートル程度、送信側と受信側
が離れている場合、ネットワークの伝送遅延が大きくな
り、再送によって伝送誤りや欠落を修正するためにかか
る時間が映像音声信号の復元にとって無視できない程度
にまで大きくなることがある。
However, when the transmitting side and the receiving side are separated from each other by several hundred kilometers to several thousand kilometers, the transmission delay of the network becomes large, and it takes time to correct transmission errors and omissions by retransmission. The time may be so large that it cannot be ignored for the restoration of the video / audio signal.

【0007】これは実効的な伝送速度が低下したのと同
じことで、その結果、受信側では映像信号が途切れない
ように十分な大きさのバッファ1003を用意しなければな
らない。このため、受信側のバッファでの遅延時間によ
ってネットワークの伝送遅延時間を大きく上回る遅延が
発生してしまい、即時性の要求される用途には使用でき
ない。
This is the same as the decrease in the effective transmission speed. As a result, the receiving side must prepare a buffer 1003 having a sufficient size so that the video signal is not interrupted. For this reason, the delay time in the buffer on the receiving side causes a delay that greatly exceeds the transmission delay time of the network, and cannot be used for applications requiring immediacy.

【0008】本発明は、上記の課題を解決するためにな
されたものであり、映像音声データの伝送において伝送
誤りや欠落が発生した場合にも、映像音声データの再送
を要求することなく、誤り無く伝送されたデータをもと
にデータを補完することで遅延時間の少ないデータ送受
信システムと、映像音声データを受信してデータを補完
するデータ受信装置とを提供することを目的とする。
SUMMARY OF THE INVENTION The present invention has been made to solve the above-mentioned problem. Even when a transmission error or loss occurs in the transmission of video and audio data, the transmission of the video and audio data can be performed without requesting retransmission. An object of the present invention is to provide a data transmission / reception system with a small delay time by complementing data based on data transmitted without data, and a data receiving device that receives video and audio data and complements the data.

【0009】[0009]

【課題を解決するための手段】第1の本発明(請求項1
に対応)は、DV方式に準拠した映像音声データを送信
するデータ送信装置と、そのデータ送信装置が送信した
前記映像音声データを受信するデータ受信装置とを備
え、前記データ送信装置が、前記映像音声データを構成
する各フレームのデータを、複数のデータユニットに分
割し、前記フレーム毎の識別子を付すとともに、誤り検
出のための冗長データを付して、前記映像音声データを
送信し、前記データ受信装置が、前記データ送信装置が
送信した前記映像音声データを復元する復元手段と、前
記復元手段が復元するフレームの少なくとも1つ前のフ
レームの前記映像音声データを出力する前フレーム出力
手段と、前記データ送信装置が送信した前記映像音声デ
ータの前記識別子および前記冗長データに基づいて、前
記映像音声データを構成するデータに誤りおよび/また
は欠落があるかどうかを検出する誤り/欠落検出手段
と、前記誤り/欠落検出手段が行う検出結果に基づい
て、前記復元手段および/または前記前フレーム出力手
段からのデータを選択し、データ欠落のないフレームを
作成するための選択手段とを有することを特徴とするデ
ータ送受信システムである。
Means for Solving the Problems The first invention (claim 1)
) Includes a data transmitting device that transmits video and audio data conforming to the DV system, and a data receiving device that receives the video and audio data transmitted by the data transmitting device. Dividing the data of each frame constituting the audio data into a plurality of data units, attaching an identifier for each frame, attaching redundant data for error detection, transmitting the video / audio data, A receiving device, a restoration unit for restoring the video and audio data transmitted by the data transmission device, and a previous frame output unit for outputting the video and audio data of at least one frame before the frame to be restored by the restoration unit; Based on the identifier and the redundant data of the video and audio data transmitted by the data transmission device, the video and audio data Error / drop detection means for detecting whether there is an error and / or drop in the data to be formed, and an output from the restoration means and / or the previous frame output means based on a detection result performed by the error / drop detection means. Selecting means for selecting data and generating a frame without data loss.

【0010】第2の本発明(請求項2に対応)は、前記
復元手段が、バッファ機能を有しており、そのバッファ
機能が、前記誤り/欠落検出手段によって前記誤りおよ
び/または前記欠落が検出された場合に、その誤りおよ
び/または欠落が検出された部分のオーディオデータ部
の出力のために使用されることを特徴とする第1の本発
明に記載のデータ送受信システムである。
According to a second aspect of the present invention (corresponding to claim 2), the restoration means has a buffer function, and the buffer function is such that the error and / or the loss is detected by the error / loss detection means. A data transmission / reception system according to the first aspect of the present invention, wherein when detected, the data is used for outputting an audio data portion of a portion where the error and / or omission is detected.

【0011】第3の本発明(請求項3に対応)は、前記
前フレーム出力手段が、前記復元手段が復元するフレー
ムの少なくとも1つ前のフレームの前記映像音声データ
を復元することができる手段であることを特徴とする第
1または第2の本発明に記載のデータ送受信システムで
ある。
According to a third aspect of the present invention (corresponding to claim 3), the previous frame output means can restore the video and audio data of at least one frame before the frame restored by the restoration means. A data transmission / reception system according to the first or second aspect of the present invention, characterized in that:

【0012】第4の本発明(請求項4に対応)は、前記
誤り/欠落検出手段によって前記誤りおよび/または前
記欠落が検出された場合、前記選択手段が、その誤りお
よび/または欠落が検出された前記データユニットを構
成する映像ブロックについては、前記前フレーム出力手
段からの、その映像ブロックが含まれているフレームの
1つ前のフレームの対応する映像ブロックを選択し、前
記誤りおよび/または欠落が検出された前記データユニ
ットを構成するオーディオブロックの、ID部およびオ
ーディオ補助データ部については、前記前フレーム出力
手段からの、前記1つ前のフレームの対応する前記ID
部および前記オーディオ補助データ部を選択し、オーデ
ィオデータ部については、前記復元手段からの同じフレ
ームの他のオーディオデータ部を選択することを特徴と
する第1から第3のいずれかの本発明に記載のデータ送
受信システムである。
According to a fourth aspect of the present invention (corresponding to claim 4), when the error / missing is detected by the error / missing detecting means, the selecting means detects the error and / or missing. For the video block constituting the data unit thus selected, a video block corresponding to a frame immediately before the frame containing the video block from the previous frame output means is selected, and the error and / or Regarding the ID part and the audio auxiliary data part of the audio block constituting the data unit in which the loss has been detected, the ID corresponding to the immediately preceding frame from the previous frame output means is output.
And the audio auxiliary data section is selected, and as for the audio data section, another audio data section of the same frame from the restoration means is selected. It is a data transmission / reception system of the description.

【0013】第5の本発明(請求項5に対応)は、前記
データ送信装置が、所定の複数フレーム毎に同じ識別子
を付し、前記前フレーム出力手段が、前記復元手段が復
元するフレームに付されている識別子と同じ識別子を有
する、前のフレームの映像音声データを出力し、前記誤
り/欠落検出手段によって前記誤りおよび/または前記
欠落が検出された場合、前記選択手段が、その誤りおよ
び/または欠落が検出された前記データユニットを構成
する映像ブロックについては、前記前フレーム出力手段
からの、前記映像ブロックが含まれているフレームの1
つ前のフレームの対応する映像ブロックを選択し、前記
誤りおよび/または欠落が検出された前記データユニッ
トを構成するオーディオブロックの、ID部およびオー
ディオ補助データ部については、前記前フレーム出力手
段からの、前記誤りおよび/または前記欠落が検出され
た前記データユニットを含むフレームの識別子と同じ識
別子を有するフレームの対応する前記ID部および前記
オーディオ補助データ部を選択し、オーディオデータ部
については、前記復元手段からの同じフレームの他のオ
ーディオデータ部を選択することを特徴とする第1から
第3のいずれかの本発明に記載のデータ送受信システム
である。
According to a fifth aspect of the present invention (corresponding to claim 5), the data transmitting apparatus assigns the same identifier to each of a plurality of predetermined frames, and the previous frame output means outputs the frame to be restored by the restoration means. The video / audio data of the previous frame having the same identifier as the attached identifier is output, and when the error and / or the loss is detected by the error / drop detection unit, the selection unit outputs the error and / or the drop. For the video block constituting the data unit in which the missing is detected, one of the frames including the video block from the previous frame output unit is output.
The corresponding video block of the immediately preceding frame is selected, and the ID part and the audio auxiliary data part of the audio block constituting the data unit in which the error and / or omission has been detected are output from the previous frame output means. Selecting the corresponding ID part and the audio auxiliary data part of the frame having the same identifier as the identifier of the frame containing the data unit in which the error and / or the loss is detected, and for the audio data part, The data transmitting / receiving system according to any one of the first to third aspects of the present invention, wherein another audio data portion of the same frame from the means is selected.

【0014】第6の本発明(請求項6に対応)は、前記
データ送信装置が送信する前記映像音声データが、複数
の前記データユニットから構成されるサブシーケンス複
数個に分割されており、前記誤り/欠落検出手段によっ
て前記誤りおよび/または前記欠落が検出されて、前記
選択手段が前記オーディオデータ部を選択するさい、前
記選択手段が、前記誤りおよび/または前記欠落が検出
された前記データユニットが含まれる前記サブシーケン
スから2n(nは整数)離れたサブシーケンス内の、前
記誤りおよび/または前記欠落が検出された前記データ
ユニットと相関が高いオーディオデータ部を選択するこ
とを特徴とする第1から第5のいずれかの本発明に記載
のデータ送受信システムである。
According to a sixth aspect of the present invention (corresponding to claim 6), the video / audio data transmitted by the data transmission device is divided into a plurality of sub-sequences composed of a plurality of the data units. When the error and / or omission is detected by the error / omission detecting means and the selecting means selects the audio data section, the selecting means selects the data unit at which the error and / or the omission is detected. And selecting an audio data part having a high correlation with the data unit in which the error and / or the missing is detected in a subsequence 2n (n is an integer) away from the subsequence including A data transmission / reception system according to any one of the first to fifth aspects of the present invention.

【0015】上記の構成により、伝送誤りが発生した場
合にはそのデータユニット全体を破棄する、例えばUD
Pなどの伝送プロトコルと組み合わせることで、伝送誤
りや欠落が生じた場合にも、誤り無く伝送されたデータ
ユニットに含まれるデータを用いて伝送誤りや欠落で失
われたデータユニットを補完することにより、再送とい
う手段を用いること無くデータ伝送を行うことができ
る。
According to the above configuration, when a transmission error occurs, the entire data unit is discarded, for example, UD
By combining with a transmission protocol such as P, even if a transmission error or loss occurs, the data contained in the data unit transmitted without error is used to supplement the data unit lost due to the transmission error or loss. In addition, data transmission can be performed without using a means of retransmission.

【0016】第7の本発明(請求項7に対応)は、DV
方式に準拠した映像音声データであって、その映像音声
データを構成する各フレームのデータが複数のデータユ
ニットに分割され、前記フレーム毎の識別子が付されて
いるとともに、誤り検出のための冗長データが付されて
いる前記映像音声データを復元する復元手段と、前記復
元手段が復元するフレームの少なくとも1つ前のフレー
ムの前記映像音声データを出力する前フレーム出力手段
と、前記映像音声データの前記識別子および前記冗長デ
ータに基づいて、前記映像音声データを構成するデータ
に誤りおよび/または欠落があるかどうかを検出する誤
り/欠落検出手段と、前記誤り/欠落検出手段が行う検
出結果に基づいて、前記復元手段および/または前記前
フレーム出力手段からのデータを選択し、データ欠落の
ないフレームを作成するための選択手段とを備えたこと
を特徴とするデータ受信装置である。
According to a seventh aspect of the present invention (corresponding to claim 7), a DV
Data of each frame constituting the video and audio data is divided into a plurality of data units, each frame is provided with an identifier, and redundant data for error detection is provided. Restoring means for restoring the video and audio data to which is attached, a previous frame output means for outputting the video and audio data of at least one frame before the frame to be restored by the restoration means, and An error / loss detection means for detecting whether an error and / or loss exists in the data constituting the video / audio data based on an identifier and the redundant data; and a detection result performed by the error / loss detection means. , Selecting data from the restoration means and / or the previous frame output means to create a frame without data loss. Further comprising a selection means for a data receiving apparatus according to claim.

【0017】第8の本発明(請求項8に対応)は、前記
復元手段が、バッファ機能を有しており、そのバッファ
機能が、前記誤り/欠落検出手段によって前記誤りおよ
び/または前記欠落が検出された場合に、その誤りおよ
び/または欠落が検出された部分のオーディオデータ部
の出力のために使用されることを特徴とする第7の本発
明に記載のデータ受信装置である。
According to an eighth aspect of the present invention (corresponding to claim 8), the restoration means has a buffer function, and the buffer function is such that the error and / or the loss is detected by the error / loss detection means. A data receiving device according to a seventh aspect of the present invention, wherein when detected, the data is used for outputting an audio data portion of a portion where the error and / or omission is detected.

【0018】第9の本発明(請求項9に対応)は、前記
前フレーム出力手段が、前記復元手段が復元するフレー
ムの少なくとも1つ前のフレームの前記映像音声データ
を復元することができる手段であることを特徴とする第
7または第8の本発明に記載のデータ受信装置である。
According to a ninth aspect of the present invention (corresponding to claim 9), the preceding frame output means can restore the video / audio data of at least one frame before the frame restored by the restoration means. A seventh or eighth aspect of the present invention is the data receiving apparatus according to the present invention.

【0019】第10の本発明(請求項10に対応)は、
前記誤り/欠落検出手段によって前記誤りおよび/また
は前記欠落が検出された場合、前記選択手段が、その誤
りおよび/または欠落が検出された前記データユニット
を構成する映像ブロックについては、前記前フレーム出
力手段からの、その映像ブロックが含まれているフレー
ムの1つ前のフレームの対応する映像ブロックを選択
し、前記誤りおよび/または欠落が検出された前記デー
タユニットを構成するオーディオブロックの、ID部お
よびオーディオ補助データ部については、前記前フレー
ム出力手段からの、前記1つ前のフレームの対応する前
記ID部および前記オーディオ補助データ部を選択し、
オーディオデータ部については、前記復元手段からの同
じフレームの他のオーディオデータ部を選択することを
特徴とする第7から第9のいずれかの本発明に記載のデ
ータ受信装置である。
A tenth aspect of the present invention (corresponding to claim 10) is:
When the error and / or omission is detected by the error / omission detection means, the selection means outputs the previous frame output to the video block constituting the data unit in which the error and / or omission is detected. Means for selecting the corresponding video block of the frame immediately before the frame containing the video block from the means, and the ID part of the audio block constituting the data unit in which the error and / or omission was detected And for the audio auxiliary data section, select the ID section and the audio auxiliary data section corresponding to the previous frame from the previous frame output means,
The data receiving apparatus according to any one of the seventh to ninth aspects, wherein the audio data section selects another audio data section of the same frame from the restoration means.

【0020】第11の本発明(請求項11に対応)は、
前記映像音声データが、所定の複数フレーム毎に同じ識
別子が付されているデータであって、前記前フレーム出
力手段が、前記復元手段が復元するフレームに付されて
いる識別子と同じ識別子を有する、前のフレームの映像
音声データを出力し、前記誤り/欠落検出手段によって
前記誤りおよび/または前記欠落が検出された場合、前
記選択手段が、その誤りおよび/または欠落が検出され
た前記データユニットを構成する映像ブロックについて
は、前記前フレーム出力手段からの、前記映像ブロック
が含まれているフレームの1つ前のフレームの対応する
映像ブロックを選択し、前記誤りおよび/または欠落が
検出された前記データユニットを構成するオーディオブ
ロックの、ID部およびオーディオ補助データ部につい
ては、前記前フレーム出力手段からの、前記誤りおよび
/または前記欠落が検出された前記データユニットを含
むフレームの識別子と同じ識別子を有するフレームの対
応する前記ID部および前記オーディオ補助データ部を
選択し、オーディオデータ部については、前記復元手段
からの同じフレームの他のオーディオデータ部を選択す
ることを特徴とする第7から第9のいずれかの本発明に
記載のデータ受信装置である。
The eleventh invention (corresponding to claim 11) provides:
The video and audio data is data to which the same identifier is attached for each of a plurality of predetermined frames, and the previous frame output unit has the same identifier as the identifier attached to the frame restored by the restoration unit. The video / audio data of the previous frame is output, and when the error and / or the missing is detected by the error / missing detecting means, the selecting means selects the data unit in which the error and / or the missing is detected. For the video block to be composed, the video frame corresponding to the frame immediately before the frame containing the video block from the previous frame output means is selected, and the error and / or omission is detected. Regarding the ID part and the audio auxiliary data part of the audio block constituting the data unit, And selecting the corresponding ID part and the audio auxiliary data part of the frame having the same identifier as the identifier of the frame containing the data unit in which the error and / or the loss has been detected, from the audio output means. The data receiving device according to any one of the seventh to ninth aspects of the present invention, wherein the other of the same frame from the restoring means is selected from other audio data portions.

【0021】第12の本発明(請求項12に対応)は、
前記映像音声データが、複数の前記データユニットから
構成されるサブシーケンス複数個に分割されており、前
記誤り/欠落検出手段によって前記誤りおよび/または
前記欠落が検出されて、前記選択手段が前記オーディオ
データ部を選択するさい、前記選択手段が、前記誤りお
よび/または前記欠落が検出された前記データユニット
が含まれるサブシーケンスから2n(nは整数)離れた
サブシーケンス内の、前記誤りおよび/または前記欠落
が検出された前記データユニットと相関が高いオーディ
オデータ部を選択することを特徴とする第7から第11
のいずれかの本発明に記載のデータ受信装置である。
According to a twelfth aspect of the present invention (corresponding to claim 12),
The video / audio data is divided into a plurality of sub-sequences composed of a plurality of the data units, and the error / loss detection unit detects the error and / or the loss, and the selection unit outputs the audio / video data. When selecting a data part, the selecting means may select the error and / or error in a subsequence 2n (n is an integer) away from the subsequence including the data unit in which the error and / or the missing is detected. A seventh to eleventh audio data part having a high correlation with the data unit in which the loss is detected is selected.
The data receiving device according to any one of the present inventions.

【0022】第13の本発明(請求項13に対応)は、
第7から第12のいずれかの本発明に記載のデータ受信
装置の全部または一部の手段の全部または一部の機能を
コンピュータにより実行させるためのプログラムおよび
/またはデータを記録した、コンピュータにより読み取
り可能なことを特徴とするプログラム記録媒体である。
A thirteenth aspect of the present invention (corresponding to claim 13) is:
A computer-readable recording program and / or data for causing a computer to execute all or a part of the functions of all or a part of the data receiving apparatus according to any one of the seventh to twelfth aspects of the present invention. A program recording medium characterized by being possible.

【0023】[0023]

【発明の実施の形態】以下、本発明の実施の形態につい
て、図1から図5を用いて説明する。
DESCRIPTION OF THE PREFERRED EMBODIMENTS Embodiments of the present invention will be described below with reference to FIGS.

【0024】(実施の形態1)図1は、本発明の実施の
形態1におけるデータ送受信システムの、データ受信装
置のブロック図である。図1においてデータ受信装置10
0は、バッファ101、バッファ102と、セレクタ103と、伝
送誤り/欠落検出部104とで構成される。バッファ101は
1フレーム分の容量を持ち、データユニットに分割され
て伝送されて来るデータをデータ送信装置から受け取
る。また、バッファ101は、データ送信装置からのデー
タを復元する。
(Embodiment 1) FIG. 1 is a block diagram of a data receiving device of a data transmitting / receiving system according to Embodiment 1 of the present invention. In FIG. 1, a data receiving device 10
0 is composed of a buffer 101, a buffer 102, a selector 103, and a transmission error / loss detection unit 104. The buffer 101 has a capacity of one frame, and receives data transmitted by being divided into data units from a data transmitting device. Further, the buffer 101 restores data from the data transmission device.

【0025】バッファ102は、バッファ101と同じく1フ
レーム分の容量を持ち、1フレーム時間の単位で、いい
かえると1フレーム時間遅れて、バッファ101が受け取
ったデータの内容を、バッファ101から受け取る。セレ
クタ103はバッファ101のバッファ先頭からの順次出力10
5と、バッファ101のランダムアクセス出力106と、バッ
ファ102の順次出力107を入力とし、伝送誤り/欠落検出
部104の検出結果に基づいて、これらのいずれかを選択
して出力する。
The buffer 102 has a capacity of one frame similarly to the buffer 101, and receives the contents of the data received by the buffer 101 from the buffer 101 in units of one frame time, that is, one frame time later. The selector 103 sequentially outputs 10 from the buffer head of the buffer 101.
5, the random access output 106 of the buffer 101, and the sequential output 107 of the buffer 102 are input, and one of them is selected and output based on the detection result of the transmission error / loss detection unit 104.

【0026】伝送誤り/欠落検出部104は、バッファ101
と同様にデータ送信装置からのデータを受け取り、デー
タユニット単位での伝送誤り/欠落を検出する。伝送誤
りおよび/または欠落が検出された場合には、適切な補
完動作が行われるようにセレクタ103に対して指示を送
る。伝送誤りを検出するには、一般に広く行われている
ように、データ送信装置が冗長な誤り検出データをデー
タユニット単位で付加し、伝送誤り/欠落検出部104が
冗長な誤り検出データを利用することで可能となる。ま
た欠落の検出を行うには、データ送信装置が例えばデー
タユニット単位に単調に増加するシリアル番号を付加
し、伝送誤り/欠落検出部104がシリアル番号の抜けや
重複を検出することによって行うことができる。
The transmission error / dropout detection unit 104
In the same manner as described above, data is received from the data transmission device, and transmission errors / losses are detected in data unit units. When a transmission error and / or loss is detected, an instruction is sent to the selector 103 so that an appropriate supplementary operation is performed. In order to detect a transmission error, a data transmission apparatus adds redundant error detection data in data unit units, and a transmission error / dropout detection unit 104 uses the redundant error detection data, as is generally performed widely. This is possible. In order to detect the loss, the data transmission apparatus may add a monotonically increasing serial number, for example, in data unit units, and the transmission error / loss detection unit 104 may detect a missing or duplicate serial number. it can.

【0027】図2は、DV方式の映像音声データの構造
を示す説明図である。まず1フレーム分のデータは、52
5/60方式の場合、図2(a)に示すように10のサブシ
ーケンスから構成され、625/50方式の場合、図2(b)
に示すように12のサブシーケンスから構成されてい
る。サブシーケンス番号は先頭から順に0〜9あるいは
0〜11の番号がそれぞれのサブシーケンスに振られて
いる。
FIG. 2 is an explanatory diagram showing the structure of DV video / audio data. First, the data for one frame is 52
In the case of the 5/60 system, it is composed of 10 subsequences as shown in FIG. 2A, and in the case of the 625/50 system, FIG.
As shown in FIG. The subsequence numbers are sequentially assigned to the respective subsequences from 0 to 9 or 0 to 11 from the top.

【0028】次に1つ1つのサブシーケンスは、図2
(c)に示すように150のブロックから構成されてい
る。サブシーケンス内でのブロック番号は先頭から0〜
149の番号が振られている。このうちオーディオブロ
ックは1つのサブシーケンスに9つ含まれており、それ
ぞれブロック番号で6,22,38,54,70,8
6,102,118,134の位置にある。
Next, each subsequence is shown in FIG.
As shown in (c), it is composed of 150 blocks. The block number in the subsequence is 0
149 are assigned. Among them, nine audio blocks are included in one subsequence, and the block numbers are 6, 22, 38, 54, 70, and 8 respectively.
6, 102, 118 and 134.

【0029】オーディオブロックは、図2(d)に示す
ように80バイトの長さを持ち、先頭から3バイトのI
D部、つづく5バイトのオーディオ補助データ部、72
バイトのオーディオデータ部から構成される。
The audio block has a length of 80 bytes as shown in FIG.
D section, followed by a 5-byte audio auxiliary data section, 72
It consists of a byte audio data part.

【0030】このDV方式の映像音声データをネットワ
ークを通じて伝送する際には、ブロック単位で複数のデ
ータユニットに分割する。例えば15ブロックからなる
データユニットに分割した場合は、525/60方式では、1
フレームのデータは100個のデータユニットから構成
されることになる。ネットワークにおいて伝送誤りがな
く、この100個のデータユニットがすべて到着する
と、データ受信装置100のバッファ101ではもとの1フレ
ームのデータが再現されることになる。
When transmitting the DV video / audio data through a network, the video / audio data is divided into a plurality of data units in block units. For example, when the data unit is divided into data units each composed of 15 blocks, in the 525/60 system, 1
The frame data is composed of 100 data units. When there are no transmission errors in the network and all 100 data units arrive, the original data of one frame is reproduced in the buffer 101 of the data receiving apparatus 100.

【0031】ところが、あるデータユニットの1ビット
でも伝送誤りが発生すると、そのデータユニットは破棄
され、データユニット内の15個のブロックに含まれて
いた情報は失われてしまう。そこで、伝送誤りなく到着
したデータユニットに含まれる情報から補完を行う。
However, if a transmission error occurs even in one bit of a certain data unit, the data unit is discarded, and information contained in 15 blocks in the data unit is lost. Therefore, complement is performed from information included in the data unit that has arrived without a transmission error.

【0032】まず、映像データに関しては、一般的にフ
レーム間の相関が高いため、前フレームの映像情報を含
むブロックの情報で補完を行う。DV方式では映像情報
はフレーム内で完結しており、かつ、1フレーム分のデ
ータの中でブロックの占める位置、つまり1フレームの
データの先頭からどれだけの位置にあるかが再生映像の
画面上の座標と1対1の関係にある。そこで、失われた
映像データのブロックを補完するためには、ちょうど1
フレーム前のブロックで置き換えればよい。
First, regarding video data, since correlation between frames is generally high, complement is performed with information of a block including video information of the previous frame. In the DV system, video information is completed within a frame, and the position occupied by a block in the data of one frame, that is, the position from the beginning of the data of one frame is determined on the screen of the reproduced video. And has a one-to-one relationship. So, to compensate for the lost video data block, just one
What is necessary is just to replace with the block before a frame.

【0033】つぎに、音声データに関しては、サンプリ
ング周波数は実際の音声の周波数範囲に比べて十分高く
設定されているので、隣接サンプルの値と相関が高いた
め、隣接するサンプルの値で補完を行う。DV方式で音
声データの隣接サンプルのデータは、同じフレームの異
なるサブシーケンス内に含まれているので、1フレーム
のデータを少なくとも10(525/60方式の場合)あるい
は12(625/50方式の場合)以上の数からなるデータユ
ニットに分割して送れば、フレーム内にたかだか1つの
伝送誤りしかない場合、必ず隣接サンプルのデータを得
ることができる。
Next, as for the audio data, the sampling frequency is set sufficiently higher than the frequency range of the actual audio, so that the correlation with the value of the adjacent sample is high, so that the interpolation is performed with the value of the adjacent sample. . Since the data of adjacent samples of the audio data in the DV system is included in different sub-sequences of the same frame, data of one frame must be at least 10 (in the case of the 525/60 system) or 12 (in the case of the 625/50 system). If the data unit is divided into the above-mentioned data units and transmitted, if there is at most one transmission error in the frame, data of adjacent samples can always be obtained.

【0034】ただし、音声データを含む音声データブロ
ックには、図2(d)に示したように、ID部とオーデ
ィオ補助データ部が含まれる。これらの部分に関しては
同じフレームの別のサブシーケンスの音声データブロッ
クとは異なる情報が含まれているので、映像データと同
様に前フレームのオーディオデータブロックのID部、
ならびにオーディオ補助データ部で補完を行う。
However, the audio data block including the audio data includes an ID part and an audio auxiliary data part as shown in FIG. Since these parts include information different from the audio data block of another sub-sequence of the same frame, the ID part of the audio data block of the previous frame, like the video data,
Complementation is performed in the audio auxiliary data section.

【0035】上記をふまえて、図1の伝送誤り/欠落検
出部104は、誤りや欠落がない場合はセレクタ103に対し
て、バッファ101からの順次出力105の入力を選択するこ
とを指示する。
Based on the above, the transmission error / loss detection unit 104 in FIG. 1 instructs the selector 103 to select the input of the sequential output 105 from the buffer 101 when there is no error or loss.

【0036】一方、誤りあるいは欠落を検出した場合に
は、セレクタ103に対して、映像データのブロックの欠
落には、前フレームのデータを保持しているバッファ10
2から映像データのブロックを取り出して補完するた
め、バッファ102からの順次出力107の入力を選択するこ
とを指示する。音声データのブロックの欠落には、ID
部、ならびにオーディオ補助データ部に関しては映像デ
ータのブロックと同じく前フレームのデータを保持して
いるバッファ102からデータを取り出して補完するた
め、バッファ102からの順次出力107の入力を選択するこ
とを指示する。オーディオデータ部に関しては、同じフ
レームの別のサブシーケンスの音声データのブロックを
取り出して補完するため、バッファ101からのランダム
アクセス出力106の入力を選択することを指示する。
On the other hand, when an error or omission is detected, the selector 103 informs the selector 103 of the omission of the block of the video data and the buffer 10 holding the data of the previous frame.
An instruction is given to select an input of the sequential output 107 from the buffer 102 in order to take out a video data block from 2 and complement it. ID of the missing audio data block
Instructs to select the input of the sequential output 107 from the buffer 102 to take out the data from the buffer 102 holding the data of the previous frame as well as the block of the video data and complement the data with respect to the audio auxiliary data part I do. With respect to the audio data part, it instructs to select an input of the random access output 106 from the buffer 101 to take out and complement a block of audio data of another subsequence of the same frame.

【0037】上記の動作によって、伝送誤り/欠落が発
生した場合に、補完が行われる。
With the above operation, when a transmission error / loss occurs, complement is performed.

【0038】なお、上述した実施の形態1では、バッフ
ァ102は、1フレーム時間遅れて、バッファ101が受け取
ったデータの内容を、バッファ101から受け取るとした
が、バッファ102は、バッファ101からデータを受け取る
のではなく、バッファ101と同様にデータ送信装置から
データを受け取り、バッファ101からの順次出力105より
も1フレームの時間遅れて、その順次出力105と同様の
データを出力するように、データ送信装置からデータを
復元する機能を有する手段であってもよい。要するに、
バッファ102は、バッファ101からの順次出力105と同様
のデータを、その順次出力105より1フレーム時間遅れ
て順次出力107として出力するものでありさえすればよ
い。
In the first embodiment, the buffer 102 receives the content of the data received by the buffer 101 from the buffer 101 with a delay of one frame time. Instead of receiving the data, the data is received from the data transmitting device in the same manner as the buffer 101, and the data is transmitted such that the same data as the sequential output 105 is output with a time delay of one frame from the sequential output 105 from the buffer 101. It may be means having a function of restoring data from the device. in short,
The buffer 102 only needs to output the same data as the sequential output 105 from the buffer 101 as the sequential output 107 one frame time later than the sequential output 105.

【0039】また、上述した実施の形態1では、本発明
のデータ送受信システムを構成するデータ受信装置の、
または本発明のデータ受信装置の、復元手段の一例とし
てバッファ101を、前フレーム出力手段の一例としてバ
ッファ102を、誤り/欠落検出手段の一例として伝送誤
り/欠落検出部104を、選択手段の一例としてセレクタ1
03を、それぞれ用いた。
In the first embodiment described above, the data receiving apparatus constituting the data transmitting / receiving system of the present invention
Alternatively, in the data receiving apparatus of the present invention, the buffer 101 as an example of a restoration unit, the buffer 102 as an example of a previous frame output unit, the transmission error / drop detection unit 104 as an example of an error / drop detection unit, and an example of a selection unit. As selector 1
03 was used for each.

【0040】(実施の形態2)ところで、各ブロックの
ID部には12フレームで循環するシーケンス番号情報
が含まれている。この連続性を検査することで実施の形
態1に示したデータ送受信システムにおいて、ネットワ
ーク等で発生した伝送誤りや欠落に対する補完が行われ
たかどうかをそのデータ送受信システムの後段側にある
データ受信装置で検出することができる。
(Embodiment 2) By the way, the ID part of each block contains sequence number information circulating in 12 frames. By checking the continuity, in the data transmission / reception system shown in the first embodiment, it is determined whether or not transmission errors or omissions occurring in a network or the like have been complemented by a data reception device at a subsequent stage of the data transmission / reception system. Can be detected.

【0041】ネットワーク品質を調べるため、多くの場
合、伝送誤り/欠落を検出する手がかりを利用すること
がある。しかし、シーケンス番号の不連続によって動作
に不具合を来たす装置が接続される場合など、応用分野
によってはこの検出が働かない方が望ましい場合も存在
する。
In order to check network quality, it is often the case that clues for detecting transmission errors / drops are used. However, there are cases where it is desirable that this detection does not work depending on the application field, such as when a device that causes a malfunction due to discontinuity of the sequence number is connected.

【0042】図3は本発明の実施の形態2におけるデー
タ送受信システムの、データ受信装置のブロック図であ
る。図3において図1と同じ機能を果たす構成要素につ
いては図1と同じ番号を付し、説明を省略する。図3に
おいてバッファ301は11フレーム分の容量を持ち、1
フレーム時間の単位で、いいかえると1フレーム時間遅
れて、バッファ102が受け取ったデータの内容を、バッ
ファ102から受け取る。すなわちバッファ101が保持して
いるデータの12フレーム以前のフレームのデータが保
持されている。
FIG. 3 is a block diagram of a data receiving device of the data transmitting / receiving system according to the second embodiment of the present invention. 3, components that perform the same functions as in FIG. 1 are given the same numbers as in FIG. 1, and descriptions thereof are omitted. In FIG. 3, a buffer 301 has a capacity of 11 frames and has a capacity of 1 frame.
The contents of the data received by the buffer 102 are received from the buffer 102 with a frame time unit, ie, one frame time later. That is, data of a frame that is 12 frames or less than the data held in the buffer 101 is held.

【0043】実施の形態2においては、伝送誤り/欠落
検出部104は、誤りや欠落を検出した場合、音声データ
のブロックの欠落には、ID部、ならびにオーディオ補
助データ部に関しては、バッファ301に保持された12
フレーム以前のID部、ならびにオーディオ補助データ
部のデータを取り出し補完するため、バッファ301の順
次出力302の入力を選択することを指示する。他の部分
に関しては実施の形態1と同じである。
In the second embodiment, when an error or loss is detected, the transmission error / loss detection unit 104 stores an ID portion in the audio data block loss and a buffer 301 for the audio auxiliary data portion. 12 held
It instructs to select the input of the sequential output 302 of the buffer 301 in order to take out and complement the data of the ID part and the audio auxiliary data part before the frame. Other parts are the same as in the first embodiment.

【0044】上記の動作によって、伝送誤り/欠落が発
生した場合には補完が行われる。さらに補完動作の有無
にかかわらず、本実施の形態のデータ受信装置から出力
される各ブロックのID部に含まれるシーケンス番号情
報の連続性が保たれる。
By the above operation, when a transmission error / loss occurs, complement is performed. Further, continuity of the sequence number information included in the ID part of each block output from the data receiving apparatus of the present embodiment is maintained regardless of the presence or absence of the complement operation.

【0045】(実施の形態3)図4は525/60システムに
おけるDV方式の1フレームのオーディオブロックの配
列を示す説明図である。横1列が一つのサブシーケンス
を示す。525/60システムでは、1フレームは10個のサ
ブシーケンスで構成される。さらに、1個のサブシーケ
ンスには9個のオーディオブロックが含まれている。従
って、1フレームの中に、オーディオブロックは90個
含まれていることになる。
(Embodiment 3) FIG. 4 is an explanatory diagram showing an arrangement of audio blocks of one frame of the DV system in the 525/60 system. One horizontal row indicates one subsequence. In the 525/60 system, one frame is composed of 10 subsequences. Further, one audio sequence includes 9 audio blocks. Therefore, 90 audio blocks are included in one frame.

【0046】それぞれのサブシーケンスは合計150個
のブロックで構成されているが、オーディオブロックは
その中の、6,22,38,54,70,86,10
2,118,134番目の位置にある。サブシーケンス
はまた、前半の5サブシーケンスと、後半の5サブシー
ケンスに別れており、オーディオの独立したチャネルに
対応している。
Each of the sub-sequences is composed of a total of 150 blocks, and the audio block includes 6, 22, 38, 54, 70, 86, 10
It is at the 2,118,134th position. The subsequence is also divided into the first five subsequences and the second five subsequences, and corresponds to independent channels of audio.

【0047】さて、オーディオデータは以上のオーディ
オブロックに先頭から順番に載せられるのではなく、シ
ャフリングという操作を経て載せられる。例えば、フレ
ームの先頭から45サンプル目までのオーディオデータ
について言えば、先頭のD0データはサブシーケンス番
号0のブロック番号6のオーディオブロックに載せられ
るが、つぎのD1データは、サブシーケンス番号2のブ
ロック番号54のオーディオブロックに載せられる。つ
ぎのD2データは、サブシーケンス番号4のブロック番
号104に、つぎのD3データは、サブシーケンス番号
1のブロック番号1に戻る。このようにさまざまに位置
を変えながらオーディオデータはブロック上に配置され
ている。
The audio data is not placed on the above audio blocks in order from the beginning, but is placed via an operation called shuffling. For example, regarding the audio data up to the 45th sample from the beginning of the frame, the leading D0 data is placed in the audio block of block number 6 of subsequence number 0, but the next D1 data is placed in the block of subsequence number 2 It is placed on the audio block of number 54. The next D2 data returns to the block number 104 of the subsequence number 4, and the next D3 data returns to the block number 1 of the subsequence number 1. As described above, the audio data is arranged on the block while changing the position in various ways.

【0048】すべてのオーディオブロックの位置は規格
によって定められているが、データ受信装置においてオ
ーディオデータを補完するには、つぎの条件を満たす必
要がある。すなわち、補完関係にあるオーディオブロッ
クは1つのフレームの中に含まれていること、偶数サブ
シーケンスのオーディオブロックは、偶数サブシーケン
スのオーディオブロックで、奇数サブシーケンスのオー
ディオブロックは、奇数サブシーケンスのオーディオブ
ロックで、補完することである。
Although the positions of all audio blocks are determined by the standard, the following conditions must be satisfied in order to complement audio data in a data receiving device. That is, audio blocks in a complementary relationship are included in one frame, audio blocks of even subsequences are audio blocks of even subsequences, and audio blocks of odd subsequences are audio blocks of odd subsequences. It is a complement to the block.

【0049】前者の条件は、フレーム間で内容が変化す
る場合があるので、フレームを跨ってオーディオデータ
の補完動作を行うにはフレーム間の内容の一致を見なけ
ればならず、処理内容が複雑になるためである。また後
者の条件は、少なくとも隣り合うサブシーケンスからの
補完を避けることで、接近した伝送誤り/欠落の影響を
避けることができるためである。
In the former condition, the contents may change between frames. Therefore, in order to perform an operation of complementing audio data across frames, it is necessary to check the matching of the contents between frames, and the processing contents are complicated. Because it becomes. Also, the latter condition is because at least avoiding complementation from adjacent subsequences makes it possible to avoid the influence of approaching transmission errors / drops.

【0050】本発明の実施の形態3においては、525/60
システムにおいて、補完すべきオーディオブロックのサ
ブシーケンス番号をi、オーディオブロックのサブシー
ケンス内でのブロック番号をnとするとき、iが0,
1,5,6の場合、(数1)で示されるサブシーケンス
番号jのサブシーケンスに含まれる、(数2)で示され
る(ただし、modは剰余を得る演算子)ブロック番号
mのオーディオデータブロックのオーディオデータ部を
複写する。
In the third embodiment of the present invention, 525/60
In the system, when the sub-sequence number of the audio block to be complemented is i and the block number in the sub-sequence of the audio block is n, i is 0,
In the case of 1, 5, and 6, audio data of block number m represented by (Expression 2) (where mod is an operator for obtaining a remainder) included in the subsequence of subsequence number j represented by (Expression 1) Copy the audio data part of the block.

【0051】[0051]

【数1】j=i+2## EQU1 ## j = i + 2

【0052】[0052]

【数2】m=((n+42)mod144)+6 なお、(数2)において、nが1の場合、(n+42)
mod144の値は43となり、mの値は49となる。
また、nが102の場合、(n+42)mod144の
値は0となり、mの値は6となる。
[Mathematical formula-see original document] m = ((n + 42) mod 144) +6 Note that in (Expression 2), if n is 1, then (n + 42)
The value of mod 144 is 43, and the value of m is 49.
When n is 102, the value of (n + 42) mod 144 is 0, and the value of m is 6.

【0053】それに対して、iが2,3,4,7,8,
9の場合、(数3)で示されるサブシーケンス番号jの
サブシーケンスに含まれる、(数4)で示されるブロッ
ク番号mのオーディオデータブロックのオーディオデー
タ部を複写する。
On the other hand, if i is 2, 3, 4, 7, 8,
In the case of 9, the audio data part of the audio data block of the block number m shown in (Formula 4) included in the subsequence of the subsequence number j shown in (Formula 3) is copied.

【0054】[0054]

【数3】j=i−2## EQU3 ## j = i-2

【0055】[0055]

【数4】m=((n+90)mod144)+6 これにより前記の条件を満足しながら、補完動作を行う
ことができる。
[Mathematical formula-see original document] m = ((n + 90) mod 144) +6 Thus, the complementary operation can be performed while satisfying the above condition.

【0056】なお、以上の補完動作は、実施の形態1ま
たは2で説明したセレクタ103が、バッファ101、バッフ
ァ102、またはバッファ301からの出力を選択することに
よって行われる。
The above complementary operation is performed when the selector 103 described in the first or second embodiment selects an output from the buffer 101, the buffer 102, or the buffer 301.

【0057】(実施の形態4)図5は625/50システムに
おけるDV方式の1フレームのオーディオブロックの配
列を示す説明図である。横1列が一つのサブシーケンス
を示す。625/50システムでは、1フレームは12個のサ
ブシーケンスで構成される。さらに、1個のサブシーケ
ンスには9個のオーディオブロックが含まれている。従
って、1フレームの中に、オーディオブロックは108
個含まれていることになる。
(Embodiment 4) FIG. 5 is an explanatory diagram showing an arrangement of audio blocks of one frame of the DV system in a 625/50 system. One horizontal row indicates one subsequence. In the 625/50 system, one frame is composed of 12 subsequences. Further, one audio sequence includes 9 audio blocks. Therefore, in one frame, there are 108 audio blocks.
Will be included.

【0058】それぞれのサブシーケンスは合計150個
のブロックで構成されているが、オーディオブロックは
その中の、6,22,38,54,70,86,10
2,118,134番目の位置にある。サブシーケンス
はまた、前半の6サブシーケンスと、後半の6サブシー
ケンスに別れており、オーディオの独立したチャネルに
対応している。
Each sub-sequence is composed of a total of 150 blocks, and the audio block has 6, 22, 38, 54, 70, 86, 10
It is at the 2,118,134th position. The subsequence is also divided into the first six subsequences and the second six subsequences, and corresponds to independent channels of audio.

【0059】本発明の実施の形態4においては、625/50
システムにおいて、補完すべきオーディオブロックのサ
ブシーケンス番号をi、オーディオブロックのサブシー
ケンス内でのブロック番号をnとするとき、iが0,
1,2,3,6,7,8,9でかつ、nが6,22,3
8,54,70,86の場合、(数1)で示されるサブ
シーケンス番号jのサブシーケンスに含まれる、(数
2)で示されるブロック番号mのオーディオデータブロ
ックのオーディオデータ部を複写する。
In the fourth embodiment of the present invention, 625/50
In the system, when the sub-sequence number of the audio block to be complemented is i and the block number in the sub-sequence of the audio block is n, i is 0,
1,2,3,6,7,8,9 and n is 6,22,3
In the case of 8, 54, 70 and 86, the audio data part of the audio data block of the block number m shown in (Equation 2) included in the subsequence of subsequence number j shown in (Equation 1) is copied.

【0060】[0060]

【数1】j=i+2## EQU1 ## j = i + 2

【0061】[0061]

【数2】m=((n+42)mod144)+6 また、iが4,5,10,11でかつ、nが6,22,
38,54,70,86の場合、(数5)で示されるサ
ブシーケンス番号jのサブシーケンスに含まれる、(数
2)で示されるブロック番号mのオーディオデータブロ
ックのオーディオデータ部を複写する。
M = ((n + 42) mod 144) +6 Also, i is 4, 5, 10, 11 and n is 6, 22,
In the case of 38, 54, 70, 86, the audio data part of the audio data block of the block number m shown in (Equation 2) included in the subsequence of subsequence number j shown in (Equation 5) is copied.

【0062】[0062]

【数5】j=i−4## EQU5 ## j = i-4

【0063】[0063]

【数2】m=((n+42)mod144)+6 また、iが0,1,6,7でかつ、nが102,11
8,134の場合、(数6)で示されるサブシーケンス
番号jのサブシーケンスに含まれる、(数4)で示され
るブロック番号mのオーディオデータブロックのオーデ
ィオデータ部を複写する。
M = ((n + 42) mod 144) +6 Also, i is 0, 1, 6, 7 and n is 102, 11
In the case of 8, 134, the audio data part of the audio data block of the block number m shown in (Formula 4) included in the subsequence of the subsequence number j shown in (Formula 6) is copied.

【0064】[0064]

【数6】j=i+4## EQU6 ## j = i + 4

【0065】[0065]

【数4】m=((n+90)mod144)+6 さらに、iが2,3,4,5,8,9,10,11でか
つ、nが102,118,134の場合、(数5)で示
されるサブシーケンス番号jのサブシーケンスに含まれ
る、(数4)で示されるブロック番号mのオーディオデ
ータブロックのオーディオデータ部を複写する。
M = ((n + 90) mod 144) +6 Further, when i is 2, 3, 4, 5, 8, 9, 10, 11 and n is 102, 118, 134, The audio data part of the audio data block of the block number m shown in (Equation 4) included in the subsequence of the shown subsequence number j is copied.

【0066】[0066]

【数5】j=i−4## EQU5 ## j = i-4

【0067】[0067]

【数4】m=((n+90)mod144)+6 これにより、実施の形態3に示した条件を満足しなが
ら、補完動作を行うことができる。
[Mathematical formula-see original document] m = ((n + 90) mod 144) +6 Thus, the complementary operation can be performed while satisfying the conditions described in the third embodiment.

【0068】なお、以上の補完動作は、実施の形態1ま
たは2で説明したセレクタ103が、バッファ101、バッフ
ァ102、またはバッファ301からの出力を選択することに
よって行われる。
The above-described complementary operation is performed when the selector 103 described in the first or second embodiment selects an output from the buffer 101, the buffer 102, or the buffer 301.

【0069】以上のように本実施の形態によれば、すで
に伝送誤り、あるいは欠落なく伝送された情報をもと
に、伝送誤りあるいは欠落によって失われたデータユニ
ットの情報を補完することができる。これによって再送
による伝送誤りや欠落を補償する方式に比べ、伝送に関
わる遅延時間を短縮することができ、特にネットワーク
での遅延量が大きい長距離のデータ伝送に好適なデータ
送受信システムおよびデータ受信装置を提供することが
可能である。
As described above, according to the present embodiment, information of a data unit lost due to a transmission error or loss can be complemented based on information already transmitted without a transmission error or loss. This makes it possible to reduce the delay time involved in transmission as compared with a method of compensating for transmission errors or loss due to retransmission, and in particular, a data transmission / reception system and data reception apparatus suitable for long-distance data transmission with a large amount of delay in a network It is possible to provide.

【0070】なお、上述した実施の形態のデータ送信装
置、データ受信装置の各構成要素の全部または一部は、
ハードウェアであってもよいし、そのハードウェアの該
当する機能と同じ機能を有するソフトウェアであっても
よい。
Note that all or some of the components of the data transmitting device and the data receiving device of the above-described embodiment are
It may be hardware or software having the same function as the corresponding function of the hardware.

【0071】また、上述した実施の形態のデータ受信装
置の全部または一部の要素の全部または一部の機能をコ
ンピュータにより実行させるためのプログラムおよび/
またはデータを記録したプログラム記録媒体であって、
コンピュータにより読み取り可能であり、読み取られた
前記プログラムおよび/または前記データが前記コンピ
ュータと協動して前記機能を実行することを特徴とする
プログラム記録媒体も本発明に属する。
A program and / or a program for causing a computer to execute all or some of the functions of all or some of the elements of the data receiving apparatus according to the above-described embodiment.
Or a program recording medium on which data is recorded,
A program recording medium readable by a computer, wherein the read program and / or data executes the function in cooperation with the computer also belongs to the present invention.

【0072】[0072]

【発明の効果】以上説明したところから明らかなよう
に、本発明は、映像音声データの伝送において伝送誤り
や欠落が発生した場合にも、映像音声データの再送を要
求することなく、誤り無く伝送されたデータをもとにデ
ータを補完することで遅延時間の少ないデータ送受信シ
ステムと、映像音声データを受信してデータを補完する
データ受信装置とを提供することができる。
As is apparent from the above description, the present invention provides a method for transmitting video and audio data without error without requiring retransmission of the video and audio data even when a transmission error or loss occurs in the transmission. It is possible to provide a data transmission / reception system with a small delay time by complementing data based on the obtained data, and a data receiving device that receives video and audio data and complements the data.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の実施の形態1におけるデータ送受信シ
ステムの、データ受信装置のブロック図
FIG. 1 is a block diagram of a data receiving device of a data transmitting / receiving system according to a first embodiment of the present invention.

【図2】DV方式の映像音声データの構造を示す説明図FIG. 2 is an explanatory diagram showing a structure of video and audio data of a DV system.

【図3】本発明の実施の形態2におけるデータ送受信シ
ステムの、データ受信装置のブロック図
FIG. 3 is a block diagram of a data receiving device of the data transmitting / receiving system according to the second embodiment of the present invention.

【図4】525/60システムにおけるDV方式の1フレーム
のオーディオブロックの配列を示す説明図
FIG. 4 is an explanatory diagram showing an arrangement of audio blocks of one frame of a DV system in a 525/60 system.

【図5】625/50システムにおけるDV方式の1フレーム
のオーディオブロックの配列を示す説明図
FIG. 5 is an explanatory diagram showing an arrangement of audio blocks of one frame of a DV system in a 625/50 system.

【図6】従来例によるデータ伝送システムの一例のブロ
ック図
FIG. 6 is a block diagram of an example of a data transmission system according to a conventional example.

【符号の説明】[Explanation of symbols]

101 バッファ 102 バッファ 103 セレクタ 104 伝送誤り/欠落検出部 101 buffer 102 buffer 103 selector 104 transmission error / dropout detector

Claims (13)

【特許請求の範囲】[Claims] 【請求項1】 DV方式に準拠した映像音声データを送
信するデータ送信装置と、そのデータ送信装置が送信し
た前記映像音声データを受信するデータ受信装置とを備
え、 前記データ送信装置は、前記映像音声データを構成する
各フレームのデータを、複数のデータユニットに分割
し、前記フレーム毎の識別子を付すとともに、誤り検出
のための冗長データを付して、前記映像音声データを送
信し、 前記データ受信装置は、前記データ送信装置が送信した
前記映像音声データを復元する復元手段と、 前記復元手段が復元するフレームの少なくとも1つ前の
フレームの前記映像音声データを出力する前フレーム出
力手段と、 前記データ送信装置が送信した前記映像音声データの前
記識別子および前記冗長データに基づいて、前記映像音
声データを構成するデータに誤りおよび/または欠落が
あるかどうかを検出する誤り/欠落検出手段と、 前記誤り/欠落検出手段が行う検出結果に基づいて、前
記復元手段および/または前記前フレーム出力手段から
のデータを選択し、データ欠落のないフレームを作成す
るための選択手段とを有することを特徴とするデータ送
受信システム。
1. A data transmitting apparatus for transmitting video and audio data conforming to the DV system, and a data receiving apparatus for receiving the video and audio data transmitted by the data transmitting apparatus, wherein the data transmitting apparatus includes: The data of each frame constituting the audio data is divided into a plurality of data units, an identifier for each frame is attached, and redundant data for error detection is attached, and the video / audio data is transmitted. A receiving unit configured to restore the video and audio data transmitted by the data transmitting device; a previous frame output unit that outputs the video and audio data of at least one frame before the frame to be restored by the restoration unit; The video / audio data is transmitted based on the identifier and the redundant data of the video / audio data transmitted by the data transmission device. Error / drop detection means for detecting whether there is an error and / or loss in the data constituting the data, and from the restoration means and / or the previous frame output means based on the detection result performed by the error / drop detection means. A data transmission / reception system, comprising: selection means for selecting the data and generating a frame without data loss.
【請求項2】 前記復元手段は、バッファ機能を有して
おり、 そのバッファ機能は、前記誤り/欠落検出手段によって
前記誤りおよび/または前記欠落が検出された場合に、
その誤りおよび/または欠落が検出された部分のオーデ
ィオデータ部の出力のために使用されることを特徴とす
る請求項1に記載のデータ送受信システム。
2. The reconstructing means has a buffer function. When the error / missing is detected by the error / missing detecting means,
2. The data transmission / reception system according to claim 1, wherein the data transmission / reception system is used for outputting an audio data portion of a portion where the error and / or lack is detected.
【請求項3】 前記前フレーム出力手段は、前記復元手
段が復元するフレームの少なくとも1つ前のフレームの
前記映像音声データを復元することができる手段である
ことを特徴とする請求項1または2に記載のデータ送受
信システム。
3. The apparatus according to claim 1, wherein said previous frame output means is means capable of restoring said video and audio data of at least one frame before the frame restored by said restoration means. The data transmission / reception system according to 1.
【請求項4】 前記誤り/欠落検出手段によって前記誤
りおよび/または前記欠落が検出された場合、 前記選択手段は、 その誤りおよび/または欠落が検出された前記データユ
ニットを構成する映像ブロックについては、前記前フレ
ーム出力手段からの、その映像ブロックが含まれている
フレームの1つ前のフレームの対応する映像ブロックを
選択し、 前記誤りおよび/または欠落が検出された前記データユ
ニットを構成するオーディオブロックの、ID部および
オーディオ補助データ部については、前記前フレーム出
力手段からの、前記1つ前のフレームの対応する前記I
D部および前記オーディオ補助データ部を選択し、オー
ディオデータ部については、前記復元手段からの同じフ
レームの他のオーディオデータ部を選択することを特徴
とする請求項1から3のいずれかに記載のデータ送受信
システム。
4. When the error and / or missing is detected by the error / missing detecting means, the selecting means selects a video block constituting the data unit in which the error and / or missing is detected. Selecting a video block corresponding to a frame immediately before the frame containing the video block from the previous frame output unit, and configuring the data unit in which the error and / or omission has been detected. Regarding the ID part and audio auxiliary data part of the block, the I frame corresponding to the previous frame from the previous frame output means is
4. A method according to claim 1, wherein a D section and the audio auxiliary data section are selected, and for the audio data section, another audio data section of the same frame from the restoration means is selected. Data transmission / reception system.
【請求項5】 前記データ送信装置は、所定の複数フレ
ーム毎に同じ識別子を付し、 前記前フレーム出力手段は、前記復元手段が復元するフ
レームに付されている識別子と同じ識別子を有する、前
のフレームの映像音声データを出力し、 前記誤り/欠落検出手段によって前記誤りおよび/また
は前記欠落が検出された場合、 前記選択手段は、 その誤りおよび/または欠落が検出された前記データユ
ニットを構成する映像ブロックについては、前記前フレ
ーム出力手段からの、前記映像ブロックが含まれている
フレームの1つ前のフレームの対応する映像ブロックを
選択し、 前記誤りおよび/または欠落が検出された前記データユ
ニットを構成するオーディオブロックの、ID部および
オーディオ補助データ部については、前記前フレーム出
力手段からの、前記誤りおよび/または前記欠落が検出
された前記データユニットを含むフレームの識別子と同
じ識別子を有するフレームの対応する前記ID部および
前記オーディオ補助データ部を選択し、オーディオデー
タ部については、前記復元手段からの同じフレームの他
のオーディオデータ部を選択することを特徴とする請求
項1から3のいずれかに記載のデータ送受信システム。
5. The data transmitting apparatus assigns the same identifier to each of a plurality of predetermined frames, and the previous frame output means has the same identifier as the identifier assigned to the frame restored by the restoration means. And outputting the video and audio data of the frame, and when the error / loss is detected by the error / loss detection means, the selection means configures the data unit in which the error and / or loss is detected A video block corresponding to a frame immediately before the frame containing the video block from the previous frame output means, and selecting the data from which the error and / or omission was detected. For the ID part and audio auxiliary data part of the audio block that constitutes the unit, Means for selecting the corresponding ID part and the audio auxiliary data part of the frame having the same identifier as the identifier of the frame containing the data unit in which the error and / or the omission has been detected, for the audio data part 4. The data transmission / reception system according to claim 1, wherein another audio data portion of the same frame from the restoration unit is selected.
【請求項6】 前記データ送信装置が送信する前記映像
音声データは、複数の前記データユニットから構成され
るサブシーケンス複数個に分割されており、 前記誤り/欠落検出手段によって前記誤りおよび/また
は前記欠落が検出されて、前記選択手段が前記オーディ
オデータ部を選択するさい、 前記選択手段は、前記誤りおよび/または前記欠落が検
出された前記データユニットが含まれる前記サブシーケ
ンスから2n(nは整数)離れたサブシーケンス内の、
前記誤りおよび/または前記欠落が検出された前記デー
タユニットと相関が高いオーディオデータ部を選択する
ことを特徴とする請求項1から5のいずれかに記載のデ
ータ送受信システム。
6. The video / audio data transmitted by the data transmission device is divided into a plurality of sub-sequences composed of a plurality of the data units, and the error and / or the error are detected by the error / loss detection means. When a loss is detected and the selection means selects the audio data portion, the selection means calculates 2n (n is an integer) from the subsequence including the data unit in which the error and / or the loss is detected. ) In a separate subsequence,
The data transmission / reception system according to any one of claims 1 to 5, wherein an audio data portion having a high correlation with the data unit in which the error and / or the lack is detected is selected.
【請求項7】 DV方式に準拠した映像音声データであ
って、その映像音声データを構成する各フレームのデー
タが複数のデータユニットに分割され、前記フレーム毎
の識別子が付されているとともに、誤り検出のための冗
長データが付されている前記映像音声データを復元する
復元手段と、 前記復元手段が復元するフレームの少なくとも1つ前の
フレームの前記映像音声データを出力する前フレーム出
力手段と、 前記映像音声データの前記識別子および前記冗長データ
に基づいて、前記映像音声データを構成するデータに誤
りおよび/または欠落があるかどうかを検出する誤り/
欠落検出手段と、 前記誤り/欠落検出手段が行う検出結果に基づいて、前
記復元手段および/または前記前フレーム出力手段から
のデータを選択し、データ欠落のないフレームを作成す
るための選択手段とを備えたことを特徴とするデータ受
信装置。
7. Video / audio data conforming to the DV system, wherein data of each frame constituting the video / audio data is divided into a plurality of data units, an identifier for each frame is added, and error Restoring means for restoring the video and audio data to which redundant data for detection is attached; and a preceding frame output means for outputting the video and audio data of at least one frame before the frame restored by the restoring means; An error detecting whether the data constituting the video / audio data has an error and / or an omission based on the identifier of the video / audio data and the redundant data /
Drop-out detection means; and selection means for selecting data from the restoration means and / or the previous frame output means based on a detection result performed by the error / drop-out detection means to create a frame without data loss. A data receiving device comprising:
【請求項8】 前記復元手段は、バッファ機能を有して
おり、 そのバッファ機能は、前記誤り/欠落検出手段によって
前記誤りおよび/または前記欠落が検出された場合に、
その誤りおよび/または欠落が検出された部分のオーデ
ィオデータ部の出力のために使用されることを特徴とす
る請求項7に記載のデータ受信装置。
8. The restoration means has a buffer function, and the buffer function is provided when the error and / or the loss is detected by the error / loss detection means.
8. The data receiving apparatus according to claim 7, wherein the data receiving apparatus is used for outputting an audio data part of a part where the error and / or the missing part is detected.
【請求項9】 前記前フレーム出力手段は、前記復元手
段が復元するフレームの少なくとも1つ前のフレームの
前記映像音声データを復元することができる手段である
ことを特徴とする請求項7または8に記載のデータ受信
装置。
9. The apparatus according to claim 7, wherein said previous frame output means is means capable of restoring said video / audio data of at least one frame before the frame restored by said restoration means. A data receiving device according to claim 1.
【請求項10】 前記誤り/欠落検出手段によって前記
誤りおよび/または前記欠落が検出された場合、 前記選択手段は、 その誤りおよび/または欠落が検出された前記データユ
ニットを構成する映像ブロックについては、前記前フレ
ーム出力手段からの、その映像ブロックが含まれている
フレームの1つ前のフレームの対応する映像ブロックを
選択し、 前記誤りおよび/または欠落が検出された前記データユ
ニットを構成するオーディオブロックの、ID部および
オーディオ補助データ部については、前記前フレーム出
力手段からの、前記1つ前のフレームの対応する前記I
D部および前記オーディオ補助データ部を選択し、オー
ディオデータ部については、前記復元手段からの同じフ
レームの他のオーディオデータ部を選択することを特徴
とする請求項7から9のいずれかに記載のデータ受信装
置。
10. When the error and / or omission is detected by the error / omission detecting means, the selecting means includes: for an image block constituting the data unit in which the error and / or omission is detected; Selecting a video block corresponding to a frame immediately before the frame containing the video block from the previous frame output unit, and configuring the data unit in which the error and / or omission has been detected. Regarding the ID part and audio auxiliary data part of the block, the I frame corresponding to the previous frame from the previous frame output means is
10. The D section and the audio auxiliary data section are selected, and as for the audio data section, another audio data section of the same frame from the restoring means is selected. Data receiver.
【請求項11】 前記映像音声データは、所定の複数フ
レーム毎に同じ識別子が付されているデータであって、 前記前フレーム出力手段は、前記復元手段が復元するフ
レームに付されている識別子と同じ識別子を有する、前
のフレームの映像音声データを出力し、前記誤り/欠落
検出手段によって前記誤りおよび/または前記欠落が検
出された場合、 前記選択手段は、 その誤りおよび/または欠落が検出された前記データユ
ニットを構成する映像ブロックについては、前記前フレ
ーム出力手段からの、前記映像ブロックが含まれている
フレームの1つ前のフレームの対応する映像ブロックを
選択し、 前記誤りおよび/または欠落が検出された前記データユ
ニットを構成するオーディオブロックの、ID部および
オーディオ補助データ部については、前記前フレーム出
力手段からの、前記誤りおよび/または前記欠落が検出
された前記データユニットを含むフレームの識別子と同
じ識別子を有するフレームの対応する前記ID部および
前記オーディオ補助データ部を選択し、オーディオデー
タ部については、前記復元手段からの同じフレームの他
のオーディオデータ部を選択することを特徴とする請求
項7から9のいずれかに記載のデータ受信装置。
11. The video / audio data, wherein the same identifier is assigned to each of a plurality of predetermined frames, wherein the previous frame output means includes an identifier assigned to a frame restored by the restoration means. The video / audio data of the previous frame having the same identifier is output, and when the error / missing is detected by the error / missing detecting means, the selecting means detects the error and / or missing. For the video block that constitutes the data unit, a video block corresponding to the frame immediately before the frame containing the video block is selected from the previous frame output unit, and the error and / or missing data is selected. Of the audio block constituting the data unit in which the ID is detected and the audio auxiliary data section. Selecting the corresponding ID part and audio auxiliary data part of the frame having the same identifier as the identifier of the frame including the data unit in which the error and / or the loss has been detected from the previous frame output means. 10. The data receiving apparatus according to claim 7, wherein another audio data part of the same frame from the restoration unit is selected as the audio data part.
【請求項12】 前記映像音声データは、複数の前記デ
ータユニットから構成されるサブシーケンス複数個に分
割されており、 前記誤り/欠落検出手段によって前記誤りおよび/また
は前記欠落が検出されて、前記選択手段が前記オーディ
オデータ部を選択するさい、 前記選択手段は、前記誤りおよび/または前記欠落が検
出された前記データユニットが含まれるサブシーケンス
から2n(nは整数)離れたサブシーケンス内の、前記
誤りおよび/または前記欠落が検出された前記データユ
ニットと相関が高いオーディオデータ部を選択すること
を特徴とする請求項7から11のいずれかに記載のデー
タ受信装置。
12. The video / audio data is divided into a plurality of sub-sequences composed of a plurality of the data units, and the error / loss is detected by the error / loss detection means, When the selection unit selects the audio data portion, the selection unit includes a sub-sequence 2n (n is an integer) away from the sub-sequence including the data unit in which the error and / or the omission is detected. The data receiving apparatus according to any one of claims 7 to 11, wherein an audio data portion having a high correlation with the data unit in which the error and / or the missing is detected is selected.
【請求項13】 請求項7から12のいずれかに記載の
データ受信装置の全部または一部の手段の全部または一
部の機能をコンピュータにより実行させるためのプログ
ラムおよび/またはデータを記録した、コンピュータに
より読み取り可能なことを特徴とするプログラム記録媒
体。
13. A computer which records a program and / or data for causing a computer to execute all or a part of the functions of all or part of the data receiving apparatus according to claim 7. A program recording medium readable by a computer.
JP35037499A 1999-12-09 1999-12-09 Data transmission/reception system, data receiver and program recording medium Pending JP2001169277A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP35037499A JP2001169277A (en) 1999-12-09 1999-12-09 Data transmission/reception system, data receiver and program recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP35037499A JP2001169277A (en) 1999-12-09 1999-12-09 Data transmission/reception system, data receiver and program recording medium

Publications (1)

Publication Number Publication Date
JP2001169277A true JP2001169277A (en) 2001-06-22

Family

ID=18410063

Family Applications (1)

Application Number Title Priority Date Filing Date
JP35037499A Pending JP2001169277A (en) 1999-12-09 1999-12-09 Data transmission/reception system, data receiver and program recording medium

Country Status (1)

Country Link
JP (1) JP2001169277A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016224169A (en) * 2015-05-28 2016-12-28 セイコーエプソン株式会社 Memory control device, image processing device, display device and memory control method

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016224169A (en) * 2015-05-28 2016-12-28 セイコーエプソン株式会社 Memory control device, image processing device, display device and memory control method

Similar Documents

Publication Publication Date Title
EP0800295A2 (en) Method and apparatus for data packet transmission
US20070109444A1 (en) AV synchronization system
JP4846002B2 (en) File transfer system and file transfer method
US6717960B1 (en) Method for reconstructing an aggregate ATM cell stream and related device
US6047340A (en) Method for transmitting data, and apparatus for transmitting data and medium
US7194548B1 (en) Data transmission apparatus, receiving apparatus, and sending apparatus
JP3185863B2 (en) Data multiplexing method and apparatus
JP2001169277A (en) Data transmission/reception system, data receiver and program recording medium
JP2000339279A (en) Video distribution cache device and video collection reproducer
JP2001045056A (en) Communication system
JP5068282B2 (en) Video transmission apparatus and method
JP2003274216A (en) Data synchronizer
US20040080505A1 (en) Moving picture file distributing device
JP4673697B2 (en) Digital delay buffer and related method
JP2019211638A (en) Processing device, output device, synchronization control system, and these control methods, as well as programs
MX2008014753A (en) Generation of valid program clock reference time stamps for duplicate transport stream packets.
JP2636431B2 (en) Error correction device and error correction method
JP3059151B1 (en) Data stream switching device and data stream switching method
US20050021812A1 (en) Data transmission/reception apparatus
JP3067190B2 (en) Cell Loss Compensation Method for Image Transmission System
JP2953362B2 (en) LAN switching device
JP2001258025A (en) Multimedia reception system
JP2001197067A (en) Method and system for data connection transfer and recording medium recording data connection transfer program
JP2833910B2 (en) Communication control device
JP2856470B2 (en) Duplex configuration switching method

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20050801

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050816

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20051213