JPH10308932A - Data transmitting method/device - Google Patents

Data transmitting method/device

Info

Publication number
JPH10308932A
JPH10308932A JP18370697A JP18370697A JPH10308932A JP H10308932 A JPH10308932 A JP H10308932A JP 18370697 A JP18370697 A JP 18370697A JP 18370697 A JP18370697 A JP 18370697A JP H10308932 A JPH10308932 A JP H10308932A
Authority
JP
Japan
Prior art keywords
transmission
block
acknowledgment
packet
error
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP18370697A
Other languages
Japanese (ja)
Inventor
Makoto Ito
伊藤  誠
Kazufumi Watanabe
和文 渡邊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP18370697A priority Critical patent/JPH10308932A/en
Publication of JPH10308932A publication Critical patent/JPH10308932A/en
Pending legal-status Critical Current

Links

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

PROBLEM TO BE SOLVED: To obtain a real time video, to ensure a short end-to-end delay, to reduce a buffer size and to improve the video quality by collecting plural transmission packets for transmission as a block, copying/retransmitting in a block unit only a packet which needs to be retransmitted when the NAK signal of illegal reception is obtained in a recognition response to a transmission side. SOLUTION: When a NAK signal is contained in a recognition response which a recognition response reception means 16 receives, a block number is set to be a key and an address where the block is preserved is retrieved and obtained by using the table of a preservation place storage means 15. A relative address is calculated from the address by the intra-block packet number of the transmission packet to which transmission is requested and the address where the transmission packet is preserved is obtained. The plural transmission packets to which retransmission is requested are copied and they are transmitted again through a transmission packet transmission means 14. Then, an area where the block is preserved is opened after retransmission.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、データ伝送方法及
びデータ伝送装置に関し、特に、ネットワークのエラー
発生時においても、低遅延かつ高品質な双方向映像通信
を行う実時間映像伝送方法及び実時間映像伝送装置に適
用して有効な技術に関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a data transmission method and a data transmission apparatus, and more particularly to a real-time video transmission method and a real-time video transmission for performing low-delay and high-quality bidirectional video communication even when a network error occurs. The present invention relates to technology effective when applied to a video transmission device.

【0002】[0002]

【従来の技術】従来、実時間情報である映像の伝送には
時間的制約を伴うため、伝送中に生じる映像データのエ
ラー及びロスの回復は行わないことが多かった。しか
し、この場合、残留する映像データのエラー及びロスに
よる映像品質への影響は必至であり、近年、その回復に
FEC(orward rror rrection )方式(送信側
で伝送情報を符号化し、受信側で誤りを検出し訂正する
無帰還方式)、または既存の再送制御方式を適用するア
プローチがとられている。
2. Description of the Related Art Conventionally, the transmission of video, which is real-time information, involves a time constraint, and thus, in many cases, recovery from errors and loss of video data occurring during transmission is not performed. However, in this case, the influence to the image quality due to errors and loss of image data that remains is inevitable, in recent years, encodes transmission information in FEC (F orward E rror C rrection ) method (the transmitting side to the recovery, the received (A non-feedback method in which an error is detected and corrected on the side), or an approach in which an existing retransmission control method is applied.

【0003】ここで、FEC方式では、誤り訂正処理を
行う専用のハードウェアが必要となり、コストが高くつ
くという問題があるため、映像データのエラー及びロス
の回復には再送制御方式を適用することが有力であると
考えられる。
[0003] In the FEC system, dedicated hardware for performing error correction processing is required, and there is a problem that the cost is high. Therefore, a retransmission control system is applied to recover from errors and loss of video data. Is considered to be influential.

【0004】実時間映像の伝送に既存の再送制御方式を
適用する場合は、映像送信側及び映像受信側に映像デー
タを蓄積するためのバッファを設け、再送を行うための
時間的余裕を作る。映像送信側は、一定単位の映像デー
タごとに伝送パケットを生成し、映像受信側へ送信す
る。映像受信側は、伝送パケット受信ごとに、伝送パケ
ット受信の確認応答を映像送信側へと返す。その際、伝
送中エラーまたはロスとなった伝送パケットが存在する
場合、その伝送パケットの再送信を映像送信側に要求
し、映像送信側は再送要求のあった伝送パケットを再送
する。通常、既存の再送制御方式では、すべての伝送パ
ケットが正しい順序で映像受信側に受信されることを保
証するため、伝送中エラーまたはロスとなった伝送パケ
ットは、正しく受信されるまで再送が繰り返される。
When an existing retransmission control method is applied to the transmission of real-time video, a buffer for storing video data is provided on the video transmission side and the video reception side, and a time margin for retransmission is provided. The video transmitting side generates a transmission packet for each fixed unit of video data and transmits the packet to the video receiving side. The video receiving side returns an acknowledgment of transmission packet reception to the video transmitting side every time a transmission packet is received. At this time, if there is a transmission packet in which an error or a loss has occurred during transmission, the video transmission side requests the video transmission side to retransmit the transmission packet, and the video transmission side retransmits the transmission packet for which the retransmission was requested. Normally, in the existing retransmission control method, in order to guarantee that all transmission packets are received by the video receiving side in the correct order, transmission packets having an error or loss during transmission are repeatedly retransmitted until they are received correctly. It is.

【0005】[0005]

【発明が解決しようとする課題】しかしながら、既存の
再送制御方式を実時間映像伝送に適用した場合、以下の
問題が生じる。
However, when the existing retransmission control method is applied to real-time video transmission, the following problems occur.

【0006】(1)エンド・エンド間伝送の場合は、伝
送中エラーまたはロスとなった伝送パケットの再送が、
それに含まれる映像データの表示時間までに完了しなか
った場合、その伝送パケットが正しく受信されるまで、
その伝送パケット以降の伝送パケットが映像受信側に正
しく受信されていても、それらに含まれる映像データは
表示されないので、映像は途切れてしまう。同様に、ノ
ード・ノード間伝送の場合は、伝送中エラーまたはロス
となったパケットの再送の完了が遅くなった場合、次の
ノードまたは映像表示装置へ送信する映像データが途切
れて、最終的に映像が途切れてしまうケースがある。
(1) In the case of end-to-end transmission, retransmission of an error or loss transmission packet during transmission is
If it is not completed by the display time of the video data contained in it, until the transmission packet is received correctly,
Even if transmission packets subsequent to the transmission packet are correctly received by the video receiving side, the video data included therein is not displayed, so that the video is interrupted. Similarly, in the case of node-to-node transmission, if the completion of retransmission of an error or loss packet during transmission is delayed, video data to be transmitted to the next node or video display device is interrupted, and finally There are cases where the video is interrupted.

【0007】(2)前記(1)の問題点が生じる頻度を
減少させるために、映像送信側及び映像受信側における
バッファのサイズを大きくする必要があるが、そうする
とエンド・エンド遅延が増加してしまう。
(2) In order to reduce the frequency of occurrence of the problem (1), it is necessary to increase the sizes of buffers on the video transmission side and the video reception side, but this increases end-to-end delay. I will.

【0008】(3)通常、既存の再送制御方式では、伝
送パケットのサイズには長い単位が用いられるが、伝送
パケットサイズを長くすればするほど、パケットエラー
率が高くなってしまう。逆に、パケットエラー率を低く
するために、伝送パケットを短くすると、確認応答数が
増加し、パックワード伝送量の増加、及び確認応答処理
の増加に伴う処理負荷の増加を招く。
(3) Normally, in the existing retransmission control method, a long unit is used for the size of the transmission packet, but the longer the transmission packet size, the higher the packet error rate. Conversely, if the transmission packet is shortened in order to lower the packet error rate, the number of acknowledgments increases, causing an increase in the amount of transmitted words and an increase in processing load accompanying an increase in acknowledgment processing.

【0009】本発明は、前記従来技術の問題点を解決す
るためになされたものであり、本発明の目的は、データ
伝送方法およびデータ伝送装置において、すべての映像
データがエラー及びロスのない状態で映像受信側に伝送
されることを保証することよりも、低遅延性及び映像の
実時間性を保証した上で、映像データのエラー及びロス
の回復を行うことが可能となる技術を提供することにあ
る。
SUMMARY OF THE INVENTION The present invention has been made to solve the above-mentioned problems of the prior art, and it is an object of the present invention to provide a data transmission method and a data transmission apparatus in which all video data are free from errors and losses. The present invention provides a technology that can recover an error and a loss of video data while guaranteeing low delay and real-time performance of a video, rather than ensuring that the video data is transmitted to a video receiving side. It is in.

【0010】本発明の他の目的は、データ伝送方法およ
びデータ伝送装置において、フォワード伝送路における
エラー発生時のみならず、バックワード伝送路における
エラー発生時においても、低遅延性及び映像の実時間性
を保証した上で、ネットワーク負荷をおさえつつ、映像
データのエラー及びロスの回復を行うことが可能となる
技術を提供することにある。
Another object of the present invention is to provide a data transmission method and a data transmission apparatus which have a low delay and real-time video not only when an error occurs in a forward transmission path but also when an error occurs in a backward transmission path. It is an object of the present invention to provide a technique capable of recovering an error and a loss of video data while suppressing a network load while guaranteeing performance.

【0011】本発明の前記ならびにその他の目的と新規
な特徴は、本明細書の記述及び添付図面によって明らか
にする。
The above and other objects and novel features of the present invention will become apparent from the description of the present specification and the accompanying drawings.

【0012】[0012]

【課題を解決するための手段】本願において開示される
発明のうち、代表的なものの概要を簡単に説明すれば、
下記の通りである。
SUMMARY OF THE INVENTION Among the inventions disclosed in the present application, the outline of a representative one will be briefly described.
It is as follows.

【0013】実時間で発生する映像データをノード・ノ
ード間またはエンド・エンド間で高品質にかつリアルタ
イムに伝送するデータ伝送方法において、複数個の伝送
パケットをひとまとめにしたものをブロックとし、受信
側で、1ブロック内の各伝送パケットがすべて正しく受
信されたことを表すACK信号を含む確認応答、あるい
は、1ブロック内のいずれかの伝送パケットが正しく受
信されなかったことを表すNAK信号を含む確認応答を
ブロック単位で生成して送信側へ返送し、送信側で、前
記受信側からのブロック単位の確認応答がNAK信号を
含む場合に、再送が必要な伝送パケットのみを複数個コ
ピーして受信側へ再送することを特徴とする。
In a data transmission method for transmitting video data generated in real time between nodes or end to end in high quality and in real time, a plurality of transmission packets are grouped together as a block, and And an acknowledgment including an ACK signal indicating that all transmission packets in one block have been correctly received, or an acknowledgment including a NAK signal indicating that any transmission packet in one block has not been correctly received. A response is generated in units of blocks and sent back to the transmitting side. When the acknowledgment in block units from the receiving side includes a NAK signal, the transmitting side copies and transmits only a plurality of transmission packets requiring retransmission. It is characterized by resending to the side.

【0014】また、前記データ伝送方法において、前記
受信側は、過去に受信した複数のブロックの各々につい
て、該ブロックが正しく受信されたか否かを表す1ビッ
トの履歴情報を生成するとともに、過去数ブロック分の
該履歴情報を含む確認応答を生成して送信側に返送し、
前記送信側は、受信した確認応答の誤りの有無を検出
し、誤りを含む確認応答あるいはロスとなった確認応答
がある場合に、その前後に正しく受信された確認応答に
含まれるブロック番号を用いて、誤りを含む確認応答及
びロスとなった確認応答がどのブロックに対する確認応
答であったかを特定し、その特定したブロックの履歴情
報を、以降に正しく受信された確認応答内に含まれるブ
ロック番号と履歴情報の並びとから取得でき、かつ誤り
を含む確認応答あるいはロスとなった確認応答がNAK
信号を含んでいると判定される場合に限って、誤りを含
む確認応答あるいはロスとなった確認応答に対するブロ
ックに含まれるすべての伝送パケットを複数個コピーし
て受信側へ再送することを特徴とする。
In the data transmission method, the receiving side may generate, for each of a plurality of blocks received in the past, 1-bit history information indicating whether or not the block has been correctly received, and Generates an acknowledgment including the block of the history information and returns it to the transmitting side,
The transmitting side detects the presence or absence of an error in the received acknowledgment, and when there is an acknowledgment containing an error or a lost acknowledgment, uses the block number included in the acknowledgment correctly received before and after that. The acknowledgment containing the error and the lost acknowledgment are identified for which block, and the history information of the identified block is identified by the block number included in the acknowledgment correctly received thereafter. An acknowledgment that can be obtained from the history information list and contains an error or a lost acknowledgment is NAK
Only when it is determined that the packet includes a signal, a plurality of all transmission packets included in a block for an acknowledgment containing an error or a lost acknowledgment are copied and retransmitted to a receiving side. I do.

【0015】実時間で発生する映像データをノード・ノ
ード間またはエンド・エンド間で高品質に、かつリアル
タイムに伝送するデータ伝送装置において、前記送信装
置は、送信側バッファと、映像データが入力される入力
手段と、入力された映像データを送信側バッファに一時
記憶する映像データ一時記憶手段と、前記送信側バッフ
ァ内において、一定単位の映像データ毎に伝送パケット
を生成し、さらに、その伝送パケットを複数個ひとまと
めにしたブロックを生成するとともに、前記伝送パケッ
トには、ブロックを識別するためのブロック番号とその
ブロック内の伝送パケットを識別するためのブロック内
パケット番号とを含むヘッダ情報を付加する伝送パケッ
ト及びブロック生成手段と、前記ブロック番号をキーと
したテーブルを用いて、生成したブロックの送信側バッ
ファにおける保存場所を記憶する保存場所記憶手段と、
前記伝送パケットを受信装置へ送信する伝送パケット送
信手段と、受信装置からの確認応答を受信する確認応答
受信手段と、再送要求のあった伝送パケットを選択し、
前記伝送パケット送信手段に対してその伝送パケットを
複数個コピーして再送信するよう指示する再送処理を各
伝送パケットに対して1度だけに限定して行う再送手段
とを備え、前記受信装置は、受信側バッファと、前記送
信装置から伝送された伝送パケットを受信する伝送パケ
ット受信手段と、受信した伝送パケットの誤りを検出す
る誤り検出手段と、ブロック番号とブロック内パケット
番号を用いて誤りを含む伝送パケット及びロスとなった
伝送パケットを特定するエラー及びロスパケット特定手
段と、誤りを含む伝送パケットまたはロスとなった伝送
パケットが存在する場合、その伝送パケットのブロック
内パケット番号を記憶するブロック内パケット番号記憶
手段と、1ブロックを正しく受信した場合は、受信した
ブロックのブロック番号とACK信号を含む確認応答
を、受信した1ブロック内に誤りを含む伝送パケットま
たはロスとなった伝送パケットが存在する場合は、受信
したブロックのブロック番号と誤りを含む伝送パケット
またはロスとなった伝送パケットのブロック内パケット
番号とNAK信号を含む確認応答を、1回目に伝送され
たブロックに対してのみ、1ブロック受信毎に生成する
確認応答生成手段と、生成した確認応答を送信装置へ送
信する確認応答送信手段と、受信した伝送パケットから
それに含まれる映像データを抽出する映像データ抽出手
段と、1回再送に必要な時間だけ、抽出した映像データ
を受信側バッファに記憶する映像データ記憶手段と、映
像データを出力する出力手段とを備えることを特徴とす
る。
[0015] In a data transmission apparatus for transmitting video data generated in real time between nodes and nodes or between end and end in high quality and in real time, the transmission apparatus includes a transmission side buffer and video data input thereto. Input means, video data temporary storage means for temporarily storing input video data in a transmission-side buffer, and generating a transmission packet for each fixed unit of video data in the transmission-side buffer. Is generated, and header information including a block number for identifying the block and an in-block packet number for identifying a transmission packet in the block is added to the transmission packet. Uses a transmission packet and block generation means and a table using the block number as a key Te, a storage location storage means for storing the location in the transmission side buffer of the generated block,
Transmission packet transmitting means for transmitting the transmission packet to a receiving device, acknowledgment receiving means for receiving an acknowledgment from the receiving device, and selecting a transmission packet having a retransmission request,
Retransmitting means for instructing the transmission packet transmitting means to copy a plurality of the transmission packets and retransmitting the transmission packets only once for each transmission packet; and A receiving buffer, a transmission packet receiving unit for receiving a transmission packet transmitted from the transmission device, an error detection unit for detecting an error in the received transmission packet, and detecting an error using the block number and the in-block packet number. Error and loss packet specifying means for specifying a transmission packet including and a lossy transmission packet, and a block for storing a packet number in a block of the transmission packet including an error-containing transmission packet or a lossy transmission packet when the transmission packet includes an error or a lossy transmission packet Packet number storage means and, if one block is received correctly, the block of the received block. If an acknowledgment including the number and the ACK signal is received, if there is a transmission packet containing an error or a lost transmission packet in one received block, it becomes a transmission packet or a loss containing the block number of the received block and the error. Acknowledgment generating means for generating an acknowledgment including the packet number in the block of the transmitted packet and the NAK signal only for the first transmitted block every time one block is received, and transmitting the generated acknowledgment to the transmitting device. Acknowledgment transmitting means for transmitting, video data extracting means for extracting video data included in the received transmission packet, and video data storage for storing the extracted video data in a receiving buffer for a time required for one retransmission Means, and output means for outputting video data.

【0016】前記データ伝送装置において、前記受信装
置の確認応答生成手段は、過去に受信した複数のブロッ
クの各々について、該ブロックが正しく受信されたか否
かを表す1ビットの履歴情報を生成するとともに、過去
数ブロック分の該履歴情報を含む確認応答を生成し、前
記送信装置は、受信した確認応答の誤りの有無を検出す
る確認応答誤り検出手段と、誤りを含む確認応答あるい
はロスとなった確認応答がある場合に、その前後に正し
く受信された確認応答に含まれるブロック番号を用い
て、誤りを含む確認応答及びロスとなった確認応答がど
のブロックに対する確認応答であったかを特定する誤り
確認応答特定手段と、その特定したブロックの履歴情報
を、以降に正しく受信された確認応答内に含まれるブロ
ック番号と履歴情報の並びとから取得でき、かつその誤
りを含む確認応答あるいはロスとなった確認応答がNA
K信号を含んでいると判定される場合に限って、その誤
りを含む確認応答あるいはロスとなった確認応答に対す
るブロックに含まれるすべての伝送パケットを複数個コ
ピーして再送するブロック再送手段とを、さらに備える
ことを特徴とする。
In the data transmission device, the acknowledgment generation means of the reception device generates, for each of a plurality of blocks received in the past, 1-bit history information indicating whether or not the block was correctly received. The transmitting device generates an acknowledgment including the history information for the past several blocks, and the transmitting device determines whether or not the received acknowledgment has an error. If there is an acknowledgment, an error acknowledgment is used to identify the block to which the acknowledgment containing the error and the lost acknowledgment correspond to the acknowledgment using the block numbers included in the acknowledgment correctly received before and after the acknowledgment. The response specifying means, and the block information and the history information included in the acknowledgment correctly received thereafter, by using the history information of the specified block. Can be obtained from the sequence and acknowledgment NA became acknowledgment or loss contains the error
Block retransmitting means for copying and retransmitting a plurality of all transmission packets included in the block corresponding to the acknowledgment including the error or the lost acknowledgment only when it is determined that the acknowledgment includes the K signal. , Are further provided.

【0017】[0017]

【発明の実施の形態】以下、図面を参照して本発明の実
施の形態を詳細に説明する。なお、実施の形態を説明す
るための全図において、同一機能を有するものは同一符
号を付け、その繰り返しの説明は省略する。
Embodiments of the present invention will be described below in detail with reference to the drawings. In all the drawings for describing the embodiments, components having the same functions are denoted by the same reference numerals, and repeated description thereof will be omitted.

【0018】[実施の形態]図1は、本発明の一実施の
形態である実時間映像伝送装置の概略構成を示すブロッ
ク図である。
[Embodiment] FIG. 1 is a block diagram showing a schematic configuration of a real-time video transmission apparatus according to an embodiment of the present invention.

【0019】同図に示すように、本実施の形態におい
て、送信装置100と受信装置200はネットワーク3
00を介して接続される。送信側バッファ10を備えた
送信装置100は、映像データを入力する入力手段11
と、入力した映像データを一時記憶する映像データ一時
記憶手段12と、伝送パケット及びブロックを生成する
伝送パケット及びブロック生成手段13と、生成した伝
送パケットを受信装置200へ送信する伝送パケット送
信手段14と、生成したブロックの送信側バッファ10
における保存場所を記憶する保存場所記憶手段15と、
受信装置200からの確認応答を受信する確認応答受信
手段16と、受信装置200から再送要求があった場
合、伝送パケットの再送を行う再送手段17とから構成
される。
As shown in FIG. 1, in the present embodiment, transmitting apparatus 100 and receiving apparatus 200
00 is connected. The transmission device 100 including the transmission-side buffer 10 includes input means 11 for inputting video data.
A video data temporary storage unit 12 for temporarily storing input video data, a transmission packet and block generation unit 13 for generating transmission packets and blocks, and a transmission packet transmission unit 14 for transmitting the generated transmission packets to the receiving device 200 And the transmission buffer 10 of the generated block
Storage location storage means 15 for storing storage locations in
It comprises an acknowledgment receiving unit 16 for receiving an acknowledgment from the receiving device 200, and a retransmitting unit 17 for retransmitting a transmission packet when a retransmission request is received from the receiving device 200.

【0020】受信側バッファ20を備えた受信装置20
0は、送信装置100からの伝送パケットを受信する伝
送パケット受信手段21と、受信した伝送パケットの誤
りを検出する誤り検出手段22と、エラーまたはロスと
なった伝送パケットを特定するエラー及びロスパケット
特定手段23と、エラーまたはロスとなった伝送パケッ
トのブロック内パケット番号を記憶するブロック内パケ
ット番号記憶手段24と、伝送パケットから映像データ
を抽出する映像データ抽出手段25と、確認応答を生成
する確認応答生成手段26と、生成した確認応答を送信
装置100へ送信する確認応答送信手段27と、1回再
送に必要な時間だけ、抽出した映像データを受信側バッ
ファ20に記憶する映像データ記憶手段28と、映像デ
ータを出力する出力手段29とから構成される。
Receiving device 20 provided with receiving buffer 20
0 is a transmission packet receiving unit 21 that receives a transmission packet from the transmission device 100, an error detection unit 22 that detects an error in the received transmission packet, and an error and loss packet that specifies an error or loss transmission packet. Identifying means 23, in-block packet number storing means 24 for storing the in-block packet number of an error or loss transmission packet, video data extracting means 25 for extracting video data from the transmission packet, and generating an acknowledgment. Acknowledgment generating means 26, acknowledgment transmitting means 27 for transmitting the generated acknowledgment to transmitting apparatus 100, and video data storage means for storing the extracted video data in receiving buffer 20 for the time required for one retransmission And output means 29 for outputting video data.

【0021】ここで、実時間映像伝送がノード・ノード
間伝送の場合は、入力手段11はネットワーク111、
出力手段29はネットワーク291となり、エンド・エ
ンド間伝送の場合は、入力手段11は映像発生及び符号
化装置112、出力手段29は復号化及び映像表示装置
292となっている。
Here, when the real-time video transmission is a node-to-node transmission, the input means 11 is connected to the network 111,
The output unit 29 is a network 291, and in the case of end-to-end transmission, the input unit 11 is a video generation and encoding device 112, and the output unit 29 is a decoding and video display device 292.

【0022】図2は、本実施の形態における伝送パケッ
ト及びブロック生成の一例と、伝送パケットに含まれる
ヘッダ情報のフォーマットの一例を示す図である。
FIG. 2 is a diagram showing an example of generation of a transmission packet and a block in the present embodiment, and an example of a format of header information included in the transmission packet.

【0023】図2に示す例では、Nバイト(byte)
の符号化データごとに伝送パケットを生成しており、符
号化データC0にヘッダ情報H0を付加し伝送パケット
P0を生成する。同様に、符号化データC1にヘッダ情
報H1を付加して伝送パケットP1を、符号化データC
4にヘッダ情報H4を付加して伝送パケットP4を生成
する。ブロックとは複数個の伝送パケットをひとまとめ
にしたものであり、図2に示す例では、伝送パケットP
0から伝送パケットP4まで伝送パケットをひとまとめ
にしたものをブロックB1としている。
In the example shown in FIG. 2, N bytes are used.
A transmission packet is generated for each of the coded data, and header information H0 is added to the coded data C0 to generate a transmission packet P0. Similarly, by adding header information H1 to the encoded data C1, the transmission packet P1 is added to the encoded data C1.
The transmission packet P4 is generated by adding header information H4 to the transmission packet P4. A block is a group of a plurality of transmission packets. In the example shown in FIG.
A block of transmission packets from 0 to the transmission packet P4 is referred to as a block B1.

【0024】前記ヘッダ情報H0〜H4は、それぞれ各
ブロックを識別するためのブロック番号F1と、各ブロ
ックにおいて、そのブロックに含まれる伝送パケットを
識別するためのブロック内パケット番号F2と、各伝送
パケットが再送パケットであるかどうかを示す再送ビッ
トF3とで構成される。ここで、ブロック生成とは、ひ
とまとめにした全ての伝送パケットのヘッダ情報に含ま
れるブロック番号F1を同じ番号にすることである。
The header information H0 to H4 includes a block number F1 for identifying each block, a block packet number F2 for identifying a transmission packet included in the block in each block, and a transmission packet number for each block. Is a retransmission packet F3 indicating whether the packet is a retransmission packet. Here, the block generation means that the block numbers F1 included in the header information of all the transmission packets put together are set to the same number.

【0025】図3は、本実施の形態におけるブロック番
号F1及びブロック内パケット番号F2の付加方法を説
明するための図である。
FIG. 3 is a diagram for explaining a method of adding the block number F1 and the intra-block packet number F2 in the present embodiment.

【0026】同図に示す例では、伝送パケットを5つひ
とまとめにしたものを1ブロックとしており、上に位置
するブロック、伝送パケットほど、生成した時間が古く
なっている。図3に示すように、ブロックB2に対する
ブロック番号をM−1とした場合、ブロックB2に含ま
れる伝送パケットP11からP15はすべて同じブロッ
ク番号M−1を有する。ブロック番号は符号化データの
並びに対して連続的に付加するので、ブロックB3に対
するブロック番号はM、ブロックB4に対するブロック
番号はM+1となり、ブロックB2と同様に、ブロック
B3及びブロックB4に含まれる伝送パケットは各ブロ
ックごとで同じブロック番号を有することになる。
In the example shown in the figure, five transmission packets are grouped together into one block, and the upper block and the transmission packet have a longer generation time. As shown in FIG. 3, when the block number for the block B2 is M-1, the transmission packets P11 to P15 included in the block B2 all have the same block number M-1. Since the block number is continuously added to the sequence of the encoded data, the block number for the block B3 is M, and the block number for the block B4 is M + 1. Like the block B2, the transmission packets included in the blocks B3 and B4 Will have the same block number for each block.

【0027】一方、ブロック内パケット番号は各ブロッ
クで独立に付加し、各ブロック内において符号化データ
の並びに対して連続的に付加する。よって、ブロックB
2において、伝送パケットP11は0、伝送パケットP
12は1、伝送パケットP13は2、伝送パケットP1
4は3、伝送パケットP15は4というブロック内パケ
ット番号を有する。
On the other hand, the intra-block packet number is independently added in each block, and is continuously added to the arrangement of encoded data in each block. Therefore, block B
2, transmission packet P11 is 0, transmission packet P
12 is 1, transmission packet P13 is 2, transmission packet P1
4 has an intra-block packet number of 3 and the transmission packet P15 has an intra-block packet number of 4.

【0028】図4は、本実施の形態における確認応答の
フォーマットの一例を示す図であり、この確認応答は、
確認応答生成手段26で生成される。
FIG. 4 is a diagram showing an example of the format of an acknowledgment in the present embodiment.
It is generated by the acknowledgment generation unit 26.

【0029】同図において、確認応答には、その確認応
答がどのブロックに対するものであるかを示すブロック
番号O2と、各ブロック内の各伝送パケットが正しく受
信された(ACK)か否(NAK)かを表す応答O1が
含まれる。ここで、ブロック番号O2とは、その確認応
答に対応するブロックのブロック番号F1に相当し、応
答O1は、確認応答がACKであればACK信号を、N
AKであればNAK信号を含む。確認応答がACKであ
れば、確認応答はブロック番号O2と応答O1とで構成
される。
In the figure, the acknowledgment includes a block number O2 indicating which block the acknowledgment is for, and whether or not each transmission packet in each block was correctly received (ACK) or not (NAK). Is included in the response O1. Here, the block number O2 corresponds to the block number F1 of the block corresponding to the acknowledgment, and the response O1 outputs an ACK signal if the acknowledgment is ACK.
If it is AK, it contains a NAK signal. If the acknowledgment is an ACK, the acknowledgment is composed of the block number O2 and the response O1.

【0030】ブロック内にエラーまたはロスとなった伝
送パケットがあった場合は、その伝送パケットの再送要
求を行うので、ブロック番号O2と応答O1に加えて、
再送が必要なパケット数O3と再送が必要な伝送パケッ
ト、すなわち、誤りを含む伝送パケットあるいはロスと
なった伝送パケットのブロック内識別番号O4がさらに
確認応答に含まれる。前記ブロック内識別番号O4は、
再送が必要なパケットのブロック内パケット番号であ
る。
When there is a transmission packet in which an error or a loss occurs in the block, a request for retransmission of the transmission packet is made. In addition to the block number O2 and the response O1,
The acknowledgment further includes the number of packets O3 that need to be retransmitted and the identification number O4 in the block of the transmission packet that needs to be retransmitted, that is, a transmission packet containing an error or a lost transmission packet. The in-block identification number O4 is
This is the in-block packet number of the packet that needs to be retransmitted.

【0031】図5は、本実施の形態の映像データ記憶手
段28において、受信した伝送パケットから抽出した符
号化データを、1回再送に必要な時間だけ受信側バッフ
ァ20に記憶するための構成の一例を示すブロック図で
ある。
FIG. 5 shows a configuration of the video data storage means 28 of the present embodiment for storing the encoded data extracted from the received transmission packet in the reception buffer 20 for the time required for one retransmission. It is a block diagram showing an example.

【0032】同図に示す例では、受信側バッファ20内
においてキューを設ける方法を示し、1ブロック分の符
号化データを1単位として、符号化データD1から符号
化データD6までのキューを受信側バッファ20内に設
けている。図5におけるキューでは、下の方に位置する
キューの先頭の符号化データほど記憶した時間が古く、
次に、新しい符号化データがキューの最後尾に入ってく
ると、符号化データD1は出力手段29に出力され、符
号化データD2から符号化データD6はそれぞれ1単位
分ほどキューの先頭方向にスライドすることになる。
In the example shown in the figure, a method of providing a queue in the buffer 20 on the receiving side is shown, and the queue from the coded data D1 to the coded data D6 is stored on the receiving side with one block of coded data as one unit. It is provided in the buffer 20. In the queue shown in FIG. 5, the storage time of the coded data at the head of the queue located at the lower side is longer,
Next, when new coded data comes to the end of the queue, the coded data D1 is output to the output means 29, and the coded data D2 to the coded data D6 are respectively shifted by one unit toward the head of the queue. You will slide.

【0033】このキューにおいて、新しい符号化データ
がキューの最後尾に入ってきた時、キューの先頭にある
符号化データをその符号化データの正当性にかかわらず
出力手段29に出力すること、及びこのキューの長さを
1回再送に必要な時間とすることにより、受信した伝送
パケットから抽出した符号化データを、1回再送に必要
な時間だけ受信側バッファ20に記憶することができ
る。
In this queue, when new encoded data comes to the end of the queue, output the encoded data at the head of the queue to the output means 29 regardless of the validity of the encoded data; and By setting the length of this queue to the time required for one retransmission, the encoded data extracted from the received transmission packet can be stored in the reception buffer 20 for the time required for one retransmission.

【0034】図6は、本実施の形態における符号化デー
タを送信する送信装置100の処理手順を示すフローチ
ャートである。
FIG. 6 is a flowchart showing a processing procedure of transmitting apparatus 100 for transmitting encoded data according to the present embodiment.

【0035】符号化データを送信する送信装置100の
処理は大きく分けて、伝送パケット及びブロックを生成
し送信する処理と確認応答受信後の処理の2つがある。
図6を参照して、送信装置100で、前記伝送パケット
及びブロックを生成し送信する処理について説明する。
The processing of the transmitting apparatus 100 for transmitting coded data is roughly divided into two processings, that is, processing for generating and transmitting transmission packets and blocks and processing after receiving an acknowledgment.
With reference to FIG. 6, a process of generating and transmitting the transmission packet and the block in the transmission device 100 will be described.

【0036】図6に示すように、入力手段11からの符
号化データは映像データ一時記憶手段12により送信側
バッファ10に記憶される(602)。1ブロック生成
可能な符号化データが記憶されると、伝送パケット及び
ブロック生成手段13において、伝送パケット及びブロ
ックが送信側バッファ10内に生成される(603)。
生成された伝送パケットは伝送パケット送信手段14に
よりネットワーク300を介して受信装置200へと送
信される(604)。
As shown in FIG. 6, the encoded data from the input means 11 is stored in the transmission buffer 10 by the video data temporary storage means 12 (602). When the encoded data capable of generating one block is stored, the transmission packet and block generation means 13 generates the transmission packet and the block in the transmission buffer 10 (603).
The generated transmission packet is transmitted by the transmission packet transmitting means 14 to the receiving device 200 via the network 300 (604).

【0037】生成したブロックは、受信装置200から
そのブロックに対応する確認応答を受信するまで送信側
バッファ10内に保存され、その保存場所は保存場所記
憶手段15において、ブロック番号をキーにしたテーブ
ルを用いて記憶される(605)。
The generated block is stored in the transmission buffer 10 until an acknowledgment corresponding to the block is received from the receiving device 200. The storage location is stored in the storage location storage means 15 in a table using the block number as a key. (605).

【0038】次に、確認応答受信後の処理について説明
する。確認応答受信手段16により、受信装置200か
らの確認応答を受信すると(601)、その確認応答が
ACKであるかNAKであるかを判定する(606)。
Next, the processing after receiving the acknowledgment will be described. When the acknowledgment receiving unit 16 receives the acknowledgment from the receiving device 200 (601), it determines whether the acknowledgment is an ACK or a NAK (606).

【0039】受信した確認応答がACKである場合、保
存場所記憶手段15におけるテーブルを用いて、ブロッ
ク番号をキーにしてそのブロックが保存されているアド
レスを検索、取得して、その領域を開放する(60
7)。受信した確認応答がNAKである場合、保存場所
記憶手段15におけるテーブルを用いて、ブロック番号
をキーにしてそのブロックが保存されているアドレスを
検索、取得し、さらに、再送要求のあった伝送パケット
のブロック内パケット番号を用いて前記アドレスからの
相対アドレスを計算してその伝送パケットが保存されて
いるアドレスを取得し、再送要求のあった伝送パケット
を複数個コピーして、伝送パケット送信手段14を介し
て再送信する(608)。再送後、そのブロックの保存
されていた領域を開放する。
If the received acknowledgment is ACK, the address where the block is stored is searched and obtained using the table in the storage location storage unit 15 using the block number as a key, and the area is opened. (60
7). If the received acknowledgment is a NAK, using the table in the storage location storage unit 15, the block number is used as a key to search and acquire the address where the block is stored, and further, the transmission packet requested to be retransmitted. Using the packet number in the block, a relative address from the above address is calculated to obtain an address where the transmission packet is stored, and a plurality of transmission packets for which retransmission has been requested are copied. (608). After retransmission, the area where the block is stored is released.

【0040】図7は、本実施の形態における符号化デー
タを受信する受信装置200の処理手順を示すフローチ
ャートである。図7を参照して、受信装置200の処理
について説明する。
FIG. 7 is a flowchart showing a processing procedure of receiving apparatus 200 for receiving encoded data according to the present embodiment. With reference to FIG. 7, the processing of receiving apparatus 200 will be described.

【0041】ネットワーク300を介して伝送されてき
た伝送パケットは、伝送パケット受信手段21により受
信され(701)、誤り検出手段22により受信した伝
送パケットの誤りを検出した結果(702)、誤りがあ
る場合は伝送パケットを廃棄する(703)。正しく伝
送パケットを受信すると、各伝送パケットのヘッダ情報
に含まれる再送ビットF3をチェックし、その伝送パケ
ットが1回目に伝送されてきた伝送パケットか、それと
も再送された伝送パケットであるかを判定する(70
4)。
The transmission packet transmitted via the network 300 is received by the transmission packet receiving means 21 (701), and as a result of detecting the error of the transmission packet received by the error detecting means 22 (702), there is an error. In this case, the transmission packet is discarded (703). When the transmission packet is correctly received, the retransmission bit F3 included in the header information of each transmission packet is checked, and it is determined whether the transmission packet is the first transmission packet or the retransmitted transmission packet. (70
4).

【0042】1回目に伝送されてきた伝送パケットを受
信した場合、映像データ抽出手段25により伝送パケッ
トに含まれる符号化データは抽出され、受信側バッファ
20に記憶され(705)、伝送パケットに含まれるヘ
ッダ情報は取り出される。
When the transmission packet transmitted for the first time is received, the encoded data contained in the transmission packet is extracted by the video data extracting means 25, stored in the receiving buffer 20 (705), and contained in the transmission packet. Header information is retrieved.

【0043】ブロック番号F1及びブロック内パケット
番号F2は符号化データの並びに対して連続的に付加し
ているので、その伝送パケットのヘッダ情報に含まれる
ブロック番号F1及びブロック内パケット番号F2と、
1つ前に正しく受信した1回目に伝送された伝送パケッ
トのヘッダ情報に含まれていたブロック番号F1及びブ
ロック内パケット番号F2を比較することにより、エラ
ーまたはロスとなった伝送パケットの有無をエラー及び
ロスパケット特定手段23において調べることが可能で
ある(706)。
Since the block number F1 and the intra-block packet number F2 are continuously added to the sequence of the encoded data, the block number F1 and the intra-block packet number F2 included in the header information of the transmission packet,
By comparing the block number F1 and the intra-block packet number F2 included in the header information of the first transmitted transmission packet correctly received immediately before, the presence or absence of an error or a lost transmission packet is determined as an error. And can be checked by the lost packet specifying means 23 (706).

【0044】エラーまたはロスとなった伝送パケットが
存在した場合は、その伝送パケットを送信装置100に
対して再送要求するために、確認応答作成までの間、ブ
ロック内パケット番号記憶手段24により、その伝送パ
ケットのブロック内パケット番号F2を記憶しておく
(707)。1ブロックを受信し終えると(708)、
そのブロックに対する確認応答を確認応答生成手段27
により生成し(709)、確認応答送信手段27により
確認応答を送信装置100へ送信する(710)。
If there is an error or loss transmission packet, the in-block packet number storage means 24 uses the in-block packet number storage unit 24 until the acknowledgment is generated in order to request the transmission apparatus 100 to retransmit the transmission packet. The in-block packet number F2 of the transmission packet is stored (707). When one block has been received (708),
The acknowledgment generation unit 27 generates an acknowledgment for the block.
(709), and the acknowledgment is transmitted to the transmitting device 100 by the acknowledgment transmitting means 27 (710).

【0045】再送パケットを受信した場合、その再送パ
ケットと同じ再送パケットが既に正しく受信されたかど
うかを調べる(711)。その再送パケット以前に、同
じ再送パケットが正しく受信されていない場合は、その
再送パケット内に含まれる符号化データを受信側バッフ
ァ20の所定の場所に記憶し(712)、同じ再送パケ
ットを既に正しく受信している場合は、その再送パケッ
トを廃棄する(713)。
When a retransmission packet is received, it is checked whether the same retransmission packet as the retransmission packet has already been correctly received (711). If the same retransmitted packet has not been correctly received before the retransmitted packet, the encoded data included in the retransmitted packet is stored in a predetermined location of the receiving buffer 20 (712), and the same retransmitted packet is already correctly received. If the packet has been received, the retransmission packet is discarded (713).

【0046】受信した伝送パケットに対する処理、確認
応答に対する処理の後、映像データ記憶手段28におい
て、出力する符号化データがある場合(714)、その
符号化データを出力手段29へ出力する(715)。
After the processing for the received transmission packet and the processing for the acknowledgment, if there is encoded data to be outputted in the video data storage means 28 (714), the encoded data is outputted to the output means 29 (715). .

【0047】図8は、本実施の形態における伝送パケッ
トの伝送手順を示す図である。図8を参照にして、本実
施形態の実時間映像伝送装置における伝送パケットの伝
送手順を説明する。
FIG. 8 is a diagram showing a transmission procedure of a transmission packet in the present embodiment. With reference to FIG. 8, a procedure for transmitting a transmission packet in the real-time video transmission device of the present embodiment will be described.

【0048】パケットS50はブロック番号F1が5、
ブロック内パケット番号F2が0である伝送パケットで
あり、図8中の各伝送パケットは同様に、カッコ内の左
の番号が各送パケットのブロック番号F1、右の番号が
各伝送パケットのブロック内パケット番号F2を表して
いる。
The packet S50 has a block number F1 of 5,
The transmission packet in which the packet number F2 in the block is 0 is 0. Similarly, each transmission packet in FIG. 8 is the block number F1 of each transmission packet in parentheses, and the transmission number is the block number F1 of the transmission packet in the right. It represents the packet number F2.

【0049】伝送パケットS50、伝送パケットS5
2、伝送パケットS59は受信装置200において正し
く受信されたが、伝送パケットS51は伝送中にエラー
が発生したため受信装置200ではその伝送パケットが
廃棄される。
Transmission packet S50, transmission packet S5
2. Although the transmission packet S59 was correctly received by the receiving device 200, the transmission packet S51 is discarded by the receiving device 200 because an error occurred during transmission.

【0050】伝送パケットS59を受信すると、ブロッ
ク番号F1が5であるブロックに対する確認応答を生成
し、送信装置100へ送信する。この場合の確認応答は
NAKとなり、受信装置200は送信装置100に対
し、伝送パケットS51の再送を要求する。
When the transmission packet S59 is received, an acknowledgment for the block whose block number F1 is 5 is generated and transmitted to the transmitting device 100. The acknowledgment in this case is a NAK, and the receiving device 200 requests the transmitting device 100 to retransmit the transmission packet S51.

【0051】送信装置100は伝送パケットS51を複
数個コピーし、ここでは伝送パケットS511、伝送パ
ケットS512、伝送パケットS513の3個をコピー
して再送する。伝送パケットS511は、伝送中に再び
エラーとなったため廃棄されるが、伝送パケットS51
2は正しく受信されたので、この時点で伝送パケットS
51の再送は1回で成功となる。伝送パケットS513
も正しく受信されたが、伝送パケットS512の受信で
既に伝送パケットS51の再送が成功したので、伝送パ
ケットS513は廃棄される。なお、再送された伝送パ
ケットS511から伝送パケットS513に対する確認
応答の生成及び送信は行われない。
The transmitting apparatus 100 copies a plurality of transmission packets S51, and in this case, copies three transmission packets S511, S512, and S513 and retransmits them. The transmission packet S511 is discarded because an error occurs again during transmission.
2 has been received correctly, and at this point the transmission packet S
The retransmission of 51 is successful once. Transmission packet S513
However, since the retransmission of the transmission packet S51 has already been successful in the reception of the transmission packet S512, the transmission packet S513 is discarded. Note that generation and transmission of an acknowledgment from the retransmitted transmission packet S511 to the transmission packet S513 are not performed.

【0052】本実施形態における伝送パケット及びブロ
ック生成手段13において、例えば、符号化方式に構造
化符号化方式を適用した場合、符号化ストリームの構造
を意識し、1データ構造分の符号化データごとに伝送パ
ケットを生成する方法がある。この場合、仮にエラーま
たはロスとなった伝送パケットが再送により回復できな
かったとしても、その影響は1データ構造分の符号化デ
ータに及ぶだけで、2データ構造分の符号化データにま
たがって及ぶことはなく、その影響を最小限におさえる
ことができるという特徴がある。
In the transmission packet and block generation means 13 in the present embodiment, for example, when the structured coding method is applied to the coding method, the structure of the coded stream is taken into consideration and the encoded data of one data structure is There is a method for generating a transmission packet. In this case, even if an error or a lost transmission packet cannot be recovered by retransmission, the effect only affects the encoded data for one data structure and extends over the encoded data for two data structures. It has the characteristic that the influence can be minimized.

【0053】また、本実施の形態におけるエラー及びロ
スパケット特定手段23において、例えば、1つ前に正
しく受信した1回目に伝送された伝送パケットのブロッ
ク番号F1が5で、ブロック内パケット番号F2が2で
あって、更に続けて受信した伝送パケットのブロック番
号F1が同じ5で、ブロック内パケット番号F2が4で
あった場合、ブロック番号F1が5で、ブロック内パケ
ット番号F2が3である本来受信しているべき伝送パケ
ットは伝送中エラーまたはロスとなったことがわかる。
このように、ブロック番号F1及びブロック内パケット
番号F2の連続性により、受信装置200では、伝送パ
ケットの到着後ただちに伝送中エラーまたはロスとなっ
た伝送パケットを特定することができるという特徴があ
る。
In the error / loss packet specifying means 23 in this embodiment, for example, the block number F1 of the first transmitted packet correctly received immediately before is 5, and the packet number F2 in the block is 2, if the block number F1 of the subsequently received transmission packet is the same 5 and the intra-block packet number F2 is 4, the block number F1 is 5 and the intra-block packet number F2 is 3 It can be seen that the transmission packet to be received has an error or loss during transmission.
As described above, the continuity of the block number F1 and the intra-block packet number F2 allows the receiving apparatus 200 to specify a transmission packet that has become an error or a loss during transmission immediately after the arrival of the transmission packet.

【0054】図9は、本実施の形態の実時間映像伝送装
置に係る実験システムの概略構成を示すシステム構成図
である。
FIG. 9 is a system configuration diagram showing a schematic configuration of an experimental system according to the real-time video transmission device of the present embodiment.

【0055】同図において、91はカメラ、92はエン
コーダ(ENC)、93はパーソナルコンピュータ(P
C)からなる送信端末、94はネットワーク、95はネ
ットワークエミュレータ(NEM:伝送遅延及びセルロ
スを発生する装置)、96はパーソナルコンピュータ
(PC)からなる受信端末、97はデコーダ(DE
C)、98はモニタ(表示装置)である。
In the figure, reference numeral 91 denotes a camera, 92 denotes an encoder (ENC), and 93 denotes a personal computer (P).
C) a transmission terminal, 94 is a network, 95 is a network emulator (NEM: device that generates transmission delay and cell loss), 96 is a reception terminal composed of a personal computer (PC), and 97 is a decoder (DE).
C) and 98 are monitors (display devices).

【0056】本実験システムは、高速広帯域ネットワー
クとしてATM網を仮定しており、図9に示すように、
カメラ91から映像をMPEG2方式でリアルタイムに
エンコーダ(ENC)92でエンコードし、AALタイ
プ5にて実際に伝送する。
This experimental system assumes an ATM network as a high-speed broadband network. As shown in FIG.
The video from the camera 91 is encoded by the encoder (ENC) 92 in real time in the MPEG2 system, and is actually transmitted by the AAL type 5.

【0057】ネットワーク94上では、ネットワークエ
ミュレータ(NEM)95を用いてセルロス(ランダ
ム)、及び遅延(10ms)を発生させ、それを挟んだ
2台のパーソナルコンピュータ(PC)からなる送信端
末上に、本実施の形態の実時間映像伝送装置を実装して
いる。伝送単位はトランスポートストリーム(TS)毎
として、1パケットを5セル(1TS)とし、1ブロッ
クは10パケットとしている(ケース1)。また、比較
のために1パケットは40セル(10TS)、1ブロッ
クは1パケットとしている(ケース2)。
On the network 94, a cell loss (random) and a delay (10 ms) are generated by using a network emulator (NEM) 95, and a transmission terminal including two personal computers (PCs) sandwiching the cell loss is generated. The real-time video transmission device of the present embodiment is mounted. The transmission unit is one transport packet (TS), one packet is five cells (1TS), and one block is ten packets (Case 1). For comparison, one packet is 40 cells (10TS) and one block is one packet (Case 2).

【0058】前記本実験システムにおいて、それぞれ4
分程度の映像(ケース1では106パケット、ケース2
では105パケット)を伝送し、映像品質という点から
本実施の形態の実時間映像伝送装置の評価を行った。
In the present experimental system, 4
Min about the video (Case 1 10 6 packets, Case 2
10 5 packets), and the real-time video transmission apparatus of the present embodiment was evaluated in terms of video quality.

【0059】その実測結果を図10に示し、(a)ケー
ス1の場合、(b)はケース2の場合である。ここで、
パケットエラー率とは、全パケット数(再送パケットは
除く)に対して、デコードされる時点で、エラーを含ん
でいるパケットの数の割合を表している。図10から以
下の評価を行うことができる。
FIGS. 10A and 10B show the actual measurement results. FIG. 10A shows the case 1 and FIG. here,
The packet error rate indicates the ratio of the number of packets containing an error at the time of decoding to the total number of packets (excluding retransmitted packets). The following evaluation can be performed from FIG.

【0060】(1)ケース1の場合では、コピー数(再
送数)を2とするだけで、セルロス率10~3という環境
(ひどく映像は乱れ、とても見れないような映像品質)
においても、パケットエラー率を10~5末満(1分間に
1,2回映像が乱れる程度の映像品質)に改善してい
る。
(1) In the case 1, an environment where the cell loss rate is 10 to 3 only by setting the number of copies (the number of retransmissions) to 2
(The image quality is so disturbing that you can't see it.)
In this case, the packet error rate is improved to 10 to 5 (the image quality is such that the image is disturbed once or twice per minute).

【0061】(2)同じコピー数で比較した場合、ケー
ス1とケース2とは、パケットエラー率は10倍程度の
差があり、パケットサイズの小さいケース1の方が映像
品質の改善が大きい。
(2) When compared at the same copy number, the packet error rates of Case 1 and Case 2 are about 10 times different, and Case 1 having a smaller packet size has a greater improvement in video quality.

【0062】(3)エラーを含むパケットは廃棄してい
るため、それが再送で救済できなかった場合の映像品質
への影響は、パケットサイズの大きいケース2の方が大
きかった。
(3) Since the packet containing the error is discarded, the effect on the video quality when the packet cannot be remedied by retransmission is larger in Case 2 where the packet size is large.

【0063】(4)本実験システムの方式では、再送を
1回に限定しているが、再送パケットのコピー伝送で映
像品質をかなり改善することができ、さらに、パケット
サイズが比較的小さい方が映像品質の改善がより大きい
ことがわかった。
(4) In the method of the present experimental system, the retransmission is limited to one time. However, the image quality can be considerably improved by copy transmission of the retransmitted packet, and the smaller the packet size is, the better. The improvement in video quality was found to be greater.

【0064】このように、本実施の形態によれば、伝送
中にエラーまたはロスとなった伝送パケットの再送は1
回に限定しているので、エンド・エンド間伝送の場合は
映像データ到着からその映像データの表示までの時間、
ノード・ノード間伝送の場合は映像データの到着からそ
の映像データを次のノードまたは映像表示装置へ送信す
るまでの時間が、1回再送に必要な時間となり、エンド
・エンド遅延の低遅延性が保証でき、映像受信側である
受信装置200の受信側バッファ20において蓄積する
映像データ量は、1回再送に必要な時間内に受信装置2
00に到着する映像データ量でよく、バッファサイズの
減少が可能になる。
As described above, according to the present embodiment, the retransmission of a transmission packet having an error or a loss during transmission is 1
Time-to-end, in the case of end-to-end transmission, the time from the arrival of video data to the display of that video data,
In the case of node-to-node transmission, the time from the arrival of video data to the transmission of the video data to the next node or video display device is the time required for one retransmission, and the low end-to-end delay is low. The amount of video data that can be guaranteed and is stored in the receiving buffer 20 of the receiving device 200 that is the video receiving side is within the time required for one retransmission.
The amount of video data arriving at 00 may be sufficient, and the buffer size can be reduced.

【0065】また、受信装置200において受信された
映像データは、1回再送を行う時間に相当する時間だけ
受信側バッファ20に蓄積されると、それ自信またはそ
れ以前の映像データの正当性にかかわらず出力手段29
へ出力されるので、映像データが出力手段29に安定し
て届くことが保証され、映像の途切れは発生せず、映像
の実時間性が保証できる。
When the video data received by the receiving apparatus 200 is stored in the receiving buffer 20 for a time corresponding to the time for performing one retransmission, the video data is irrespective of its own or the validity of the previous video data. Output means 29
Since the video data is output to the output unit 29, it is guaranteed that the video data reaches the output unit 29 stably, and the video is not interrupted, and the real-time performance of the video can be guaranteed.

【0066】また、複数個コピーして再送された伝送パ
ケットの中で1パケットでも、受信装置200に正しく
受信されれば、その再送は成功となり、エラーまたはロ
スとなっている映像データの回復ができるので、表示さ
れる映像の品質を向上できる。
In addition, if even one of the transmission packets copied and retransmitted in plural copies is correctly received by the receiving apparatus 200, the retransmission is successful, and the recovery of the error or loss of the video data becomes impossible. Therefore, the quality of the displayed image can be improved.

【0067】さらに、送信装置100では、伝送単位で
あるパケットと、その伝送パケットを複数個まとめたブ
ロックを生成する。即ち、パケットとブロックの2階層
構造を持ち、また、受信装置200では、ブロック単位
で確認応答を生成し、即ち、1ブロックに含まれる各伝
送パケットの確認応答を1つの確認応答として返すこ
と、及び再送された伝送パケットの確認応答は返さない
ことにより、パックワード伝送量の減少、すなわち、確
認応答数の減少が可能になり、確認応答処理を軽減でき
る。
Further, transmitting apparatus 100 generates a packet as a transmission unit and a block in which a plurality of the transmission packets are put together. That is, the receiving apparatus 200 has a two-layer structure of a packet and a block, and the receiving apparatus 200 generates an acknowledgment in block units, that is, returns an acknowledgment of each transmission packet included in one block as one acknowledgment. By not returning an acknowledgment of the retransmitted transmission packet, it is possible to reduce the amount of transmitted pack words, that is, to reduce the number of acknowledgments, thereby reducing acknowledgment processing.

【0068】これにより、本実施の形態の実時間映像伝
送装置によれば、リアルタイムに発生する映像データの
実時間伝送に適用した場合、送信装置から受信装置へと
伝送パケットを伝送するフォワード伝送路におけるエラ
ー発生時においても、低遅延かつ高品質な実時間映像通
信が可能となる。
Thus, according to the real-time video transmission apparatus of the present embodiment, when applied to real-time transmission of video data generated in real time, a forward transmission path for transmitting a transmission packet from a transmission apparatus to a reception apparatus. , Real-time video communication with low delay and high quality is possible.

【0069】[実施の形態2]前記実施の形態1の実時
間映像伝送装置では、受信装置200から送信装置10
0へと確認応答を伝送するバックワード伝送路において
エラーが発生し、確認応答が誤りとなった場合について
何の対策も施していない。よって、送信装置100にお
いて、確認応答を正しく受信できなかった場合、その確
認応答がACKであったか、それともNAKであったか
を送信装置100は知ることができない。この場合の送
信装置100の処理方法として、次の2つの方法があげ
られる。
[Second Embodiment] In the real-time video transmission apparatus of the first embodiment, the receiving apparatus 200
No countermeasures are taken for the case where an error occurs in the backward transmission path for transmitting the acknowledgment to 0 and the acknowledgment becomes erroneous. Therefore, if the transmitting device 100 fails to correctly receive an acknowledgment, the transmitting device 100 cannot know whether the acknowledgment was ACK or NAK. In this case, as the processing method of the transmitting apparatus 100, there are the following two methods.

【0070】(方法1) 誤りとなった確認応答はすべ
てNAKであったと判断し、その確認応答に対するブロ
ックに含まれる伝送パケットはすべて再送する。
(Method 1) It is determined that all acknowledgments that resulted in errors are NAKs, and all transmission packets included in the block corresponding to the acknowledgment are retransmitted.

【0071】(方法2) 誤りとなった確認応答はすべ
てACKであったと判断し、その確認応答に対するブロ
ックに含まれる伝送パケットの再送は行わない。
(Method 2) It is determined that all of the acknowledgments that resulted in errors were ACKs, and the transmission packet included in the block corresponding to the acknowledgment is not retransmitted.

【0072】前記(方法1)では、誤った確認応答に対
するブロックに含まれる伝送パケットはすべて再送され
るので、もしその誤った確認応答が実際にNAKであっ
たとしても、要求どおり再送していることになり、エラ
ーあるいはロスとなった伝送パケットの回復は可能であ
る。
In the above (method 1), all the transmission packets included in the block corresponding to the erroneous acknowledgment are retransmitted. Therefore, even if the erroneous acknowledgment is actually NAK, retransmission is performed as requested. That is, it is possible to recover an error or lost transmission packet.

【0073】しかしながら、通常確認応答はACKであ
る確率の方が、NAKである確率より高いので、実際は
ACKであったにもかかわらず1ブロック再送してしま
うという無駄な再送を多く行うこととなり、ネットワー
ク負荷の問題が発生し、最悪の場合、無駄な再送が輻輳
を招くことも考えられる。
However, since the probability of being an ACK is higher than the probability of being an NAK in a normal acknowledgment, a large number of useless retransmissions of retransmitting one block in spite of the fact that an ACK is actually performed are performed. A network load problem may occur, and in the worst case, unnecessary retransmission may cause congestion.

【0074】また、前記(方法2)では、無駄な再送は
行わないのでネットワーク負荷への影響はない。しかし
逆に、実際はその誤った確認応答がNAKであったのに
もかかわらず、要求された伝送パケットの再送を行わな
いといったケースが生じるため、その伝送パケットのエ
ラーあるいはロスの回復はできないといった問題があ
る。
In the above (method 2), since unnecessary retransmission is not performed, there is no influence on the network load. However, conversely, in spite of the fact that the incorrect acknowledgment is actually a NAK, the requested transmission packet may not be retransmitted, and the error or loss of the transmission packet cannot be recovered. There is.

【0075】本実施の形態の実時間映像伝送装置は、フ
ォワード伝送路におけるエラー発生時のみならず、バッ
クワード伝送路におけるエラー発生時においても、低遅
延性及び映像の実時間性を保証した上で、ネットワーク
負荷をおさえつつ、映像データのエラー及びロスの回復
を行うようにしたものである。
The real-time video transmission apparatus of this embodiment guarantees low delay and real-time video not only when an error occurs in the forward transmission path but also when an error occurs in the backward transmission path. Thus, error and loss of video data are recovered while suppressing the network load.

【0076】図11は、本発明の他の実施の形態である
実時間映像伝送装置の概略構成を示すブロック図であ
る。
FIG. 11 is a block diagram showing a schematic configuration of a real-time video transmission apparatus according to another embodiment of the present invention.

【0077】同図に示すように、本実施の形態の実時間
映像伝送装置は、送信装置100が、受信した確認応答
の誤りを検出する確認応答誤り検出手段18と、誤りを
含む確認応答及びロスとなった確認応答がどのブロック
に対する確認応答であったかを特定する誤り確認応答特
定手段19と、その特定したブロックの履歴情報が、以
降に正しく受信された確認応答内に含まれるブロック番
号と履歴情報の並びとから得られ、かつその誤りを含む
確認応答あるいはロスとなった確認応答がNAKであっ
たと判った場合に限って、その誤りを含む確認応答ある
いはロスとなった確認応答に対するブロックに含まれる
すべての伝送パケットを複数個コピーして再送し、その
特定したブロックの履歴情報が得られない場合は、その
誤りを含む確認応答あるいはロスとなった確認応答はA
CKであったとみなすブロック再送手段30とを備え、
また、受信装置200の確認応答生成手段26は、過去
mブロック分の履歴情報を生成し、当該過去mブロック
分の履歴情報が含まれる確認応答を生成して、送信装置
100に返送する点で、前記実施の形態の実時間映像伝
送装置と相違する。
As shown in the figure, the real-time video transmission apparatus according to the present embodiment includes an acknowledgment error detecting means 18 for detecting an error in an acknowledgment received by the transmitting apparatus 100, An error acknowledgment specifying unit 19 for specifying which block the acknowledgment that resulted in the loss was an acknowledgment, and the history information of the specified block is stored in the acknowledgment that is correctly received thereafter. Only when it is determined that the acknowledgment containing the error or the lost acknowledgment was obtained from the sequence of information and was a NAK, the block for the acknowledgment containing the error or the lost acknowledgment is Copy and resend all of the included transmission packets, and if the history information of the specified block cannot be obtained, confirm the error including the error. Or acknowledgment became Ross A
A block retransmitting means 30 that is considered to have been a CK,
The acknowledgment generation unit 26 of the receiving device 200 generates history information for the past m blocks, generates an acknowledgment including the history information for the past m blocks, and returns the acknowledgment to the transmitting device 100. , Is different from the real-time video transmission device of the embodiment.

【0078】図12は、本実施の形態の確認応答生成手
段26で生成される確認応答のフォーマットの一例を示
すである。
FIG. 12 shows an example of the format of an acknowledgment generated by the acknowledgment generating means 26 of the present embodiment.

【0079】同図に示すフォーマット例において、確認
応答には、その確認応答がどのブロックに対するもので
あるかを示すブロック番号O2と、各ブロック内の各伝
送パケットが正しく受信された(ACK)か否(NA
K)かを表す応答O1と、過去mブロック分の履歴情報
O5が含まれる。もし、確認応答がNAKであるなら、
送信装置に対して再送要求を行うために、再送が必要な
パケット数O3と、再送が必要なパケットのブロック内
パケット番号O4が更に確認応答に含まれる。
In the format example shown in the figure, the acknowledgment includes a block number O2 indicating which block the acknowledgment is for, and whether each transmission packet in each block was correctly received (ACK). No (NA
K) and response information O5 for the past m blocks. If the acknowledgment is a NAK,
To make a retransmission request to the transmitting device, the number of packets O3 requiring retransmission and the intra-block packet number O4 of the packet requiring retransmission are further included in the acknowledgment.

【0080】このように、図12に示すフォーマット例
は、確認応答のフォーマットに過去mブロック分の履歴
情報O5が追加されている点で、図4に示す確認応答の
フォーマット例と相違する。
As described above, the format example shown in FIG. 12 differs from the format example of the acknowledgment shown in FIG. 4 in that the history information O5 for the past m blocks is added to the format of the acknowledgment.

【0081】前記したように、応答O1は、確認応答が
ACKであればACK信号を、NAKであればNAK信
号を含み、1ビットで表すことが可能である。また、過
去のブロックの履歴情報、即ち、そのブロックがACK
であったかNAKであったかということは、やはり1ビ
ットで表すことが可能で、mブロック分の履歴情報はm
ビットで表すことが可能である。
As described above, the response O1 includes the ACK signal if the acknowledgment is ACK, and includes the NAK signal if the acknowledgment is NAK, and can be represented by 1 bit. Also, the history information of the past block, that is, the block is ACK
Or NAK can also be represented by 1 bit, and the history information for m blocks is m
It can be represented by bits.

【0082】図12に示すフォーマット例における過去
mブロック分の履歴情報O5は、直前の確認応答に対す
るブロックからm個過去にさかのぼった確認応答に対す
るブロックまでのmブロック分の履歴情報としている。
よって、図12に示す過去mブロック分の履歴情報O5
においては、左に位置するビット、即ち、左に位置する
履歴情報ほどより古い確認応答に対するブロックの履歴
情報となっており、直前の確認応答に対するブロックの
履歴情報は一番右に位置する履歴情報となっている。
The history information O5 for the past m blocks in the format example shown in FIG. 12 is history information for m blocks from the block corresponding to the immediately preceding acknowledgment to the block corresponding to the m acknowledgments going back m times.
Therefore, the history information O5 for the past m blocks shown in FIG.
In, the bit located to the left, that is, the history information located to the left is the history information of the block corresponding to the earlier acknowledgment, and the history information of the block corresponding to the immediately preceding acknowledgment is the history information located to the far right. It has become.

【0083】したがって、送信装置100は、正しく受
信した確認応答のブロック番号とこの履歴情報の並びと
から、誤りを含む確認応答あるいはロスとなった確認応
答に対するブロックの履歴情報がその正しく受信した確
認応答に含まれているかどうかを調べることが可能であ
り、またその履歴情報がどこにあるかを知ることが可能
である。
Therefore, the transmitting apparatus 100 determines from the block number of the correctly received acknowledgment and the sequence of this history information that the acknowledgment containing the error or the history information of the block corresponding to the lost acknowledgment has been correctly received. It is possible to check whether it is included in the response and to know where the history information is.

【0084】即ち、送信装置100の確認応答誤り検出
手段18において誤った確認応答を検出した場合、ある
いはロスとなった確認応答がある場合に、誤り確認応答
特定手段19で、確認応答に含まれるブロック番号の連
続性より、正しく受信できなかった確認応答(誤りを含
む確認応答あるいはロスとなった確認応答)の前後に正
しく受信した確認応答のブロック番号から、その正しく
受信できなかった確認応答を容易に特定することができ
る。
That is, when an erroneous acknowledgment is detected by the acknowledgment error detecting means 18 of the transmitting apparatus 100, or when there is a lost acknowledgment, the error acknowledgment specifying means 19 includes the acknowledgment in the acknowledgment. Due to the continuity of the block numbers, before and after the acknowledgment that was not received correctly (the acknowledgment including the error or the acknowledgment that was lost), the acknowledgment that could not be received correctly is obtained from the block number of the acknowledgment received correctly Can be easily identified.

【0085】また、ブロック再送手段30で、それ以降
に正しく受信した確認応答に含まれる、正しく受信でき
なかった確認応答に対するブロックの履歴情報を調べる
ことで、送信装置100は、正しく受信できなかった確
認応答がACKであったかNAKであったかを知ること
が可能である。
Further, the block retransmitting means 30 checks the block history information for the acknowledgment that could not be received correctly, which is included in the acknowledgment correctly received thereafter, and the transmitting apparatus 100 could not receive the acknowledgment correctly. It is possible to know whether the acknowledgment was an ACK or a NAK.

【0086】図12に示す例では、1つの確認応答には
過去mブロック分の履歴情報を含んでいるので、正しく
受信できなかった確認応答以降に続くm個の確認応答の
中に、その正しく受信できなかった確認応答に対するブ
ロックの履歴情報が必ず含まれている。よって、m個連
続して確認応答が正しく受信できないといった状況がな
い限り、送信装置100はその正しく受信できなかった
確認応答に対するブロックの履歴情報を得ることが可能
である。なお、m個連続して確認応答が正しく受信でき
なかった場合には、その正しく受信できなかった確認応
答に対するブロックの履歴情報を得ることができない
が、その場合には、それらの確認応答はACKであると
みなす(一般に、確認応答の誤りは少ない。)。
In the example shown in FIG. 12, since one acknowledgment includes the history information of the past m blocks, the m acknowledgments following the acknowledgment that could not be received correctly are included in the correct acknowledgment. Block history information for an acknowledgment that could not be received is always included. Therefore, as long as there is no situation in which m consecutive acknowledgments cannot be correctly received, transmitting apparatus 100 can obtain the history information of the block corresponding to the acknowledgment that could not be correctly received. If m consecutive acknowledgments cannot be received correctly, it is not possible to obtain the block history information for the acknowledgment that could not be received correctly. (Generally, the acknowledgment error is small).

【0087】図13は、本実施の形態における伝送パケ
ット及び確認応答の伝送手順を示す図である。図13を
参照にして、本実施の形態における伝送パケット及び確
認応答の伝送手順を説明する。
FIG. 13 is a diagram showing a transmission procedure of a transmission packet and an acknowledgment in this embodiment. With reference to FIG. 13, a transmission procedure of a transmission packet and an acknowledgment in the present embodiment will be described.

【0088】なお、図13に示す例では、1ブロックは
5伝送パケットとしており、ブロック5からブロック9
までの伝送パケット及び確認応答を伝送した場合につい
て図示している。
In the example shown in FIG. 13, one block is composed of five transmission packets.
The figure shows a case where the transmission packet and the acknowledgment are transmitted.

【0089】送信装置100は、伝送パケット及びブロ
ックを生成して、その生成した伝送パケットを受信装置
200へと順次送信し、受信装置200は1ブロック受
信し終わると、そのブロックに対する確認応答を生成
し、送信装置100へと送信する。
The transmitting apparatus 100 generates a transmission packet and a block, and sequentially transmits the generated transmission packet to the receiving apparatus 200. When the receiving apparatus 200 finishes receiving one block, it generates an acknowledgment for the block. Then, it transmits to transmitting apparatus 100.

【0090】ブロック6に含まれる伝送パケット(6−
1)は伝送中エラーとなったため、受信装置200にお
いて廃棄され、受信装置200はブロック6に対する確
認応答をNAKとして生成し、送信装置100へと送信
する。
The transmission packet (6-
Since 1) results in an error during transmission, it is discarded in the receiving device 200, and the receiving device 200 generates an acknowledgment for the block 6 as a NAK and transmits it to the transmitting device 100.

【0091】ブロック6に対する確認応答は伝送中エラ
ーとなったために、送信装置100において正しく受信
できず、送信装置100はブロック6に対する確認応答
の内容を知ることができないが、次に正しく受信したブ
ロック7の確認応答により、誤り確認応答特定手段19
で、ブロック6の確認応答がロスとなったことを検出
し、さらに、ブロック再送手段30で、正しく受信した
ブロック7の確認応答に含まれるブロック6の履歴情報
からブロック6の確認応答がNAKであったことを知る
ことが可能である。
Since the acknowledgment to block 6 has an error during transmission, the transmitting apparatus 100 cannot correctly receive the acknowledgment, and the transmitting apparatus 100 cannot know the contents of the acknowledgment to block 6; 7, the error acknowledgment specifying means 19
Then, it is detected that the acknowledgment of the block 6 has been lost, and the block retransmitting means 30 determines that the acknowledgment of the block 6 is NAK based on the history information of the block 6 included in the acknowledgment of the block 7 received correctly. It is possible to know what happened.

【0092】したがって、送信装置100は、ブロック
再送手段30により、ブロック6に含まれるすべての伝
送パケットを複数個コピー(図13に示す例では、それ
ぞれ2個コピー)して、受信装置200へ再送する。こ
こで仮に、ブロック6の確認応答がACKであったと判
ったとすると、その場合は、再送の必要がないので、ブ
ロック6に含まれる伝送パケットの再送は行わない。
Therefore, transmitting apparatus 100 copies a plurality of transmission packets included in block 6 (two copies in the example shown in FIG. 13) and retransmits them to receiving apparatus 200 by block retransmitting means 30. I do. Here, if it is determined that the acknowledgment of block 6 is ACK, in that case, there is no need to retransmit, so that the transmission packet included in block 6 is not retransmitted.

【0093】送信装置100は、ブロック6に含まれる
どの伝送パケットを再送すればいいかまでは、履歴情報
により知ることができないので、ブロック6に含まれる
伝送パケットをすべて再送しており、1回に限定した伝
送パケットの再送の成功率を高めるために、再送パケッ
トを複数個コピーして再送している。
The transmitting apparatus 100 cannot know from the history information which transmission packet included in the block 6 should be retransmitted, and therefore retransmits all the transmission packets included in the block 6 and once. In order to increase the success rate of retransmission of a transmission packet limited to the above, a plurality of retransmission packets are copied and retransmitted.

【0094】ここで、図13に示す例では、再送した伝
送パケット(6−0)と伝送パケット(6−1)が伝送
中エラーとなっているが、コピーして再送した伝送パケ
ット(6−1)が正しく受信されたため、本来再送が必
要であった伝送パケット(6−1)の再送は成功してい
る。ここで、本実施の形態のデータ伝送方法では、伝送
パケットの再送は1回に限定しているので、再送パケッ
トに対する確認応答は必要ない。
Here, in the example shown in FIG. 13, the retransmitted transmission packet (6-0) and the transmission packet (6-1) have an error during transmission, but the transmission packet (6 Since 1) was correctly received, the retransmission of the transmission packet (6-1) that originally required retransmission has succeeded. Here, in the data transmission method of the present embodiment, retransmission of a transmission packet is limited to one time, so that an acknowledgment for the retransmission packet is not required.

【0095】このように、本実施の形態では、送信装置
100において正しく受信できなかった確認応答があっ
た場合に、送信装置100で、確認応答に含まれるブロ
ック番号の連続性より、正しく受信できなかった確認応
答の前後に正しく受信した確認応答のブロック番号か
ら、その正しく受信できなかった確認応答を容易に特定
することができる。例えば、図13に示す例では、ブロ
ック5、ブロック7のブロック番号より、ブロック6を
特定することができる。
As described above, in the present embodiment, when there is an acknowledgment that could not be correctly received by transmitting apparatus 100, transmitting apparatus 100 cannot correctly receive the acknowledgment due to the continuity of the block numbers included in the acknowledgment. From the block number of the acknowledgment correctly received before and after the unacknowledged acknowledgment, the unacknowledged acknowledgment can be easily specified. For example, in the example shown in FIG. 13, the block 6 can be specified from the block numbers of the blocks 5 and 7.

【0096】図14、図15は、本実施の形態の実時間
映像伝送装置に係る実験システムの実測結果を示す図で
ある。
FIG. 14 and FIG. 15 are diagrams showing actual measurement results of an experimental system according to the real-time video transmission apparatus of the present embodiment.

【0097】本実験システムは、前記図9に示すよう
に、高速広帯域ネットワークとしてATM網を仮定し、
カメラ91から映像をMPEG2方式でリアルタイムに
エンコーダ(ENC)92でエンコードし、AALタイ
プ5にて実際に伝送した。また、ネットワーク94上で
は、ネットワークエミュレータ(NEM)95を用いて
セルロス(ランダム)、及び遅延(10ms)を発生さ
せ、それを挟んだ2台のパーソナルコンピュータ(P
C)からなる送信端末上に、本実施の形態の実時間映像
伝送装置が実装されている。
As shown in FIG. 9, the experimental system assumes an ATM network as a high-speed broadband network.
The video from the camera 91 was encoded in real time by the encoder (ENC) 92 in the MPEG2 system, and actually transmitted by AAL type 5. On the network 94, a cell loss (random) and a delay (10 ms) are generated using a network emulator (NEM) 95, and two personal computers (P
The real-time video transmission device of the present embodiment is mounted on the transmitting terminal C).

【0098】本実験システムでは、フォワード伝送路と
バックワード伝送路の双方にセルロス、及び遅延10m
secを発生させ、実測を行った。ここで、フォワード
伝送路におけるセルロスは、セルロス率10~3のランダ
ムなセルロスとしている。また、伝送単位は、トランス
ポートストリーム(TS)毎として、1伝送パケットを
5セル(1TS)とし、1ブロックは10伝送パケット
としている。さらに、再送パケットのコピー数は3と
し、各確認応答に含まれる履歴情報は過去4ブロック分
の履歴情報としている。
In this experimental system, cell loss and delay of 10 m were applied to both the forward transmission path and the backward transmission path.
sec was generated and an actual measurement was performed. Here, the cell loss in the forward transmission path is a random cell loss with a cell loss rate of 10 to 3 . The transmission unit is 5 transport cells (1TS) for each transport stream (TS) and 10 transport packets for one block. Further, the number of copies of the retransmission packet is 3, and the history information included in each acknowledgment is the history information of the past 4 blocks.

【0099】本実験システムにおいて、それぞれ4分程
度の映像、すなわち106個の伝送パケットを伝送し、
バックワード伝送路において、ランダムなセルロスを発
生させた場合(ケース1)と、連続1セル〜8セルのバ
ースト的なセルロスを発生させた場合(ケース2)につ
いて、映像品質とネットワーク負荷という点から本実施
の形態の実時間映像伝送装置の評価を行った。
In this experimental system, each video of about 4 minutes, that is, 10 6 transmission packets is transmitted,
In the case where a random cell loss occurs in the backward transmission path (Case 1) and a case where a burst cell loss of 1 to 8 continuous cells occurs (Case 2), in terms of video quality and network load. The real-time video transmission device of the present embodiment was evaluated.

【0100】図14はケース1の場合、図15はケース
2の場合を示している。また、図14(a)、図15
(a)において、残留エラーパケット数とは、デコード
する時点で依然として再送により救済できなかった伝送
パケットの数を表しており、さらに、図14(b)、図
15(b)において、パケット増加率とは、本来伝送す
べき伝送パケット数に対する再送パケット数のパーセン
テージを表している。図14、図15から以下の評価を
行うことができる。
FIG. 14 shows the case 1 and FIG. 15 shows the case 2. 14 (a) and FIG.
In (a), the number of residual error packets indicates the number of transmission packets that could not be rescued by retransmission at the time of decoding, and the packet increase rate in FIGS. 14 (b) and 15 (b). Represents the percentage of the number of retransmission packets to the number of transmission packets to be transmitted. The following evaluations can be made from FIG. 14 and FIG.

【0101】(1)図14の(a)より、ケース1の場
合、履歴情報のない従来方式ではセルロス率10~4以上
のセルロス率の環境下では残留するエラーパケットが数
個あるのに対して、履歴情報ありの本実施の形態の実時
間映像伝送装置では残留エラーパケット数は0となって
おり、履歴情報ありの本実施の形態の実時間映像伝送装
置を用いることで映像品質を改善することが可能であ
る。
(1) According to FIG. 14A, in case 1, in the conventional method without history information, there are several error packets remaining in an environment with a cell loss rate of 10 to 4 or more in the conventional method. Therefore, the number of residual error packets is 0 in the real-time video transmission device of this embodiment with history information, and the video quality is improved by using the real-time video transmission device of this embodiment with history information. It is possible to

【0102】(2)図15の(a)より、ケース2の場
合、確認応答に含まれる履歴情報の個数より、連続して
エラーとなる確認応答の個数の方が大きくなる場合があ
るため、本実施の形態の実時間映像伝送装置を用いても
救済できない伝送パケットが数個あるものの、履歴情報
ありの本実施の形態の実時間映像伝送装置を用いること
で、履歴情報なしの実時間映像伝送装置よりも映像品質
を改善することが可能である。
(2) As shown in FIG. 15 (a), in case 2, the number of acknowledgments that are continuously in error may be larger than the number of history information included in the acknowledgment. Although there are several transmission packets that cannot be rescued by using the real-time video transmission device of the present embodiment, the real-time video transmission device of the present embodiment with history information can be used for real-time video without history information. It is possible to improve the video quality over the transmission device.

【0103】(3)図14(b)、図15(b)より、
ケース1及びケース2のどちらの場合においても、履歴
情報ありの本実施の形態の実時間映像伝送装置と、履歴
情報なしの実時間映像伝送装置とでは、パケット増加率
はほとんど差がなく、パケット増加率は2%未満であ
る。
(3) From FIGS. 14 (b) and 15 (b),
In both cases 1 and 2, the packet growth rate of the real-time video transmission device with history information according to the present embodiment is substantially the same as that of the real-time video transmission device without history information. The rate of increase is less than 2%.

【0104】また、本実施の形態では、確認応答は1セ
ルとしているため、履歴情報の4ビットを確認応答に含
めることにより、バックワード伝送路において伝送され
るATMセル数が増加することはなく、バックワード伝
送量への影響はなかった。
In this embodiment, since the acknowledgment is one cell, the number of ATM cells transmitted on the backward transmission path does not increase by including 4 bits of history information in the acknowledgment. , There was no effect on the amount of backward transmission.

【0105】このように、本実施の形態によれば、送信
装置100において、誤りを含む確認応答あるいはロス
となった確認応答があったとしても、それ以降に正しく
受信された確認応答内にその誤りを含む確認応答あるい
はロスとなった確認応答に対するブロックの履歴情報が
含まれていれば、送信装置100は、その誤りを含む確
認応答あるいはロスとなった確認応答がACKであった
かNAKであったかを知ることが可能である。よって、
NAKと判った場合に限り、その誤りを含む確認応答あ
るいはロスとなった確認応答に対するブロックに含まれ
る伝送パケットをすべて再送することによって、無駄な
再送を多く行うことなく、すなわちネットワーク負荷を
低くおさえながら、伝送パケットのエラーまたはロスを
回復することが可能である。
As described above, according to the present embodiment, even if there is an acknowledgment containing an error or a lost acknowledgment in transmitting apparatus 100, the acknowledgment correctly received thereafter will be included in the acknowledgment. If the block history information for the acknowledgment including the error or the lost acknowledgment is included, the transmitting apparatus 100 determines whether the acknowledgment including the error or the lost acknowledgment is ACK or NAK. It is possible to know. Therefore,
Only when it is known to be NAK, by retransmitting all transmission packets included in the block for the acknowledgment including the error or the lost acknowledgment, it is possible to reduce the amount of unnecessary retransmission, that is, keep the network load low. Meanwhile, it is possible to recover an error or loss of the transmission packet.

【0106】また、1つの確認応答内に過去数ブロック
分の履歴情報を含めることで、誤りを含む確認応答ある
いはロスとなった確認応答に対するブロックの履歴情報
が、それ以降に正しく受信された確認応答内に含まれて
いなかったために、その誤りを含む確認応答あるいはロ
スとなった確認応答がACKであったかNAKであった
かがわからないといったケースが生じる確率を低くする
ことが可能である。
Also, by including the history information of the past several blocks in one acknowledgment, the acknowledgment containing the error or the history information of the block corresponding to the lost acknowledgment can be confirmed after that. Since it is not included in the response, it is possible to reduce the probability of occurrence of a case where it is not known whether the acknowledgment including the error or the lost acknowledgment was ACK or NAK.

【0107】またこのことは、仮りに誤りを含む確認応
答あるいはロスとなった確認応答がACKであったかN
AKであったかがわからないといったケースが生じて
も、その誤りを含む確認応答あるいはロスとなった確認
応答がNAKである確率を小さくすることにもつなが
る。
This is because whether the acknowledgment containing the error or the lost acknowledgment is ACK or not.
Even in the case where it is not known whether or not the AK is AK, the probability that the acknowledgment including the error or the lost acknowledgment is NAK can be reduced.

【0108】さらに、過去の各々のブロックの履歴情報
を1ビットごとで表しているので、各確認応答に過去m
ブロック分の履歴情報を含めたとしても、それによる確
認応答サイズの増加分はmビットであり、履歴情報を確
認応答に含めることによるバックワード伝送量への影響
は小さい。
Further, since the history information of each past block is represented by one bit, the past m
Even if the history information for the block is included, the increase in the acknowledgment size due to it is m bits, and the influence on the backward transmission amount by including the history information in the acknowledgment is small.

【0109】以上、本発明者によってなされた発明を、
前記実施の形態に基づき具体的に説明したが、本発明
は、前記実施の形態に限定されるものではなく、その要
旨を逸脱しない範囲において種々変更可能であることは
勿論である。
As described above, the invention made by the present inventor is:
Although a specific description has been given based on the above-described embodiment, the present invention is not limited to the above-described embodiment, and it is needless to say that various modifications can be made without departing from the gist of the invention.

【0110】例えば、これまで説明に用いた映像データ
とは、音声データ及び画像データからなるもの、または
画像データのみからなるもの、または音声データのみか
らなるものをすべて含むことは勿論である。
For example, the video data used in the description so far includes, of course, all data composed of audio data and image data, only data composed of image data, or all composed only of audio data.

【0111】[0111]

【発明の効果】本願によって開示された発明のうち代表
的なものによって得られる効果を簡単に説明すると、以
下のとおりである。
The effects obtained by typical ones of the inventions disclosed by the present application will be briefly described as follows.

【0112】(1)本発明によれば、伝送パケットの再
送を1回に限定し、映像データを出力手段に安定して出
力することにより、映像の実時間性及びエンド・エンド
遅延の低遅延性の保証とバッファサイズの減少化が可能
となる。
(1) According to the present invention, retransmission of a transmission packet is limited to one time, and video data is stably output to an output unit, thereby real-time performance of video and low end-to-end delay. And the buffer size can be reduced.

【0113】(2)本発明によれば、再送パケットを複
数個コピーして再送するので、映像品質を向上させるこ
とが可能となる。
(2) According to the present invention, a plurality of retransmission packets are copied and retransmitted, so that the video quality can be improved.

【0114】(3)本発明によれば、1ブロックに含ま
れる伝送パケットの確認応答を1つの確認応答として返
すことにより、確認応答数の減少、確認応答処理の軽減
が可能となる。
(3) According to the present invention, by returning an acknowledgment of a transmission packet included in one block as one acknowledgment, it is possible to reduce the number of acknowledgments and reduce acknowledgment processing.

【0115】(4)本発明によれば、各確認応答に、1
ビットで表した過去のブロックの履歴情報を複数個含め
るようにしたので、送信装置において正しく受信できな
かった確認応答があったとしても、それ以降に正しく受
信された確認応答にその誤りを含む確認応答あるいはロ
スとなった確認応答に対するブロックの履歴情報が含ま
れていれば、送信装置はその誤りを含む確認応答あるい
はロスとなった確認応答がACK信号、あるいはNAK
信号を含んでいたかを知ることが可能である。
(4) According to the present invention, each acknowledgment
Since multiple pieces of history information of past blocks represented by bits are included, even if there is an acknowledgment that could not be received correctly at the transmitting device, an acknowledgment that contains errors correctly after that If the history information of the block corresponding to the response or the lost acknowledgment is included, the transmitting apparatus transmits the acknowledgment including the error or the lost acknowledgment to the ACK signal or the NAK.
It is possible to know whether a signal was included.

【0116】(5)本発明によれば、送信装置では、履
歴情報により誤りを含む確認応答あるいはロスとなった
確認応答がNAK信号を含んでいる判定される場合に限
って、その確認応答に対するブロックに含まれるすべて
の伝送パケットを複数個コピーして再送するようにした
ので、ネットワーク負荷を低くおさえながら、映像品質
を改善することが可能となる。
(5) According to the present invention, the transmitting apparatus responds to the acknowledgment only when it is determined that the acknowledgment including the error or the lost acknowledgment includes the NAK signal based on the history information. Since a plurality of transmission packets included in the block are copied and retransmitted, it is possible to improve the video quality while keeping the network load low.

【0117】(6)本発明によれば、過去の各々のブロ
ックの履歴情報を1ビットで表すようにしたので、各確
認応答に過去mブロック分の履歴情報を含めたとして
も、それによる確認応答サイズの増加分はmビットであ
り、履歴情報を確認応答に含めることによるバックワー
ド伝送量への影響を小さくすることが可能である。
(6) According to the present invention, the history information of each past block is represented by one bit. Therefore, even if the history information of the past m blocks is included in each acknowledgment, the confirmation by that is confirmed. The increase in the response size is m bits, and it is possible to reduce the influence on the backward transmission amount caused by including the history information in the acknowledgment.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の一実施の形態である実時間映像伝送装
置の概略構成を示すブロック図である。
FIG. 1 is a block diagram illustrating a schematic configuration of a real-time video transmission device according to an embodiment of the present invention.

【図2】本実施の形態1における伝送パケット及びブロ
ック生成の一例と、伝送パケットに含まれるヘッダ情報
のフォーマットの一例を示す図である。
FIG. 2 is a diagram illustrating an example of generation of a transmission packet and a block and an example of a format of header information included in the transmission packet according to the first embodiment.

【図3】本実施の形態1におけるブロック番号F1及び
ブロック内パケット番号F2の付加方法を説明するため
の図である。
FIG. 3 is a diagram for explaining a method of adding a block number F1 and an intra-block packet number F2 according to the first embodiment.

【図4】本実施の形態1における確認応答のフォーマッ
トの一例を示す図である。
FIG. 4 is a diagram showing an example of a format of an acknowledgment in the first embodiment.

【図5】本実施の形態1の映像データ記憶手段におい
て、受信した伝送パケットから抽出した符号化データ
を、1回再送に必要な時間だけ受信側バッファに記憶す
るための構成の一例を示すブロック図である。
FIG. 5 is a block diagram illustrating an example of a configuration for storing encoded data extracted from a received transmission packet in a receiving buffer for a time necessary for one retransmission in the video data storage unit according to the first embodiment; FIG.

【図6】本実施の形態1における符号化データを送信す
る送信装置の処理手順を示すフローチャートである。
FIG. 6 is a flowchart showing a processing procedure of a transmitting apparatus for transmitting encoded data according to the first embodiment.

【図7】本実施の形態1における符号化データを受信す
る受信装置の処理手順を示すフローチャートである。
FIG. 7 is a flowchart illustrating a processing procedure of a receiving device that receives encoded data according to the first embodiment.

【図8】本実施の形態1における伝送パケットの伝送手
順を示す図である。
FIG. 8 is a diagram showing a transmission procedure of a transmission packet in the first embodiment.

【図9】本実施の形態1の実時間映像伝送装置に係る実
験システムの概略構成を示すシステム構成図である。
FIG. 9 is a system configuration diagram showing a schematic configuration of an experimental system according to the real-time video transmission device of the first embodiment.

【図10】図9に示す実験システムの実測結果を示す図
である。
FIG. 10 is a diagram showing actual measurement results of the experimental system shown in FIG.

【図11】本発明の他の実施の形態である実時間映像伝
送装置の概略構成を示すブロック図である。
FIG. 11 is a block diagram showing a schematic configuration of a real-time video transmission device according to another embodiment of the present invention.

【図12】本実施の形態2の確認応答のフォーマットの
一例を示す図である。
FIG. 12 is a diagram showing an example of a format of an acknowledgment according to the second embodiment.

【図13】本実施の形態2における伝送パケット及び確
認応答の伝送手順を示す図である。
FIG. 13 is a diagram showing a transmission procedure of a transmission packet and an acknowledgment in the second embodiment.

【図14】本実施の形態2の実時間映像伝送装置に係る
実験システムによる実測結果を示す図である。
FIG. 14 is a diagram showing actual measurement results by an experimental system according to the real-time video transmission device of the second embodiment.

【図15】本実施の形態2の実時間映像伝送装置に係る
実験システムによる実測結果を示す図である。
FIG. 15 is a diagram showing actual measurement results by an experimental system according to the real-time video transmission device of the second embodiment.

【符号の説明】[Explanation of symbols]

10…送信側バッファ、11…入力手段、12…映像デ
ータ一時記憶手段、13…伝送パケット及びブロック生
成手段、14…伝送パケット送信手段、15…保存場所
記憶手段、16…確認応答受信手段、17…再送手段、
18…確認応答誤り検出手段、19…誤り確認応答特定
手段、30…ブロック再送手段、20…受信側バッフ
ァ、21…伝送パケット受信手段、22…誤り検出手
段、23…エラー及びロスパケット特定手段、24…ブ
ロック内パケット番号記憶手段、25…映像データ抽出
手段、26…確認応答生成手段、27…確認応答送信手
段、28…映像データ記憶手段、29…出力手段、91
…カメラ、92…エンコーダ(ENC)、93…送信端
末、94…ネットワーク、95…ネットワークエミュレ
ータ(NEM)、96…受信端末、97…デコーダ(D
EC)、98…モニタ、100…送信装置、112…映
像発生及び符号化装置、111,291,300…ネッ
トワーク、200…受信装置、292…復号化及び映像
表示装置、O1…応答、O2…ブロック番号、O3…再
送が必要なパケット数、O4…再送が必要なパケットの
ブロック内パケット番号、O5…過去mブロック分の履
歴情報、C0,C1,C4…符号化データ、H0,H
1,H4…ヘッダ情報、P0,P1,P4,P11〜P
15,P21〜P25,P31〜P35,S50,S5
1,S52,S59,S511,S512,S513…
伝送パケット、B1〜B4…ブロック、F1…ブロック
番号、F2…ブロック内パケット番号、F3…再送ビッ
ト、D1〜D6…符号化データ。
DESCRIPTION OF SYMBOLS 10 ... Transmission side buffer, 11 ... Input means, 12 ... Video data temporary storage means, 13 ... Transmission packet and block generation means, 14 ... Transmission packet transmission means, 15 ... Storage location storage means, 16 ... Confirmation response receiving means, 17 ... retransmission means,
18 acknowledgment error detection means, 19 error acknowledgment identification means, 30 block retransmission means, 20 reception buffer, 21 transmission packet reception means, 22 error detection means, 23 error and loss packet identification means, 24: Packet number storage unit in block, 25: Video data extraction unit, 26: Confirmation response generation unit, 27: Confirmation response transmission unit, 28: Video data storage unit, 29: Output unit, 91
... Camera, 92 ... Encoder (ENC), 93 ... Transmission terminal, 94 ... Network, 95 ... Network emulator (NEM), 96 ... Reception terminal, 97 ... Decoder (D
EC), 98 monitor, 100 transmitter, 112 video generator and encoder, 111, 291, 300 network, 200 receiver, 292 decoding and video display, O1 response, O2 block No., O3: number of packets requiring retransmission, O4: packet number in a block of packets requiring retransmission, O5: history information of past m blocks, C0, C1, C4: coded data, H0, H
1, H4: header information, P0, P1, P4, P11 to P
15, P21 to P25, P31 to P35, S50, S5
1, S52, S59, S511, S512, S513 ...
Transmission packet, B1 to B4 block, F1 block number, F2 packet number within block, F3 retransmission bit, D1 to D6 encoded data.

Claims (9)

【特許請求の範囲】[Claims] 【請求項1】 実時間で発生する映像データをノード・
ノード間またはエンド・エンド間で高品質にかつリアル
タイムに伝送するデータ伝送方法において、 複数個の伝送パケットをひとまとめにしたものをブロッ
クとし、受信側で、1ブロック内の各伝送パケットがす
べて正しく受信されたことを表すACK信号を含む確認
応答、あるいは、1ブロック内のいずれかの伝送パケッ
トが正しく受信されなかったことを表すNAK信号を含
む確認応答をブロック単位で生成して送信側へ返送し、
送信側で、前記受信側からのブロック単位の確認応答が
NAK信号を含む場合に、再送が必要な伝送パケットの
みを複数個コピーして受信側へ再送することを特徴とす
るデータ伝送方法。
An image data generated in real time is stored in a node
A data transmission method for transmitting high-quality and real-time data between nodes or end-to-end. In a data transmission method, a set of multiple transmission packets is grouped into blocks, and the reception side receives all transmission packets in one block correctly. An acknowledgment including an ACK signal indicating that the transmission has been performed or an acknowledgment including a NAK signal indicating that any transmission packet in one block has not been correctly received is generated in block units and returned to the transmission side. ,
A data transmission method on the transmitting side, wherein when the block-based acknowledgment from the receiving side includes a NAK signal, only a plurality of transmission packets requiring retransmission are copied and retransmitted to the receiving side.
【請求項2】 実時間で発生する映像データをノード・
ノード間で高品質にかつリアルタイムに伝送するデータ
伝送方法において、 入力映像データを送信する送信側は、ネットワークから
入力される映像データを送信側バッファに一時記憶し、
前記送信側バッファ内において、一定単位の映像データ
毎に伝送パケットを生成し、さらに、その伝送パケット
を複数個ひとまとめにしたブロックを生成するととも
に、前記伝送パケットには、ブロックを識別するための
ブロック番号とそのブロック内の伝送パケットを識別す
るためのブロック内パケット番号とを含むヘッダ情報を
付加し、前記ブロック番号をキーとしたテーブルを用い
て、生成したブロックの送信側バッファにおける保存場
所を記憶し、前記伝送パケットを受信装置へ送信し、ま
た、受信装置からの確認応答を受信し、再送要求のあっ
た伝送パケットを選択し、その伝送パケットを複数個コ
ピーして再送信するよう指示する再送処理を各伝送パケ
ットに対して1度だけに限定して行い、 映像データを受信する受信側は、前記送信側から伝送さ
れた伝送パケットを受信し、受信した伝送パケットの誤
りを検出し、ブロック番号とブロック内パケット番号を
用いて誤りを含む伝送パケット及びロスとなった伝送パ
ケットを特定し、誤りを含む伝送パケットまたはロスと
なった伝送パケットが存在する場合、その伝送パケット
のブロック内パケット番号を記憶し、1ブロック正しく
受信した場合は、受信したブロックのブロック番号とA
CK信号を含む確認応答を、受信した1ブロック内に誤
りを含む伝送パケットまたはロスとなった伝送パケット
が存在する場合は、受信したブロックのブロック番号と
誤りを含む伝送パケットまたはロスとなった伝送パケッ
トのブロック内パケット番号とNAK信号を含む確認応
答を、1回目に伝送されたブロックに対してのみ、1ブ
ロック受信毎に生成して送信装置へ送信し、また、受信
した伝送パケットからそれに含まれる映像データを抽出
し、1回再送に必要な時間だけ、抽出した映像データを
前記受信側バッファに記憶し、映像データをネットワー
クへ出力することを特徴とするデータ伝送方法。
2. A method for transmitting video data generated in real time to a node
In a data transmission method for transmitting high-quality and real-time between nodes, a transmission side transmitting input video data temporarily stores video data input from a network in a transmission side buffer,
In the transmission-side buffer, a transmission packet is generated for each fixed unit of video data, and further, a block in which a plurality of the transmission packets are grouped together is generated, and the transmission packet includes a block for identifying a block. A header information including a number and a packet number in a block for identifying a transmission packet in the block is added, and the storage location of the generated block in the transmission buffer is stored using a table using the block number as a key. Transmitting the transmission packet to a receiving device, receiving an acknowledgment from the receiving device, selecting a transmission packet for which a retransmission request has been made, and instructing that a plurality of the transmission packets be copied and retransmitted. Retransmission processing is performed only once for each transmission packet, and the receiving side that receives video data The transmission packet transmitted from the transmitting side is received, an error of the received transmission packet is detected, and the transmission packet including the error and the transmission packet having the loss are identified using the block number and the packet number in the block, and the error is identified. If there is a transmission packet including a transmission packet or a lossy transmission packet, the packet number in the block of the transmission packet is stored. If one block is correctly received, the block number of the received block and A
If the received acknowledgment including the CK signal includes a transmission packet containing an error or a lost transmission packet in one received block, the block number of the received block and a transmission packet containing an error or a lost transmission packet are included. An acknowledgment including the packet number in the block of the packet and the NAK signal is generated only for the first transmitted block every time one block is received and transmitted to the transmitting device, and included in the received transmission packet. A data transmission method, comprising extracting video data to be extracted, storing the extracted video data in the reception buffer for a time required for one retransmission, and outputting the video data to a network.
【請求項3】 実時間で発生する映像データをエンド・
エンド間で高品質にかつリアルタイムに伝送するデータ
伝送方法において、 前記送信側の入力映像データは、映像発生及び符号化装
置からの映像データであり、前記受信側の出力映像デー
タは、復号化及び映像表示装置へ出力される映像データ
であることを特徴とする請求項2に記載されたデータ伝
送方法。
3. End-time video data generated in real time
In a data transmission method for transmitting high-quality and real-time between ends, the input video data on the transmission side is video data from a video generation and encoding device, and the output video data on the reception side is decoded and 3. The data transmission method according to claim 2, wherein the data is video data output to a video display device.
【請求項4】 前記受信側は、過去に受信した複数のブ
ロックの各々について、該ブロックが正しく受信された
か否かを表す1ビットの履歴情報を生成するとともに、
過去数ブロック分の該履歴情報を含む確認応答を生成し
て送信側に返送し、 前記送信側は、受信した確認応答の誤りの有無を検出
し、誤りを含む確認応答あるいはロスとなった確認応答
がある場合に、その前後に正しく受信された確認応答に
含まれるブロック番号を用いて、誤りを含む確認応答及
びロスとなった確認応答がどのブロックに対する確認応
答であったかを特定し、その特定したブロックの履歴情
報を、以降に正しく受信された確認応答内に含まれるブ
ロック番号と履歴情報の並びとから取得でき、かつ誤り
を含む確認応答あるいはロスとなった確認応答がNAK
信号を含んでいると判定される場合に限って、誤りを含
む確認応答あるいはロスとなった確認応答に対するブロ
ックに含まれるすべての伝送パケットを複数個コピーし
て受信側へ再送することを特徴とする請求項1、請求項
2、請求項3のいずれか1項に記載されたデータ伝送方
法。
4. The reception side generates, for each of a plurality of blocks received in the past, 1-bit history information indicating whether or not the block has been correctly received,
An acknowledgment including the history information for the past several blocks is generated and returned to the transmitting side. The transmitting side detects the presence or absence of an error in the received acknowledgment, and confirms the acknowledgment including the error or the loss. If there is a response, use the block number included in the acknowledgment correctly received before and after that to identify the block to which the acknowledgment containing the error and the lost acknowledgment were the acknowledgment, and specify the identification. Can be obtained from the block number and the sequence of the history information included in the acknowledgment correctly received thereafter, and the acknowledgment including the error or the acknowledgment that has been lost is NAK.
Only when it is determined that the packet includes a signal, a plurality of all transmission packets included in a block for an acknowledgment containing an error or a lost acknowledgment are copied and retransmitted to a receiving side. The data transmission method according to any one of claims 1, 2 and 3, wherein
【請求項5】 前記送信側は、前記誤りを含む確認応答
あるいはロスとなった確認応答により特定されるブロッ
クの履歴情報が得られない場合は、その誤りを含む確認
応答あるいはロスとなった確認応答はACK信号を含ん
でいるものとみなすことを特徴とする請求項4に記載さ
れたデータ伝送方法。
5. The transmitting side, if the history information of the block specified by the acknowledgment including the error or the lost acknowledgment cannot be obtained, the acknowledgment including the error or the lost acknowledgment. 5. The data transmission method according to claim 4, wherein the response is regarded as including an ACK signal.
【請求項6】 送信装置と受信装置とを備え、実時間で
発生する映像データをノード・ノード間で、高品質にか
つリアルタイムに伝送するデータ伝送装置において、 前記送信装置は、送信側バッファと、ネットワークから
映像データを入力する入力手段と、入力した映像データ
を送信側バッファに一時記憶する映像データ一時記憶手
段と、前記送信側バッファ内において、一定単位の映像
データ毎に伝送パケットを生成し、さらに、その伝送パ
ケットを複数個ひとまとめにしたブロックを生成すると
ともに、前記伝送パケットには、ブロックを識別するた
めのブロック番号とそのブロック内の伝送パケットを識
別するためのブロック内パケット番号とを含むヘッダ情
報を付加する伝送パケット及びブロック生成手段と、前
記ブロック番号をキーとしたテーブルを用いて、生成し
たブロックの送信側バッファにおける保存場所を記憶す
る保存場所記憶手段と、前記伝送パケットを受信装置へ
送信する伝送パケット送信手段と、受信装置からの確認
応答を受信する確認応答受信手段と、再送要求のあった
伝送パケットを選択し、前記伝送パケット送信手段に対
してその伝送パケットを複数個コピーして再送信するよ
う指示する再送処理を各伝送パケットに対して1度だけ
に限定して行う再送手段とを備え、 前記受信装置は、受信側バッファと、前記送信装置から
伝送された伝送パケットを受信する伝送パケット受信手
段と、受信した伝送パケットの誤りを検出する誤り検出
手段と、ブロック番号とブロック内パケット番号を用い
て誤りを含む伝送パケット及びロスとなった伝送パケッ
トを特定するエラー及びロスパケット特定手段と、誤り
を含む伝送パケットまたはロスとなった伝送パケットが
存在する場合、その伝送パケットのブロック内パケット
番号を記憶するブロック内パケット番号記憶手段と、1
ブロックを正しく受信した場合は、受信したブロックの
ブロック番号とACK信号を含む確認応答を、受信した
1ブロック内に誤りを含む伝送パケットまたはロスとな
った伝送パケットが存在する場合は、受信したブロック
のブロック番号と誤りを含む伝送パケットまたはロスと
なった伝送パケットのブロック内パケット番号とNAK
信号を含む確認応答を、1回目に伝送されたブロックに
対してのみ、1ブロック受信毎に生成する確認応答生成
手段と、生成した確認応答を送信装置へ送信する確認応
答送信手段と、受信した伝送パケットからそれに含まれ
る映像データを抽出する映像データ抽出手段と、1回再
送に必要な時間だけ、抽出した映像データを受信側バッ
ファに記憶する映像データ記憶手段と、映像データをネ
ットワークへ出力する出力手段とを備えることを特徴と
するデータ伝送装置。
6. A data transmission device, comprising a transmission device and a reception device, for transmitting video data generated in real time between nodes with high quality and in real time, wherein the transmission device comprises: a transmission buffer; Input means for inputting video data from the network, video data temporary storage means for temporarily storing the input video data in a transmission buffer, and generating a transmission packet for each fixed unit of video data in the transmission buffer. Further, a block in which a plurality of the transmission packets are grouped together is generated, and the transmission packet includes a block number for identifying the block and an in-block packet number for identifying the transmission packet in the block. Transmission packet and block generation means for adding header information including A storage location storing means for storing a storage location of the generated block in the transmission-side buffer, a transmission packet transmitting means for transmitting the transmission packet to a receiving device, and receiving an acknowledgment from the receiving device. One acknowledgment receiving unit and a retransmission process for selecting a transmission packet for which a retransmission request has been made, and instructing the transmission packet transmission unit to copy a plurality of the transmission packets and retransmit the same are performed for each transmission packet. A retransmission unit that performs transmission only on a transmission basis, the reception device detects a reception buffer, a transmission packet reception unit that receives a transmission packet transmitted from the transmission device, and detects an error in the received transmission packet. A transmission packet including an error and a transmission packet having a loss using an error detection unit, a block number and a packet number in a block. And error and loss packet specifying means for specifying, when there is transmission packet that the transmission packet or loss includes an error, the block packet number storage means for storing the block packet number of the transmission packet, 1
If the block is received correctly, an acknowledgment including the block number of the received block and the ACK signal is sent. If there is an erroneous or lost transmission packet in one of the received blocks, the received block is returned. Block number and NAK and the packet number in the block of a transmission packet containing an error or a lost transmission packet
An acknowledgment generating means for generating an acknowledgment including a signal only for each block transmitted for the first time each time one block is received, an acknowledgment transmitting means for transmitting the generated acknowledgment to the transmitting device, Video data extraction means for extracting video data included in the transmission packet from the transmission packet, video data storage means for storing the extracted video data in a receiving buffer for a time required for one retransmission, and outputting the video data to a network A data transmission device comprising output means.
【請求項7】 送信装置と受信装置とを備え、実時間で
発生する映像データをエンド・エンド間で、高品質にか
つリアルタイムに伝送するデータ伝送装置において、 前記送信装置の入力手段には、映像発生及び符号化装置
からの映像データが入力され、前記受信装置の出力手段
は、復号化及び映像表示装置に映像データを出力するこ
とを特徴とする請求項6に記載されたデータ伝送装置。
7. A data transmission device comprising a transmission device and a reception device for transmitting video data generated in real time between end and end with high quality and in real time, wherein the input means of the transmission device includes: 7. The data transmission device according to claim 6, wherein the video data from the video generation and encoding device is input, and the output unit of the receiving device outputs the video data to a decoding and video display device.
【請求項8】 前記受信装置の確認応答生成手段は、過
去に受信した複数のブロックの各々について、該ブロッ
クが正しく受信されたか否かを表す1ビットの履歴情報
を生成するとともに、過去数ブロック分の該履歴情報を
含む確認応答を生成し、 前記送信装置は、受信した確認応答の誤りの有無を検出
する確認応答誤り検出手段と、誤りを含む確認応答ある
いはロスとなった確認応答がある場合に、その前後に正
しく受信された確認応答に含まれるブロック番号を用い
て、誤りを含む確認応答及びロスとなった確認応答がど
のブロックに対する確認応答であったかを特定する誤り
確認応答特定手段と、その特定したブロックの履歴情報
を、以降に正しく受信された確認応答内に含まれるブロ
ック番号と履歴情報の並びとから取得でき、かつその誤
りを含む確認応答あるいはロスとなった確認応答がNA
K信号を含んでいると判定される場合に限って、その誤
りを含む確認応答あるいはロスとなった確認応答に対す
るブロックに含まれるすべての伝送パケットを複数個コ
ピーして再送するブロック再送手段とを、さらに備える
ことを特徴とする請求項6または請求項7に記載された
データ伝送装置。
8. The acknowledgment generation means of the receiving device generates, for each of a plurality of blocks received in the past, 1-bit history information indicating whether or not the block has been correctly received, The transmitting device generates an acknowledgment including the history information of the acknowledgment, and the transmitting device has an acknowledgment error detecting means for detecting the presence or absence of an error in the received acknowledgment, and an acknowledgment including an error or an acknowledgment that has been lost In the case, using the block number included in the acknowledgment correctly received before and after the acknowledgment, error acknowledgment identification means for identifying to which block the acknowledgment including the error and the acknowledgment that has resulted in a loss, and , The history information of the identified block can be obtained from the block number and the sequence of the history information included in the acknowledgment correctly received thereafter, and NA acknowledgment that became the acknowledgment or loss including the error of
Block retransmitting means for copying and retransmitting a plurality of all transmission packets included in the block corresponding to the acknowledgment including the error or the lost acknowledgment only when it is determined that the acknowledgment includes the K signal. The data transmission device according to claim 6, further comprising:
【請求項9】 前記ブロック再送手段は、前記誤りを含
む確認応答あるいはロスとなった確認応答により特定さ
れるブロックの履歴情報が得られない場合は、前記誤り
を含む確認応答あるいはロスとなった確認応答はACK
信号を含んでいるものとみなして、前記特定したブロッ
クに含まれるすべての伝送パケットの再送を行わないこ
とを特徴とする請求項8に記載されたデータ伝送装置。
9. The block retransmitting means, if the history information of the block specified by the acknowledgment containing the error or the lost acknowledgment cannot be obtained, returns the acknowledgment containing the error or a loss. Acknowledgment is ACK
9. The data transmission apparatus according to claim 8, wherein all the transmission packets included in the specified block are not retransmitted assuming that the data transmission includes a signal.
JP18370697A 1997-03-05 1997-07-09 Data transmitting method/device Pending JPH10308932A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP18370697A JPH10308932A (en) 1997-03-05 1997-07-09 Data transmitting method/device

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP9-49939 1997-03-05
JP4993997 1997-03-05
JP18370697A JPH10308932A (en) 1997-03-05 1997-07-09 Data transmitting method/device

Publications (1)

Publication Number Publication Date
JPH10308932A true JPH10308932A (en) 1998-11-17

Family

ID=26390380

Family Applications (1)

Application Number Title Priority Date Filing Date
JP18370697A Pending JPH10308932A (en) 1997-03-05 1997-07-09 Data transmitting method/device

Country Status (1)

Country Link
JP (1) JPH10308932A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007274367A (en) * 2006-03-31 2007-10-18 Kddi Corp Message receiver and viewer terminal in broadcast-and-communication convergence system
US7319698B2 (en) 2002-07-18 2008-01-15 Fujitsu Limited Recovery system for restoring preserved regeneration data
JP2009004890A (en) * 2007-06-19 2009-01-08 Fujitsu Ltd Retransmission control method and controller
EP2373037A2 (en) 2010-03-31 2011-10-05 Hitachi Consumer Electronics Co. Ltd. Video transmission device, video reception device, and video communication system
US10178440B2 (en) 2014-04-04 2019-01-08 Ntt Communications Corporation Communication system, transmission apparatus, reception apparatus, communication apparatus, communication method, and program

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7319698B2 (en) 2002-07-18 2008-01-15 Fujitsu Limited Recovery system for restoring preserved regeneration data
JP2007274367A (en) * 2006-03-31 2007-10-18 Kddi Corp Message receiver and viewer terminal in broadcast-and-communication convergence system
JP2009004890A (en) * 2007-06-19 2009-01-08 Fujitsu Ltd Retransmission control method and controller
EP2373037A2 (en) 2010-03-31 2011-10-05 Hitachi Consumer Electronics Co. Ltd. Video transmission device, video reception device, and video communication system
US9497493B2 (en) 2010-03-31 2016-11-15 Hitachi Maxell, Ltd. Video transmission device, video reception device, and video communication system
US10178440B2 (en) 2014-04-04 2019-01-08 Ntt Communications Corporation Communication system, transmission apparatus, reception apparatus, communication apparatus, communication method, and program

Similar Documents

Publication Publication Date Title
AU635117B2 (en) Transmitting encoded data on unreliable networks
US8386901B2 (en) Method, device and software application for transmitting data packets in a communication system
JP4703310B2 (en) Communication method and communication system
JP3634800B2 (en) System and method for implementing hybrid automatic repeat request using parity check combination
JP2685783B2 (en) Error control method
US8402343B2 (en) Reliable packet cut-through
KR100772528B1 (en) Method and apparatus for efficient packet retransmission in wired/wireless network
CN107888342A (en) A kind of network real-time video transmission method and device
US20040117722A1 (en) Performance of communication systems using forward error correction
CN112995685B (en) Data transmitting method and device, data receiving method and device, medium and equipment
JP2002330118A (en) Method for controlling data delivery, data delivery system, data delivery control program, and medium where data delivery program is stored
US9191696B2 (en) Reception device and program for reception device
JP3516929B2 (en) Transmitting device, receiving device, and communication system including the same
JPH10308932A (en) Data transmitting method/device
JP3127440B2 (en) Error recovery device
CN108183767A (en) A kind of method for reliable transmission suitable for space DTN networks
JP3476788B2 (en) Communication system, transmission device, reception device, and communication system including these
WO2023143506A1 (en) Video transmission system having physical layer retransmission and real-time transmission functions
CN111769906B (en) Data transmission method and device for adaptively reducing processing delay of coding layer and link layer
JPH1118086A (en) Image communication method and system
JPH0591091A (en) Data transmission system
JP3281202B2 (en) Error control system
JPS62108632A (en) Data transmission system
Bansal et al. Analysis of Sliding Window Protocol for Connected Node
Kayode et al. Error Correction Coding (ECC) Techniques for Enhancing Voice Transmission Security