JP2006304138A - Selective retransmission type communication device - Google Patents

Selective retransmission type communication device Download PDF

Info

Publication number
JP2006304138A
JP2006304138A JP2005126023A JP2005126023A JP2006304138A JP 2006304138 A JP2006304138 A JP 2006304138A JP 2005126023 A JP2005126023 A JP 2005126023A JP 2005126023 A JP2005126023 A JP 2005126023A JP 2006304138 A JP2006304138 A JP 2006304138A
Authority
JP
Japan
Prior art keywords
packet
importance
importance level
transmitting
normally received
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2005126023A
Other languages
Japanese (ja)
Inventor
Kenji Kudome
賢治 久留
Yoshimichi Kishine
桂路 岸根
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2005126023A priority Critical patent/JP2006304138A/en
Publication of JP2006304138A publication Critical patent/JP2006304138A/en
Withdrawn legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To perform retransmission processing according to the importance of data in a layer lower than a session layer. <P>SOLUTION: This communication device has transmitting equipment provided with a compression means which compresses media data and outputs the compressed data and outputs an importance identifying signal representing the importance of the compressed data, and a packet transmitting means for generating and outputting a packet to be composed by adding an importance identifying signal to the compressed data; and receiving equipment provided with a packet termination means which receives the packet transmitted from the transmitting equipment and transmits an acknowledgement signal representing a packet not received normally, and a restoration means for restoring the compressed data from a normally received packet. The transmitting equipment is so configured as to recognize the packet not received normally from the acknowledgement signal transmitted from the receiving equipment, and perform retransmission processing of a packet having high importance on the basis of the importance identifying signal added to the packet. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は、音声や動画のメディアデータをストリーミングデータ配信するシステムにおいて、メディアデータを圧縮しパケット化して配信する際に、欠落したパケットの再送処理に係る選択再送型通信装置に関する。   The present invention relates to a selective retransmission type communication device related to retransmission processing of a lost packet when media data is compressed and packetized in a streaming data distribution system for audio or moving image media data.

ネットワークを用いて音声や動画のメディアデータをストリーミングデータ配信するシステムにおいて、帯域を節約するためにメディアデータの圧縮が行われることがある。動画の場合によく用いられるのがフレーム間圧縮の技術である。この技術は、前後のフレームに依存しないで独立に符号化・復号化される完全フレーム(Iピクチャ)の合間に、変更あるいは動きのあった部分を中間フレーム(Pピクチャ、Bピクチャ)として送信するものである。この場合、各フレームのデータは相互に独立ではなくなるので、1つのデータ(特にIピクチャ)の欠落が、その後の再生されたメディアデータの品質を劣化させてしまう。   In a system that distributes audio or moving image media data over a network, the media data may be compressed to save bandwidth. The technique of inter-frame compression is often used for moving images. In this technique, a changed or moved portion is transmitted as an intermediate frame (P picture, B picture) between complete frames (I pictures) that are independently encoded and decoded without depending on the preceding and following frames. Is. In this case, since the data of each frame is not mutually independent, the lack of one data (particularly I picture) deteriorates the quality of the reproduced media data thereafter.

データの欠落に対して有効な手段の一つにデータ再送処理がある。具体的なデータ再送の手法としては、データリンク層ではIEEE802.11シリーズ(無線LAN)におけるMAC(Media Access Cintrol) による再送、トランスポート層ではTCP(Transmission control protocol)による再送が一般的である。しかし、これらの再送処理は、データの内容に拘らず一律に再送処理を行うので、データ欠落が多いネットワークでもデータの到達性を保証できる反面、再送処理の多発により効率的な伝送が困難になる。   One effective means for data loss is data retransmission processing. As a specific data retransmission method, retransmission by MAC (Media Access Control) in IEEE802.11 series (wireless LAN) is generally used in the data link layer, and retransmission by TCP (Transmission Control Protocol) is generally used in the transport layer. However, since these retransmission processes are performed uniformly regardless of the contents of the data, the reachability of data can be ensured even in a network with many data loss, but efficient transmission is difficult due to the frequent occurrence of retransmission processes. .

一方、RTCP(RTP(Real-time Transport Protocol) 制御プロトコル)にNACK(否定確認応答)パケットあるいはACK(肯定確認応答)パケットを導入し、これに基づいてセッション層で再送処理を行う方法が考えられている(非特許文献1)。
Colin Perkins 著、「マスタリングTCP/IP RTP編」、pp.234-238
On the other hand, a method of introducing a NACK (Negative Acknowledgment) packet or an ACK (Positive Acknowledgment) packet into RTCP (RTP (Real-time Transport Protocol) control protocol) and performing a retransmission process at the session layer based on this is considered. (Non-Patent Document 1).
Colin Perkins, "Mastering TCP / IP RTP", pp.234-238

NACKパケットまたはACKパケットを用い、セッション層で再送処理を行う場合には、データの重要度や誤り訂正技術に応じた再送が可能であるが、上位層で再送処理を行っているので、高速データに対応が困難になる問題がある。   When NACK packets or ACK packets are used and retransmission processing is performed in the session layer, retransmission according to the importance of data and error correction technology is possible. However, since retransmission processing is performed in an upper layer, high-speed data There is a problem that it becomes difficult to deal with.

本発明は、セッション層よりも下位層においてデータの重要度に応じた再送処理を行うことができる選択再送型通信装置を提供することを目的とする。   An object of the present invention is to provide a selective retransmission type communication apparatus capable of performing retransmission processing according to the importance of data in a lower layer than the session layer.

本発明の選択再送型通信装置は、メディアデータを圧縮して出力するとともに、圧縮されたデータの重要度を示す重要度識別信号を出力する圧縮手段と、圧縮されたデータに重要度識別信号を付加したパケットを生成して送信するパケット送信手段とを備えた送信装置と、送信装置から送信されたパケットを受信し、正常に受信されなかったパケットを示す応答信号を送信するパケット終端手段と、正常に受信されたパケットから圧縮されたデータを復元する復元手段とを備えた受信装置とを有し、送信装置は、受信装置から送信された応答信号により正常に受信されなかったパケットを認識し、当該パケットに付加された重要度識別信号に基づいて重要度が高いパケットの再送処理を行う構成である。   The selective retransmission type communication apparatus of the present invention compresses and outputs media data, and outputs a significance identifying signal indicating the significance of the compressed data, and a significance identifying signal for the compressed data. A transmission device comprising a packet transmission means for generating and transmitting the added packet; a packet termination means for receiving a packet transmitted from the transmission device and transmitting a response signal indicating a packet that was not normally received; A receiving device having a restoring means for restoring compressed data from a normally received packet, and the transmitting device recognizes a packet that has not been normally received by a response signal transmitted from the receiving device. The configuration is such that retransmission processing of a packet with high importance is performed based on the importance identification signal added to the packet.

ここで、パケット送信手段は、重要度識別信号をデータリンク層のパケットのヘッダに付加する構成としてもよい。また、パケット送信手段は、重要度識別信号をトランスポート層のパケットのヘッダに付加する構成としてもよい。   Here, the packet transmission means may be configured to add the importance level identification signal to the header of the data link layer packet. Further, the packet transmission means may be configured to add the importance level identification signal to the header of the transport layer packet.

本発明の選択再送型通信装置は、メディアデータを圧縮して出力するとともに、圧縮されたデータの重要度を示す重要度識別信号を出力する圧縮手段と、圧縮されたデータからパケットを生成して送信するパケット送信手段とを備えた送信装置と、送信装置から送信されたパケットを受信し、正常に受信されなかったパケットを示す応答信号を送信するパケット終端手段と、正常に受信されたパケットから圧縮されたデータを復元する復元手段とを備えた受信装置とを有し、送信装置は、送信したパケットと重要度識別信号の対応関係を保持し、受信装置から送信された応答信号により正常に受信されなかったパケットを認識し、当該パケットの重要度を対応関係に基づいて判別し、重要度が高いパケットの再送処理を行う構成である。   The selective retransmission type communication apparatus of the present invention compresses and outputs media data, and also generates a packet from the compressed data, compression means for outputting an importance level identifying signal indicating the importance level of the compressed data, A transmission device comprising a packet transmission means for transmitting, a packet termination means for receiving a packet transmitted from the transmission device and transmitting a response signal indicating a packet that has not been normally received, and a packet received normally A receiving device having a restoring means for restoring the compressed data, and the transmitting device maintains a correspondence relationship between the transmitted packet and the importance level identification signal, and is normally operated by a response signal transmitted from the receiving device. In this configuration, a packet that has not been received is recognized, the importance level of the packet is determined based on the correspondence relationship, and retransmission processing of the packet with a high importance level is performed.

本発明の選択再送型通信装置は、メディアデータを圧縮して出力するとともに、圧縮されたデータの重要度を示す重要度識別信号を出力する圧縮手段と、圧縮されたデータに重要度識別信号を付加したパケットを生成して送信するパケット送信手段と、受信側で正常に受信されなかったパケットの修復を行うための誤り訂正用パケットを送信する誤り訂正用パケット送信手段とを備えた送信装置と、送信装置から送信されたパケットを受信し、正常に受信されなかったパケットを示す応答信号を送信するパケット終端手段と、誤り訂正用パケットを用いて正常に受信されなかったパケットを修復する誤り訂正手段と、正常に受信されたパケットから圧縮されたデータを復元する復元手段とを備えた受信装置とを有し、送信装置は、受信装置から送信された応答信号により正常に受信されなかったパケットを認識し、当該パケットについて前記誤り訂正用パケットによる修復能力を超えて修復が不可能と判断され、かつ当該パケットに付加された重要度識別信号に基づいて重要度が高いパケットの再送処理を行う構成である。   The selective retransmission type communication apparatus of the present invention compresses and outputs media data, and outputs a significance identifying signal indicating the significance of the compressed data, and a significance identifying signal for the compressed data. A transmission apparatus comprising: a packet transmission unit that generates and transmits an added packet; and an error correction packet transmission unit that transmits an error correction packet for repairing a packet that is not normally received on the reception side; A packet termination unit that receives a packet transmitted from a transmission device and transmits a response signal indicating a packet that has not been normally received; and an error correction that uses an error correction packet to repair a packet that has not been received normally Means and a receiving device comprising a restoring means for restoring compressed data from a normally received packet, wherein the transmitting device is a receiving device Recognizing a packet that was not normally received by the transmitted response signal, and determining that the packet cannot be repaired beyond the repair capability of the error correction packet, and the importance identification signal added to the packet This is a configuration for performing retransmission processing of packets with high importance based on the above.

ここで、パケット送信手段は、重要度識別信号をデータリンク層のパケットのヘッダに付加する構成としてもよい。また、パケット送信手段は、重要度識別信号をトランスポート層のパケットのヘッダに付加する構成としてもよい。   Here, the packet transmission means may be configured to add the importance level identification signal to the header of the data link layer packet. Further, the packet transmission means may be configured to add the importance level identification signal to the header of the transport layer packet.

本発明の選択再送型通信装置は、メディアデータを圧縮して出力するとともに、圧縮されたデータの重要度を示す重要度識別信号を出力する圧縮手段と、圧縮されたデータからパケットを生成して送信するパケット送信手段と、受信側で正常に受信されなかったパケットの修復を行うための誤り訂正用パケットを送信する誤り訂正用パケット送信手段とを備えた送信装置と、送信装置から送信されたパケットを受信し、正常に受信されなかったパケットを示す応答信号を送信するパケット終端手段と、誤り訂正用パケットを用いて正常に受信されなかったパケットを修復する誤り訂正手段と、正常に受信されたパケットから圧縮されたデータを復元する復元手段とを備えた受信装置とを有し、送信装置は、送信したパケットと重要度識別信号の対応関係を保持し、受信装置から送信された応答信号により正常に受信されなかったパケットを認識し、当該パケットについて誤り訂正用パケットによる修復能力を超えて修復が不可能と判断され、かつ当該パケットの重要度を対応関係に基づいて判別し、重要度が高いパケットの再送処理を行う構成である。   The selective retransmission type communication apparatus of the present invention compresses and outputs media data, and also generates a packet from the compressed data, compression means for outputting an importance level identifying signal indicating the importance level of the compressed data, A transmission device comprising: a packet transmission means for transmitting; and an error correction packet transmission means for transmitting an error correction packet for repairing a packet that has not been normally received on the reception side; Packet termination means for receiving a packet and transmitting a response signal indicating a packet that has not been normally received, error correction means for repairing a packet that has not been normally received using an error correction packet, and normal reception And a receiving device having a restoring means for restoring the compressed data from the received packet, and the transmitting device transmits the transmitted packet and the importance identification signal. Recognizing a packet that has not been properly received by the response signal transmitted from the receiving apparatus, and that is determined to be impossible to repair beyond the repair capability of the error correction packet, and the packet Is determined based on the correspondence, and retransmission processing of packets with high importance is performed.

本発明は、パケットのヘッダに付加された重要度識別信号に従ってパケット欠落時に再送を行うか否かを決定することができる。すなわち、セッション層よりも下位層においてデータの重要度に応じた再送処理を行うことができる。これにより、重要なデータの到達を保証するとともに、効率的な伝送を行うことが可能となる。   The present invention can determine whether or not to perform retransmission when a packet is lost according to the importance level identification signal added to the header of the packet. That is, retransmission processing according to the importance of data can be performed in a layer lower than the session layer. As a result, it is possible to guarantee the arrival of important data and to perform efficient transmission.

(第1の実施形態)
図1は、本発明の選択再送型通信装置の第1の実施形態を示す。図2は、第1の実施形態の各部のパケット構成を示す。
(First embodiment)
FIG. 1 shows a first embodiment of a selective retransmission communication apparatus of the present invention. FIG. 2 shows a packet configuration of each part of the first embodiment.

図1において、選択再送型通信装置の送信装置10Aは、メディアデータのフレームをエンコーダ11に入力して圧縮し、圧縮フレームおよび重要度識別信号を出力する。ここで、例えばIピクチャのような重要度の高いデータに対する重要度識別信号は「1」、それ以外のデータに対する重要度識別信号は「0」とする。圧縮フレームはセッション層パケット組立部12に入力されて適当なサイズに分割され、符号化方式に固有のペイロードヘッダと、シーケンス番号、タイムスタンプ、その他からなるRTPヘッダを付加してRTPパケット(図2(1) 参照)が生成される。   In FIG. 1, a transmission apparatus 10A of a selective retransmission communication apparatus inputs a frame of media data to an encoder 11 and compresses it, and outputs a compressed frame and an importance level identification signal. Here, for example, the importance level identification signal for data with high importance such as an I picture is “1”, and the importance level identification signal for other data is “0”. The compressed frame is input to the session layer packet assembling unit 12 and divided into an appropriate size, and an RTP packet (FIG. 2) is added by adding a RTP header consisting of a payload header specific to the encoding method, a sequence number, a time stamp, and the like. (See (1)) is generated.

セッション層パケット組立部12から出力されたRTPパケットはトランスポート層パケット組立部14に入力され、宛先ポート番号、送信元ポート番号、その他からなるUDP(User Datagram Protocol) ヘッダを付加してUDPパケット(図2(2) 参照)が生成される。トランスポート層パケット組立部14から出力されたUDPパケットはネットワーク層パケット組立部15に入力され、宛先アドレス、送信元アドレス、その他からなるIP(Internet Protocol)ヘッダを付加してIPパケット(図2(3) 参照)が生成される。ネットワーク層パケット組立部15から出力されたIPパケットはデータリンク層パケット組立部16に入力され、宛先アドレス、送信元アドレス、エンコーダ11からの重要度識別信号、シーケンス番号、その他からなるMACヘッダを付加してMACパケット(図2(4) 参照)が生成される。データリンク層パケット組立部16から出力されたMACパケットは、物理層パケット送信部17で物理層ヘッダを付加して受信装置20Aに送信される。   The RTP packet output from the session layer packet assembling unit 12 is input into the transport layer packet assembling unit 14, and a UDP (User Datagram Protocol) header including a destination port number, a transmission source port number, and the like is added to the UDP packet ( FIG. 2 (2)) is generated. The UDP packet output from the transport layer packet assembling unit 14 is input into the network layer packet assembling unit 15, and an IP (Internet Protocol) header including a destination address, a source address, and the like is added to the IP packet (FIG. 2 ( 3) is generated. The IP packet output from the network layer packet assembling unit 15 is input to the data link layer packet assembling unit 16, and a MAC header including a destination address, a source address, an importance level identification signal from the encoder 11, a sequence number, and the like is added. Thus, a MAC packet (see FIG. 2 (4)) is generated. The MAC packet output from the data link layer packet assembling unit 16 is added to the physical layer packet transmitting unit 17 with a physical layer header and transmitted to the receiving device 20A.

選択再送型通信装置の受信装置20Aは、送信装置10Aから送信された信号を物理層パケット受信部21で受信し、物理層ヘッダを除去してMACパケットを取り出す。物理層パケット受信部21から出力されたMACパケットはデータリンク層パケット終端部22に入力され、MACヘッダを除去してIPパケットが取り出される。データリンク層パケット終端部22から出力されたIPパケットは、ネットワーク層パケット終端部23に入力され、IPヘッダを除去してUDPパケットが取り出される。ネットワーク層パケット終端部23から出力されたUDPパケットはトランスポート層パケット終端部24に入力され、UDPヘッダを除去してRTPパケットが取り出される。トランスポート層パケット終端部24から出力されたRTPパケットはセッション層パケット終端部26に入力され、RTPヘッダを除去して圧縮フレームが再構築される。セッション層パケット終端部26から出力された圧縮フレームはデコーダ27に入力され、元のメディアデータに復元される。   The receiving device 20A of the selective retransmission communication device receives the signal transmitted from the transmitting device 10A by the physical layer packet receiving unit 21, removes the physical layer header, and extracts the MAC packet. The MAC packet output from the physical layer packet receiving unit 21 is input to the data link layer packet terminating unit 22, and the IP header is extracted by removing the MAC header. The IP packet output from the data link layer packet termination unit 22 is input to the network layer packet termination unit 23, and the IP header is removed to extract the UDP packet. The UDP packet output from the network layer packet terminal unit 23 is input to the transport layer packet terminal unit 24, and the UDP header is removed to extract the RTP packet. The RTP packet output from the transport layer packet termination unit 24 is input to the session layer packet termination unit 26, and the RTP header is removed to reconstruct the compressed frame. The compressed frame output from the session layer packet termination unit 26 is input to the decoder 27 and restored to the original media data.

図3および図4は、第1の実施形態におけるパケット再送手順の例を示す。送信装置10Aでは、データリンク層パケット組立部16のバッファ内にこれから送信する複数のパケットを蓄積し、エンコーダ11から出力された重要度識別信号に基づいてそれらのパケットの重要度テーブルを作成する。受信装置20Aとの間でネゴシエーションを確立した後、バッファ内のパケット(図3,図4では8パケット)を連続して送信し、その後にブロックACK要求信号を送信する。   3 and 4 show an example of a packet retransmission procedure in the first embodiment. The transmitting apparatus 10A accumulates a plurality of packets to be transmitted in the buffer of the data link layer packet assembling unit 16, and creates an importance level table of these packets based on the importance level identification signal output from the encoder 11. After the negotiation is established with the receiving device 20A, packets in the buffer (8 packets in FIGS. 3 and 4) are continuously transmitted, and then a block ACK request signal is transmitted.

受信装置20Aのデータリンク層パケット終端部22は、正常に受信したパケットのリストをブロックACKとして送信装置10Aに返信する。送信装置10Aのデータリンク層パケット組立部16は、ブロックACKを受信して再送処理判断を行う。すなわち、重要度テーブルとブロックACK内のリストとを比較し、正常に受信されなかったパケットの重要度を確認する。あるいは、正常に受信されなかったパケットのヘッダに付加された重要度識別信号からその重要度を確認してもよい。   The data link layer packet termination unit 22 of the receiving device 20A returns a list of normally received packets as a block ACK to the transmitting device 10A. The data link layer packet assembling unit 16 of the transmitting apparatus 10A receives the block ACK and determines retransmission processing. That is, the importance level table is compared with the list in the block ACK, and the importance level of the packet that has not been normally received is confirmed. Or you may confirm the importance from the importance identification signal added to the header of the packet which was not received normally.

ここで、全パケットが正常に受信されていた場合は、転送完了通知を受信装置20Aに送信し、受信装置20AからACKが返信された後に、バッファ内のパケットを消去して次のパケット転送を開始する。   Here, when all the packets have been normally received, a transfer completion notification is transmitted to the receiving device 20A, and after the ACK is returned from the receiving device 20A, the packet in the buffer is deleted and the next packet transfer is performed. Start.

また、正常に受信されなかったパケットはあるものの重要度の高いパケットが含まれない場合、図3に示す例では正常に受信されなかったパケット2の重要度が低い場合には再送処理を行わず、転送完了通知を受信装置20Aに送信し、受信装置20AからACKが返信された後に、バッファ内のパケットを消去して次のパケット転送を開始する。   In addition, when there is a packet that has not been received normally but a packet with high importance is not included, in the example illustrated in FIG. 3, when the importance of packet 2 that has not been received normally is low, retransmission processing is not performed. Then, after a transfer completion notification is transmitted to the receiving device 20A and an ACK is returned from the receiving device 20A, the packet in the buffer is deleted and the next packet transfer is started.

また、正常に受信されなかったパケットがあり、かつ重要度の高いパケットが含まれている場合、図4に示す例では正常に受信されなかったパケット4の重要度が高い場合には再送処理を行う。送信装置10Aはパケット4を再送し、このパケット4に対するACKが受信装置20Aから返信された後に転送完了通知を送信し、受信装置20AからACKが返信された後に、バッファ内のパケットを消去して次のパケット転送を開始する。また、再送回数が予め規定した回数に達したら、次の再送を行わずに転送完了通知を送信し、受信装置20AからACKが返信された後に、バッファ内のパケットを消去して次のパケット転送を開始する。   In addition, when there is a packet that has not been normally received and a packet having high importance is included, in the example illustrated in FIG. 4, when the importance of the packet 4 that has not been normally received is high, retransmission processing is performed. Do. The transmitting apparatus 10A retransmits the packet 4, transmits a transfer completion notification after the ACK for the packet 4 is returned from the receiving apparatus 20A, and deletes the packet in the buffer after the ACK is returned from the receiving apparatus 20A. Start the next packet transfer. When the number of retransmissions reaches a predetermined number, a transfer completion notification is transmitted without performing the next retransmission, and after the ACK is returned from the receiving apparatus 20A, the packet in the buffer is deleted and the next packet transfer is performed. To start.

なお、本実施形態では重要度を「1」または「0」の2値としたが、重要度を多値(例えばIピクチャは「2」、Pピクチャは「1」、Bピクチャは「0」)にし、重要度ごとに異なる最大再送回数を設定するようにしてもよい。この重要度の多値化は以下に示す実施形態でも同様である。   In the present embodiment, the importance is binary, “1” or “0”, but the importance is multivalued (for example, “2” for I picture, “1” for P picture, “0” for B picture) ) And a different maximum number of retransmissions may be set for each importance. This multi-valued importance is the same in the embodiments described below.

(第2の実施形態)
図5は、本発明の選択再送型通信装置の第2の実施形態を示す。図6は、第2の実施形態の各部のパケット構成を示す。
(Second Embodiment)
FIG. 5 shows a second embodiment of the selective retransmission communication device of the present invention. FIG. 6 shows a packet configuration of each part of the second embodiment.

図5において、選択再送型通信装置の送信装置10Bは、メディアデータのフレームをエンコーダ11に入力して圧縮し、圧縮フレームおよび重要度識別信号を出力する。ここで、例えばIピクチャのような重要度の高いデータに対する重要度識別信号は「1」、それ以外のデータに対する重要度識別信号は「0」とする。圧縮フレームはセッション層パケット組立部12に入力されて適当なサイズに分割され、符号化方式に固有のペイロードヘッダと、シーケンス番号、タイムスタンプ、その他からなるRTPヘッダを付加してRTPパケット(図6(1) 参照)が生成される。   In FIG. 5, a transmission apparatus 10B of a selective retransmission communication apparatus inputs a frame of media data to an encoder 11 and compresses it, and outputs a compressed frame and an importance level identification signal. Here, for example, the importance level identification signal for data with high importance such as an I picture is “1”, and the importance level identification signal for other data is “0”. The compressed frame is input to the session layer packet assembling unit 12 and divided into an appropriate size, and an RTP packet (FIG. 6) is added with a payload header specific to the encoding method, an RTP header consisting of a sequence number, a time stamp, and the like. (See (1)) is generated.

セッション層パケット組立部12から出力されたRTPパケットはトランスポート層パケット組立部14に入力され、宛先ポート番号、送信元ポート番号、エンコーダ11からの重要度識別信号、シーケンス番号、その他からなるトランスポート層ヘッダ(以下「L4ヘッダ」という)を付加してトランスポート層パケット(以下「L4パケット」という、図6(2) 参照)が生成される。トランスポート層パケット組立部14から出力されたL4パケットはネットワーク層パケット組立部15に入力され、宛先アドレス、送信元アドレス、その他からなるIPヘッダを付加してIPパケット(図6(3) 参照)が生成される。ネットワーク層パケット組立部15から出力されたIPパケットは、適当な媒体によってIP網30(一般のLAN/WAN)を介して受信装置20Bに送信される。   The RTP packet output from the session layer packet assembling unit 12 is input into the transport layer packet assembling unit 14, and includes a destination port number, a transmission source port number, an importance level identification signal from the encoder 11, a sequence number, and the like. By adding a layer header (hereinafter referred to as “L4 header”), a transport layer packet (hereinafter referred to as “L4 packet”, see FIG. 6 (2)) is generated. The L4 packet output from the transport layer packet assembly unit 14 is input to the network layer packet assembly unit 15, and an IP packet is added with an IP header composed of a destination address, a source address, and others (see FIG. 6 (3)). Is generated. The IP packet output from the network layer packet assembly unit 15 is transmitted to the receiving device 20B via the IP network 30 (general LAN / WAN) by an appropriate medium.

選択再送型通信装置の受信装置20Bは、IP網30を介して送信装置10Bから送信されたIPパケットをネットワーク層パケット終端部23で受信し、IPヘッダを除去してL4パケットを取り出す。ネットワーク層パケット終端部23から出力されたL4パケットはトランスポート層パケット終端部24に入力され、L4ヘッダを除去してRTPパケットが取り出される。トランスポート層パケット終端部24から出力されたRTPパケットはセッション層パケット終端部26に入力され、RTPヘッダを除去して圧縮フレームが再構築される。セッション層パケット終端部26から出力された圧縮フレームはデコーダ27に入力され、元のメディアデータに復元される。   The receiving device 20B of the selective retransmission communication device receives the IP packet transmitted from the transmitting device 10B via the IP network 30 by the network layer packet terminal unit 23, removes the IP header, and extracts the L4 packet. The L4 packet output from the network layer packet termination unit 23 is input to the transport layer packet termination unit 24, and the L4 header is removed to extract the RTP packet. The RTP packet output from the transport layer packet termination unit 24 is input to the session layer packet termination unit 26, and the RTP header is removed to reconstruct the compressed frame. The compressed frame output from the session layer packet termination unit 26 is input to the decoder 27 and restored to the original media data.

図7および図8は、第2の実施形態におけるパケット再送手順の例を示す。送信装置10Bのトランスポート層パケット組立部14は、エンコーダ11から出力された重要度識別信号に基づいてパケットの重要度テーブルを作成し、ネットワーク層パケット組立部15でIPパケット化して送信する。   7 and 8 show an example of a packet retransmission procedure in the second embodiment. The transport layer packet assembly unit 14 of the transmission apparatus 10B creates a packet importance table based on the importance identification signal output from the encoder 11, and the network layer packet assembly unit 15 converts the packet into an IP packet and transmits it.

受信装置20Bのトランスポート層パケット終端部11は、受信したL4パケットのL4ヘッダ中のシーケンス番号を確認し、シーケンス番号が連続ならば正常に受信されていると判断し、何も応答しない。一方、シーケンス番号に跳びが生じたならばパケット欠落と判断し、送信装置10BにNACKを返信する。送信装置10Bのトランスポート層パケット組立部14は、NACKを受信して再送処理判断を行う。すなわち、重要度テーブルを参照してNACKで通知された欠落パケットの重要度を確認する。あるいは、欠落パケットのヘッダに付加された重要度識別信号からその重要度を確認してもよい。   The transport layer packet termination unit 11 of the receiving device 20B confirms the sequence number in the L4 header of the received L4 packet. If the sequence number is continuous, the transport layer packet termination unit 11 determines that it has been received normally and does not respond. On the other hand, if the sequence number jumps, it is determined that the packet is missing, and a NACK is returned to the transmitting apparatus 10B. The transport layer packet assembling unit 14 of the transmitting apparatus 10B receives NACK and makes a retransmission process determination. That is, the importance level of the lost packet notified by NACK is confirmed with reference to the importance level table. Alternatively, the importance level may be confirmed from the importance level identification signal added to the header of the missing packet.

ここで、全パケットが正常に受信されていた場合(シーケンス番号が連続している場合)は、受信装置20BはNACKを返信しないので、送信装置10Bは再送処理を行わない。   Here, when all the packets have been normally received (when the sequence numbers are consecutive), the receiving device 20B does not send back a NACK, and therefore the transmitting device 10B does not perform a retransmission process.

また、図7に示すように、パケット2が欠落してパケット3を受信すると、シーケンス番号に跳びが生じるので、受信装置20Bは送信装置10BにNACKを返信する。送信装置10BはNACKを受信すると、重要度テーブルを参照してNACKで通知された欠落パケット2の重要度を確認する。このパケット2の重要度は低いので再送処理を行わない。   Also, as shown in FIG. 7, when the packet 2 is lost and the packet 3 is received, the sequence number jumps, so the receiving device 20B returns a NACK to the transmitting device 10B. When receiving the NACK, the transmitting apparatus 10B refers to the importance table and confirms the importance of the missing packet 2 notified by NACK. Since the importance of the packet 2 is low, retransmission processing is not performed.

また、図8に示すように、パケット4が欠落してパケット5を受信すると、シーケンス番号に跳びが生じるので、受信装置20Bは送信装置10BにNACKを返信する。送信装置10BはNACKを受信すると、重要度テーブルを参照してNACKで通知された欠落パケット4の重要度を確認する。このパケット4の重要度は高いので再送処理を行う。   Also, as shown in FIG. 8, when the packet 4 is lost and the packet 5 is received, the sequence number jumps, so the receiving device 20B returns a NACK to the transmitting device 10B. When receiving the NACK, the transmitting apparatus 10B checks the importance of the missing packet 4 notified by NACK with reference to the importance table. Since the importance of this packet 4 is high, retransmission processing is performed.

なお、ここではシーケンス番号が跳ぶとすぐにNACKを返信するように説明したが、実際のネットワークでは転送されたパケットの順番が入れ替わることもありうるので、それを考慮した適当な保護時間を設け、保護時間内でシーケンス番号の跳びが発生していれば、欠落パケットがあることをNACKで通知するようにしてもよい。   Here, it has been described that NACK is returned as soon as the sequence number jumps. However, in an actual network, the order of the transferred packets may be changed, so an appropriate protection time is provided in consideration of this, If the sequence number jumps within the protection time, it may be notified by NACK that there is a missing packet.

(第3の実施形態)
図9は、本発明の選択再送型通信装置の第3の実施形態を示す。各部のパケット構成は図2に示す通りである。
(Third embodiment)
FIG. 9 shows a third embodiment of the selective retransmission communication device of the present invention. The packet configuration of each part is as shown in FIG.

本実施形態の特徴は、第1の実施形態の再送処理構成および手順において、前方誤り訂正(FEC:Forword Error Correction) アルゴリズム(例えば、非特許文献1の214 〜225 頁)を適用して欠落したパケットを修復するところにある。   The feature of this embodiment is missing by applying a forward error correction (FEC) algorithm (for example, pages 214 to 225 of Non-Patent Document 1) in the retransmission processing configuration and procedure of the first embodiment. The packet is being repaired.

図9において、送信装置10Cは、第1の実施形態の送信装置10Aにおけるセッション層パケット組立部12とトランスポート層パケット組立部14との間に、FECパケット生成部13を配置し、セッション層パケット組立部12から出力されたRTPパケットに対してFECパケットを生成する。セッション層パケット組立部12から出力されたRTPパケット、およびFECパケット生成部13から出力されたFECパケットは、トランスポート層パケット組立部14に入力され、宛先ポート番号、送信元ポート番号、その他からなるUDPヘッダを付加してUDPパケットになる。その他の構成および各部の処理内容は第1の実施形態と同様である。   In FIG. 9, the transmitting apparatus 10C arranges an FEC packet generating unit 13 between the session layer packet assembling unit 12 and the transport layer packet assembling unit 14 in the transmitting apparatus 10A of the first embodiment, and the session layer packet An FEC packet is generated for the RTP packet output from the assembling unit 12. The RTP packet output from the session layer packet assembling unit 12 and the FEC packet output from the FEC packet generating unit 13 are input into the transport layer packet assembling unit 14, and are composed of a destination port number, a transmission source port number, and others. A UDP header is added to form a UDP packet. Other configurations and processing contents of each unit are the same as those in the first embodiment.

受信装置20Cは、第1の実施形態の受信装置20Aにおけるトランスポート層パケット終端部24とセッション層パケット終端部26との間に誤り訂正部25を配置する。トランスポート層パケット終端部24は、UDPパケットからUDPヘッダを除去してRTPパケットおよびFECパケットを取り出す。RTPパケットに欠落がある場合、誤り訂正部25はFECパケットを用いて欠落したRTPパケットを修復する。RTPパケットはセッション層パケット終端部26に入力され、RTPヘッダを除去して圧縮フレームが再構築される。その他の構成および各部の処理内容は第1の実施形態と同様である。   The receiving device 20C arranges the error correction unit 25 between the transport layer packet termination unit 24 and the session layer packet termination unit 26 in the receiving device 20A of the first embodiment. The transport layer packet termination unit 24 removes the UDP header from the UDP packet and takes out the RTP packet and the FEC packet. When there is a missing RTP packet, the error correction unit 25 uses the FEC packet to repair the missing RTP packet. The RTP packet is input to the session layer packet termination unit 26, the RTP header is removed, and the compressed frame is reconstructed. Other configurations and processing contents of each unit are the same as those in the first embodiment.

図10〜図12は、第3の実施形態におけるパケット再送手順の例を示す。ここでは、RTPパケット8個に対してFECパケット1個を生成し、欠落パケット1個の修復が可能であると想定する。   10 to 12 show an example of a packet retransmission procedure in the third embodiment. Here, it is assumed that one FEC packet is generated for eight RTP packets and that one missing packet can be repaired.

送信装置10Cでは、データリンク層パケット組立部16のバッファ内にこれから送信する複数のパケットを蓄積し、エンコーダ11から出力された重要度識別信号に基づいてそれらのパケットの重要度テーブルを作成する。受信装置20Cとの間でネゴシエーションを確立した後、バッファ内のパケット(図10〜図12では9パケット)を連続して送信し、その後にブロックACK要求信号を送信する。   In the transmitting device 10C, a plurality of packets to be transmitted are accumulated in the buffer of the data link layer packet assembling unit 16, and an importance table of these packets is created based on the importance identification signal output from the encoder 11. After the negotiation is established with the receiving device 20C, packets in the buffer (9 packets in FIGS. 10 to 12) are continuously transmitted, and then a block ACK request signal is transmitted.

受信装置20Cのデータリンク層パケット終端部22は、正常に受信したパケットのリストをブロックACKとして送信装置10Cに返信する。送信装置10Cのデータリンク層パケット組立部16は、ブロックACKを受信して再送処理判断を行う。すなわち、重要度テーブルとブロックACK内のリストとを比較し、正常に受信されなかったパケットの重要度を確認する。あるいは、正常に受信されなかったパケットのヘッダに付加された重要度識別信号からその重要度を確認してもよい。   The data link layer packet termination unit 22 of the receiving device 20C returns a list of normally received packets as a block ACK to the transmitting device 10C. The data link layer packet assembling unit 16 of the transmitting apparatus 10C receives the block ACK and makes a retransmission process determination. That is, the importance level table is compared with the list in the block ACK, and the importance level of the packet that has not been normally received is confirmed. Or you may confirm the importance from the importance identification signal added to the header of the packet which was not received normally.

ここで、全パケットが正常に受信されていた場合は、転送完了通知を受信装置20Cに送信し、受信装置20CからACKが返信された後に、バッファ内のパケットを消去して次のパケット転送を開始する。   Here, when all the packets are normally received, a transfer completion notification is transmitted to the receiving device 20C, and after the ACK is returned from the receiving device 20C, the packet in the buffer is deleted and the next packet transfer is performed. Start.

また、欠落したパケットが1つでFECパケットによる修復が可能な場合、図10に示す例では欠落したパケット4の修復が行われる場合、受信装置20Cは送信装置10CからのブロックACK要求に対するブロックACKを返信し、送信装置10Cは全パケットが正常に受信されたことを確認する。そして、転送完了通知を受信装置20Cに送信し、受信装置20CからACKが返信された後に、バッファ内のパケットを消去して次のパケット転送を開始する。   Further, when one missing packet can be repaired by the FEC packet, and in the example illustrated in FIG. 10, when the missing packet 4 is repaired, the receiving device 20C performs block ACK in response to the block ACK request from the transmitting device 10C. The transmitting apparatus 10C confirms that all the packets have been received normally. Then, a transfer completion notification is transmitted to the receiving device 20C, and after the ACK is returned from the receiving device 20C, the packet in the buffer is deleted and the next packet transfer is started.

また、欠落したパケットが2つでFECパケットによる修復が不可能であり、かつ欠落したパケットに重要度の高いパケットが含まれていない場合、図11に示す例では欠落したパケット2,5の重要度がともに低い場合には再送処理を行わず、転送完了通知を受信装置20Aに送信し、受信装置20AからACKが返信された後に、バッファ内のパケットを消去して次のパケット転送を開始する。   In addition, when there are two missing packets that cannot be repaired by the FEC packet and the missing packet does not include a highly important packet, in the example shown in FIG. If both are low, retransmission processing is not performed and a transfer completion notification is transmitted to the receiving device 20A. After the ACK is returned from the receiving device 20A, the packet in the buffer is deleted and the next packet transfer is started. .

また、欠落したパケットが2つでFECパケットによる修復が不可能であり、かつ欠落したパケットに重要度の高いパケットが含まれている場合、図12に示す例では欠落したパケット2,4のうちパケット4の重要度が高い場合には、パケット4の再送処理を行う。送信装置10Cはパケット4を送信し、このパケット4に対するACKが受信装置20Cから返信された後に転送完了通知を送信し、受信装置20CからACKが返信された後に、バッファ内のパケットを消去して次のパケット転送を開始する。また、再送回数が予め規定した回数に達したら、次の再送を行わずに転送完了通知を送信し、受信装置20CからACKが返信された後に、バッファ内のパケットを消去して次のパケット転送を開始する。   In addition, in the example illustrated in FIG. 12, when there are two missing packets that cannot be repaired by the FEC packet and the missing packet includes a highly important packet, in the example illustrated in FIG. When the importance of the packet 4 is high, the packet 4 is retransmitted. The transmitting apparatus 10C transmits a packet 4, transmits a transfer completion notification after an ACK for the packet 4 is returned from the receiving apparatus 20C, and deletes the packet in the buffer after an ACK is returned from the receiving apparatus 20C. Start the next packet transfer. When the number of retransmissions reaches a predetermined number, a transfer completion notification is transmitted without performing the next retransmission, and after the ACK is returned from the receiving device 20C, the packet in the buffer is deleted and the next packet transfer is performed. To start.

(第4の実施形態)
図13は、本発明の選択再送型通信装置の第4の実施形態を示す。各部のパケット構成は図6に示す通りである。
(Fourth embodiment)
FIG. 13 shows a fourth embodiment of the selective retransmission communication device of the present invention. The packet configuration of each part is as shown in FIG.

本実施形態の特徴は、第2の実施形態の再送処理構成および手順において、FECアルゴリズム(例えば、非特許文献1の214 〜225 頁)を適用して欠落したパケットを修復するところにある。   The feature of this embodiment is that a lost packet is repaired by applying an FEC algorithm (for example, pages 214 to 225 of Non-Patent Document 1) in the retransmission processing configuration and procedure of the second embodiment.

図13において、送信装置10Dは、第2の実施形態の送信装置10Bにおけるセッション層パケット組立部12とトランスポート層パケット組立部14との間に、FECパケット生成部13を配置し、セッション層パケット組立部12から出力されたRTPパケットに対してFECパケットを生成する。セッション層パケット組立部12から出力されたRTPパケット、およびFECパケット生成部13から出力されたFECパケットは、トランスポート層パケット組立部14に入力され、宛先ポート番号、送信元ポート番号、エンコーダ11からの重要度識別信号、シーケンス番号、その他からなるL4ヘッダを付加してL4パケットになる。その他の構成および各部の処理内容は第2の実施形態と同様である。   In FIG. 13, the transmitting apparatus 10D arranges an FEC packet generating unit 13 between the session layer packet assembling unit 12 and the transport layer packet assembling unit 14 in the transmitting apparatus 10B of the second embodiment, and the session layer packet An FEC packet is generated for the RTP packet output from the assembling unit 12. The RTP packet output from the session layer packet assembling unit 12 and the FEC packet output from the FEC packet generating unit 13 are input into the transport layer packet assembling unit 14, and the destination port number, the source port number, and the encoder 11 An L4 header consisting of the importance level identification signal, sequence number, etc. is added to form an L4 packet. Other configurations and processing contents of each unit are the same as those in the second embodiment.

受信装置20Dは、第2の実施形態の受信装置20Bにおけるトランスポート層パケット終端部24とセッション層パケット終端部26との間に誤り訂正部25を配置する。トランスポート層パケット終端部24は、L4パケットからL4ヘッダを除去してRTPパケットおよびFECパケットを取り出す。RTPパケットに欠落がある場合、誤り訂正部25はFECパケットを用いて欠落したRTPパケットを修復する。RTPパケットはセッション層パケット終端部26に入力され、RTPヘッダを除去して圧縮フレームが再構築される。その他の構成および各部の処理内容は第2の実施形態と同様である。   The receiving device 20D arranges an error correction unit 25 between the transport layer packet termination unit 24 and the session layer packet termination unit 26 in the receiving device 20B of the second embodiment. The transport layer packet termination unit 24 removes the L4 header from the L4 packet and extracts the RTP packet and the FEC packet. When there is a missing RTP packet, the error correction unit 25 uses the FEC packet to repair the missing RTP packet. The RTP packet is input to the session layer packet termination unit 26, the RTP header is removed, and the compressed frame is reconstructed. Other configurations and processing contents of each unit are the same as those in the second embodiment.

図14〜図16は、第4の実施形態におけるパケット再送手順の例を示す。ここでは、RTPパケット8個に対してFECパケット1個を生成し、欠落パケット1個の修復が可能であると想定する。   14 to 16 show examples of packet retransmission procedures in the fourth embodiment. Here, it is assumed that one FEC packet is generated for eight RTP packets and that one missing packet can be repaired.

送信装置10Dのトランスポート層パケット組立部14は、エンコーダ11から出力された重要度識別信号に基づいてパケットの重要度テーブルを作成し、ネットワーク層パケット組立部15でIPパケット化して送信する。   The transport layer packet assembly unit 14 of the transmission device 10D creates a packet importance table based on the importance identification signal output from the encoder 11, and the network layer packet assembly unit 15 converts the packet into an IP packet and transmits it.

受信装置20Dのトランスポート層パケット終端部11は、受信したL4パケットのL4ヘッダ中のシーケンス番号を確認し、シーケンス番号が連続ならば正常に受信されていると判断し、何も応答しない。一方、シーケンス番号に跳びが生じたならばパケット欠落と判断し、送信装置10DにNACKを返信する。送信装置10Dのトランスポート層パケット組立部14は、NACKを受信して再送処理判断を行う。すなわち、重要度テーブルを参照してNACKで通知された欠落パケットの重要度を確認する。あるいは、正常に受信されなかったパケットのヘッダに付加された重要度識別信号からその重要度を確認してもよい。   The transport layer packet termination unit 11 of the reception device 20D confirms the sequence number in the L4 header of the received L4 packet. If the sequence number is continuous, the transport layer packet termination unit 11 determines that it has been received normally and does not respond. On the other hand, if a jump occurs in the sequence number, it is determined that the packet is missing, and a NACK is returned to the transmitter 10D. The transport layer packet assembly unit 14 of the transmission device 10D receives NACK and makes a retransmission process determination. That is, the importance level of the lost packet notified by NACK is confirmed with reference to the importance level table. Or you may confirm the importance from the importance identification signal added to the header of the packet which was not received normally.

ここで、全パケットが正常に受信されていた場合(シーケンス番号が連続している場合)は、受信装置20DはNACKを返信しないので、送信装置10Dは再送処理を行わない。   Here, when all the packets have been normally received (when the sequence numbers are consecutive), the receiving device 20D does not send back a NACK, and therefore the transmitting device 10D does not perform a retransmission process.

また、図14に示すように、パケット4が欠落してパケット5を受信すると、シーケンス番号に跳びが生じるので、受信装置20Dは送信装置10DにNACKを返信する。送信装置10DはNACKを受信するが、他に欠落したパケットがないのでFECパケットによる修復が可能であると判断し、再送処理は行わない。   As shown in FIG. 14, when the packet 4 is lost and the packet 5 is received, the sequence number jumps, so the receiving device 20D returns a NACK to the transmitting device 10D. The transmitting apparatus 10D receives the NACK, but determines that it can be repaired by the FEC packet because there is no other missing packet, and does not perform the retransmission process.

また、図15に示すように、パケット2が欠落してパケット3を受信すると、シーケンス番号に跳びが生じるので、受信装置20Dは送信装置10DにNACKを返信する。さらに、パケット5が欠落してパケット6を受信すると、シーケンス番号に跳びが生じるので、受信装置20Dは送信装置10DにNACKを返信する。送信装置10Dは2つのNACKを受信することにより、FECパケットによる修復は不可能と判断し、重要度テーブルを参照してNACKで通知された欠落パケット2,5の重要度を確認する。このパケット2,5の重要度はともに低いので、再送処理は行わない。   Also, as shown in FIG. 15, when packet 2 is lost and packet 3 is received, the sequence number jumps, so that receiving device 20D returns NACK to transmitting device 10D. Further, when the packet 5 is lost and the packet 6 is received, the sequence number jumps, so that the receiving device 20D returns a NACK to the transmitting device 10D. The transmitting apparatus 10D determines that the repair by the FEC packet is impossible by receiving two NACKs, and confirms the importance of the missing packets 2 and 5 notified by the NACK with reference to the importance table. Since the importance levels of these packets 2 and 5 are both low, retransmission processing is not performed.

また、図16に示すように、パケット2が欠落してパケット3を受信すると、シーケンス番号に跳びが生じるので、受信装置20Dは送信装置10DにNACKを返信する。さらに、パケット4が欠落してパケット5を受信すると、シーケンス番号に跳びが生じるので、受信装置20Dは送信装置10DにNACKを返信する。送信装置10Dは2つのNACKを受信することにより、FECパケットによる修復は不可能と判断し、重要度テーブルを参照してNACKで通知された欠落パケット2,4の重要度を確認する。このパケット2,4のうちパケット4の重要度が高いので、パケット4の再送処理を行う。   As shown in FIG. 16, when the packet 2 is lost and the packet 3 is received, the sequence number jumps, so the receiving device 20D returns a NACK to the transmitting device 10D. Further, when the packet 4 is lost and the packet 5 is received, the sequence number jumps, so that the receiving device 20D returns a NACK to the transmitting device 10D. The transmitting apparatus 10D determines that the repair by the FEC packet is impossible by receiving the two NACKs, and confirms the importance of the missing packets 2 and 4 notified by the NACK with reference to the importance table. Of these packets 2 and 4, packet 4 is of high importance, so that packet 4 is retransmitted.

なお、ここではシーケンス番号が跳ぶとすぐにNACKを返信するように説明したが、実際のネットワークでは転送されたパケットの順番が入れ替わることもありうるので、それを考慮した適当な保護時間を設け、保護時間内でシーケンス番号の跳びが発生していれば、欠落パケットがあることをNACKで通知するようにしてもよい。   Here, it has been described that NACK is returned as soon as the sequence number jumps. However, in an actual network, the order of the transferred packets may be changed, so an appropriate protection time is provided in consideration of this, If the sequence number jumps within the protection time, it may be notified by NACK that there is a missing packet.

また、以上説明した第1の実施形態および第3の実施形態では、複数のパケットを連続して送信し、ブロックACKによって通知される正常に受信したパケットのリストを用い、送信側で欠落したパケットを認識する構成であった。これに対して、送信側から送信リストを含むブロックNACK要求を行い、受信側から欠落したパケットのリストを含むブロックNACKを送信し、送信側でそのブロックNACKから欠落したパケットを認識する構成としてもよい。   Further, in the first embodiment and the third embodiment described above, a plurality of packets are transmitted continuously, and a packet received on the transmission side using a list of normally received packets notified by block ACK is used. It was the structure which recognizes. On the other hand, the block NACK request including the transmission list is made from the transmission side, the block NACK including the list of the missing packets is transmitted from the reception side, and the packet missing from the block NACK is recognized on the transmission side. Good.

また、以上説明した第2の実施形態および第4の実施形態では、受信側でパケットの欠落を検出したときにNACKを送信し、送信側でそのNACKを受信して再送処理判断を行う構成であった。これに対して、受信側でパケットを正常に受信したときにACKを送信し、送信側で送信したパケットに対するACKを所定の時間内に受信しないときに、再送処理判断を行う構成としてもよい。   In the second and fourth embodiments described above, a NACK is transmitted when a packet loss is detected on the receiving side, and a retransmission process is determined by receiving the NACK on the transmitting side. there were. On the other hand, a configuration may be adopted in which ACK is transmitted when a packet is normally received on the receiving side, and retransmission processing is determined when ACK for the packet transmitted on the transmitting side is not received within a predetermined time.

また、以上説明した第1の実施形態〜第4の実施形態では、送信側において、送信するパケットのヘッダに重要度識別信号を付加する構成であった。これにより、再送が必要になったパケットのヘッダに付加された重要度識別信号から重要度を確認し、再送の要否を判断することができる。さらに、例えばパケットの中継手段があるときに、当該中継手段で各パケットの重要度識別信号を認識し、選択的な再送処理に利用することができる。一方、送信側で送信するパケットと重要度識別信号の対応関係を有する前記重要度テーブルのようなものがあれば、重要度に応じた選択的な再送処理が可能である場合には、パケットに重要度識別信号を付加せずに送信することも可能である。   In the first to fourth embodiments described above, the importance level identification signal is added to the header of the packet to be transmitted on the transmission side. As a result, the importance level can be confirmed from the importance level identification signal added to the header of the packet that needs to be retransmitted, and it can be determined whether or not retransmission is necessary. Furthermore, for example, when there is a packet relay unit, the relay unit can recognize the importance level identification signal of each packet and use it for selective retransmission processing. On the other hand, if there is something like the importance table having a correspondence relationship between a packet to be transmitted on the transmission side and the importance identification signal, if selective retransmission processing according to the importance is possible, It is also possible to transmit without adding the importance level identification signal.

本発明の選択再送型通信装置の第1の実施形態を示す図。The figure which shows 1st Embodiment of the selective resending type | mold communication apparatus of this invention. 第1の実施形態の各部のパケット構成を示す図。The figure which shows the packet structure of each part of 1st Embodiment. 第1の実施形態におけるパケット再送手順を示す図。The figure which shows the packet resending procedure in 1st Embodiment. 第1の実施形態におけるパケット再送手順を示す図。The figure which shows the packet resending procedure in 1st Embodiment. 本発明の選択再送型通信装置の第2の実施形態を示す図。The figure which shows 2nd Embodiment of the selective resending type | mold communication apparatus of this invention. 第2の実施形態の各部のパケット構成を示す図。The figure which shows the packet structure of each part of 2nd Embodiment. 第2の実施形態におけるパケット再送手順を示す図。The figure which shows the packet resending procedure in 2nd Embodiment. 第2の実施形態におけるパケット再送手順を示す図。The figure which shows the packet resending procedure in 2nd Embodiment. 本発明の選択再送型通信装置の第3の実施形態を示す図。The figure which shows 3rd Embodiment of the selective resending type | mold communication apparatus of this invention. 第3の実施形態におけるパケット再送手順を示す図。The figure which shows the packet resending procedure in 3rd Embodiment. 第3の実施形態におけるパケット再送手順を示す図。The figure which shows the packet resending procedure in 3rd Embodiment. 第3の実施形態におけるパケット再送手順を示す図。The figure which shows the packet resending procedure in 3rd Embodiment. 本発明の選択再送型通信装置の第4の実施形態を示す図。The figure which shows 4th Embodiment of the selective resending type | mold communication apparatus of this invention. 第4の実施形態におけるパケット再送手順を示す図。The figure which shows the packet resending procedure in 4th Embodiment. 第4の実施形態におけるパケット再送手順を示す図。The figure which shows the packet resending procedure in 4th Embodiment. 第4の実施形態におけるパケット再送手順を示す図。The figure which shows the packet resending procedure in 4th Embodiment.

符号の説明Explanation of symbols

10A,10B,10C,10D 送信装置
11 エンコーダ
12 セッション層パケット組立部
13 FECパケット生成部
14 トランスポート層パケット組立部
15 ネットワーク層パケット組立部
16 データリンク層パケット組立部
17 物理層パケット送信部
20A,20B,20C,20D 受信装置
21 物理層パケット受信部
22 データリンク層パケット終端部
23 ネットワーク層パケット終端部
24 トランスポート層パケット終端部
25 誤り訂正部
26 セッション層パケット終端部
27 デコーダ
30 IP網
10A, 10B, 10C, 10D Transmitter 11 Encoder 12 Session layer packet assembly unit 13 FEC packet generation unit 14 Transport layer packet assembly unit 15 Network layer packet assembly unit 16 Data link layer packet assembly unit 17 Physical layer packet transmission unit 20A, 20B, 20C, 20D Receiver 21 Physical layer packet receiver 22 Data link layer packet termination unit 23 Network layer packet termination unit 24 Transport layer packet termination unit 25 Error correction unit 26 Session layer packet termination unit 27 Decoder 30 IP network

Claims (8)

メディアデータを圧縮して出力するとともに、圧縮されたデータの重要度を示す重要度識別信号を出力する圧縮手段と、前記圧縮されたデータに前記重要度識別信号を付加したパケットを生成して送信するパケット送信手段とを備えた送信装置と、
前記送信装置から送信されたパケットを受信し、正常に受信されなかったパケットを示す応答信号を送信するパケット終端手段と、正常に受信されたパケットから前記圧縮されたデータを復元する復元手段とを備えた受信装置とを有し、
前記送信装置は、前記受信装置から送信された応答信号により正常に受信されなかったパケットを認識し、当該パケットに付加された重要度識別信号に基づいて重要度が高いパケットの再送処理を行う構成である
ことを特徴とする選択再送型通信装置。
Compressing and outputting the media data, and outputting the importance level identification signal indicating the importance level of the compressed data, and generating and transmitting a packet in which the importance level identification signal is added to the compressed data A transmission device comprising a packet transmission means for performing,
A packet terminating unit that receives a packet transmitted from the transmitting device and transmits a response signal indicating a packet that has not been normally received; and a restoring unit that restores the compressed data from the normally received packet. A receiving device with
The transmission device recognizes a packet that has not been normally received by a response signal transmitted from the reception device, and performs retransmission processing of a packet with high importance based on the importance identification signal added to the packet A selective retransmission type communication apparatus, characterized in that
請求項1に記載の選択再送型通信装置において、
前記パケット送信手段は、前記重要度識別信号をデータリンク層のパケットのヘッダに付加する構成である
ことを特徴とする選択再送型通信装置。
In the selective retransmission type communication device according to claim 1,
The selective retransmission type communication apparatus, wherein the packet transmission means is configured to add the importance level identification signal to a header of a packet of a data link layer.
請求項1に記載の選択再送型通信装置において、
前記パケット送信手段は、前記重要度識別信号をトランスポート層のパケットのヘッダに付加する構成である
ことを特徴とする選択再送型通信装置。
In the selective retransmission type communication device according to claim 1,
The selective retransmission type communication apparatus, wherein the packet transmission unit is configured to add the importance level identification signal to a header of a packet in a transport layer.
メディアデータを圧縮して出力するとともに、圧縮されたデータの重要度を示す重要度識別信号を出力する圧縮手段と、前記圧縮されたデータからパケットを生成して送信するパケット送信手段とを備えた送信装置と、
前記送信装置から送信されたパケットを受信し、正常に受信されなかったパケットを示す応答信号を送信するパケット終端手段と、正常に受信されたパケットから前記圧縮されたデータを復元する復元手段とを備えた受信装置とを有し、
前記送信装置は、送信したパケットと前記重要度識別信号の対応関係を保持し、前記受信装置から送信された応答信号により正常に受信されなかったパケットを認識し、当該パケットの重要度を前記対応関係に基づいて判別し、重要度が高いパケットの再送処理を行う構成である
ことを特徴とする選択再送型通信装置。
Compressing means for compressing and outputting media data and outputting an importance level identifying signal indicating the importance level of the compressed data; and packet transmitting means for generating and transmitting a packet from the compressed data A transmitting device;
A packet terminating unit that receives a packet transmitted from the transmitting device and transmits a response signal indicating a packet that has not been normally received; and a restoring unit that restores the compressed data from the normally received packet. A receiving device with
The transmission device holds a correspondence relationship between the transmitted packet and the importance level identification signal, recognizes a packet that was not normally received by a response signal transmitted from the reception device, and sets the importance level of the packet to the correspondence A selective retransmission type communication device, characterized in that it is configured to perform retransmission processing of packets with high importance determined based on a relationship.
メディアデータを圧縮して出力するとともに、圧縮されたデータの重要度を示す重要度識別信号を出力する圧縮手段と、前記圧縮されたデータに前記重要度識別信号を付加したパケットを生成して送信するパケット送信手段と、受信側で正常に受信されなかったパケットの修復を行うための誤り訂正用パケットを送信する誤り訂正用パケット送信手段とを備えた送信装置と、
前記送信装置から送信されたパケットを受信し、正常に受信されなかったパケットを示す応答信号を送信するパケット終端手段と、前記誤り訂正用パケットを用いて正常に受信されなかったパケットを修復する誤り訂正手段と、正常に受信されたパケットから前記圧縮されたデータを復元する復元手段とを備えた受信装置とを有し、
前記送信装置は、前記受信装置から送信された応答信号により正常に受信されなかったパケットを認識し、当該パケットについて前記誤り訂正用パケットによる修復能力を超えて修復が不可能と判断され、かつ当該パケットに付加された重要度識別信号に基づいて重要度が高いパケットの再送処理を行う構成である
ことを特徴とする選択再送型通信装置。
Compressing and outputting the media data, and outputting the importance level identification signal indicating the importance level of the compressed data, and generating and transmitting a packet in which the importance level identification signal is added to the compressed data A transmission apparatus comprising: a packet transmission means for performing error correction packet transmission means for transmitting an error correction packet for repairing a packet that has not been normally received on the reception side;
Packet terminating means for receiving a packet transmitted from the transmitting device and transmitting a response signal indicating a packet that has not been normally received, and an error for repairing a packet that has not been normally received using the error correction packet A receiving device comprising a correcting means and a restoring means for restoring the compressed data from a normally received packet;
The transmitter recognizes a packet that has not been normally received by the response signal transmitted from the receiver, and determines that the packet cannot be repaired beyond the repair capability of the error correction packet; and A selective retransmission type communication apparatus, characterized in that it is configured to perform retransmission processing of a packet having high importance based on an importance identification signal added to the packet.
請求項5に記載の選択再送型通信装置において、
前記パケット送信手段は、前記重要度識別信号をデータリンク層のパケットのヘッダに付加する構成である
ことを特徴とする選択再送型通信装置。
In the selective retransmission type communication device according to claim 5,
The selective retransmission type communication apparatus, wherein the packet transmission means is configured to add the importance level identification signal to a header of a packet of a data link layer.
請求項5に記載の選択再送型通信装置において、
前記パケット送信手段は、前記重要度識別信号をトランスポート層のパケットのヘッダに付加する構成である
ことを特徴とする選択再送型通信装置。
In the selective retransmission type communication device according to claim 5,
The selective retransmission type communication apparatus, wherein the packet transmission unit is configured to add the importance level identification signal to a header of a packet in a transport layer.
メディアデータを圧縮して出力するとともに、圧縮されたデータの重要度を示す重要度識別信号を出力する圧縮手段と、前記圧縮されたデータからパケットを生成して送信するパケット送信手段と、受信側で正常に受信されなかったパケットの修復を行うための誤り訂正用パケットを送信する誤り訂正用パケット送信手段とを備えた送信装置と、
前記送信装置から送信されたパケットを受信し、正常に受信されなかったパケットを示す応答信号を送信するパケット終端手段と、前記誤り訂正用パケットを用いて正常に受信されなかったパケットを修復する誤り訂正手段と、正常に受信されたパケットから前記圧縮されたデータを復元する復元手段とを備えた受信装置とを有し、
前記送信装置は、送信したパケットと前記重要度識別信号の対応関係を保持し、前記受信装置から送信された応答信号により正常に受信されなかったパケットを認識し、当該パケットについて前記誤り訂正用パケットによる修復能力を超えて修復が不可能と判断され、かつ当該パケットの重要度を前記対応関係に基づいて判別し、重要度が高いパケットの再送処理を行う構成である
ことを特徴とする選択再送型通信装置。
Compression means for compressing and outputting media data and outputting an importance level identifying signal indicating the importance level of the compressed data, a packet transmission means for generating and transmitting a packet from the compressed data, and a receiving side A transmission device comprising: an error correction packet transmission means for transmitting an error correction packet for repairing a packet that was not normally received in
Packet terminating means for receiving a packet transmitted from the transmitting device and transmitting a response signal indicating a packet that has not been normally received, and an error for repairing a packet that has not been normally received using the error correction packet A receiving device comprising a correcting means and a restoring means for restoring the compressed data from a normally received packet;
The transmission device holds a correspondence relationship between the transmitted packet and the importance level identification signal, recognizes a packet that is not normally received by a response signal transmitted from the reception device, and the error correction packet for the packet. The selective retransmission is characterized in that it is determined that repair cannot be performed beyond the repair capability of, and the importance level of the packet is determined based on the correspondence relationship, and retransmission processing of a highly important packet is performed. Type communication device.
JP2005126023A 2005-04-25 2005-04-25 Selective retransmission type communication device Withdrawn JP2006304138A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005126023A JP2006304138A (en) 2005-04-25 2005-04-25 Selective retransmission type communication device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005126023A JP2006304138A (en) 2005-04-25 2005-04-25 Selective retransmission type communication device

Publications (1)

Publication Number Publication Date
JP2006304138A true JP2006304138A (en) 2006-11-02

Family

ID=37471865

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005126023A Withdrawn JP2006304138A (en) 2005-04-25 2005-04-25 Selective retransmission type communication device

Country Status (1)

Country Link
JP (1) JP2006304138A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008312125A (en) * 2007-06-18 2008-12-25 Canon Inc Video receiving apparatus and control method of same
JP2009290567A (en) * 2008-05-29 2009-12-10 Canon Inc Data transmission device and data reception device
JP2010028378A (en) * 2008-07-17 2010-02-04 Canon Inc Communication apparatus and communication method
JP2010166347A (en) * 2009-01-16 2010-07-29 Meidensha Corp Communication system, communication method and communication program
WO2017056490A1 (en) * 2015-09-30 2017-04-06 パナソニックIpマネジメント株式会社 Work management system and management device

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008312125A (en) * 2007-06-18 2008-12-25 Canon Inc Video receiving apparatus and control method of same
JP2009290567A (en) * 2008-05-29 2009-12-10 Canon Inc Data transmission device and data reception device
US8316268B2 (en) 2008-05-29 2012-11-20 Canon Kabushiki Kaisha Data transmission apparatus controlling data retransmission and data transmission method controlling data retransmission
JP2010028378A (en) * 2008-07-17 2010-02-04 Canon Inc Communication apparatus and communication method
JP2010166347A (en) * 2009-01-16 2010-07-29 Meidensha Corp Communication system, communication method and communication program
WO2017056490A1 (en) * 2015-09-30 2017-04-06 パナソニックIpマネジメント株式会社 Work management system and management device
JP2017064858A (en) * 2015-09-30 2017-04-06 パナソニックIpマネジメント株式会社 Work management system and management apparatus

Similar Documents

Publication Publication Date Title
JP4002183B2 (en) Method for multimedia communication over a packet channel
KR101571145B1 (en) Method and apparatus for adaptive forward error correction with merged automatic repeat request for reliable multicast in wireless local area networks
KR100612003B1 (en) Apparatus for transmitting/receiving bitstream in network and method thereof
EP2437421B1 (en) Method, device and communication system for retransmitting based on forward error correction
US20050013249A1 (en) Redundant packets for streaming video protection
JP2006166489A (en) Scan format conversion apparatus and method
CN101193312B (en) Self-adapted error recovery device, video communication system and method based on feedback
CN101155311A (en) Video code stream error detecting and processing method in video communication
JP2020502832A (en) Forward error correction for data streaming
US11190455B2 (en) Decoding of a media stream at a packet receiver
JP2006304138A (en) Selective retransmission type communication device
JP3426144B2 (en) Multimedia communication equipment
KR20060095755A (en) Media packet structure for real time transmission via packet switched networks
CN113315823A (en) Low-delay audio and video transmission method
Choi et al. Cross-layer error-control with low-overhead ARQ for H. 264 video transmission over wireless LANs
KR100720592B1 (en) Method for Restoration Transport Error of Intra Frame
CN108769000B (en) High-efficiency streaming media transmission method for deep space environment
JP3730977B2 (en) Data transmission method and data processing method
JP2005136547A (en) Communication system, receiving apparatus and method, transmission apparatus and method, recording medium, and program
JP2006319463A (en) Packet transmitting method and packet receiving device
KR101745646B1 (en) System and method for retransmitting packet in wireless lan, access point therefor
CN105356975A (en) Data transmission method
JPH0799662A (en) Dynamic image signal transmission method
KR101725345B1 (en) System and method for retransmitting packet mixing unicasting and broadcasting/multicasting in wireless lan
JP2002314583A (en) Relay method and gateway

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20080701