JP2004193992A - Information processing system, information processor, information processing method, recording medium and program - Google Patents

Information processing system, information processor, information processing method, recording medium and program Download PDF

Info

Publication number
JP2004193992A
JP2004193992A JP2002359736A JP2002359736A JP2004193992A JP 2004193992 A JP2004193992 A JP 2004193992A JP 2002359736 A JP2002359736 A JP 2002359736A JP 2002359736 A JP2002359736 A JP 2002359736A JP 2004193992 A JP2004193992 A JP 2004193992A
Authority
JP
Japan
Prior art keywords
packet
information processing
number
processing apparatus
step
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Abandoned
Application number
JP2002359736A
Other languages
Japanese (ja)
Inventor
Hiroshi Kusogami
Kenji Yamane
宏 久曽神
健治 山根
Original Assignee
Sony Corp
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, ソニー株式会社 filed Critical Sony Corp
Priority to JP2002359736A priority Critical patent/JP2004193992A/en
Publication of JP2004193992A publication Critical patent/JP2004193992A/en
Application status is Abandoned legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide an information processing system in which an error can be corrected and an idle capacity of a band of a network can be predicted by using an idle region of the band of the network which efficiently transmits/receives information through the network and to provide an information processor, an information processing method, a recording medium and a program. <P>SOLUTION: A picture transmission device 11 packetizes a plurality of layers of hierarchy encoding data and transmits a packet to a picture reception device 12 in a layer unit. The picture reception device 12 transmits a confirmation response including a transmission time of the packet and ID of the lost packet to the picture transmission device 11. The picture transmission device 11 calculates an optimum transmission rate in accordance with the confirmation response from the picture reception device 12, sets the number of transmission packets based on the transmission rate and sets the layer to be transmitted so that the number of the transmission packets becomes not larger than that which is set. The packets which are wastefully transmitted can be eliminated and communication is made efficient. The invention can be applied to an electronic apparatus connected to the network. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【0001】 [0001]
【発明の属する技術分野】 BACKGROUND OF THE INVENTION
本発明は、情報処理システム、情報処理装置および方法、記録媒体、並びにプログラムに関し、特に、より効率的に情報を送受信できるようにした情報処理システム、情報処理装置および方法、記録媒体、並びにプログラムに関する。 The present invention relates to an information processing system, information processing apparatus and method, recording medium, and a program, more efficient information processing system capable of transmitting and receiving information, an information processing apparatus and method, recording medium, and a program .
【0002】 [0002]
【従来の技術】 BACKGROUND OF THE INVENTION
データの送信レートの制御は、単位時間あたりの送信データ量を決定するものである。 Control of the transmission rate of the data is to determine a transmission data amount per unit time. パケット通信網であるインターネット上では、仮にパケットサイズ(1パケットあたりのデータ量)が一定である場合、単位時間あたりに送信するパケットの個数を制御することにより、送信レートを制御することができる。 The Internet is a packet communication network, if when the packet size (amount of data per packet) is constant, by controlling the number of packets to be transmitted per unit time, it is possible to control the transmission rate.
【0003】 [0003]
単位時間あたりに送信するパケットの個数を制御することにより、送信レートを制御する例として、RFC(Request For Comments)2001に規定されているスライディングウィンドウアルゴリズムがある。 By controlling the number of packets to be transmitted per unit time, as an example for controlling a rate, there is a sliding window algorithm defined in RFC (Request For Comments) 2001. このスライディングウィンドウアルゴリズムについて、図1を参照して説明する。 This sliding window algorithm will be described with reference to FIG.
【0004】 [0004]
図1において、縦軸は、ウィンドウサイズを表している。 In Figure 1, the vertical axis represents the window size. スライディングウィンドウアルゴリズムにおいては、送信端末装置は「ウィンドウ」に入っている個数だけ、パケットを送信することができる。 In sliding window algorithm, the transmission terminal can transmit only packets the number contained in "window". ウィンドウは、そのサイズが可変であり、図1のグラフの縦軸は、このウィンドウのサイズを表している。 Window, its size is variable, the vertical axis of the graph in Figure 1 represent the size of this window. 図1において、横軸は時間軸である。 1, the horizontal axis is a time axis.
【0005】 [0005]
図1の時刻t0において、送信端末装置は、まず、ウィンドウサイズを、パケット1個分の大きさに設定し、パケット1個を、受信端末装置に送信する。 At time t0 in FIG. 1, the transmitting terminal device, first, the window size is set to the size equivalent to one packet, one packet is transmitted to the receiving terminal apparatus. 送信端末装置は、受信端末装置からパケット受信の確認応答を受信すると、次に、ウィンドウサイズをパケット2個分に設定し、パケット2個を、受信端末装置に送信する。 Transmitting terminal device receives an acknowledgment packet received from the receiving terminal apparatus, then set the window size to two pieces of packet, two packets, to the receiving terminal apparatus. このようにして、送信端末装置は、受信端末装置からパケット受信の確認応答を受信する度に、ウィンドウの大きさを大きくし、送信可能なパケット数を1個ずつ増やしてゆく。 In this way, the transmitting terminal device, receiving from the terminal device each time it receives an acknowledgment of the packet reception, to increase the size of the window, Yuku increase the number of transmittable packets one by one. 送信端末装置は、このようにして、徐々に、単位時間あたりに送信するパケット数を増加させる。 Transmitting terminal device, in this way, gradually increasing the number of packets to be transmitted per unit time.
【0006】 [0006]
ここで、時刻t1において、送信端末装置から送信されたパケットの少なくとも一部が、受信端末装置により受信されなかった(パケットロスが発生した)旨の確認応答が、受信端末装置から通知されたとする。 Here, at time t1, at least a portion of the packet transmitted from the transmitting terminal, the receiving terminal has not been received by the device (packet loss occurs) effect of acknowledgment, and notified from the receiving terminal device . この時(t1)、送信端末装置は、ウィンドウの大きさを1/2に縮小し、送信可能なパケット数を半分に減少させる(図1においては、19個から9個に減少させている。なお、端数は切り捨て)。 When this (t1), the transmitting terminal apparatus, reduces the size of the window to 1/2, to reduce by half the number of transmittable packets (in FIG. 1 is reduced from 19 to 9. It should be noted that the fraction is truncated). それ以降、送信端末装置は、ウィンドウ内のパケット全てに対して受信端末装置より確認応答を受信した場合、ウィンドウの大きさを大きくし、送信可能なパケットの個数を1個ずつ増やしてゆく。 Since then, the transmitting terminal device, when receiving an acknowledgment from the receiving terminal device for every packet in the window, Yuku increase by increasing the size of the window, one by one the number of transmittable packets.
【0007】 [0007]
そして、時刻t2において、再度、パケットロスが発生した場合、送信端末装置は、上記と同様に、ウィンドウの大きさを1/2に縮小し、送信可能なパケット数を半分に減少させる。 Then, at time t2, again, if a packet loss occurs, the transmitting terminal device, like the above, to reduce the size of the window to 1/2, to reduce by half the number of transmittable packets. その後、また、送信端末装置は、ウィンドウ内のパケット全てに対して受信端末装置より確認応答を受信した場合、ウィンドウの大きさを大きくし、送信可能なパケットの個数を1個ずつ増やしてゆく。 Then, also, the transmitting terminal device, when receiving an acknowledgment from the receiving terminal device for every packet in the window, Yuku increase by increasing the size of the window, one by one the number of transmittable packets. 以降、時刻t3においても、時刻t1および時刻t2の場合と同様に処理する。 Subsequently, at time t3, processing similar to the case at time t1 and time t2.
【0008】 [0008]
スライディングウィンドウアルゴリズムにおいては、以上のようにして、最適なデータの送信レートを割り出している。 In sliding window algorithm, as described above, it is indexed to the transmission rate of the optimum data.
【0009】 [0009]
以上のように、ネットワークの状態に応じて、最適なデータの送信レートを迅速に決定するために、送信レートの増加時には、送信パケット数を加算してゆき(上記の例の場合、1個ずつ加算してゆき)、送信レートの減少時には、送信パケット数を、1未満の値(上記の例の場合、1/2)で乗算するAIMD(Additive Increase Multiple Decrease)アルゴリズムが、一般的に知られている(例えば、非特許文献1参照)。 As described above, according to the state of the network, in order to quickly determine the transmission rate of the best data, at the time of an increase in transmission rate, if Yuki by adding the number of transmitted packets (in the example above, one by one adding to Yuki in), at the time of reduction of the transmission rate, the number of transmitted packets, when the value less than 1 (the example above, 1/2) AIMD (Additive Increase Multiple decrease) algorithm for multiplication in is generally known and are (for example, see non-Patent Document 1).
【0010】 [0010]
【非特許文献1】 Non-Patent Document 1]
D.Chiu and R.Jain,“Analysis of the Increase/Decrease Algorithms for Congestion Avoidance in Computer Networks,”Journal of Computer Networks and ISDN,Vol.17,No.1,June 1989 pp.1-14 D.Chiu and R.Jain, "Analysis of the Increase / Decrease Algorithms for Congestion Avoidance in Computer Networks," Journal of Computer Networks and ISDN, Vol.17, No.1, June 1989 pp.1-14
【0011】 [0011]
【発明が解決しようとする課題】 [Problems that the Invention is to Solve
ところで、送信するデータが、階層符号化されたデータである場合がある。 Meanwhile, the data to be transmitted, it may be hierarchically encoded data. 例えば、階層符号化データの例として、JPEG(Joint Photographic Experts Group)2000がある。 For example, as an example of the hierarchical coded data, there is a JPEG (Joint Photographic Experts Group) 2000.
【0012】 [0012]
例として、JPEG2000の階層符号化データが、4つの階層により階層符号化されており、1つの階層分のデータを送信するために5個のパケットを必要とする場合、4つの階層全体の階層符号化データでは、4×5=20個のパケットを必要とする。 Examples, JPEG2000 hierarchically encoded data, four hierarchies are hierarchically encoded by, if you need five packets to send a hierarchy of data, four across hierarchy layer code the data requires 4 × 5 = 20 amino packet. 図2は、JPEG2000により階層符号化された1フレーム分のデータの例を表している。 Figure 2 represents an example of data for one frame is hierarchically coded by JPEG2000.
【0013】 [0013]
図2において、左側の記載「レイヤL1」、「レイヤL2」、「レイヤL3」、および「レイヤL4」は、4つの層を表している。 2, the left side according "layer L1", "layer L2", "layer L3", and "Layer L4" represents the four layers. レイヤL1が、最下位の階層であり、レイヤL2、レイヤL3、レイヤL4の順番でより上位の階層になる。 Layer L1 is the lowest hierarchy, the layer L2, the layer L3, becomes the upper layers in the order of layer L4.
【0014】 [0014]
図2において、「レイヤL1」、「レイヤL2」、「レイヤL3」、および「レイヤL4」の記載の右側のブロックは、それぞれパケットを表している。 2, the right side of the block according the "layer L1", "layer L2", "layer L3", and "Layer L4" are each represent a packet. すなわち、「P1」、「P2」、「P3」、「P4」、「P5」、「P6」、「P7」、「P8」、「P9」、「P10」、「P11」、「P12」、「P13」、「P14」、「P15」、「P16」、「P17」、「P18」、「P19」、および「P20」と記載された各ブロックは、それぞれが、パケットを表している。 In other words, the "P1", "P2", "P3", "P4", "P5", "P6", "P7", "P8", "P9", "P10", "P11", "P12", "P13", "P14", "P15", "P16", "P17", "P18", "P19", and the blocks labeled "P20" are respectively, represent packets.
【0015】 [0015]
図2においては、レイヤL1のデータが、「P1」、「P2」、「P3」、「P4」、および「P5」のパケットに分割され、レイヤL2のデータが、「P6」、「P7」、「P8」、「P9」、および「P10」のパケットに分割され、レイヤL3のデータが、「P11」、「P12」、「P13」、「P14」、および「P15」のパケットに分割され、レイヤL4のデータが、「P16」、「P17」、「P18」、「P19」、および「P20」のパケットに分割されている。 In Figure 2, data in the layer L1 is "P1", "P2", "P3", "P4", and is divided into packets of "P5", data in the layer L2 is, "P6", "P7" , "P8", is divided into packets of "P9", and "P10", data in the layer L3 is "P11", "P12", "P13", is split "P14", and the packets "P15" , data in the layer L4 is "P16", "P17", "P18", is divided into packets of "P19", and "P20".
【0016】 [0016]
JPEG2000においては、レイヤL1のデータのみをデコードして、表示した場合、粗い画像(この画像を画像1と称する)が表示され、レイヤL1とレイヤL2のデータをデコードして、表示した場合、画像1より精細な画像(この画像を画像2と称する)が表示され、レイヤL1、レイヤL2、およびレイヤL3のデータをデコードして、表示した場合、画像2より精細な画像(この画像を画像3と称する)が表示され、レイヤL1、レイヤL2、レイヤL3、およびレイヤL4のデータをデコードして、表示した場合、画像3より精細な画像(この画像を画像4と称する)が表示される。 In JPEG2000 decodes only data of the layer L1, when displaying the coarse image (referred to as the image and the image 1) is displayed, and decodes the data in the layer L1 and layer L2, when displaying an image definition image than 1 (referred to this image as the image 2) is displayed, the layer L1, the layer L2, and decodes the data in the layer L3, when displayed, definition image than the image 2 (the picture 3 referred to as) is displayed, the layer L1, the layer L2, and decodes the data in the layer L3, and the layer L4, when displayed, definition image than the image 3 (referred to as the image and image 4) are displayed.
【0017】 [0017]
ただし、図2において、1つのレイヤを構成する全パケットのデータが揃った場合、綺麗な画像を表示することができる。 However, in FIG. 2, if the data of all packets constituting one layer are aligned, it is possible to display a clear image. 例えば、パケットP1乃至P5が全部揃って、初めて、レイヤL1のデータをデコードして、綺麗な画像を表示することができる。 For example, aligned packets P1 to P5 is whole, first, decodes the data in the layer L1, it is possible to display a clear image. また、パケットP1乃至P10が全部揃って、初めて、レイヤL1およびレイヤL2のデータをデコードして、綺麗な画像を表示することができる。 The packet P1 to P10 are all aligned, first, decodes the data in the layer L1 and layer L2, it is possible to display a clear image. 同様に、パケットP1乃至P15が全部揃って、初めて、レイヤL1、レイヤL2、およびレイヤL3のデータをデコードして、綺麗な画像を表示することができる。 Similarly, uniform packets P1 to P15 are all, for the first time, the layer L1, the layer L2, and decodes the data in the layer L3, can be displayed a clear image. また、パケットP1乃至P20が全部揃って、初めて、レイヤL1、レイヤL2、レイヤL3、およびレイヤL4のデータをデコードして、綺麗な画像を表示することができる。 Also, aligned packets P1 to P20 are all, for the first time, the layer L1, the layer L2, the layer L3, and decodes the data in the layer L4, it is possible to display a clear image.
【0018】 [0018]
従って、例えば、パケットP1乃至P6のデータをデコードした場合の画像の画質は、レイヤL1のデータ、すなわちパケットP1乃至P5のデータをデコードした場合の画像の画質と比較して、たいして向上しない。 Thus, for example, quality of image when the decoded data packets P1 to P6, the data of the layer L1, that is, compared with the image quality of the image when the decoded data packets P1 to P5, not much improved. つまり、パケットP6のデータがあっても、それによる効果は期待できない。 In other words, even if the data packet P6, it due to the effect can not be expected. 同様に、例えば、パケットP1乃至P7のデータをデコードした場合の画像の画質は、レイヤL1のデータ、すなわちパケットP1乃至P5のデータをデコードした場合の画像の画質と比較して、たいして向上しない。 Similarly, for example, quality of image when the decoded data packets P1 to P7, the data of the layer L1, that is, compared with the image quality of the image when the decoded data packets P1 to P5, not much improved. つまり、パケットP6およびP7のデータがあっても、それによる効果は期待できない。 In other words, even if the data packet P6 and P7, it due to the effect can not be expected. 同様に、例えば、パケットP1乃至P8のデータをデコードした場合の画像の画質は、レイヤL1のデータ、すなわちパケットP1乃至P5のデータをデコードした場合の画像の画質と比較して、たいして向上しない。 Similarly, for example, quality of image when the decoded data packets P1 to P8, the data in the layer L1, that is, compared with the image quality of the image when the decoded data packets P1 to P5, not much improved. つまり、パケットP6乃至P8のデータがあっても、それによる効果は期待できない。 In other words, even if the data packet P6 to P8, it due to the effect can not be expected. 同様に、例えば、パケットP1乃至P9のデータをデコードした場合の画像の画質は、レイヤL1のデータ、すなわちパケットP1乃至P5のデータをデコードした場合の画像の画質と比較して、たいして向上しない。 Similarly, for example, quality of image when the decoded data packets P1 to P9, the data of the layer L1, that is, compared with the image quality of the image when the decoded data packets P1 to P5, not much improved. つまり、パケットP6乃至P9のデータがあっても、それによる効果は期待できない。 In other words, even if the data packet P6 to P9, which due to the effect can not be expected.
【0019】 [0019]
このような階層符号化データを、スライディングウィンドウアルゴリズムにより送受信する場合、送信端末装置は、番号の小さいパケットであるパケットP1から順に(P1、P2、P3、P4、P5、…、P19、P20の順に)、パケットを送信する。 Such hierarchically encoded data, for sending and receiving the sliding window algorithm, transmitting terminal device includes, in order from the packet P1 is a small packet of number (P1, P2, P3, P4, P5, ..., in the order of P19, P20 ), and it sends the packet. すなわち、送信端末装置は、図2の番号の小さいレイヤ、すなわちレイヤL1のパケットを優先的に受信端末装置に送信し、以降、レイヤL2、レイヤL3、レイヤL4の順に、各レイヤのパケットを、受信端末装置に送信する。 That is, the transmission terminal device, number of small layers of FIG. 2, namely transmits a packet of the layer L1 preferentially to the receiving terminal apparatus, since the layer L2, the layer L3, in the order of the layer L4, the packet of each layer, to the receiving terminal apparatus.
【0020】 [0020]
ここで、仮にウィンドウサイズが、パケット5個分の大きさであれば、送信端末装置は、パケットP1乃至P5を受信端末装置に送信し、受信端末装置は、送信端末装置から受信したパケットP1乃至P5の全データを利用して、レイヤL1に対応する画像を表示させることができる。 If this case, if the window size is the size of the 5 pieces of packet transmitting terminal apparatus transmits a packet P1 to P5 to the receiving terminal, the receiving terminal device to the packet P1 received from the transmitting terminal device using all the data in the P5, it is possible to display an image corresponding to the layer L1. また、仮にウィンドウサイズが、パケット10個分の大きさであれば、送信端末装置は、パケットP1乃至P10を受信端末装置に送信し、受信端末装置は、送信端末装置から受信したパケットP1乃至P10の全データを利用して、レイヤL1およびレイヤL2に対応する画像を表示させることができる。 Also, if the window size, if the size of the 10 pieces of packet transmitting terminal apparatus transmits a packet P1 to P10 to the receiving terminal, the receiving terminal apparatus, the packet P1 to P10 received from the transmitting terminal device using all the data, the image can be displayed corresponding to the layer L1 and layer L2. また、仮にウィンドウサイズが、パケット15個分の大きさであれば、送信端末装置は、パケットP1乃至P15を受信端末装置に送信し、受信端末装置は、送信端末装置から受信したパケットP1乃至P15の全データを利用して、レイヤL1、レイヤL2、およびレイヤL3に対応する画像を表示させることができる。 Also, if the window size, if the size of the 15 pieces of packet transmitting terminal apparatus transmits a packet P1 to P15 to the receiving terminal, the receiving terminal apparatus, the packet P1 to P15 received from the transmitting terminal device using all the data, the layer L1, the image can be displayed corresponding to the layer L2, and layer L3. また、仮にウィンドウサイズが、パケット20個分の大きさであれば、送信端末装置は、パケットP1乃至P20を受信端末装置に送信し、受信端末装置は、送信端末装置から受信したパケットP1乃至P20の全データを利用して、レイヤL1、レイヤL2、レイヤL3、およびレイヤL4に対応する画像を表示させることができる。 Also, if the window size, if the size of the 20 pieces of packet transmitting terminal apparatus transmits a packet P1 to P20 to the receiving terminal, the receiving terminal apparatus, the packet P1 to P20 received from the transmitting terminal device using all the data, the layer L1, the layer L2, an image can be displayed corresponding to the layer L3, and the layer L4.
【0021】 [0021]
しかしながら、1つのレイヤを構成する全パケットが揃わない場合、そのレイヤに含まれるパケットのデータを利用しても、それによる画質の向上は期待できないため、それらのパケットを送信することに意味がなく、従って、送信するパケットに無駄が生じるという課題があった。 However, if all packets constituting one layer do not align, even when using the data of the packets contained in the layer, since it due to the improvement of image quality can not be expected, no sense to send those packets and therefore, there is a problem that waste occurs in the packet to be transmitted.
【0022】 [0022]
すなわち、例えば、ウィンドウサイズがパケット6個分の大きさであった場合、送信端末装置は、パケットP1乃至P6を受信端末装置に送信するが、受信端末装置は、送信端末装置から受信したパケットP1乃至P6のうちパケットP6のデータを利用しても、それによる画質の向上は期待できないため、パケットP6を送信することは無駄になる。 That is, for example, if the window size is a size of 6 pieces of packet transmitting terminal apparatus, the packet will be sent the packet P1 to P6 to the receiving terminal, the receiving terminal apparatus, received from the transmitting terminal P1 or even by using the data packet P6 of P6, improvement in image quality due to it can not be expected, it is wasted sending packets P6. 同様に、ウィンドウサイズが、パケット7個分の大きさであった場合、送信端末装置は、パケットP1乃至P7を受信端末装置に送信するが、受信端末装置は、送信端末装置から受信したパケットP1乃至P7のうちパケットP6およびP7のデータを利用しても、それによる画質の向上は期待できないため、パケットP6およびP7を送信することは無駄になる。 Similarly, if the window size was the size of 7 pieces of packet transmitting terminal apparatus is to transmit a packet P1 to P7 to the receiving terminal, the receiving terminal apparatus, the packet P1 received from the transmitting terminal device or even by using the data packet P6 and P7 of P7, improvement in image quality due to it can not be expected, sending a packet P6 and P7 is wasted. 同様に、ウィンドウサイズが、例えば、パケット8個分の大きさであった場合、送信端末装置は、パケットP1乃至P8を受信端末装置に送信するが、受信端末装置は、送信端末装置から受信したパケットP1乃至P8のうちパケットP6、P7、およびP8のデータを利用しても、それによる画質の向上は期待できないため、パケットP6、P7、およびP8を送信することは無駄になる。 Similarly, the window size, for example, if a size of eight (8) packets, the transmitting terminal device, but transmits a packet P1 to P8 to the receiving terminal, the receiving terminal apparatus, received from the transmitting terminal device packet P6, P7 of the packet P1 to P8, and also using data of P8, improvement in image quality due to it can not be expected, it is wasted sending packets P6, P7, and P8. 同様に、ウィンドウサイズが、例えば、パケット9個分の大きさであった場合、送信端末装置は、パケットP1乃至P9を受信端末装置に送信するが、受信端末装置は、送信端末装置から受信したパケットP1乃至P9のうちパケットP6、P7、P8、およびP9のデータを利用しても、それによる画質の向上は期待できないため、パケットP6、P7、P8、およびP9を送信することは無駄になる。 Similarly, the window size, for example, if a size of 9 pieces of packet, the transmitting terminal device, but transmits a packet P1 to P9 in the receiving terminal apparatus, the receiving terminal apparatus, received from the transmitting terminal device packet P6, P7, P8 of the packet P1 to P9, and be utilized data P9, since it due to the improvement of image quality can not be expected, is wasted sending packets P6, P7, P8, and P9 .
【0023】 [0023]
このように、階層符号化データをスライディングウィンドウアルゴリズムにより送受信する場合、送信端末装置から受信端末装置に送信するパケットが、1つのレイヤ分、全部が揃わないと、送信端末装置から受信端末装置に送信するパケットの一部分が無駄になってしまうという課題があった。 Thus transmission, for sending and receiving hierarchically encoded data with a sliding window algorithm, packets transmitted from the transmitting terminal to the receiving terminal device, one layer component, if all do not align, the receiving terminal apparatus from the transmitting terminal device a portion of the packet that there was a problem that wasted.
【0024】 [0024]
また、受信端末装置側でも、受信したパケットから、利用することができないパケットを選り分ける必要があった。 Also in the receiving terminal apparatus, from the received packet, it is necessary to sort out the packets that can not be utilized.
【0025】 [0025]
本発明はこのような状況に鑑みてなされたものであり、より効率的に情報を送受信することを目的とする。 The present invention has been made in view of such circumstances, and an object thereof is to transmit and receive more information efficiently.
【0026】 [0026]
【課題を解決するための手段】 In order to solve the problems]
本発明の情報処理システムは、第1の情報処理装置は、階層符号化データをパケット化して、第1のパケットを生成する生成手段と、生成手段により生成された第1のパケットを、第2の情報処理装置に送信する第1の送信手段と、第1の情報処理装置による第1のパケットの送信時刻、および第1のパケットの損失に関する情報を含む第2のパケットを、第2の情報処理装置から受信する第1の受信手段と、第1の受信手段により受信された第2のパケットに基づいて、送信する第1のパケットのパケット数の基準値を算出する算出手段と、算出手段により算出された基準値に基づいて、生成手段によりパケット化する階層符号化データの階層を設定する設定手段とを備え、第2の情報処理装置は、第1の情報処理装置より、第1のパケッ The information processing system of the present invention, the first information processing apparatus, and packetizes the hierarchically encoded data, generating means for generating a first packet, the first packet generated by the generating means, the second first transmission means and the transmission time of the first packet by the first information processing apparatus, and a second packet including information about the loss of the first packet, the second information transmitted by the information processing apparatus first receiving means for receiving from the processing unit, based on the second packet received by the first receiving means, a calculation means for calculating a first reference value of the number of packets of a packet to be transmitted, calculating means based on the reference value calculated by, and a setting means for setting a hierarchy of the hierarchical encoded data packet by generating means, the second information processing apparatus, from the first information processing apparatus, a first packets を受信する第2の受信手段と、第2の受信手段により受信された第1のパケットから、階層符号化データを取得する取得手段と、第2の受信手段により受信された第1のパケットに基づいて、第2のパケットを作成する作成手段と、作成手段により作成された第2のパケットを第1の情報処理装置に送信する第2の送信手段とを備えることを特徴とする。 Second receiving means for receiving a, from a first packet received by the second receiving means, obtaining means for obtaining a hierarchical coded data, the first packet received by the second receiving means based on, characterized and creating means, further comprising a second transmission means for transmitting a second packet created by the creation unit to the first information processing apparatus for creating a second packet.
【0027】 [0027]
本発明の情報処理装置は、階層符号化データをパケット化して、第1のパケットを生成する生成手段と、生成手段により生成された第1のパケットを、他の情報処理装置に送信する送信手段と、情報処理装置による第1のパケットの送信時刻、および第1のパケットの損失に関する情報を含む第2のパケットを、他の情報処理装置から受信する受信手段と、受信手段により受信された第2のパケットに基づいて、送信する第1のパケットのパケット数の基準値である第1の数を算出する算出手段と、算出手段により算出された第1の数に基づいて、生成手段によりパケット化する階層符号化データの階層を設定する設定手段とを備えることを特徴とする。 The information processing apparatus of the present invention, by packetizing hierarchically encoded data, the transmission means and generating means for generating a first packet, the first packet generated by the generating means, for transmitting to another information processing apparatus When the transmission time of the first packet by the information processing apparatus, and a second packet including information about the loss of the first packet, receiving means for receiving from the other information processing apparatus, first received by the receiving means based on the second packet, and calculating means for calculating a first number which is the reference value of the number of packets of the first packet to be transmitted, based on the first number calculated by the calculation means, the packet by generating means characterized in that it comprises a setting means for setting a hierarchy of the hierarchical encoded data of.
【0028】 [0028]
前記設定手段には、前記生成手段により生成される前記第1のパケットのパケット数が、前記第1の数以下になるように、前記生成手段によりパケット化する前記階層化データの階層を設定するようにさせることができる。 The said setting means, the number of packets of the first packet generated by the generating means, the first number to be less than, set the hierarchical data hierarchy packetizing by said generating means it can be so.
【0029】 [0029]
前記設定手段には、パケット化する階層として設定された階層の階層符号化データをパケット化した場合に、前記生成手段により生成される前記第1のパケットのパケット数である第2の数が、前記第1の数以下になるように、パケット化する前記階層を設定するとともに、前記第1の数から第2の数を差し引いた余りである第3の数を算出すようにさせ、前記生成手段には、第3の数だけ、冗長データをさらにパケット化して前記第1のパケットを生成するようにさせることができる。 The said setting means, when a packet of the hierarchically encoded data of the set hierarchy as a hierarchy to packetize, the second number is the number of packets of the first packet generated by the generating means, wherein such first becomes equal to or less than the number, and sets the hierarchy packetized, it is to be calculated a third number of said is from the first number remainder obtained by subtracting the second number, the product the means, by a third number of redundant data can be adapted to generate the first packet and further packetizing the.
【0030】 [0030]
前記設定手段には、優先的に送信する階層の前記階層符号化データをパケット化した場合に、前記生成手段により生成される前記第1のパケットのパケット数である第2の数が、前記第1の数以下になるように、優先的に送信する前記階層を設定するとともに、前記第1の数から第2の数を差し引いた余りである第3の数を算出するようにさせ、前記生成手段には、優先的に送信する階層の前記階層符号化データをパケット化して、前記第1のパケットを生成するとともに、第3の数だけ、優先的に送信しない階層の前記階層符号化データをパケット化して、第1のパケットを生成するようにさせることができる。 The said setting means, when packetizing said hierarchical coded data hierarchy to be transmitted with priority, the second number is the number of packets of the first packet generated by said generating means, said first so that the number of 1 or less, and sets the hierarchy preferentially transmitted, is adapted to calculate a third number is a remainder obtained by subtracting the second number from the first number, the product means, the hierarchical encoded data hierarchy to be transmitted preferentially into packets, and generates the first packet, only the third number of the hierarchical encoded data hierarchy does not transmit preferentially and packetization can be adapted to generate a first packet.
【0031】 [0031]
本発明の情報処理方法は、階層符号化データをパケット化して、第1のパケットを生成する生成ステップと、生成ステップの処理により生成された第1のパケットを、他の情報処理装置に送信する送信ステップと、情報処理装置による第1のパケットの送信時刻、および第1のパケットの損失に関する情報を含む第2のパケットを、他の情報処理装置から受信する受信ステップと、受信ステップの処理により受信された第2のパケットに基づいて、送信する第1のパケットのパケット数の基準値である第1の数を算出する算出ステップと、算出ステップの処理により算出された第1の数に基づいて、生成ステップの処理によりパケット化する階層符号化データの階層を設定する設定ステップとを含むことを特徴とする。 An information processing method of the present invention, by packetizing hierarchically encoded data, and transmits a generation step of generating a first packet, the first packet generated by the process of generation step, to another information processing apparatus a transmission step, the transmission time of the first packet by the information processing apparatus, and a second packet including information about the loss of the first packet, a receiving step of receiving from the other information processing apparatus, the processing of receiving step based on the received second packet, based on the first number, which is calculated and calculating a first number which is the reference value of the number of packets of a first packet to be transmitted, the process of calculating step Te, characterized in that it comprises a setting step of setting a hierarchy of hierarchically encoded data packetized by the processing in production steps.
【0032】 [0032]
本発明の記録媒体のプログラムは、他の情報処理装置に送信するために、階層符号化データをパケット化して、第1のパケットを生成する生成ステップと、情報処理装置による第1のパケットの送信時刻、および第1のパケットの損失に関する情報を含む第2のパケットを、他の情報処理装置から受信した場合、受信された第2のパケットに基づいて、送信する第1のパケットのパケット数の基準値を算出する算出ステップと、算出ステップの処理により算出された基準値に基づいて、生成ステップの処理によりパケット化する階層符号化データの階層を設定する設定ステップとを含むことを特徴とする。 A program of a recording medium of the present invention, in order to transmit to the other information processing apparatus, and packetizes the hierarchically encoded data, a generation step of generating a first packet, the transmission of the first packet by the information processing apparatus time, and a second packet including information about the loss of the first packet, if received from another information processing apparatus, based on the second packet received, the number of packets of the first packet to be transmitted a calculation step of calculating a reference value, based on the reference value calculated by the processing of calculating step, characterized in that it comprises a setting step of setting a hierarchy of hierarchically encoded data packetized by the processing in generating step .
【0033】 [0033]
本発明のプログラムは、パケット通信により、階層符号化されたデータである階層符号化データを他の情報処理装置に送信する情報処理装置を制御するコンピュータに、他の情報処理装置に送信するために、階層符号化データをパケット化して、第1のパケットを生成する生成ステップと、情報処理装置による第1のパケットの送信時刻、および第1のパケットの損失に関する情報を含む第2のパケットを、他の情報処理装置から受信した場合、受信された第2のパケットに基づいて、送信する第1のパケットのパケット数の基準値を算出する算出ステップと、算出ステップの処理により算出された基準値に基づいて、生成ステップの処理によりパケット化する階層符号化データの階層を設定する設定ステップとを実行させることを特徴とす Program of the present invention, the packet communication, the hierarchically encoded data is hierarchically encoded data to a computer for controlling an information processing apparatus to be transmitted to another information processing apparatus, to transmit to the other information processing apparatus packetizes the hierarchically encoded data, a generation step of generating a first packet, transmission time of the first packet by the information processing apparatus, and a second packet including information about the loss of the first packet, If received from another information processing apparatus, based on the second packet received, a calculation step of calculating a reference value of the number of packets of the first packet to be transmitted, the reference value calculated by the processing of calculating step based on, to, characterized in that to execute a setting step of setting a hierarchy of hierarchically encoded data packetized by the processing in generating step .
【0034】 [0034]
本発明の情報処理システムにおいては、第1の情報処理装置では、階層符号化データがパケット化されて、第1のパケットが生成され、生成された第1のパケットが、第2の情報処理装置に送信され、第1の情報処理装置による第1のパケットの送信時刻、および第1のパケットの損失に関する情報を含む第2のパケットが、第2の情報処理装置から受信され、受信された第2のパケットに基づいて、送信する第1のパケットのパケット数の基準値が算出され、算出された基準値に基づいて、パケット化する階層符号化データの階層が設定される。 In the information processing system of the present invention, in the first information processing apparatus, hierarchically encoded data is packetized, a first packet is generated, the first packet generated is a second information processing apparatus It is sent to, a second packet including information about the loss of the transmission time, and the first packet of the first packet by the first information processing apparatus is received from the second information processing apparatus, received based on the second packet, the reference value of the number of packets of the first packet is calculated to be transmitted, based on the calculated reference value, the hierarchy of the hierarchical encoded data packetized are set. また、第2の情報処理装置では、第1の情報処理装置より、第1のパケットが受信され、受信された第1のパケットから、階層符号化データが取得され、受信された第1のパケットに基づいて、第2のパケットが作成され、作成された第2のパケットが第1の情報処理装置に送信される。 Further, in the second information processing apparatus, from the first information processing apparatus, the first packet is received, from the first packet received, hierarchically encoded data is obtained, a first packet received based on the second packet is created, a second packet generated is transmitted to the first information processing apparatus.
【0035】 [0035]
本発明の情報処理装置および方法、記録媒体、並びにプログラムにおいては、階層符号化データがパケット化されて、第1のパケットが生成され、生成された第1のパケットが、他の情報処理装置に送信され、情報処理装置による第1のパケットの送信時刻、および第1のパケットの損失に関する情報を含む第2のパケットが、他の情報処理装置から受信され、受信された第2のパケットに基づいて、送信する第1のパケットのパケット数の基準値である第1の数が算出され、算出された第1の数に基づいて、パケット化する階層符号化データの階層が設定される。 Information processing apparatus and method, recording medium, and program, hierarchically encoded data is packetized, a first packet is generated, the first packet generated is another information processing apparatus transmitted, a second packet including information about the loss of the transmission time, and the first packet of the first packet by the information processing apparatus is received from another information processing apparatus, based on the second packet received Te, the first number is a reference value of the number of packets of the first packet is calculated to be transmitted, based on the first number of the calculated layer of the scalable encoded data packetized are set.
【0036】 [0036]
本発明は、ネットワークに接続される電子機器に適用することができる。 The present invention is applicable to an electronic device connected to the network.
【0037】 [0037]
【発明の実施の形態】 DETAILED DESCRIPTION OF THE INVENTION
図3は、本発明を適用した情報処理システムの一実施の形態の構成を示す図である。 Figure 3 is a diagram showing the configuration of an embodiment of an information processing system according to the present invention.
【0038】 [0038]
図3において、画像送信装置11および、画像受信装置12は、インターネットを含むネットワーク10を介して、接続されている。 3, the image transmission device 11 and the image receiving apparatus 12 via the network 10 including the Internet, are connected. 画像送信装置11は、例えばJPEG2000などの符号化方式により符号化された階層符号化データを含むパケット(以下の説明において、階層符号化データを含むパケットをデータパケットと称する)を生成し、生成したデータパケットを、ネットワーク10を介して、画像受信装置12に実時間送信する。 Image transmitting apparatus 11 is, for example (in the description below, a packet including hierarchical encoded data referred to as data packet) packet including the hierarchically encoded data encoded by the encoding method such as JPEG2000 generated, yielding the data packet, via the network 10, and transmits real-time image receiving device 12. また、画像送信装置11は、画像受信装置12より、画像送信装置11がデータパケットを送信した送信時刻やパケット損失に関する情報を含むパケット(以下の説明において、画像受信装置12から画像送信装置11に送信されるパケットを応答パケットと称する)を受信し、これらの情報に基づいて、データパケットの送信レートを制御する。 The image transmitting apparatus 11 from the image receiving apparatus 12, in the packet (the following description, including the image transmitting apparatus 11 is the information about the transmission time and packet loss that has transmitted the data packet, from the image receiving apparatus 12 to the image transmission apparatus 11 receives the called response packet) packet sent, based on this information, it controls the transmission rate of the data packet.
【0039】 [0039]
画像受信装置12は、画像送信装置11から受信したデータパケットから、階層符号化データを取得し、所定の記録媒体に記録するとともに、画像送信装置11によるデータパケットの送信時刻やパケット損失に関する情報を含む応答パケットを生成し、この応答パケットを、画像送信装置11に送信する。 Image receiving apparatus 12, from the data packets received from the image transmitting apparatus 11 acquires the hierarchical coded data, and records the predetermined recording medium, the information about the transmission time and packet loss of data packets by the image transmission device 11 It generates a response packet including, the response packet, and transmits the image transmission apparatus 11.
【0040】 [0040]
次に、図4は、画像送信装置11の内部の構成例を表している。 Next, FIG. 4 illustrates an internal configuration example of the image transmission apparatus 11. 図4において、操作部101は、ユーザからの操作の入力を受け付け、受け付けられた操作に対応する操作情報を制御部102に通知する。 4, the operation unit 101 receives an input of operation from the user, and notifies the operation information corresponding to the accepted operation to the control unit 102. 制御部102は、予め設定されたプログラムや、操作部101からの操作情報に基づいて、画像送信装置11の各部の動作を制御する。 Control unit 102, a program and that is set in advance, based on the operation information from the operation unit 101, controls the operation of each part of the image transmission apparatus 11.
【0041】 [0041]
記録媒体103には、JPEG2000などの符号化方式により符号化された階層符号化データが記録されており、適宜、この階層符号化データを、パケット生成部105に供給する。 The recording medium 103 is hierarchically encoded data encoded is recorded by the encoding method such as JPEG2000, as appropriate, and supplies the hierarchically encoded data to the packet generation unit 105. 入力部104は、図示せぬ外部機器(例えば、撮像装置やマイクロフォン)より、階層符号化データの入力を受け付け、入力された階層符号化データを、パケット生成部105に供給する。 The input unit 104 supplies an external device not shown (e.g., an imaging device and a microphone) from receives an input of hierarchically encoded data, the hierarchically encoded data that is input to the packet generation unit 105.
【0042】 [0042]
パケット生成部105は、階層設定部123からの制御に従って、記録媒体103、または入力部104から供給された階層符号化データを分割し、分割したデータを含むデータパケットを生成する。 Packet generating unit 105, under the control of the layer setting unit 123, a recording medium 103 or split the hierarchically encoded data supplied from the input unit 104, generates a data packet including the divided data. パケット生成部105は、例えば、図2に示されるように、階層符号化データを、レイヤ毎に複数個に分割し、それぞれのデータを含むデータパケットを生成する。 Packet generating unit 105, for example, as shown in FIG. 2, the hierarchical coded data is divided into a plurality for each layer, and generates a data packet containing the respective data. そして、パケット生成部105は、生成されたデータパケットのうち、階層設定部123から、廃棄するように指令されたデータパケットを廃棄し、廃棄されずに残ったパケットを、パケット送信部106に供給する。 The packet generation unit 105 of the generated data packets, supplied from the layer setting unit 123 discards the command data packet to discard the remaining packets not discarded, the packet transmission unit 106 to. なお、パケット生成部105は、生成したデータパケットに、TCP/IP(Transmission Control Protocol/Internet Protocol)、またはUDP/IP(User Datagram Protocol/Internet Protocol)のパケットヘッダを付加する。 The packet generation unit 105, the generated data packets, TCP / IP (Transmission Control Protocol / Internet Protocol), or adds a packet header of UDP / IP (User Datagram Protocol / Internet Protocol). パケットヘッダには、データパケットの個々を識別するためのシーケンス番号(以下、パケットヘッダ含まれるシーケンス番号をパケットIDと称する)が含まれている。 The packet header, a sequence number for identifying the individual data packets (hereinafter, referred to as a sequence number included the packet header and the packet ID) are included.
【0043】 [0043]
パケット送信部106は、パケット生成部105により生成されたデータパケットが供給されると、これを、所定のタイミングで、ネットワーク10を介して、画像受信装置12に送信する。 Packet transmission unit 106, the data packets generated by the packet generation unit 105 is supplied, this at a predetermined timing, via a network 10, to the image receiving apparatus 12. なお、パケット送信部106は、階層設定部123による制御を受ける。 The packet transmission unit 106 receives the control by the layer setting unit 123. また、パケット送信部106は、データパケットを送信するとき、そのデータパケットのパケットヘッダに、現在時刻を、データパケットの送信時刻として記録する。 The packet transmission unit 106, when transmitting the data packet, the packet header of the data packet, the current time is recorded as the transmission time of the data packet.
【0044】 [0044]
パケット受信部107は、画像受信装置12より、応答パケットを受信し、これを送信レート算出部121に供給する。 Packet receiving unit 107 from the image receiving apparatus 12 receives the response packet, and supplies it to the transmission rate calculation section 121.
【0045】 [0045]
レート制御部108は、パケット受信部107により受信された応答パケットに基づいて、パケット生成部105およびパケット送信部106を制御し、データパケットの送信レートを最適な値に調節する。 Rate control unit 108, based on a response packet received by the packet receiving unit 107, and controls the packet generating unit 105 and the packet transmission unit 106 adjusts the transmission rate of the data packets to an optimal value. レート制御部108内の送信レート算出部121は、パケット受信部107から供給された応答パケットに基づいて、データパケットの理想的な送信レートを算出し、算出結果をパケット数算出部122に通知する。 Transmission rate calculating unit 121 in the rate control unit 108, based on the response packet supplied from the packet receiving unit 107, calculates the ideal transmission rate of the data packet, and notifies the calculation result to the packet count calculation unit 122 . パケット数算出部122は、送信レート算出部121からの通知に基づいて、画像受信装置12に送信する理想的なパケット数を算出し、階層設定部123に通知する。 Packet count calculation unit 122, based on the notification from the transmission rate calculation section 121 calculates the ideal number of packets to be transmitted to the image receiving apparatus 12, and notifies the layer setting unit 123. 階層設定部123は、パケット数算出部122から通知された送信レートに基づいて、画像受信装置12に送信するデータパケットのレイヤ(階層)を設定する。 Layer setting unit 123, based on the transmission rate notified from the packet count calculation unit 122, sets a layer (hierarchical) data packets to be transmitted to the image receiving apparatus 12.
【0046】 [0046]
次に、図5は、画像受信装置12の内部の構成例を表している。 Next, FIG. 5 shows an example of an internal construction of the image receiving apparatus 12. 図5において、操作部151は、ユーザからの操作の入力を受け付け、受け付けられた操作に対応する操作情報を制御部152に通知する。 5, the operation unit 151 receives an input of operation from the user, and notifies the operation information corresponding to the accepted operation to the control unit 152. 制御部152は、予め設定されたプログラムや、操作部151からの操作情報に基づいて、画像受信装置12の各部の動作を制御する。 Controller 152, programs and which is set in advance, based on the operation information from the operation unit 151, controls the operation of each unit of the image receiver 12.
【0047】 [0047]
パケット受信部153は、画像送信装置11から送信されたデータパケットを、ネットワーク10を介して受信し、データパケットに含まれている階層符号化データを、記録媒体154に記録するとともに、データパケットに付加されているパケットヘッダを読み出し、パケットヘッダに含まれている情報、すなわち、パケットIDとデータパケットの送信時刻に関する情報を状態測定部155に供給する。 Packet receiving unit 153, a data packet transmitted from the image transmission apparatus 11, received via the network 10, the hierarchically encoded data included in the data packet, and records on the recording medium 154, the data packet reads the packet header added, information contained in the packet header, i.e., supplies information about the transmission time of the packet ID and the data packet to the measurement unit 155.
【0048】 [0048]
記録媒体154は、例えば、ハードディスクにより構成され、パケット受信部153から供給された階層符号化データが記録されるとともに、図示せぬ外部機器により、記録された階層符号化データが読み出される。 Recording medium 154 is, for example, a hard disk, together with the hierarchical coded data supplied from the packet receiving unit 153 is recorded by an external device (not shown), hierarchically encoded data recorded is read out.
【0049】 [0049]
状態測定部155は、パケット受信部153からパケットIDとデータパケットの送信時刻に関する情報を受信する。 State measurement unit 155 receives the information regarding the transmission time of the packet ID and the data packets from the packet receiving unit 153. そして、状態測定部155は、パケット受信部153から供給されたパケットIDを基に、損失パケットの有無を判定し、損失パケットがある場合、損失パケットのシーケンス番号を、損失パケットIDとして取得する。 The state measuring unit 155, based on the packet ID supplied from the packet receiving unit 153 determines whether the lost packets, if there is a lost packet, the sequence number of the lost packets, acquires as a loss packet ID. さらに、状態測定部155は、データパケットを受信した受信時刻を取得する。 Furthermore, measurement unit 155 obtains a reception time of receiving the data packet. そして、状態測定部155は、パケットヘッダから読み出されたデータパケット送信時刻、およびパケットID、並びに、自らが取得したデータパケット受信時刻、および損失パケットIDを、パケット生成部156に供給する。 The measurement unit 155 provides the data packet transmission time read from the packet header, and a packet ID, and a data packet reception time itself acquired, and the lost packets ID, to the packet generation unit 156.
【0050】 [0050]
パケット生成部156は、状態測定部155から、パケットヘッダから読み出されたデータパケット送信時刻、およびパケットID、並びに、自らが取得したデータパケット受信時刻、および損失パケットIDが供給された場合、これらの情報を含む応答パケットを生成し、この応答パケットをパケット送信部157に供給する。 Packet generation unit 156, a measurement unit 155, the data packet transmission time read from the packet header, and a packet ID, and, if the data packet reception time itself acquired, and the loss packet ID is supplied, these It generates a response packet including the information, and supplies the response packet to the packet transmission unit 157.
【0051】 [0051]
パケット送信部157は、パケット生成部156から供給された応答パケットを、ネットワーク10を介して、画像送信装置11に送信する。 Packet transmission unit 157, a response packet supplied from the packet generation unit 156, via the network 10, and transmits to the image transmission apparatus 11. なお、パケット送信部157は、応答パケットを送信するとき、その応答パケットのパケットヘッダに、現在時刻を、応答パケットの送信時刻として記録する。 The packet transmission unit 157, when transmitting a response packet, the packet header of the response packet, the current time is recorded as the transmission time of the response packet.
【0052】 [0052]
次に、図6のフローチャートを参照して、画像送信装置11の画像送信処理、および画像受信装置の画像受信処理について説明する。 Next, with reference to the flowchart of FIG. 6, the image transmission processing of the image transmission apparatus 11, and the image receiving process of the image receiving apparatus will be described. なお、以下の説明においては、画像送信装置11から画像受信装置12に送信する階層符号化データとして、図2に示されるJPEG2000の符号化方式により符号化された階層符号化データを採用した場合を説明する。 In the following description, the hierarchically encoded data to be transmitted from the image transmitting apparatus 11 to the image receiving apparatus 12, a case of adopting the hierarchically encoded data encoded by the JPEG2000 coding scheme shown in FIG. 2 explain. すなわち、図2に示されるように、階層符号化データは、4つのレイヤ(階層)を有し、各レイヤは5個のパケットに分割される。 That is, as shown in FIG. 2, the hierarchical coded data may have four layers (hierarchy), each layer is divided into five packets.
【0053】 [0053]
図6のステップS1において、画像送信装置11のパケット生成部105は、階層設定部123からの制御に従って、記録媒体103、または入力部104から供給される階層符号化データをパケット化し、データパケットを生成する。 In step S1 of FIG. 6, the packet generation unit 105 of the image transmitting apparatus 11 according to the control from the layer setting unit 123, packetizes the hierarchically encoded data supplied from the recording medium 103 or the input unit 104, the data packet generated. ステップS2において、パケット送信部106は、パケット生成部105がステップS1で生成したデータパケットを、ネットワーク10を介して、画像受信装置12に送信する。 In step S2, the packet transmission unit 106, packet generation unit 105 of data packet generated in step S1, via the network 10, and transmits to the image receiving apparatus 12. その後、処理はステップS1に戻り、ステップS1以降の処理が繰り返される。 After that, the process returns to step S1, and the processes after step S1 are repeated. なお、ステップS2の送信処理の詳細な説明は後述する。 A detailed description of the transmission process in step S2 will be described later.
【0054】 [0054]
画像受信装置12のパケット受信部153は、ステップS11において、画像送信装置11が、ステップS2で送信したデータパケットを受信する。 Packet receiving unit 153 of the image receiving apparatus 12, in step S11, the image transmission apparatus 11 receives the data packet transmitted in step S2. ステップS12において、画像受信装置12のパケット受信部153は、ステップS11で受信されたデータパケットより、階層符号化データを読み出し、この階層符号化データを、記録媒体154に記録する。 In step S12, the packet receiving unit 153 of the image receiving apparatus 12, from the received data packets in step S11, reads the hierarchically encoded data, the hierarchically encoded data is recorded on the recording medium 154. その後、処理はステップS11に戻り、ステップS11以降の処理が繰り返される。 After that, the process returns to the step S11, the processes after step S11 are repeated.
【0055】 [0055]
以上のようにして、データパケットが、画像送信装置11から画像受信装置12に実時間送信され、記録媒体154に記録される。 As described above, the data packet is real-time transmission from the image transmitting apparatus 11 to the image receiving apparatus 12, is recorded on the recording medium 154. 記録媒体154に記録された階層符号化データは、適宜、外部機器により読み出され、デコードされ、画像が再生される。 Hierarchically encoded data recorded on the recording medium 154 is appropriately read out by an external device, the decoded image is reproduced.
【0056】 [0056]
ところで、本発明においては、画像受信装置12から画像送信装置11に、応答パケットが送信され、この応答パケットに基づいて、データパケットの送信レートが制御される。 Incidentally, in the present invention, the image receiving apparatus 12 to the image transmitting apparatus 11, a response packet is transmitted, on the basis of the response packet, the transmission rate of data packets is controlled.
【0057】 [0057]
そこで、次に、図7のフローチャートを参照して、画像受信装置12の確認応答処理、すなわち、画像受信装置12が、応答パケットを作成し、画像送信装置11に送信する処理について説明する。 Accordingly, next, with reference to the flowchart of FIG. 7, the acknowledgment process of the image receiving apparatus 12, i.e., the image receiving apparatus 12, creates a response packet, the processing of transmitting the image transmitting apparatus 11 will be described.
【0058】 [0058]
ステップS51において、画像受信装置12の制御部152は、パケット受信部153を監視し、パケット受信部153がデータパケットを受信するまで待機し、パケット受信部153がデータパケットを受信した場合、処理はステップS52に進む。 In step S51, the control unit 152 of the image receiving apparatus 12 monitors the packet receiving unit 153, when the packet receiving unit 153 waits until it receives a data packet, the packet receiving unit 153 receives the data packet, the processing the process proceeds to step S52. ステップS52において、状態測定部155は、内蔵する内部時計より、現在時刻を取得する。 In step S52, the state measuring unit 155, from the internal clock that internal acquires the current time. ステップS53において、状態測定部155は、パケット受信部153から、パケットヘッダとして付加されていた情報である、データパケットの送信時刻、およびパケットIDを取得し、パケットIDに基づいて、パケットの損失の有無を判定する。 In step S53, the state measuring unit 155, the packet receiving unit 153 is information that is added as the packet header, and obtains the transmission time, and the packet ID of the data packet, based on the packet ID, the packet loss It determines the presence or absence.
【0059】 [0059]
すなわち、パケットIDは、シーケンス番号であるため、今回受信したデータパケットのパケットIDが、前回受信したデータパケットのパケットIDと連番になっているか否かを判定することにより、データパケットの損失の有無を判定することができる。 That is, the packet ID are the sequence number, the packet ID of the currently received data packet, by determining whether or not it is a packet ID and serial number of data packets previously received, the data packet loss it is possible to determine the presence or absence. 例えば、前回受信したデータパケットのパケットIDが「10」で、今回受信したデータパケットのパケットIDが「11」であった場合、「10」と「11」で連続しているので、状態測定部155は、データパケットの損失はないと判定する。 For example, the packet ID of the data packet received last time is "10", if the packet ID of the currently received data packet is "11", since the continuous "10", "11", the state measuring unit 155, loss of data packets is determined that there is no. また、例えば、前回受信したデータパケットのパケットIDが「10」で、今回受信したデータパケットのパケットIDが「12」であった場合、「10」と「12」で連続していないので、状態測定部155は、データパケットが損失していると判定する。 Further, for example, the packet ID of the data packet received last time is "10", if the packet ID of the currently received data packet is "12", since no continuous "10", "12", the state measuring section 155 determines that the data packet is lost.
【0060】 [0060]
ステップS53において、状態測定部155が、データパケットの損失がないと判定した場合、処理はステップS54に進む。 In step S53, if the measurement unit 155 determines that there is no loss of data packets, the process proceeds to step S54.
【0061】 [0061]
ステップS54において、状態測定部155は、ステップS52で取得したデータパケットの受信時刻、並びにデータパケットのパケットヘッダから取得したデータパケットの送信時刻およびパケットIDを、パケット生成部156に供給する。 In step S54, the state measuring unit 155 supplies the reception time of the data packet obtained in step S52, and the transmission time and the packet ID of the retrieved data packet from the packet header of the data packet, the packet generation unit 156. パケット生成部156は、状態測定部155から供給された、データパケットの受信時刻、並びにデータパケットの送信時刻およびパケットIDを情報として含む応答パケットを生成し、この応答パケットをパケット送信部157に供給する。 Packet generation unit 156, supplied from the state measurement unit 155, the reception time of the data packet, and generates a response packet including the information transmission time and the packet ID of the data packet, supplies the response packet to the packet transmission unit 157 to. その後、処理はステップS56に進む。 After that, the process proceeds to step S56.
【0062】 [0062]
ステップS53において、状態測定部155が、データパケットの損失があると判定した場合、処理はステップS55に進む。 In step S53, if the measurement unit 155 determines that there is a loss of data packets, the process proceeds to step S55.
【0063】 [0063]
ステップS55において、状態測定部155は、損失したパケットのパケットIDを特定する。 In step S55, the state measuring unit 155 identifies the packet ID of the lost packet. 例えば、前回受信したデータパケットのパケットIDが「10」で、今回受信したデータパケットのパケットIDが「12」であった場合、状態測定部155は、損失パケットIDは「11」であると特定する。 For example, the packet ID of the data packet received last time is "10", the packet ID of the currently received data packet if a "12", the state measuring unit 155, the loss packet ID is "11" specified to. 状態測定部155は、ステップS52で取得したデータパケットの受信時刻、データパケットのパケットヘッダから取得したデータパケットの送信時刻およびパケットID、並びに損失パケットIDを、パケット生成部156に供給する。 State measurement unit 155 supplies the reception time of the data packet obtained in step S52, the transmission time and the packet ID of the data packet acquired from the packet header of the data packet, and the lost packet ID, to the packet generation unit 156. パケット生成部156は、状態測定部155から供給された、データパケットの受信時刻、データパケットの送信時刻およびパケットID、並びに損失パケットIDを情報として含む応答パケットを生成し、この応答パケットをパケット送信部157に供給する。 Packet generation unit 156, supplied from the state measurement unit 155, the reception time of the data packet, transmission time and the packet ID of the data packet, and generates a response packet including the lost packet ID as information, the response packet packet transmission supplied to the part 157. その後、処理はステップS56に進む。 After that, the process proceeds to step S56.
【0064】 [0064]
ステップS56において、パケット送信部157は、パケット生成部156から供給された応答パケットを、ネットワーク10を介して、画像送信装置11に送信する。 In step S56, the packet transmission unit 157, a response packet supplied from the packet generation unit 156, via the network 10, and transmits to the image transmission apparatus 11. なお、パケット送信部157は、応答パケットを送信する直前に、内蔵する内部時計から現在時刻を取得し、この現在時刻を、応答パケットの送信時刻として、パケットヘッダに記録する。 The packet transmission unit 157, just before sending a response packet, and obtains the current time from the internal clock to built, the current time, as a transmission time of the response packet, recorded in the packet header.
【0065】 [0065]
その後、処理はステップS51に戻り、ステップS51以降の処理が繰り返される。 Thereafter, the process returns to step S51, the processes in and after step S51 are repeated.
【0066】 [0066]
以上のようにして、画像受信装置12から画像送信装置11に対して、応答パケットが送信される。 As described above, the image transmitting apparatus 11 from the image receiving apparatus 12, a response packet is sent.
【0067】 [0067]
画像送信装置11は、画像受信装置12から受信した応答パケットに基づいて、データパケットの送信レートを制御する。 Image transmission device 11, based on a response packet received from the image receiver 12, and controls the transmission rate of the data packet.
【0068】 [0068]
次に、図8のフローチャートを参照して、画像送信装置11のレート制御処理、すなわち、データパケットの送信レートの制御について説明する。 Next, with reference to the flowchart of FIG. 8, the rate control process of the image transmission device 11, i.e., the control of the transmission rate of the data packet will be described.
【0069】 [0069]
ステップS101において、制御部102は、パケット受信部107を監視し、パケット受信部107が応答パケットを受信するまで待機する. In step S101, the control unit 102 monitors the packet receiving unit 107, and waits until the packet receiving unit 107 receives the response packet. そして、パケット受信部107が応答パケットを受信したとき、処理はステップS102に進む。 When the packet receiving unit 107 receives a response packet, the process proceeds to step S102.
【0070】 [0070]
ステップS102において、レート制御部108の送信レート算出部121は、パケット受信部107が受信した応答パケットを、パケット受信部107より取得するとともに、パケット受信部107が応答パケットを受信した受信時刻を、内蔵する内部時計より取得する。 In step S102, the transmission rate calculation section 121 of the rate control unit 108, a response packet the packet receiving unit 107 receives, acquires from the packet reception unit 107, a reception time packet receiving unit 107 receives a response packet, It is obtained from the internal clock to be built. そして、送信レート算出部121は、取得した応答パケットの受信時刻、並びに応答パケットに含まれているデータパケットの送信時刻、データパケットの受信時刻、および応答パケットの送信時刻から、RTT(Round Trip Time)を算出する。 The transmission rate calculation unit 121, the reception time of the obtained response packet, and transmission time of the data packet included in the response packet, the reception time of the data packet, and the transmission time of the response packet, RTT (Round Trip Time ) is calculated.
【0071】 [0071]
すなわち、RTTは、画像送信装置11から送信されたデータパケットが画像受信装置12により受信されるまでの時間(この時間をT1とする)と、画像受信装置12から送信された応答パケットが画像送信装置11により受信されるまでの時間(この時間をT2とする)の和(T1+T2)である。 That, RTT is the time until the data packet transmitted from the image transmitting apparatus 11 is received by the image receiving device 12 (this time is T1), the response packet transmitted from the image receiving apparatus 12 is an image transmission time to be received by the device 11 is the sum of (the time to T2) (T1 + T2).
【0072】 [0072]
ここで、画像送信装置11から送信されたデータパケットが画像受信装置12により受信されるまでの時間T1は、データパケットの受信時刻からデータパケットの送信時刻を引き算して求められる。 The time T1 until the data packet transmitted from the image transmitting apparatus 11 is received by the image receiver 12 is determined from the reception time of the data packet by subtracting the transmission time of data packets. また、画像受信装置12から送信された応答パケットが画像送信装置11により受信されるまでの時間T2は、応答パケットの受信時刻から応答パケットの送信時刻を引き算して求められる。 The time T2 until the reply packet transmitted from the image receiving apparatus 12 is received by the image transmission device 11 is determined by subtracting the transmission time of the response packet from the reception time of the response packet.
【0073】 [0073]
以上のようにして、送信レート算出部121が、RTTを取得した後、処理は、ステップS103に進む。 As described above, the transmission rate calculation section 121, after obtaining the RTT, the process proceeds to step S103.
【0074】 [0074]
ステップS103において、送信レート算出部121は、応答パケットに含まれている損失パケットIDに基づいて、単位時間あたりのパケットロス率を算出する。 In step S103, the transmission rate calculation unit 121, based on lost packet ID contained in the response packet, to calculate the packet loss rate per unit time.
【0075】 [0075]
ステップS104において、送信レート算出部121は、送信レートTを算出する。 In step S104, the transmission rate calculation section 121 calculates the transmission rate T. 送信レートの算出方法には、例えば、TFRC(TCP-Friendly Rate Control)を利用することができる。 The method for calculating the transmission rate, for example, can be utilized TFRC (TCP-Friendly Rate Control). なお、TFRCについては、S.Floyd,M.Handley,J.Pandhye and J.Widmer,“Equation-Based Congestion Control for Unicast Applications”,Proceedings of ACM SIGCOMM 2000,May 2000に詳細な説明がある。 It is to be noted that the TFRC, S.Floyd, M.Handley, J.Pandhye and J.Widmer, "Equation-Based Congestion Control for Unicast Applications", there is a detailed description in the Proceedings of ACM SIGCOMM 2000, May 2000. TFRCにおいては、パケットロス率とRTTを利用して、画像送信装置11からデータパケットを送信する理想的な送信レートを、以下の式(この式を式(1)とする)により予測する。 In TFRC, using the packet loss rate and RTT, an ideal transmission rate for transmitting data packets from the image transmitting apparatus 11, predicted by the following formula (this formula to formula (1)).
【0076】 [0076]
【数1】 [Number 1]
【0077】 [0077]
式(1)において、Tは理想的な送信レート、sはパケットサイズ、pはパケットロス率、tはTCP(Transmission Control Protocol)のタイムアウト時間(通常は、RTTの4倍)である。 In the formula (1), T is the ideal transmission rate, s the packet size, p is the packet loss rate, t is (usually four times the RTT) timeout of TCP (Transmission Control Protocol) is. 送信レート算出部121は、式(1)により、送信レートTを算出した後、算出した送信レートTを、パケット数算出部122に通知する。 Transmission rate calculating unit 121, by Equation (1), after calculating the transmission rate T, the calculated transmission rate T, and notifies the packet count calculation unit 122. その後、処理はステップS105に進む。 Thereafter, the process proceeds to step S105.
【0078】 [0078]
ステップS105において、パケット数算出部122は、送信パケット数を以下の式(この式を式(2)とする)により、算出する。 In step S105, the packet count calculation unit 122 by the following equation the number of transmitted packets (this formula and formula (2)), is calculated.
【0079】 [0079]
n=(f×s)/T n = (f × s) / T
【0080】 [0080]
式(2)において、nは送信パケット数、fはフレームレート、sはパケットサイズ、TはステップS104で算出された送信レートである。 In the formula (2), n is the number of transmitted packets, f is the frame rate, s the packet size, T is the transmission rate calculated in step S104. パケット数算出部122は、送信パケット数nを算出した後、算出した送信パケット数nを、階層設定部123に通知する。 Packet count calculation unit 122, after calculating the transmission packet number n, the calculated transmission packet number n, and notifies the layer setting unit 123. その後、処理はステップS106に進む。 Thereafter, the process proceeds to step S106.
【0081】 [0081]
ステップS106において、階層設定部123は、変数LをL=0に初期化する。 In step S106, the hierarchy setting unit 123 initializes a variable L to L = 0. その後、処理はステップS107に進む。 Thereafter, the processing proceeds to step S107. ステップS107において、階層設定部123は、以下の式(この式を式(3)とする)が成立するか否かを判定する。 In step S107, the hierarchy setting unit 123 has the following formula (to this equation and equation (3)) is equal to or established.
【0082】 [0082]
(L+1)×5≦n (L + 1) × 5 ≦ n
【0083】 [0083]
式(3)において、「5」は、1つのレイヤに含まれるパケットの個数を表している。 In the formula (3), "5" indicates the number of packets contained in a single layer. すなわち、図2においては、1つのレイヤは、5個のパケットに分割されているので、式(3)において「5」とされている。 That is, in FIG. 2, one layer, since it is divided into five packets, there is a "5" in the formula (3). そして、式(3)が成立する場合、処理はステップS108に進む。 Then, if the expression (3) is satisfied, the process proceeds to step S108.
【0084】 [0084]
ステップS108において、階層設定部123は、変数Lが4以上であるか否かを判定し、4以上ではない(4未満である)と判定した場合、処理はステップS109に進む。 In step S108, the hierarchy setting unit 123, if the variable L is equal to or 4 or more, it is determined that not 4 or higher (less than 4), the process proceeds to step S109. なお、ステップS108における判定の基準「4」は、レイヤの個数を表している。 The reference of the judgment in the step S108, "4" denotes the number of layers. すなわち、図2において、階層符号化データは、レイヤL1乃至L4の4個のレイヤにより構成されていたため、ステップS108において、判定の基準が「4」とされる。 That is, in FIG. 2, the hierarchical coded data because it is composed by four layers of the layer L1 to L4, in step S108, the reference of determination is set to "4".
【0085】 [0085]
ステップS109において、階層設定部123は、変数Lの値を1だけインクリメントする。 In step S109, the hierarchy setting unit 123 increments the value of the variable L by one. その後、処理はステップS107に戻り、ステップS107以降の処理が繰り返される。 After that, the process returns to step S107, the processes in and after step S107 are repeated.
【0086】 [0086]
ステップS107において、階層設定部123が、式(3)が成立しないと判定した場合、ステップS108の処理はスキップされ、処理はステップS110に進む。 In step S107, the hierarchy setting unit 123, if it is determined that the equation (3) is not satisfied, the processing in step S108 is skipped and the process proceeds to step S110. また、ステップS108において、階層設定部123が、変数Lは4以上であると判定した場合、処理はステップS110に進む。 Further, in step S108, the hierarchy setting unit 123, if the variable L is determined that is 4 or more, the process proceeds to step S110.
【0087】 [0087]
例えば、ステップS105で、n=17と算出された場合、ステップS106乃至ステップS109の処理は、以下のようになる。 For example, in step S105, when it is calculated with n = 17, the processing of step S106 through step S109 is as follows.
【0088】 [0088]
まず、ステップS106においてL=0に初期化され、ステップS107において、式(3)に、変数L=0、およびn=17が代入され、式(3)が成立するか否かが判定される。 First, is initialized to L = 0 in step S106, in step S107, the equation (3), the variable L = 0, and n = 17 is substituted, whether the formula (3) is satisfied is determined . 変数L=0の場合、式(3)は成立するので、処理はステップS108に進む。 For variables L = 0, so equation (3) is satisfied, the process proceeds to step S108. ステップS108において、変数Lが4以上であるか否かが判定されるが、変数L=0なので、変数Lは4以上ではないと判定され、処理はステップS109に進む。 In step S108, although whether or not the variable L is 4 or more is determined, since the variable L = 0, the variable L is judged not to be 4 or more, the process proceeds to step S109. ステップS109において、変数Lが1だけインクリメントされ、L=1に設定される。 In step S109, the variable L is incremented by 1 is set to L = 1.
【0089】 [0089]
その後、処理はステップS107に戻り、式(3)に、変数L=1、およびn=17が代入され、式(3)が成立するか否かが判定される。 After that, the process returns to step S107, the equation (3), is substituted for the variable L = 1, and n = 17, whether the formula (3) is satisfied. 変数L=1の場合、式(3)は成立するので、処理はステップS108に進む。 For variables L = 1, since the formula (3) is satisfied, the process proceeds to step S108. ステップS108において、変数Lが4以上であるか否かが判定されるが、変数L=1なので、変数Lは4以上ではないと判定され、処理はステップS109に進む。 In step S108, although whether or not the variable L is 4 or more is determined, since the variable L = 1, the variable L is judged not to be 4 or more, the process proceeds to step S109. ステップS109において、変数Lが1だけインクリメントされ、変数L=2に設定される。 In step S109, the variable L is incremented by 1, is set in the variable L = 2.
【0090】 [0090]
その後、処理はステップS107に戻り、式(3)に、変数L=2、およびn=17が代入され、式(3)が成立するか否かが判定される。 After that, the process returns to step S107, the equation (3), is substituted for the variable L = 2, and n = 17, whether the formula (3) is satisfied. 変数L=2の場合、式(3)は成立するので、処理はステップS108に進む。 For variables L = 2, since the formula (3) is satisfied, the process proceeds to step S108. ステップS108において、変数Lが4以上であるか否かが判定されるが、変数L=2なので、変数Lは4以上ではないと判定され、処理はステップS109に進む。 In step S108, although whether or not the variable L is 4 or more is determined, since the variable L = 2, the variable L is judged not to be 4 or more, the process proceeds to step S109. ステップS109において、変数Lが1だけインクリメントされ、変数L=3に設定される。 In step S109, the variable L is incremented by 1, is set in the variable L = 3.
【0091】 [0091]
その後、処理はステップS107に戻り、式(3)に、変数L=3、およびn=17が代入され、式(3)が成立するか否かが判定される。 After that, the process returns to step S107, the equation (3), the variable L = 3, and n = 17 is substituted, whether the formula (3) is satisfied. 変数L=3の場合、式(3)は成立しないので、処理はステップS110に進む。 For variables L = 3, since the formula (3) is not satisfied, the process proceeds to step S110.
【0092】 [0092]
ステップS110において、階層設定部123は、L+1層より上位のレイヤのデータパケットを廃棄する。 In step S110, the hierarchy setting unit 123 discards the data packets of higher layers than (L + 1). ステップS111において、階層設定部123は、下位のL層までのパケットを、画像受信装置12に送信するデータパケットとして設定する。 In step S111, the layer setting unit 123 sets the packet to the lower L layer, as data packets to be transmitted to the image receiving apparatus 12.
【0093】 [0093]
例えば、ステップS106乃至ステップS109の処理により、変数LがL=1に設定されていた場合、階層設定部123は、ステップS110において、図2に示される4つのレイヤのうち、レイヤL2乃至L4のパケット、すなわちパケットP6乃至P20のパケットを廃棄し、ステップS111において、図2に示されるレイヤL1のパケット、すなわちパケットP1乃至P5を、画像受信装置12に送信するデータパケットとして設定する。 For example, the processing of step S106 to step S109, if the variable L is set to L = 1, layer setting unit 123, in step S110, among the four layers shown in Figure 2, the layer L2 to L4 packet, i.e. discards the packet of the packet P6 to P20, in step S111, sets the packet of the layer L1 shown in FIG. 2, that is, the packet P1 to P5, as data packets to be transmitted to the image receiving apparatus 12.
【0094】 [0094]
また、例えば、ステップS106乃至ステップS109の処理により、変数LがL=2に設定されていた場合、階層設定部123は、ステップS110において、図2に示される4つのレイヤのうち、レイヤL3およびL4のパケット、すなわちパケットP11乃至P20のパケットを廃棄し、ステップS111において、図2に示されるレイヤL1およびL2のパケット、すなわちパケットP1乃至P10を、画像受信装置12に送信するデータパケットとして設定する。 Further, for example, by the process of step S106 to step S109, if the variable L is set to L = 2, layer setting unit 123, in step S110, among the four layers shown in FIG. 2, the layer L3 and L4 packet, i.e. discards the packet of the packet P11 to P20, in step S111, sets the packet of layers L1 and L2 shown in FIG 2, i.e. the packet P1 to P10, as data packets to be transmitted to the image receiving apparatus 12 .
【0095】 [0095]
また、例えば、ステップS106乃至ステップS109の処理により、変数LがL=3に設定されていた場合、階層設定部123は、ステップS110において、図2に示される4つのレイヤのうち、レイヤL4のパケット、すなわちパケットP16乃至P20のパケットを廃棄し、ステップS111において、図2に示されるレイヤL1乃至L3のパケット、すなわちパケットP1乃至P15を、画像受信装置12に送信するデータパケットとして設定する。 Further, for example, by the process of step S106 to step S109, if the variable L is set to L = 3, layer setting unit 123, in step S110, among the four layers shown in Figure 2, the layer L4 packet, i.e. discards the packet of the packet P16 to P20, in step S111, sets the packet of the layer L1 to L3 shown in FIG. 2, that is, the packet P1 to P15, as data packets to be transmitted to the image receiving apparatus 12.
【0096】 [0096]
また、例えば、ステップS106乃至ステップS109の処理により、変数LがL=4に設定されていた場合、階層設定部123は、ステップS110において、パケットを廃棄せず、ステップS111において、図2に示されるレイヤL1乃至L4のパケット、すなわちパケットP1乃至P20を、画像受信装置12に送信するデータパケットとして設定する。 Further, for example, by the process of step S106 to step S109, if the variable L is set to L = 4, layer setting unit 123, in step S110, without discarding the packet, in step S111, shown in FIG. 2 packet layer L1 to L4 are, i.e. the packet P1 to P20, it is set as a data packet to be transmitted to the image receiving apparatus 12.
【0097】 [0097]
ステップS111の処理の後、処理はステップS101に戻り、ステップS101以降の処理が繰り返される。 After step S111, the process returns to step S101, the processes after step S101 are repeated.
【0098】 [0098]
このようにして、画像送信装置11から画像受信装置12に送信する階層符号化データの階層が決定される。 In this way, the layer of the scalable coded data transmitted from the image transmitting apparatus 11 to the image receiving apparatus 12 is determined.
【0099】 [0099]
階層設定部123は、以上の処理による設定に基づいて、パケット生成部105により生成されたデータパケットのうち、画像受信装置12に送信するデータパケットのみをパケット生成部105に選択させ、それ以外のデータパケットを廃棄させる。 Layer setting unit 123, based on the setting by the above processing, among the generated data packet by the packet generation unit 105, to select only the data packets to be transmitted to the image receiving apparatus 12 to the packet generation unit 105, the other to discard the data packet. その後、選択されたデータパケットのみが、パケット生成部105からパケット送信部106に供給される。 Then, only the selected data packets are supplied from the packet generation unit 105 to the packet transmission unit 106.
【0100】 [0100]
次に、図9のフローチャートを参照して、図6のステップS2の処理、すなわち、データパケットを、パケット送信部106から画像受信装置12に送信する送信処理について説明する。 Next, with reference to the flowchart of FIG. 9, the process of step S2 of FIG. 6, that is, the data packet, the transmission process of transmitting from the packet transmitting unit 106 to the image receiving apparatus 12 will be described.
【0101】 [0101]
パケット送信部106は、パケット生成部105から、送信すべきパケットとして設定されたデータパケットの供給を受けて、ステップS151において、送信するデータパケットの階層iをi=1に設定する。 Packet transmission unit 106 from the packet generation unit 105, supplied with set data packet as the packet to be transmitted, in step S151, the setting a hierarchy i in the data packet to be transmitted to the i = 1. その後、処理はステップS152に進む。 After that, the process proceeds to step S152.
【0102】 [0102]
ステップS152において、パケット送信部106は、階層iのデータパケットのパケットヘッダに、送信時刻を記録して、データパケットを画像受信装置12に送信する。 In step S152, the packet transmitting unit 106, the packet header of the data packets of the hierarchy i, to record the transmission time, transmits the data packet to the image receiving apparatus 12. その後、処理はステップS153に進む。 After that, the process proceeds to step S153.
【0103】 [0103]
ステップS153において、パケット送信部106は、階層iを1だけインクリメントする。 In step S153, the packet transmitting unit 106 is incremented by one hierarchy i. その後、処理はステップS154に進む。 After that, the process proceeds to step S154.
【0104】 [0104]
ステップS154において、パケット送信部106は、階層iが、図8のフローチャートのステップS106乃至ステップS109の処理により設定された変数Lより大きいか否かを判定し、階層iが変数Lより大きくない場合(階層iが変数L以下の場合)、処理はステップS152に戻り、ステップS152以降の処理が繰り返される。 In step S154, the packet transmitting unit 106, the hierarchy i may determine whether or not larger than the variable L set in the processing in step S106 through step S109 in the flowchart of FIG. 8, if the hierarchy i is not greater than the variable L (If the hierarchy i is less than the variable L), the process returns to step S152, the processes in and after step S152 are repeated. そして、ステップS154において、階層iが変数Lより大きいと判定された場合、パケット送信部106は、データパケットの送信を終了する。 Then, in step S154, if the hierarchy i is determined to be larger than the variable L, the packet transmission unit 106 ends the transmission of data packets.
【0105】 [0105]
例えば、変数LがL=3であった場合、まず、ステップS151でi=1に設定され、ステップS152において、i=1に対応するレイヤ、すなわち図2においてレイヤL1のパケットP1乃至P5が、画像受信装置12に送信される。 For example, if the variable L is a L = 3, first, set to i = 1 in step S151, the in step S152, the layer corresponding to i = 1, that is, packets P1 to P5 of the layer L1 in FIG. 2, It is transmitted to the image receiving apparatus 12. その後、ステップS153において、iが1だけインクリメントされ、i=2に設定される。 Thereafter, in step S153, i is incremented by 1, it is set to i = 2. そして、ステップS154において、iがLより大きいか否かが判定されるが、i=2であり、iはLより大きくないので、処理はステップS152に戻る。 Then, in step S154, i is whether larger L is determined, a i = 2, i since not greater than L, the process returns to step S152.
【0106】 [0106]
その後、ステップS152において、i=2に対応するレイヤ、すなわち図2においてレイヤL2のパケットP6乃至P10が、画像受信装置12に送信される。 Thereafter, in step S152, the layer corresponding to the i = 2, i.e. the packet P6 to P10 of the layer L2 in FIG. 2, is transmitted to the image receiving apparatus 12. その後、ステップS153において、iが1だけインクリメントされ、i=3に設定される。 Thereafter, in step S153, i is incremented by 1, it is set to i = 3. そして、ステップS154において、iがLより大きいか否かが判定されるが、i=3であり、iはLより大きくないので、処理はステップS152に戻る。 Then, in step S154, i is whether larger L is determined, i = a 3, i since not greater than L, the process returns to step S152.
【0107】 [0107]
その後、ステップS152において、i=3に対応するレイヤ、すなわち図2においてレイヤL3のパケットP11乃至P15が、画像受信装置12に送信される。 Thereafter, in step S152, the layer corresponding to the i = 3, that is, packets P11 to P15 of the layer L3 in FIG. 2, is transmitted to the image receiving apparatus 12. その後、ステップS153において、iが1だけインクリメントされ、i=4に設定される。 Thereafter, in step S153, i is incremented by 1, it is set to i = 4. そして、ステップS154において、iがLより大きいか否かが判定されるが、i=4であり、iはLより大きいので、処理が終了される。 Then, in step S154, i is whether larger L is determined, i = a 4, i is therefore greater than L, the processing is terminated.
【0108】 [0108]
以上のようにして、画像送信装置11から画像受信装置12に対して、1階層分ずつ、データパケットが送信される。 As described above, the image receiving apparatus 12 from the image transmitting apparatus 11, by one hierarchy minute, the data packet is transmitted.
【0109】 [0109]
以上のようにして、データパケットを送信するようにした場合、画像送信装置11から画像受信装置12に送信されるデータパケットの個数は、例えば、図10のように制御される。 As described above, when to transmit the data packet, number of data packets transmitted from the image transmitting apparatus 11 to the image receiving apparatus 12 is controlled, for example, as shown in Figure 10.
【0110】 [0110]
図10は、図1と同様、縦軸が、ウィンドウサイズを表し、横軸が時間軸を表している。 Figure 10 is similar to FIG. 1, the vertical axis represents the window size, the horizontal axis represents time axis. 図10のグラフにおいては、時刻t0乃至t1の間、レイヤL1に相当する5個のパケットP1乃至P5が送信するデータパケットとして設定され、時刻t1乃至t2の間、レイヤL1およびL2に相当する10個のパケットP1乃至P10が送信するデータパケットとして設定され、時刻t2乃至t3の間、レイヤL1乃至L3に相当する15個のパケットP1乃至P15が送信するデータパケットとして設定され、時刻t3乃至t4の間、レイヤL1およびL2に相当する10個のパケットP1乃至P10が送信するデータパケットとして設定され、時刻t4乃至t5の間、レイヤL1乃至L3に相当する15個のパケットP1乃至P15が送信するデータパケットとして設定され、時刻t5乃至t6の間、レイヤL1およびL2に相当 In the graph of FIG. 10, between times t0 to t1, 5 pieces of packet P1 to P5 corresponding to the layer L1 is set as a data packet to be transmitted, between the times t1 to t2, which corresponds to layer L1 and L2 10 number of packets P1 to P10 is set as a data packet to be transmitted, between the times t2 to t3, 15 pieces of packets P1 to P15 corresponding to the layer L1 through L3 is set as a data packet to be transmitted, from the instant t3 to t4 during ten packets P1 to P10 corresponding to layer L1 and L2 is set as a data packet to be transmitted, data between times t4 to t5, 15 pieces of packets P1 to the P15 corresponding to layer L1 to L3 transmits is set as a packet, between times t5 to t6, it corresponds to layer L1 and L2 る10個のパケットP1乃至P10が送信するデータパケットとして設定され、時刻t6乃至t7の間、レイヤL1乃至L3に相当する15個のパケットP1乃至P15が送信するデータパケットとして設定され、時刻t7以降、レイヤL1およびL2に相当する10個のパケットP1乃至P10が送信するデータパケットとして設定されている。 That 10 packets P1 to P10 is set as a data packet to be transmitted, during time t6 to t7, 15 pieces of packets P1 to P15 corresponding to the layer L1 through L3 is set as a data packet to be transmitted, after the time t7 , 10 packets P1 to P10 corresponding to layer L1 and L2 are set as the data packet to be transmitted.
【0111】 [0111]
図11は、図10に示される、本発明を適用した場合の送信パケット数の推移を、図1の従来例と比較した図である。 Figure 11 is illustrated in FIG. 10, the transition number of transmission packets in the case of applying the present invention, is a graph comparing the conventional example of FIG.
【0112】 [0112]
図11において、図1の従来例の送信パケットの個数の推移が、点線で示されている。 11, changes in the number of transmission packets in the conventional example of FIG. 1 is shown by a dotted line. また、図10に示される、本発明を適用した場合の送信パケット数の推移が、実線で示されている。 Further, as shown in FIG. 10, changes in the number of transmitted packets in the case of applying the present invention is shown in solid lines. 図11において、斜線で示された範囲のパケットは、従来例において、画像送信装置11から画像受信装置12に送信されても、画質の向上が期待できないデータを含むパケットである。 11, the range of packets indicated by hatching, in the conventional example, be transmitted from the image transmitting apparatus 11 to the image receiving apparatus 12, a packet including the data that improve the image quality can not be expected.
【0113】 [0113]
各レイヤを構成するデータパケットを、一まとめにして、画像送信装置11から画像受信装置12に送信することにより、画像受信装置12は、受信されたデータパケットのデータを全て利用して、より高画質な画像を提供することができ、画像送信装置11から画像受信装置12に対して無駄に送信するデータを無くすことが可能となる。 The data packets constituting each layer, as a block, by transmitting from the image transmitting apparatus 11 to the image receiving apparatus 12, the image receiving apparatus 12, all the data of the received data packets using a higher can provide quality images, it is possible to eliminate the data to be transmitted wastefully to the image transmitting apparatus 11 the image receiving apparatus 12.
【0114】 [0114]
また、図11において、時刻t0乃至t1の間、従来のレート制御では、送信パケット数が5個未満であるため、画像受信装置12は、これらのデータパケットを受信しても、画像を再現することができない。 Further, in FIG. 11, between times t0 to t1, the conventional rate control, since the number of transmission packets is less than 5, the image receiving apparatus 12 also receive these data packets, to reproduce the image it can not be. また、図11において、時刻t2乃至t3の間、時刻t4乃至t5の間、および時刻t6乃至t7の間においては、送信パケット数は9個であるため、これらのデータパケットを受信した画像受信装置12は、受信したデータパケットのうち、4個を利用することができなかった。 Further, in FIG. 11, between the times t2 to t3, between times t4 to t5, and in between the instant t6 to the instant t7, because the number of transmission packets is nine, the image receiving apparatus receives the data packets 12, among the received data packets, can not be utilized four.
【0115】 [0115]
それに対して、本発明においては、時刻t0から、送信パケット数が1つのレイヤ分である5個に設定されているため、画像受信装置12は、データパケットの受信開始直後から、データをデコードして画像を再生することができる。 In contrast, in the present invention, from the time t0, since the number of transmitted packets is set to five is worth one layer, the image receiving apparatus 12, immediately after start of reception of data packets, decodes the data images can be reproduced Te. 本発明においては、レイヤ単位で、パケットを一まとめに増減させることにより、無駄なデータパケットの送受信をなくすことができる。 In the present invention, on a per layer basis, by increasing or decreasing the packet to collectively, it is possible to eliminate the transmission and reception of unnecessary data packets.
【0116】 [0116]
ところで、図11において、斜線で示された部分は、送信可能なパケット数の余裕を表しているということもできる。 Incidentally, in FIG. 11, the portion indicated by oblique lines, it can be said that represents the margin of the number of transmittable packets. そこで、この余裕を利用して、冗長データを送信するようにしても良い。 Therefore, by utilizing this margin, it may transmit the redundant data.
【0117】 [0117]
図12は、送信可能なパケット数の余裕を利用して、エラー訂正用の冗長データを送信するようにした場合における、画像送信装置11のレート制御処理を表すフローチャートである。 Figure 12 utilizes a margin of the number of transmittable packets, in the case of so as to transmit the redundant data for error correction is a flowchart illustrating a rate control process of the image transmission apparatus 11.
【0118】 [0118]
図12のフローチャートの、ステップS201乃至ステップS211の処理は、図8のステップS101乃至ステップS111の処理と同様であるため、説明を省略する。 Of the flowchart of FIG. 12, steps S201 to S211 are the same as steps S101 to S111 in FIG. 8, a description thereof will be omitted. 図12においては、ステップS211の処理の後、ステップS212において、階層設定部123は、n−(L×5)個分の冗長データを、送信するパケットとして設定する。 In Figure 12, after the processing in step S211, in step S212, the layer setting unit 123 sets n- the (L × 5) pieces worth of redundant data, as a packet to be transmitted. すなわち、階層設定部123は、ステップS205で算出された送信パケット数nから、ステップS211で設定された、送信するレイヤのパケット数を差し引いた余りの個数分だけ、エラー訂正用の冗長データを、送信するパケットとして設定する。 That is, the layer setting unit 123, a transmission packet number n calculated in step S205, is set in step S211, only the number portion of the remainder obtained by subtracting the number of packets of layers to be transmitted, the redundant data for error correction, It is set as a packet to be transmitted.
【0119】 [0119]
その後、処理はステップS201に戻り、ステップS201以降の処理が繰り返される。 Thereafter, the process returns to step S201, the processes in and after step S201 are repeated.
【0120】 [0120]
以上のように、ステップS205で算出された送信パケット数nから、ステップS211で設定された、送信するレイヤのパケット数を差し引いた余りの個数分だけ、エラー訂正用の冗長データを、送信するパケットとして設定した場合、階層設定部123は、パケット生成部105に、n−(L×5)個分のエラー訂正用の冗長データを、送信するパケットとして作成するように指令する。 As described above, the packet from the transmission packet number n calculated in step S205, is set in step S211, only the number portion of the remainder obtained by subtracting the number of packets of layers to be transmitted, the redundant data for error correction, and transmits when configured as a hierarchical setting unit 123, the packet generating unit 105, n-a (L × 5) pieces worth redundant data for error correction of, instructs to create a packet to be transmitted. パケット生成部105は、階層設定部123からの指令に従って、n−(L×5)個分のエラー訂正用の冗長データを、送信するパケットとして作成する。 Packet generating unit 105 according to the instruction from the layer setting unit 123, to create n- and (L × 5) pieces worth redundant data for error correction of a packet to be transmitted.
【0121】 [0121]
以上のように、余り個数分だけ、エラー訂正用の冗長データを送信することにより、画像受信装置12は、パケットの欠損が発生しても、エラー訂正用の冗長データから、欠損したパケットのデータに対応するデータを作成することができる可能性がある。 As described above, only the remainder number fraction, by transmitting redundant data for error correction, the image receiving apparatus 12, even if loss of packet occurs, the redundant data for error correction, data of missing packets it may be possible to create a corresponding data. 従って、画像受信装置12は、画像送信装置11に対して、欠損したパケットの再送要求をしなければならない可能性を減少させることができる。 Thus, the image receiving apparatus 12, the image transmission apparatus 11, the possibility must be a retransmission request for the missing packet may be reduced.
【0122】 [0122]
ところで、ネットワーク10が優先制御を提供する場合、優先度を設定して、全データパケットを送信し、優先度の低いデータパケットが何個、画像受信装置12に届いたかを測定することにより、ネットワーク10にどの程度、帯域が空いているかを推測することができる。 However, if the network 10 to provide a priority control, by setting the priority, and transmits all data packets, how many low priority data packets, by measuring whether arriving at the image receiving apparatus 12, the network how to 10, whether the band is vacant can be inferred.
【0123】 [0123]
例えば、理想的な送信パケット数nがn=12である場合、画像送信装置11は、レイヤL1およびL2の10個のデータパケット(パケットP1乃至P10)を、高優先度で送信し、レイヤL3およびL4のデータパケットを低優先度で送信する。 For example, if an ideal transmission packet number n is n = 12, the image transmission apparatus 11, the 10 data packets of the layer L1 and L2 (packet P1 to P10), and transmits a high priority, the layer L3 and L4 data packets transmitted in a low priority. そして、画像受信装置12からの応答パケットに基づいて、画像受信装置12に届いたデータパケットの個数を特定する。 Then, based on the response packet from the image receiver 12, it identifies the number of data packets that arrive at the image receiving apparatus 12. 例えば、画像受信装置12に、7個のデータパケットが届いた場合、画像送信装置11は、あと7個分のデータパケットを送信するだけの帯域の余裕があると判断し、それ以降の理想的な送信パケット数nの値をn=10+7=17と設定する。 For example, the image receiving apparatus 12, when arrived seven data packets, the image transmission apparatus 11 determines that there is a margin of the band only transmits data packets of seven minutes later, ideally the subsequent the value of Do transmission packet number n is set to n = 10 + 7 = 17. このようにしても良い。 In this way it may be.
【0124】 [0124]
次に、図13のフローチャートを参照して、優先度の高いレイヤのデータを優先して送信する場合の画像送信装置11のレート制御処理について説明する。 Next, with reference to the flowchart of FIG. 13 will be described rate control process of the image transmission apparatus 11 for sending with priority data of higher priority layer.
【0125】 [0125]
図13のフローチャートの、ステップS231乃至ステップS239の処理は、図8のステップS101乃至ステップS109の処理と同様であるため、説明を省略する。 Of the flowchart of FIG. 13, the processing of step S231 through step S239 are the same as steps S101 to S109 in FIG. 8, a description thereof will be omitted. 図13においては、ステップS238の処理の後、ステップS240において、階層設定部123は、下位のL層までのレイヤのデータパケットを、高優先度で画像受信装置12に送信するパケットとして設定する。 13, after the processing in step S238, in step S240, the hierarchy setting unit 123 sets the data packets of the layer to the lower L layer, as a packet to be transmitted to the image receiving apparatus 12 with high priority. 例えば、変数L=2である場合、階層設定部123は、図2のレイヤL1およびL2のデータパケットを、高優先度のパケットとして設定する。 For example, if the variable L = 2, layer setting unit 123, the data packets of the layer L1 and L2 in FIG. 2, is set as high priority packets.
【0126】 [0126]
その後、ステップS241において、階層設定部123は、(L+1)層以上のレイヤのデータパケットを、低優先度で画像受信装置12に送信するパケットとして設定する。 Thereafter, in step S241, the hierarchy setting unit 123 sets as a packet for transmitting data packets (L + 1) layer and higher layers, the image receiving apparatus 12 at a low priority. 例えば、変数L=2である場合、階層設定部123は、図2のレイヤL3およびL4のデータパケットを、低優先度のパケットとして設定する。 For example, if the variable L = 2, layer setting unit 123, the data packets of the layer L3 and L4 of FIG. 2 is set as a low priority packet.
【0127】 [0127]
ステップS241の処理の後、ステップS242において、階層設定部123は、応答パケットに基づいて、送信パケット数nを設定する。 After step S241, in step S242, the hierarchy setting unit 123, based on the response packet, it sets the transmission packet number n. すなわち、応答パケットには、損失パケットIDが含まれているので、この損失パケットIDを基に、何個のデータパケットが、画像受信装置12に届いたかを求めることができる。 That is, the response packet, because it contains lost packets ID, based on the loss packet ID, how many data packets, or can be determined arriving at the image receiving apparatus 12. そこで、階層設定部123は、損失パケットIDを基に、低優先度で送信したデータパケットのうち、画像受信装置12に届いたデータパケットの個数を算出し、算出した値を、現在設定されている送信パケット数nに足し算して、新たな送信パケット数nを算出する。 Therefore, layer setting unit 123, based on the lost packet ID, among the data packets transmitted by the low priority, and calculates the number of data packets that arrive at the image receiving apparatus 12, the calculated values, the currently set and addition to the transmission packet number n are, for calculating a new transmit packet number n.
【0128】 [0128]
その後、処理はステップS236に戻り、ステップS236以降の処理が繰り返される。 Thereafter, the process returns to step S236, the processes in and after step S236 are repeated.
【0129】 [0129]
以上のように、優先度の高いレイヤのデータを優先して、送信するようにしてもよい。 As described above, with priority data of higher priority layer, it may be transmitted.
【0130】 [0130]
なお、図13のフローチャートの処理においては、ネットワーク10の帯域の空き容量を推測することはできるが、たとえ1つのレイヤ分、余分にデータパケットが画像受信装置12に届いたとしても、それが、あるレイヤを構成する全パケットが揃うとは限らない。 In the process of the flowchart of FIG. 13, but to estimate the bandwidth available capacity of the network 10 may, if one layer component, even extra data packet arrives to the image receiving apparatus 12, it, not necessarily all packets constituting a certain layer are aligned. そこで、現在高優先度で送信しているレイヤより、1つ上位のレイヤのデータパケットだけ、低優先度で送信するようにしても良い。 Therefore, from the layer that is transmitted in the current high priority, only the data packets of one upper layer, may be transmitted with low priority. 次に、図14のフローチャートを参照して、この場合の画像送信装置11のレート制御処理について説明する。 Next, with reference to the flowchart of FIG. 14 will be described rate control process of the image transmission apparatus 11 in this case.
【0131】 [0131]
図14のフローチャートの、ステップS261乃至ステップS270、並びにステップS272の処理は、図13のステップS231乃至ステップS240、並びにステップS242の処理と同様であるため、説明を省略する。 Processing of the flowchart of step S261 through step S270, and step S272 in FIG. 14, since step S231 to step S240 of FIG. 13, and is similar to the process in step S242, the description thereof is omitted. 図14においては、ステップS270の処理の後、ステップS271において、階層設定部123は、(L+1)層のレイヤのデータパケットを、低優先度で画像受信装置12に送信するパケットとして設定する。 In Figure 14, after the process of step S270, in step S271, the hierarchy setting unit 123 sets as a packet for transmitting data packets of layer (L + 1) layer, the image receiving apparatus 12 at a low priority. 例えば、変数L=2である場合、階層設定部123は、図2のレイヤL3のデータパケットを、低優先度のパケットとして設定する。 For example, if the variable L = 2, layer setting unit 123, the data packets of the layer L3 of Fig. 2 is set as a low priority packet. その後、処理はステップS272に進む。 After that, the process proceeds to step S272.
【0132】 [0132]
以上のようにすることにより、例えば、レイヤL1を構成するパケットP1乃至P5を高優先度で送信し、レイヤL2を構成するパケットP6乃至P10を低優先度で送信した結果、レイヤL1およびL2を構成する全パケットP1乃至P10が、画像受信装置12に届いた場合、それ以降、レイヤL1およびL2を構成するパケットP1乃至P10を、高優先度で送信し、レイヤL3を構成するパケットP11乃至P15を低優先度で送信することになり、結果的に、より多くの階層符号化データを送信することが可能となる。 By doing as described above, for example, a packet P1 to P5 constituting the layer L1 is transmitted with high priority, the result of the packet P6 to P10 constituting the layer L2 transmitted at low priority, the layers L1 and L2 All packets P1 to P10 constituting If the arriving at the image receiving apparatus 12, and thereafter, the packet P1 to P10 constituting the layers L1 and L2, and sends a high-priority, packet P11 to P15 constituting the layer L3 the will be sent at low priority, as a result, it is possible to send more hierarchically encoded data. 従って、外部機器が、画像受信装置12から階層符号化データを取得し再生した場合、より高精細な画像を表示することが可能となる。 Accordingly, the external device obtains the hierarchically encoded data from the image receiving apparatus 12 when playing back, it is possible to display a higher-definition images.
【0133】 [0133]
以上、説明したように、本発明によれば、単位時間当りに送信可能なパケット数が増加した場合、レイヤ(階層)の区切り単位分だけ、送信可能なパケット数が増加するまで、送信パケット数の増加を行なわないようにし、単位時間当りに送信可能なパケット数が減少した場合、送信可能なパケット数以下になるように、レイヤ(階層)の区切り単位分だけ、パケット数を減少させるようにしたので、無駄に送受信するデータパケットをなくすことができ、より効率的に、データの送受信を行なうことが可能となる。 As described above, according to the present invention, when the number of transmittable packets increases per unit time, only delimited unit of layers (hierarchy), until the number of transmittable packets increases, the number of transmitted packets Separate the increased, if the number of packets that can be transmitted per unit time is reduced, so that the following number of transmittable packets, only delimited unit of layers (hierarchy), to reduce the number of packets since the, it is possible to eliminate the data packets to be wastefully transmitted and received more efficiently, it is possible to transmit and receive data. また、画像受信装置12の側でも、受信したデータパケットから、利用することができないデータパケットを選り分ける処理を省略することが可能となる。 Also, on the side of the image receiving apparatus 12, from the received data packet, it is possible to omit the process panning data packets that can not be utilized.
【0134】 [0134]
なお、以上の説明においては、図2に示されるような、4つのレイヤを有し、1つのレイヤが5個のパケットに分割される階層符号化データの場合を例にしているが、階層符号化データであれば、レイヤの数、および1レイヤ当りのパケット数は、図2に示されるような個数でなくても良い。 In the above description, as shown in FIG. 2, it has four layers, although the case of hierarchically encoded data are divided one layer within five packets as an example, hierarchical encoding if data, the number of layers, and the number of packets per layer may not be the number shown in FIG.
【0135】 [0135]
また、本発明は、実時間ストリーミングに適用することも可能である。 Further, the present invention can also be applied to a real-time streaming.
【0136】 [0136]
上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。 The series of processes described above, can be executed by hardware, it may otherwise be executed by software. 一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行させることが可能な、例えば汎用のパーソナルコンピュータなどに記録媒体からインストールされる。 When the series of processes is executed by software, a program constituting the software is installed into a computer embedded in dedicated hardware, or by installing various programs, thereby executing various functions possible is installed from a recording medium, for example, a general-purpose personal computer.
【0137】 [0137]
図15は、画像送信装置11、または画像受信装置12をソフトウェアにより実現する場合の情報処理装置の一実施の形態の構成を示している。 Figure 15 shows the configuration of an embodiment of an information processing apparatus in the case of realizing the image transmission device 11 or the image receiving apparatus 12, by software. パーソナルコンピュータ400のCPU401は、パーソナルコンピュータ400の動作の全体を制御する。 CPU401 of personal computer 400 controls the overall operation of the personal computer 400. また、CPU401は、バス404および入出力インターフェース405を介してユーザからキーボードやマウスなどからなる入力部406から指令が入力されると、それに対応してROM(Read Only Memory)402に格納されているプログラムを実行する。 Further, CPU 401 is stored from the input unit 406 composed of a keyboard and a mouse by the user through the bus 404 and an input-output interface 405 a command is input, and correspondingly the ROM (Read Only Memory) 402 to run the program. あるいはまた、CPU401は、ドライブ410に接続された磁気ディスク421、光ディスク422、光磁気ディスク423、または半導体メモリ424から読み出され、記憶部408にインストールされたプログラムを、RAM(Random Access Memory)403にロードして実行する。 Alternatively, CPU 401 may be a magnetic disk 421 connected to the drive 410, read from the optical disk 422, a magneto-optical disk 423 or semiconductor memory 424, a program installed in the storage unit 408, RAM (Random Access Memory) 403 loaded to run. これにより、上述した画像送信装置11、または画像受信装置12の機能が、ソフトウェアにより実現されている。 Thus, the function of the image transmission device 11 or the image receiving apparatus 12, described above, are implemented by software. さらに、CPU401は、通信部409を制御して、外部と通信し、データの授受を実行する。 Further, CPU 401 controls the communication unit 409 to communicate with the outside, to execute the exchange of data. また、入出力インタフェース405には、ディスプレイやスピーカなどにより構成される出力部407も接続されている。 Further, the input-output interface 405 is also connected configured output unit 407 by a display and a speaker.
【0138】 [0138]
プログラムが記録されている記録媒体は、図15に示すように、コンピュータとは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク421(フレキシブルディスクを含む)、光ディスク422(CD-ROM(Compact Disk-Read Only Memory),DVD(Digital Versatile Disk)を含む)、光磁気ディスク423(MD(Mini-Disc)を含む)、もしくは半導体メモリ424などよりなるパッケージメディアにより構成されるだけでなく、コンピュータに予め組み込まれた状態でユーザに提供される、プログラムが記録されているROM402や、記憶部408に含まれるハードディスクなどで構成される。 Recording medium on which a program is recorded, (including a flexible disk), as shown in FIG. 15, separately from the computer, is distributed for providing the program to a user, the magnetic disk 421 on which the program is recorded, optical disk 422 (CD-ROM (Compact disk-Read Only memory), comprises a DVD (Digital Versatile disk)), (including MD (Mini-disc)) magneto-optical disk 423, or by the package medium such as semiconductor memory 424 but also formed, is provided to the user in a state of being stored in advance in a computer, program or ROM402 that is recorded, a hard disk included in the storage unit 408.
【0139】 [0139]
尚、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理は、もちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理を含むものである。 In this specification, steps describing the program recorded on the recording medium, a process time series in is performed in the order as described, of course, need not be performed chronologically. Parallel or in which the processing operations which are performed separately.
【0140】 [0140]
また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。 Further, in the present specification, the system represents the entire apparatus including a plurality of devices.
【0141】 [0141]
【発明の効果】 【Effect of the invention】
以上のように、第1の本発明によれば、ネットワークを介して、情報を送受信することができる。 As described above, according to the first aspect of the present invention, it is possible via a network, to transmit and receive information. また、第1の本発明によれば、より効率的に、情報を送受信することができる。 Further, according to the first invention, it is possible to transmit and receive more efficiently, information. さらに、第1の本発明によれば、ネットワークの帯域の空き領域を利用して、エラー訂正を行なうことができる。 Furthermore, according to the first aspect of the present invention, by utilizing the free space of the bandwidth of the network, it is possible to perform error correction. また、第1の本発明によれば、ネットワークの帯域の空き容量を予測することができる。 Further, according to the first invention, it is possible to predict the available capacity of the network bandwidth.
【0142】 [0142]
第2の本発明によれば、ネットワークを介して、情報を送信することができる。 According to a second aspect of the present invention, it is possible via the network, transmits information. また、第2の本発明によれば、より効率的に、情報を送信することができる。 Further, according to the second invention, it is possible to transmit more efficiently, information. さらに、第2の本発明によれば、ネットワークの帯域の空き領域を利用して、エラー訂正を行なうことができる。 Furthermore, according to the second aspect of the present invention, by utilizing the free space of the bandwidth of the network, it is possible to perform error correction. また、第2の本発明によれば、ネットワークの帯域の空き容量を予測することができる。 Further, according to the second invention, it is possible to predict the available capacity of the network bandwidth.
【図面の簡単な説明】 BRIEF DESCRIPTION OF THE DRAWINGS
【図1】従来の送信パケット数の制御を説明するための図である。 1 is a diagram for explaining the control of a conventional number of packets sent.
【図2】JPEG2000の符号化方式により符号化された1フレーム分のパケットの例を示す図である。 2 is a diagram showing an example of a JPEG2000 coding scheme for one frame is encoded by the packet.
【図3】本発明を適用した情報処理システムの構成例を示すブロック図である。 3 is a block diagram showing a configuration example of an information processing system according to the present invention.
【図4】画像送信装置の構成例を示すブロック図である。 4 is a block diagram showing the arrangement of an image transmission apparatus.
【図5】画像受信装置の構成例を示すブロック図である。 5 is a block diagram showing a configuration example of an image receiving apparatus.
【図6】画像送信装置の画像送信処理、および画像受信装置の画像受信処理を説明するフローチャートである。 [6] image transmission processing of the image transmission apparatus, and is a flowchart illustrating an image receiving process of the image receiving apparatus.
【図7】画像受信装置の確認応答処理を説明するフローチャートである。 7 is a flowchart illustrating an acknowledgment process of the image receiving apparatus.
【図8】画像送信装置のレート制御処理を説明するフローチャートである。 8 is a flowchart illustrating a rate control process of the image transmission apparatus.
【図9】図6のステップS2を詳細に説明するフローチャートである。 9 is a flowchart illustrating in detail the step S2 of FIG.
【図10】本発明における送信パケット数の制御を説明する図である。 Is a diagram illustrating the control of the number of transmission packets in the present invention; FIG.
【図11】本発明における送信パケット数の制御を従来の送信パケット数の制御と比較する図である。 11 is a diagram of the control of the number of transmission packets in the present invention compared with the conventional control of number of packets sent.
【図12】画像送信装置のレート制御処理を説明する他のフローチャートである。 12 is another flowchart describing the rate control process of the image transmission apparatus.
【図13】画像送信装置のレート制御処理を説明する、さらに他のフローチャートである。 [13] describing the rate control process of the image transmission apparatus, it is yet another flow chart.
【図14】画像送信装置のレート制御処理を説明するフローチャートである。 14 is a flowchart illustrating a rate control process of the image transmission apparatus.
【図15】本発明を適用したコンピュータの一実施の形態の構成例を示すブロック図である。 15 is a block diagram showing a configuration example of an embodiment of a computer according to the present invention.
【符号の説明】 DESCRIPTION OF SYMBOLS
10 ネットワーク, 11 画像送信装置, 12 画像受信装置, 101 操作部, 102 制御部, 103 記録媒体, 104 入力部, 105 パケット生成部, 106 パケット送信部, 107 パケット受信部, 108 レート制御部, 121 送信レート算出部, 122 階層設定部, 151 操作部, 152 制御部, 153 パケット受信部, 154 記録媒体, 155 状態測定部, 156 パケット生成部, 157 パケット送信部, 401 CPU, 402 ROM, 403 RAM, 404 バス, 405 入出力インタフェース, 406 入力部, 407 出力部, 408 記憶部, 409 通信部, 410 ドライブ, 421 磁気ディスク, 422 光ディスク, 423 光磁気ディスク, 424 半導体メモリ 10 network, 11 an image transmitting apparatus, 12 an image receiving apparatus, 101 operation unit, 102 control unit, 103 recording medium, 104 input unit, 105 packet generation unit, 106 packet transmission unit 107 packet receiving unit, 108 the rate control unit, 121 transmission rate calculating unit 122 layer setting unit, 151 operation unit, 152 control unit, 153 packet receiving unit, 154 recording medium, 155 the state measuring unit, 156 packet generating unit, 157 packet transmission unit, 401 CPU, 402 ROM, 403 RAM , 404 bus, 405 input-output interface, 406 input unit, 407 output unit, 408 storage unit, 409 communication unit, 410 drive, 421 a magnetic disk, 422 disc, 423 a magneto-optical disk, 424 a semiconductor memory

Claims (8)

  1. パケット通信により、階層符号化されたデータである階層符号化データを送受信する第1の情報処理装置および第2の情報処理装置から構成される情報処理システムにおいて、 The packet communication in the first information processing apparatus and a second information processing system composed of an information processing apparatus for transmitting and receiving hierarchically encoded data is hierarchically encoded data,
    前記第1の情報処理装置は、 The first information processing apparatus,
    前記階層符号化データをパケット化して、第1のパケットを生成する生成手段と、 Packetizes the hierarchical encoded data, generating means for generating a first packet,
    前記生成手段により生成された前記第1のパケットを、前記第2の情報処理装置に送信する第1の送信手段と、 The first packet generated by the generating means, a first transmitting means for transmitting to said second information processing apparatus,
    前記第1の情報処理装置による前記第1のパケットの送信時刻、および前記第1のパケットの損失に関する情報を含む第2のパケットを、前記第2の情報処理装置から受信する第1の受信手段と、 The first transmission time of the first packet by the information processing apparatus, and a second packet containing information about loss of the first packet, the first receiving means for receiving from the second information processing apparatus When,
    前記第1の受信手段により受信された前記第2のパケットに基づいて、送信する前記第1のパケットのパケット数の基準値を算出する算出手段と、 A calculation means for on the basis of the received second packet, and calculates the reference value of the number of packets of the first packet to be transmitted by said first receiving means,
    前記算出手段により算出された前記基準値に基づいて、前記生成手段によりパケット化する前記階層符号化データの階層を設定する設定手段とを備え、 Based on the reference value calculated by the calculation means, and a setting means for setting the hierarchical coded data hierarchical packetizing by said generating means,
    前記第2の情報処理装置は、 The second information processing apparatus,
    前記第1の情報処理装置より、前記第1のパケットを受信する第2の受信手段と、 From the first information processing apparatus, a second receiving means for receiving the first packet,
    前記第2の受信手段により受信された前記第1のパケットから、前記階層符号化データを取得する取得手段と、 From the first packet received by the second receiving means, obtaining means for obtaining the hierarchical encoded data,
    前記第2の受信手段により受信された前記第1のパケットに基づいて、前記第2のパケットを作成する作成手段と、 Based on said received first packet by said second receiving means, and producing means for producing said second packet,
    前記作成手段により作成された前記第2のパケットを前記第1の情報処理装置に送信する第2の送信手段とを備えることを特徴とする情報処理システム。 The information processing system characterized in that it comprises a second transmission means for transmitting the second packet created by the creation means to the first information processing apparatus.
  2. パケット通信により、階層符号化されたデータである階層符号化データを他の情報処理装置に送信する情報処理装置において、 The packet communication, an information processing apparatus that transmits hierarchically encoded data is hierarchical coded data to another information processing apparatus,
    前記階層符号化データをパケット化して、第1のパケットを生成する生成手段と、 Packetizes the hierarchical encoded data, generating means for generating a first packet,
    前記生成手段により生成された前記第1のパケットを、前記他の情報処理装置に送信する送信手段と、 Transmitting means for transmitting the first packet generated by the generating means, to said other information processing apparatus,
    前記情報処理装置による前記第1のパケットの送信時刻、および前記第1のパケットの損失に関する情報を含む第2のパケットを、前記他の情報処理装置から受信する受信手段と、 And receiving means and said transmission time of the first packet by the information processing apparatus, and a second packet containing information about loss of the first packet, received from the other information processing apparatus,
    前記受信手段により受信された前記第2のパケットに基づいて、送信する前記第1のパケットのパケット数の基準値である第1の数を算出する算出手段と、 A calculation means for on the basis of the received second packet, and calculates a first number which is the reference value of the number of packets of the first packet to be transmitted by the receiving means,
    前記算出手段により算出された前記第1の数に基づいて、前記生成手段によりパケット化する前記階層符号化データの階層を設定する設定手段とを備えることを特徴とする情報処理装置。 Based on said first number calculated by the calculation means, the information processing apparatus comprising: a setting means for setting the hierarchical encoded data hierarchy packetizing by said generating means.
  3. 前記設定手段は、前記生成手段により生成される前記第1のパケットのパケット数が、前記第1の数以下になるように、前記生成手段によりパケット化する前記階層化データの階層を設定することを特徴とする請求項2に記載の情報処理装置。 The setting means, the number of packets of the first packet generated by the generating means, the first number to be less than, set the hierarchical data of the hierarchical packetizing by said generating means the information processing apparatus according to claim 2, wherein.
  4. 前記設定手段は、パケット化する階層として設定された階層の階層符号化データをパケット化した場合に、前記生成手段により生成される前記第1のパケットのパケット数である第2の数が、前記第1の数以下になるように、パケット化する前記階層を設定するとともに、前記第1の数から前記第2の数を差し引いた余りである第3の数を算出し、 The setting means, when a packet of the hierarchically encoded data of the set hierarchy as a hierarchy to packetize, the second number is the number of packets of the first packet generated by said generating means, said such that the first number below and sets the hierarchy to packetize, calculates a third number is a remainder obtained by subtracting the number of the second from the first number,
    前記生成手段は、前記第3の数だけ、冗長データをさらにパケット化して前記第1のパケットを生成することを特徴とする請求項2に記載の情報処理装置。 Said generating means, said only third number, and further packetizing the redundant data processing apparatus according to claim 2, characterized in that to generate the first packet.
  5. 前記設定手段は、優先的に送信する階層の前記階層符号化データをパケット化した場合に、前記生成手段により生成される前記第1のパケットのパケット数である第2の数が、前記第1の数以下になるように、優先的に送信する前記階層を設定するとともに、前記第1の数から前記第2の数を差し引いた余りである第3の数を算出し、 The setting means, when packetizing said hierarchical coded data hierarchy to be transmitted with priority, the second number is the number of packets of the first packet generated by said generating means, said first the number to be less than the calculates and sets the hierarchy preferentially transmitted, the third number is the remainder obtained by subtracting the number of the second from the first number,
    前記生成手段は、優先的に送信する階層の前記階層符号化データをパケット化して、前記第1のパケットを生成するとともに、前記第3の数だけ、優先的に送信しない階層の前記階層符号化データをパケット化して、前記第1のパケットを生成することを特徴とする請求項2に記載の情報処理装置。 Said generating means, and packetizing said hierarchical coded data hierarchy to be transmitted preferentially, to generate a first packet, the hierarchical encoding of the only third number, not preferentially transmitted hierarchically data by packetizing information processing apparatus according to claim 2, characterized in that to generate the first packet.
  6. パケット通信により、階層符号化されたデータである階層符号化データを他の情報処理装置に送信する情報処理装置の情報処理方法において、 The packet communication, an information processing method for an information processing apparatus for transmitting hierarchically encoded data is hierarchical coded data to another information processing apparatus,
    前記階層符号化データをパケット化して、第1のパケットを生成する生成ステップと、 Packetizes the hierarchical encoded data, a generation step of generating a first packet,
    前記生成ステップの処理により生成された前記第1のパケットを、前記他の情報処理装置に送信する送信ステップと、 The first packet generated by the process of the generation step, a transmission step of transmitting to said other information processing apparatus,
    前記情報処理装置による前記第1のパケットの送信時刻、および前記第1のパケットの損失に関する情報を含む第2のパケットを、前記他の情報処理装置から受信する受信ステップと、 A reception step transmission time of the first packet by the information processing apparatus, and a second packet containing information about loss of the first packet, received from the other information processing apparatus,
    前記受信ステップの処理により受信された前記第2のパケットに基づいて、送信する前記第1のパケットのパケット数の基準値である第1の数を算出する算出ステップと、 A calculation step of calculating the number of processing on the basis of the received second packet, the first is the reference value of the number of packets of the first packet to be transmitted the receiving step,
    前記算出ステップの処理により算出された前記第1の数に基づいて、前記生成ステップの処理によりパケット化する前記階層符号化データの階層を設定する設定ステップとを含むことを特徴とする情報処理方法。 Based on said first number calculated by the processing of the calculation step, an information processing method characterized by including a setting step of setting the hierarchical encoded data hierarchy that packet by the process of the generation step .
  7. パケット通信により、階層符号化されたデータである階層符号化データを他の情報処理装置に送信する情報処理装置用のプログラムであって、 The packet communication, a program for an information processing apparatus that transmits hierarchically encoded data is hierarchical coded data to another information processing apparatus,
    前記他の情報処理装置に送信するために、前記階層符号化データをパケット化して、第1のパケットを生成する生成ステップと、 For transmission to the other information processing apparatus, and packetizing said hierarchical coded data, a generating step of generating a first packet,
    前記情報処理装置による前記第1のパケットの送信時刻、および前記第1のパケットの損失に関する情報を含む第2のパケットを、前記他の情報処理装置から受信した場合、受信された前記第2のパケットに基づいて、送信する前記第1のパケットのパケット数の基準値を算出する算出ステップと、 Transmission time of the first packet by the information processing apparatus, and a second packet containing information about loss of the first packet, when received from the other information processing apparatus, received the second based on the packet, a calculating step of calculating a reference value of the number of packets of the first packet to be transmitted,
    前記算出ステップの処理により算出された前記基準値に基づいて、前記生成ステップの処理によりパケット化する前記階層符号化データの階層を設定する設定ステップとを含むことを特徴とするコンピュータが読み取り可能なプログラムが記録されている記録媒体。 Based on the reference value calculated by the processing of the calculation step, the computer, characterized in that it comprises a setting step of setting the hierarchical encoded data hierarchy that packet by the process of the generation step is readable recording medium having a program recorded.
  8. パケット通信により、階層符号化されたデータである階層符号化データを他の情報処理装置に送信する情報処理装置を制御するコンピュータに、 The packet communication, the hierarchically encoded data is hierarchically encoded data to a computer for controlling an information processing apparatus to be transmitted to another information processing apparatus,
    前記他の情報処理装置に送信するために、前記階層符号化データをパケット化して、第1のパケットを生成する生成ステップと、 For transmission to the other information processing apparatus, and packetizing said hierarchical coded data, a generating step of generating a first packet,
    前記情報処理装置による前記第1のパケットの送信時刻、および前記第1のパケットの損失に関する情報を含む第2のパケットを、前記他の情報処理装置から受信した場合、受信された前記第2のパケットに基づいて、送信する前記第1のパケットのパケット数の基準値を算出する算出ステップと、 Transmission time of the first packet by the information processing apparatus, and a second packet containing information about loss of the first packet, when received from the other information processing apparatus, received the second based on the packet, a calculating step of calculating a reference value of the number of packets of the first packet to be transmitted,
    前記算出ステップの処理により算出された前記基準値に基づいて、前記生成ステップの処理によりパケット化する前記階層符号化データの階層を設定する設定ステップとを実行させることを特徴とするプログラム。 Based on the reference value calculated by the processing of the calculation step, a program for causing to execute a setting step of setting the hierarchical encoded data hierarchy that packet by the process of the generation step.
JP2002359736A 2002-12-11 2002-12-11 Information processing system, information processor, information processing method, recording medium and program Abandoned JP2004193992A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002359736A JP2004193992A (en) 2002-12-11 2002-12-11 Information processing system, information processor, information processing method, recording medium and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002359736A JP2004193992A (en) 2002-12-11 2002-12-11 Information processing system, information processor, information processing method, recording medium and program

Publications (1)

Publication Number Publication Date
JP2004193992A true JP2004193992A (en) 2004-07-08

Family

ID=32759044

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002359736A Abandoned JP2004193992A (en) 2002-12-11 2002-12-11 Information processing system, information processor, information processing method, recording medium and program

Country Status (1)

Country Link
JP (1) JP2004193992A (en)

Cited By (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006325103A (en) * 2005-05-20 2006-11-30 Nippon Hoso Kyokai <Nhk> Content transmitter, program thereof, content receiver and program thereof
JP2007281640A (en) * 2006-04-04 2007-10-25 Matsushita Electric Ind Co Ltd Receiver, transmitter, and communication method thereof
JP2008124705A (en) * 2006-11-10 2008-05-29 Oki Comtec Ltd Circuit emulation device
JP2008219170A (en) * 2007-02-28 2008-09-18 Nippon Hoso Kyokai <Nhk> File transmitter and file transmission program, and file receiver and file reception program
JP2009094863A (en) * 2007-10-10 2009-04-30 Nippon Telegr & Teleph Corp <Ntt> System, method, and program for highly reliable multicast data distribution
JP2009527151A (en) * 2006-02-13 2009-07-23 デジタル ファウンテン, インコーポレイテッド Variable fec overhead and streaming and buffering using the protection period
JP2013526795A (en) * 2010-05-10 2013-06-24 サムスン エレクトロニクス カンパニー リミテッド Method and apparatus for transmitting and receiving the layer coding video
JP5357752B2 (en) * 2007-04-05 2013-12-04 ヒューレット−パッカード デベロップメント カンパニー エル.ピー.Hewlett‐Packard Development Company, L.P. Data transmission system and method
US8806050B2 (en) 2010-08-10 2014-08-12 Qualcomm Incorporated Manifest file updates for network streaming of coded multimedia data
US8887020B2 (en) 2003-10-06 2014-11-11 Digital Fountain, Inc. Error-correcting multi-stage code generator and decoder for communication systems having single transmitters or multiple transmitters
JP2014529924A (en) * 2011-08-01 2014-11-13 サムスン エレクトロニクスカンパニー リミテッド Method and system for scalable information packetization and integration for information transmission in a communication network
US8918533B2 (en) 2010-07-13 2014-12-23 Qualcomm Incorporated Video switching for streaming video data
US8958375B2 (en) 2011-02-11 2015-02-17 Qualcomm Incorporated Framing for an improved radio link protocol including FEC
US9136878B2 (en) 2004-05-07 2015-09-15 Digital Fountain, Inc. File download and streaming system
US9178535B2 (en) 2006-06-09 2015-11-03 Digital Fountain, Inc. Dynamic stream interleaving and sub-stream based delivery
US9185439B2 (en) 2010-07-15 2015-11-10 Qualcomm Incorporated Signaling data for multiplexing video components
US9191151B2 (en) 2006-06-09 2015-11-17 Qualcomm Incorporated Enhanced block-request streaming using cooperative parallel HTTP and forward error correction
US9236976B2 (en) 2001-12-21 2016-01-12 Digital Fountain, Inc. Multi stage code generator and decoder for communication systems
US9237101B2 (en) 2007-09-12 2016-01-12 Digital Fountain, Inc. Generating and communicating source identification information to enable reliable communications
US9236885B2 (en) 2002-10-05 2016-01-12 Digital Fountain, Inc. Systematic encoding and decoding of chain reaction codes
US9240810B2 (en) 2002-06-11 2016-01-19 Digital Fountain, Inc. Systems and processes for decoding chain reaction codes through inactivation
US9246633B2 (en) 1998-09-23 2016-01-26 Digital Fountain, Inc. Information additive code generator and decoder for communication systems
US9253233B2 (en) 2011-08-31 2016-02-02 Qualcomm Incorporated Switch signaling methods providing improved switching between representations for adaptive HTTP streaming
US9264069B2 (en) 2006-05-10 2016-02-16 Digital Fountain, Inc. Code generator and decoder for communications systems operating using hybrid codes to allow for multiple efficient uses of the communications systems
US9270414B2 (en) 2006-02-21 2016-02-23 Digital Fountain, Inc. Multiple-field based code generator and decoder for communications systems
US9270299B2 (en) 2011-02-11 2016-02-23 Qualcomm Incorporated Encoding and decoding using elastic codes with flexible source block mapping
US9281847B2 (en) 2009-02-27 2016-03-08 Qualcomm Incorporated Mobile reception of digital video broadcasting—terrestrial services
US9288010B2 (en) 2009-08-19 2016-03-15 Qualcomm Incorporated Universal file delivery methods for providing unequal error protection and bundled file delivery services
US9294226B2 (en) 2012-03-26 2016-03-22 Qualcomm Incorporated Universal object delivery and template-based file delivery
JP2016052000A (en) * 2014-08-29 2016-04-11 日本放送協会 Video transmitter
US9380096B2 (en) 2006-06-09 2016-06-28 Qualcomm Incorporated Enhanced block-request streaming system for handling low-latency streaming
US9386064B2 (en) 2006-06-09 2016-07-05 Qualcomm Incorporated Enhanced block-request streaming using URL templates and construction rules
US9419749B2 (en) 2009-08-19 2016-08-16 Qualcomm Incorporated Methods and apparatus employing FEC codes with permanent inactivation of symbols for encoding and decoding processes
US9432433B2 (en) 2006-06-09 2016-08-30 Qualcomm Incorporated Enhanced block-request streaming system using signaling or block creation
US9485546B2 (en) 2010-06-29 2016-11-01 Qualcomm Incorporated Signaling video samples for trick mode video representations
US9596447B2 (en) 2010-07-21 2017-03-14 Qualcomm Incorporated Providing frame packing type information for video coding
US9843844B2 (en) 2011-10-05 2017-12-12 Qualcomm Incorporated Network streaming of media data
US9917874B2 (en) 2009-09-22 2018-03-13 Qualcomm Incorporated Enhanced block-request streaming using block partitioning or request controls for improved client-side handling

Cited By (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9246633B2 (en) 1998-09-23 2016-01-26 Digital Fountain, Inc. Information additive code generator and decoder for communication systems
US9236976B2 (en) 2001-12-21 2016-01-12 Digital Fountain, Inc. Multi stage code generator and decoder for communication systems
US9240810B2 (en) 2002-06-11 2016-01-19 Digital Fountain, Inc. Systems and processes for decoding chain reaction codes through inactivation
US9236885B2 (en) 2002-10-05 2016-01-12 Digital Fountain, Inc. Systematic encoding and decoding of chain reaction codes
US8887020B2 (en) 2003-10-06 2014-11-11 Digital Fountain, Inc. Error-correcting multi-stage code generator and decoder for communication systems having single transmitters or multiple transmitters
US9236887B2 (en) 2004-05-07 2016-01-12 Digital Fountain, Inc. File download and streaming system
US9136878B2 (en) 2004-05-07 2015-09-15 Digital Fountain, Inc. File download and streaming system
JP4580277B2 (en) * 2005-05-20 2010-11-10 日本放送協会 Content transmitting apparatus and a program, and a content receiving apparatus, and program
JP2006325103A (en) * 2005-05-20 2006-11-30 Nippon Hoso Kyokai <Nhk> Content transmitter, program thereof, content receiver and program thereof
JP2013017191A (en) * 2006-02-13 2013-01-24 Digital Fountain Inc Streaming and buffering using variable fec overhead and protection periods
JP2009527151A (en) * 2006-02-13 2009-07-23 デジタル ファウンテン, インコーポレイテッド Variable fec overhead and streaming and buffering using the protection period
US9136983B2 (en) 2006-02-13 2015-09-15 Digital Fountain, Inc. Streaming and buffering using variable FEC overhead and protection periods
US9270414B2 (en) 2006-02-21 2016-02-23 Digital Fountain, Inc. Multiple-field based code generator and decoder for communications systems
JP4687538B2 (en) * 2006-04-04 2011-05-25 パナソニック株式会社 Receiving apparatus, transmitting apparatus and communication method thereof
JP2007281640A (en) * 2006-04-04 2007-10-25 Matsushita Electric Ind Co Ltd Receiver, transmitter, and communication method thereof
US9264069B2 (en) 2006-05-10 2016-02-16 Digital Fountain, Inc. Code generator and decoder for communications systems operating using hybrid codes to allow for multiple efficient uses of the communications systems
US9209934B2 (en) 2006-06-09 2015-12-08 Qualcomm Incorporated Enhanced block-request streaming using cooperative parallel HTTP and forward error correction
US9628536B2 (en) 2006-06-09 2017-04-18 Qualcomm Incorporated Enhanced block-request streaming using cooperative parallel HTTP and forward error correction
US9386064B2 (en) 2006-06-09 2016-07-05 Qualcomm Incorporated Enhanced block-request streaming using URL templates and construction rules
US9178535B2 (en) 2006-06-09 2015-11-03 Digital Fountain, Inc. Dynamic stream interleaving and sub-stream based delivery
US9432433B2 (en) 2006-06-09 2016-08-30 Qualcomm Incorporated Enhanced block-request streaming system using signaling or block creation
US9191151B2 (en) 2006-06-09 2015-11-17 Qualcomm Incorporated Enhanced block-request streaming using cooperative parallel HTTP and forward error correction
US9380096B2 (en) 2006-06-09 2016-06-28 Qualcomm Incorporated Enhanced block-request streaming system for handling low-latency streaming
JP2008124705A (en) * 2006-11-10 2008-05-29 Oki Comtec Ltd Circuit emulation device
JP4714172B2 (en) * 2007-02-28 2011-06-29 日本放送協会 File receiving apparatus and a file reception program
JP2008219170A (en) * 2007-02-28 2008-09-18 Nippon Hoso Kyokai <Nhk> File transmitter and file transmission program, and file receiver and file reception program
JP5357752B2 (en) * 2007-04-05 2013-12-04 ヒューレット−パッカード デベロップメント カンパニー エル.ピー.Hewlett‐Packard Development Company, L.P. Data transmission system and method
US9237101B2 (en) 2007-09-12 2016-01-12 Digital Fountain, Inc. Generating and communicating source identification information to enable reliable communications
JP2009094863A (en) * 2007-10-10 2009-04-30 Nippon Telegr & Teleph Corp <Ntt> System, method, and program for highly reliable multicast data distribution
US9281847B2 (en) 2009-02-27 2016-03-08 Qualcomm Incorporated Mobile reception of digital video broadcasting—terrestrial services
US9660763B2 (en) 2009-08-19 2017-05-23 Qualcomm Incorporated Methods and apparatus employing FEC codes with permanent inactivation of symbols for encoding and decoding processes
US9288010B2 (en) 2009-08-19 2016-03-15 Qualcomm Incorporated Universal file delivery methods for providing unequal error protection and bundled file delivery services
US9876607B2 (en) 2009-08-19 2018-01-23 Qualcomm Incorporated Methods and apparatus employing FEC codes with permanent inactivation of symbols for encoding and decoding processes
US9419749B2 (en) 2009-08-19 2016-08-16 Qualcomm Incorporated Methods and apparatus employing FEC codes with permanent inactivation of symbols for encoding and decoding processes
US9917874B2 (en) 2009-09-22 2018-03-13 Qualcomm Incorporated Enhanced block-request streaming using block partitioning or request controls for improved client-side handling
JP2013526795A (en) * 2010-05-10 2013-06-24 サムスン エレクトロニクス カンパニー リミテッド Method and apparatus for transmitting and receiving the layer coding video
US9485546B2 (en) 2010-06-29 2016-11-01 Qualcomm Incorporated Signaling video samples for trick mode video representations
US9992555B2 (en) 2010-06-29 2018-06-05 Qualcomm Incorporated Signaling random access points for streaming video data
US8918533B2 (en) 2010-07-13 2014-12-23 Qualcomm Incorporated Video switching for streaming video data
US9185439B2 (en) 2010-07-15 2015-11-10 Qualcomm Incorporated Signaling data for multiplexing video components
US9596447B2 (en) 2010-07-21 2017-03-14 Qualcomm Incorporated Providing frame packing type information for video coding
US9602802B2 (en) 2010-07-21 2017-03-21 Qualcomm Incorporated Providing frame packing type information for video coding
US8806050B2 (en) 2010-08-10 2014-08-12 Qualcomm Incorporated Manifest file updates for network streaming of coded multimedia data
US9456015B2 (en) 2010-08-10 2016-09-27 Qualcomm Incorporated Representation groups for network streaming of coded multimedia data
US9319448B2 (en) 2010-08-10 2016-04-19 Qualcomm Incorporated Trick modes for network streaming of coded multimedia data
US9270299B2 (en) 2011-02-11 2016-02-23 Qualcomm Incorporated Encoding and decoding using elastic codes with flexible source block mapping
US8958375B2 (en) 2011-02-11 2015-02-17 Qualcomm Incorporated Framing for an improved radio link protocol including FEC
JP2014529924A (en) * 2011-08-01 2014-11-13 サムスン エレクトロニクスカンパニー リミテッド Method and system for scalable information packetization and integration for information transmission in a communication network
US9253233B2 (en) 2011-08-31 2016-02-02 Qualcomm Incorporated Switch signaling methods providing improved switching between representations for adaptive HTTP streaming
US9843844B2 (en) 2011-10-05 2017-12-12 Qualcomm Incorporated Network streaming of media data
US9294226B2 (en) 2012-03-26 2016-03-22 Qualcomm Incorporated Universal object delivery and template-based file delivery
JP2016052000A (en) * 2014-08-29 2016-04-11 日本放送協会 Video transmitter

Similar Documents

Publication Publication Date Title
KR101018486B1 (en) Method and system for encapsulating packets
EP1730899B1 (en) Packet scheduling for data stream transmission
US9125073B2 (en) Quality-aware adaptive streaming over hypertext transfer protocol using quality attributes in manifest file
US8621061B2 (en) Adaptive bitrate management for streaming media over packet networks
KR100975176B1 (en) Protocol, information processing system and method, information processing device and method, and recording medium
JP4623616B2 (en) Data transmission method and apparatus
US8711929B2 (en) Network-based dynamic encoding
US7639882B2 (en) Moving picture distribution system, moving picture distribution device and method, recording medium, and program
US7295520B2 (en) System and method of network adaptive real-time multimedia streaming
US7382729B2 (en) Video transmission of layered coded data
US8301796B2 (en) Real-time priority-based media communication
JP4676833B2 (en) The system and method of the scalable media of a distributed streaming
EP1786136B1 (en) Packet retransmission apparatus, communication system and program
JP5058468B2 (en) Method for erasure resilient coding streaming media, medium having computer-executable instructions for performing the method, and system
US20060095942A1 (en) Wireless video transmission system
US20030165150A1 (en) Multi-threshold smoothing
KR100537499B1 (en) Method of generating transmission control parameter and selective retranmission method according to the packet characteristics.
JP4405875B2 (en) Computer readable recording medium storing a generation method and generation device and generation program and the program for correcting errors in data
US7315898B2 (en) Data communication system, data transmission apparatus, data reception apparatus, data communication method, and computer program
RU2497304C2 (en) Dynamic modification of video properties
US20060095944A1 (en) Sender-side bandwidth estimation for video transmission with receiver packet buffer
JP4491257B2 (en) Permissive Control of the data stream to the network based on the end-to-end measurement
EP1345446B1 (en) Video information transmission system, and apparatus and program used for video information transmission system
US20040098748A1 (en) MPEG-4 live unicast video streaming system in wireless network with end-to-end bitrate-based congestion control
JP3882187B2 (en) Flow control system and method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20051206

A762 Written abandonment of application

Free format text: JAPANESE INTERMEDIATE CODE: A762

Effective date: 20070628