JP4433287B2 - Receiving apparatus and method, and program - Google Patents

Receiving apparatus and method, and program Download PDF

Info

Publication number
JP4433287B2
JP4433287B2 JP2004090157A JP2004090157A JP4433287B2 JP 4433287 B2 JP4433287 B2 JP 4433287B2 JP 2004090157 A JP2004090157 A JP 2004090157A JP 2004090157 A JP2004090157 A JP 2004090157A JP 4433287 B2 JP4433287 B2 JP 4433287B2
Authority
JP
Japan
Prior art keywords
hierarchy
unit
transmission
image data
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004090157A
Other languages
Japanese (ja)
Other versions
JP2005277950A (en
Inventor
健治 山根
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to JP2004090157A priority Critical patent/JP4433287B2/en
Publication of JP2005277950A publication Critical patent/JP2005277950A/en
Application granted granted Critical
Publication of JP4433287B2 publication Critical patent/JP4433287B2/en
Application status is Expired - Fee Related legal-status Critical
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は受信装置および方法、並びにプログラムに関し、特に、階層符号化されるデータの伝送に要する、通信網の帯域を通知できるようにした受信装置および方法、並びにプログラムに関する。 The present invention is a receiving apparatus and method, and a program, required for the transmission of data to be hierarchically coded, the receiving apparatus and method to be notified the band of the communication network, and a program.

昨今、ビデオオンデマンドやライブ映像などのストリーミング配信、またはビデオ会議やテレビ電話などのリアルタイム通信において、解像度の低いディスプレイおよび処理能力の低いCPU(Central Processing Unit)を有する携帯電話機から、解像度の高いディスプレイおよび処理能力の高いCPUを有するパーソナルコンピュータ(PC(Personal Computer))まで、解像度や処理能力の異なる複数の受信端末機が、同一のソースから、それぞれの受信端末機の解像度や処理能力に合ったサービスの利用が可能である、階層符号化を利用した通信システムが提案されている。 Recently, streaming, such as video-on-demand and live video, or in a real-time communication such as video conferencing and video phone, high from the mobile phone with low resolution display and a low processing capacity CPU (Central Processing Unit), a resolution display and to a personal computer having a high processing capacity CPU (PC (personal computer)), a plurality of receiving terminal having different resolutions and processing capacity, from the same source, match the resolution and processing capacity of each of the receiving terminal use of the service is possible, the communication system has been proposed which utilizes a hierarchical coding.

このような階層符号化が可能な圧縮・伸張方式として、MPEG(Moving Picture Experts Group)4およびMotion JPEG(Joint Photographic Experts Group)2000がある。 Such hierarchical encoding compression and decompression method capable of, there are MPEG (Moving Picture Experts Group) 4 and Motion JPEG (Joint Photographic Experts Group) 2000.

MPEG4においては、階層符号化技術として、FGS(Fine Granuality Scalability)符号化方式を規格に取り込むことによって、プロファイル化する予定であり、低画質のデータから高画質のデータまで、スケーラブルに配信することが可能であると言われている。 In MPEG4, as the hierarchical encoding technique, by taking FGS the (Fine Granuality Scalability) coding method to the standard, is scheduled to be profiled, the low quality of data to high-quality data, to be delivered to scalable it is said that the possible is.

また、JPEG2000においては、データを周波数成分に変換する方法として、ウェーブレット(Wavelet)変換が用いられている。 Further, in JPEG2000, as a method of converting the data into frequency components, wavelet (Wavelet) conversion is used. JPEG2000においては、このウェーブレット変換の特徴を生かし、復号時の空間解像度を優先してパケット化することや、復号時の画質を優先してパケット化することが可能である。 In the JPEG2000, utilizing the characteristics of the wavelet transform, or be packetized with priority spatial resolution at the time of decoding, it is possible to packetize and prioritize image quality during decoding.

さらに、JPEG2000は、静止画像だけでなく動画像を扱うことができるMotion JPEG2000(Part3)の規格により、階層化したデータをファイルフォーマットで保存することが可能である。 Additionally, JPEG2000 is the standard for Motion JPEG2000 (Part3) capable of handling moving images in addition to still images, it is possible to store the hierarchical data in a file format.

従来、送信側のデータとしては、受信端末機のデータの処理能力に応じた、異なるフォーマットのデータおよび通信網の伝送帯域に応じた大きさのデータを用意する必要があったが、データを階層化することにより、1つのファイルデータから異なる処理能力の受信端末機(受信装置)あてに、受信端末機の処理能力および通信網の伝送帯域に応じたデータを、同時に配信することが可能となる。 Conventionally, as a data transmission side, according to the processing capacity of the data receiving terminal, it was necessary to prepare the size of the data according to the transmission band of the different formats of data and communication networks, data hierarchy by reduction, the receiving terminal (receiving apparatus) addressed different processing capabilities from a single file data, the data corresponding to the transmission band of the processing capability of the receiving terminal and the communication network, it is possible to simultaneously deliver .

また、通常、このような画像データの配信においては、リアルタイム性が必要であるため、通信網において通信する場合、IETF RFC(Internet Engineering Task Force Request For Comments)768で規定されているプロトコルであるUDP(User Datagram Protocol)に従って画像データの伝送を行う。 Also, usually, UDP in the delivery of such image data, since real-time is required, when communicating in a communication network, a IETF RFC (Internet Engineering Task Force Request For Comments) 768 protocol specified in to transmit the image data in accordance with (User Datagram Protocol). さらに、UDPの上のレイヤにおいては、IETF RFC1889で規定されているプロトコルであるRTP(Realtime Transport Protocol)に従った、アプリケーションプログラム毎、すなわち、符号化方式毎に定義されたフォーマットを用いている。 Further, in the layer above the UDP, in accordance with RTP is a protocol defined in IETF RFC1889 (Realtime Transport Protocol), each application program, that is, by using the format defined for each encoding scheme.

従来の送信装置は、送信するパケットに、階層符号化されたデータをペイロードとして格納している(例えば、特許文献1参照)。 The conventional transmission apparatus, the packet to be transmitted, and stores the hierarchically encoded data as payload (e.g., see Patent Document 1). この送信装置においては、階層ごとの優先度を表す優先度情報がパケットのヘッダに付与され、最も優先度が高い1番目の階層から順番に、所定の優先度までの階層に対応するパケットが受信装置あてに送信される。 In this transmission apparatus, the priority information indicating the priority of each layer is given in the header of the packet, highest priority is in order from high first hierarchy, the packet is received that corresponds to the hierarchy to a predetermined priority It is sent to the device addressed.

特開2003−152544号公報 JP 2003-152544 JP

しかしながら、上述した特許文献1に開示されている技術においては、通信網の伝送帯域が分かっており、送信されてくるデータの階層を変更することができたとしても、受信側において、送信装置から送信されてくるデータが何階層のデータから構成されており、各階層のデータを受信するために、どれくらいの伝送帯域が必要であるかを知ることができなかったので、送信されてくるデータの階層を適切に選択することができないという課題があった。 However, in the technique disclosed in Patent Document 1 mentioned above, has been found to transmission band of the communication network, even if it is possible to change the hierarchy of the data transmitted, the receiving side from the transmitting device is composed of a data transmission has been coming data what hierarchy, in order to receive data for each layer, how much the transmission because the band could not be known whether it is necessary, the data transmitted there is a problem that it is not possible to appropriately select a hierarchy.

本発明は、このような状況に鑑みてなされたものであり、受信側において、階層符号化されるデータの伝送に要する通信網の帯域を把握できるようにするものである。 The present invention has been made in view of such circumstances, in the receiving side, is to enable grasping the band of the communication network required for the transmission of data to be hierarchically coded.

本発明の受信装置は、送信される送信データの最も上位の階層を示す送信階層と、送信階層までの送信データを伝送するために必要な通信網の帯域とを示す階層テーブル情報を送信装置から受信するとともに、送信データ、送信された送信データの送信階層を示す送信階層情報、および複数の階層のうちの最上位の階層を示す最大階層情報が格納されたパケットを送信装置から受信する受信手段と、受信した階層テーブル情報を記憶する記憶手段と、パケットの受信時刻およびパケットのパケットサイズに基づいて、パケットの受信時における通信網の帯域である受信帯域を算出する算出手段と、受信した階層テーブル情報を表示するとともに、受信したパケットに格納された送信データ、送信階層情報、および最大階層情報と、受信帯域と Receiving apparatus of the present invention includes a transmission hierarchy shown the highest level of the hierarchy of transmission data transmitted from the transmitting apparatus a hierarchy table information indicating the band of the communication network necessary for transmitting the transmission data to the transmission hierarchy which receives transmission data, transmitted transmission hierarchy information indicating the transmission hierarchy of transmission data, and a plurality of receiving means for receiving from a transmitter a packet maximum hierarchical information is stored that indicates the highest hierarchy of the hierarchy When a storage means for storing the received hierarchical table information, based on the packet size of the received time and packet of the packet, and calculating means for calculating a reception band is the band of the communication network at the time of reception of a packet, the received hierarchy and displays the table information, the transmission data, transmission hierarchy information stored in the received packet, and the maximum hierarchical information, and the reception band 表示される表示画面を表示する表示手段と、ユーザの指示に応じて生成された、送信装置から送信される送信データの送信階層の変更を要求する変更要求を送信装置に送信する送信手段とを備えることを特徴とする。 Display means for displaying a display screen displayed, generated according to a user instruction, and transmitting means for transmitting a change request to the transmitting device requesting a change in the transmit hierarchy of transmission data transmitted from the transmitting device characterized in that it comprises.

受信手段には、送信装置によるパケットの送信前に送信装置から送信されてくる、通信網の帯域を測定するための帯域測定パケットをさらに受信させ、受信した帯域測定パケットに基づいて、送信装置から送信される送信データの送信階層を定めるために用いられる、帯域測定パケットの受信時における通信網の帯域を算出する帯域測定手段をさらに設け、送信手段には、帯域測定手段による測定結果を送信装置にさらに送信させ、表示手段には、測定結果を表示画面に表示させることができる。 The receiving means, transmitted from a transmission device before transmission of a packet by the transmitting device, the communication network further receives a bandwidth measurement packets for measuring bandwidth of, based on the bandwidth measurement packet received from the transmitting device used to define the transmission hierarchy of transmission data to be transmitted, the bandwidth measurement packets further include bandwidth measuring means for calculating the band of the communication network upon reception of, the transmission means, the transmission apparatus the measurement results of band measurement means further transmitted, the display unit may display the measurement result on the display screen.
算出手段には、受信したパケットに基づいて、パケットのロス率をさらに算出させ、表示手段には、表示画面にロス率を表示させることができる。 The calculation means, based on the received packets, further to calculate the loss rate of packets, the display means may display a loss rate on a display screen.

本発明の受信方法またはプログラムは、送信される送信データの最も上位の階層を示す送信階層と、送信階層までの送信データを伝送するために必要な通信網の帯域とを示す階層テーブル情報の送信装置からの受信を制御する第1の受信制御ステップと、受信した階層テーブル情報の記憶を制御する記憶制御ステップと、受信した階層テーブル情報の表示を制御する第1の表示制御ステップと、送信データ、送信された送信データの送信階層を示す送信階層情報、および複数の階層のうちの最上位の階層を示す最大階層情報が格納されたパケットの送信装置からの受信を制御する第2の受信制御ステップと、パケットの受信時刻およびパケットのパケットサイズに基づいて、パケットの受信時における通信網の帯域である受信帯域を算出する Receiving method or program of the present invention includes a transmission hierarchy shown the highest level of the hierarchy of transmission data to be transmitted, the transmission of the hierarchy table information indicating the band of the communication network necessary for transmitting the transmission data to the transmission hierarchy a first controlling reception from device, a storage control step of controlling storage of the received hierarchy table information, a first display control step for controlling the display of the received hierarchy table information, transmits data second reception control for controlling reception from the transmitter of the packet up the hierarchy information is stored that indicates the highest hierarchy of the transmission hierarchy information, and a plurality of hierarchies showing the transmission hierarchy of transmission data transmitted a method, based on the packet size of the received time and packet of the packet, calculates a reception band is the band of the communication network at the time of reception of a packet 出ステップと、受信したパケットに格納された送信データ、送信階層情報、および最大階層情報と、受信帯域とが表示される表示画面の表示を制御する第2の表示制御ステップと、ユーザの指示に応じて生成された、送信装置から送信される送信データの送信階層の変更を要求する変更要求の送信装置への送信を制御する送信制御ステップとを含むことを特徴とする。 A step out, the transmission data stored in the received packet, transmitted hierarchical information, and the maximum hierarchical information, and a second display control step for controlling the display of the display screen and the reception band appears to the user's instruction depending is generated, characterized in that it comprises a transmission control step of controlling the transmission to the transmission apparatus of a change request requesting a change of transmission hierarchy of transmission data transmitted from the transmitting device.

受信装置は、独立した装置であってもよいし、通信装置の受信処理を行うブロックであってもよい。 Receiving apparatus may be an independent device, or may be a block that performs reception processing of the communication device.

本発明の受信装置および方法、並びにプログラムにおいては、送信される送信データの最も上位の階層を示す送信階層と、送信階層までの送信データを伝送するために必要な通信網の帯域とを示す階層テーブル情報が送信装置から受信され、受信された階層テーブル情報が記憶され、受信された階層テーブル情報が表示される。 Receiving apparatus and method of the present invention, and the program hierarchy shown a transmission hierarchy shown the highest level of the hierarchy of transmission data to be transmitted, the bandwidth of the network necessary for transmitting the transmission data to the transmission hierarchy table information is received from the transmitting apparatus, the hierarchical table information received is stored, the hierarchical table information received is displayed. そして、送信データ、送信された送信データの送信階層を示す送信階層情報、および複数の階層のうちの最上位の階層を示す最大階層情報が格納されたパケットが送信装置から受信され、パケットの受信時刻およびパケットのパケットサイズに基づいて、パケットの受信時における通信網の帯域である受信帯域が算出され、受信されたパケットに格納された送信データ、送信階層情報、および最大階層情報と、受信帯域とが表示される表示画面が表示され、ユーザの指示に応じて生成された、送信装置から送信される送信データの送信階層の変更を要求する変更要求が送信装置へ送信される。 Then, the transmission data, transmission hierarchy information indicating the transmitted transmission hierarchy of transmission data, and a packet maximum hierarchical information indicating the top of the hierarchy is stored in the plurality of hierarchy is received from the transmitting apparatus, received packets based on the packet size of the time and packet reception band is the band of the network is calculated at the time of reception of the packet, transmission data stored in the received packet, transmitted hierarchical information, and the maximum hierarchical information, the reception band : it is displayed the display screen to be displayed, generated according to a user instruction, the change request is transmitted to the transmitting device requesting a change in the transmit hierarchy of transmission data transmitted from the transmitting device.

ネットワークとは、少なくとも2つの装置が接続され、ある装置から、他の装置に対して、情報の伝達をできるようにした仕組みをいう。 Network and is at least two devices are connected, from one device to another, means a mechanism that allow the transmission of information. ネットワークを介して通信する装置は、独立した装置どうしであっても良いし、1つの装置を構成している内部ブロックどうしであっても良い。 Devices communicating via the network may be independent apparatuses each other or may be internal blocks making up one device.

また、通信とは、無線通信および有線通信は勿論、無線通信と有線通信とが混在した通信、即ち、ある区間では無線通信が行われ、他の区間では有線通信が行われるようなものであっても良い。 Further, communication may, of course wireless communication and wired communication, communication and radio communication and wire communication are mixed, i.e., at a certain interval wireless communication is performed, be as wired communication may be performed in another section and it may be. さらに、ある装置から他の装置への通信が有線通信で行われ、他の装置からある装置への通信が無線通信で行われるようなものであっても良い。 Furthermore, communication from one device to another is performed in wired communication, communication to device from another device may be such as is done in wireless communications.

本発明によれば、データの受信側において、階層符号化されるデータの伝送に要する通信網の帯域を把握できる。 According to the present invention, the receiving side of the data, the bandwidth of a communication network required for the transmission of data to be hierarchically coded can be grasped.

以下に本発明の実施の形態を説明するが、本明細書に記載の発明と、発明の実施の形態との対応関係を例示すると、次のようになる。 Before describing an embodiment of the present invention below, the invention described herein, the correspondence between the embodiment of the invention, as follows. この記載は、本明細書に記載されている発明をサポートする実施の形態が本明細書に記載されていることを確認するためのものである。 This description is intended to assure that embodiments supporting the invention described herein are described herein. 従って、発明の実施の形態中には記載されているが、発明に対応するものとして、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その発明に対応するものではないことを意味するものではない。 Thus have been described in the embodiments of the invention, as corresponding to the invention, herein even if the embodiments are not described, that matter, the embodiments thereof, the It does not mean that the embodiment does not correspond to the invention. 逆に、実施の形態が発明に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その発明以外の発明には対応しないものであることを意味するものでもない。 Conversely, even if an element is described herein as an embodiment corresponding to an invention, the example in question, also meant to be one which does not correspond to the invention other than that invention Absent.

さらに、この記載は、本明細書に記載されている発明の全てを意味するものではない。 Furthermore, this description should not be construed as restricting that all the inventions described herein. 換言すれば、この記載は、本明細書に記載されている発明であって、この出願では請求されていない発明の存在、すなわち、将来、分割出願されたり、補正により出現、追加される発明の存在を否定するものではない。 That is, the description is the invention described herein, the presence of the invention which is not claimed in this application, i.e., future may be claimed by a divisional application, through amendments of the added invention It does not deny the presence.

本発明によれば、受信装置が提供される。 According to the present invention, the receiving apparatus is provided. この受信装置(例えば、図1のクライアント14)は、送信される送信データの最も上位の階層を示す送信階層と、送信階層までの送信データを伝送するために必要な通信網の帯域とを示す階層テーブル情報(例えば、図8のコンテンツ階層テーブル)を送信装置から受信するとともに、送信データ、送信された送信データの送信階層を示す送信階層情報、および複数の階層のうちの最上位の階層を示す最大階層情報が格納されたパケットを送信装置から受信する受信手段(例えば、図6のUDP通信部151)と、受信した階層テーブル情報を記憶する記憶手段(例えば、図6のコンテンツ階層保持部159)と、パケットの受信時刻およびパケットのパケットサイズに基づいて、パケットの受信時における通信網の帯域である受信帯域を算出 The receiving device (e.g., client 14 of Fig. 1) shows a transmission hierarchy shown the highest level of the hierarchy of transmission data to be transmitted, the bandwidth of the network necessary for transmitting the transmission data to the transmission hierarchy hierarchy table information (e.g., content hierarchy table of FIG. 8) which receives from the transmitting apparatus, transmitting data, transmitting the hierarchical information indicating the transmitted transmission hierarchy of transmission data, and the top of the hierarchy of a plurality of hierarchies maximum hierarchical information receiving means for receiving from a transmitting device is stored packets (eg, UDP communication unit 151 of FIG. 6) showing storage means for storing a, the received hierarchy table information (e.g., content hierarchy holder of FIG. 6 calculated 159), based on the packet size of the received time and packet of the packet, the receiving band is the band of a communication network upon reception of a packet る算出手段(例えば、図6のストリーム情報算出部155)と、受信した階層テーブル情報を表示するとともに、受信したパケットに格納された送信データ、送信階層情報、および最大階層情報と、受信帯域とが表示される表示画面を表示する表示手段(例えば、図6の出力部87)と、ユーザの指示に応じて生成された、送信装置から送信される送信データの送信階層の変更を要求する変更要求を送信装置に送信する送信手段(例えば、図6のTCP通信部158)とを備える。 That calculating means (e.g., stream information calculation unit 155 of FIG. 6) and, displays the received hierarchy table information, and transmit data, transmission hierarchy information stored in the received packet, and the maximum hierarchical information, and the reception band changes There requesting a display means for displaying a display screen displayed (e.g., the output unit 87 of FIG. 6), generated according to a user instruction, a change in the transmit hierarchy of transmission data transmitted from the transmitting device comprising transmitting means for transmitting a request to the transmitting device (eg, TCP communication unit 158 of FIG. 6) and.

また、本発明によれば、受信方法が提供される。 Further, according to the present invention, a receiving method are provided. この受信方法は、送信される送信データの最も上位の階層を示す送信階層と、送信階層までの送信データを伝送するために必要な通信網の帯域とを示す階層テーブル情報(例えば、図8のコンテンツ階層テーブル)の送信装置からの受信を制御する第1の受信制御ステップ(例えば、図13のステップS101)と、受信した階層テーブル情報の記憶を制御する記憶制御ステップ(例えば、図13のステップS102)と、受信した階層テーブル情報の表示を制御する第1の表示制御ステップ(例えば、図13のステップS104)と、送信データ、送信された送信データの送信階層を示す送信階層情報、および複数の階層のうちの最上位の階層を示す最大階層情報が格納されたパケットの送信装置からの受信を制御する第2の受信制御ステ The receiving method includes a transmission hierarchy shown the highest level of the hierarchy of transmission data to be transmitted, hierarchy table information indicating the band of the communication network necessary for transmitting the transmission data to the transmission hierarchy (e.g., in FIG. 8 step of first reception control step (e.g., step S101) in FIG. 13, a storage control step of controlling storage of the received hierarchy table information (e.g., Fig. 13 for controlling the reception from the transmitter of the content hierarchy table) and S102), the first display control step for controlling the display of the received hierarchy table information (e.g., transmission hierarchy information indicating a step S104) in FIG. 13, the transmission data, the transmitted transmission hierarchy of transmission data, and a plurality second reception control stearyl for controlling reception from the transmitter of the packet up the hierarchy information is stored that indicates the highest hierarchy of the hierarchy プ(例えば、図15のステップS121)と、パケットの受信時刻およびパケットのパケットサイズに基づいて、パケットの受信時における通信網の帯域である受信帯域を算出する算出ステップ(例えば、図15のステップS128)と、受信したパケットに格納された送信データ、送信階層情報、および最大階層情報と、受信帯域とが表示される表示画面の表示を制御する第2の表示制御ステップ(例えば、図15のステップS132およびステップS133)と、ユーザの指示に応じて生成された、送信装置から送信される送信データの送信階層の変更を要求する変更要求の送信装置への送信を制御する送信制御ステップ(例えば、図15のステップS127)とを含む。 Flop (e.g., step S121 in FIG. 15) and, based on the packet size of the received time and packet of the packet, step calculation step (for example, 15 to calculate the reception band is the band of the communication network at the time of reception of a packet and S128), the transmission data stored in the received packet, transmitted hierarchical information, and the maximum hierarchical information, the second display control step for controlling the display of the display screen and the reception band is displayed (for example, in FIG. 15 and step S132 and step S133), generated according to a user's instruction, the transmission control step of controlling the transmission to the transmission apparatus of a change request requesting a change of transmission hierarchy of transmission data transmitted from the transmitting device (e.g. It comprises S127) and Figure 15.

このプログラムは、記録媒体に記録することができる。 This program can be recorded on a recording medium.

本発明は、例えば、インターネット電話、遠隔テレビ会議システム、ライブ映像ストリーミング配信システム、またはテレビ電話などのリアルタイムにストリーミングデータを伝送する通信システムに適用できる。 The present invention is, for example, Internet telephone, can be applied to a remote video conference system, live video streaming system or communication system for transmitting streaming data in real time, such as video phone.

図1は、本発明を適用したストリーミング配信システムの一実施の形態を示す図である。 Figure 1 is a diagram showing an embodiment of a streaming distribution system to which the present invention is applied. このストリーミング配信システムにおいては、インターネットなどの通信網13に、サーバ12およびクライアント14が接続されている。 In this streaming distribution system, to the communication network 13 such as the Internet, a server 12 and client 14 are connected.

ビデオカメラ11は、画像を撮像して、撮像した画像に対応する画像データをサーバ12に供給する。 Video camera 11 includes an image by imaging and supplies the image data corresponding to the image captured in the server 12. 例えば、ビデオカメラ11は、動画像を撮像して、動画像に対応する画像データをサーバ12に供給する。 For example, a video camera 11, captures a moving image, and supplies the image data corresponding to the moving image server 12.

画像データは、ストリーミングデータの一例である。 Image data is an example of streaming data. ストリーミングデータは、音声のデータ、またはリアルタイム制御データなど、時間の経過に対応して順次送信または受信が要求されるデータであればよい。 Streaming data, such as audio data or real time control data, may be a data sequence transmission or reception is requested in response to the lapse of time.

サーバ12は、通信網13の帯域を測定するための帯域測定パケットを、通信網13を介して、クライアント14あてに送信する。 Server 12, the bandwidth measurement packets for measuring the bandwidth of the communications network 13, via the communication network 13, and transmits to the client 14 addressed. また、サーバ12は、クライアント14から送信されてくる帯域測定結果を受信する。 The server 12 receives the bandwidth measurement result transmitted from the client 14. ここで、帯域とは、サーバ12とクライアント14とを接続する通信網13における伝送レート、すなわち単位時間に伝送可能なデータ量をいう。 Here, the bandwidth and the transmission rate in a communication network 13 that connects the server 12 and the client 14 refers to the amount of data that can be transmitted that is a unit time.

サーバ12は、ビデオカメラ11から供給された画像データを階層符号化し、階層符号化することによって階層化された各階層の画像データと、階層情報とを各階層に対応するパケットのそれぞれに格納する。 Server 12 hierarchically encodes the image data supplied from the video camera 11, and stores the image data in each layer stratified by hierarchical coding, and hierarchical information to each packet corresponding to each layer . ここで、階層情報とは、階層化された画像データの階層の数を示す最大階層情報と、送信される画像データの階層のうち、最上位の階層(以下、送信階層と称する)を示す送信階層情報とからなる。 Here, the transmission and the hierarchy information, which indicates the maximum hierarchical information indicating the number of hierarchical image data hierarchy of the hierarchical image data to be transmitted, the highest hierarchical level (hereinafter, referred to as transmission hierarchy) consisting of the hierarchy information. また、以下、階層化された画像データの階層のうち、最上位の階層を最大階層と称する。 In the following, among the hierarchical image data hierarchy, it referred to as the maximum hierarchy the highest layer.

なお、ビデオカメラ11から供給された画像データは、復号に欠くことのできない最下位の階層から、より品質の高い復号をするための最上位の階層までの複数の階層に階層化される。 Note that the image data supplied from the video camera 11, the hierarchy of the lowest essential to decoding are stratified into a plurality of layers to the highest layer to the higher quality decoding. また、復号に欠くことのできない画像データの階層が、最下位の階層であり、より品質の高い復号をするための画像データの階層が、最上位の階層であると説明したが、復号に欠くことのできない画像データの階層を、最上位の階層とし、より品質の高い復号をするための画像データの階層を最下位の階層とするようにしてもよい。 Also, the hierarchy of the image data essential to decoding, a bottom of the hierarchy, the hierarchy of the image data to the higher-quality decoding has been described as the highest layer, lacking the decoding the can not image data hierarchy of being, the highest hierarchy, and the hierarchy of the image data may be the lowest in the hierarchy to a higher quality decoded.

サーバ12は、受信した帯域測定結果を基に、送信階層を選択し、選択した送信階層を基に、最下位の階層である1番目の階層から、送信階層までの階層のそれぞれに対応するパケットのそれぞれを、通信網13を介して、クライアント14あてに送信する。 Server 12, based on the bandwidth measurement results received, and selects the transmission hierarchy, based on the selected transmission hierarchy, from the first hierarchy which is the lowest hierarchy, packets corresponding to each layer until the transmission hierarchy each via the communication network 13, and transmits to the client 14 addressed.

通信網13は、有線または無線の、通信回線、ネットワーク、またはインターネットなどからなる伝送路であり、サーバ12から送信されたパケットをクライアント14まで伝送する。 Communication network 13 is a wired or wireless communication line, a transmission line made of a network or the Internet, and transmits the packet transmitted from the server 12 to the client 14.

サーバ12は、クライアント14から送信されてきた変更要求を受信し、受信した変更要求を基に、送信階層を変更する。 Server 12 receives the change request transmitted from the client 14, based on changes received request, changes the transmission hierarchy.

クライアント14は、通信網13を介してサーバ12から送信されてきた各種のパケットを受信する。 Client 14 via the communication network 13 receives various packets transmitted from the server 12.

クライアント14は、サーバ12から送信されてきた帯域測定パケットを受信する。 The client 14 receives the bandwidth measurement packets transmitted from the server 12. クライアント14は、受信した帯域測定パケットを基に、通信網13の帯域を算出し、算出した帯域を帯域測定結果として、通信網13を介して、サーバ12あてに送信する。 The client 14, based on the bandwidth measurement packets received, to calculate the band of the communication network 13, as a band measurement result calculated band, via the communication network 13, and transmits to the server 12 addressed.

クライアント14は、サーバ12から送信されてきた、画像データが格納されているパケットを受信する。 The client 14 has been transmitted from the server 12, receives the packet image data is stored. クライアント14は、受信したパケットから、階層情報を抽出し、抽出した階層情報を、出力部(図示せず)に表示させる。 Client 14 from the received packet, extracts the hierarchy information, the extracted hierarchy information to be displayed on the output unit (not shown). クライアント14は、送信階層の変更を要求する、変更要求を生成し、生成した変更要求を、通信網13を介して、サーバ12あてに送信する。 The client 14 requests a change in the transmit hierarchy, generating a change request, the generated change requests, via the communication network 13, and transmits to the server 12 addressed.

次に、図2のタイムチャートを参照して、サーバ12における、帯域測定の処理および送信階層の変更の処理の例を説明する。 Next, with reference to the time chart of FIG. 2, in the server 12, an example of a process of changing the processing and transmission hierarchy of bandwidth measurement.

図2において、横軸は時間を示し、帯域測定パケット31は、例えば、通信網13の帯域を測定するための、等しいパケットサイズのパケット41−1およびパケット41−2から構成される。 2, the horizontal axis represents time, bandwidth measurement packet 31, for example, to measure the bandwidth of a communication network 13, and the packet 41-1 and the packet 41-2 equal packet size. また、例えば、フレーム32を再生するための画像データであるストリーミングデータは、パケット42−1乃至パケット42−3に格納されて送信され、フレーム33を再生するための画像データであるストリーミングデータは、パケット43−1乃至パケット43−3に格納されて送信され、フレーム34を再生するための画像データであるストリーミングデータは、パケット44−1乃至パケット44−4に格納されて送信される。 Further, for example, streaming data is image data for reproducing the frame 32 are transmitted stored in the packet 42-1 to the packet 42-3, the streaming data is image data for reproducing a frame 33, packet 43-1 to be stored in the packet 43-3 is transmitted, the streaming data is image data for reproducing the frame 34 is transmitted stored in the packet 44-1 to the packet 44-4.

時刻t1において、サーバ12は、通信網13の帯域を測定するためのパケット41−1を、通信網13を介して、クライアント14あてに送信する。 At time t1, the server 12, the packet 41-1 to measure the bandwidth of a communication network 13, via the communication network 13, and transmits to the client 14 addressed. 同様に、時刻t2において、サーバ12は、通信網13の帯域を測定するためのパケット41−2を、通信網13を介して、クライアント14あてに送信する。 Similarly, at time t2, the server 12, the packet 41-2 to measure the bandwidth of a communication network 13, via the communication network 13, and transmits to the client 14 addressed. パケット41−1およびパケット41−2は、時間間隔をおかずに、続けて(連続して)クライアント14あてに送信される。 Packet 41-1 and the packet 41-2, the side dishes a time interval, followed by (sequentially) sent to the client 14 addressed.

時刻t11において、クライアント14は、サーバ12から送信されてきたパケット41−1を受信し、時刻t12において、クライアント14は、サーバ12から送信されてきたパケット41−2を受信する。 In time t11, the client 14 receives the packet 41-1 transmitted from the server 12, at time t12, the client 14 receives the packet 41-2 transmitted from the server 12. クライアント14は、パケット41−1およびパケット41−2を受信すると、受信したパケット41−1およびパケット41−2を基に、通信網13の帯域を算出する。 The client 14 receives the packet 41-1 and the packet 41-2, on the basis of the packet 41-1 and the packet 41-2 received, to calculate the band of the communication network 13. なお、帯域の測定についての詳細は、後述する。 The details of the measurement of the band will be described later.

時刻t13において、クライアント14は、算出した帯域の測定結果である帯域測定結果を、通信網13を介して、サーバ12あてに送信する。 At time t13, the client 14, the bandwidth measurement results are measurement results of the calculated band, via the communication network 13, and transmits to the server 12 addressed.

時刻t3において、サーバ12は、クライアント14から送信されてきた帯域測定結果を受信する。 At time t3, the server 12 receives the bandwidth measurement result transmitted from the client 14. サーバ12は、帯域測定結果を受信すると、受信した帯域測定結果を基に、クライアント14に送信する、画像データが格納されたパケットの送信階層を選択する。 Server 12 receives the bandwidth measurement result, based on the bandwidth measurement results received, and transmits to the client 14, the image data is to select the transmission hierarchy of stored packets.

サーバ12は、画像データを所定の数の階層に階層符号化し、階層化された各階層の画像データのそれぞれを、各階層に対応するパケットのそれぞれに格納する。 Server 12, the image data is hierarchically encoded into a predetermined number of layers, each image data of each hierarchy which is layered, and stored in each of the packet corresponding to each layer. サーバ12は、送信階層を基に、1番目の階層から送信階層までの階層のそれぞれに対応するパケットのそれぞれを、通信網13を介して、クライアント14あてに送信する。 Server 12, based on the transmission hierarchy, the respective packets corresponding to each layer to the transmission hierarchy from the first hierarchy, via a communication network 13, and transmits to the client 14 addressed.

例えば、サーバ12は、1つのフレームを再生するための画像データを、最下位の階層である1番目の階層から、最上位の階層である4番目の階層までの4つの階層に階層化する。 For example, the server 12, the image data for reproducing one frame, from the first hierarchy which is the lowest hierarchy, stratified into four hierarchy to fourth hierarchical a hierarchical top-level. 1番目の階層の画像データは、低解像度の画像データを復号するためのデータであり、2番目の階層の画像データは、1番目の階層の画像データとともに復号した場合、1番目の階層の画像データより、解像度が高い画像が得られる画像データである。 Image data of the first hierarchy is data for decoding the image data of low resolution, the image data of the second hierarchy, when the decoding is with the image data of the first hierarchy, image of the first hierarchy from the data is image data resolution high image.

ここで、最下位の階層の画像データである1番目の階層の画像データを復号した場合、低解像度の画像を表示させる画像データを得ることができるが、より上位の階層の画像データ、例えば、2番目の階層の画像データだけを復号しても、画像を表示させる画像データを得ることはできない。 Here, when decoding the first picture data hierarchy is the image data of the lowest hierarchy, it is possible to obtain an image data for displaying an image of low resolution, more image data of the upper hierarchy, for example, even by decoding only the image data of the second hierarchy, it is impossible to obtain an image data for displaying an image. すなわち、最下位の階層の画像データは、復号に欠くことのできない画像データであり、最下位の階層より上位の階層の画像データは、その画像データ(2番目の階層以上の画像データ)だけを復号しても画像を表示させる画像データを得ることはできず、自分自身と自分より下位の階層の画像データとをともに復号した場合に、画像を表示させる画像データを得ることができる。 That is, the image data of the lowest layer is the image data that is essential for decoding the image data of higher than the lowest layer hierarchy, the image data only (image data of more than the second hierarchy) can not be obtained image data to display an image even by decoding, it can be obtained when the image data of myself and my than lower hierarchy are both decoded image data to display an image.

また、3番目の階層の画像データは、1番目の階層の画像データおよび2番目の階層の画像データとともに復号した場合、1番目の階層の画像データおよび2番目の階層の画像データを復号して得られる画像より、解像度が高い画像が得られる画像データであり、4番目の階層の画像データは、1番目の階層の画像データ、2番目の階層の画像データ、および3番目の階層の画像データとともに復号した場合、最も解像度が高い、階層符号化前の画像に近い解像度の画像が得られる画像データである。 Also, the third image data in the hierarchy, first when the decoding is the image data of the image data and the second layer of the hierarchy, and decodes the image data of the first image data and the second layer of the hierarchical from the obtained image, the resolution for the image data obtained high image, the fourth image data in the hierarchy, the image data of the first hierarchy, image data of the second hierarchy, and the third hierarchical image data when the decoding is with a image data the highest resolution, the resolution of the image close to hierarchical coding previous image is obtained.

すなわち、階層符号化により、画像データが、1番目の階層から4番目の階層までの4つの階層に階層化された場合、1番目の階層は、画像データの復号に欠くことのできない最下位の階層であり、2番目の階層は、1番目の階層より1つ上位の階層であり、3番目の階層は、2番目の階層より1つ上位の階層であり、4番目の階層は、最も品質の高い復号をするための最上位の階層である。 That is, the layered-encoded image data is, if it is stratified into four levels below the first hierarchy to the fourth hierarchy, the first hierarchy, indispensable to the decoded image data least significant a hierarchical, the second hierarchy is one level higher in the hierarchy than the first layer, the third hierarchy is one level higher in the hierarchy than the second hierarchy, fourth hierarchy, most quality it is a top of the hierarchy to a high decoding of.

したがって、例えば、送信階層として、3番目の階層が選択された場合、サーバ12は、1番目の階層に対応するパケット、2番目の階層に対応するパケット、および3番目の階層に対応するパケットを、通信網13を介して、クライアント14あてに送信する。 Thus, for example, as the transmission hierarchy, if the third hierarchy is selected, the server 12, a packet corresponding to the first hierarchy, packets corresponding to the second hierarchy, and the third packet corresponding to the hierarchy , via the communications network 13, and transmits to the client 14 addressed.

なお、ここでは、復号時の解像度を優先して、階層符号化する場合の例について説明したが、その他、画像の空間的位置や色成分を優先して、階層符号化することも可能である。 Here, in favor of resolution at the time of decoding, an example has been described in the case of hierarchical coding, other, in favor of the spatial position and color components of the image, it is also possible to hierarchical encoding .

時刻t4において、サーバ12は、選択した送信階層を基に、パケット42−1乃至パケット42−3を、通信網13を介して、クライアント14あてに送信する。 At time t4, the server 12, based on the selected transmission hierarchy, the packet 42-1 to the packet 42-3 via the communication network 13, and transmits to the client 14 addressed. 同様に、サーバ12は、パケット43−1乃至パケット43−3を、通信網13を介して、クライアント14あてに送信する。 Similarly, the server 12, the packet 43-1 to the packet 43-3 via the communication network 13, and transmits to the client 14 addressed.

クライアント14は、サーバ12から送信されてきたパケット42−1乃至パケット42−3、およびパケット43−1乃至パケット43−3を受信する。 Client 14 to the packet 42-1 transmitted from the server 12 the packet 42-3, and receives the packet 43-1 to the packet 43-3.

時刻t14において、クライアント14は、送信階層の変更を要求する、変更要求を、通信網13を介して、サーバ12あてに送信する。 At time t14, the client 14 requests a change in the transmit hierarchy, a change request, via the communication network 13, and transmits to the server 12 addressed.

時刻t5において、サーバ12は、クライアント14から送信されてきた変更要求を受信する。 At time t5, the server 12 receives the change request transmitted from the client 14. サーバ12は、受信した変更要求を基に、送信階層を変更し、変更された送信階層を基に、パケット44−1乃至パケット44−4を、通信網13を介して、クライアント14あてに送信する。 Server 12 transmits, based on the change request received, change the transmission hierarchy, based on the changed data hierarchy, the packet 44-1 to the packet 44-4 via the communication network 13, the client 14 destined to. クライアント14は、サーバ12から送信されてきたパケット44−1乃至パケット44−4を受信する。 The client 14 receives the packet 44-1 to the packet 44-4 transmitted from the server 12.

このようにして、サーバ12は、帯域に応じて送信階層を選択し、選択した送信階層を基に、画像データが格納されているパケットをクライアント14あてに送信する。 In this way, the server 12 selects a transmission hierarchy in accordance with the band, on the basis of the selected transmission hierarchy, transmits a packet image data is stored in the client 14 addressed.

図3は、帯域の測定を説明する図である。 Figure 3 is a diagram for explaining the measurement of the bandwidth.

帯域を測定する方法として、パケットペアと呼ばれる方法がある。 As a method for measuring the bandwidth, there is a method called packet-pair. この方法においては、サーバ12が、通信網13を介して、クライアント14あてに、等しいパケットサイズのパケットを、送信間隔を空けずに、いわゆるバックトゥーバック(back−to−back)で送信することによって、通信網13の伝送遅延を基に、サーバ12と、クライアント14との、通信網13のボトルネックリンクの帯域が測定される。 In this method, the server 12 via the communication network 13, the client 14 addressed, the packet of equal packet size, without leaving a transmission interval, transmitting a so-called back-to-back (back-to-back) by, based on the transmission delay of the communication network 13, a server 12, a client 14, the bandwidth of the bottleneck link of the communication network 13 is measured. このボトルネックリンクの帯域が、通信網13の伝送速度である帯域である。 Band of the bottleneck link is a band which is a transmission speed of the communication network 13.

ここで、等しいパケットサイズのパケットをバックトゥーバックで送信するとは、2つのパケットを、時間間隔をおかずに、連続して送信することをいう。 Here, at the transmitting packet back to-back to the same packet size, two packets, side dish time interval, it means to transmit continuously. また、このように、パケットを連続して送信する場合、テイルトゥーノーズ(tail−to−nose)で送信するとも称する。 Moreover, in this way, when the transmission of consecutive packets, also referred to as transmitted in tail Two nose (tail-to-nose).

図3において、縦軸は、時間を示す。 3, the vertical axis represents the time. 時刻t31において、サーバ12は、パケット41−1を、通信網13を介してクライアント14あてに送信する。 At time t31, the server 12, the packet 41-1 via the communication network 13 to the client 14 addressed. また、時刻t32において、サーバ12は、パケット41−2を、通信網13を介してクライアント14あてに送信する。 At time t32, the server 12, the packet 41-2 via the communication network 13 to the client 14 addressed.

サーバ12から送信されたパケット41−1およびパケット41−2は、通信網13におけるノード61−1およびノード61−2を介して、クライアント14に受信される。 Packet 41-1 and packet 41-2 transmitted from the server 12 via the node 61-1 and node 61-2 in a communication network 13, is received by the client 14.

時刻t33において、クライアント14は、サーバ12から送信されてきたパケット41−1を受信する。 At time t33, the client 14 receives the packet 41-1 transmitted from the server 12. また、時刻t34において、クライアント14は、サーバ12から送信されてきたパケット41−2を受信する。 At time t34, the client 14 receives the packet 41-2 transmitted from the server 12.

ノード61−1とノード61−2との間の伝送速度が遅い場合、サーバ12から送信間隔を空けずに送信されたパケット41−1およびパケット41−2が、ノード61−1からノード61−2の区間で、時間軸方向に伸ばされていることが分かる。 Node if 61-1 and node transmission rate between 61-2 slow and packet 41-1 and packet 41-2 transmitted from the server 12 without leaving the transmission interval, the node from the node 61-1 61- 2 sections, it can be seen that extended in the time axis direction. したがって、通信網13において、ノード61−1からノード61−2までの区間は、サーバ12からクライアント14までの区間において、パケットの伝送帯域が最も低い、ボトルネックリンクであることが分かる。 Accordingly, in the communication network 13, a section from the node 61-1 to the node 61-2, the section from the server 12 to the client 14, the lowest transmission bandwidth of the packet, it can be seen that a bottleneck link.

クライアント14は、受信したパケット41−1およびパケット41−2の受信時刻を基に、ボトルネックリンクの帯域、すなわち帯域を算出する。 The client 14, based on the reception time of the packet 41-1 and the packet 41-2 received, calculates the bandwidth, ie the bandwidth of the bottleneck link. 帯域は、式(1)より算出される。 Band is calculated from equation (1).

(帯域)=S1/(t34−t33) ・・・(1) (Bandwidth) = S1 / (t34-t33) ··· (1)

ここで、S1は、41−2のパケットサイズ(パケットの大きさ)を表す。 Here, S1 represents the packet size of 41-2 (the size of the packet).

このようにして、クライアント14は、サーバ12から送信されてきた帯域測定パケットを基に、帯域を算出する。 In this way, the client 14, based on the bandwidth measurement packets transmitted from the server 12, to calculate a band.

図4は、サーバ12の構成の例を示すブロック図である。 Figure 4 is a block diagram showing an example of a configuration of the server 12. CPU(Central Processing Unit)81は、ROM(Read Only Memory)82、または記録部88に記録されているプログラムに従って各種の処理を実行する。 CPU (Central Processing Unit) 81 executes various processes in accordance with ROM (Read Only Memory) 82 or a program recorded in the recording unit 88,. RAM(Random Access Memory)83には、CPU81が実行するプログラムやデータなどが適宜記憶される。 The RAM (Random Access Memory) 83, such programs and data CPU81 executes are stored appropriately. これらのCPU81、ROM82、およびRAM83は、バス84により相互に接続されている。 These CPU 81, ROM 82, and RAM83 are connected to each other by a bus 84.

CPU81にはまた、バス84を介して入出力インタフェース85が接続されている。 Further the CPU 81, input-output interface 85 is connected via a bus 84. 入出力インタフェース85には、キーボード、マウス、スイッチなどよりなる入力部86、ディスプレイ、スピーカ、ランプなどよりなる出力部87が接続されている。 Output interface 85, a keyboard, a mouse, an input unit 86 composed of a switch, a display, a speaker, an output unit 87 composed of such as a lamp is connected. CPU81は、入力部86から入力される指令に対応して各種の処理を実行する。 CPU81 can executes various processes to an instruction input from the input unit 86.

入出力インタフェース85に接続されている記録部88は、例えばハードディスクなどで構成され、CPU81が実行するプログラムや各種のデータを記録する。 Output interface 85 recording unit 88 which is connected to is constituted by, for example, a hard disk, and records programs and various data CPU81 executes. 通信部89は、インターネット、その他のネットワークなどの通信網13を介して、クライアント14などの外部の装置と通信する。 Communication unit 89, the Internet, via a communication network 13 such as other network communicates with an external device such as the client 14.

また、通信部89を介してプログラムを取得し、記録部88に記録してもよい。 Further, to obtain programs via the communication unit 89, it may be recorded on the recording unit 88.

入出力インタフェース85に接続されているドライブ90は、磁気ディスク111、光ディスク112、光磁気ディスク113、或いは半導体メモリ114などが装着されたとき、それらを駆動し、そこに記録されているプログラムやデータなどを取得する。 Drive 90 connected to the input and output interface 85, magnetic disk 111, optical disk 112, a magneto-optical disk 113, or when the semiconductor memory 114 is attached to the drive 30, the program or data recorded thereon to get the like. 取得されたプログラムやデータは、必要に応じて記録部88に転送され、記録される。 The acquired program and data are transferred to the recording unit 88 as necessary, and recorded.

なお、クライアント14は、サーバ12と同様に構成されるので、その説明は省略する。 Incidentally, the client 14, since it is configured similarly to the server 12, and a description thereof will be omitted.

図5は、サーバ12の機能の構成を示すブロック図である。 Figure 5 is a block diagram showing a configuration of functions of the server 12.

サーバ12は、エンコーダ131、パケタイザ132、バッファ133、UDP通信部134、TCP通信部135、送信階層選択部136、コンテンツ階層保持部137、送信階層情報保持部138、および階層処理部139を含むように構成される。 Server 12, the encoder 131, packetizer 132, a buffer 133, UDP communication unit 134, TCP communication unit 135, transmission layer selection section 136, content hierarchy holding unit 137, to include a transmission hierarchy information holding section 138 and the layer processor 139, configured.

エンコーダ131は、ビデオカメラ11から供給されたストリーミングデータの一例である画像データを、コンテンツ階層保持部137に保持(記録)されているコンテンツ階層テーブルを参照して、所定の方式により周波数帯域ごとに階層符号化する。 The encoder 131, the image data which is an example of streaming data supplied from the video camera 11, by referring to the content hierarchy table held (recorded) in the content hierarchy holding unit 137, for each frequency band by a predetermined method hierarchical encoding. エンコーダ131は、階層符号化した画像データをパケタイザ132に供給する。 The encoder 131 supplies the hierarchical encoded image data to the packetizer 132.

ここで、コンテンツ階層テーブルには、画像データを階層化する階層の数と、各階層に対応する画像データを、通信網13を介して伝送するために必要な伝送帯域である、必要帯域とが対応して(関係付けられて)記録されている。 Here, the content hierarchy table, the number of layers of layered image data, the image data corresponding to each layer, a transmission bandwidth required for transmission over the communication network 13, and the required bandwidth corresponding (attached relationship) are recorded. コンテンツ階層テーブルの詳細は、後述する。 Details of the content hierarchy table will be described later.

なお、エンコーダ131は、コンテンツ階層テーブルを参照せずに階層符号化するようにしてもよい。 Incidentally, the encoder 131 may be hierarchically coded without reference to the content hierarchy table. この場合、エンコーダ131は、階層化された画像データの階層の数および各階層の必要帯域を示す情報を、コンテンツ階層保持部137に供給する。 In this case, the encoder 131, the information indicating the number and the required bandwidth of each layer of the hierarchical image data hierarchy, and supplies the content hierarchy holding portion 137.

パケタイザ132は、階層処理部139から階層情報を取得する。 Packetizer 132 acquires the hierarchy information from the hierarchical processing unit 139. パケタイザ132は、階層処理部139から取得した階層情報およびエンコーダ131から供給された画像データを、RTP方式のパケットに格納することにより、RTPパケットを生成する。 Packetizer 132, the image data supplied from the hierarchical information and the encoder 131 obtained from the hierarchical processing unit 139, by storing the packet of RTP scheme to generate an RTP packet. パケタイザ132は、生成したRTPパケットをバッファ133に供給する。 Packetizer 132 supplies the generated RTP packet in the buffer 133.

より詳細には、パケタイザ132は、階層符号化された、1つの階層に対応する画像データ、RTPパケットに格納される画像データの階層を示す情報、最大階層情報、および送信階層情報を1つのRTPパケットに格納することにより、各階層に対応するRTPパケットのそれぞれを生成する。 More particularly, packetizer 132, hierarchically encoded image data corresponding to one hierarchy information indicating a hierarchy of image data stored in the RTP packet, the maximum hierarchical information, and transmits the hierarchy information one RTP by storing the packet, generating respective RTP packet corresponding to each layer. パケタイザ132は、生成した各階層に対応するRTPパケットのそれぞれを、バッファ133に供給する。 Packetizer 132, each RTP packet corresponding to each layer generated is supplied to the buffer 133.

なお、パケタイザ132は、1番目の階層から送信階層までの階層の画像データのそれぞれを、1つのRTPパケットに格納するようにしてもよい。 Incidentally, packetizer 132, the respective image data hierarchy to the transmission hierarchy from the first hierarchy may be stored in one RTP packet. この場合、パケタイザ132は、階層符号化された、1番目の階層から送信階層までの階層の画像データのそれぞれ、最大階層情報、および送信階層情報を1つのRTPパケットに格納することにより、RTPパケットを生成する。 In this case, the packetizer 132, hierarchically encoded, respectively from the first hierarchical image data hierarchy to the transmission hierarchy, by storing the maximum hierarchical information, and the transmission hierarchy information in one RTP packet, the RTP packet to generate. パケタイザ132は、生成した各階層に対応するRTPパケットを、バッファ133に供給する。 Packetizer 132, an RTP packet corresponding to each layer generated is supplied to the buffer 133.

バッファ133は、階層処理部139の制御のもと、パケタイザ132から供給されたRTPパケットのうち、1番目の階層から送信階層までの階層に対応するRTPパケットのそれぞれをUDP通信部134に供給する。 Buffer 133 under the control of the layer processor 139, among the RTP packet supplied from the packetizer 132, and supplies the respective RTP packet corresponding to the hierarchy to transmission hierarchy from the first hierarchy UDP communication unit 134 . バッファ133は、UDP通信部134に供給しないRTPパケットを破棄する。 Buffer 133 discards the RTP packet is not supplied to the UDP communication unit 134.

UDP通信部134は、通信網13を介して、各種のデータの送信を行う。 UDP communication unit 134 via the communication network 13 to transmit various data. UDP通信部134は、UDPに従って、データの送受信を行う。 UDP communication unit 134, in accordance with UDP, to transmit and receive data.

UDP通信部134は、バッファ133から供給されたRTPパケットおよび送信階層選択部136から供給された帯域測定パケットを、通信網13を介してクライアント14あてに送信する。 UDP communication unit 134, a bandwidth measurement packet supplied from the RTP packet and transmitting layer selection section 136 is supplied from the buffer 133, via the communication network 13 to the client 14 addressed.

TCP通信部135は、通信網13を介して、各種のデータの送受信を行う。 TCP communication unit 135 via the communication network 13 to transmit and receive various data. TCP通信部135は、IETF RFC793で規定されているプロトコルであるTCP(Transmission Control Protocol)に従って、データの送受信を行う。 TCP communication unit 135 in accordance with TCP (Transmission Control Protocol) is a protocol defined by IETF RFC793, transmit and receive data.

TCP通信部135は、コンテンツ階層保持部137から供給されたコンテンツ階層テーブルを、通信網13を介してクライアント14あてに送信する。 TCP communication unit 135, a content hierarchy table supplied from the content hierarchy holding unit 137, via the communication network 13 to the client 14 addressed. また、TCP通信部135は、クライアント14から送信されてきた変更要求を受信し、受信した変更要求を階層処理部139に供給する。 Furthermore, TCP communication unit 135 receives the change request transmitted from the client 14, and supplies the modified received request to the hierarchical processing unit 139. TCP通信部135は、クライアント14から送信されてきた帯域測定結果を受信し、受信した帯域測定結果を、送信階層選択部136に供給する。 TCP communication unit 135 receives the bandwidth measurement result transmitted from the client 14, the bandwidth measurement results received, and supplies this to the transmission layer selection section 136.

なお、UDP通信部134およびTCP通信部135は、通信部89を制御して、通信部89を介することにより、データの送受信を行う。 Incidentally, UDP communication unit 134 and the TCP communication unit 135 controls the communication unit 89, by passing through the communication unit 89 transmits and receives data.

送信階層選択部136は、通信網13の帯域を測定するための帯域測定パケットを生成し、生成した帯域測定パケットをUDP通信部134に供給する。 Transmitting layer selection section 136 generates a bandwidth measurement packets for measuring the bandwidth of the communications network 13, and supplies the generated bandwidth measurement packets to the UDP communication unit 134.

送信階層選択部136は、TCP通信部135から供給された帯域測定結果およびコンテンツ階層保持部137に記録されているコンテンツ階層テーブルを基に、送信階層を選択し、送信階層情報を生成する。 Transmitting layer selection section 136, based on the content hierarchy table recorded in the band measurement results and content hierarchy holding portion 137 is supplied from the TCP communication unit 135, selects a transmission hierarchy, to generate a transmission hierarchy information. 送信階層選択部136は、生成した送信階層情報を送信階層情報保持部138に供給する。 Transmitting layer selection section 136 supplies the generated transmission hierarchy information to the transmission hierarchy information holding section 138.

コンテンツ階層保持部137は、コンテンツ階層テーブルを保持(記録)している。 Content hierarchy holding unit 137 holds (recording) the content hierarchy table. コンテンツ階層保持部137は、コンテンツ階層テーブルをエンコーダ131、TCP通信部135、送信階層選択部136、および階層処理部139に供給する。 Content hierarchy holding unit 137 supplies the content hierarchy table encoder 131, TCP communication unit 135, the transmission layer selection section 136 and the layer processor 139,.

また、コンテンツ階層保持部137は、エンコーダ131から、階層化された画像データの階層の数および各階層の必要帯域を示す情報が供給された場合、供給された、階層化された画像データの階層の数および各階層の必要帯域を示す情報を基に、コンテンツ階層テーブルを生成し、生成したコンテンツ階層テーブルを記録する。 Also, content hierarchy holding unit 137 from the encoder 131, when the information indicating the number and the required bandwidth of each layer of the hierarchical image data hierarchy is supplied, the supplied, layered hierarchy of image data based on the information indicating the necessary band number and the hierarchy, and generates a content hierarchy table, and records the generated content hierarchy table.

送信階層情報保持部138は、送信階層選択部136または階層処理部139から供給された送信階層情報を保持(記憶)する。 Transmitting the hierarchical information holding section 138 holds the transmission hierarchy information supplied from the transmission layer selection section 136 or the layer processor 139 (memory). 送信階層情報保持部138は、記憶している送信階層情報を階層処理部139に供給する。 Transmitting the hierarchical information holding unit 138 supplies the transmission hierarchy information stored in the hierarchical processing unit 139.

階層処理部139は、送信階層情報保持部138から供給された送信階層情報およびコンテンツ階層保持部137から供給されたコンテンツ階層テーブルを基に、階層情報を生成し、生成した階層情報をパケタイザ132に供給する。 Layer processor 139, based on the supplied content hierarchy table from the transmission hierarchy information transmitted is supplied from the holding portion 138 hierarchy information and content hierarchy holding unit 137, generates layer information, the generated layer data into packetizer 132 supplies.

階層処理部139は、バッファ133を制御して、生成した階層情報を基に、1番目の階層から送信階層までの階層のそれぞれに対応するRTPパケットのそれぞれをUDP通信部134に供給させる。 Layer processor 139 controls the buffer 133, based on the generated layer information, to supply the respective RTP packets corresponding to each layer to the transmission hierarchy from the first hierarchy UDP communication unit 134.

階層処理部139は、TCP通信部135から供給された変更要求を基に、送信階層情報を生成し、生成した送信階層情報を送信階層情報保持部138に供給する。 Layer processor 139, based on the change request that has been supplied from the TCP communication unit 135, generates transmission hierarchy information, and supplies the generated transmission hierarchy information to the transmission hierarchy information holding section 138.

図6は、クライアント14の機能の構成を示すブロック図である。 Figure 6 is a block diagram showing a configuration of a function of the client 14.

クライアント14は、入力部86、出力部87、UDP通信部151、RTP処理部152、デコーダ153、合成部154、ストリーム情報算出部155、階層情報保持部156、帯域算出部157、TCP通信部158、コンテンツ階層保持部159、および階層変更要求部160を含むように構成される。 The client 14 includes an input unit 86, output unit 87, UDP communication unit 151, RTP processor 152, a decoder 153, a combining unit 154, the stream information calculator 155, the hierarchical information holding section 156, band calculation section 157, TCP communication unit 158 configured to include content hierarchy holding portion 159 and the hierarchy change request unit 160,.

UDP通信部151は、サーバ12のUDP通信部134に対応し、通信網13を介して、各種のデータの受信を行う。 UDP communication unit 151 corresponds to the UDP communication unit 134 of the server 12, via the communication network 13, and receives various data. UDP通信部151は、UDPに従って、データの送受信を行う。 UDP communication unit 151, in accordance with UDP, to transmit and receive data.

UDP通信部151は、サーバ12から送信されてきた帯域測定パケットを受信し、受信した帯域測定パケットを帯域算出部157に供給する。 UDP communication unit 151 receives a bandwidth measurement packets transmitted from the server 12 and supplies the bandwidth measurement packets received bandwidth calculation unit 157.

また、UDP通信部151は、サーバ12から送信されてきたRTPパケットを受信し、受信したRTPパケットをRTP処理部152に供給する。 Also, UDP communication unit 151 receives the RTP packets transmitted from the server 12 and supplies the received RTP packet to the RTP processor 152.

RTP処理部152は、UDP通信部151から供給されたRTPパケットから画像データを抽出し、抽出した画像データをデコーダ153に供給する。 RTP processor 152 extracts the image data from the supplied RTP packet from the UDP communication unit 151, and supplies the extracted image data to the decoder 153. また、RTP処理部152は、UDP通信部151から供給されたRTPパケットから階層情報を抽出し、抽出した階層情報を階層情報保持部156に供給する。 Moreover, RTP processor 152 extracts the hierarchical information from the RTP packet supplied from the UDP communication unit 151 supplies the extracted hierarchy information in hierarchy information holding section 156.

RTP処理部152は、UDP通信部151から供給されたRTPパケットからシーケンス番号を抽出し、抽出したシーケンス番号、RTPパケットの受信時刻、およびRTPパケットのパケットサイズ(RTPパケットの大きさ)をストリーム情報算出部155に供給する。 RTP processor 152 extracts a sequence number from the RTP packet supplied from the UDP communication unit 151, the extracted sequence number, the reception time, and (the size of the RTP packet) packet size of the RTP packet stream information of the RTP packet and supplies the calculation unit 155.

デコーダ153は、RTP処理部152から供給された画像データを、エンコーダ131に対応する復号方式で復号し、復号した画像データを合成部154に供給する。 Decoder 153, the image data supplied from the RTP processor 152, using a decoding scheme corresponding to the encoder 131 supplies the image data obtained by decoding to the combining unit 154.

より詳細には、デコーダ153は、RTP処理部152から供給された1番目の階層から送信階層までの階層のそれぞれの画像データを、エンコーダ131に対応する復号方式で1つの画像データに復号し、復号した画像データを合成部154に供給する。 More specifically, the decoder 153 decodes the respective image data hierarchy to the transmission hierarchy from the first hierarchy supplied from the RTP processor 152, to one image data in decoding scheme corresponding to the encoder 131, and it supplies the decoded image data to the combining unit 154.

合成部154は、デコーダ153から供給された画像データおよび階層情報保持部156から供給された階層情報を表示させる画像データを合成(重畳)し、重畳した画像データを出力部87に供給する。 Combining unit 154, the image data is synthesized (superposed) for displaying hierarchical information supplied from the image data and the hierarchy information holding unit 156 is supplied from the decoder 153, supplied to the output unit 87 the image data obtained by superimposing.

なお、合成部154は、ストリーム情報算出部155からRTPパケットのロス率を表示させる画像データおよび受信帯域を表示させる画像データを取得し、帯域算出部157から帯域測定結果を表示させる画像データを取得するようにしてもよい。 Incidentally, the combining unit 154 obtains acquires image data for displaying the image data and the reception band to display the loss rate of the RTP packets from the stream information calculation unit 155, the image data for displaying the band measurement results from the bandwidth calculation unit 157 it may be.

この場合、合成部154は、デコーダ153から供給された画像データ、階層情報保持部156から供給された階層情報を表示させる画像データ、ストリーム情報算出部155から取得したRTPパケットのロス率を表示させる画像データおよび受信帯域を表示させる画像データ、並びに帯域算出部157から取得した帯域測定結果を表示させる画像データを重畳し、重畳した画像データを出力部87に供給する。 In this case, the combining unit 154, image data for displaying hierarchical information supplied image data supplied from the decoder 153, from the hierarchical information storage unit 156, and displays the loss rate of the RTP packets obtained from the stream information calculator 155 image data for displaying the image data and the reception band, and superimposes the image data for displaying the band measurement result acquired from the bandwidth calculation unit 157, to the output unit 87 the image data obtained by superimposing.

また、合成部154は、階層情報保持部156から階層情報を表示させる画像データを取得せずに、デコーダ153から供給された画像データだけを出力部87に供給するようにしてもよい。 Further, the combining unit 154, without obtaining the image data for displaying the hierarchical information from the hierarchical information storage unit 156, may be supplied to the output unit 87 only the image data supplied from the decoder 153.

ストリーム情報算出部155は、RTP処理部152から供給されたシーケンス番号を基に、UDP通信部151が受信したRTPパケットのロス率を算出する。 Stream information calculation unit 155, based on the sequence number supplied from the RTP processor 152, calculates the loss rate of the RTP packets UDP communication unit 151 has received. また、ストリーム情報算出部155は、RTP処理部152から供給されたRTPパケットの受信時刻およびRTPパケットのパケットサイズを基に、通信網13の受信帯域を算出する。 Also, stream information calculation unit 155, based on the packet size of the received time and the RTP packet of the RTP packet supplied from the RTP processor 152 calculates the reception band of the communication network 13.

ここで、受信帯域とは、UDP通信部151がRTPパケット受信した時刻における、通信網13の帯域をいう。 Here, the reception band, at the time that UDP communication unit 151 receives RTP packets, referred to the bandwidth of the communications network 13. なお、通信網13の受信帯域の算出についての詳細は、後述する。 The details of the calculation of the reception band of the communication network 13 will be described later.

ストリーム情報算出部155は、算出したRTPパケットのロス率を基に、RTPパケットのロス率を表示させる画像データを生成し、生成した画像データを出力部87に供給する。 Stream information calculation unit 155, based on the loss rate of the calculated RTP packet, it generates image data for displaying the loss rate of the RTP packet, and supplies the generated image data to the output unit 87. また、ストリーム情報算出部155は、算出した受信帯域を基に、通信網13の受信帯域を表示させる画像データを生成し、生成した画像データを出力部87に供給する。 Also, stream information calculation unit 155, based on the calculated reception bandwidth, it generates image data for displaying the reception band of the communication network 13, and supplies the generated image data to the output unit 87. なお、ストリーム情報算出部155は、生成したRTPパケットのロス率を表示させる画像データおよび通信網13の受信帯域を表示させる画像データを、出力部87に供給せずに、合成部154に供給するようにしてもよい。 Note that the stream information calculation unit 155, the image data for displaying the reception band of the image data and the communication network 13 to display a loss rate of the generated RTP packet, without supplying to the output section 87, and supplies to the synthesizing unit 154 it may be so.

階層情報保持部156は、RTP処理部152から供給された階層情報を保持(記憶)する。 Hierarchical information holding unit 156 holds a hierarchical information supplied from the RTP processor 152 (memory). 階層情報保持部156は、RTP処理部152から供給された階層情報を基に、階層情報を表示させる画像データを生成し、生成した画像データを合成部154に供給する。 Hierarchical information holding unit 156, based on the hierarchy information supplied from the RTP processor 152, generates image data for displaying hierarchical information, and supplies the generated image data to the combining unit 154. 階層情報保持部156は、RTP処理部152から供給された階層情報を、階層変更要求部160に供給する。 Hierarchical information holding unit 156, the hierarchical information supplied from the RTP processor 152, and supplies the hierarchy change request unit 160.

なお、階層情報保持部156は、生成した階層情報を表示させる画像データを、合成部154に供給せずに、出力部87に供給するようにしてもよい。 Incidentally, the hierarchical information storage unit 156, the image data for displaying the generated layer data, without supplying to the combining unit 154 may be supplied to the output unit 87.

階層情報保持部156は、送信階層情報保持部181および最大階層情報保持部182を含むように構成される。 Hierarchical information holding unit 156 is configured to include a transmission hierarchy information holding section 181 and the maximum hierarchical information holding section 182.

階層情報保持部156の送信階層情報保持部181は、RTP処理部152から供給された階層情報の送信階層情報を記憶する。 Hierarchical transmission layer information holding unit 181 of the information holding unit 156 stores the transmission hierarchy information of the hierarchical information supplied from the RTP processor 152. 階層情報保持部156の最大階層情報保持部182は、RTP処理部152から供給された階層情報の最大階層情報を記憶する。 Maximum hierarchical information holding section 182 of hierarchy information holding unit 156 stores the maximum hierarchical information hierarchy information supplied from the RTP processor 152.

帯域算出部157は、UDP通信部151から供給された帯域計測パケットを基に、通信網13の帯域を算出する。 Bandwidth calculation unit 157, based on the bandwidth measurement packet supplied from the UDP communication unit 151, calculates the bandwidth of the communications network 13.

帯域算出部157は、算出した帯域を基に、帯域測定結果を生成し、生成した帯域測定結果を、TCP通信部158および出力部87に供給する。 Bandwidth calculation unit 157, based on the calculated bandwidth, generates a bandwidth measurement result, the generated band measurement result, and supplies the TCP communication unit 158, and an output unit 87.

より詳細には、帯域算出部157は、算出した帯域を基に、帯域測定結果を生成し、生成した帯域測定結果をTCP通信部158に供給する。 More particularly, the bandwidth calculation unit 157, based on the calculated bandwidth, and supplies to generate a bandwidth measurement result, the generated band measurement result to TCP communication unit 158. そして、帯域算出部157は、生成した帯域結果を表示させる画像データを生成し、生成した画像データを出力部87に供給する。 The bandwidth calculation unit 157 generates image data for displaying the generated band results, and supplies the generated image data to the output unit 87.

なお、帯域算出部157は、生成した帯域結果を表示させる画像データを、出力部87に供給せずに、合成部154に供給するようにしてもよい。 Incidentally, the bandwidth calculation unit 157, the image data for displaying the generated band results, without supplying to the output section 87, may be supplied to the combining unit 154.

TCP通信部158は、サーバ12のTCP通信部135に対応し、通信網13を介して、各種のデータの送受信を行う。 TCP communication unit 158 ​​corresponds to the TCP communication unit 135 of the server 12, via the communication network 13 to transmit and receive various data. TCP通信部158は、TCPに従って、データの送受信を行う。 TCP communication unit 158 ​​in accordance with TCP, to transmit and receive data.

TCP通信部158は、サーバ12から送信されてきたコンテンツ階層テーブルを受信し、受信したコンテンツ階層テーブルをコンテンツ階層保持部159に供給する。 TCP communication unit 158 ​​receives the content hierarchy table which has been transmitted from the server 12 and supplies the received content hierarchy table content hierarchy holding portion 159.

TCP通信部158は、帯域算出部157から供給された帯域測定結果を、通信網13を介して、サーバ12あてに送信する。 TCP communication unit 158, the bandwidth measurement result supplied from the bandwidth calculation unit 157, via the communication network 13, and transmits to the server 12 addressed. TCP通信部158は、階層変更要求部160から供給された変更要求を、通信網13を介して、サーバ12あてに送信する。 TCP communication unit 158, a change request supplied from the hierarchy change request unit 160, via the communication network 13, and transmits to the server 12 addressed.

なお、UDP通信部151およびTCP通信部158は、通信部(図示せず)を制御して、通信部を介することにより、データの送受信を行う。 Incidentally, UDP communication unit 151 and the TCP communication unit 158 ​​controls communication unit (not shown), by passing through the communication unit performs transmission and reception of data.

コンテンツ階層保持部159は、TCP通信部158から供給されたコンテンツ階層テーブルを保持(記憶)する。 Content hierarchy holding unit 159 holds the supplied content hierarchy table from the TCP communication unit 158 ​​(storage). コンテンツ階層保持部159は、TCP通信部158から供給されたコンテンツ階層テーブルを基に、コンテンツ階層テーブルを表示させる画像データを生成し、生成した画像データを出力部87に供給する。 Content hierarchy holding unit 159, based on the supplied content hierarchy table from the TCP communication unit 158, generates image data for displaying the content hierarchy table, and supplies the generated image data to the output unit 87.

出力部87は、合成部154から供給された画像データ、ストリーム情報算出部155から供給されたRTPパケットのロス率を表示させる画像データおよび受信帯域を表示させる画像データ、帯域算出部157から供給された帯域測定結果を表示させる画像データ、並びにコンテンツ階層保持部159から供給されたコンテンツ階層テーブルを表示させる画像データを、ディスプレイである出力部87に出力し、画像、ロス率、受信帯域、帯域測定結果、およびコンテンツ階層テーブルを表示させる。 The output unit 87, image data supplied from the combining unit 154, image data for displaying the image data and the reception band to display the loss rate of the supplied RTP packet from the stream information calculation unit 155 is supplied from the band calculation portion 157 image data for displaying the band measurement results, as well as image data for displaying the supplied content hierarchy tables from content hierarchy holding unit 159, and outputs to the output unit 87 is a display, an image, loss rate, the reception band, the band measurement result, and displays the content hierarchy table.

入力部86は、ユーザが、入力部86を操作することによって、送信階層の変更を指示した場合、変更信号を生成し、生成した変更信号を階層変更要求部160に供給する。 Input unit 86, the user, by operating the input unit 86, when instructed to change the transmission hierarchy, to generate a modified signal, and supplies the generated change signal to the hierarchy change request unit 160.

より詳細には、入力部86は、ユーザが、入力部86を操作することによって、送信階層を、設定されている階層の1つ上位の階層に変更する旨の指示をした場合、送信階層を1つ上位の階層に変更する旨の変更信号を生成し、生成した変更信号を階層変更要求部160に供給する。 More specifically, the input unit 86, the user, by operating the input unit 86, if the transmission hierarchy, and an instruction to change to one higher hierarchy in the hierarchy that has been set, the transmission hierarchy It generates a change signal indicating change in one higher hierarchy, and supplies the generated change signal to the hierarchy change request unit 160. また、入力部86は、ユーザが、入力部86を操作することによって、送信階層を、設定されている階層の1つ下位の階層に変更する旨の指示をした場合、送信階層を1つ下位の階層に変更する旨の変更信号を生成し、生成した変更信号を階層変更要求部160に供給する。 The input unit 86, the user, by operating the input unit 86, if the transmission hierarchy, and an instruction to change one lower layer of the hierarchical set, one transmission level lower It generates a change signal indicating the change in the hierarchy, and supplies the generated change signal to the hierarchy change request unit 160.

ここで、設定されている階層の1つ上位の階層とは、例えば、設定されている階層が、3番目の階層である場合、4番目の階層をいい、同様に、設定されている階層の1つ下位の階層とは、例えば、設定されている階層が、3番目の階層である場合、2番目の階層をいう。 Here, the one upper hierarchy of the hierarchical set, for example, a hierarchy has been set, if a third layer, referred to fourth hierarchy, likewise, the hierarchy is set the one lower layer, for example, a hierarchy has been set, if a third layer, referred to the second hierarchy.

なお、ユーザが、所望の送信階層を、入力部86に入力することによって、送信階層の変更を指示するようにしてもよい。 The user is, a desired transmission hierarchy, by inputting the input unit 86, it may instruct a change in the transmit hierarchy. この場合、入力部86は、ユーザによって入力された送信階層を示す情報を生成し、生成した送信階層を示す情報を、階層変更要求部160に供給する。 In this case, the input unit 86 generates information indicating the transmission hierarchy entered by the user, information indicating the generated transmission hierarchy, and supplies the hierarchy change request unit 160.

階層変更要求部160は、階層情報保持部156から供給された階層情報および入力部86から供給された変更信号を基に、変更要求を生成し、生成した変更要求をTCP通信部158に供給する。 Hierarchical change request unit 160 supplies the basis of the change signal supplied from the layer information and the input unit 86 is supplied, it generates a change request, the generated change request to the TCP communication unit 158 ​​from the hierarchical information storage unit 156 .

より詳細には、階層変更要求部160は、入力部86から、送信階層を1つ上位の階層に変更する旨の変更信号が供給された場合、階層情報保持部156から供給された階層情報が示す送信階層の1つ上位の階層を、送信階層にする旨の変更要求を生成し、生成した変更要求をTCP通信部158に供給する。 More specifically, hierarchical change request unit 160, the input unit 86, if the effect of the change signal for changing the transmission hierarchy one level higher in the hierarchy is supplied, the hierarchy information supplied from the hierarchical information storage unit 156 one level of the hierarchy of transmission hierarchy shown, to produce the effect of a change request to send hierarchy, and supplies the generated change request to the TCP communication unit 158.

また、階層変更要求部160は、入力部86から、送信階層を1つ下位の階層に変更する旨の変更信号が供給された場合、階層情報保持部156から供給された階層情報が示す送信階層の1つ下位の階層を、送信階層にする旨の変更要求を生成し、生成した変更要求をTCP通信部158に供給する。 Moreover, the hierarchy change request unit 160, the input unit 86, if the effect of the change signal for changing the transmission hierarchy one level lower in the hierarchy is supplied, transmission hierarchy shown is hierarchical information supplied from the hierarchical information storage unit 156 provides one lower hierarchy, to produce the effect of a change request to send hierarchy, the generated change request to the TCP communication unit 158 ​​of.

なお、階層変更要求部160は、入力部86から送信階層を示す情報が供給された場合、送信階層を示す情報によって指示された階層を送信階層にする旨の変更要求を生成し、生成した変更要求をTCP通信部158に供給する。 Incidentally, the hierarchy change request unit 160, when the information indicating the transmission hierarchy from the input unit 86 is supplied, generates a change request for the transmission hierarchy hierarchy indicated by the information indicating the transmission hierarchy, to produce modified request supplied to the TCP communication unit 158.

次に、図7のフローチャートを参照して、サーバプログラムを実行するサーバ12による、送信階層の変更の処理を説明する。 Next, with reference to the flowchart of FIG. 7, by the server 12 for executing the server program, the processing of changing the transmission hierarchy.

ステップS11において、送信階層選択部136は、帯域測定の処理を行う。 In step S11, transmitting layer selection section 136 performs the process of bandwidth measurement. なお、帯域測定の処理の詳細は、後述するが、帯域測定の処理において、サーバ12とクライアント14との間の通信網13の帯域が測定され、測定された帯域を基に、送信階層が選択される。 The details of the processing of band measurement will be described later, in the processing of band measurement, the measured bandwidth of the communication network 13 between the server 12 and the client 14, based on the measured bandwidth, the selected transmission hierarchy It is.

ステップS12において、コンテンツ階層保持部137は、記録しているコンテンツ階層テーブルをTCP通信部135に供給する。 In step S12, the content hierarchy holding unit 137 supplies the content hierarchy table that records the TCP communication unit 135. より詳細には、ステップS12において、コンテンツ階層保持部137は、記録しているコンテンツ階層テーブルをTCPに従ったパケットに格納し、コンテンツ階層テーブルを格納したパケットをTCP通信部135に供給する。 More specifically, in step S12, content hierarchy holding unit 137 stores in accordance with content hierarchy table that records the TCP packet, and supplies the packet storing the content hierarchy table to the TCP communication unit 135.

ここで、コンテンツ階層テーブルは、例えば、図8で示される、階層と必要帯域を表すテーブルである。 Here, the content hierarchy table, for example, is a table representing the indicated be, hierarchy and necessary band in FIG. コンテンツ階層テーブルには、ビデオカメラ11から供給された画像データが階層化される階層と、階層化された各階層の画像データを送信するために必要な、通信網13の帯域である必要帯域とが記録されている。 The content hierarchy table, a hierarchy image data supplied from the video camera 11 is layered, required to transmit the image data of the hierarchical each layer, the necessary band is the band of the network 13 There has been recorded.

図8で示されるコンテンツ階層テーブルを基に符号化した場合、ビデオカメラ11から供給された画像データは、最下位の階層である1番目の階層の符号化された画像データ、1番目の階層の1つ上位の階層である2番目の階層の符号化された画像データ、2番目の階層の1つ上位の階層である3番目の階層の符号化された画像データ、3番目の階層の1つ上位の階層である4番目の階層の符号化された画像データ、および最上位の階層である5番目の階層の符号化された画像データに階層化される。 If encoding based on content hierarchy table shown in Figure 8, the image data supplied from the video camera 11 of the first hierarchy which is the lowest hierarchical encoded image data, the first hierarchy the second layer of the encoded image data is hierarchically next higher, the second is one level higher in the hierarchy of hierarchical third hierarchical encoded image data, one of the third hierarchy fourth hierarchical encoded image data is higher in the hierarchy, and are layered encoded image data for the fifth hierarchical a hierarchical top-level.

また、1番目の階層の画像データが格納されたRTPパケットを送信するためには、通信網13の帯域が、0.1Mbps以上必要であり、2番目の階層の画像データが格納されたRTPパケットを送信するためには、通信網13の帯域が、0.2Mbps以上必要であり、3番目の階層の画像データが格納されたRTPパケットを送信するためには、通信網13の帯域が、0.3Mbps以上必要である。 Further, in order to transmit a first RTP packet that the image data is stored in the hierarchy, the bandwidth of the communications network 13, needs more than 0.1Mbps, the second RTP packet in which image data is stored in the hierarchy to transmit the bandwidth of the communications network 13, needs more than 0.2 Mbps, to send a third RTP packet that the image data is stored in the hierarchy, the bandwidth of the communication network 13, or 0.3Mbps is necessary. さらに、4番目の階層の画像データが格納されたRTPパケットを送信するためには、通信網13の帯域が、0.4Mbps以上必要であり、5番目の階層の画像データが格納されたRTPパケットを送信するためには、通信網13の帯域が、0.5Mbps以上必要である。 Furthermore, in order to transmit the fourth RTP packet in which image data is stored in the hierarchy, the bandwidth of the communications network 13, needs more than 0.4Mbps, the 5 th RTP packet image data is stored in the hierarchy to transmit the bandwidth of the communication network 13 is needed than 0.5 Mbps.

図7の説明に戻り、ステップS13において、TCP通信部135は、コンテンツ階層保持部137から供給されたコンテンツ階層テーブルを、通信網13を介して、クライアント14あてに送信する。 Referring back to FIG. 7, in step S13, TCP communication unit 135, the supplied content hierarchy tables from content hierarchy holding unit 137, via the communication network 13, and transmits to the client 14 addressed.

ステップS14において、階層処理部139は、TCP通信部135が、クライアント14から送信されてきた変更要求を受信したか否かを判定する。 In step S14, the hierarchical processing unit 139, TCP communication unit 135 determines whether it has received the change request transmitted from the client 14. ステップS14において、変更要求を受信したと判定された場合、ステップS15に進み、階層処理部139は、TCP通信部135が受信し、TCP通信部135から供給された変更要求を基に、送信階層を変更する。 In step S14, when it is determined that it has received the change request, the flow advances to step S15, the hierarchical processing unit 139 receives the TCP communication unit 135, based on the change request that has been supplied from the TCP communication unit 135, transmission hierarchy to change the.

より詳細には、ステップS15において、階層処理部139は、TCP通信部135が受信し、TCP通信部135から供給された変更要求を基に、送信階層情報を生成し、生成した送信階層情報を送信階層情報保持部138に供給する。 More specifically, in step S15, the hierarchical processing unit 139 receives the TCP communication unit 135, based on the change request that has been supplied from the TCP communication unit 135, generates transmission hierarchy information, the generated transmission hierarchy information and supplies this to the transmission hierarchy information holding section 138. そして、送信階層情報保持部138は、階層処理部139から供給された送信階層情報を記憶することによって、送信階層を変更する。 The transmission layer information holding unit 138, by storing the transmission hierarchy information supplied from the hierarchical processing unit 139 changes the transmission hierarchy.

例えば、ステップS15において、階層処理部139は、TCP通信部135から供給された変更要求が、送信階層を4番目の階層に変更する旨の変更要求であった場合、送信階層が4番目の階層であることを示す送信階層情報を生成し、生成した送信階層情報を送信階層情報保持部138に供給し、送信階層情報保持部138は、階層処理部139から供給された送信階層が4番目の階層であることを示す送信階層情報を記憶する。 For example, in step S15, the hierarchical processing unit 139 changes supplied from the TCP communication unit 135 requests, when that was a change request for changing the transmission hierarchy fourth hierarchy, transmission hierarchy fourth hierarchy generates transmission hierarchy information indicating that it supplies the generated transmission hierarchy information to the transmission hierarchy information holding unit 138, it transmits the hierarchical information holding section 138, transmission hierarchy fourth supplied from hierarchical processing unit 139 storing transmission hierarchy information indicating a hierarchy.

一方ステップS14において、変更要求を受信していないと判定された場合、送信階層を変更する必要がないので、ステップS15の処理はスキップされ、手続きは、ステップS16に進む。 In contrast step S14, when it is determined that it has not received the change request, there is no need to change the transmission hierarchy, the process of step S15 is skipped, and the process proceeds to step S16.

ステップS16において、サーバ12の各部は、データ送信の処理を行う。 In step S16, each unit of the server 12 performs processing for data transmission. なお、データ送信の処理の詳細は、後述するが、データ送信の処理において、ビデオカメラ11から供給された画像データが、階層符号化され、各階層の画像データのそれぞれが、各階層に対応するRTPパケットのそれぞれに格納される。 The details of the processing of the data transmission, as will be described later, in the processing of data transmission, the image data supplied from the video camera 11, is hierarchically coded, each of the image data in each layer corresponds to each layer It is stored in each of the RTP packets. そして、各階層に対応するRTPパケットのそれぞれは、通信網13を介して、クライアント14あてに送信される。 Then, each of the RTP packet corresponding to each layer, via a communication network 13, is sent to the client 14 addressed.

データ送信の処理が終了すると、手続きは、ステップS14に戻り、上述した処理を繰り返す。 When the processing of the data transmission is completed, the process returns to step S14, and repeats the above processing.

このようにして、サーバ12は、クライアント14から送信されてきた変更要求を基に、送信階層の変更を行う。 In this way, the server 12, based on the change request transmitted from the client 14, to change the transmission hierarchy.

図9のフローチャートを参照して、図7のステップS11の処理に対応する帯域測定の処理を説明する。 With reference to the flowchart of FIG. 9, the processing bandwidth measurements corresponding to the processing in step S11 in FIG. 7.

ステップS31において、送信階層選択部136は、帯域測定パケットを生成し、生成した帯域測定パケットをUDP通信部134に供給する。 In step S31, transmitting layer selection section 136 generates a bandwidth measurement packets, and supplies the generated bandwidth measurement packets to the UDP communication unit 134. 例えば、ステップS31において、送信階層選択部136は、帯域測定パケットであるパケットペアを生成し、生成したパケットペアをUDP通信部134に供給する。 For example, in step S31, transmitting layer selection section 136 generates a packet pair is the band measurement packet, and supplies the generated packet pair UDP communication unit 134.

ステップS32において、UDP通信部134は、送信階層選択部136から供給された帯域測定パケットを、通信網13を介して、クライアント14あてに送信する。 In step S32, UDP communication unit 134, a bandwidth measurement packet supplied from the transmission layer selection section 136, via the communication network 13, and transmits to the client 14 addressed.

ステップS32において、クライアント14あてに送信された帯域測定パケットは、クライアント14に受信される。 In step S32, the bandwidth measurement packets sent to the client 14 addressed is received by the client 14. 帯域測定パケットを受信したクライアント14は、受信した帯域測定パケットを基に、帯域測定結果を生成し、生成した帯域測定結果を、通信網13を介して、サーバ12あてに送信する。 Client 14 having received the bandwidth measurement packets, based on the bandwidth measurement packets received, generating a bandwidth measurement result, the generated band measurement results, through the communication network 13, and transmits to the server 12 addressed.

ステップS33において、TCP通信部135は、クライアント14から送信されてきた帯域測定結果を受信し、受信した帯域測定結果を送信階層選択部136に供給する。 In step S33, TCP communication unit 135 receives the bandwidth measurement result transmitted from the client 14, supplies a band measurement result received to the transmission layer selection section 136.

ステップS34において、送信階層選択部136は、TCP通信部135から供給された帯域測定結果およびコンテンツ階層保持部137に記録されているコンテンツ階層テーブルを基に、送信階層を選択する。 In step S34, transmitting layer selection section 136, based on the content hierarchy table recorded in the band measurement results and content hierarchy holding portion 137 is supplied from the TCP communication unit 135, selects a transmission hierarchy. そして、送信階層選択部136は、選択された送信階層を基に、送信階層情報を生成し、生成した送信階層情報を、送信階層情報保持部138に供給する。 The transmission layer selection section 136 supplies the basis of the selected transmission hierarchy, generates transmission hierarchy information, the generated transmission hierarchy information, to transmit the hierarchical information holding section 138.

例えば、ステップS34において、送信階層選択部136は、TCP通信部135から供給された帯域測定結果が示す帯域の測定結果が、0.35Mbpsであった場合、コンテンツ階層保持部137が記録している、図8で示されるコンテンツ階層テーブルを参照し、0.35Mbpsは、0.3Mbpsより大きく0.4Mbpsより小さいので、送信階層として、3番目の階層を選択する。 For example, in step S34, transmitting layer selection section 136, TCP has been band measurements supplied from the communication unit 135 the measurement results of the band indicated by, if a there were 0.35Mbps, content hierarchy holding portion 137 is recorded, refers to the content hierarchy table shown in Figure 8, 0.35Mbps is smaller than the greater than 0.3 Mbps 0.4Mbps, as the transmission hierarchy, to select the third hierarchy. そして、送信階層選択部136は、選択した送信階層を基に、送信階層が、3番目の階層であることを示す送信階層情報を生成し、生成した送信階層情報を送信階層情報保持部138に供給する。 The transmission layer selection section 136, based on the selected transmission hierarchy transmission hierarchy, generates transmission hierarchy information indicating that the third hierarchy, the generated transmission hierarchy information to the transmission hierarchy information holding unit 138 supplies.

ステップS35において、送信階層情報保持部138は、送信階層選択部136から供給された送信階層情報を保持(記憶)し、処理は、終了する。 In step S35, the transmission layer information holding unit 138 holds the transmission hierarchy information supplied from the transmission layer selection section 136 (memory), the process ends.

このようにして、送信階層選択部136は、通信網13の帯域を測定する。 In this way, the transmission layer selection section 136 measures the bandwidth of the communications network 13.

次に、図10のフローチャートを参照して、クライアントプログラムを実行する、クライアント14による帯域算出の処理を説明する。 Next, with reference to the flowchart of FIG. 10, to run the client program, the processing of the band calculation by the client 14.

ステップS51において、UDP通信部151は、サーバ12から送信されてきた帯域測定パケットを受信し、受信した帯域測定パケットを帯域算出部157に供給する。 In step S51, UDP communication unit 151 receives a bandwidth measurement packets transmitted from the server 12 and supplies the bandwidth measurement packets received bandwidth calculation unit 157.

ステップS52において、帯域算出部157は、UDP通信部151から供給された帯域測定パケットを基に、通信網13の帯域を算出する。 In step S52, the bandwidth calculation unit 157, based on the bandwidth measurement packet supplied from the UDP communication unit 151, calculates the bandwidth of the communications network 13. 例えば、ステップS52において、帯域算出部157は、UDP通信部151から供給された帯域測定パケットであるパケットペアの受信時刻およびパケットペアの1つのパケットのパケットサイズを、式(1)に代入することによって、通信網13の帯域を算出する。 For example, in step S52, the bandwidth calculating unit 157, a packet size of one packet of the reception time and packet pair packets pair is the band measurement packet supplied from the UDP communication unit 151, substituting the equation (1) by calculating the band of the communication network 13.

ステップS53において、帯域算出部157は、算出した通信網13の帯域を基に、通信網13の帯域を示す、帯域測定結果を生成し、生成した帯域測定結果を、TCP通信部158および出力部87に供給する。 In step S53, the bandwidth calculation unit 157, based on the bandwidth of the calculated communication network 13, it shows the band of the communication network 13, generates a band measurement result, the generated band measurement result, TCP communication unit 158 ​​and an output unit It supplies it to the 87.

より詳細には、ステップS53において、帯域算出部157は、算出した通信網13の帯域を基に、帯域測定結果を生成し、生成した帯域測定結果をTCPに従うパケットに格納する。 More specifically, in step S53, the bandwidth calculation unit 157, based on the bandwidth of the calculated communication network 13, it generates a band measurement results, stores the generated bandwidth measurements into packets according to TCP. そして、帯域算出部157は、帯域測定結果を格納したパケットを、TCP通信部158に供給する。 The bandwidth calculation unit 157, a packet storing the bandwidth measurement result, and supplies the TCP communication unit 158. さらに、帯域算出部157は、生成した帯域測定結果を基に、帯域測定結果を表示させる画像データを生成し、生成した画像データを出力部87に供給する。 Furthermore, the bandwidth calculation unit 157, based on the generated band measurement result, generates image data for displaying the band measurement result, and supplies the generated image data to the output unit 87.

ステップS54において、出力部87は、帯域算出部157から供給された帯域測定結果を表示する画像データを、ディスプレイである出力部87に供給し、画像データを基に、画像をディスプレイに表示させる。 In step S54, the output unit 87, the image data for displaying the results supplied band measurement from the band calculating unit 157, and supplies the output section 87 is a display, based on image data, and displays images on the display.

ステップS55において、TCP通信部158は、帯域算出部157から供給された帯域測定結果を、通信網13を介して、サーバ12あてに送信し、帯域算出の処理は、終了する。 In step S55, TCP communication unit 158, the bandwidth measurement result supplied from the bandwidth calculation unit 157, via the communication network 13, and transmitted to the server 12 addressed, the process of the band calculation is terminated.

このようにして、クライアント14は、サーバ12から送信されてきた帯域測定パケットを受信し、受信した帯域測定パケットを基に、通信網13の帯域を算出する。 In this way, the client 14 receives the bandwidth measurement packets transmitted from the server 12, based on the bandwidth measurement packets received, to calculate the band of the communication network 13.

図11のフローチャートを参照して、図7のステップS16の処理に対応するデータ送信の処理を説明する。 With reference to the flowchart of FIG. 11, the processing of the data transmission corresponding to the processing in step S16 in FIG. 7.

ステップS71において、サーバ12は、データ送信の処理に必要なデータを初期化する。 In step S71, the server 12 initializes the data necessary for processing of the data transmission. 例えばステップS71において、エンコーダ131は、内蔵しているタイマの値を0msにセットし、パケタイザ132は、タイムスタンプをよびシーケンス番号を初期化する。 In example step S71, the encoder 131 sets the value of the timer with a built-in 0ms, packetizer 132 initializes the sequence numbers and timestamps.

ステップS72において、エンコーダ131は、内蔵しているタイマの値を基に、タイマが終了したか否かを判定し、タイマが終了していないと判定された場合、ステップS72に戻り、タイマが終了したと判定されるまで、判定の処理を繰り返す。 In step S72, the encoder 131, based on the value of the built-in timer, the timer determines whether or not it is completed, if the timer is found not ended, the process returns to step S72, the timer is terminated until it is determined the a, it repeats the processing of judgment.

ステップS72において、タイマが終了したと判定された場合、処理は、ステップS73に進む。 In step S72, the case where the timer is determined to have ended, the process proceeds to step S73.

例えば、画像データのフレームの数が、1秒当たり30である場合、タイマが時間の経過に対応して値を増加させるとき、ステップS72において、エンコーダ131は、33msなどの所定の値とタイマの値とを比較することにより、タイマが終了したか否かを判定する。 For example, the number of frames of image data, if it is 30 per second, when that timer increases the value according to the elapse of time, in step S72, the encoder 131, the predetermined value set in a timer, such as 33ms by comparing the values, it is determined whether the timer has ended.

例えば、ステップS71において、タイマの値を33msにセットし、タイマの値が、時間の経過に対応して値を減少させるとき、エンコーダ131は、タイマの値と、0msなどの所定の値とを比較することにより、タイマが終了したか否かを判定する。 For example, in step S71, sets the value of the timer to 33 ms, the value of the timer is, when reducing the value to the elapse of time, the encoder 131, the value of the timer with a predetermined value such as 0ms by comparison, it determines whether or not the timer has ended. なお、この場合における、タイマの値と比較される0msまたは33msは、フレームの数が1秒当たり30である場合の例であり、本発明を限定するものではない。 Incidentally, in this case, 0ms or 33ms is compared with the value of the timer is an example of a case where the number of frames is 30 per second, it is not intended to limit the present invention.

ステップS73において、エンコーダ131は、ビデオカメラ11から供給された画像データを1フレーム分キャプチャする。 In step S73, the encoder 131 for one frame captured image data supplied from the video camera 11. 例えば、ステップS73において、エンコーダ131は、ビデオカメラ11から供給された画像データを順次取得して、取得した画像データのうち、1フレーム分をキャプチャする。 For example, in step S73, the encoder 131 sequentially acquires the image data supplied from the video camera 11, among the image data acquired, to capture one frame.

ステップS74において、エンコーダ131は、コンテンツ階層保持部137に記録されているコンテンツ階層テーブルを参照して、所定の方式によりキャプチャした画像データを、周波数帯域ごとに階層符号化する。 In step S74, the encoder 131 refers to the content hierarchy table recorded in the content hierarchy holding unit 137, the image data captured by a predetermined method, hierarchical coding for each frequency band. エンコーダ131は、階層符号化した画像データをパケタイザ132に供給する。 The encoder 131 supplies the hierarchical encoded image data to the packetizer 132.

例えば、ステップS74において、エンコーダ131は、Motion JEPEG2000などの方式により階層符号化する。 For example, in step S74, the encoder 131, hierarchically encoded by method such as Motion JEPEG2000. この場合、エンコーダ131は、コンテンツ階層保持部137に記録されているコンテンツ階層テーブルを参照し、階層符号化における、1番目の階層から各階層までの画像データのビットレートの合計が、コンテンツ階層テーブルに記録されている、各階層の必要帯域の値のそれぞれを超えないように階層符号化する。 In this case, the encoder 131 refers to the content hierarchy table recorded in the content hierarchy holding unit 137, in the hierarchical coding, the sum of the bit rate of the image data to each layer from the first hierarchy, the content hierarchy table It is recorded in, for hierarchical coding so as not to exceed the respective values ​​of the required bandwidth for each hierarchy. 例えば、エンコーダ131は、キャプチャした画像データに、ウェーブレット変換を適用することによって、画像データを周波数帯域ごとに階層符号化する。 For example, the encoder 131, the image data captured by applying the wavelet transform to hierarchical coding for each frequency band image data.

したがって、例えば、ステップS74において、図8で示されるコンテンツ階層テーブルを参照して、階層符号化を行う場合、エンコーダ131は、1番目の階層の画像データのビットレートが、0.1Mbpsとなるように符号化する。 Thus, for example, at step S74, the referring to content hierarchy table shown in Figure 8, when performing hierarchical coding, the encoder 131, as the bit rate of the image data of the first hierarchy, the 0.1Mbps to encode. また、2番目の階層の画像データのビットレートは、1番目の階層の画像データのビットレートおよび2番目の階層の画像データのビットレートの合計が、2番目の階層の必要帯域の値と同じになるように符号化する。 Also, the second bit rate of the image data in the hierarchy, the sum of the first image data of the hierarchical bit rate and the second bit rate of the image data of the hierarchy, the same value as the required bandwidth of the second hierarchy encoding to be. すなわち、1番目の階層の画像データのビットレートが0.1Mbpsであり、2番目の階層の必要帯域が0.2Mbpsであるので、2番目の階層の画像データのビットレートが、0.1Mbpsとなるように符号化する。 That is, the first bit rate of the image data of the hierarchy is 0.1Mbps, since the required bandwidth of the second hierarchy is 0.2 Mbps, as the bit rate of the image data of the second hierarchy, the 0.1Mbps to encode.

同様にして、エンコーダ131は、3番目の階層の画像データを、1番目の階層の画像データのビットレート乃至3番目の階層の画像データのビットレートの合計が、3番目の階層の必要帯域の値と同じになるように、0.1Mbpsで符号化し、4番目の階層の画像データを、1番目の階層の画像データのビットレート乃至4番目の階層の画像データのビットレートの合計が、4番目の階層の必要帯域の値と同じになるように、0.1Mbpsで符号化し、5番目の階層の画像データを、1番目の階層の画像データのビットレート乃至5番目の階層の画像データのビットレートの合計が、5番目の階層の必要帯域の値と同じになるように、0.1Mbpsで符号化する。 Similarly, the encoder 131, the image data of the third hierarchy, the sum of the first image data of the hierarchical bit rate to the third bit rate of the image data of the hierarchy, the need for bandwidth of the third hierarchy to be the same as the value, encoded in 0.1Mbps, the image data of the fourth hierarchy, the sum of the first image data of the hierarchical bit rate through fourth bit rate of the image data of the hierarchy, fourth to be the same as the value of the required bandwidth of the hierarchy, encoded in 0.1Mbps, the fifth image data hierarchy, the first image data of the hierarchical bit rate through the fifth bit rate of the image data of the hierarchy sum of, as the same as the value of the fifth required bandwidth hierarchy encodes at 0.1Mbps.

なお、エンコーダ131は、Motion JEPEG2000に限らず、MPEG4などの方式により、階層符号化するようにしてもよい。 Incidentally, the encoder 131 is not limited to the Motion JEPEG2000, the method such as MPEG4, it may be hierarchically coded. この場合、エンコーダ131は、キャプチャした画像データに、離散コサイン変換を適用することによって、画像データを周波数帯域ごとに階層符号化する。 In this case, the encoder 131, the image data captured by applying the discrete cosine transform, to hierarchical coding for each frequency band image data. そして、エンコーダ131は、符号化における画像データの階層の数および各階層の必要帯域を示す情報をコンテンツ階層保持部137に供給する。 The encoder 131 supplies information indicating the number and the required bandwidth for each hierarchy of the hierarchical image data in the encoding the content hierarchy holding portion 137. コンテンツ階層保持部137は、供給された、階層化された画像データの階層の数および各階層の必要帯域を示す情報を基に、コンテンツ階層テーブルを生成し、生成したコンテンツ階層テーブルを記録する。 Content hierarchy holding unit 137 is supplied, on the basis of information indicating the number and the required bandwidth of each layer of the hierarchical image data hierarchy, to generate a content hierarchy table, and records the generated content hierarchy table.

ステップS75において、階層処理部139は、コンテンツ階層保持部137に記録されているコンテンツ階層テーブルおよび送信階層情報保持部138から供給された送信階層情報を基に、階層情報を生成し、生成した階層情報をパケタイザ132に供給する。 In step S75, the hierarchical processing unit 139, based on the transmission hierarchy information supplied from the content hierarchy table and transmits the hierarchical information holding unit 138 is recorded in the content hierarchy holding unit 137, it generates layer data, generated layer It supplies information to the packetizer 132.

ステップS76において、パケタイザ132は、エンコーダ131から供給された画像データおよび階層処理部139から供給された階層情報を基に、各階層に対応するRTPパケットを生成する。 In step S76, the packetizer 132 based on the hierarchy information supplied from the image data and the hierarchical processing unit 139 is supplied from the encoder 131, to generate an RTP packet corresponding to each layer.

より詳細には、ステップS76において、パケタイザ132は、エンコーダ131から供給された、各階層の画像データ、送信階層情報、最大階層情報、およびRTPパケットに格納される階層の画像データを示す情報を各階層に対応するRTPパケットのそれぞれに格納することによって、各階層に対応するRTPパケットのそれぞれを生成する。 More specifically, in step S76, the packetizer 132 is supplied from the encoder 131, the image data in each layer, transmission layer information, the maximum hierarchical information, and the information indicating the image data of the hierarchy to be stored in RTP packets each by storing the respective RTP packet corresponding to the hierarchy, to produce a respective RTP packet corresponding to each layer.

したがって、例えば、送信階層が3番目の階層であり、最大階層が、5番目の階層である場合、パケタイザ132は、1番目の階層の画像データ、送信階層情報、最大階層情報、および1番目の階層の画像データが、RTPパケットに格納されていることを示す情報を1番目の階層に対応するRTPパケットに格納することによって、1番目の階層に対応するRTPパケットを生成し、2番目の階層の画像データ、送信階層情報、最大階層情報、および2番目の階層の画像データが、RTPパケットに格納されていることを示す情報を2番目の階層に対応するRTPパケットに格納することによって、2番目の階層に対応するRTPパケットを生成し、3番目の階層の画像データ、送信階層情報、最大階層情報、および3番目の階層の画像データが、RTPパケットに格納 Thus, for example, a transmission hierarchy third hierarchy, the maximum hierarchy, if the fifth hierarchy, the packetizer 132, the image data of the first hierarchy, transmission hierarchy information, the maximum hierarchical information, and the first image data of the hierarchy, by storing the RTP packets corresponding information indicating that it is stored in the RTP packet to the first hierarchy, to generate an RTP packet corresponding to the first hierarchy, the second hierarchy image data, transmission hierarchy information, the maximum hierarchical information, and the image data of the second hierarchy, by storing the RTP packets corresponding information indicating that it is stored in the RTP packet to the second hierarchy, 2 generating an RTP packet corresponding to th hierarchy image data of the third hierarchy, transmission hierarchy information, the maximum hierarchical information, and the image data of the third hierarchy, stored in the RTP packet れていることを示す情報を3番目の階層に対応するRTPパケットに格納することによって、3番目の階層に対応するRTPパケットを生成する。 It is by storing the RTP packet corresponding to the third hierarchical information showing that are to generate an RTP packet corresponding to the third hierarchy. 同様に、4番目の階層の画像データ、送信階層情報、最大階層情報、および4番目の階層の画像データが、RTPパケットに格納されていることを示す情報を4番目の階層に対応するRTPパケットに格納することによって、4番目の階層に対応するRTPパケットを生成し、5番目の階層の画像データ、送信階層情報、最大階層情報、および5番目の階層の画像データが、RTPパケットに格納されていることを示す情報を5番目の階層に対応するRTPパケットに格納することによって、5番目の階層に対応するRTPパケットを生成する。 Similarly, the fourth hierarchy image data, transmission hierarchy information, the maximum hierarchical information, and the fourth image data hierarchy, RTP packets corresponding information indicating that it is stored in the RTP packet to the fourth hierarchy by storing in, generates the RTP packet corresponding to the fourth hierarchy, the image data of the fifth hierarchy, transmission hierarchy information, the image data of the maximum hierarchical information, and fifth hierarchy is stored in the RTP packet by storing the RTP packets corresponding information indicating that is the fifth hierarchy, to generate an RTP packet corresponding to the 5 th hierarchy.

また、ステップS76において、パケタイザ132は、1番目の階層から送信階層までの階層の画像データのそれぞれを、1つのRTPパケットに格納するようにしてもよい。 Further, in step S76, the packetizer 132, the respective image data hierarchy to the transmission hierarchy from the first hierarchy may be stored in one RTP packet. この場合、パケタイザ132は、1番目の階層から送信階層までの階層の画像データのそれぞれ、最大階層情報、および送信階層情報を、1つのRTPパケットに格納することにより、RTPパケットを生成する。 In this case, the packetizer 132, respectively from the first hierarchical image data hierarchy to the transmission hierarchy, the maximum hierarchical information, and the transmission hierarchy information, by storing in a single RTP packet, generates the RTP packet.

なお、RTPパケットは、クライアント14に送信する画像データを格納するパケットの一例である。 Incidentally, RTP packet is an example of a packet storing the image data to be transmitted to the client 14.

図12は、RTPパケットを説明する図である。 Figure 12 is a diagram illustrating an RTP packet. RTPパケットの先頭には、図12において“V”で表される、2ビットのバージョン情報が配置される。 At the beginning of the RTP packet, represented by "V" in FIG. 12, 2-bit version information is located. バージョン情報は、RTPパケットのバージョンを示す。 Version information indicates a version of RTP packet.

バージョン情報の次に図12中の“P”で表される1ビットのパディングが配置され、パディングに続いて、1ビットの拡張情報がRTPパケットに配置される。 Is arranged next to one bit of the padding which is represented by "P" in FIG. 12 of the version information, following the padding, 1 bit extension information is placed into RTP packets. 拡張情報は図12において、“X”で表される。 Extended information 12 is represented by "X". 拡張情報は、拡張ヘッダの有無を表し、RTPパケットに拡張ヘッダを配置する場合に、所定の値に設定される。 Extended information represents the presence or absence of extension header, the case of arranging the extension header in the RTP packet, is set to a predetermined value.

拡張情報に続いて、CSRC(Contributing Source)カウントがRTPパケットに配置される。 Following extended information, CSRC (Contributing Source) count is placed in the RTP packet. CSRCカウントは、図12中において、“CC”で表される。 CSRC count, in FIG. 12, represented by "CC". CSRCカウントは、CSRC識別子の数を表す。 CSRC count represents the number of CSRC identifiers.

CSRCカウントに続いて配置される、1ビットのメーカー情報は、プロファイルによって定義される。 Is arranged subsequent to CSRC count, 1-bit manufacturer information is defined by the profile. メーカー情報は、図12中において“m”で表される。 Manufacturer information is represented by "m" in the figure 12.

メーカー情報に続いて配置される、7ビットのペイロードタイプは、RTPパケットのフォーマットを定義するための情報である。 Is arranged subsequent to the manufacturer information, the payload type of 7 bits is information for defining the format of the RTP packet. ペイロードタイプは、図12中において、“PT”で表される。 Payload type, in FIG. 12, represented by "PT". RTPパケットにおいて、ペイロードタイプは、33とされる。 In the RTP packet, the payload type is 33.

シーケンス番号は、ペイロードタイプの次に配置される、16ビットの情報である。 The sequence number is placed in the next payload type, a 16-bit information. シーケンス番号は、RTPパケットの再生の順番を示す番号であり、送信の度に、1ずつ増える。 The sequence number is a number indicating the order of reproduction of the RTP packet, the time of transmission, increases by one. シーケンス番号は、パケットロスを検出し、RTPパケットの順序を修復するために使用される。 Sequence number to detect packet loss, which is used to repair a sequence of RTP packets.

シーケンス番号の次に配置される、32ビットのタイムスタンプは、そのRTPパケットに格納されているストリーミングデータの最初のオクテットがサンプルされた時刻を示す情報であり、タイムスタンプを基に、RTPパケットの展開時に処理時間の制御が実行され、リアルタイム画像、または音声の再生制御が行われる。 Is positioned to the next sequence number, 32-bit time stamp is information indicating the time at which the first octet of the streaming data stored in the RTP packet is sampled, based on the time stamp, the RTP packet the control of the processing time during development is performed, real-time image or sound reproduction control, is performed. また、同じフレームのストリーミングデータを格納しているRTPパケットには、共通のタイムスタンプが設定される。 Further, the RTP packet containing the streaming data of the same frame, a common time stamp is set.

SSRC(Synchronization Source)識別子は、タイムスタンプの次に配置される、32ビットの情報であって、RTPパケットに格納されるストリーミングデータのソースを示す。 SSRC (Synchronization Source) Identifier is disposed next time-stamp, a 32-bit information, indicating the source of the streaming data stored in the RTP packet.

RTPパケットにおいて、SSRC識別子の次には、RTPパケットに格納される、ストリーミングデータの送信階層を表す、送信階層情報が配置される、送信階層情報は、図12において、“送信階層”で表す。 In RTP packet, the next SSRC identifier is stored in the RTP packet, representing the transmission hierarchy of streaming data, transmission hierarchy information is arranged, transmitted hierarchical information 12 is represented by "transmission hierarchy". また、送信階層情報の次には、RTPパケットに格納される、ストリーミングデータの最大階層を表す、最大階層情報が配置される、最大階層情報は、図12において、“最大階層”で表す。 Also, the next transmission hierarchy information is stored in the RTP packet, representing the maximum hierarchy of streaming data, the maximum hierarchical information is arranged, the maximum hierarchical information 12 is represented by "maximum hierarchy".

さらに、RTPパケットにおいて、最大階層情報の次には、RTPパケットに格納されているストリーミングデータの階層を表す、オリジナルデータの階層が配置される。 Further, the RTP packet, the following maximum hierarchical information represents a hierarchy of streaming data stored in the RTP packet, the hierarchy of the original data is arranged. オリジナルデータの階層は、図12において、“オリジナルデータの階層”で表される。 Hierarchy of the original data in FIG. 12, represented by "original data hierarchy".

RTPパケットにおいて、オリジナルデータの階層の次には、ストリーミングデータが格納される。 In RTP packet, the next original data hierarchy, the streaming data is stored. 図12において、“Original Data”は、ストリーミングデータを示す。 In FIG. 12, "Original Data" indicates the streaming data.

図11のフローチャートの説明に戻り、ステップS77において、パケタイザ132は、生成した各階層に対応するRTPパケットのそれぞれを、バッファ133に供給し、ステップS78において、バッファ133は、階層処理部139の制御のもと、パケタイザ132から供給された、各階層に対応するRTPパケットのそれぞれのうち、1番目の階層から送信階層までの階層のそれぞれに対応するRTPパケットのそれぞれをUDP通信部134に供給し、UDP通信部134に供給しないRTPパケット、すなわち、送信階層より上位の階層に対応するRTPパケットを破棄する。 In the flowchart of Returning to step S77 of FIG. 11, the packetizer 132, respectively corresponding RTP packet to each layer generated, and supplied to the buffer 133, in step S78, the buffer 133, control of the layer processor 139 original, is supplied from the packetizer 132, of the respective RTP packet corresponding to each layer, and supplies the respective RTP packets corresponding to each layer to the transmission hierarchy from the first hierarchy UDP communication unit 134 , RTP packet is not supplied to the UDP communication unit 134, i.e., discarding the RTP packet corresponding to the upper layer than the transmission hierarchy.

ステップS79において、UDP通信部134は、バッファ133から供給されたRTPパケットを、通信網13を介してクライアント14あてに送信し、ステップS80において、パケタイザ132は、RTPパケットに付加するタイムスタンプを更新する。 In step S79, UDP communication unit 134, an RTP packet supplied from the buffer 133, and transmitted via the communication network 13 to the client 14 destined, in step S80, the packetizer 132 updates the time stamp to be added to the RTP packet to.

ステップS81において、エンコーダ131は、内蔵しているタイマをセットし、処理は、終了する。 In step S81, the encoder 131 sets the built-in timer, the process ends. 例えば、ステップS81において、エンコーダ131は、内蔵しているタイマの値を0msにセットする。 For example, in step S81, the encoder 131 sets the value of the built-in timer to 0ms.

このようにして、サーバ12は、画像データをRTPパケットに格納し、画像データが格納されたRTPパケットを、通信網13を介して、クライアント14あてに送信する。 In this way, the server 12 stores the image data in the RTP packet, the RTP packet that the image data is stored, via the communication network 13, and transmits to the client 14 addressed.

図13のフローチャートを参照して、クライアント14によるコンテンツ階層テーブル受信の処理を説明する。 With reference to the flowchart of FIG. 13, the processing of the content hierarchy table received by the client 14.

ステップS101において、TCP通信部158は、サーバ12から送信されてきた、コンテンツ階層テーブルを受信し、受信したコンテンツ階層テーブルをコンテンツ階層保持部159に供給する。 In step S101, TCP communication unit 158 ​​has been transmitted from the server 12 receives the content hierarchy table, and supplies the received content hierarchy table content hierarchy holding portion 159.

ステップS102において、コンテンツ階層保持部159は、TCP通信部158から供給されたコンテンツ階層テーブルを記憶する。 In step S102, content hierarchy holding unit 159 stores the supplied content hierarchy table from the TCP communication unit 158.

ステップS103において、TCP通信部158から供給されたコンテンツ階層テーブルを基に、コンテンツ階層テーブルを表示させる画像データを生成し、生成したコンテンツ階層テーブルを表示させる画像データを出力部87に供給する。 In step S103, based on the supplied content hierarchy table from the TCP communication unit 158, it generates image data for displaying the content hierarchy table, to the output unit 87 the image data for displaying the generated content hierarchy table.

ステップS104において、出力部87は、コンテンツ階層保持部159から供給されたコンテンツ階層テーブルを表示させる画像データを基に、コンテンツ階層テーブルを表示させ、コンテンツ階層テーブル受信の処理は終了する。 In step S104, the output unit 87, based on the image data for displaying the content hierarchy table supplied from the content hierarchy holding unit 159, to display the content hierarchy table, processing content hierarchy table receiving ends.

例えば、ステップS104において、出力部87は、コンテンツ階層保持部159から供給されたコンテンツ階層テーブルを表示させる画像データを基に、図14で示されるコンテンツ階層テーブルを、ディスプレイである出力部87に表示させる。 For example, in step S104, the output unit 87, based on the image data to be displayed on the supplied contents hierarchy table from the content hierarchy holding unit 159, displays the content hierarchy table, the output unit 87 is a display shown in FIG. 14 make.

ディスプレイである出力部87には、ウィンドウ201が表示される。 The output unit 87 is a display window 201 is displayed. ウィンドウ201には、サーバ12から送信されてくる画像データが階層化された階層と、各階層の画像データのそれぞれを送信するために必要とされる、通信網13の必要帯域とを表す、コンテンツ階層テーブルが表示される。 The window 201, the image data transmitted from the server 12 is required to transmit the layered hierarchy, each image data in each layer, representing the required bandwidth of the communication network 13, content hierarchy table is displayed.

また、ユーザが、入力部86を操作することによって、ディスプレイである出力部87に表示されているポインタ(図示せず)を、ボタン202上に移動させ、ボタン202がクリックされると、ウィンドウ201は、閉じられる。 Further, the user, by operating the input unit 86, the pointer displayed on the output unit 87 is a display (not shown) is moved onto the button 202, the button 202 is clicked, the window 201 It is closed. ここで、クリックとは、マウスの左ボタンを押圧して、離す操作をいう。 Here, click and is, by pressing the left mouse button, say the operation to release.

このようにして、クライアント14は、サーバ12から送信されてきたコンテンツ階層テーブルを受信し、受信したコンテンツ階層テーブルを表示させる。 In this way, the client 14 receives the content hierarchy table which has been transmitted from the server 12, and displays the received content hierarchy table.

次に、図15を参照して、クライアント14による変更要求の送信の処理を説明する。 Next, referring to FIG. 15, for explaining the process of transmission of a change request by the client 14.

ステップS121において、UDP通信部151は、サーバ12から送信されてきたRTPパケットを受信し、受信したRTPパケットをRTP処理部152に供給する。 In step S121, UDP communication unit 151 receives the RTP packets transmitted from the server 12 and supplies the received RTP packet to the RTP processor 152.

ステップS122において、RTP処理部152は、UDP通信部151から供給されたRTPパケットから、階層情報を抽出し、抽出した階層情報を階層情報保持部156に供給する。 In step S122, RTP processor 152 supplies the RTP packets supplied from the UDP communication unit 151, extracts the hierarchy information, the extracted hierarchy information in hierarchy information holding section 156.

より詳細には、ステップS122において、RTP処理部152は、UDP通信部151から供給されたRTPパケットから、送信階層情報および最大階層情報を抽出し、抽出した送信階層情報および最大階層情報を、階層情報として、階層情報保持部156に供給する。 More specifically, in step S122, RTP processor 152, the RTP packet supplied from the UDP communication unit 151, and extracts the transmission hierarchy information and maximum hierarchical information, the extracted transmission layer information and maximum hierarchy information, the hierarchy as information is supplied to the hierarchical information holding section 156. そして、RTP処理部152は、UDP通信部151から供給されたRTPパケットから画像データを抽出し、抽出した画像データをデコーダ153に供給する。 Then, RTP processor 152 extracts the image data from the supplied RTP packet from the UDP communication unit 151, and supplies the extracted image data to the decoder 153. そして、さらにRTP処理部152は、UDP通信部151から供給されたRTPパケットから、シーケンス番号を抽出し、抽出したシーケンス番号、RTPパケットの受信時刻、および受信されたRTPパケットのパケットサイズを、ストリーム情報算出部155に供給する。 Then, further RTP processor 152, the RTP packet supplied from the UDP communication unit 151, extracts the sequence number, the extracted sequence number, the reception time of the RTP packet, and the packet size of the received RTP packets, stream and it supplies the information calculator 155.

ステップS123において、階層情報保持部156は、RTP処理部152から供給された階層情報を記憶する。 In step S123, the hierarchical information storage unit 156 stores the hierarchical information supplied from the RTP processor 152. より詳細には、ステップS123において、階層情報保持部156の送信階層情報保持部181は、RTP処理部152から供給された、階層情報である送信階層情報を記憶し、階層情報保持部156の最大階層情報保持部182は、RTP処理部から供給された、階層情報である最大階層情報を記憶する。 More specifically, in step S123, transmits the hierarchical information holding unit 181 of hierarchy information holding unit 156 stores supplied from the RTP processor 152, a transmission hierarchy information is hierarchical information, the maximum hierarchical information holding unit 156 hierarchical information holding unit 182 stores supplied from RTP processor, the maximum hierarchical information is hierarchical information.

ステップS124において、階層変更要求部160は、入力部86から変更信号が供給されたか否かを判定する。 In step S124, the hierarchical change request unit 160 determines whether the change signal is supplied from the input section 86.

なお、変更信号は、ユーザが入力部86を操作することによって、送信階層の変更を指示した場合に、入力部86によって生成され、生成された変更信号が、階層変更要求部160に供給される。 Note that modification signal, the user operates the input unit 86, when instructed to change the transmission hierarchy, is generated by the input unit 86, the generated change signal is supplied to the hierarchical change request unit 160 . ユーザは、ディスプレイである出力部87に表示される、受信した画像、コンテンツ階層テーブル、受信帯域、RTPパケットのロス率、帯域、および送信階層を参照し、必要に応じて、送信階層変更を指示する。 The user is displayed on the output unit 87 is a display, the received image, content hierarchy table, the reception band, the loss rate of the RTP packets, band, and with reference to the transmission hierarchy, if necessary, instructs the transmission hierarchy changes to.

ステップS124において、入力部86から変更信号が供給されたと判定された場合、ステップS125に進み、階層変更要求部160は、階層情報保持部156から階層情報を取得する。 In step S124, the case where change signal from the input unit 86 is determined to have been supplied, the process proceeds to step S125, the hierarchical change request unit 160 acquires the hierarchy information from the hierarchical information storage unit 156.

ステップS126において、階層変更要求部160は、入力部86から供給された変更信号および階層情報保持部156から取得した階層情報を基に、変更要求を生成し、生成した変更要求をTCP通信部158に供給する。 In step S126, the hierarchy change request unit 160, an input unit 86 based on the acquired hierarchy information from the modified signal is supplied and the hierarchy information holding unit 156 from generating a change request, the generated change request TCP communication unit 158 supplied to.

より詳細には、ステップS126において、階層変更要求部160は、入力部86から、送信階層を1つ上位の階層に変更する旨の変更信号が供給された場合、階層情報保持部156から取得した、階層情報である送信階層情報を基に、送信階層を、送信階層情報が示す送信階層の1つ上位の階層に変更する旨の変更要求を生成し、生成した変更要求をTCPに従うパケットに格納する。 More specifically, in step S126, the hierarchy change request unit 160, the input unit 86, if the effect of the change signal for changing the transmission hierarchy one level higher in the hierarchy is supplied, is acquired from the hierarchical information storage unit 156 , stored based on the transmission hierarchy information is hierarchical information, the transmission hierarchy, to produce the effect of a change request to change the hierarchy of one level higher transmission hierarchies indicated by the transmission hierarchy information, the generated change request to the packet according to the TCP to. そして、階層変更要求部160は、変更要求を格納したパケットをTCP通信部158に供給する。 Then, the hierarchy change request unit 160 supplies the stored change request packet to the TCP communication unit 158.

したがって、例えば、ステップS126において、階層変更要求部160は、入力部86から、送信階層を1つ上位の階層に変更する旨の変更信号が供給され、階層情報保持部156から取得した階層情報である送信階層情報が、送信階層が4番目の階層であることを示す送信階層情報であった場合、送信階層を5番目の階層に変更する旨の変更要求を生成し、生成した変更要求をTCPに従うパケットに格納する。 Thus, for example, in step S126, the hierarchy change request unit 160, the input unit 86, is supplied that the change signal for changing the transmission hierarchy one level higher in the hierarchy, by the acquired hierarchical information from the hierarchical information storage unit 156 certain transmission hierarchy information, when the transmission hierarchy was transmitted hierarchical information indicating the fourth hierarchy, to produce the effect of a change request for changing the transmission hierarchy fifth hierarchy, the generated change request TCP and it stores the packet in accordance with. そして、階層変更要求部160は、変更要求を格納したパケットをTCP通信部158に供給する。 Then, the hierarchy change request unit 160 supplies the stored change request packet to the TCP communication unit 158.

また、ステップS126において、階層変更要求部160は、入力部86から、送信階層を1つ下位の階層に変更する旨の変更信号が供給された場合、階層情報保持部156から取得した、階層情報である送信階層情報を基に、送信階層を、送信階層情報が示す送信階層の1つ下位の階層に変更する旨の変更要求を生成し、生成した変更要求をTCPに従うパケットに格納する。 Further, in step S126, the hierarchy change request unit 160, the input unit 86, if the effect of the change signal for changing the transmission hierarchy one level lower in the hierarchy is supplied, it is acquired from the hierarchical information storage unit 156, hierarchy information based on the transmission hierarchy information is, the transmission hierarchy, to produce the effect of a change request to change one lower hierarchy of transmission hierarchy indicated by the transmission hierarchy information, and stores the generated change request to the packet according to TCP. そして、階層変更要求部160は、変更要求を格納したパケットをTCP通信部158に供給する。 Then, the hierarchy change request unit 160 supplies the stored change request packet to the TCP communication unit 158.

したがって、例えば、ステップS126において、階層変更要求部160は、入力部86から送信階層を1つ下位の階層に変更する旨の変更信号が供給され、階層情報保持部156から取得した階層情報である送信階層情報が、送信階層が4番目の階層であることを示す送信階層情報であった場合、送信階層を3番目の階層に変更する旨の変更要求を生成し、生成した変更要求をTCPに従うパケットに格納する。 Thus, for example, in step S126, the hierarchy change request unit 160, change signal indicating a change the transmission hierarchy one level lower in the hierarchy from the input unit 86 is supplied, it is acquired hierarchical information from the hierarchical information storage unit 156 transmission hierarchy information, indicating an transmission hierarchy information indicating that transmission hierarchy is the fourth hierarchy, to produce the effect of a change request for changing the transmission hierarchy to the third hierarchy, according the generated change request to the TCP and stores it in the packet. そして、階層変更要求部160は、変更要求を格納したパケットをTCP通信部158に供給する。 Then, the hierarchy change request unit 160 supplies the stored change request packet to the TCP communication unit 158.

ステップS127において、TCP通信部158は、階層変更要求部160から供給された変更要求を、通信網13を介して、サーバ12あてに送信し、ステップS128に進む。 In step S127, TCP communication unit 158, a change request supplied from the hierarchy change request unit 160, via the communication network 13, and transmitted to the server 12 addressed, the process proceeds to step S128.

一方ステップS124において、入力部86から変更信号が供給されなかったと判定された場合、変更要求をサーバ12に送信する必要がないので、ステップS125乃至ステップS127の処理は、スキップされ、手続きは、ステップS128に進む。 In contrast step S124, the case where change signal from the input unit 86 is determined to not supplied, it is not necessary to send a change request to the server 12, the processing of step S125 through step S127 are skipped, the procedure, step the process proceeds to S128.

ステップS128において、ストリーム情報算出部155は、RTP処理部152から供給されたRTPパケットの受信時刻およびパケットサイズを基に、受信帯域を算出し、算出した受信帯域を基に、受信帯域を表示させる画像データを生成する。 In step S128, the stream information calculation unit 155, based on the reception time and packet size of the RTP packet supplied from the RTP processor 152 calculates the reception band, based on the calculated reception bandwidth, and displays the reception band to generate image data. そして、ストリーム情報算出部155は、生成した受信帯域を表示させる画像データを出力部87に供給する。 The stream information calculation unit 155 supplies the image data for displaying the generated reception band to the output unit 87.

例えば、ステップS128において、ストリーム情報算出部155は、RTP処理部152から供給された1つのフレームを構成するRTPパケットのパケットサイズの合計、およびRTPパケットを受信した時刻を式(2)に代入することによって、受信帯域を算出する。 For example, in step S128, the stream information calculation unit 155 substitutes the sum of packet size of the RTP packets constituting one frame supplied from the RTP processor 152, and the time of reception of the RTP packet to the formula (2) it allows to calculate the reception band.

(受信帯域)=S2/(t42−t41) ・・・(2) (Reception band) = S2 / (t42-t41) ··· (2)

ここで、S2は、受信された1つのフレームを構成するRTPパケットのパケットサイズの合計である。 Here, S2 is the sum of the packet size of the RTP packets constituting one frame received. また、t41は、1つのフレームを構成するRTPパケットのうち、一番初めに受信されたRTPパケットの受信時刻であり、t42は、次の1つのフレームを構成するRTPパケットのうち、一番初めに受信されたRTPパケットの受信時刻である。 Also, t41, among the RTP packets constituting one frame, a reception time of the received RTP packet to the very first, t42, of the RTP packet constituting the next one frame, the very first a reception time of the received RTP packets.

したがって、例えば、図2の例において、受信されたフレーム32を構成するパケット42−1乃至パケット42−3を基に、受信帯域を算出する場合、RTPパケットのパケットサイズの合計S2は、パケット42−1乃至パケット42−3のパケットサイズの合計であり、フレーム32を構成するパケットのうち、一番初めに受信されたパケットの受信時刻t41は、クライアント14が、パケット42−1を受信した時刻であり、次のフレーム33を構成するパケットのうち、一番初めに受信されたパケットの受信時刻t42は、クライアント14が、パケット43−1を受信した時刻である。 Thus, for example, in the example of FIG. 2, on the basis of the packet 42-1 to the packet 42-3 constituting a frame 32 which is received, when calculating the reception band, the sum S2 of packet size of the RTP packet, the packet 42 -1 to the sum of packet size of the packet 42-3, the time of the packets constituting the frame 32, the reception time t41 of the received packet at the very beginning, the client 14 has received the packet 42-1 , and the out of the packets constituting the next frame 33, the reception time t42 of packets received at the very beginning, the client 14, the time at which the packet was received 43-1.

ステップS129において、ストリーム情報算出部155は、RTP処理部152から供給されたシーケンス番号を基に、RTPパケットのロス率を算出し、算出したロス率を基に、ロス率を表示させる画像データを生成する。 In step S129, the stream information calculation unit 155, based on the sequence number supplied from the RTP processor 152 to calculate the loss rate of the RTP packet, based on the calculated loss rate, the image data for displaying the loss rate generated. そして、ストリーム情報算出部155は、生成したロス率を表示させる画像データを、出力部87に供給する。 The stream information calculation unit 155, the image data for displaying the generated loss rate, to the output unit 87.

ステップS130において、デコーダ153は、RTP処理部153から供給された画像データを、エンコーダ131の符号化方式に対応する方式により復号する。 In step S130, the decoder 153, the image data supplied from the RTP processor 153, decodes the method corresponding to the encoding method of the encoder 131. デコーダ153は、復号した画像データを合成部154に供給する。 The decoder 153 supplies the decoded image data to the combining unit 154.

例えば、ステップS130において、デコーダ153は、RTP処理部152から、1番目の階層から3番目の階層の画像データのそれぞれが供給された場合、供給された1番目の階層から3番目の階層の画像データのそれぞれをエンコーダ131の符号化方式に対応する方式により、1つの画像データに復号し、復号した画像データを合成部154に供給する。 For example, in step S130, the decoder 153, the RTP processor 152, the first case of each of the image data of the third hierarchy is supplied from the hierarchy, the supplied first third hierarchy from hierarchical image the method corresponding to each of the data encoding method of the encoder 131, and decodes into one image data, and supplies the image data obtained by decoding to the combining unit 154.

ステップS131において、合成部154は、デコーダ153から供給された画像データおよび階層情報保持部156から供給された階層情報を表示させるデータを重畳し、重畳した画像データを出力部87に供給する。 In step S131, the synthesis unit 154 superimposes the data for displaying hierarchical information supplied from the image data and the hierarchy information holding unit 156 is supplied from the decoder 153, supplied to the output unit 87 the image data obtained by superimposing.

ステップS132において、出力部87は、合成部154から供給された画像データを基に、画像をディスプレイである出力部87に表示させる。 In step S132, the output unit 87, based on the image data supplied from the combining unit 154, and displays the image to the output unit 87 is a display. 例えば、ステップS132において、出力部87は、合成部154から供給された画像データを基に、図16で示される画像をディスプレイである出力部87に表示させる。 For example, in step S132, the output unit 87, based on the image data supplied from the combining unit 154 to display the image shown in FIG. 16 to the output section 87 is a display.

ディスプレイである出力部87には、ウィンドウ231が表示され、ウィンドウ231には、受信された画像241が表示される。 The output unit 87 is a display, to display the window 231, the window 231, the image 241 is displayed received. また、ウィンドウ231には、受信帯域、RTPパケットのロス率、帯域、および送信階層のそれぞれを表す文字“受信帯域”、“ロス率”、“帯域”、および“送信階層”のそれぞれが表示され、表示されたそれぞれの文字の右側に、それぞれの値が表示される。 Further, the window 231, the reception band, the loss rate of the RTP packets, band, and the letter "reception band" representing respective transmission hierarchy, "loss rate", "band", and displays each "transmission hierarchy" is , to the right of each character displayed, each value is displayed.

例えば、受信帯域を表す文字“受信帯域”の右側に、受信帯域の値“0.4Mbps”が表示され、RTPパケットのロス率を表す文字“ロス率”の右側に、ロス率の値“1%”が表示され、帯域を表す文字“帯域”の右側に、帯域の値“0.3Mbps”が表示され、送信階層を表す文字“送信階層”の右側に、最大階層が5番目の階層であり、送信階層が3番目の階層であることを示す“3/5”が表示される。 For example, to the right of the character "reception band" representing the reception band, displays the value "0.4Mbps" the reception band, to the right of the character "loss rate" indicating a loss rate of the RTP packet, the value of the loss rate "1% "is displayed, the character representing the bandwidth" "to the right of the value of the band" band "is displayed, the character representing the transmission hierarchy" 0.3 Mbps on the right side of the transmission hierarchy ", the maximum hierarchy fifth hierarchy, indicating that the transmission hierarchy is the third hierarchy "3/5" is displayed.

また、送信階層を表す文字“送信階層”の下には、最大階層および送信階層を表す数直線が表示される。 Further, under the letter "transmission hierarchy" representing the transmission hierarchy, the number line representing the maximum hierarchy and transmission hierarchy is displayed. 図16の例においては、数直線上の“3”で表される目盛り上に表示されている四角によって、送信階層が3番目の階層であることが表されている。 In the example of FIG. 16, the squares being displayed on the scale represented by the number line on the "3", which is represented that the transmission hierarchy is the third hierarchy.

さらに、ユーザが、入力部86を操作することによって、ポインタ(図示せず)を移動させ、ボタン232がクリックされた場合、ウィンドウ231は、閉じられる。 Furthermore, the user, by operating the input unit 86, moves the pointer (not shown), when the button 232 is clicked, the window 231 is closed.

より詳細には、ステップS132において、出力部87は、合成部154から供給された画像データ、ストリーム情報算出部155から供給された、ロス率を表示させる画像データおよび受信帯域を表示させる画像データ、並びに帯域算出部157から供給された帯域測定結果を表示させる画像データを重畳し、重畳した画像データを基に、ディスプレイである出力部87に画像を表示させる。 More specifically, in step S132, the output unit 87, image data supplied from the combining unit 154, which is supplied from the stream information calculation unit 155, image data for displaying the image data and the reception band to display the loss rate, and superimposes the image data for displaying the results supplied band measurement from the band calculating unit 157, based on image data obtained by superimposing, to display an image on the output unit 87 is a display. また、出力部87は、合成部154、ストリーム情報算出部155、または帯域算出部157から新たな画像データが供給された場合、表示している画像の画像データと新たに供給された画像データとを重畳し、重畳した画像データを基に、ディスプレイである出力部87に画像を表示させる。 The output unit 87, a combining unit 154, the stream information calculation section 155 or when a new image data from the band calculation portion 157 is supplied, the image data of the image displayed and the newly supplied image data superimposing a, based on the image data obtained by superimposing, to display an image on the output unit 87 is a display.

したがって、例えば、帯域算出部157から、帯域測定結果を表示する新たな画像データが供給された場合、出力部87は、それまで表示していた帯域測定結果を表示させる画像データを破棄し、合成部154から供給された画像データ、ストリーム情報算出部155から供給された、ロス率を表示させる画像データおよび受信帯域を表示させる画像データ、並びに帯域算出部157から、新たに供給された帯域測定結果を表示させる画像データを重畳し、重畳した画像データを基に、ディスプレイである出力部87に画像を表示させる。 Thus, for example, from the bandwidth calculation unit 157, when a new image data for displaying the bandwidth measurement result is supplied, the output unit 87 discards the image data for displaying the band measurement result has been displayed so far, synthetic image data supplied from section 154, which is supplied from the stream information calculation unit 155, image data for displaying the image data and the reception band to display the loss rate, and the bandwidth calculation unit 157, the bandwidth measurements newly supplied superimposing the image data to be displayed, and based on the image data obtained by superimposing, to display an image on the output unit 87 is a display.

ステップS133において、出力部87は、ストリーム情報算出部155から供給された通信網13の受信帯域を表示させる画像データを基に、ディスプレイである出力部87に、通信網13の受信帯域を表示させる。 In step S133, the output unit 87, based on the image data for displaying the reception band of the communication network 13 supplied from the stream information calculation unit 155, the output unit 87 is a display to display the receiving band of the communication network 13 .

ステップS134において、出力部87は、ストリーム情報算出部155から供給されたRTPパケットのロス率を表示させる画像データを基に、ディスプレイである出力部87に、RTPパケットのロス率を表示させ、ステップS121に戻り、上述した処理を繰り返す。 In step S134, the output unit 87, based on the image data for displaying the loss rate of the supplied RTP packet from the stream information calculation unit 155, the output unit 87 is a display, to display a loss rate of the RTP packet, step returns to the S121, the processing described above is repeated.

このようにして、クライアント14は、変更要求を生成し、生成した変更要求を、通信網13を介して、サーバ12あてに送信する。 In this way, the client 14 generates a change request, the generated change requests, via the communication network 13, and transmits to the server 12 addressed. また、クライアント14は、ロス率、階層情報、および受信帯域を表示するので、ユーザは、設定されている送信階層が、通信網13の帯域に対して、適正であるか否かを知ることができる。 The client 14, loss rate, hierarchical information, and so display the reception band, the user transmits hierarchy has been set, with respect to the bandwidth of the communications network 13, to know whether the proper it can.

以上のように、クライアント14は、サーバ12から送信されてくるコンテンツ階層テーブルを表示させることができる。 As described above, the client 14 can display the content hierarchy table transmitted from the server 12.

次に、本発明の第2の実施例について、説明する。 Next, a second embodiment of the present invention will be described.

図17のタイムチャートを参照して、サーバ12における、帯域測定の処理および送信階層の変更の処理の例を説明する。 With reference to the time chart of FIG. 17, the server 12, an example of a process of changing the processing and transmission hierarchy of bandwidth measurement.

図17において、横軸は時間を示し、帯域測定パケット261は、例えば、通信網13の帯域を測定するための、等しいパケットサイズのパケット271−1およびパケット271−2から構成される。 17, the horizontal axis represents time, bandwidth measurement packets 261, for example, to measure the bandwidth of a communication network 13, and the packet 271-1 and a packet 271-2 of equal packet size. また、例えば、フレーム262を再生するための画像データであるストリーミングデータは、パケット272−1乃至パケット272−3に格納されて送信され、フレーム263を再生するための画像データであるストリーミングデータは、パケット273−1乃至パケット273−3に格納されて送信され、フレーム264を再生するための画像データであるストリーミングデータは、パケット274−1乃至パケット274−4に格納されて送信される。 Further, for example, streaming data is image data for reproducing a frame 262, is transmitted stored in the packet 272-1 to the packet 272-3, the streaming data is image data for reproducing the frame 263, packet 273-1 to be stored in the packet 273-3 transmitted, the streaming data is image data for reproducing the frame 264 is transmitted stored in the packet 274-1 to the packet 274-4.

時刻t51において、サーバ12は、通信網13の帯域を測定するためのパケット271−1を、通信網13を介して、クライアント14あてに送信する。 At time t51, the server 12, the packet 271-1 for measuring the band of the communication network 13, via the communication network 13, and transmits to the client 14 addressed. 同様に、時刻t52において、サーバ12は、通信網13の帯域を測定するためのパケット271−2を、通信網13を介して、クライアント14あてに送信する。 Similarly, at time t52, the server 12, the packet 271-2 for measuring the band of the communication network 13, via the communication network 13, and transmits to the client 14 addressed. パケット271−1およびパケット271−2は、時間間隔をおかずに、続けて(連続して)クライアント14あてに送信される。 Packet 271-1 and the packet 271-2 is the side dishes a time interval, followed by (sequentially) sent to the client 14 addressed.

時刻t61において、クライアント14は、サーバ12から送信されてきたパケット271−1を受信し、時刻t62において、クライアント14は、サーバ12から送信されてきたパケット271−2を受信する。 At time t61, the client 14 receives the packet 271-1 transmitted from the server 12, at time t62, the client 14 receives the packet 271-2 transmitted from the server 12. クライアント14は、パケット271−1およびパケット271−2を受信すると、受信したパケット271−1およびパケット271−2を基に、通信網13における帯域を算出する。 The client 14 receives the packet 271-1 and a packet 271-2, based on the packet 271-1 and a packet 271-2 received, calculates a bandwidth in the communication network 13.

時刻t63において、クライアント14は、算出した帯域の測定結果である帯域測定結果を、通信網13を介して、サーバ12あてに送信する。 At time t63, the client 14, the bandwidth measurement results are measurement results of the calculated band, via the communication network 13, and transmits to the server 12 addressed. 例えば、クライアント14は、帯域測定結果をパケットに格納し、帯域測定結果を格納したパケットを、通信網13を介して、サーバ12あてに送信する。 For example, the client 14 stores the bandwidth measurement result to the packet, the packet storing bandwidth measurement results, through the communication network 13, and transmits to the server 12 addressed.

時刻t53において、サーバ12は、クライアント14から送信されてきた帯域測定結果を受信する。 At time t53, the server 12 receives the bandwidth measurement result transmitted from the client 14. サーバ12は、帯域測定結果を受信すると、受信した帯域測定結果を基に、送信階層を選択し、時刻t54において、送信階層情報および最大階層情報からなる階層情報を、通信網13を介して、クライアント14あてに送信する。 Server 12 receives the bandwidth measurement result, based on the bandwidth measurement results received, and selects a transmission hierarchy, at time t54, the hierarchy information made of transmitting the hierarchical information and the maximum hierarchical information, via the communication network 13, to send to the client 14 addressed. 例えば、サーバ12は、階層情報をパケットに格納し、階層情報を格納したパケットを、通信網13を介して、クライアント14あてに送信する。 For example, the server 12 stores the hierarchical information to the packet, the packet storing the layer information, via the communication network 13, and transmits to the client 14 addressed.

サーバ12は、階層情報をクライアント14あてに送信してから、選択した送信階層を基に、パケット272−1乃至パケット272−3を、通信網13を介して、クライアント14あてに送信する。 Server 12 from the transmission of the hierarchy information to the client 14 addressed on the basis of the selected transmission hierarchy, the packet 272-1 to the packet 272-3, via the communication network 13, and transmits to the client 14 addressed. 同様に、サーバ12は、パケット273−1乃至パケット273−3を、通信網13を介して、クライアント14あてに送信する。 Similarly, the server 12, the packet 273-1 to the packet 273-3, via the communication network 13, and transmits to the client 14 addressed.

クライアント14は、サーバ12から送信されてきた階層情報、パケット272−1乃至パケット272−3、およびパケット273−1乃至パケット273−3を受信する。 The client 14 receives the hierarchical information transmitted from the server 12, the packet 272-1 to the packet 272-3, and the packet 273-1 to the packet 273-3.

時刻t64において、クライアント14は、変更要求を、通信網13を介して、サーバ12あてに送信する。 At time t64, the client 14, a change request, via the communication network 13, and transmits to the server 12 addressed. 例えば、クライアント14は、変更要求をパケットに格納し、変更要求を格納したパケットを、通信網13を介して、サーバ12あてに送信する。 For example, the client 14 stores the change request to the packet, the stored change request packet via the communication network 13, and transmits to the server 12 addressed.

サーバ12は、クライアント14から送信されてきた変更要求を受信する。 Server 12 receives the change request transmitted from the client 14. サーバ12は、受信した変更要求を基に、送信階層を変更し、変更した送信階層を基に、階層情報を生成する。 Server 12, based on the change request received, change the transmission hierarchy, based on the changed transmission hierarchy, to generate the hierarchical information.

時刻t55において、サーバ12は、生成した階層情報を、通信網13を介して、クライアント14あてに送信する。 At time t55, the server 12, the generated layer information, via the communication network 13, and transmits to the client 14 addressed. サーバ12は、階層情報を送信してから、変更した送信階層を基に、パケット274−1乃至パケット274−4を、通信網13を介して、クライアント14あてに送信する。 Server 12 from the transmission of the hierarchy information based on the changed transmission hierarchy, the packet 274-1 to the packet 274-4, via the communication network 13, and transmits to the client 14 addressed.

クライアント14は、サーバ12から送信されてきた階層情報およびパケット274−1乃至パケット274−4を受信する。 The client 14 receives the hierarchical information and packet 274-1 to the packet 274-4 transmitted from the server 12.

このようにして、サーバ12は、帯域に応じて送信階層を選択し、選択した送信階層を基に、画像データが格納されているパケットをクライアント14に送信する。 In this way, the server 12 selects a transmission hierarchy in accordance with the band, on the basis of the selected transmission hierarchy, transmits a packet image data is stored in the client 14.

図18は、サーバ12の機能の構成を示すブロック図である。 Figure 18 is a block diagram showing a configuration of functions of the server 12.

サーバ12は、エンコーダ291、パケタイザ292、バッファ293、UDP通信部294、TCP通信部295、送信階層選択部296、コンテンツ階層保持部297、送信階層情報保持部298、および階層処理部299を含むように構成される。 Server 12, the encoder 291, packetizer 292, a buffer 293, UDP communication unit 294, TCP communication unit 295, transmission layer selection section 296, content hierarchy holding portion 297, to include a transmission hierarchy information holding section 298 and the layer processor 299, configured.

なお、エンコーダ291、バッファ293、UDP通信部294、送信階層選択部296、コンテンツ階層保持部297、および送信階層情報保持部298のそれぞれは、図5におけるエンコーダ131、バッファ133、UDP通信部134、送信階層選択部136、コンテンツ階層保持部137、および送信階層情報保持部138のそれぞれと同様なので、その説明は、省略する。 Incidentally, an encoder 291, a buffer 293, UDP communication unit 294, each of the transmission layer selection section 296, content hierarchy holding unit 297, and transmits the hierarchy information holding unit 298, the encoder 131 in FIG. 5, the buffer 133, UDP communication unit 134, transmitting layer selection section 136, content hierarchy holding unit 137, and respectively the same as the transmission layer information holding unit 138, description thereof will be omitted.

パケタイザ292は、エンコーダ291から供給された画像データを、RTP方式のパケットに格納することにより、RTPパケットを生成する。 Packetizer 292, the image data supplied from the encoder 291, by storing the packet of RTP scheme to generate an RTP packet. パケタイザ292は、生成したRTPパケットをバッファ293に供給する。 Packetizer 292 supplies the generated RTP packet in the buffer 293.

より詳細には、パケタイザ292は、階層符号化された、1つの階層に対応する画像データを1つのRTPパケットに格納することにより、各階層に対応するRTPパケットのそれぞれを生成する。 More particularly, packetizer 292, hierarchically encoded, by storing the image data corresponding to one hierarchy to a single RTP packet, generating respective RTP packet corresponding to each layer. パケタイザ292は、生成した各階層に対応するRTPパケットのそれぞれを、バッファ293に供給する。 Packetizer 292, each RTP packet corresponding to each layer generated is supplied to the buffer 293.

TCP通信部295は、通信網13を介して、各種のデータの送受信を行う。 TCP communication unit 295 via the communication network 13 to transmit and receive various data. TCP通信部295は、TCPに従って、データの送受信を行う。 TCP communication unit 295 in accordance with TCP, to transmit and receive data.

TCP通信部295は、コンテンツ階層保持部297から供給されたコンテンツ階層テーブルを、通信網13を介してクライアント14あてに送信する。 TCP communication unit 295, a content hierarchy table supplied from the content hierarchy holding unit 297, via the communication network 13 to the client 14 addressed. TCP通信部295は、階層処理部299から供給された階層情報を、通信網13を介して、クライアント14あてに送信する。 TCP communication unit 295, a hierarchical information supplied from the hierarchical processing unit 299, via the communication network 13, and transmits to the client 14 addressed. また、TCP通信部295は、クライアント14から送信されてきた変更要求を受信し、受信した変更要求を階層処理部299に供給する。 Furthermore, TCP communication unit 295 receives the change request transmitted from the client 14, and supplies the modified received request to the hierarchical processing unit 299. TCP通信部295は、クライアント14から送信されてきた帯域測定結果を受信し、受信した帯域測定結果を、送信階層選択部296に供給する。 TCP communication unit 295 receives the bandwidth measurement result transmitted from the client 14, the bandwidth measurement results received, and supplies this to the transmission layer selection section 296.

なお、UDP通信部294およびTCP通信部295は、通信部(図示せず)を制御して、通信部を介することにより、データの送受信を行う。 Incidentally, UDP communication unit 294 and the TCP communication unit 295 controls communication unit (not shown), by passing through the communication unit performs transmission and reception of data.

階層処理部299は、送信階層情報保持部298から供給された送信階層情報およびコンテンツ階層保持部297から供給されたコンテンツ階層テーブルを基に、階層情報を生成し、生成した階層情報をTCP通信部295に供給する。 Layer processor 299, based on the supplied content hierarchy table from the transmission hierarchy information transmitted is supplied from the holding portion 298 hierarchy information and content hierarchy holding unit 297, it generates layer data, generated layer information TCP communication unit and supplies to 295.

階層処理部299は、バッファ293を制御して、生成した階層情報を基に、1番目の階層から送信階層までの階層のそれぞれに対応するRTPパケットのそれぞれをUDP通信部294に供給させる。 Layer processor 299 controls the buffer 293, based on the generated layer information, to supply the respective RTP packets corresponding to each layer to the transmission hierarchy from the first hierarchy UDP communication unit 294.

階層処理部299は、TCP通信部295から供給された変更要求を基に、送信階層情報を生成し、生成した送信階層情報を送信階層情報保持部298に供給する。 Layer processor 299, based on the change request that has been supplied from the TCP communication unit 295, generates transmission hierarchy information, and supplies the generated transmission hierarchy information to the transmission hierarchy information holding section 298.

図19は、クライアント14の機能の構成を示すブロック図である。 Figure 19 is a block diagram showing a configuration of a function of the client 14.

クライアント14は、UDP通信部311、RTP処理部312、デコーダ313、合成部314、ストリーム情報算出部315、階層情報保持部316、帯域算出部317、TCP通信部318、コンテンツ階層保持部319、出力部320、入力部321、および階層変更要求部322を含むように構成される。 Client 14, UDP communication unit 311, RTP processor 312, a decoder 313, a combining unit 314, the stream information calculator 315, the hierarchical information holding section 316, band calculation section 317, TCP communication unit 318, content hierarchy holding unit 319, the output part 320 is configured to include an input unit 321 and the hierarchy change request unit 322,.

なお、UDP通信部311、デコーダ313、合成部314、ストリーム情報算出部315、帯域算出部317、コンテンツ階層保持部319、出力部320、入力部321、および階層変更要求部322のそれぞれは、図6におけるUDP通信部151、デコーダ153、合成部154、ストリーム情報算出部155、帯域算出部157、コンテンツ階層保持部159、出力部87、入力部86、および階層変更要求部160のそれぞれと同様なので、その説明は、省略する。 Incidentally, UDP communication unit 311, a decoder 313, a combining unit 314, the stream information calculation section 315, band calculation section 317, content hierarchy holding unit 319, an output unit 320, the respective inputs 321 and hierarchy change request unit 322, and FIG. UDP communication unit 151 in 6, the decoder 153, the combining unit 154, the stream information calculation section 155, band calculation section 157, content hierarchy holding unit 159, an output unit 87, input unit 86, and the same as the respective hierarchy change request unit 160 , and a description thereof will be omitted.

RTP処理部312は、UDP通信部311から供給されたRTPパケットから画像データを抽出し、抽出した画像データをデコーダ313に供給する。 RTP processing unit 312 extracts image data from the supplied RTP packet from the UDP communication unit 311, and supplies the extracted image data to the decoder 313. また、RTP処理部312は、UDP通信部311から供給されたRTPパケットからシーケンス番号を抽出し、抽出したシーケンス番号、RTPパケットの受信時刻、およびRTPパケットのパケットサイズをストリーム情報算出部315に供給する。 Moreover, RTP processing unit 312 extracts a sequence number from the RTP packet supplied from the UDP communication unit 311, the extracted sequence number, supply the reception time of the RTP packet, and the packet size of the RTP packet stream information calculation unit 315 to.

階層情報保持部316は、TCP通信部318から供給された階層情報を保持(記憶)する。 Hierarchical information holding unit 316 holds a hierarchical information supplied from the TCP communication unit 318 (storage) to. 階層情報保持部316は、TCP通信部318から供給された階層情報を基に、階層情報を表示させる画像データを生成し、生成した画像データを合成部314に供給する。 Hierarchical information holding unit 316, based on the hierarchy information supplied from the TCP communication unit 318, generates image data for displaying hierarchical information, and supplies the generated image data to the combining unit 314. 階層情報保持部316は、TCP通信部318から供給された階層情報を、階層変更要求部322に供給する。 Hierarchical information holding unit 316, the hierarchy information supplied from the TCP communication unit 318, and supplies the hierarchy change request unit 322.

なお、階層情報保持部316は、生成した階層情報を表示させる画像データを、合成部314に供給せずに、出力部320に供給するようにしてもよい。 Incidentally, the hierarchical information storage unit 316, the image data for displaying the generated layer data, without supplying to the combining unit 314 may be supplied to the output unit 320.

階層情報保持部316は、送信階層情報保持部331および最大階層情報保持部332を含むように構成される。 Hierarchical information holding unit 316 is configured to include a transmission hierarchy information holding section 331 and the maximum hierarchical information holding section 332.

階層情報保持部316の送信階層情報保持部331は、TCP通信部318から供給された階層情報の送信階層情報を記憶する。 Transmitting the hierarchical information holding section of the hierarchy information holding section 316 331 stores the transmission hierarchy information of the hierarchical information supplied from the TCP communication unit 318. 階層情報保持部316の最大階層情報保持部332は、TCP通信部318から供給された階層情報の最大階層情報を記憶する。 Maximum hierarchical information holding section 332 of hierarchy information holding unit 316 stores the maximum hierarchical information hierarchy information supplied from the TCP communication unit 318.

TCP通信部318は、サーバ12のTCP通信部295に対応し、通信網13を介して、各種のデータの送受信を行う。 TCP communication unit 318 corresponds to the TCP communication unit 295 of the server 12, via the communication network 13 to transmit and receive various data. TCP通信部318は、TCPに従って、データの送受信を行う。 TCP communication unit 318 in accordance with TCP, to transmit and receive data.

TCP通信部318は、サーバ12から送信されてきたコンテンツ階層テーブルを受信し、受信したコンテンツ階層テーブルをコンテンツ階層保持部319に供給する。 TCP communication unit 318 receives the content hierarchy table which has been transmitted from the server 12 and supplies the received content hierarchy table content hierarchy holding portion 319. また、TCP通信部318は、サーバ12から送信されてきた階層情報を受信し、受信した階層情報を階層情報保持部316に供給する。 Furthermore, TCP communication unit 318 receives the hierarchical information transmitted from the server 12 and supplies the received hierarchy information in hierarchy information holding section 316.

TCP通信部318は、帯域算出部317から供給された帯域測定結果を、通信網13を介して、サーバ12あてに送信する。 TCP communication unit 318, the bandwidth measurement result supplied from the bandwidth calculation unit 317, via the communication network 13, and transmits to the server 12 addressed. TCP通信部318は、階層変更要求部322から供給された変更要求を、通信網13を介して、サーバ12あてに送信する。 TCP communication unit 318, the supplied change request from the hierarchy change request unit 322, via the communication network 13, and transmits to the server 12 addressed.

なお、UDP通信部311およびTCP通信部318は、通信部(図示せず)を制御して、通信部を介することにより、データの送受信を行う。 Incidentally, UDP communication unit 311 and the TCP communication unit 318 controls communication unit (not shown), by passing through the communication unit performs transmission and reception of data.

次に、図20のフローチャートを参照して、サーバプログラムを実行するサーバ12による、送信階層変更の処理を説明する。 Next, with reference to the flowchart of FIG. 20, by the server 12 for executing the server program, the processing of the transmission hierarchy changes.

ステップS151において、送信階層選択部296は、帯域測定の処理を実行する。 In step S151, the transmission layer selection section 296 performs the process of bandwidth measurement. ステップS151における帯域測定の処理は、図9のフローチャートを参照して説明した処理と同様なので、その説明は省略する。 Processing bandwidth measurement in step S151 is the same as the processing described with reference to the flowchart of FIG. 9, a description thereof will be omitted. なお、帯域測定の処理において、送信階層が選択される。 In the process of the band measurement, transmission hierarchy is selected.

ステップS152において、階層処理部299は、コンテンツ階層保持部297から供給されたコンテンツ階層テーブルおよび送信階層情報保持部298から供給された送信階層情報を基に、階層情報を生成し、生成した階層情報をTCP通信部295に供給する。 In step S152, the hierarchical processing unit 299, based on the transmission hierarchy information supplied from the content hierarchy holding portion 297 supplied content hierarchy table and transmitted from the hierarchy information holding unit 298, generates layer data, generated layer information and supplies to the TCP communication unit 295.

より詳細には、ステップS152において、階層処理部299は、コンテンツ階層保持部297から供給されたコンテンツ階層テーブルおよび送信階層情報保持部298から供給された送信階層情報を基に、階層情報を生成し、生成した階層情報をTCPに従ったパケットに格納する。 More specifically, in step S152, the hierarchical processing unit 299, based on the transmission hierarchy information supplied from the content hierarchy holding portion 297 supplied content hierarchy table and transmitted from the hierarchy information holding unit 298, generates layer information , stores the generated layer data into packets according to TCP. そして、階層処理部299は、階層情報を格納したパケットをTCP通信部295に供給する。 The layer processor 299 supplies the packet storing hierarchy information to the TCP communication unit 295.

ステップS153において、TCP通信部295は、階層処理部299から供給された階層情報を、通信網13を介して、クライアント14あてに送信し、ステップS154に進む。 In step S153, TCP communication unit 295, a hierarchical information supplied from the hierarchical processing unit 299, via the communication network 13, and sends to the client 14 addressed, the process proceeds to step S154.

ステップS154乃至ステップS157の処理のそれぞれは、図7におけるステップS12乃至ステップS15の処理のそれぞれと同様なので、その説明は、省略する。 Each of the processing of step S154 to step S157, the same as the respective processes of steps S12 to S15 in FIG. 7, a description thereof will be omitted. なお、ステップS156において、TCP通信部295が、クライアント14から変更要求を受信したと判定された場合、ステップS157に進み、変更要求を受信していないと判定された場合、送信階層を変更する必要がないので、ステップS157乃至ステップS159の処理は、スキップされ、手続きは、ステップS160に進む。 Note that, in step S156, TCP communication unit 295, when it is determined that it has received the change request from the client 14 if, the process proceeds to step S157, it is determined that it has not received the change request, necessary to change the transmission hierarchy since there is no, processing of steps S157 through step S159 is skipped, and the process, the process proceeds to step S160.

ステップS158において、階層処理部299は、コンテンツ階層保持部297から供給されたコンテンツ階層テーブルおよび送信階層情報保持部298から供給された送信階層情報を基に、階層情報を生成し、生成した階層情報をTCP通信部295に供給する。 In step S158, the hierarchical processing unit 299, based on the transmission hierarchy information supplied from the content hierarchy holding portion 297 supplied content hierarchy table and transmitted from the hierarchy information holding unit 298, generates layer data, generated layer information and supplies to the TCP communication unit 295.

より詳細には、ステップS158において、階層処理部299は、コンテンツ階層保持部297から供給されたコンテンツ階層テーブルおよび送信階層情報保持部298から供給された送信階層情報を基に、階層情報を生成し、生成した階層情報をTCPに従ったパケットに格納する。 More specifically, in step S158, the hierarchical processing unit 299, based on the transmission hierarchy information supplied from the content hierarchy holding portion 297 supplied content hierarchy table and transmitted from the hierarchy information holding unit 298, generates layer information , stores the generated layer data into packets according to TCP. そして、階層処理部299は、階層情報を格納したパケットをTCP通信部295に供給する。 The layer processor 299 supplies the packet storing hierarchy information to the TCP communication unit 295.

ステップS159において、TCP通信部295は、階層処理部299から供給された階層情報を、通信網13を介して、クライアント14あてに送信し、ステップS160に進む。 In step S159, TCP communication unit 295, a hierarchical information supplied from the hierarchical processing unit 299, via the communication network 13, and sends to the client 14 addressed, the process proceeds to step S160.

ステップS160において、サーバ12の各部は、データ送信の処理を行う。 In step S160, each unit of the server 12 performs processing for data transmission. なお、データ送信の処理の詳細は、後述するが、データ送信の処理において、ビデオカメラ11から供給された画像データが、階層符号化され、各階層の画像データが、各階層に対応するRTPパケットに格納される。 The details of the processing of the data transmission, as will be described later, in the processing of data transmission, RTP image data supplied from the video camera 11, is hierarchically coded, the image data of each layer, corresponding to each layer packet It is stored in. そして、各階層に対応するRTPパケットのそれぞれは、通信網13を介して、クライアント14あてに送信される。 Then, each of the RTP packet corresponding to each layer, via a communication network 13, is sent to the client 14 addressed.

データ送信の処理が終了すると、手続きは、ステップS156に戻り、上述した処理を繰り返す。 When the processing of the data transmission is completed, the process returns to step S156, and repeats the above processing.

このようにして、サーバ12は、クライアント14から送信されてきた変更要求を基に、送信階層の変更を行う。 In this way, the server 12, based on the change request transmitted from the client 14, to change the transmission hierarchy.

次に図21のフローチャートを参照して、図20のステップS160の処理に対応するデータ送信の処理を説明する。 Referring now to the flowchart of FIG. 21, the processing of the data transmission corresponding to the process of step S160 in FIG. 20.

ステップS181乃至ステップS184の処理のそれぞれは、図11におけるステップS71乃至ステップS74の処理のそれぞれと同様なので、その説明は、省略する。 Each of the processes of steps S181 to step S184, the same as the respective processes of steps S71 to S74 in FIG. 11, description thereof will be omitted.

ステップS185において、パケタイザ293は、エンコーダ291から供給された画像データを基に、図22で示される、各階層に対応するRTPパケットを生成し、ステップS186に進む。 In step S185, the packetizer 293 based on the image data supplied from the encoder 291, shown in Figure 22, generates the RTP packet corresponding to each layer, the flow proceeds to step S186.

図22は、RTPパケットを説明する図である。 Figure 22 is a diagram illustrating an RTP packet. バージョン情報、パディング、拡張情報、CSRCカウント、メーカー情報、ペイロードタイプ、シーケンス番号、タイムスタンプ、SSRC識別子、およびオリジナルデータは、図12で示されるRTPパケットの場合と同様であるので、その説明は、省略する。 About, padding, extension information, CSRC count, manufacturer information, payload type, sequence number, time stamp, SSRC identifier, and the original data are the same as in the case of RTP packet shown in FIG. 12, a description thereof will be, omitted.

より詳細には、ステップS185において、パケタイザ292は、エンコーダ291から供給された、各階層に対応する画像データのそれぞれを各階層に対応するRTPパケットのそれぞれに格納することによって、各階層に対応するRTPパケットのそれぞれを生成する。 More specifically, in step S185, the packetizer 292 by storing supplied, each of the image data corresponding to each layer in each RTP packet corresponding to each layer from the encoder 291, corresponding to each layer to generate each of the RTP packet.

したがって、例えば、パケタイザ292は、最大階層が、5番目の階層である場合、1番目の階層の画像データをRTPパケットに格納することによって、1番目の階層に対応するRTPパケットを生成し、2番目の階層の画像データをRTPパケットに格納することによって、2番目の階層に対応するRTPパケットを生成し、3番目の階層の画像データをRTPパケットに格納することによって、3番目の階層に対応するRTPパケットを生成する。 Thus, for example, the packetizer 292, the maximum hierarchy, if the fifth hierarchy, by storing the image data of the first hierarchy RTP packet, generates an RTP packet corresponding to the first hierarchy, 2 by storing the image data of the second hierarchy to the RTP packet, by generating an RTP packet corresponding to the second hierarchy, and stores the image data of the third hierarchy into RTP packets, corresponding to the third hierarchy to generate the RTP packet to be. 同様に、4番目の階層の画像データをRTPパケットに格納することによって、4番目の階層に対応するRTPパケットを生成し、5番目の階層の画像データをRTPパケットに格納することによって、5番目の階層に対応するRTPパケットを生成する。 Similarly, by storing the image data of the fourth hierarchy RTP packet by generating an RTP packet corresponding to the fourth hierarchy, storing the image data of the fifth hierarchy RTP packet, 5th generating an RTP packet corresponding to the hierarchy.

なお、RTPパケットは、クライアント14に送信する画像データを格納するパケットの一例である。 Incidentally, RTP packet is an example of a packet storing the image data to be transmitted to the client 14.

ステップS186乃至ステップS190の処理のそれぞれは、図11におけるステップS77乃至ステップS81の処理のそれぞれと同様なので、その説明は、省略する。 Each of the processing of step S186 to step S190, the same as the respective processes of step S77 to step S81 in FIG. 11, description thereof will be omitted.

このようにして、サーバ12は、画像データをRTPパケットに格納し、画像データが格納されたRTPパケットを、通信網13を介して、クライアント14あてに送信する。 In this way, the server 12 stores the image data in the RTP packet, the RTP packet that the image data is stored, via the communication network 13, and transmits to the client 14 addressed.

次に、図23を参照して、クライアント14による変更要求の送信の処理を説明する。 Next, with reference to FIG. 23, for explaining the process of transmission of a change request by the client 14.

ステップS211において、UDP通信部311は、サーバ12から送信されてきたRTPパケットを受信し、受信したRTPパケットをRTP処理部312に供給する。 In step S211, UDP communication unit 311 receives the RTP packets transmitted from the server 12 and supplies the received RTP packet to the RTP processor 312.

ステップS212において、階層情報保持部316は、階層情報受信の処理を行い、ステップS213に進む。 In step S212, the hierarchy information holding unit 316 performs processing of hierarchical information received, the process proceeds to step S213. なお、階層情報受信の処理の詳細は、後述するが、階層情報受信の処理において、受信された階層情報が、階層情報保持部316に記憶される。 The details of the processing of hierarchical information received will be described later, in the processing of hierarchical information receiving hierarchical information received is stored in the hierarchical information storage unit 316.

ステップS213乃至ステップS216の処理のそれぞれは、図15におけるステップS124乃至ステップS127の処理のそれぞれと同様なので、その説明は、省略する。 Each of the processes of steps S213 to step S216, the same as the respective processes of steps S124 to step S127 in FIG. 15, description thereof will be omitted.

ステップS217において、階層情報保持部316は、階層情報受信の処理を行い、ステップS218に進む。 In step S217, the hierarchy information holding unit 316 performs processing of hierarchical information received, the process proceeds to step S218.

ステップS218乃至ステップS224の処理のそれぞれは、図15におけるステップS128乃至ステップS134の処理のそれぞれと同様なので、その説明は、省略する。 Each of the processes of steps S218 to step S224, the same as the respective processes of steps S128 to step S134 in FIG. 15, description thereof will be omitted.

また、ステップS222において、出力部320は、図24で示される画像をディスプレイである出力部320に表示させるようにしてもよい。 Further, in step S222, the output unit 320 may be displayed an image shown in FIG. 24 to the output unit 320 is a display.

この場合、ディスプレイである出力部320には、ウィンドウ231が表示され、ウィンドウ231には、受信された画像241が表示される。 In this case, the output unit 320 is a display, to display the window 231, the window 231, the image 241 is displayed received. また、ウィンドウ231と同時に表示される、別のウィンドウ351には、受信帯域、RTPパケットのロス率、帯域、および送信階層のそれぞれを表す文字“受信帯域”、“ロス率”、“帯域”、および“送信階層”のそれぞれが表示され、表示されたそれぞれの文字の右側に、それぞれの値が表示される。 Also displayed at the same time the window 231, another window 351, the reception band, the loss rate of the RTP packets, band, and the letter "reception band" representing respective transmission hierarchy, "loss rate", "band", and displays each "transmission hierarchy" is to the right of each character displayed, each value is displayed.

例えば、受信帯域を表す文字“受信帯域”の右側に、受信帯域の値“0.4Mbps”が表示され、RTPパケットのロス率を表す文字“ロス率”の右側に、ロス率の値“1%”が表示され、帯域を表す文字“帯域”の右側に、帯域の値“0.3Mbps”が表示され、送信階層を表す文字“送信階層”の右側に、最大階層が5番目の階層であり、送信階層が3番目の階層であることを示す“3/5”が表示される。 For example, to the right of the character "reception band" representing the reception band, displays the value "0.4Mbps" the reception band, to the right of the character "loss rate" indicating a loss rate of the RTP packet, the value of the loss rate "1% "is displayed, the character representing the bandwidth" "to the right of the value of the band" band "is displayed, the character representing the transmission hierarchy" 0.3 Mbps on the right side of the transmission hierarchy ", the maximum hierarchy fifth hierarchy, indicating that the transmission hierarchy is the third hierarchy "3/5" is displayed.

また、送信階層を表す文字“送信階層”の下には、最大階層および送信階層を表す数直線が表示される。 Further, under the letter "transmission hierarchy" representing the transmission hierarchy, the number line representing the maximum hierarchy and transmission hierarchy is displayed. 図24の例においては、数直線上の“3”で表される目盛り上に表示されている四角によって、送信階層が3番目の階層であることが表されている。 In the example of FIG. 24, the squares being displayed on the scale represented by the number line on the "3", which is represented that the transmission hierarchy is the third hierarchy.

さらに、ユーザが、入力部321を操作することによって、ポインタ(図示せず)を移動させ、ボタン232がクリックされた場合、ウィンドウ231は、閉じられる。 Furthermore, the user, by operating the input unit 321 to move the pointer (not shown), when the button 232 is clicked, the window 231 is closed. 同様に、ユーザが、入力部321を操作することによって、ポインタ(図示せず)を移動させ、ボタン352がクリックされた場合、ウィンドウ351は、閉じられる。 Similarly, the user, by operating the input unit 321 to move the pointer (not shown), when the button 352 is clicked, the window 351 is closed.

このようにして、クライアント14は、変更要求を生成し、生成した変更要求を、通信網13を介して、サーバ12あてに送信する。 In this way, the client 14 generates a change request, the generated change requests, via the communication network 13, and transmits to the server 12 addressed.

次に図25のフローチャートを参照して、図23のステップS212およびステップS217の処理に対応する、階層情報受信の処理を説明する。 Referring now to the flowchart of FIG. 25 corresponds to the processing of step S212 and step S217 in FIG. 23, the processing of hierarchical information received.

ステップS241において、階層情報保持部316は、TCP通信部318が、サーバ12から送信されてきた階層情報を受信したか否かを判定する。 In step S241, the hierarchy information holding unit 316, TCP communication unit 318 determines whether it has received a hierarchical information transmitted from the server 12.

ステップS241において、TCP通信部318が、階層情報を受信したと判定された場合、ステップS242に進み、階層情報保持部316は、TCP通信部318から階層情報を取得し、取得した階層情報を記憶する。 In step S241, the TCP communication unit 318, when it is determined that it has received the hierarchical information, the process proceeds to step S242, the hierarchy information holding unit 316 acquires the hierarchy information from the TCP communication unit 318, stores the acquired hierarchy information to.

より詳細には、ステップS242において、階層情報保持部316は、TCP通信部318から階層情報を取得し、階層情報保持部316の送信階層情報保持部331は、取得された階層情報である送信階層情報を記憶する。 More specifically, in step S242, the hierarchy information holding unit 316 acquires the hierarchy information from the TCP communication unit 318, transmits the hierarchical information holding unit 331 of hierarchy information holding unit 316 obtains hierarchy information and is transmitted hierarchy and stores the information. また、階層情報保持部316の最大階層情報保持部332は、取得された階層情報である最大階層情報を記憶し、処理は終了する。 The maximum hierarchical information storage unit 332 of hierarchy information holding unit 316 stores the maximum hierarchical information is acquired hierarchy information, the process ends.

一方、ステップS241において、TCP通信部318が、階層情報を受信していないと判定された場合、ステップS242の処理は、スキップされ、処理は、終了する。 On the other hand, in step S241, TCP communication unit 318, when it is determined that it has not received the hierarchy information, the process of step S242 is skipped, and the process ends.

このようにして、階層情報保持部316は、受信された階層情報を記憶する。 In this manner, the hierarchical information storage unit 316 stores the received hierarchy information.

以上のように、クライアント14は、サーバ12から送信されてくるコンテンツ階層テーブルを表示させることができる。 As described above, the client 14 can display the content hierarchy table transmitted from the server 12.

第1の本発明によれば、送信装置から送信されてきたデータを受信するようにしたので、受信したデータを出力(表示)することができる。 According to a first aspect of the present invention, since so as to receive data transmitted from the transmitting apparatus, received data can be outputted (displayed) a. また、第1の本発明によれば、送信装置から送信されてきたコンテンツ階層テーブルを表示させるようにしたので、データの受信側において、階層符号化されるデータの伝送に要する通信網の帯域を把握することができる。 Further, according to the first present invention, since the display contents hierarchy table which has been transmitted from the transmitting apparatus, the receiving side of the data, the bandwidth of a communication network required for the transmission of data to be hierarchically encoded it is possible to grasp.

また、第2の発明によれば、データをパケットに格納するようにしたので、データを送信することができる。 Further, according to the second invention, since so as to store the data in the packet, it is possible to transmit the data. また、第2の発明によれば、コンテンツ階層テーブルを送信するようにしたので、データの受信側に、階層符号化されるデータの伝送に要する通信網の帯域を通知することができる。 Further, according to the second invention, since so as to transmit the content hierarchy table, the data receiving side can be notified of the bandwidth of a communication network required for the transmission of data to be hierarchically coded.

なお、帯域の測定は、パケットペアを送信することにより測定すると説明したが、パケットトレイン方式などにより測定するようにしてもよく、その他、Diffserv(Differentiated Services)やSNMP(Simple Network Management Protocol)を利用することによって測定するようにしてもよい。 The measurement of the band has been described as measured by transmitting a packet pair, it may be measured by such as packet train method, other use of the Diffserv (Differentiated Services) and SNMP (Simple Network Management Protocol) it may be measured by.

また、クライアント14の出力部87に画像を表示させると説明したが、クライアント14とは別に、画像を表示させる出力装置を設けるようにしてもよい。 Further, it is described that displays the image on the output unit 87 of the client 14, separately from the client 14, may be provided an output device for displaying an image.

上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。 The series of processes described above, can be executed by hardware, it may otherwise be executed by software. 一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。 When the series of processes is executed by software, a program constituting the software is installed into a computer embedded in dedicated hardware, or by installing various programs, you can execute various functions possible, for example, a general-purpose personal computer by installing the recording medium.

この記録媒体は、図4に示すように、コンピュータとは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク111(フレキシブルディスクを含む)、光ディスク112(CD-ROM(Compact Disc-Read Only Memory)、DVD(Digital Versatile Disc)を含む)、光磁気ディスク113(MD(Mini-Disc)(商標)を含む)、若しくは半導体メモリ114などよりなるパッケージメディアにより構成されるだけでなく、コンピュータに予め組み込まれた状態でユーザに提供される、プログラムが記録されているROM82や、記録部88に含まれるハードディスクなどで構成される。 The recording medium is, as shown in FIG. 4 (including a flexible disk), separate from the computer is distributed to provide the program to a user, the magnetic disk 111 in which the program is recorded, the optical disk 112 (CD- ROM (Compact disc-Read Only memory), comprises a DVD (Digital Versatile disc)), magneto-optical disk 113 (MD (Mini-disc) (trademark)), or is constituted by a package medium such as semiconductor memory 114 not only that, is provided to the user in a state of being stored in advance in a computer, the program ROM82 and being recorded, and a hard disk included in the recording unit 88.

なお、上述した一連の処理を実行させるプログラムは、必要に応じてルータ、モデムなどのインタフェースを介して、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を介してコンピュータにインストールされるようにしてもよい。 Installation The program of executing the series of processes described above, the router if necessary, through an interface such as a modem, a local area network, the Internet, or digital satellite broadcasting, to the computer via a wired or wireless communication medium it may be as is.

また、本明細書において、記録媒体に格納されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。 Further, the steps describing the program stored in the recording medium may include processes that are executed sequentially in the order described, without being processed in a time series, parallel or but also the processing operations to be performed separately.

なお、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。 In the present specification, the system represents the entire apparatus including a plurality of devices.

本発明を適用したストリーミング配信システムの一実施の形態を示す図である。 Is a diagram showing an embodiment of a streaming distribution system to which the present invention is applied. ストリーミングデータ配信システムを説明するタイムチャートである。 Is a time chart for explaining the streaming data distribution system. 帯域の測定を説明する図である。 Is a diagram illustrating the measurement of the bandwidth. サーバの構成の例を示すブロック図である。 Is a block diagram showing an example of a server configuration. サーバの機能の構成を示すブロック図である。 Is a block diagram showing the configuration of the server functions. クライアントの機能の構成を示すブロック図である。 It is a block diagram showing a configuration of a client's capabilities. 送信階層の変更の処理を説明するフローチャートである。 Is a flow chart for explaining a process of changing the transmission hierarchy. コンテンツ階層テーブルを説明する図である。 It is a diagram illustrating a content hierarchy table. 帯域測定の処理を説明するフローチャートである。 Is a flow chart for explaining a process of bandwidth measurement. 帯域算出の処理を説明するフローチャートである。 It is a flowchart illustrating a process of bandwidth calculation. データ送信の処理を説明するフローチャートである。 It is a flowchart illustrating a process of data transmission. RTPパケットを説明する図である。 Is a diagram illustrating an RTP packet. コンテンツ階層テーブル受信の処理を説明するフローチャートである。 Is a flowchart illustrating processing of a content hierarchy table received. 出力部に表示されるコンテンツ階層テーブルを説明する図である。 It is a diagram illustrating a content hierarchy table that is displayed on the output unit. 変更要求の送信の処理を説明するフローチャートである。 It is a flowchart illustrating a process of transmitting a change request. 出力部に表示される画像を説明する図である。 Is a diagram illustrating an image displayed on the output unit. ストリーミングデータ配信システムを説明するタイムチャートである。 Is a time chart for explaining the streaming data distribution system. サーバの機能の構成を示すブロック図である。 Is a block diagram showing the configuration of the server functions. クライアントの機能の構成を示すブロック図である。 It is a block diagram showing a configuration of a client's capabilities. 送信階層の変更の処理を説明するフローチャートである。 Is a flow chart for explaining a process of changing the transmission hierarchy. データ送信の処理を説明するフローチャートである。 It is a flowchart illustrating a process of data transmission. RTPパケットを説明する図である。 Is a diagram illustrating an RTP packet. 変更要求の送信の処理を説明するフローチャートである。 It is a flowchart illustrating a process of transmitting a change request. 出力部に表示される画像を説明する図である。 Is a diagram illustrating an image displayed on the output unit. 階層情報受信の処理を説明するフローチャートである。 It is a flowchart for explaining the processing of hierarchical information received.

符号の説明 DESCRIPTION OF SYMBOLS

12 サーバ, 13 通信網, 14 クライアント, 81 CPU, 82 ROM, 83 RAM, 86 入力部, 87 出力部, 88 記録部, 111 磁気ディスク, 112 光ディスク, 113 光磁気ディスク, 114 半導体メモリ 131 エンコーダ, 132 パケタイザ, 136 送信階層選択部, 137 コンテンツ階層保持部, 138 送信階層保持部, 139 階層処理部, 152 RTP処理部, 153 デコーダ, 155 ストリーム情報算出部, 156 階層情報保持部, 157 帯域算出部, 159 コンテンツ階層保持部, 160 階層変更要求部, 181 送信階層情報保持部, 182 最大階層情報保持部, 296 送信階層選択部, 298 送信階層情報保持部, 299 階層処理部, 312 RTP処理部, 316 階層情報保持部 12 server, 13 network, 14 clients, 81 CPU, 82 ROM, 83 RAM, 86 input unit, 87 output unit, 88 recording unit, 111 a magnetic disk, 112 disc, 113 a magneto-optical disk, 114 a semiconductor memory 131 encoder, 132 packetizer, 136 transmission layer selection section, 137 content hierarchy holding unit, 138 transmission hierarchy holder, 139 layer processor, 152 RTP processing unit, 153 a decoder, 155 stream information calculation unit, 156 hierarchy information holding unit, 157 bandwidth calculation unit, 159 content hierarchy holding unit, 160 hierarchical change request unit 181 transmits the hierarchical information holding section 182 up to the hierarchical information storage unit, 296 transmission layer selection section 298 transmits the hierarchical information holding unit, 299 layer processor, 312 RTP processor, 316 hierarchical information storage unit 317 帯域算出部, 320 階層変更要求部 317 bandwidth calculation unit, 320 hierarchical change request unit

Claims (5)

  1. 通信網を介して送信装置から送信されてくる、復号に欠くことのできない最下位の階層から、より品質の高い復号をするためのより上位の階層までの複数の階層に階層符号化された送信データを受信する受信装置において、 Transmitted from the transmitting apparatus via the communication network, transmitting from the hierarchy of the lowest essential to decoding, which is more hierarchical coding into a plurality of layers of up to higher hierarchy to a higher quality decoded in the receiving apparatus for receiving data,
    送信される前記送信データの最も上位の階層を示す送信階層と、前記送信階層までの前記送信データを伝送するために必要な前記通信網の帯域とを示す階層テーブル情報を前記送信装置から受信するとともに、前記送信データ、送信された前記送信データの前記送信階層を示す送信階層情報、および前記複数の階層のうちの最上位の階層を示す最大階層情報が格納されたパケットを前記送信装置から受信する受信手段と、 Receiving a transmission hierarchy shown the highest level of the hierarchy of the transmission data to be transmitted, the hierarchy table information indicating the bandwidth of the communication network required for transmitting the transmission data to the transmission hierarchy from the transmitting device together, receiving the transmission data, transmission layer information indicating the transmission layer of the transmission data sent, and a packet maximum hierarchical information is stored that indicates the highest hierarchy of the plurality of hierarchy from the transmitting device a receiving unit that,
    受信した前記階層テーブル情報を記憶する記憶手段と、 Storage means for storing the received the hierarchy table information,
    前記パケットの受信時刻および前記パケットのパケットサイズに基づいて、前記パケットの受信時における前記通信網の帯域である受信帯域を算出する算出手段と、 A calculation unit based on the packet size of the received time and the packet of the packet, calculates a reception band is the band of the communication network upon receiving the packet,
    受信した前記階層テーブル情報を表示するとともに、受信した前記パケットに格納された前記送信データ、前記送信階層情報、および前記最大階層情報と、前記受信帯域とが表示される表示画面を表示する表示手段と、 And displays the received the hierarchy table information, said received packet to stored the transmission data, the transmission layer information, and the maximum hierarchical information and, display means for displaying a display screen wherein the reception band appears When,
    ユーザの指示に応じて生成された、前記送信装置から送信される前記送信データの前記送信階層の変更を要求する変更要求を前記送信装置に送信する送信手段と Generated in accordance with an instruction from a user, transmitting means for transmitting a change request to the transmitting device requesting a change of the transmission layer of the transmission data transmitted from the transmitting device
    を備えることを特徴とする受信装置。 Receiving device, characterized in that it comprises a.
  2. 前記受信手段は、前記送信装置による前記パケットの送信前に前記送信装置から送信されてくる、前記通信網の帯域を測定するための帯域測定パケットをさらに受信し、 Said receiving means, transmitted from said transmitting device prior to transmission of the packet by the transmission device, and further receives a bandwidth measurement packets for measuring the bandwidth of the communication network,
    受信した前記帯域測定パケットに基づいて、前記送信装置から送信される前記送信データの前記送信階層を定めるために用いられる、前記帯域測定パケットの受信時における前記通信網の帯域を算出する帯域測定手段をさらに備え、 Based on the received bandwidth measurement packets, the transmission device is used to define the transmission layer of the transmission data transmitted from the band measuring means for calculating a bandwidth of the communication network upon receiving the bandwidth measurement packets further comprising a,
    前記送信手段は、前記帯域測定手段による測定結果を前記送信装置にさらに送信し、 It said transmitting means further transmits a measurement result by the band measuring unit to the transmitting device,
    前記表示手段は、前記測定結果を前記表示画面に表示させる The display means displays the measurement result on the display screen
    ことを特徴とする請求項1に記載の受信装置。 Receiver according to claim 1, characterized in that.
  3. 前記算出手段は、受信した前記パケットに基づいて、前記パケットのロス率をさらに算出し、 It said calculation means, based on the received packet, further calculates the loss rate of the packet,
    前記表示手段は、前記表示画面に前記ロス率を表示させる The display means displays the loss rate on the display screen
    ことを特徴とする請求項2に記載の受信装置。 Receiving apparatus according to claim 2, characterized in that.
  4. 通信網を介して送信装置から送信されてくる、復号に欠くことのできない最下位の階層から、より品質の高い復号をするためのより上位の階層までの複数の階層に階層符号化された送信データを受信する受信装置の受信方法において、 Transmitted from the transmitting apparatus via the communication network, transmitting from the hierarchy of the lowest essential to decoding, which is more hierarchical coding into a plurality of layers of up to higher hierarchy to a higher quality decoded in the receiving method of a receiving apparatus for receiving data,
    送信される前記送信データの最も上位の階層を示す送信階層と、前記送信階層までの前記送信データを伝送するために必要な前記通信網の帯域とを示す階層テーブル情報の前記送信装置からの受信を制御する第1の受信制御ステップと、 A transmission hierarchy shown the highest level of the hierarchy of the transmission data to be transmitted, received from the transmitting device of the hierarchy table information indicating the bandwidth of the communication network required for transmitting the transmission data to the transmission hierarchy a first reception control step for controlling,
    受信した前記階層テーブル情報の記憶を制御する記憶制御ステップと、 A storage control step of controlling storage of said received hierarchical table information,
    受信した前記階層テーブル情報の表示を制御する第1の表示制御ステップと、 A first display control step for controlling the display of said received hierarchical table information,
    前記送信データ、送信された前記送信データの前記送信階層を示す送信階層情報、および前記複数の階層のうちの最上位の階層を示す最大階層情報が格納されたパケットの前記送信装置からの受信を制御する第2の受信制御ステップと、 The transmission data, transmission layer information indicating the transmission layer of the sender is the transmission data, and the reception from the transmission apparatus of a packet maximum hierarchical information indicating a hierarchical top-level is stored in the plurality of hierarchical a second reception control step of controlling,
    前記パケットの受信時刻および前記パケットのパケットサイズに基づいて、前記パケットの受信時における前記通信網の帯域である受信帯域を算出する算出ステップと、 A calculating step based on the packet size of the received time and the packet of the packet, calculates a reception band is the band of the communication network upon receiving the packet,
    受信した前記パケットに格納された前記送信データ、前記送信階層情報、および前記最大階層情報と、前記受信帯域とが表示される表示画面の表示を制御する第2の表示制御ステップと、 It received the transmission data stored in the packet, the transmission hierarchy information, and and the maximum hierarchical information, and a second display control step for controlling the display of the display screen and the reception band appears,
    ユーザの指示に応じて生成された、前記送信装置から送信される前記送信データの前記送信階層の変更を要求する変更要求の前記送信装置への送信を制御する送信制御ステップと Generated in accordance with an instruction from a user, a transmission control step of controlling the transmission to the transmission device change request requesting a change of the transmission layer of the transmission data transmitted from the transmitting device
    を含むことを特徴とする受信方法。 Receiving method which comprises a.
  5. 通信網を介して送信装置から送信されてくる、復号に欠くことのできない最下位の階層から、より品質の高い復号をするためのより上位の階層までの複数の階層に階層符号化された送信データを受信する受信装置に、 Transmitted from the transmitting apparatus via the communication network, transmitting from the hierarchy of the lowest essential to decoding, which is more hierarchical coding into a plurality of layers of up to higher hierarchy to a higher quality decoded a receiver for receiving data,
    送信される前記送信データの最も上位の階層を示す送信階層と、前記送信階層までの前記送信データを伝送するために必要な前記通信網の帯域とを示す階層テーブル情報の前記送信装置からの受信を制御する第1の受信制御ステップと、 A transmission hierarchy shown the highest level of the hierarchy of the transmission data to be transmitted, received from the transmitting device of the hierarchy table information indicating the bandwidth of the communication network required for transmitting the transmission data to the transmission hierarchy a first reception control step for controlling,
    受信した前記階層テーブル情報の記憶を制御する記憶制御ステップと、 A storage control step of controlling storage of said received hierarchical table information,
    受信した前記階層テーブル情報の表示を制御する第1の表示制御ステップと、 A first display control step for controlling the display of said received hierarchical table information,
    前記送信データ、送信された前記送信データの前記送信階層を示す送信階層情報、および前記複数の階層のうちの最上位の階層を示す最大階層情報が格納されたパケットの前記送信装置からの受信を制御する第2の受信制御ステップと、 The transmission data, transmission layer information indicating the transmission layer of the sender is the transmission data, and the reception from the transmission apparatus of a packet maximum hierarchical information indicating a hierarchical top-level is stored in the plurality of hierarchical a second reception control step of controlling,
    前記パケットの受信時刻および前記パケットのパケットサイズに基づいて、前記パケットの受信時における前記通信網の帯域である受信帯域を算出する算出ステップと、 A calculating step based on the packet size of the received time and the packet of the packet, calculates a reception band is the band of the communication network upon receiving the packet,
    受信した前記パケットに格納された前記送信データ、前記送信階層情報、および前記最大階層情報と、前記受信帯域とが表示される表示画面の表示を制御する第2の表示制御ステップと、 It received the transmission data stored in the packet, the transmission hierarchy information, and and the maximum hierarchical information, and a second display control step for controlling the display of the display screen and the reception band appears,
    ユーザの指示に応じて生成された、前記送信装置から送信される前記送信データの前記送信階層の変更を要求する変更要求の前記送信装置への送信を制御する送信制御ステップと Generated in accordance with an instruction from a user, a transmission control step of controlling the transmission to the transmission device change request requesting a change of the transmission layer of the transmission data transmitted from the transmitting device
    を含む処理を実行させることを特徴とするプログラム。 A program characterized by executing the processing including.
JP2004090157A 2004-03-25 2004-03-25 Receiving apparatus and method, and program Expired - Fee Related JP4433287B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004090157A JP4433287B2 (en) 2004-03-25 2004-03-25 Receiving apparatus and method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004090157A JP4433287B2 (en) 2004-03-25 2004-03-25 Receiving apparatus and method, and program

Publications (2)

Publication Number Publication Date
JP2005277950A JP2005277950A (en) 2005-10-06
JP4433287B2 true JP4433287B2 (en) 2010-03-17

Family

ID=35177125

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004090157A Expired - Fee Related JP4433287B2 (en) 2004-03-25 2004-03-25 Receiving apparatus and method, and program

Country Status (1)

Country Link
JP (1) JP4433287B2 (en)

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6307487B1 (en) 1998-09-23 2001-10-23 Digital Fountain, Inc. Information additive code generator and decoder for communication systems
US7068729B2 (en) 2001-12-21 2006-06-27 Digital Fountain, Inc. Multi-stage code generator and decoder for communication systems
US9240810B2 (en) 2002-06-11 2016-01-19 Digital Fountain, Inc. Systems and processes for decoding chain reaction codes through inactivation
US9419749B2 (en) 2009-08-19 2016-08-16 Qualcomm Incorporated Methods and apparatus employing FEC codes with permanent inactivation of symbols for encoding and decoding processes
US9288010B2 (en) 2009-08-19 2016-03-15 Qualcomm Incorporated Universal file delivery methods for providing unequal error protection and bundled file delivery services
KR101143282B1 (en) 2002-10-05 2012-05-08 디지털 파운튼, 인크. Systematic encoding and decoding of chain reaction codes
CN101834610B (en) 2003-10-06 2013-01-30 数字方敦股份有限公司 Method and device for receiving data transmitted from source through communication channel
KR101161193B1 (en) 2004-05-07 2012-07-02 디지털 파운튼, 인크. File download and streaming system
US9432433B2 (en) 2006-06-09 2016-08-30 Qualcomm Incorporated Enhanced block-request streaming system using signaling or block creation
US9386064B2 (en) 2006-06-09 2016-07-05 Qualcomm Incorporated Enhanced block-request streaming using URL templates and construction rules
US9380096B2 (en) 2006-06-09 2016-06-28 Qualcomm Incorporated Enhanced block-request streaming system for handling low-latency streaming
US9209934B2 (en) 2006-06-09 2015-12-08 Qualcomm Incorporated Enhanced block-request streaming using cooperative parallel HTTP and forward error correction
US9178535B2 (en) 2006-06-09 2015-11-03 Digital Fountain, Inc. Dynamic stream interleaving and sub-stream based delivery
US9136983B2 (en) 2006-02-13 2015-09-15 Digital Fountain, Inc. Streaming and buffering using variable FEC overhead and protection periods
US9270414B2 (en) 2006-02-21 2016-02-23 Digital Fountain, Inc. Multiple-field based code generator and decoder for communications systems
WO2007134196A2 (en) 2006-05-10 2007-11-22 Digital Fountain, Inc. Code generator and decoder using hybrid codes
JP4999601B2 (en) * 2007-08-14 2012-08-15 キヤノン株式会社 Transmitting device, and band control device
MX2010002829A (en) 2007-09-12 2010-04-01 Digital Fountain Inc Generating and communicating source identification information to enable reliable communications.
US9281847B2 (en) 2009-02-27 2016-03-08 Qualcomm Incorporated Mobile reception of digital video broadcasting—terrestrial services
EP2465259A4 (en) * 2009-08-14 2015-10-28 Dts Llc Object-oriented audio streaming system
US9917874B2 (en) 2009-09-22 2018-03-13 Qualcomm Incorporated Enhanced block-request streaming using block partitioning or request controls for improved client-side handling
US20110096828A1 (en) * 2009-09-22 2011-04-28 Qualcomm Incorporated Enhanced block-request streaming using scalable encoding
US20120307913A1 (en) 2010-02-15 2012-12-06 Panasonic Corporation Content communication device, content processing device and content communication system
US9485546B2 (en) 2010-06-29 2016-11-01 Qualcomm Incorporated Signaling video samples for trick mode video representations
US8918533B2 (en) 2010-07-13 2014-12-23 Qualcomm Incorporated Video switching for streaming video data
US9185439B2 (en) 2010-07-15 2015-11-10 Qualcomm Incorporated Signaling data for multiplexing video components
US9596447B2 (en) 2010-07-21 2017-03-14 Qualcomm Incorporated Providing frame packing type information for video coding
US8806050B2 (en) 2010-08-10 2014-08-12 Qualcomm Incorporated Manifest file updates for network streaming of coded multimedia data
US8958375B2 (en) 2011-02-11 2015-02-17 Qualcomm Incorporated Framing for an improved radio link protocol including FEC
US9270299B2 (en) 2011-02-11 2016-02-23 Qualcomm Incorporated Encoding and decoding using elastic codes with flexible source block mapping
US9253233B2 (en) 2011-08-31 2016-02-02 Qualcomm Incorporated Switch signaling methods providing improved switching between representations for adaptive HTTP streaming
US9843844B2 (en) 2011-10-05 2017-12-12 Qualcomm Incorporated Network streaming of media data
KR101197103B1 (en) * 2012-03-09 2012-11-07 (주) 지솔루션 An apparatus for segmenting a satellite compressed image and the method thereof
US9294226B2 (en) 2012-03-26 2016-03-22 Qualcomm Incorporated Universal object delivery and template-based file delivery
US8661491B1 (en) * 2012-08-02 2014-02-25 Ericsson Television Inc. Methods using base content and additive content and related client devices and network server devices

Also Published As

Publication number Publication date
JP2005277950A (en) 2005-10-06

Similar Documents

Publication Publication Date Title
Stockhammer et al. H. 264/AVC video for wireless transmission
CN1248456C (en) Transmission control parameter production method and method of selective repeating according to packet characteristics
JP4160278B2 (en) Scalable encoding method of the media stream, the scalable encoder and multimedia terminal
JP4287430B2 (en) Apparatus and method for controlling the operation of a plurality of communication layers
AU2004317109B2 (en) Classified media quality of experience
AU2016204197B2 (en) Methods for quality-aware adaptive streaming over hypertext transfer protocol
CN103262630B (en) Display adaptive known radio and network signaling techniques
US8711929B2 (en) Network-based dynamic encoding
JP3757857B2 (en) Data communication system, data transmission apparatus, data receiving apparatus, method, and computer program
US9325998B2 (en) Wireless video transmission system
US20060088092A1 (en) Method and apparatus of controlling a plurality of video surveillance cameras
US7274740B2 (en) Wireless video transmission system
KR101365882B1 (en) Techniques for managing visual compositions for a multimedia conference call
JP4558802B2 (en) Method and apparatus for adaptive buffering
KR100994871B1 (en) Moving picture distribution system, moving picture distribution device and method, and recording medium
CN1618226B (en) Targeted scalable video multicast based on client bandwidth or capability
CN1196339C (en) Method and apparatus for stream transmitting scalable video
JP6378260B2 (en) Method and apparatus for smooth stream switching in mpeg / 3gpp-dash
US20050188407A1 (en) Wireless video transmission system
EP1309122A2 (en) Apparatus and method for data communication with retransmissions
KR100918596B1 (en) Method and apparatus for allocation of information to channels of a communication system
CN103039051B (en) Server-assisted video session
US20080037573A1 (en) Method and apparatus for encoding and distributing media data
CN104604286B (en) Energy for the streaming session and a multimedia service-aware adaptation
KR100927159B1 (en) Data Transfer

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070305

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090708

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090820

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091007

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20091203

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091216

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130108

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees