JP2003348548A - Stream distribution system and method, and stream receiving apparatus - Google Patents

Stream distribution system and method, and stream receiving apparatus

Info

Publication number
JP2003348548A
JP2003348548A JP2002148481A JP2002148481A JP2003348548A JP 2003348548 A JP2003348548 A JP 2003348548A JP 2002148481 A JP2002148481 A JP 2002148481A JP 2002148481 A JP2002148481 A JP 2002148481A JP 2003348548 A JP2003348548 A JP 2003348548A
Authority
JP
Japan
Prior art keywords
stream
video
data
streams
network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002148481A
Other languages
Japanese (ja)
Inventor
Kanichi Endo
乾一 遠藤
Jun Tanaka
純 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2002148481A priority Critical patent/JP2003348548A/en
Publication of JP2003348548A publication Critical patent/JP2003348548A/en
Pending legal-status Critical Current

Links

Landscapes

  • Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To prevent a video from being stopped or resent from a different scene even when starting a stream distribution corresponding to a change of a band in which a video communication on a network is possible. <P>SOLUTION: In the stream distribution from a video transmitting apparatus (server) 1 through a network 2 to a stream receiving apparatus (client) 3, not a single stream but a plurality of streams of different bands are synchronously distributed simultaneously and on the client side where respective streams are received, the respective streams are held for a fixed period individually by data queues (0) 3b and (1) 3c. In accordance with receiving statuses of the respective streams, namely, in accordance with a change in the utilized band of the network, streams to be outputted on an output device such as television or personal computer are switched for the unit of a frame by a switching part 3f. <P>COPYRIGHT: (C)2004,JPO

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、インターネット等
のネットワークを介して映像配信用装置から映像再生用
装置に映像データをストリーム配信する技術に係わり、
特に、映像配信用装置と映像再生用装置間でのネットワ
ークの通信帯域が、例えば他者のネットワーク通信状況
などにより、刻々と変化する場合にも安定したストリー
ム配信を可能とする技術に関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a technology for streaming video data from a video distribution device to a video reproduction device via a network such as the Internet.
In particular, the present invention relates to a technology that enables stable stream distribution even when a communication band of a network between a video distribution device and a video reproduction device changes every moment due to, for example, the network communication status of another party. .

【0002】[0002]

【従来の技術】近年、例えばISDN(Integrated Ser
vices Digital Network)やADSL(Asymmetric Digi
tal Subscriber Line)などの高速なデータ転送技術の
普及に伴い、インターネットでの動画像(ビデオ)デー
タのストリーム配信を利用することが容易となってい
る。
2. Description of the Related Art In recent years, for example, ISDN (Integrated Servo
vices Digital Network) and ADSL (Asymmetric Digi)
With the spread of high-speed data transfer technologies such as tal Subscriber Line), it has become easy to use stream distribution of moving image (video) data on the Internet.

【0003】このようなストリーム配信を行うシステム
では、映像配信用装置(サーバ)と映像再生用装置(ク
ライアント)がネットワークをはさんで遠隔に設置さ
れ、映像配信サーバ側で、ネットワークの転送速度(p
bs、ビットレート)別に、配信提供するコンテンツを
生成しておき(高速用にはより高品質なコンテンツを生
成)、映像再生用クライアントが、接続速度に合ったコ
ンテンツを選択して受信する。
In a system for performing such a stream distribution, a video distribution device (server) and a video reproduction device (client) are installed remotely over a network, and the video distribution server side transmits the network transfer speed (client). p
bs, bit rate), contents to be provided for distribution are generated (higher-quality contents are generated for high-speed use), and the video playback client selects and receives contents suitable for the connection speed.

【0004】しかし、他者のネットワーク通信状況など
により、映像配信サーバと映像再生用クライアント間で
の通信帯域(転送速度)が、刻々と変化するため、高品
質なコンテンツを配信している際にネットワークの帯域
幅が低下し、動きがギクシャクしたり、停止したりする
ことがある。
[0004] However, the communication band (transfer speed) between the video distribution server and the video reproduction client changes every moment due to the network communication status of the other party, and therefore, when high-quality content is distributed. Network bandwidth may be reduced and movement may be jerky or stopped.

【0005】このような問題に対処するための従来技術
として、例えば、「Microsoft Window
s Media(登録商標)」技術のように、帯域の変
化に応じて、ストリームのグレードを切り替えるものが
ある。
[0005] As a conventional technique for addressing such a problem, for example, "Microsoft Windows" has been proposed.
As in the case of the “sMedia (registered trademark)” technology, there is a technology in which the stream grade is switched according to a change in the band.

【0006】しかし、この技術では、クライアント側で
は、現在の帯域幅条件に最も適した1つのビデオストリ
ームを受信している。すなわち、ストリーム配信中に、
利用できる帯域幅が減少した場合、サーバが、その変化
を自動的に検出して、低い帯域幅用のストリームデータ
に切り替えて配信し、また、帯域幅が改善されると、サ
ーバは、元の帯域幅のストリームに切り替えて配信して
いる。
However, in this technique, the client receives one video stream most suitable for the current bandwidth condition. That is, during stream distribution,
When the available bandwidth decreases, the server automatically detects the change and switches to a stream data stream for lower bandwidth, and when the bandwidth is improved, the server returns to the original. Switching to a bandwidth stream for distribution.

【0007】このため、この技術では、ストリームの移
行タイミングが長く、スムーズに移行できない。その結
果、帯域移行する際、配信中のストリームを停止して、
異なる帯域のストリームを配信することとなり、ストリ
ーム変更において、一旦配信が停止してしまい、リジュ
ーム(再開)に時間がかかり、映像が損なわれた状態と
なる。
For this reason, in this technique, the transition timing of the stream is long, and the transition cannot be performed smoothly. As a result, when performing a band transfer, stop the stream being delivered,
Streams of different bands are distributed, and when the stream is changed, the distribution is temporarily stopped, and it takes time to resume (resume), and the video is damaged.

【0008】[0008]

【発明が解決しようとする課題】解決しようとする問題
点は、従来の技術では、ネットワークでの映像通信が可
能な帯域が変化してそれに応じたストリーム配信に移行
する際、映像の停止や、異なる場面からの再送が発生す
る点である。
The problem to be solved in the prior art is that, when the band in which video communication on the network can be performed changes and the system shifts to stream distribution according to the change, video stoppage, The point is that retransmission from a different scene occurs.

【0009】本発明の目的は、これら従来技術の課題を
解決し、インターネット等による映像コンテンツの安定
したストリーム配信を可能とすることである。
[0009] An object of the present invention is to solve the problems of the prior art and to enable stable stream distribution of video contents over the Internet or the like.

【0010】[0010]

【課題を解決するための手段】上記目的を達成するた
め、本発明では、映像送信側装置(サーバ)から映像再
生側装置(クライアント)にストリーム配信する際、単
独のストリームでなく、それぞれ帯域の異なる複数のス
トリームを同時に同期配信し、各ストリームを受信する
クライアント側では、各ストリームを個別に一定期間保
持しておき、各ストリームの受信状況に応じて、すなわ
ち、ネットワークの利用帯域の変化に応じて、テレビや
パーソナルコンピュータ等の出力装置で出力するストリ
ームをフレーム単位で切り替える。このように、映像再
生側装置(クライアント)において、映像送信側装置
(サーバ)から同期して配信された各々異なる帯域の異
なる複数のストリームを同時受信して一時蓄積すること
で、再生出力する際に一方のストリームにおける欠損を
フレーム単位で補填したり、欠損の頻繁に出る帯域のス
トリームを停止して欠損の無い帯域のストリームに切り
替えたり、また欠損の出ない場合には、より高い帯域の
ストリームに切り替えるという調整を行うことができ
る。
In order to achieve the above object, according to the present invention, when a stream is distributed from a video transmission side device (server) to a video reproduction side device (client), each of the bands is not a single stream. On the client side, which simultaneously synchronizes and distributes a plurality of different streams and receives each stream, holds each stream individually for a certain period of time, and according to the reception status of each stream, that is, according to a change in the bandwidth used by the network. The stream output from an output device such as a television or a personal computer is switched in frame units. As described above, when the video reproducing apparatus (client) simultaneously receives and temporarily accumulates a plurality of different streams of different bands distributed from the video transmitting apparatus (server), and reproduces and outputs the streams. To compensate for the loss in one stream on a frame basis, to stop the stream in the band where the loss frequently occurs and switch to the stream in the band without loss, or when there is no loss, the stream in the higher band Can be adjusted.

【0011】[0011]

【発明の実施の形態】以下、本発明の実施の形態を、図
面により詳細に説明する。
Embodiments of the present invention will be described below in detail with reference to the drawings.

【0012】図1は、本発明に係わるストリーム配信シ
ステムの構成例を示すブロック図であり、図2は、図1
におけるストリーム受信装置の処理動作例を示す説明
図、図3は、図1におけるストリーム配信システムの状
態遷移処理動作例を示す説明図である。
FIG. 1 is a block diagram showing an example of the configuration of a stream distribution system according to the present invention, and FIG.
And FIG. 3 is an explanatory diagram showing an example of a state transition processing operation of the stream distribution system in FIG.

【0013】図1において、1は映像コンテンツをスト
リーム配信する映像送信装置、2はネットワーク、3は
映像コンテンツをネットワークを介して受信するストリ
ーム受信装置、4はストリーム受信装置4から出力され
るストリーム信号を復元するデコーダ、5はデコーダ4
からの出力信号から映像を再生する受像機である。
In FIG. 1, reference numeral 1 denotes a video transmitting apparatus for distributing video contents in a stream, 2 denotes a network, 3 denotes a stream receiving apparatus for receiving video contents via a network, and 4 denotes a stream signal output from the stream receiving apparatus 4. Decoder 5 and decoder 4
This is a receiver that reproduces a video from an output signal from a TV.

【0014】以下、本発明に係わるストリーム配信をイ
ンターネットにより行うシステムを例に説明するものと
し、映像送信装置1を映像配信サーバ、ネットワーク2
をインターネット、ストリーム受信装置3とデコーダ4
および受像機5をパーソナルコンピュータからなる映像
視聴者端末(クライアント装置)として説明する。
Hereinafter, a system for performing stream distribution according to the present invention via the Internet will be described as an example.
To the Internet, stream receiving device 3 and decoder 4
The receiver 5 is described as a video viewer terminal (client device) including a personal computer.

【0015】映像配信サーバおよびクライアント装置
は、CPU(Central Processing Unit)や主メモリ、
表示装置(受像機5)、入力装置、外部記憶装置からな
るコンピュータ構成からなり、駆動装置を介して例えば
CD−ROMに記録されたプログラムやデータを外部記
憶装置内にインストールした後、この外部記憶装置から
主メモリに読み込みCPUで処理することにより、映像
送信装置1およびストリーム受信装置3における各処理
部の機能を実行する。
The video distribution server and the client device include a CPU (Central Processing Unit), a main memory,
It has a computer configuration including a display device (receiver 5), an input device, and an external storage device. After a program or data recorded on, for example, a CD-ROM is installed in the external storage device via a driving device, the external storage device The functions of the respective processing units in the video transmitting device 1 and the stream receiving device 3 are executed by reading from the device into the main memory and processing by the CPU.

【0016】すなわち、映像送信装置1にはストリーム
配信処理部1aが設けられ、ストリーム受信装置3に
は、受信処理部3aとデータキュー(0)3b,(2)
3c、タイムスタンプ管理部3d、切り替え部3fが設
けられている。
That is, the video transmission device 1 is provided with a stream distribution processing unit 1a, and the stream reception device 3 is provided with a reception processing unit 3a and data queues (0) 3b, (2).
3c, a time stamp management unit 3d, and a switching unit 3f.

【0017】このような構成において、映像配信サーバ
(映像送信装置1)は、要求元のクライアント装置(映
像視聴者端末)に映像コンテンツをストリーム配信する
際、ストリーム配信処理部1aにより、単独のストリー
ムでなく、それぞれ帯域の異なる複数のストリームを同
時に同期配信する。本例では、「Stream#0」と
「Stream#1」の2つのストリームを同時にキー
フレーム同期配信するものとする。
In such a configuration, when the video distribution server (video transmission device 1) streams the video content to the requesting client device (video viewer terminal), the video distribution server 1a uses the stream distribution processing unit 1a to provide a single stream. Instead, a plurality of streams each having a different band are synchronously distributed at the same time. In this example, it is assumed that two streams, “Stream # 0” and “Stream # 1”, are simultaneously distributed in a keyframe synchronous manner.

【0018】クライアント装置(ストリーム受信装置
3)側では、このようにして同時にキーフレーム同期配
信されてきた各ストリームを、受信処理部3aにおいて
受信し、各ストリーム別に分け、データキュー(0)3
bとデータキュー(1)3cに振り分ける。
On the side of the client device (stream receiving device 3), the streams which have been simultaneously keyframe-synchronizedly distributed in this manner are received by the reception processing unit 3a, divided for each stream, and the data queue (0) 3
b and the data queue (1) 3c.

【0019】データキュー(0)3bとデータキュー
(1)3cは、FIFO(First In First Out、先入れ
先出し)構造のバッファからなり、「Stream#
0」がデータキュー(0)3bの所定位置に、「Str
eam#1」がデータキュー(1)3cの所定位置に、
時系列で一定期間保持され、一定の時間間隔で順に出力
する。
The data queue (0) 3b and the data queue (1) 3c are composed of buffers having a FIFO (First In First Out, First In First Out) structure.
“0” is stored in a predetermined position of the data queue (0) 3b,
"eam # 1" at a predetermined position of the data queue (1) 3c,
It is stored in a time series for a certain period, and is output in order at a certain time interval.

【0020】タイムスタンプ管理部3dでは、データキ
ュー(0)3bとデータキュー(1)3cのそれぞれに
おけるストリームデータ(「Stream#0」、「S
tream#1」)の保持状態をタイムスタンプ3eに
より管理しており、この管理情報に基づき、受信処理部
3aからの各ストリームデータがデータキュー(0)3
bとデータキュー(1)3cのそれぞれの所定の位置に
格納される。
In the time stamp management unit 3d, the stream data (“Stream # 0”, “S #”) in each of the data queue (0) 3b and the data queue (1) 3c
stream # 1 ”) is managed by the time stamp 3e, and based on this management information, each stream data from the reception processing unit 3a is stored in the data queue (0) 3.
b and the data queue (1) 3c are stored at respective predetermined positions.

【0021】切り替え部3fは、データキュー(0)3
bとデータキュー(1)3cのそれぞれから一定に出力
されるストリームを切り替えるものであり、本例では、
特にタイムスタンプ管理部3dのタイムスタンプ3eに
基づく管理内容を参照して、ストリーム出力の切り替え
制御を行う。
The switching unit 3f includes a data queue (0) 3
b and the data queue (1) 3c is to switch the stream that is constantly output from each of them. In this example,
In particular, referring to the management content based on the time stamp 3e of the time stamp management unit 3d, switching control of stream output is performed.

【0022】例えば、データキュー(0)3bからの
「Stream#0」を選択して出力している際に、タ
イムスタンプ管理部3dを参照した結果、データキュー
(0)3bの出力対象の位置におけるフレーム欠損を検
出すると、データキュー(1)3cの当該位置における
「Stream#1」のフレームを選択して出力を切り
替える。
For example, when "Stream # 0" from the data queue (0) 3b is selected and output, as a result of referring to the time stamp management unit 3d, the output target position of the data queue (0) 3b is determined. When the frame loss is detected, the frame of “Stream # 1” at the position of the data queue (1) 3c is selected and the output is switched.

【0023】このようにして切り替え部3fから出力さ
れたストリームは、デコーダ4により、受像機5で再生
できるように変換されて受像機5に送られ、受像機5に
おいて再生される。
The stream output from the switching unit 3f in this manner is converted by the decoder 4 so that it can be reproduced by the receiver 5, sent to the receiver 5, and reproduced by the receiver 5.

【0024】図1に示す例では、受像機5で再生する順
番に、タイムスタンプ管理部3dにおけるタイムスタン
プT(n−1,n,n+1,n+2,n+3,…)に対
応して、それぞれデータキュー(0)3bにはD(0,
n−1),D(0,n),D(0,n+1),D(0,
n+2),D(0,n+3),…が、また、データキュ
ー(1)3cにはD(1,n−1),D(1,n),D
(1,n+1),D(1,n+2),D(1,n+
3),…が、欠損無く蓄積されている。
In the example shown in FIG. 1, the data is reproduced in the order of reproduction by the receiver 5 in correspondence with the time stamps T (n-1, n, n + 1, n + 2, n + 3,...) In the time stamp management section 3d. The queue (0) 3b has D (0,
n-1), D (0, n), D (0, n + 1), D (0,
n (2 + 2), D (0, n + 3),..., and D (1, n−1), D (1, n), D
(1, n + 1), D (1, n + 2), D (1, n +
3),... Are accumulated without loss.

【0025】このような構成からなるストリーム受信装
置3の本発明に係わる処理動作を図2に基づき説明す
る。
The processing operation according to the present invention of the stream receiving apparatus 3 having such a configuration will be described with reference to FIG.

【0026】本図2においては、「Stream#0」
と「Stream#1」とを同時に受信するシステムに
おいて、欠損したデータを回避して配信する動作を示
す。
In FIG. 2, "Stream # 0"
And "Stream # 1" simultaneously receive and transmit lost data in a system that receives the data.

【0027】「Stream#0」と「Stream#
1」とは、それぞれ帯域(送信ビットレート)の異なる
2本のストリームであり、同時・同期配信されてきた
「Stream#0」と「Stream#1」は、デー
タキュー(0)3bとデータキュー(1)3cのそれぞ
れに、時系列的に保持され、データキュー(0)3bと
データキュー(1)3cのそれぞれから一定に出力され
る。
"Stream # 0" and "Stream #
"1" are two streams having different bands (transmission bit rates), and "Stream # 0" and "Stream # 1", which have been simultaneously and synchronously distributed, have a data queue (0) 3b and a data queue (b). (1) The data queue (0) 3b and the data queue (1) 3c hold the data in time series in each of the data queues (3c) and output the data queues in a constant manner.

【0028】データキュー(0)3bとデータキュー
(1)3cから出力された各ストリームは、切り替え部
3fにより、任意に切り替えてデコーダ4に出力され、
デコーダ4で受像機5において再生できるように変換さ
れ、受像機5に渡され、受像機5で再生される。切り替
え部3fによるストリームの切り替え動作制御は、タイ
ムスタンプ管理部3dのタイムスタンプ3eに基づく管
理情報内容に従って行われる。
Each stream output from the data queue (0) 3b and the data queue (1) 3c is arbitrarily switched by the switching unit 3f and output to the decoder 4.
The data is converted by the decoder 4 so that it can be reproduced by the receiver 5, passed to the receiver 5, and reproduced by the receiver 5. The switching operation control of the stream by the switching unit 3f is performed according to the contents of the management information based on the time stamp 3e of the time stamp management unit 3d.

【0029】配信されてきたストリームの実データ「S
tream#0」と「Stream#1」は、送信元か
らの発信時は同期して欠落無く配信されるが、ネットワ
ーク2において、例えば経由ノードにおけるトラヒック
集中などから遅延が発生し、データの入れ替え、もしく
は欠落が起きる。
The actual data "S" of the delivered stream
“Stream # 0” and “Stream # 1” are delivered synchronously and without any loss at the time of transmission from the transmission source. However, in the network 2, a delay occurs due to, for example, traffic concentration in a transit node, and data exchange is performed. Or a lack occurs.

【0030】本例では、正常な状態では、「Strea
m#0」に関しては、タイムスタンプT(n−1,n,
n+1,n+2,…)に対応したデータD(0,n−
1),D(0,n),D(0,n+1),D(0,n+
2),D(0,n+3),…,D(0,n+11),…
をデータキュー(0)3bの所定の位置にバッファし、
「Stream#1」に関しては、データD(1,n−
1),D(1,n),D(1,n+1),D(1,n+
2),D(1,n+3),…,D(1,n+11),…
をデータキュー(1)3cの所定の位置にバッファし、
受信時には受像機5へと同期転送する。
In this example, in a normal state, "Stream
m # 0 ”, the time stamp T (n−1, n,
Data D (0, n−) corresponding to (n + 1, n + 2,...)
1), D (0, n), D (0, n + 1), D (0, n +
2), D (0, n + 3),..., D (0, n + 11),.
At a predetermined position in the data queue (0) 3b,
Regarding “Stream # 1”, data D (1, n−
1), D (1, n), D (1, n + 1), D (1, n +
2), D (1, n + 3),..., D (1, n + 11),.
Is buffered at a predetermined position in the data queue (1) 3c,
At the time of reception, it is synchronously transferred to the receiver 5.

【0031】このようにバッファを設けることにより、
ネットワーク上でのジッタ(「遅延」)はバッファ長の
長さに等しい分だけ吸収される。すなわち、ネットワー
ク上でのジッタにより、データの時系列的な入れ替えも
起こる可能性があり、このように時系列が乱れた場合で
も、データキュー(0)3b,(1)3cから受像機5
への転送が起こる以前に遅延データが到着した場合は、
データキュー(0)3b,(1)3cにおける、タイム
スタンプ管理部3dで管理するタイムスタンプ3eに対
応した位置に挿入する。
By providing the buffer as described above,
Jitter on the network ("delay") is absorbed by an amount equal to the length of the buffer length. That is, there is a possibility that data may be exchanged in time series due to jitter on the network, and even if the time series is disturbed in this way, the data queues (0) 3b and (1) 3c may be used to transfer data from the receiver 5 to the receiver 5.
If delayed data arrives before the transfer to
It is inserted into the data queues (0) 3b and (1) 3c at positions corresponding to the time stamp 3e managed by the time stamp management unit 3d.

【0032】遅延データを、データキュー(0)3b,
(1)3cに挿入できるまでの最大待ち時間はデータキ
ュー(0)3b,(1)3cのキュー長(データ個数)
とタイムスタンプ間隔によって決まる。
The delay data is stored in the data queue (0) 3b,
(1) The maximum wait time before insertion into 3c is the queue length (data count) of data queues (0) 3b and (1) 3c.
And the time stamp interval.

【0033】このように、送信元から同期して配信され
たデータ(ストリーム)は、ネットワーク2を通過して
擾乱するが、所定有限時間内に到着したデータは、デー
タキュー(0)3b,(1)3cにおいて、全て発信元
の同期系列に沿って蓄えられる。
As described above, the data (stream) synchronously distributed from the transmission source is disturbed by passing through the network 2, but the data arriving within a predetermined finite time is transmitted to the data queue (0) 3 b, ( 1) In 3c, all are stored along the synchronization sequence of the source.

【0034】しかし、所定有限時間内にデータが到着し
なければ、デコーダ4および受像機5に出力する「St
ream#0」もしくは「Stream#1」にデータ
欠損が生じる。本例では、切り替え部3fにおいて、タ
イムスタンプ管理部3dによるタイムスタンプ3eに基
づくデータキュー(0)3b,(1)3cのデータ格納
状況の管理情報に基づき、データキュー(0)3b,
(1)3cにおけるデータ欠損の発生を検出する。
However, if data does not arrive within a predetermined finite time, "St" output to the decoder 4 and the receiver 5 is output.
Data loss occurs in "stream # 0" or "Stream # 1". In this example, in the switching unit 3f, based on the management information of the data storage status of the data queues (0) 3b and (1) 3c based on the time stamp 3e by the time stamp management unit 3d, the data queues (0) 3b,
(1) The occurrence of data loss in 3c is detected.

【0035】そして、例えば、デコーダ4へのストリー
ム出力用に選択中のデータキュー(0)3bにおけるデ
ータ欠損の発生を検出すると、切り替え部3fは、デコ
ーダ4へのストリーム出力元をデータキュー(1)3c
に切り替え、このデータキュー(1)3cの当該位置の
データをデコーダ4に出力する。
For example, upon detecting the occurrence of data loss in the data queue (0) 3b being selected for stream output to the decoder 4, the switching unit 3f switches the stream output source to the decoder 4 to the data queue (1). ) 3c
And outputs the data at the corresponding position in the data queue (1) 3c to the decoder 4.

【0036】以下、このような切り替え動作を、映像の
質の良さから判断して、データキュー(0)3bに蓄積
するデータ(ストリーム)の方がデータキュー(1)3
cに蓄積するデータより優先されると判断する場合を例
に説明する。
In the following, such a switching operation is judged from the quality of the image, and the data (stream) stored in the data queue (0) 3b is the data queue (1) 3
An example will be described in which it is determined that priority is given to data stored in c.

【0037】このように、データキュー(0)3bに蓄
積するストリームの方がデータキュー(1)3cに蓄積
するストリームよりも映像の質が良い場合、同じタイム
スタンプ値でデータキュー(0)3bのデータがある場
合、切り替え部3fにより、データキュー(0)3bの
データを選んでデコーダ4に出力する。
As described above, when the quality of the video stored in the data queue (0) 3b is higher than that of the stream stored in the data queue (1) 3c, the data queue (0) 3b has the same time stamp value. When there is the data of (1), the switching unit 3f selects the data of the data queue (0) 3b and outputs it to the decoder 4.

【0038】例えば、タイムスタンプ3eのT(n)に
関しては、データキュー(0)3bにおいてはD(0,
n)が存在し、また、データキュー(1)3cにおいて
はD(1,n)が存在するので、デコーダ4および受像
機5には、データキュー(0)3b側のD(0,n)が
転送される。
For example, with respect to T (n) of the time stamp 3e, in the data queue (0) 3b, D (0,
n), and D (1, n) in the data queue (1) 3c, so that the decoder 4 and the receiver 5 have D (0, n) on the data queue (0) 3b side. Is transferred.

【0039】しかし、タイムスタンプ3eのT(n+
1)においては、データキュー(0)3bではD(0,
n+1)が存在しない。本図2においては、このような
データ欠損を斜線で示している。
However, T (n +
In (1), D (0,
n + 1) does not exist. In FIG. 2, such data loss is indicated by oblique lines.

【0040】この場合、切り替え部3fは、データの出
力元をデータキュー(0)3bからデータキュー(1)
3cに切り替え、データキュー(1)3cの同位置にお
けるデータD(1,n+1)をデコーダ4に出力する。
In this case, the switching unit 3f switches the data output source from the data queue (0) 3b to the data queue (1).
3c, and outputs the data D (1, n + 1) at the same position in the data queue (1) 3c to the decoder 4.

【0041】さらに、次のタイムスタンプ3eのT(n
+2)では、データキュー(0)3bにおけるD(0,
n+2)が存在するので、切り替え部3fは、データの
出力元をデータキュー(1)3cからデータキュー
(0)3bに戻し、データキュー(0)3b側のD
(0,n+2)をデコーダ4および受像機5に出力す
る。
Further, T (n) of the next time stamp 3e
+2), D (0,3) in the data queue (0) 3b
n + 2), the switching unit 3f returns the data output source from the data queue (1) 3c to the data queue (0) 3b, and the D on the data queue (0) 3b side.
(0, n + 2) is output to the decoder 4 and the receiver 5.

【0042】しかし、タイムスタンプ3eのT(n+
6)では、データキュー(0)3bとデータキュー
(1)3cのいずれにおいてもデータD(0,n+
6),D(1,n+6)が存在しないので、欠損とな
る。
However, T (n +
6), in both the data queue (0) 3b and the data queue (1) 3c, the data D (0, n +
6), D (1, n + 6) does not exist, resulting in loss.

【0043】このような動作を繰り返すことにより、本
例では、データの転送は、タイムスタンプT(n−1)
〜T(n+11),…に対応して、受像機5に転送する
映像データ列は、D(0,n−1)、D(0,n)、D
(1,n+1)、D(0,n+2)、D(1,n+
3)、D(0,n+4)、D(0,n+5)、欠損、D
(0,n+7)、D(0,n+8)、D(0,n+
9)、D(1,n+10)、D(0,n+11)、…と
なる。
By repeating such an operation, in this example, the data transfer is performed according to the time stamp T (n-1).
.. T (n + 11),... Corresponding to D (0, n−1), D (0, n), D (0, n).
(1, n + 1), D (0, n + 2), D (1, n +
3), D (0, n + 4), D (0, n + 5), missing, D
(0, n + 7), D (0, n + 8), D (0, n +
9), D (1, n + 10), D (0, n + 11),.

【0044】尚、タイムスタンプ3eのT(n+6)で
発生する欠損データについては、例えば、前後のデータ
D(0,n+5)とD(0,n+7)よリ補間したり、
無効データを代入したりすることで対処する。
The missing data generated at T (n + 6) of the time stamp 3e is, for example, re-interpolated from the preceding and following data D (0, n + 5) and D (0, n + 7).
This is dealt with by assigning invalid data.

【0045】また、ここでは、再生に必要なデータの最
小単位を1データとして説明したが、2データ単位が再
生に必要な最小単位であった場合、受像機5に転送する
映像データ列は、D(0,n−1)、D(0,n)、D
(1,n+1)、D(1,n+2)、D(1,n+
3)、D(0,n+4)、D(0,n+5)、欠損、D
(0,n+7)、D(0,n+8)、D(0,n+
9)、D(1,n+10)、D(0,n+11)、…と
なる。すなわち、再生に必要な連続データの数は任意で
も構わない。
Although the minimum unit of data required for reproduction has been described as one data here, if two data units are the minimum units required for reproduction, the video data sequence to be transferred to the receiver 5 is D (0, n-1), D (0, n), D
(1, n + 1), D (1, n + 2), D (1, n +
3), D (0, n + 4), D (0, n + 5), missing, D
(0, n + 7), D (0, n + 8), D (0, n +
9), D (1, n + 10), D (0, n + 11),. That is, the number of continuous data required for reproduction may be arbitrary.

【0046】次に、図3を用いて、図1におけるストリ
ーム配信システムの他の動作例を説明する。
Next, another operation example of the stream distribution system in FIG. 1 will be described with reference to FIG.

【0047】本図3の例では、映像コンテンツ(ストリ
ーム)のネットワーク上での配信状態に応じて、再生対
象のストリームの帯域幅(転送ビットレート)を1ラン
クづつ上位または下位に遷移させる場合を示す。
In the example of FIG. 3, a case where the bandwidth (transfer bit rate) of the stream to be reproduced is shifted higher or lower by one rank in accordance with the distribution state of the video content (stream) on the network. Show.

【0048】映像コンテンツは、送信に必要な通信帯域
によって、帯域の小さい順に、映像Mov(n)(n=
1、2、、、N、、M;1≦N≦M)を用意する。
The video contents are stored in video Mov (n) (n =
1, 2,..., N, M; 1 ≦ N ≦ M).

【0049】基本的な状態を定常状態ST(N)で示
す。この定常状態ST(N)では、映像Mov(N)1
本を配信する安定状態であり、問題がない場合、この状
態で配信を行う。
The basic state is shown by a steady state ST (N). In this steady state ST (N), the video Mov (N) 1
If the book is in a stable state of distribution and there is no problem, distribution is performed in this state.

【0050】外部状況の変化によって、1つ帯域の小さ
いMov(N−1)を配信するST(N−1)状態か、
1つ帯域の大きいMov(N+1)を配信するST(N
+1)状態へと移行する。このとき、視聴者端末に一瞬
でも映像中断や乱れが発生しないようにするため、本例
では、映像を切り替える操作に必要な時間に対応したバ
ッファを用意して、以下のようにして、映像データの配
信状態の移行を行う。
According to the change of the external situation, whether the state is ST (N-1) where Mov (N-1) having one smaller band is distributed,
ST (N) that delivers Mov (N + 1) with one larger band
+1) Transition to the state. At this time, in order to prevent the video from being interrupted or disturbed in the viewer terminal even for a moment, in this example, a buffer corresponding to the time required for the operation to switch the video is prepared, and the video data is Of the delivery status of

【0051】(1−1)まず、劣化状態への移行(ST
(N)→STd(N)→ST(N−1))を説明する。
(1-1) First, transition to the deteriorated state (ST
(N) → STd (N) → ST (N−1)) will be described.

【0052】定常状態ST(N)において、バッファに
取り込む時点でデータ欠損、または一定以上の遅延した
映像データパケットが発生した場合、劣化推移準備状態
STd(N)に移行する。
In the steady state ST (N), if data is lost or a video data packet delayed by a certain amount or more occurs at the time of being taken into the buffer, the state shifts to the deterioration transition preparation state STd (N).

【0053】この劣化推移準備状態STd(N)では、
受像機で再生中のMov(N)の受信だけでなく、それ
より1ランク下の映像Mov(N−1)の受信を開始す
る。
In this deterioration transition preparation state STd (N),
In addition to receiving the Mov (N) being reproduced by the receiver, reception of the video Mov (N-1) one rank lower than that is started.

【0054】映像Mov(N−1)の受信開始後(劣化
推移準備状態STd(N)において)、一定期間Tw
で、映像Mov(N)ならびに映像Mov(N−1)
に、再度データ欠損や一定以上の遅延が発生した場合、
映像Mov(N)の配信を停止し、映像Mov(N−
1)の受信をのみを行う1ランク下の定常状態ST(N
−1)に移行して安定する。
After the reception of the video Mov (N-1) is started (in the deterioration transition preparation state STd (N)), a fixed period Tw is set.
And the video Mov (N) and the video Mov (N-1)
In the event that data is lost again or a certain amount of delay occurs again,
The distribution of the video Mov (N) is stopped, and the video Mov (N-
One rank lower steady state ST (N) that performs only the reception of 1)
It shifts to -1) and becomes stable.

【0055】(1−2)次に、元の定常状態への復帰
(ST(N)→STd(N)→ST(N))を説明す
る。
(1-2) Next, the return to the original steady state (ST (N) → STd (N) → ST (N)) will be described.

【0056】劣化推移準備状態STd(N)において、
一定期間Twに映像Mov(N)と映像Mov(N−
1)のデータに欠損が見られない場合、映像Mov(N
−1)の配信を停止し定常状態ST(N)に復帰する。
In the deterioration transition preparation state STd (N),
The video Mov (N) and the video Mov (N-
If no loss is found in the data of 1), the video Mov (N
The distribution of -1) is stopped and the operation returns to the steady state ST (N).

【0057】(2−1)次に改善状態への移行(ST
(N)→STu(N)→ST(N+1))を説明する。
(2-1) Next, transition to the improved state (ST)
(N) → STu (N) → ST (N + 1)) will be described.

【0058】定常状態ST(N)において、バッファに
取り込む時点で欠損、または一定以上の遅延した映像デ
ータパケットが一定期間Tuの間、発生しなかった場
合、改善推移準備状態Stu(N)に移行する。
In the steady state ST (N), if no video data packet is lost or delayed by a certain amount or more at the time of being taken into the buffer during the fixed period Tu, the state shifts to the improvement transition preparation state Stu (N). I do.

【0059】この改善推移準備状態STu(N)では、
受像機で再生中のMov(N)の受信だけでなく、それ
より1ランク上の映像Mov(N+1)の受信を開始す
る。この映像Mov(N+1)の受信開始後、Mov
(N)ならびにMov(N+1)に、データ欠損や一定
以上の遅延が、一定期間Tvで発生しない場合、Mov
(N)の配信を停止し、Mov(N+1)の受信をのみ
を行う1ランク上の定常状態ST(N+1)に移行して
安定する。
In this improvement transition preparation state STu (N),
In addition to receiving the Mov (N) being reproduced by the receiver, reception of the video Mov (N + 1) one rank higher than that is started. After the reception of this video Mov (N + 1) starts, Mov (N + 1)
(N) and Mov (N + 1) when no data loss or a certain delay or more occurs in a certain period Tv,
The distribution of (N) is stopped, and the state shifts to the one-rank higher steady state ST (N + 1) where only Mov (N + 1) is received, and is stabilized.

【0060】(2−1)次に、元の定常状態への復帰
(ST(N)→STu(N)→ST(N))を説明す
る。
(2-1) Next, the return to the original steady state (ST (N) → STu (N) → ST (N)) will be described.

【0061】改善推移状態STu(N)において、一定
期間Tvに映像Mov(N)と映像Mov(N+1)の
データのいずれかに欠損が見られた場合、映像Mov
(N+1)の配信を停止し定常状態ST(N)に復帰す
る。
In the improvement transition state STu (N), if any of the data of the video Mov (N) and the video Mov (N + 1) is lost during a certain period Tv, the video Mov
The distribution of (N + 1) is stopped, and the process returns to the steady state ST (N).

【0062】尚、1ランク上の定常状態ST(N+1)
から基本的な定常状態ST(N)への移行、および、1
ランク下の定常状態ST(N−1)から基本的な定常状
態ST(N)への移行に関しても、同様にして行われ
る。
The steady state ST (N + 1) one rank higher
To the basic steady state ST (N), and 1
The transition from the steady state ST (N-1) under the rank to the basic steady state ST (N) is performed in the same manner.

【0063】このように、図3の例では、通常は、定常
状態において一つの映像を受信しておき、ネットワーク
の変化に応じて、劣化推移準備状態もしくは改善推移準
備状態に移行し、さらに、この状態でのデータの受信状
況に応じて、元の安定状態への移行、あるいは、1ラン
ク上もしくは1ランク下の安定状態への移行を行う。
As described above, in the example of FIG. 3, normally, one image is received in a steady state, and the state shifts to the deterioration transition preparation state or the improvement transition preparation state according to the change of the network. In accordance with the data reception status in this state, transition to the original stable state or transition to the stable state one rank higher or one rank lower is performed.

【0064】以上、図1〜図3を用いて説明したよう
に、本例では、インターネット(ネットワーク2)を介
して映像配信サーバ(映像送信装置1)から映像コンテ
ンツを映像視聴者端末(ストリーム受信装置3、デコー
ダ4、受像機5)にストリーム配信するシステムにおい
て、映像配信サーバは、同一の映像コンテンツを、M段
階の複数の帯域で任意選択し、これらの映像データMo
v(N)(1≦N≦M;Mは整数)をストリーム配信す
る。例えば、N−1グレードの帯域の映像Mov(N−
1)より1ランク上のグレードで、N+1グレードの帯
域の映像Mov(N+1)より1ランク下の帯域の映像
Mov(N)の主ストリームと、この主ストリーム以外
の任意本数の副ストリームとを、サーバから同期して出
力する。そして、映像視聴者端末においては、主ストリ
ームと副ストリームと受信し、個別にバッファに一定期
間保持することにより、ネットワークの状況に応じて、
ストリームを瞬断なく切り替える
As described above with reference to FIGS. 1 to 3, in this example, video contents are transmitted from the video distribution server (video transmission device 1) via the Internet (network 2) to the video viewer terminal (stream reception terminal). In a system that distributes a stream to the apparatus 3, the decoder 4, and the receiver 5), the video distribution server arbitrarily selects the same video content in a plurality of M-stage bands and outputs the video data Mo.
v (N) (1 ≦ N ≦ M; M is an integer) is stream-distributed. For example, an image Mov (N-
1) The main stream of the video Mov (N) in the band one rank lower than the video Mov (N + 1) in the band one rank lower than the N + 1 grade, and an arbitrary number of sub-streams other than the main stream. Output synchronously from the server. Then, the video viewer terminal receives the main stream and the sub-stream, and holds them separately in a buffer for a certain period of time, so that the
Switch streams without interruption

【0065】例えば、映像視聴者端末においては、主ス
トリームであるNグレードの帯域の映像Mov(N)の
みを受信する状態を定常状態ST(N)とし、この映像
Mov(N)に対する副ストリームとして、m(m=
1,,,N−1;mは整数)ランク下の帯域の映像Mo
v(N−m)を受信する状態の劣化推移準備状態STd
(N−m+1)と、p(p=1,,,M−N;pは整
数)ランク上の帯域の映像Mov(N+p)を受信する
状態の改善推移準備状態STu(N+p−1)とからな
る状態遷移を行う。
For example, in the video viewer terminal, a state in which only the video Mov (N) of the N grade band, which is the main stream, is received is defined as a steady state ST (N), and a substream corresponding to the video Mov (N) is defined as a substream. , M (m =
1 ,,, N-1; m is an integer) The video Mo of the band below the rank
Degradation transition preparation state STd for receiving v (N−m)
(N−m + 1) and an improved transition preparation state STu (N + p−1) of a state in which the video Mov (N + p) of the band on the p (p = 1,..., M−N; p is an integer) rank is received. State transition.

【0066】そして、定常状態ST(N)において、一
定期間Tu、主ストリームデータに欠如が発生しない場
合には、副ストリーム映像Mov(N+p)も同時に同
期受信する改善推移準備状態STu(N+p−1)(p
=1,,,M−N)に移行し、さらに、この改善推移準
備状態STu(N+p−1)において一定期間Tvで主
ストリームデータと副ストリームデータに遅延ないし欠
落が発生しない場合には、主ストリームを映像Mov
(N)から映像Mov(N+p)に入れ替え、主ストリ
ームであったMov(N)の受信は停止して定常状態S
T(N+1)に移行する。
In the steady state ST (N), if there is no lack in the main stream data for a certain period Tu, the improved transition preparation state STu (N + p-1) in which the sub-stream video Mov (N + p) is also synchronously received at the same time. ) (P
= 1,..., M−N), and if there is no delay or loss in the main stream data and the sub-stream data for a fixed period Tv in the improved transition preparation state STu (N + p−1), Stream Video Mov
(N) is replaced with the video Mov (N + p), the reception of the main stream Mov (N) is stopped and the steady state S
The process proceeds to T (N + 1).

【0067】また、改善推移準備状態STu(N+p−
1)において、一定期間Tvで主・副ストリームデータ
に遅延ないし欠落が発生した場合には、副ストリームで
あったMov(N+p)の受信は停止して定常状態ST
(N)に戻る。
The improvement transition preparation state STu (N + p−
In 1), if a delay or loss occurs in the main / sub stream data for a certain period Tv, the reception of Mov (N + p) as the sub stream is stopped and the stationary state ST
Return to (N).

【0068】また、定常状態ST(N)において、主ス
トリーム映像Mov(N)に遅延ないし欠落が発生した
場合には、副ストリームとして、それより低ランクの映
像Mov(N−m)(m=1,2,,N−1)を指定し
て受信し、劣化推移準備状態STd(N−m−1)に移
行し、この劣化推移準備状態STd(N−m−1)にお
いて、一定期間Twで主・副ストリームデータに遅延な
いし欠落が発生した場合には、主ストリーム映像をMo
v(N)から副ストリーム映像のMov(N−m)に入
れ替えて、主ストリームであった映像Mov(N)の受
信は停止し定常状態ST(N−m)に移行する。
In the steady state ST (N), if a delay or loss occurs in the main stream video Mov (N), the lower-rank video Mov (Nm) (m = 1, 2, N-1) and receive the same, and shift to the deterioration transition preparation state STd (N-m-1). In this deterioration transition preparation state STd (N-m-1), a certain period Tw If the main / sub stream data is delayed or missing at
The video stream Mov (N-m), which is the main stream, is stopped by replacing v (N) with Mov (N-m) of the sub-stream video, and shifts to the steady state ST (N-m).

【0069】そして、劣化推移準備状態STd(N−m
−1)において、一定期間Twで主・副ストリームデー
タに遅延ないし欠落が発生しなかった場合には、副スト
リーム映像Mov(N−m)の受信は停止して定常状態
ST(N)に戻る。
Then, the deterioration transition preparation state STd (N-m
In -1), if no delay or loss has occurred in the main / sub stream data for a certain period Tw, the reception of the sub stream video Mov (N-m) stops and returns to the steady state ST (N). .

【0070】このように、本例では、映像送信側装置
(サーバ)から映像再生側装置(クライアント)にスト
リーム配信する際、単独のストリームでなく、それぞれ
帯域の異なる複数のストリームを同時に同期配信し、各
ストリームを受信するクライアント側では、各ストリー
ムを個別に一定期間保持しておき、各ストリームの受信
状況に応じて、すなわち、ネットワークの利用帯域の変
化に応じて、テレビやパーソナルコンピュータ等の出力
装置で出力するストリームをフレーム単位で切り替え
る。
As described above, in the present embodiment, when a stream is distributed from the video transmission side device (server) to the video reproduction side device (client), not a single stream but a plurality of streams having different bands are synchronously distributed simultaneously. On the client side receiving each stream, each stream is individually held for a certain period of time, and the output of a television, a personal computer, or the like is changed according to the reception status of each stream, that is, according to a change in the bandwidth used by the network. The stream output by the device is switched in frame units.

【0071】このように、映像再生側装置(クライアン
ト)において、映像送信側装置(サーバ)から同期して
配信された各々異なる帯域の異なる複数のストリームを
同時受信して一時蓄積することで、再生出力する際に一
方のストリームにおける欠損をフレーム単位で他方のス
トリームで補填したり、欠損の頻繁に出る帯域のストリ
ームを停止して欠損の無い帯域のストリームに切り替え
たり、また欠損の出ない場合には、より高い帯域のスト
リームに切り替えるという調整を行うことができる。
As described above, the video reproducing apparatus (client) simultaneously receives and temporarily accumulates a plurality of different streams of different bands distributed from the video transmitting apparatus (server), thereby reproducing the image. When outputting, the loss in one stream is compensated by the other stream in frame units, the stream in the band where the loss frequently occurs is stopped and switched to the stream in the band without loss, or when there is no loss Can make adjustments to switch to a higher bandwidth stream.

【0072】尚、本発明は、図1〜図3を用いて説明し
た例に限定されるものではなく、その要旨を逸脱しない
範囲において種々変更可能である。例えば、本例では、
本発明に係わるストリーム配信をインターネットにより
行うシステムを例とし、映像送信装置1を映像配信サー
バ、ネットワーク2をインターネット、ストリーム受信
装置3とデコーダ4および受像機5をパーソナルコンピ
ュータ(クライアント)として説明したが、ストリーム
受信装置3として専用の装置を設け、デコーダ4および
受像機5をテレビ受像機とした構成としても良い。この
ように、ストリーム受信装置3を専用装置で構成するこ
とにより、データキュー(バッファ)3b,3c等をハ
ードウェア構成とし、より高速な処理が可能となる。ま
た、ネットワーク2に関してもFDDI(Fiber-Distri
buted Data Interface)等とすることでも良い。
The present invention is not limited to the examples described with reference to FIGS. 1 to 3 and can be variously modified without departing from the gist thereof. For example, in this example,
The system for performing stream distribution according to the present invention through the Internet has been described as an example, and the video transmission device 1 has been described as a video distribution server, the network 2 has been described as the Internet, and the stream reception device 3, the decoder 4, and the receiver 5 have been described as personal computers (clients). Alternatively, a dedicated device may be provided as the stream receiving device 3, and the decoder 4 and the receiver 5 may be configured as a television receiver. As described above, by configuring the stream receiving device 3 with a dedicated device, the data queues (buffers) 3b and 3c and the like are configured as hardware, and higher-speed processing can be performed. In addition, FDDI (Fiber-Distri
buted Data Interface).

【0073】また、本例では、それぞれ帯域(送信ビッ
トレート)の異なる、「Stream#0」と「Str
eam#1」の2つのストリームを同時・同期配信する
ものとして説明したが、データキュー(バッファ)を増
やすことで3以上のストリームを同時・同期配信するこ
とにも適用可能である。
In this example, “Stream # 0” and “Strm #”, which have different bands (transmission bit rates), respectively, are used.
Although the description has been made assuming that two streams of “eam # 1” are simultaneously and synchronously distributed, the present invention is also applicable to simultaneous and synchronous distribution of three or more streams by increasing the number of data queues (buffers).

【0074】また、本例では、同時・同期配信する複数
のストリームは、それぞれ異なる帯域用に生成されるも
のとしているが、例えば「Stream#0」と「St
ream#1」を同じもの(同じ圧縮率で、かつ、同じ
ビットレート・帯域で配信する)としてデータを二重化
し、「Stream#0」における欠損フレームの代わ
りに「Stream#1」における正常フレームを用い
てストリームを補完する構成としても良い。
In this example, a plurality of streams to be simultaneously and synchronously distributed are generated for different bands. For example, “Stream # 0” and “St
Assuming that the stream # 1 is the same (distributing at the same compression rate and the same bit rate and bandwidth), the data is duplicated, and the normal frame in the stream # 1 is replaced with the normal frame in the stream # 1 instead of the lost frame in the stream # 0. The stream may be complemented by using the stream.

【0075】また、ストリームを切り替えるタイミング
を調整できるタイマ、あるいは条件を設定できる調整機
を用いて、より適切に良好な画質の映像を得るようにし
ても良い。
Further, a timer capable of adjusting the timing of switching the stream or an adjuster capable of setting the conditions may be used to obtain a more appropriate and high-quality image.

【0076】また、本例のコンピュータ構成例において
は、CR−ROMを記録媒体として用いているが、FD
(Flexible Disk)等を記録媒体として用いることでも
良い。また、プログラムのインストールに関しても、通
信装置を介してネットワーク経由でプログラムをダウン
ロードしてインストールすることでも良い。
In the computer configuration example of this embodiment, the CR-ROM is used as a recording medium.
(Flexible Disk) may be used as a recording medium. As for the installation of the program, the program may be downloaded and installed via a network via a communication device.

【0077】[0077]

【発明の効果】本発明によれば、ネットワークでの映像
通信が可能な帯域が変化してそれに応じたストリーム配
信に移行する際にも、映像の停止や、異なる場面からの
再送は発生せず、インターネット等による映像コンテン
ツの安定したストリーム配信が可能となる。
According to the present invention, even when the band capable of performing video communication on the network changes and the system shifts to stream distribution according to the change, video stoppage and retransmission from different scenes do not occur. In addition, stable stream distribution of video content through the Internet or the like can be performed.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明に係わるストリーム配信システムの構成
例を示すブロック図である。
FIG. 1 is a block diagram illustrating a configuration example of a stream distribution system according to the present invention.

【図2】図1におけるストリーム受信装置の処理動作例
を示す説明図である。
FIG. 2 is an explanatory diagram illustrating an example of a processing operation of the stream receiving device in FIG. 1;

【図3】図1におけるストリーム配信システムの状態遷
移処理動作例を示す説明図である。
FIG. 3 is an explanatory diagram showing an example of a state transition processing operation of the stream distribution system in FIG. 1;

【符号の説明】[Explanation of symbols]

1:映像送信装置、1a:ストリーム配信処理部、2:
ネットワーク、3:ストリーム受信装置、3a:受信処
理部、3b:データキュー(0)、3c:データキュー
(1)、3d:タイムスタンプ管理部、3e:タイムス
タンプ、3f:切り替え部、4:デコーダ、5:受像
機。
1: video transmission device, 1a: stream distribution processing unit, 2:
Network, 3: stream receiving device, 3a: reception processing unit, 3b: data queue (0), 3c: data queue (1), 3d: time stamp management unit, 3e: time stamp, 3f: switching unit, 4: decoder 5: Receiver.

Claims (6)

【特許請求の範囲】[Claims] 【請求項1】 ネットワークを介して映像送信装置から
映像コンテンツを映像視聴者端末にストリーム配信する
システムであって、上記映像送信装置は、同一の映像コ
ンテンツから複数の帯域別のストリームを生成して同期
配信する手段を有し、上記映像視聴者端末は、配信され
た各ストリームを個別に一定期間保持して先入れ先出し
で出力する第1の手段と、上記ネットワークの通信速度
の変化を検出する第2の手段と、該第2の手段による上
記ネットワークの転送速度の変化の検出結果に対応し
て、上記第1の手段から出力されるストリームを切り替
える第3の手段とを有することを特徴とするストリーム
配信システム。
1. A system for streaming video content from a video transmission device to a video viewer terminal via a network, wherein the video transmission device generates a plurality of streams for each band from the same video content. Means for synchronously distributing, wherein the video viewer terminal individually retains each of the distributed streams for a certain period of time and outputs them on a first-in first-out basis; and a second means for detecting a change in the communication speed of the network. And a third means for switching a stream output from the first means in response to a detection result of the change in the transfer rate of the network by the second means. Delivery system.
【請求項2】 ネットワークを介して映像送信装置から
映像コンテンツを映像視聴者端末にストリーム配信する
システムであって、上記映像送信装置は、同一の映像コ
ンテンツから複数のストリームを生成して同期配信する
手段を有し、上記映像視聴者端末は、配信された各スト
リームを個別に一定期間保持して先入れ先出しで出力す
る第1の手段と、該第1の手段で保持した各ストリーム
におけるデータ欠損を検出する第2の手段と、該第2の
手段でデータ欠損を検出したストリームの出力に際して
は、他のストリームの当該データを出力する第3の手段
とを有することを特徴とするストリーム配信システム。
2. A system for streaming distribution of video contents from a video transmission device to a video viewer terminal via a network, wherein the video transmission device generates a plurality of streams from the same video content and synchronously distributes the streams. Means for holding the distributed streams individually for a certain period of time and outputting the data on a first-in first-out basis, and detecting data loss in each stream held by the first means. And a third means for outputting the data of another stream when outputting a stream in which data loss has been detected by the second means.
【請求項3】 ネットワークを介して映像送信装置から
映像コンテンツを映像視聴者端末にストリーム配信する
システムのストリーム配信方法であって、上記映像送信
装置は、同一の映像コンテンツから帯域別に複数のスト
リームを生成して同期配信するステップを有し、上記映
像視聴者端末は、上記映像送信装置から配信された各ス
トリームの一つを主ストリームとして受信するステップ
と、受信した主ストリームを記憶装置に一定期間保持し
て先入れ先出しで出力するステップと、上記主ストリー
ムの上記記憶装置におけるデータ欠損を検出するステッ
プと、上記主ストリームのデータ欠損が予め定められた
時間Tuで発生しない場合、該主ストリームよりも高い
帯域用の第1の副ストリームを追加受信して記憶装置に
保持する改善推移準備状態に移行するステップと、該改
善推移準備状態で上記第1の副ストリームおよび上記主
ストリームのデータ欠損もしくはデータ遅延が予め定め
られた時間Tvで発生しない場合、上記主ストリームの
受信を停止し、上記第1の副ストリームを主ストリーム
として先入れ先出しで出力する定常状態に移行するステ
ップと、上記改善推移準備状態で上記第1の副ストリー
ムおよび上記主ストリームのデータ欠損もしくはデータ
遅延が予め定められた時間Tvで発生した場合、上記第
1の副ストリームの受信を停止し、上記主ストリームの
受信と先入れ先出しでの出力を継続する定常状態に移行
するステップとを有することを特徴とするストリーム配
信方法。
3. A stream delivery method for a system for streaming video content from a video transmission device to a video viewer terminal via a network, wherein the video transmission device transmits a plurality of streams for each band from the same video content. Generating and synchronously distributing, wherein the video viewer terminal receives one of the streams distributed from the video transmission device as a main stream, and stores the received main stream in a storage device for a predetermined period of time. Holding and outputting on a first-in first-out basis; detecting a data loss in the storage device of the main stream; and if the data loss of the main stream does not occur at a predetermined time Tu, the data is higher than the main stream. Improvement transition level in which a first substream for a band is additionally received and stored in a storage device And when the data loss or the data delay of the first sub-stream and the main stream does not occur at the predetermined time Tv in the improvement transition preparation state, the reception of the main stream is stopped. A step of shifting to a steady state in which the first sub-stream is output as a first-in first-out stream as a main stream, and data loss or data delay of the first sub-stream and the main stream is predetermined in the improvement transition preparation state. And a transition to a steady state in which the reception of the first sub-stream is stopped and the reception of the main stream and the first-in first-out output are continued when the occurrence occurs at time Tv.
【請求項4】 請求項3に記載のストリーム配信方法で
あって、上記映像視聴者端末は、上記主ストリームの受
信と先入れ先出しでの出力を行う定常状態において、該
主ストリームのデータ欠損もしくはデータ遅延が発生し
た場合、該主ストリームよりも低い帯域用の第2の副ス
トリームを追加受信して記憶装置に保持する劣化推移準
備状態に移行するステップと、該劣化推移準備状態で上
記第2の副ストリームおよび上記主ストリームのデータ
欠損もしくはデータ遅延が予め定められた時間Twで発
生した場合、上記主ストリームの受信を停止し、上記第
2の副ストリームを主ストリームとして先入れ先出しで
出力する定常状態に移行するステップと、上記劣化推移
準備状態で上記第2の副ストリームおよび上記主ストリ
ームのデータ欠損もしくはデータ遅延が予め定められた
時間Twで発生しない場合、上記第2の副ストリームの
受信を停止し、上記主ストリームの受信と先入れ先出し
での出力を継続する定常状態に移行するステップとを有
することを特徴とするストリーム配信方法。
4. The stream distribution method according to claim 3, wherein the video viewer terminal receives data of the main stream and outputs data on a first-in first-out basis. When the occurrence has occurred, a step of additionally receiving a second sub-stream for a band lower than the main stream and shifting to the deterioration transition preparation state in which the second sub-stream is held in the storage device; When data loss or data delay of the stream and the main stream occurs at a predetermined time Tw, the reception of the main stream is stopped, and a transition is made to a steady state in which the second sub-stream is output as a first-in first-out stream as a main stream. And the data loss of the second sub-stream and the main stream in the deterioration transition preparation state. Or if the data delay does not occur in the predetermined time Tw, the step of stopping the reception of the second sub-stream and transitioning to a steady state in which the reception of the main stream and the output on a first-in first-out basis are continued. A stream distribution method characterized by the above-mentioned.
【請求項5】 ネットワークを介して映像送信装置から
配信される映像コンテンツのストリームを受信するスト
リーム受信装置であって、上記映像送信装置から、該映
像送信装置において同一の映像コンテンツから帯域別に
生成された配信された複数のストリームを受信する第1
の手段と、受信した各ストリームを個別に一定期間保持
して先入れ先出しで出力する第2の手段と、上記ネット
ワークの通信速度の変化を検出する第3の手段と、該第
3の手段による上記ネットワークの転送速度の変化の検
出結果に対応して、上記第2の手段から出力されるスト
リームを切り替える第4の手段とを有することを特徴と
するストリーム受信装置。
5. A stream receiving apparatus for receiving a stream of video content distributed from a video transmission device via a network, wherein the video transmission device generates the same video content for each band in the video transmission device. The first to receive multiple distributed streams
Means for individually holding each received stream for a certain period of time and outputting the data on a first-in first-out basis, third means for detecting a change in the communication speed of the network, and the network by the third means And a fourth means for switching the stream output from the second means in accordance with the detection result of the change in the transfer rate.
【請求項6】 ネットワークを介して映像送信装置から
配信される映像コンテンツのストリームを受信するスト
リーム受信装置であって、上記映像送信装置から、該映
像送信装置において同一の映像コンテンツから生成され
た配信された複数のストリームを受信する第1の手段
と、受信した各ストリームを個別に一定期間保持して先
入れ先出しで出力する第2の手段と、該第2の手段で保
持した各ストリームにおけるデータ欠損を検出する第3
の手段と、該第3の手段でデータ欠損を検出したストリ
ームの出力に際しては、他のストリームの当該データを
出力する第4の手段とを有することを特徴とするストリ
ーム受信装置。
6. A stream receiving apparatus for receiving a stream of video content distributed from a video transmission device via a network, wherein the video transmission device generates a stream generated from the same video content in the video transmission device. Means for receiving a plurality of streams, which have been received, second means for holding each of the received streams individually for a fixed period of time and outputting on a first-in first-out basis, and data loss in each stream held by the second means. Third to detect
And a fourth means for outputting the data of another stream when outputting a stream for which data loss has been detected by the third means.
JP2002148481A 2002-05-23 2002-05-23 Stream distribution system and method, and stream receiving apparatus Pending JP2003348548A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002148481A JP2003348548A (en) 2002-05-23 2002-05-23 Stream distribution system and method, and stream receiving apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002148481A JP2003348548A (en) 2002-05-23 2002-05-23 Stream distribution system and method, and stream receiving apparatus

Publications (1)

Publication Number Publication Date
JP2003348548A true JP2003348548A (en) 2003-12-05

Family

ID=29767007

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002148481A Pending JP2003348548A (en) 2002-05-23 2002-05-23 Stream distribution system and method, and stream receiving apparatus

Country Status (1)

Country Link
JP (1) JP2003348548A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017061428A1 (en) * 2015-10-06 2017-04-13 株式会社ソニー・インタラクティブエンタテインメント Communication system, transmission device, receiving device, communication system control method and program
WO2020184357A1 (en) * 2019-03-08 2020-09-17 ソニー株式会社 Information processing device, information processing method, and information processing program

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017061428A1 (en) * 2015-10-06 2017-04-13 株式会社ソニー・インタラクティブエンタテインメント Communication system, transmission device, receiving device, communication system control method and program
JPWO2017061428A1 (en) * 2015-10-06 2018-03-29 株式会社ソニー・インタラクティブエンタテインメント COMMUNICATION SYSTEM, TRANSMISSION DEVICE, RECEPTION DEVICE, COMMUNICATION SYSTEM CONTROL METHOD, AND PROGRAM
US11265595B2 (en) 2015-10-06 2022-03-01 Sony Interactive Entertainment Inc. Communication system, transmission apparatus, reception apparatus, communication system control method, and program
WO2020184357A1 (en) * 2019-03-08 2020-09-17 ソニー株式会社 Information processing device, information processing method, and information processing program
US11936962B2 (en) 2019-03-08 2024-03-19 Sony Group Corporation Information processing device and information processing method

Similar Documents

Publication Publication Date Title
Benslimane A multimedia synchronization protocol for multicast groups
US7613381B2 (en) Video data processing method and video data processing apparatus
KR101178853B1 (en) Method and apparatus for reducing channel change response times for internet protocol television
JP4475827B2 (en) System and method for transmitting and synchronizing real-time media content in a packet network
US6766376B2 (en) Streaming media buffering system
US7337231B1 (en) Providing media on demand
CN104737514A (en) A method and apparatus for distributing a media content service
US7111058B1 (en) Server and method for transmitting streaming media to client through a congested network
JP3762430B2 (en) Method and apparatus for transmitting data packets
KR20010034213A (en) Decoder buffer for streaming video receiver
US8595372B2 (en) Streaming media buffering system
Biersack et al. Synchronized delivery and playout of distributed stored multimedia streams
US20100064054A1 (en) Remote fast forward and rewind functionality for client devices
WO2010001625A1 (en) Streaming communication device, streaming communication method, and streaming communication system
KR20050085639A (en) Method and apparatus for providing a buffer architecture to improve presentation quality of images
JPH11187367A (en) Video transmitter, video receiver and video transmitting system using these
US20040105494A1 (en) Video data transmission method for changing transmission data amounts in accordance with a transmission speed and a transmission system therefor
JP2003348548A (en) Stream distribution system and method, and stream receiving apparatus
JP5186094B2 (en) Communication terminal, multimedia playback control method, and program
JP2005348015A (en) Real time streaming data receiver
JP2011119971A (en) Content playback device and method
US20190044992A1 (en) Transmission apparatus that is capable of maintaining transmission quality in switching transmission path, reception apparatus, transmission and reception system, method of controlling transmission apparatus and reception apparatus, and storage medium
JPH11205390A (en) Transmission system, terminal equipment, server system and storage medium
Li et al. MPEG-2 coded-and uncoded-stream synchronization control for real-time multimedia transmission and presentation over B-ISDN
Wang et al. Synchronization schemes for controlling VCR-like user interactions in interactive Multimedia-on-Demand (MOD) systems