JP2003018567A

JP2003018567A - Data reproducer and data transmitter

Info

Publication number: JP2003018567A
Application number: JP2001199217A
Authority: JP
Inventors: Yoshinori Matsui; 義徳松井; Yoji Notoya; 陽司能登屋
Original assignee: Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Holdings Corp
Priority date: 2001-06-29
Filing date: 2001-06-29
Publication date: 2003-01-17

Abstract

PROBLEM TO BE SOLVED: To obtain a data reproducer 100a capable of reproducing an image and a voice without interrupt even when a discontinued part of a time stamp is included in received data. SOLUTION: The data reproducer 100a processes to rewrite a time stamp to be rewritten so that a value of a time stamp of a head RTP packet for a second clip received continued to a first clip becomes a continuous value for the value of the time stamp of a last RTP packet corresponding to a first clip.

Description

Detailed Description of the Invention

【０００１】[0001]

【発明の属する技術分野】この発明は、データ再生装置
及びデータ送信装置に関し、特に、個別の再生時刻情報
を有する別系列のデータが途切れなく再生されるよう、
該データの再生処理で用いる時刻情報を調整する時刻調
整処理に関するものである。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a data reproducing device and a data transmitting device, and more particularly, to reproducing another series of data having individual reproduction time information without interruption.
The present invention relates to time adjustment processing for adjusting time information used in the data reproduction processing.

【０００２】[0002]

【従来の技術】近年、画像データや音声データの圧縮符
号化技術の進歩、およびインターネットや無線網などの
ネットワークのデータ伝送容量の拡大などに伴って、画
像情報や音声情報などを含む様々な番組のデータを、ネ
ットワーク上のサーバから受信端末（データ再生装置）
へ提供するサービスが行われるようになってきた。2. Description of the Related Art In recent years, various programs including image information, audio information, etc. have been accompanied by the progress of compression encoding technology for image data and audio data and the expansion of data transmission capacity of networks such as the Internet and wireless networks. Data from the server on the network to the receiving terminal (data playback device)
The services to be provided to

【０００３】ところで、このようなサービスを受ける受
信端末では、１つの番組のデータ（以下、ファイルとも
いう。）の一部を選択して再生するといった処理が要求
される場合もある。このようにファイルの一部を選択し
て再生することは、ダイジェスト再生と呼ばれ、具体的
な事例としては、いろいろなジャンルの情報を提供する
ニュース番組などを視聴する際に、ニュース番組全体の
データの、スポーツに関する部分と天気に関する部分の
みを再生する場合が挙げられる。By the way, a receiving terminal that receives such a service may be required to perform a process of selecting and reproducing a part of data (hereinafter, also referred to as a file) of one program. Selecting and playing a part of a file in this way is called digest playback, and as a specific example, when viewing a news program that provides information of various genres, the entire news program An example is the case where only the sports part and the weather part of the data are reproduced.

【０００４】以下、受信端末にて、サーバに格納されて
いる１つの番組のデータにおける３つの部分を選択して
再生する場合について、具体的に説明する。ここでは、
ファイルは、複数のジャンルの情報を提供するニュース
番組のデータとし、このニュース番組により提供される
複数のジャンルの情報のうち、受信端末にて再生される
３つの部分を、スポーツに関する部分（スポーツ情
報）、天気に関する部分（天気情報）、海外での出来事
に関する部分（海外情報）とする。なお、以下の説明で
は、１つの番組全体のデータをファイルとし、１つの番
組における個々のジャンルに関する部分をクリップとす
る。The case where the receiving terminal selects and reproduces three parts of the data of one program stored in the server will be specifically described below. here,
The file is data of a news program that provides information on a plurality of genres, and among the information on a plurality of genres provided by this news program, three parts to be played on the receiving terminal are related to sports (sports information). ), A part related to weather (weather information), and a part related to events overseas (overseas information). In the following description, the data of one program as a whole is regarded as a file, and the part relating to each genre in one program is regarded as a clip.

【０００５】このようなニュース番組のデータから、上
記３つのクリップ（スポーツ情報、天気情報、海外情
報）のデータを選択して再生するには、受信端末では、
各クリップのデータを取得するための情報（シーン記述
情報）が必須となる。In order to select and reproduce the data of the above three clips (sport information, weather information, overseas information) from the data of such a news program, the receiving terminal
Information (scene description information) for acquiring the data of each clip is essential.

【０００６】図８は、上記シーン記述情報が示すシーン
記述の内容を説明するための図である。ここでは、シー
ン記述は、ＳＭＩＬ（Synchronized Multimedia Integr
ationLanguage）により表現されている。なお、シーン
記述を表現する言語は、これに限るものではなく、ＭＰ
ＥＧ−４ＢＩＦＳ（Binary format for Scene）、Ｘ
ＨＴＭＬ（Extended Hypertext Markup Language）など
も使用可能である。FIG. 8 is a diagram for explaining the contents of the scene description indicated by the scene description information. Here, the scene description is SMIL (Synchronized Multimedia Integr
ationLanguage). Note that the language for expressing the scene description is not limited to this, but MP
EG-4 BIFS (Binary format for Scene), X
HTML (Extended Hypertext Markup Language) and the like can also be used.

【０００７】シーン記述ＳＤの各行の先頭に記述される
smil、/smil、head、/head、seq、/seq、video等の文字
列は、要素（エレメント）と呼ばれ、その要素に続く、
記述の内容を宣言するものである。Described at the beginning of each line of the scene description SD
Character strings such as smil, / smil, head, / head, seq, / seq, video are called elements, and the elements that follow them are
It declares the contents of the description.

【０００８】例えば、smil要素及び/smil要素は、smil
要素を含む行<smil>７１０ａと/smil要素を含む行</smi
l>７１０ｂとの間に位置する行が、ＳＭＩＬ規格に従っ
て記述されたものであることを宣言するものである。For example, the smil element and / smil element are smil
Line containing element <smil> 710a and line containing / smil element </ smi
The line between l> 710b declares that the line is described according to the SMIL standard.

【０００９】body要素及び/body要素は、body要素を含
む行<body>７２０ａと/body要素を含む行</body>７２０
ｂとの間に位置する行では、再生されるデータの所在場
所を示す情報（ＵＲＬ）及び該データを表示すべき時間
に関する情報が記述されていることを宣言するものであ
る。The body element and the / body element are a line <body> 720a containing a body element and a line </ body> 720 containing a / body element.
In the line located between b and b, it is declared that the information (URL) indicating the location of the data to be reproduced and the information regarding the time at which the data should be displayed are described.

【００１０】seq要素及び/seq要素は、seq要素を含む行
<seq>７３０ａと/seq要素を含む行</seq>７３０ｂとの
間に位置する行の記述により指定される情報は、該行の
記述に含まれる時間情報に基づいて順次再生べきもので
あることを宣言するものである。The seq element and the / seq element are lines containing the seq element.
The information specified by the description of the line located between the <seq> 730a and the line containing the / seq element </ seq> 730b should be sequentially reproduced based on the time information included in the description of the line. It declares that.

【００１１】video要素は、このvideo要素を含む行<vid
eo・・・>７０１、<video・・・>７０２、<video・・・
>７０３の記述により動画像データが指定されることを
宣言するものである。The video element is the line <vid containing this video element.
eo ・・・> 701, <video ・・・> 702, <video ・・・
> 703 declares that moving image data is designated.

【００１２】また、上記video要素に続いて記述されるs
rc、clipBegin、clipEnd等の文字列は、属性（アトリビ
ュート）と呼ばれ、各video要素が含まれる行にて詳細
な情報を指定するものである。S described after the above video element
Character strings such as rc, clipBegin, and clipEnd are called attributes, and specify detailed information in a line including each video element.

【００１３】まず、video要素を含む行<video・・・>７
０１〜７０３におけるsrc属性は、この属性により指定
される情報が、シーン記述情報に各クリップに対応する
データ（動画像データ）が付随されていないため、別
途、サーバに対して各クリップに対応するデータを要求
する際に必要となる情報であることを示している。First, a line <video ...> 7 containing a video element
The src attribute in 01 to 703 corresponds to each clip separately to the server, because the information specified by this attribute does not include the data (moving image data) corresponding to each clip in the scene description information. It indicates that the information is required when requesting data.

【００１４】ここで、video要素を含む行<video・・・>
７０１〜７０３では、伝送スキームとして、送信側と受
信側で、データ要求メッセージを交換するためのプロト
コル（手順）であるrtsp（Real Time Streaming Protoc
ol）が指定されている。さらにvideo要素を含む行<vide
o・・・>７０１〜７０３では、上記各クリップに対応す
るデータとして、サーバ（svr.com）に格納されている
データ（v.mp4）が指定されている。Here, a line containing a video element <video ...>
In 701 to 703, as a transmission scheme, rtsp (Real Time Streaming Protoc), which is a protocol (procedure) for exchanging a data request message between a transmission side and a reception side.
ol) is specified. A line containing a video element <vide
In o ...> 701 to 703, the data (v.mp4) stored in the server (svr.com) is designated as the data corresponding to each clip.

【００１５】したがって、受信端末では、上記データの
伝送プロトコル（手順）であるＲＴＳＰ(Real Time Str
eaming Protocol)を用いて、video要素を含む行<video
・・・>７０１〜７０３の記述により指定されたサーバ
（svr.com）に対して、データ（v.mp4）を要求するメッ
セージの発行が行われることとなる。なお、各クリップ
に対応するデータは、ＲＴＰ(Realtime Transport Prot
ocol)を用いて送受信される。Therefore, at the receiving terminal, RTSP (Real Time Strut) which is a transmission protocol (procedure) for the above data is transmitted.
eaming Protocol), the line that contains the video element <video
...> A message requesting data (v.mp4) is issued to the server (svr.com) specified by the description of 701 to 703. The data corresponding to each clip is RTP (Realtime Transport Prot
ocol) is used to send and receive.

【００１６】また、video要素を含む行７０１〜７０３
におけるclipBegin属性は、ファイルの先頭データの再
生時刻を起点（ゼロ秒）としたときの、各クリップの先
頭データの再生時刻（つまりストリーミング開始位置）
を指定するものである。video要素を含む行７０１〜７
０３におけるclipEnd属性は、ファイルの先頭データの
再生時刻を起点（ゼロ秒）としたときの、各クリップの
最後のデータの再生時刻（つまりストリーミング終了位
置）を指定するものである。Further, lines 701 to 703 including the video element
The clipBegin attribute in is the playback time of the start data of each clip (that is, the streaming start position) when the playback time of the start data of the file is the starting point (zero seconds).
Is to be specified. Lines 701-7 containing video elements
The clipEnd attribute in 03 specifies the reproduction time of the last data of each clip (that is, the streaming end position) when the reproduction time of the head data of the file is used as the starting point (zero seconds).

【００１７】例えば、video要素を含む行７０１により
指定されるクリップ（第１のクリップ）は、そのclipBe
gin属性の値が３５ｓ、そのclipEnd属性の値が４５ｓで
あるため、このクリップとして、ファイル（v.mp4）
の、再生時刻が３５秒から４５秒の間の部分のデータが
再生される。video要素を含む行７０２により指定され
る第２のクリップは、そのclipBegin属性の値が８５
ｓ、そのclipEnd属性の値が１００ｓであるため、この
クリップとして、ファイル（v.mp4）の、再生時刻が８
５秒から１００秒の間の部分のデータが再生される。vi
deo要素を含む行７０３により指定される第３のクリッ
プは、そのclipBegin属性の値が１４０ｓ、そのclipEnd
属性の値が１６０ｓであるため、このクリップとして、
ファイル（v.mp4）の、再生時刻が１４０秒から１６０
秒の間の部分のデータが再生される。For example, the clip designated by the line 701 including the video element (first clip) is its clipBe
Since the value of the gin attribute is 35s and the value of its clipEnd attribute is 45s, this clip is a file (v.mp4)
The data of the portion whose reproduction time is between 35 seconds and 45 seconds is reproduced. The second clip specified by the line 702 including the video element has a clipBegin attribute value of 85.
s and the value of its clipEnd attribute is 100s, the playback time of the file (v.mp4) is 8 as this clip.
The part of the data between 5 seconds and 100 seconds is reproduced. vi
The third clip specified by the line 703 including the deo element has a clipBegin attribute value of 140 s and its clipEnd.
Since the value of the attribute is 160s, as this clip,
The playback time of the file (v.mp4) is 140 seconds to 160
The part of the data between seconds is played.

【００１８】次に、受信端末が、図８に示すシーン記述
に従ってサーバに対してデータを要求し、要求したデー
タを受信しつつ再生するデータ再生処理について説明す
る。図９は、上記データ再生処理におけるプロトコルシ
ーケンスの一部（DESCRIBEやSETUPの交換は省略してい
る）を示す図である。Next, a data reproducing process in which the receiving terminal requests data from the server according to the scene description shown in FIG. 8 and reproduces the requested data while receiving the data will be described. FIG. 9 is a diagram showing a part of the protocol sequence in the data reproduction processing (DESCRIBE and SETUP exchanges are omitted).

【００１９】まず、受信端末２０では、RTSP交換部２１
により、第１のクリップに対するPLAY要求（PLAY rtsp:
//svr.com/v.mp4）Ｔ１が、ファイル（v.mp4）のＵＲＬ
を指定して発行される。この際、第１のクリップとして
再生すべきファイルの再生範囲を指定するレンジ情報
（Range:npt=35-45）が、上記PLAY要求Ｔ１に含めてサ
ーバ１０に通知される。First, in the receiving terminal 20, the RTSP exchange section 21
Causes the PLAY request for the first clip (PLAY rtsp:
//svr.com/v.mp4) T1 is the URL of the file (v.mp4)
Is issued by specifying. At this time, range information (Range: npt = 35-45) designating the reproduction range of the file to be reproduced as the first clip is included in the PLAY request T1 and notified to the server 10.

【００２０】サーバ１０では、RTSP交換部１１により、
上記PLAY要求Ｔ１に対する応答（RTSP/1.0 OK）Ａ１が
受信端末２０に対して発行されるとともに、RTSP交換部
１１からRTP送信部１２に対して、ファイルの送出を指
令する送出命令Ｃ１が通知される。すると、RTP送信部
１１からは、該ファイルの、レンジ情報により指定され
た再生範囲のデータ（第１のクリップ）が、RTPパケッ
トに格納されてＲＴＰパケットデータＤ１として受信端
末２０に送信される。受信端末２０では、RTP受信部２
２により、上記サーバ１０からのＲＴＰパケットが受信
され、ＲＴＰパケットに格納されているデータの復号及
び再生が行われる。In the server 10, the RTSP exchange section 11 allows
A response (RTSP / 1.0 OK) A1 to the PLAY request T1 is issued to the receiving terminal 20, and the RTSP exchanging unit 11 notifies the RTP transmitting unit 12 of a transmission command C1 for instructing the transmission of a file. It Then, from the RTP transmission unit 11, the data (first clip) of the reproduction range specified by the range information of the file is stored in the RTP packet and transmitted to the receiving terminal 20 as the RTP packet data D1. In the receiving terminal 20, the RTP receiving unit 2
2, the RTP packet from the server 10 is received, and the data stored in the RTP packet is decoded and reproduced.

【００２１】上記受信端末２０では、上記第１のクリッ
プのPLAY要求Ｔ１に対する応答（RTSP/1.0 OK）Ａ１が
受信されると、続いて、第２のクリップに対するPLAY要
求（PLAY rtsp://svr.com/v.mp4）Ｔ２が、ファイル
（v.mp4）のＵＲＬを指定して発行される。この際、第
２のクリップとして再生すべきファイルの再生範囲を指
定するレンジ情報（Range:npt=85-100）が、上記PLAY要
求Ｔ２に含めてサーバ１０に通知される。When the reception terminal 20 receives the response (RTSP / 1.0 OK) A1 to the PLAY request T1 of the first clip, the PLAY request (PLAY rtsp: // svr) for the second clip is subsequently received. .com / v.mp4) T2 is issued by designating the URL of the file (v.mp4). At this time, range information (Range: npt = 85-100) designating the reproduction range of the file to be reproduced as the second clip is included in the PLAY request T2 and notified to the server 10.

【００２２】すると、サーバ１０では、RTSP交換部１１
により、上記PLAY要求Ｔ２に対する応答（RTSP/1.0 O
K）Ａ２が受信端末２０に対して発行される。続いて、
受信端末２０では、第３のクリップに対するPLAY要求
（PLAY rtsp://svr.com/v.mp4）Ｔ３が、ファイル（v.m
p4）のＵＲＬを指定して発行される。この際、第３のク
リップとして再生すべきファイルの再生範囲を指定する
レンジ情報（Range:npt=140-160）が、上記PLAY要求Ｔ
３に含めてサーバ１０に通知される。そして、サーバ１
０からは、RTSP交換部１１により、上記PLAY要求Ｔ３に
対する応答（RTSP/1.0 OK）Ａ３が受信端末２０に対し
て発行され、この応答Ａ３が受信端末２０にて受信され
る。Then, in the server 10, the RTSP exchange section 11
Response to the PLAY request T2 (RTSP / 1.0 O
K) A2 is issued to the receiving terminal 20. continue,
At the receiving terminal 20, the PLAY request (PLAY rtsp: //svr.com/v.mp4) T3 for the third clip is sent to the file (vm
It is issued by specifying the URL of p4). At this time, the range information (Range: npt = 140-160) designating the reproduction range of the file to be reproduced as the third clip is the PLAY request T
It is included in 3 and notified to the server 10. And server 1
From 0, the RTSP exchanging unit 11 issues a response (RTSP / 1.0 OK) A3 to the PLAY request T3 to the receiving terminal 20, and the response A3 is received by the receiving terminal 20.

【００２３】このように受信端末２０では、シーン記述
により指定された第１〜第３のクリップに対するPLAY要
求Ｔ１〜Ｔ３が続けて行われ、サーバ１０では、受信端
末２０にて各クリップのＲＴＰパケットＤ１〜Ｄ３が連
続して受信されるよう送信される。As described above, the receiving terminal 20 continuously makes PLAY requests T1 to T3 for the first to third clips specified by the scene description, and the receiving terminal 20 of the server 10 causes the receiving terminal 20 to make an RTP packet of each clip. D1 to D3 are transmitted so as to be continuously received.

【００２４】つまり、サーバ１０では、第１のクリップ
のＲＴＰパケットＤ１の送信が完了する前に、RTSP交換
部１１からRTP送信部１２に対して、ファイル（第２の
クリップ）の送出を指令する送出命令Ｃ２が通知され
る。そして、第１のクリップのＲＴＰパケットＤ１の送
信が完了すると、サーバ１０では、第２のクリップのＲ
ＴＰパケットＤ２の送信が開始される。That is, in the server 10, before the transmission of the RTP packet D1 of the first clip is completed, the RTSP exchanging unit 11 instructs the RTP transmitting unit 12 to transmit the file (second clip). The sending instruction C2 is notified. Then, when the transmission of the RTP packet D1 of the first clip is completed, the server 10 sends the R of the second clip to R.
Transmission of the TP packet D2 is started.

【００２５】さらに、サーバ１０では、第２のクリップ
のＲＴＰパケットＤ２の送信が完了する前に、RTSP交換
部１１からRTP送信部１２に対して、ファイル（第３の
クリップ）の送出を指令する送出命令Ｃ３が通知され
る。その後第２のクリップのＲＴＰパケットＤ２の送信
が完了すると、サーバ１０では、第３のクリップのＲＴ
ＰパケットＤ３の送信が開始される。Furthermore, in the server 10, before the transmission of the RTP packet D2 of the second clip is completed, the RTSP exchanging unit 11 instructs the RTP transmitting unit 12 to transmit a file (third clip). The sending instruction C3 is notified. After that, when the transmission of the RTP packet D2 of the second clip is completed, the server 10 sends the RT of the third clip to RT.
Transmission of the P packet D3 is started.

【００２６】このように、３つのクリップのデータを要
求する際、最初に３つのクリップのPLAY要求を一度に続
けてサーバ１０に対して送ることにより、サーバ１０で
は、各クリップに対応するRTPパケットＤ１〜Ｄ３が続
けて送信されることとなり、この結果、受信端末では各
クリップのデータＤ１〜Ｄ３を跡切れなく受信すること
ができる。As described above, when requesting the data of three clips, the server 10 sends the PLAY requests of the three clips at once to the server 10, so that the server 10 can receive the RTP packet corresponding to each clip. D1 to D3 are continuously transmitted, and as a result, the receiving terminal can receive the data D1 to D3 of each clip without any trace.

【００２７】[0027]

【発明が解決しようとする課題】ところが、上記のよう
に、受信端末にて、ダイジェスト再生の対象となるすべ
てのクリップのデータが跡切れなく受信されるよう、各
クリップに対応するRTPパケットＤ１〜Ｄ３を続けて送
信しても、受信端末では、クリップ間でのタイムスタン
プの不連続性に起因して、各クリップのデータをシーム
レスに再生することはできないという問題がある。However, as described above, the RTP packets D1 to D1 corresponding to each clip are received by the receiving terminal so that the data of all clips to be digest-reproduced can be received without any trace. Even if D3 is continuously transmitted, there is a problem that the receiving terminal cannot seamlessly reproduce the data of each clip due to the discontinuity of the time stamps between the clips.

【００２８】以下この問題について、図１０を用いて詳
しく説明する。図１０(a)は、ファイル（v.mp4）におけ
る各フレームに対応するデータの配列を説明するための
図であり、第１のクリップの最後尾部分のデータ配列、
及び第２のクリップの先頭部分のデータ配列を示してい
る。Hereinafter, this problem will be described in detail with reference to FIG. FIG. 10A is a diagram for explaining the array of data corresponding to each frame in the file (v.mp4), that is, the data array of the last part of the first clip,
And the data array of the head portion of the second clip.

【００２９】ここでは、サーバ１０に保持されているフ
ァイル（v.mp4）は、複数のオーディオフレームのデー
タと、複数のビデオフレームのデータとから構成されて
いる、オーディオフレームＡＦ(i-2)，ＡＦ(i-1)，ＡＦ
(i) ，ＡＦ(i+1)には、それぞれ、タイムスタンプ「443
00」，「44600」，「44900」，「45200」が付与され、
オーディオフレームＡＦ(j-1)，ＡＦ(j) ，ＡＦ(j+1)
，ＡＦ(j+2)には、それぞれ、タイムスタンプ「8480
0」，「85100」，「85400」，「85700」が付与されてい
る。なお、Ａ(i-2)，Ａ(i-1)，Ａ(i)，Ａ(i+1)，Ａ(j-
1)，Ａ(j)，Ａ(j+1)，Ａ(j+2)は、各オーディオフレー
ムＡＦ(i-2)，ＡＦ(i-1)，ＡＦ(i) ，ＡＦ(i+1)，ＡＦ
(j-1)，ＡＦ(j) ，ＡＦ(j+1) ，ＡＦ(j+2)に対応するオ
ーディオデータである。Here, the file (v.mp4) held in the server 10 is composed of a plurality of audio frame data and a plurality of video frame data, and is an audio frame AF (i-2). , AF (i-1), AF
(i) and AF (i + 1) each have a time stamp of “443.
"00", "44600", "44900", "45200" are added,
Audio frame AF (j-1), AF (j), AF (j + 1)
, AF (j + 2) has the time stamp “8480”.
"0", "85100", "85400", and "85700" are given. Note that A (i-2), A (i-1), A (i), A (i + 1), A (j-
1), A (j), A (j + 1), A (j + 2) are audio frames AF (i-2), AF (i-1), AF (i), AF (i + 1). ), AF
Audio data corresponding to (j-1), AF (j), AF (j + 1), and AF (j + 2).

【００３０】またビデオフレームＶＦ(m-1)，ＶＦ(m)
，ＶＦ(m+1)には、タイムスタンプ「44350」，「4470
0」，「45050」が付与され、ビデオフレームＶＦ(n-
1)，ＶＦ(n) ，ＶＦ(n+1)には、タイムスタンプ「8485
0」，「85200」，「85550」が付与されている。なお、
Ｖ(m-1)，Ｖ(m)，Ｖ(m+1)，Ｖ(n-1)，Ｖ(n)，Ｖ(n+1)
は、各ビデオフレームＶＦ(m-1)，ＶＦ(m) ，ＶＦ(m+
1)，ＶＦ(n-1)，ＶＦ(n) ，ＶＦ(n+1)に対応するビデオ
データである。Video frames VF (m-1) and VF (m)
, VF (m + 1) has time stamps “44350” and “4470”.
0 ”and“ 45050 ”are added, and the video frame VF (n-
1), VF (n), and VF (n + 1) have the time stamp "8485.
"0", "85200", and "85550" are given. In addition,
V (m-1), V (m), V (m + 1), V (n-1), V (n), V (n + 1)
Is for each video frame VF (m-1), VF (m), VF (m +
1), VF (n-1), VF (n), and VF (n + 1).

【００３１】ここで、上記タイムスタンプの数値の単位
はミリ秒とする。第１のクリップは、ファイルの、再生
時刻範囲「35s-45s」に相当する部分であり、第１のク
リップの最後のオーディオフレームは、タイムスタンプ
が45000（ミリ秒）よりも小さいフレームのうちで、タ
イムスタンプが最大であるオーディオフレームＡＦ(i)
であり、第１のクリップの最後のビデオフレームは、同
様にビデオフレームＶＦ(m)である。The unit of the numerical value of the time stamp is millisecond. The first clip is a part of the file corresponding to the playback time range “35s-45s”, and the last audio frame of the first clip is a frame whose time stamp is smaller than 45000 (milliseconds). , Audio frame AF (i) with the largest time stamp
And the last video frame of the first clip is also the video frame VF (m).

【００３２】また、第２のクリップは、ファイルの、再
生時刻範囲「85s-100s」に相当する部分であり、第２の
クリップの最初のオーディオフレームは、タイムスタン
プが85000（ミリ秒）より大きいフレームのうちで、タ
イムスタンプが最小であるオーディオフレームＡＦ(j)
であり、第２のクリップの最初のビデオフレームは、同
様にビデオフレームＶＦ(n)である。The second clip is a portion of the file corresponding to the reproduction time range "85s-100s", and the first audio frame of the second clip has a time stamp larger than 85000 (milliseconds). Audio frame AF (j) with the smallest time stamp among the frames
And the first video frame of the second clip is also video frame VF (n).

【００３３】図１０(b)は、受信端末２０にて受信され
た各RTPパケットに格納されているデータの配列を説明
するための図であり、第１のクリップと第２のクリップ
との境界部分のデータ配列を示している。なお、１つの
フレームのデータは複数のパケットに跨って格納される
場合があり、この場合には、同じフレームのデータを格
納するＲＴＰパケットには、同じタイムスタンプが付与
されるが、ここでは説明を簡単にするために、１つのＲ
ＴＰパケットには、１つのフレームに対応するデータの
みが格納されているものとしている。FIG. 10B is a diagram for explaining the arrangement of the data stored in each RTP packet received by the receiving terminal 20, which is the boundary between the first clip and the second clip. The data array of the part is shown. Note that the data of one frame may be stored across a plurality of packets, and in this case, the same time stamp is added to the RTP packet that stores the data of the same frame, but this will be described here. One R to simplify
Only data corresponding to one frame is stored in the TP packet.

【００３４】具体的には、オーディオフレームＡＦ(i-
2)のデータＡ(i-2)を格納したＲＴＰパケットＡＰ(i-2)
には、オーディオフレームＡＦ(i-2)に付与されている
タイムスタンプ「44300」と同一のタイムスタンプ「443
00」が付与されている。同様に、オーディオフレームＡ
Ｆ(i-1)，ＡＦ(i)，ＡＦ(j)，ＡＦ(j+1)，ＡＦ(j+2)の
データＡ(i-2) ，Ａ(i)，Ａ(j)，Ａ(j+1)，Ａ(j+2)を格
納したＲＴＰパケットＡＰ(i-1)，ＡＰ(i)，ＡＰ(j)，
ＡＰ(j+1)，ＡＰ(j+2)には、それぞれ、タイムスタンプ
「44600」，「44900」，「85100」，「85400」，「8570
0」が付与されている。Specifically, the audio frame AF (i-
RTP packet AP (i-2) storing data A (i-2) of 2)
Contains the same time stamp "443" as the time stamp "44300" added to the audio frame AF (i-2).
00 ”is added. Similarly, audio frame A
F (i-1), AF (i), AF (j), AF (j + 1), AF (j + 2) data A (i-2), A (i), A (j), A RTP packets AP (i-1), AP (i), AP (j), which store (j + 1), A (j + 2),
Time stamps “44600”, “44900”, “85100”, “85400”, “8570” are assigned to AP (j + 1) and AP (j + 2), respectively.
"0" is given.

【００３５】また、ビデオフレームＶＦ(m-1)のデータ
Ｖ(m-1)を格納したＲＴＰパケットＶＰ(m-1)には、ビデ
オフレームＶＦ(m-1)に付与されているタイムスタンプ
「44350」と同一のタイムスタンプ「44350」が付与され
ている。同様に、ビデオフレームＶＦ(m)，ＶＦ(n)，Ｖ
Ｆ(n+1)のデータＶ(m)，Ｖ(n)，Ｖ(n+1)を格納したＲＴ
ＰパケットＶＰ(m)，ＶＰ(n)，ＶＰ(n+1)には、それぞ
れ、タイムスタンプ「44700」，「85200」，「85550」
が付与されている。In the RTP packet VP (m-1) storing the data V (m-1) of the video frame VF (m-1), the time stamp added to the video frame VF (m-1) is added. The same time stamp "44350" as "44350" is added. Similarly, video frames VF (m), VF (n), V
RT storing data V (m), V (n), V (n + 1) of F (n + 1)
The time stamps "44700", "85200", and "85550" are included in the P packets VP (m), VP (n), and VP (n + 1), respectively.
Is given.

【００３６】図１０(b)に示すように、ＲＴＰパケット
ＡＰ(i)に続くＲＴＰパケットＡＰ(j)のタイムスタンプ
「85100」は、ＲＴＰパケットＡＰ(i)のタイムスタンプ
「44900」に対して、約４０秒の差があり、ＲＴＰパケ
ットＡＰ(i)とＡＰ(j)との間でタイムスタンプの値は不
連続である。つまりＲＴＰパケットＡＰ(j)のタイムス
タンプの値は、ＲＴＰパケットＡＰ(i)のタイムスタン
プの値に対して、フレーム周期「300ミリ秒」以上離れ
ている。また、ＲＴＰパケットＶＰ(m)に続くＲＴＰパ
ケットＶＰ(n)のタイムスタンプ「85200」は、ＲＴＰパ
ケットＶＰ(m)のタイムスタンプ「44700」に対して、約
４０秒の差があり、ＲＴＰパケットＡＰ(i)とＡＰ(j)と
の間でタイムスタンプの値は不連続である。つまりＲＴ
ＰパケットＶＰ(n)のタイムスタンプの値は、ＲＴＰパ
ケットＶＰ(m)のタイムスタンプの値に対して、フレー
ム周期「350ミリ秒」以上離れている。As shown in FIG. 10B, the time stamp "85100" of the RTP packet AP (j) following the RTP packet AP (i) is different from the time stamp "44900" of the RTP packet AP (i). , About 40 seconds, and the values of the time stamps are discontinuous between the RTP packets AP (i) and AP (j). That is, the value of the time stamp of the RTP packet AP (j) is separated from the value of the time stamp of the RTP packet AP (i) by a frame period “300 milliseconds” or more. Further, the time stamp "85200" of the RTP packet VP (n) following the RTP packet VP (m) has a difference of about 40 seconds from the time stamp "44700" of the RTP packet VP (m). The time stamp values are discontinuous between AP (i) and AP (j). That is RT
The time stamp value of the P packet VP (n) is apart from the time stamp value of the RTP packet VP (m) by a frame period of “350 milliseconds” or more.

【００３７】このように連続して受信された前後のＲＴ
Ｐパケットの間で、タイムスタンプの値が不連続な値と
なっていると、タイムスタンプが、受信端末にて、オー
ディオデータ及びビデオデータを再生するための同期制
御に使用されることから、先のＲＴＰパケットのデータ
の再生が行われた後、一定時間が経過するまで、次のＲ
ＴＰパケットのデータが再生されないこととなる。RTs before and after being continuously received in this way
If the values of the time stamps are discontinuous between P packets, the time stamps are used by the receiving terminal for synchronization control for reproducing audio data and video data. After the reproduction of the data of the RTP packet of
The TP packet data will not be reproduced.

【００３８】例えば、ＲＴＰパケットＡＰ(i)のデータ
Ａ(i)が再生された後、４０秒が経過したとき、ＲＴＰ
パケットＡＰ(j)のデータＡ(j)が再生されることとな
る。また、ＲＴＰパケットＶＰ(m)のデータＶ(m)が再生
された後、４０秒が経過したとき、ＲＴＰパケットＶＰ
(n)のデータＶ(n)が再生されることとなる。For example, when 40 seconds have passed after the data A (i) of the RTP packet AP (i) was reproduced, the RTP
The data A (j) of the packet AP (j) will be reproduced. Further, when 40 seconds have passed after the data V (m) of the RTP packet VP (m) was reproduced, the RTP packet VP
The data V (n) of (n) will be reproduced.

【００３９】なお、RTSP規格では、受信端末からのPLAY
要求に対するサーバからの応答として、該応答における
特定のフィールド（RTP-Infoフィールド）に、各クリッ
プに対応するＲＴＰパケットのタイムスタンプの初期値
を設定するこことが可能となっている。According to the RTSP standard, PLAY from the receiving terminal
As a response from the server to the request, an initial value of the time stamp of the RTP packet corresponding to each clip can be set in a specific field (RTP-Info field) in the response.

【００４０】例えば、第２のクリップのPLAY要求に対す
る応答として、オーディオとビデオのタイムスタンプの
初期値がそれぞれ「85100」、「85200」であることが受
信側に伝えられる。これにより、ＲＴＰパケットＡＰ
(i)とＲＴＰパケットＡＰ(j)との間でタイムスタンプの
値が不連続である場合には、受信端末では、ＲＴＰパケ
ットＡＰ(j)のタイムスタンプが、第１のクリップの最
後のＲＴＰパケットに続く、第２のクリップの先頭のＲ
ＴＰパケットのタイムスタンプであることがわかる。For example, as a response to the PLAY request for the second clip, the receiving side is informed that the initial values of the audio and video time stamps are "85100" and "85200", respectively. As a result, the RTP packet AP
When the time stamp values are discontinuous between (i) and RTP packet AP (j), the time stamp of RTP packet AP (j) is the last RTP of the first clip at the receiving terminal. R at the beginning of the second clip following the packet
It can be seen that it is the time stamp of the TP packet.

【００４１】このように従来の受信端末では、連続して
受信されたＲＴＰパケットのタイムスタンプの値が不連
続である場合、各クリップのPLAY要求に対する応答とし
て受信側に伝えられるタイムスタンプ初期値から、タイ
ムスタンプの不連続部分が、異なるクリップの境界部分
であることは識別可能であるが、従来の受信端末は、受
信されたＲＴＰパケット列におけるタイムスタンプの不
連続部分に対する対策が施されたものではなく、受信さ
れたＲＴＰパケット列にタイムスタンプの不連続部分が
あると、画像や音声を途切れなく再生することが困難な
ものであるという問題があった。As described above, in the conventional receiving terminal, when the time stamp values of consecutively received RTP packets are discontinuous, from the time stamp initial value transmitted to the receiving side as a response to the PLAY request of each clip, , It is possible to identify that the discontinuity part of the time stamp is the boundary part of different clips, but the conventional receiving terminal has taken measures against the discontinuity part of the time stamp in the received RTP packet sequence. However, if there is a discontinuity in the time stamps in the received RTP packet sequence, there is a problem that it is difficult to play back images and sounds without interruption.

【００４２】本発明の上記のような問題点を解決するた
めになされたもので、受信されたＲＴＰパケット列にタ
イムスタンプの不連続部分が含まれていても、画像や音
声を途切れなく再生することができるデータ再生装置及
びデータ再生方法を得ることを目的とする。The present invention has been made in order to solve the above-mentioned problems, and even if a received RTP packet sequence includes a discontinuous portion of a time stamp, an image or a sound is reproduced without interruption. An object of the present invention is to obtain a data reproducing device and a data reproducing method which can be performed.

【００４３】本発明は、１つのファイルにおけるタイム
スタンプが不連続な部分のデータを、受信側にて途切れ
なく再生されるよう送信することができるデータ送信装
置及びデータ送信方法を得ることを目的とする。It is an object of the present invention to obtain a data transmitting apparatus and a data transmitting method capable of transmitting data of a portion where a time stamp is discontinuous in one file so that the data can be reproduced without interruption on the receiving side. To do.

【００４４】[0044]

【課題を解決するための手段】この発明（請求項１）に
係るデータ再生装置は、少なくとも画像情報または音声
情報のいずれか一方を含むデータを要求し、該要求に応
じて送信されたデータを受信しつつ再生するデータ再生
装置であって、上記データを受信するデータ受信部と、
上記データに対して一定のデータ単位毎に付与されてい
る、再生処理タイミングを指定する時刻情報に基づい
て、上記データの再生処理を制御する制御信号を出力す
る再生制御部と、上記データ受信部により受信されたデ
ータに対する再生処理を、上記制御信号に基づいて行う
データ再生部とを備え、上記再生制御部は、上記データ
受信部が受信したデータに付与されている時刻情報が示
す再生処理タイミングが、その直前のデータの再生終了
タイミングに対して不連続であるとき、上記データに付
与されている時刻情報を、該時刻情報が示す再生処理タ
イミングが上記再生終了タイミングと連続したタイミン
グとなるよう、修正するものであることを特徴とするも
のである。A data reproducing apparatus according to the present invention (Claim 1) requests data including at least either image information or audio information, and transmits the data transmitted in response to the request. A data reproducing device for reproducing while receiving, a data receiving unit for receiving the above data,
A reproduction control unit that outputs a control signal that controls the reproduction process of the data based on time information that specifies the reproduction process timing that is given to the data in units of a certain data unit, and the data reception unit. And a data reproducing unit that performs a reproducing process on the data received by the data receiving unit based on the control signal, and the reproducing control unit is a reproducing process timing indicated by time information given to the data received by the data receiving unit. However, when it is discontinuous with respect to the reproduction end timing of the data immediately before that, the reproduction processing timing indicated by the time information is set so that the reproduction processing timing indicated by the time information is continuous with the reproduction end timing. , Is to be modified.

【００４５】この発明（請求項２）は、請求項１記載の
データ再生装置において、上記データ受信部は、上記受
信したデータに付与されている時刻情報が示す再生処理
タイミングが、その直前のデータの再生終了タイミング
に対して不連続であるとき、上記受信したデータを、該
データに付与されている時刻情報を、上記再生制御部に
て修正された時刻情報と置き換えて出力するものである
ことを特徴とするものである。According to a second aspect of the present invention, in the data reproducing apparatus according to the first aspect, the data receiving section is arranged such that the reproduction processing timing indicated by the time information added to the received data is immediately before the reproduction processing timing. When it is discontinuous with respect to the reproduction end timing of the above, the received data is output by replacing the time information added to the data with the time information corrected by the reproduction control unit. It is characterized by.

【００４６】この発明（請求項３）は、請求項１記載の
データ再生装置において、上記データ受信部は、１つの
コンテンツに対応するデータに対する要求が、その再生
時間範囲を指定して選択的に行われたとき、上記１つの
コンテンツに対応するデータの、指定した再生時間範囲
に対応する複数の部分を、それぞれクリップデータとし
て受信し、先のクリップデータに続いて受信したクリッ
プデータに付与されている、不連続な再生タイミングを
示す時刻情報を、上記再生制御部にて修正された時刻情
報と置き換えて出力するものであることを特徴とするも
のである。According to the present invention (claim 3), in the data reproducing apparatus according to claim 1, the data receiving section selectively requests a data corresponding to one content by designating a reproduction time range thereof. When performed, a plurality of portions of the data corresponding to the one content corresponding to the specified reproduction time range are respectively received as clip data and added to the clip data received subsequent to the previous clip data. The present invention is characterized in that the time information indicating the discontinuous reproduction timing is replaced with the time information corrected by the reproduction control section and outputted.

【００４７】この発明（請求項４）に係るデータ再生装
置は、少なくとも画像情報または音声情報のいずれか一
方を含むデータを要求し、該要求に応じて送信されたデ
ータを受信しつつ再生するデータ再生装置であって、上
記データを受信するデータ受信部と、上記データに対し
て一定のデータ単位毎に付与されている、再生処理タイ
ミングを指定する時刻情報に基づいて、上記データの再
生処理を制御する制御信号を出力する再生制御部と、上
記データ受信部により受信されたデータに対する再生処
理を、上記制御信号に基づいて行うデータ再生部とを備
え、上記再生制御部は、上記受信されたデータに対する
再生処理の基準となる内部時刻を発生する時刻発生部を
有し、該受信されたデータに付与されている時刻情報が
示す再生処理タイミングが、その直前のデータの再生終
了タイミングに対して不連続であるとき、上記内部時刻
を、上記受信されたデータの再生処理タイミングが、そ
の直前のデータの再生終了タイミングに対して連続した
タイミングとなるよう、修正するものであることを特徴
とするものである。A data reproducing apparatus according to the present invention (claim 4) requests data containing at least one of image information and audio information, and reproduces the data while receiving the data transmitted in response to the request. A reproducing apparatus, which performs a reproducing process of the data based on a data receiving unit that receives the data, and time information that specifies a reproducing process timing, which is given to the data for each fixed data unit. The reproduction control unit outputs a control signal to control, and a data reproduction unit that performs a reproduction process on the data received by the data receiving unit based on the control signal. It has a time generation unit that generates an internal time that serves as a reference for reproduction processing for data, and the reproduction processing time indicated by the time information given to the received data. Is discontinuous with respect to the reproduction end timing of the immediately preceding data, the internal time is set to the timing at which the reproduction processing timing of the received data is continuous with the reproduction end timing of the immediately preceding data. It is characterized in that it is modified so that

【００４８】この発明（請求項５）は、請求項４記載の
データ再生装置において、上記データ受信部は、１つの
コンテンツに対応するデータに対する要求が、その再生
時間範囲を指定して選択的に行われたとき、上記１つの
コンテンツに対応するデータの、指定した再生時間範囲
に対応する複数の部分を、それぞれクリップデータとし
て受信して上記データ再生部に出力するものであり、上
記再生制御部は、先のクリップデータに続いて受信し
た、不連続な再生タイミングを示す時刻情報が付与され
ているクリップデータの再生処理タイミングが、その直
前のクリップデータの再生終了タイミングに対して連続
したタイミングとなるよう、上記内部時刻を修正するも
のであることを特徴とするものである。According to the present invention (claim 5), in the data reproducing apparatus according to claim 4, the data receiving unit selectively requests a data corresponding to one content by designating a reproduction time range thereof. When performed, the plurality of portions of the data corresponding to the one content corresponding to the specified reproduction time range are respectively received as clip data and output to the data reproduction unit. Indicates that the reproduction processing timing of the clip data received after the previous clip data and having the time information indicating the discontinuous reproduction timing is continuous with the reproduction end timing of the immediately preceding clip data. As described above, the internal time is corrected.

【００４９】この発明（請求項６）に係るデータ送信装
置は、少なくとも画像情報または音声情報のいずれか一
方を含むデータを送信するデータ送信装置であって、上
記データを記憶しているデータ記憶部と、上記データ記
憶部に記憶されているデータを読み出すデータ読出し部
と、上記データ読出し部により読み出されたデータを送
信するデータ送信部とを備え、上記データ送信部は、上
記データに一定のデータ単位毎に付与されている時刻情
報が示す再生処理タイミングが、その直前の再生処理タ
イミングに対応するデータの再生終了タイミングに対し
て不連続であるとき、上記データに付与されている時刻
情報を、該時刻情報が示す再生処理タイミングが、上記
再生終了タイミングに連続したタイミングとなるよう修
正して、上記データを送信するものであることを特徴と
するものである。A data transmitting apparatus according to the present invention (Claim 6) is a data transmitting apparatus for transmitting data including at least either image information or audio information, and a data storage unit storing the data. And a data reading unit for reading the data stored in the data storage unit, and a data transmitting unit for transmitting the data read by the data reading unit. When the reproduction processing timing indicated by the time information added to each data unit is discontinuous with respect to the reproduction end timing of the data corresponding to the immediately preceding reproduction processing timing, the time information added to the data is changed. , The reproduction processing timing indicated by the time information is corrected to be a timing continuous with the reproduction end timing, and It is characterized in that it is intended to send a.

【００５０】この発明（請求項７）は、請求項６記載の
データ送信装置において、上記データ送信部は、上記デ
ータ読出し部により読み出されたデータをパケットに格
納するとともに、該データにフレーム毎に付与されてい
る、再生処理タイミングを示すフレーム時刻情報に応じ
て、上記パケットにパケット時刻情報を付与して、パケ
ットデータを生成するパケット生成部と、該パケットデ
ータを送信するパケット送信部とを有するものであり、
上記パケット生成部は、該パケット生成部におけるデー
タに付与されているフレーム時刻情報が示す再生処理タ
イミングが、その直前のデータの再生終了タイミングに
対して不連続であるとき、該データを格納したパケット
に対して付与する、該フレーム時刻情報に対応するパケ
ット時刻情報を、該パケット時刻情報が示す再生処理タ
イミングが、上記再生終了タイミングと連続したタイミ
ングとなるよう修正するものであることを特徴とするも
のである。According to the present invention (claim 7), in the data transmitting apparatus according to claim 6, the data transmitting section stores the data read by the data reading section in a packet, and the data is frame by frame. A packet generation unit that adds packet time information to the packet according to the frame time information that indicates the reproduction processing timing that is added to the packet generation unit and a packet transmission unit that transmits the packet data. I have
When the reproduction processing timing indicated by the frame time information added to the data in the packet generation unit is discontinuous with respect to the reproduction end timing of the immediately preceding data, the packet generation unit stores the packet storing the data. The packet time information corresponding to the frame time information, which is added to, is corrected so that the reproduction processing timing indicated by the packet time information is continuous with the reproduction end timing. It is a thing.

【００５１】この発明（請求項８）に係るデータ再生方
法は、少なくとも画像情報または音声情報のいずれか一
方を含むデータを要求し、該要求に応じて送信されたデ
ータを受信しつつ再生するデータ再生方法であって、上
記データを受信するデータ受信ステップと、上記データ
に対して一定のデータ単位毎に付与されている、再生処
理タイミングを指定する時刻情報に基づいて、上記デー
タ受信ステップにより受信されたデータに対する再生処
理を行うデータ再生ステップとを含み、上記データ再生
ステップは、上記データ受信ステップにて受信されたデ
ータに付与されている時刻情報が示す再生処理タイミン
グが、その直前のデータの再生終了タイミングに対して
不連続であるとき、上記データに付与されている時刻情
報を、該時刻情報が示す再生処理タイミングが、上記再
生終了タイミングと連続したタイミングとなるよう修正
するものであることを特徴とするものである。A data reproducing method according to the present invention (claim 8) requests data containing at least one of image information and audio information, and reproduces data while receiving data transmitted in response to the request. A reproducing method, comprising: a data receiving step of receiving the data; and a data receiving step of receiving the data based on time information for designating a reproduction processing timing, which is given to the data in units of a certain data unit. And a data reproducing step of performing a reproducing process on the generated data, wherein in the data reproducing step, the reproduction processing timing indicated by the time information added to the data received in the data receiving step is the immediately preceding data. When it is discontinuous with respect to the reproduction end timing, the time information added to the above data is changed to the time information. Reproduction processing timing indicated is characterized in that it is intended to correct such that a timing at which the continuous and the reproduction end timing.

【００５２】この発明（請求項９）に係るデータ再生方
法は、少なくとも画像情報または音声情報のいずれか一
方を含むデータを要求し、該要求に応じて送信されたデ
ータを受信しつつ再生するデータ再生方法であって、上
記データを受信するデータ受信ステップと、上記データ
に対して一定のデータ単位毎に付与されている、再生処
理タイミングを指定する時刻情報に基づいて、上記デー
タ受信ステップにより受信されたデータに対する再生処
理を行うデータ再生ステップとを含み、上記データ再生
ステップは、該受信されたデータに付与されている時刻
情報が示す再生処理タイミングが、その直前のデータの
再生終了タイミングに対して不連続であるとき、上記受
信されたデータに対する再生処理の基準となる時刻とし
て発生される内部時刻を、上記受信されたデータの再生
処理タイミングが、その直前のデータの再生終了タイミ
ングに対して連続したタイミングとなるよう、修正する
ものであることを特徴とするものである。A data reproducing method according to the present invention (claim 9) requests data containing at least either image information or audio information, and reproduces the data while receiving the data transmitted in response to the request. A reproducing method, comprising: a data receiving step of receiving the data; and a data receiving step of receiving the data based on time information for designating a reproduction processing timing, which is given to the data in units of a certain data unit. And a data reproduction step of performing a reproduction process on the received data, wherein the data reproduction step is such that the reproduction processing timing indicated by the time information attached to the received data is relative to the reproduction end timing of the immediately preceding data. When the data is discontinuous, the internal time generated as the reference time for the playback process for the received data Time the reproduction processing timing of the received data, to be a timing continuous to the reproduction end timing of the immediately preceding data, is characterized in that it is intended to correct.

【００５３】この発明（請求項１０）に係るデータ送信
方法は、少なくとも画像情報または音声情報のいずれか
一方を含むデータを送信するデータ送信方法であって、
データ記憶部に記憶されているデータを読み出すデータ
読出しステップと、上記データ読出しステップにより読
み出されたデータを送信するデータ送信ステップとを含
み、上記データ送信ステップは、上記データに一定のデ
ータ単位毎に付与されている時刻情報が示す再生処理タ
イミングが、その直前の再生処理タイミングに対応する
データの再生終了タイミングに対して不連続であると
き、上記データに付与されている時刻情報を、該時刻情
報が示す再生処理タイミングが、上記再生終了タイミン
グに連続したタイミングとなるよう修正して、上記デー
タを送信するものであることを特徴とするものである。A data transmission method according to the present invention (claim 10) is a data transmission method for transmitting data containing at least either image information or audio information,
The method includes a data reading step of reading the data stored in the data storage unit and a data transmitting step of transmitting the data read by the data reading step. When the reproduction processing timing indicated by the time information attached to the data is discontinuous with respect to the reproduction end timing of the data corresponding to the reproduction processing timing immediately before, the time information attached to the data is The reproduction processing timing indicated by the information is corrected so that the reproduction processing timing is continuous with the reproduction end timing, and the data is transmitted.

【００５４】[0054]

【発明の実施の形態】以下、本発明の実施の形態につい
て説明する。（実施の形態１）本発明の実施の形態１によるデータ再
生装置は、データの連続性に関しては、ビデオよりオー
ディオの方が重要であることに着目し、第〔Ｎ〕番目と
第〔Ｎ＋１〕番目のクリップ間で、オーディオデータが
途切れなく再生されるよう、後のクリップの、オーディ
オに関するタイムスタンプを補正するようにしたもので
ある。また、このデータ再生装置では、ビデオに関する
タイムスタンプは、オーディオに関するタイムスタンプ
に基づいて修正されるようになっている。BEST MODE FOR CARRYING OUT THE INVENTION Embodiments of the present invention will be described below. (Embodiment 1) The data reproducing apparatus according to Embodiment 1 of the present invention pays attention to the fact that audio is more important than video in terms of data continuity, and therefore [N] th and [N + 1] th The time stamp relating to the audio of the subsequent clips is corrected so that the audio data is played back seamlessly between the second clips. Further, in this data reproducing apparatus, the time stamp regarding video is modified based on the time stamp regarding audio.

【００５５】図１は本発明の実施の形態１によるデータ
再生装置を説明するためのブロック図である。この実施
の形態１のデータ再生装置１００ａは、サーバ１０に対
して、図８に示すシーン記述ＳＤにより指定される３つ
のクリップに対応するオーディオビデオデータを要求
し、サーバ１０からＲＴＰパケットに格納して送信され
た第１〜第３のクリップのオーディオビデオデータを受
信して再生する場合、第１のクリップと第２のクリップ
の間、及び第２のクリップと第３のクリップの間で、オ
ーディオビデオデータの再生が途切れないよう、ＲＴＰ
パケットに付与されているタイムスタンプ（パケット時
刻情報）を書き換えるものである。FIG. 1 is a block diagram for explaining a data reproducing apparatus according to the first embodiment of the present invention. The data reproducing apparatus 100a according to the first embodiment requests the server 10 for the audio / video data corresponding to the three clips specified by the scene description SD shown in FIG. 8, and stores it in the RTP packet. When receiving and reproducing the audio-video data of the first to third clips transmitted by transmitting the audio video data between the first clip and the second clip and between the second clip and the third clip, RTP to ensure continuous playback of video data
The time stamp (packet time information) given to the packet is rewritten.

【００５６】つまり、上記データ再生装置１００ａは、
例えば、シーン記述ＳＤ（図８参照）を示す、ＳＭＩＬ
ファイルであるシーン記述情報Ｉsdを受け、その解析を
行って、各クリップに対応するＵＲＬ、再生レンジなど
の情報（解析情報）Ｉａを出力するとともに、表示処理
に必要となる情報Ｉｂを出力するＳＭＩＬ解析部１０２
と、該解析情報Ｉａに基づいて、サーバ１０に対して、
ＲＴＳＰ要求として、各クリップの再生を要求するＰＬ
ＡＹ要求Ｍｄを発行するとともに、各ＰＬＡＹ要求Ｍｄ
に対するサーバ１０からのＲＴＳＰ応答Ｍｒを受信する
ＲＴＳＰ交換部１０１とを有している。That is, the data reproducing apparatus 100a is
For example, SMIL showing the scene description SD (see FIG. 8)
SMIL which receives the scene description information Isd which is a file, analyzes it, outputs information (analysis information) Ia such as URL and playback range corresponding to each clip, and outputs information Ib necessary for display processing. Analysis unit 102
Then, based on the analysis information Ia, for the server 10,
PL requesting playback of each clip as an RTSP request
Along with issuing each AY request Md, each PLAY request Md
And an RTSP exchange unit 101 that receives an RTSP response Mr from the server 10 for the.

【００５７】ここで、上記ＲＴＳＰ交換部１０１は、Ｒ
ＴＳＰ応答Ｍｒに基づいて、サーバ１０からＲＴＰパケ
ットに格納して送信されたデータ（ＲＴＰパケットデー
タ）を受信するための受信制御信号Ｃｔを出力するとと
もに、ＲＴＳＰ応答ＭｒのＲＴＳＰinfoフィールドの情
報により指定されたタイムスタンプ初期値Ｉts1、及
び、受信したＲＴＰパケットに関するその他の情報Ｉｐ
を出力するものである。Here, the RTSP exchange section 101 is
Based on the TSP response Mr, the reception control signal Ct for receiving the data stored in the RTP packet and transmitted from the server 10 (RTP packet data) is output, and is specified by the information in the RTSPinfo field of the RTSP response Mr. Initial time stamp Its1 and other information Ip about the received RTP packet
Is output.

【００５８】また、上記データ再生装置１００ａは、上
記PLAY要求Ｍｄに応じてサーバ１０から送信されたＲＴ
ＰパケットデータＤｐを、上記受信制御信号Ｃｔに基づ
いて受信し、受信したＲＴＰパケットデータＤｐを出力
するとともに、各ＲＴＰパケットに付与されているタイ
ムスタンプを示す情報Ｉtsを出力するＲＴＰ受信部１０
７ａと、該ＲＴＰ受信部１０７ａから出力されるＲＴＰ
パケットデータＤｐを一時的に格納する受信バッファ１
０６とを有している。ここで、上記ＲＴＰ受信部１０７
ａは、タイムスタンプの値が不連続であるＲＴＰパケッ
トを、そのタイムスタンプの値を、該タイムスタンプの
修正値と置き換えて出力するものである。Further, the data reproducing apparatus 100a receives the RT transmitted from the server 10 in response to the PLAY request Md.
The RTP receiving unit 10 that receives the P packet data Dp based on the reception control signal Ct, outputs the received RTP packet data Dp, and outputs the information Its indicating the time stamp attached to each RTP packet.
7a and the RTP output from the RTP receiving unit 107a
Receive buffer 1 for temporarily storing packet data Dp
06 and. Here, the RTP receiving unit 107
In a, an RTP packet having a discontinuous time stamp value is output by replacing the time stamp value with a modified value of the time stamp.

【００５９】さらに、上記データ再生装置１００ａは、
クロック回路１０４からのクロック信号Ｓckに基づい
て、設定された初期値を基準として計時動作を行うカウ
ンタ１０５ａと、該カウンタの出力Ｃout、上記タイム
スタンプの初期値を示す情報Ｉts1、及び各ＲＴＰパケ
ットのタイムスタンプを示す情報Ｉtsに基づいて、タイ
ムスタンプの値が不連続であるＲＴＰパケットのタイム
スタンプの値を修正し、修正したタイムスタンプの値を
示す情報Ｉtsrを出力するＡＶ同期制御部１０３ａとを
有している。ここで、上記ＡＶ同期制御部１０３ａは、
最初に受信したＲＴＰパケットのタイムスタンプの値に
基づいて上記カウンタの初期値を設定するとともに、各
ＲＴＰパケットのタイムスタンプの値とカウンタ出力の
値とが一致したとき、表示指示信号Ｓdisを出力するも
のである。Furthermore, the data reproducing apparatus 100a is
Based on the clock signal Sck from the clock circuit 104, a counter 105a that performs a time counting operation with the set initial value as a reference, the output Cout of the counter 105, information Its1 indicating the initial value of the time stamp, and each RTP packet The AV synchronization control unit 103a that corrects the time stamp value of the RTP packet having the discontinuous time stamp value based on the information Its indicating the time stamp and outputs the information Ittsr indicating the corrected time stamp value. Have Here, the AV synchronization control unit 103a is
The initial value of the counter is set based on the time stamp value of the first received RTP packet, and the display instruction signal Sdis is output when the time stamp value of each RTP packet and the counter output value match. It is a thing.

【００６０】ここでは、クロック回路１０４の動作周波
数は1000Hzとし、上記カウンタ１０５ａは、クロック信
号の立ち上がりエッジ、あるいは立ち下がりエッジをト
リガとしてカウンタ値をインクリメントする、３２ビッ
ト信号を出力するものとする。なお、上記クロックの動
作周波数とカウントのビット長は一例である。また、カ
ウンタ１０４ａは、ＡＶ同期制御部１０３ａによって初
期値を設定可能なものであり、またＡＶ同期制御部１０
３ａには任意のタイミングでカウンタ値を読み出し可能
なものである。Here, the operating frequency of the clock circuit 104 is 1000 Hz, and the counter 105a outputs a 32-bit signal for incrementing the counter value by using the rising edge or the falling edge of the clock signal as a trigger. Note that the operating frequency of the clock and the bit length of the count are examples. The counter 104a can set an initial value by the AV synchronization control unit 103a.
The counter value 3a can be read at any timing.

【００６１】また、上記データ再生装置１００ａは、上
記受信バッファに格納されているＲＴＰパケットからフ
レームのデータＤｆを取り出して復号化する復号部１０
８と、該復号部１０８から出力された復号化データＤｄ
を、ＡＶ同期制御部１０３ａからの表示指示信号Ｓdis
及びＳＭＩＬ解析部１０２からの情報Ｉｂに基づいて表
示する表示部１０９とを有している。ここで、該表示部
１０９は、表示指示信号Ｓdisに基づいて、フレームに
対する復号化処理を指示する復号指示信号Ｓdecを復号
部１０８に出力するとともに、該復号指示信号Ｓdecに
基づいて復号化された復号化データＤｄの画像表示を行
うものである。また、上記復号部１０８は、復号指示信
号Ｓdecに基づいて、受信バッファ１０６に格納されて
いるＲＴＰパケットのうちの、要求された時刻以降で最
も小さいタイムスタンプの値を持つＲＴＰパケットを検
索し、検索したＲＴＰパケットに含まれるフレームデー
タを取り出して復号化するものである。Further, the data reproducing apparatus 100a extracts the frame data Df from the RTP packet stored in the reception buffer and decodes it.
8 and the decoded data Dd output from the decoding unit 108
To the display instruction signal Sdis from the AV synchronization control unit 103a.
And a display unit 109 for displaying based on the information Ib from the SMIL analysis unit 102. Here, the display unit 109 outputs a decoding instruction signal Sdec for instructing a decoding process for the frame to the decoding unit 108 based on the display instruction signal Sdis, and the decoding is performed based on the decoding instruction signal Sdec. The image of the decrypted data Dd is displayed. Further, the decoding unit 108 searches the RTP packet stored in the reception buffer 106 for the RTP packet having the smallest time stamp value after the requested time, based on the decoding instruction signal Sdec, The frame data included in the searched RTP packet is extracted and decoded.

【００６２】次に、この実施の形態１のデータ再生装置
（受信端末）１００ａがデータを要求するサーバ１０に
ついて詳しく説明する。このサーバ１０は、種々の番組
などのデータであるメディアファイルを記憶したデータ
記憶装置１５と、読出し指示信号Ｓrc１に基づいて該デ
ータ記憶装置１５からメディアファイルを読み出すとと
もに、該ファイルの各フレームのタイムスタンプ情報Ｉ
ftなどを出力するファイル読出し部１３と、受信端末１
００ａのＲＴＳＰ交換部１０１との間でメッセージ交
換、つまりＲＴＳＰ要求Ｍｄ及びＲＴＳＰ応答Ｍｒを行
うＲＴＳＰ交換部１１とを有している。ここで、上記デ
ータ記憶装置１５は、磁気ディスク、光ディスクなどの
ディスク状記録媒体に対してデータの書き込み及び読出
しを行うものである。また、上記ＲＴＳＰ交換部１１
は、受信端末１００ａのＲＴＳＰ交換部１０１からのPL
AY要求Ｍｄを受け、該ＰＬＡＹ要求に含まれるレンジ情
報が示すファイルの再生範囲と、上記ファイルの各フレ
ームのタイムスタンプとを比較して、タイムスタンプの
初期値（最初に送信されるＲＴＰパケットのタイムスタ
ンプ）を求め、該タイムスタンプ初期値を示す情報を含
む応答Ｍｒを受信端末１００ａに対して発行するととも
に、上記読出し指示信号Ｓrc１、ファイルを格納するＲ
ＴＰパケットの生成を制御するパケット生成制御信号Ｃ
ｓ、及びＲＴＰパケットに関するパケット属性情報Ｉｐ
を出力するものである。Next, the server 10 for which the data reproducing apparatus (reception terminal) 100a of the first embodiment requests data will be described in detail. This server 10 reads a media file from the data storage device 15 based on a read instruction signal Src1 and a data storage device 15 that stores a media file that is data such as various programs, and the time of each frame of the file. Stamp information I
File reading unit 13 that outputs ft, etc., and receiving terminal 1
It has a message exchange with the RTSP exchange unit 101 of 00a, that is, an RTSP exchange unit 11 that performs an RTSP request Md and an RTSP response Mr. Here, the data storage device 15 writes / reads data to / from a disk-shaped recording medium such as a magnetic disk or an optical disk. In addition, the RTSP exchange section 11
Is the PL from the RTSP exchange unit 101 of the receiving terminal 100a.
Upon receiving the AY request Md, the reproduction range of the file indicated by the range information included in the PLAY request is compared with the time stamp of each frame of the file, and the initial value of the time stamp (the RTP packet of the first transmitted) is compared. (Time stamp), issues a response Mr including information indicating the time stamp initial value to the receiving terminal 100a, and stores the read instruction signal Src1 and the file R.
Packet generation control signal C for controlling generation of TP packet
s and packet attribute information Ip regarding the RTP packet
Is output.

【００６３】上記サーバ１０は、ＲＴＳＰ交換部１１か
らのパケット生成制御信号Ｃｓに基づいて、読出し要求
信号Ｓrc２を上記ファイル読出し部１３に出力し、ファ
イルの要求された再生範囲に対応するフレーム（クリッ
プ）のデータＤｃを上記ファイル読出し部１３から取得
し、取得したデータをＲＴＰパケットに格納して出力す
るＲＴＰパケット生成部１４と、該ＲＴＰパケット生成
部１４にて生成されたＲＴＰパケットＤｐを受信端末１
００ａへ送信するＲＴＰ送信部１２とを有している。こ
こで、上記ＲＴＰパケット生成部１４は、上記ＲＴＰパ
ケットを生成する際、ＲＴＳＰ交換部１１からパケット
属性情報Ｉｐとして通知された、各ＲＴＰパケットに対
応するタイムスタンプ、ＳＳＲＣ（Session Resourc
e）、ＳＱＮ（Sequence Number）を示す情報を含むＲＴ
Ｐパケットヘッダを生成し、上記ＲＴＰパケットに該Ｒ
ＴＰパケットヘッダを付加するものである。ここで、Ｓ
ＳＲＣ（Session Resource）はＲＴＰパケットを識別す
る識別ＩＤであり、ＳＱＮは各ＲＴＰパケットに付与さ
れるシーケンス番号である。The server 10 outputs the read request signal Src2 to the file read unit 13 based on the packet generation control signal Cs from the RTSP exchange unit 11, and the frame (clip) corresponding to the requested reproduction range of the file. ) Data Dc from the file reading unit 13, stores the acquired data in an RTP packet and outputs the RTP packet, and a receiving terminal that receives the RTP packet Dp generated by the RTP packet generation unit 14. 1
00a. Here, when the RTP packet generator 14 generates the RTP packet, the time stamp corresponding to each RTP packet notified by the RTSP exchange 11 as the packet attribute information Ip, SSRC (Session Resourc
e), RT including information indicating SQN (Sequence Number)
A P packet header is generated, and the R packet is added to the R packet.
A TP packet header is added. Where S
SRC (Session Resource) is an identification ID for identifying an RTP packet, and SQN is a sequence number given to each RTP packet.

【００６４】なお、この実施の形態１では、ファイル読
出し部１３は、ＲＴＳＰ交換部１１からの読出し要求信
号Ｓrc１により、受信端末により指定されたファイル全
体のデータをデータ記憶装置１５から読出し、ＲＴＰパ
ケット生成部１４からの読出し要求信号Ｓrc２により、
データ記憶装置１５から読み出されたファイルの、要求
された再生範囲（クリップ）に対応するデータを、ＲＴ
Ｐパケット生成部１４に出力するものとしているが、フ
ァイル読出し部１３の構成はこれに限るものではない。
例えば、ファイル読出し部１３は、ＲＴＳＰ交換部１１
からの読出し要求信号Ｓrc１を受けたとき、ファイルに
付与されているヘッダ情報を参照して、データ記憶装置
１５から、指定されたファイルの、要求された再生範囲
（クリップ）に対応するデータを読出し、ＲＴＰパケッ
ト生成部１４からの読出し要求信号Ｓrc２により、デー
タ記憶装置１５から読み出されたクリップに対応するデ
ータをＲＴＰパケット生成部１４に出力するものであっ
てもよい。In the first embodiment, the file reading unit 13 reads the data of the entire file designated by the receiving terminal from the data storage device 15 by the read request signal Src1 from the RTSP exchanging unit 11, and the RTP packet. By the read request signal Src2 from the generation unit 14,
The data corresponding to the requested reproduction range (clip) of the file read from the data storage device 15 is recorded as RT
Although it is supposed to output to the P packet generation unit 14, the configuration of the file reading unit 13 is not limited to this.
For example, the file reading unit 13 is the RTSP exchanging unit 11
When receiving the read request signal Src1 from the file, the header information added to the file is referred to, and the data corresponding to the requested reproduction range (clip) of the specified file is read from the data storage device 15. The data corresponding to the clip read from the data storage device 15 may be output to the RTP packet generation unit 14 in response to the read request signal Src2 from the RTP packet generation unit 14.

【００６５】次に動作について説明する。受信端末１０
０ａでは、ＳＭＩＬファイルとして供給されたシーン記
述情報Ｉsdが、ＳＭＩＬ解析部１０２により解析され、
該解析の結果、該シーン記述情報が示すシーン記述ＳＤ
（図８参照）に記述されている情報が解析情報Ｉａとし
てＲＴＳＰ交換部１０１に通知される。この解析情報Ｉ
ａは、３つのクリップに対応するＵＲＬ及び再生レンジ
を示す情報が含まれている。また、シーン記述ＳＤに記
述されている、上記クリップに対する表示処理に必要な
その他の情報Ｉｂが、ＳＭＩＬ解析部１０２から表示部
１０９に出力される。Next, the operation will be described. Receiving terminal 10
0a, the scene description information Isd supplied as the SMIL file is analyzed by the SMIL analysis unit 102,
As a result of the analysis, the scene description SD indicated by the scene description information
The information described in (see FIG. 8) is notified to the RTSP exchange unit 101 as analysis information Ia. This analysis information I
a includes information indicating URLs and reproduction ranges corresponding to the three clips. Further, other information Ib described in the scene description SD and necessary for the display processing for the clip is output from the SMIL analysis unit 102 to the display unit 109.

【００６６】ＲＴＳＰ交換部１０１では、上記クリップ
の再生レンジを示す情報に基づいて各クリップのPLAY要
求のタイミングが決定され、決定されたタイミングで、
ＵＲＬにより指定されたサーバ１０に対して、データを
要求するPLAY要求が発行される。The RTSP exchange section 101 determines the timing of the PLAY request for each clip based on the information indicating the reproduction range of the clip, and at the determined timing,
A PLAY request for data is issued to the server 10 specified by the URL.

【００６７】サーバ１０では、ＲＴＳＰ交換部１１から
ファイル読出し部１３に対して読出し指示信号Ｓrc1が
出力され、ファイル読出し部１３では、読出し指示信号
Ｓrc1に基づいて、指定されたクリップを含むファイル
をデータ記憶装置１５から読み出す処理が行われる。フ
ァイルが読み出されると、ファイル読出し部１３から
は、データ記憶装置１５から読み出されたファイルの各
フレームに対応するタイムスタンプなどを示す情報Ｉft
がＲＴＳＰ交換部１１に出力される。In the server 10, the RTSP exchanging unit 11 outputs the read instruction signal Src1 to the file reading unit 13, and the file reading unit 13 writes the file including the specified clip based on the read instruction signal Src1. A process of reading from the storage device 15 is performed. When the file is read, the file reading unit 13 outputs information Ift indicating a time stamp or the like corresponding to each frame of the file read from the data storage device 15.
Is output to the RTSP exchange section 11.

【００６８】ＲＴＳＰ交換部１１では、受信端末１００
ａへ送信するＲＴＰパケットのタイムスタンプの初期値
を求める処理、及び受信端末１００ａからのPLAY要求に
対する応答（ＲＴＳＰ応答）Ｍｒが行われる。ここで、
上記タイムスタンプの初期値は、各フレームのタイムス
タンプと、受信端末１００ａから要求されたクリップの
再生レンジとの比較により求められる。ＲＴＳＰ応答Ｍ
ｒの際には、この応答に含まれるＲＴＰinfoフィールド
が生成され、該フィールドにはタイムスタンプの初期値
を示す情報が含まれる。In the RTSP exchange section 11, the receiving terminal 100
The process of obtaining the initial value of the time stamp of the RTP packet to be transmitted to a and the response (RTSP response) Mr to the PLAY request from the receiving terminal 100a are performed. here,
The initial value of the time stamp is obtained by comparing the time stamp of each frame with the reproduction range of the clip requested by the receiving terminal 100a. RTSP response M
In the case of r, the RTPinfo field included in this response is generated, and the field contains information indicating the initial value of the time stamp.

【００６９】このとき、上記ＲＴＳＰ交換部１１から
は、ＲＴＰパケットに付与するタイムスタンプ（ＴＳ）
やシーケンス番号（ＳＱＮ）の初期値、パケット識別番
号（ＳＳＲＣ）などのパケット属性情報ＩｐがＲＴＰパ
ケット生成部１４に通知されるとともに、ＲＴＰパケッ
ト生成部１４の動作を指示する動作指示信号Ｃｓが該Ｒ
ＴＰパケット生成部１４に出力される。At this time, the RTSP exchanging unit 11 gives a time stamp (TS) to the RTP packet.
And the packet attribute information Ip such as the initial value of the sequence number (SQN) and the packet identification number (SSRC) are notified to the RTP packet generation unit 14, and the operation instruction signal Cs for instructing the operation of the RTP packet generation unit 14 is transmitted. R
It is output to the TP packet generation unit 14.

【００７０】そして、このＲＴＰパケット生成部１４で
は、上記ＲＴＳＰ交換部１１からの動作指示信号Ｃｓに
基づいて、ファイル読出し部１３から、ファイルの第１
のクリップに相当する部分を読み出す処理が行われ、読
み出されたデータをパケット化する処理が行われる。こ
こで、上記クリップの読出しは、ＲＴＰパケット生成部
１４からファイル読出し部１３に対して出力される読出
し指示信号Ｓrc２により行われ、また、読み出されたデ
ータのパケット化処理では、タイムスタンプ、ＳＳＲ
Ｃ、ＳＱＮなどを示す情報を含むＲＴＰパケットヘッダ
が、一定のデータ長に区分されたデータに付加されて、
ＲＴＰパケットが生成される。Then, in the RTP packet generator 14, the file read unit 13 sends the first file to the first file based on the operation instruction signal Cs from the RTSP exchange 11.
A process of reading a portion corresponding to the clip is performed, and a process of packetizing the read data is performed. Here, the reading of the clip is performed by the read instruction signal Src2 output from the RTP packet generation unit 14 to the file reading unit 13, and in the packetization processing of the read data, the time stamp, SSR
An RTP packet header including information indicating C, SQN, etc. is added to data segmented into a certain data length,
An RTP packet is generated.

【００７１】ＲＴＰパケット生成部１４にて生成された
ＲＴＰパケットＤｐは、ＲＴＰパケット送信部１２によ
り受信端末１００ａへ送信される。サーバ１０と受信端
末１００ａとの間では、上記第１のクリップに対するＲ
ＴＳＰ要求Ｍｄ及びＲＴＳＰ応答Ｍｒに続いて、上記第
２及び第３のクリップに対するＲＴＳＰ要求Ｍｄ及びＲ
ＴＳＰ応答Ｍｒが行われる。従って、サーバ１０では、
上記第１のクリップに対する送信処理が完了すると、第
２及び第３のクリップに対する送信処理が順次行われ
る。The RTP packet Dp generated by the RTP packet generator 14 is transmitted by the RTP packet transmitter 12 to the receiving terminal 100a. Between the server 10 and the receiving terminal 100a, the R for the first clip is
Following the TSP request Md and the RTSP response Mr, the RTSP requests Md and R for the second and third clips are given.
The TSP response Mr is given. Therefore, in the server 10,
When the transmission process for the first clip is completed, the transmission process for the second and third clips is sequentially performed.

【００７２】一方、受信端末１００ａでは、ＲＴＳＰ交
換部１０１により、第１のクリップに対応するPLAY要求
に対する応答（ＲＴＳＰ応答）Ｍｒが受信されると、該
応答の一部として取得されたＲＴＰinfoフィールド情報
に基づいて、サーバから送信される、第１のクリップに
対応するＲＴＰパケットの識別情報（ＳＳＲＣ）、タイ
ムスタンプの初期値などの情報が取得される。すると、
ＲＴＳＰ交換部１０１からＲＴＰパケット受信部１０７
ａには、ＲＴＰパケットに関する識別情報（ＳＳＲＣ）
などのパケット属性情報Ｉｐが通知されるとともに、Ｒ
ＴＰパケット受信部１０７ａでのＲＴＰパケットの受信
動作を制御する動作指示信号Ｃｔが出力される。また、
ＲＴＳＰ交換部１０１からＡＶ同期制御部１０３ａに
は、タイムスタンプ初期値を示す情報Ｉts1が供給され
る。On the other hand, in the receiving terminal 100a, when the RTSP exchanging unit 101 receives the response (RTSP response) Mr to the PLAY request corresponding to the first clip, the RTPinfo field information acquired as a part of the response. Based on the above, information such as the identification information (SSRC) of the RTP packet corresponding to the first clip and the initial value of the time stamp, which are transmitted from the server, are acquired. Then,
From the RTSP switching unit 101 to the RTP packet receiving unit 107
In a, identification information (SSRC) about the RTP packet
Packet attribute information Ip such as
The operation instruction signal Ct for controlling the reception operation of the RTP packet in the TP packet receiving unit 107a is output. Also,
Information Its1 indicating a time stamp initial value is supplied from the RTSP exchange unit 101 to the AV synchronization control unit 103a.

【００７３】受信端末１００ａのＲＴＰ受信部１０７ａ
では、サーバ１０から送信された、第１のクリップの各
フレームのデータを格納したＲＴＰパケットＤｐが、上
記ＲＴＳＰ交換部１０１からの動作指示信号Ｃｔに基づ
いて受信される。該受信されたＲＴＰパケットＤｐのタ
イムスタンプを示す情報Ｉtsは、ＲＴＰ受信部１０７ａ
から上記ＡＶ同期制御部１０３ａに通知される。なお、
上記ＲＴＰ受信部１０７ａでは、ＲＴＰパケットのタイ
ムスタンプがモニターされており、クリップの更新、つ
まり順次受信されるＲＴＰパケットのタイムスタンプ値
（再生処理タイミング）として、直前に受信されたＲＴ
Ｐパケットのタイムスタンプの値（再生処理タイミン
グ）に対して、一定の再生処理周期（フレーム周期）よ
り離れた不連続な値（タイミング）が発生したかが監視
されている。RTP receiving section 107a of receiving terminal 100a
Then, the RTP packet Dp, which stores the data of each frame of the first clip, transmitted from the server 10 is received based on the operation instruction signal Ct from the RTSP exchange section 101. The information Its indicating the time stamp of the received RTP packet Dp is the RTP receiving unit 107a.
From the AV synchronization control unit 103a. In addition,
The RTP receiving unit 107a monitors the time stamp of the RTP packet, and updates the clip, that is, the time stamp value (reproduction processing timing) of the RTP packets that are sequentially received.
With respect to the time stamp value (reproduction processing timing) of the P packet, it is monitored whether a discontinuous value (timing) apart from a certain reproduction processing cycle (frame cycle) has occurred.

【００７４】また、上記ＡＶ同期制御部１０３ａでは、
カウンタ１０５ａに初期値を設定する初期値設定処理が
行われ、その後は、カウンタ出力Ｃoutに基づいて、表
示指示信号Ｓdisにより表示部１０９を制御する制御動
作が行われる。Further, in the AV synchronization control section 103a,
An initial value setting process of setting an initial value in the counter 105a is performed, and thereafter, a control operation of controlling the display unit 109 by the display instruction signal Sdis is performed based on the counter output Cout.

【００７５】ここで、上記初期値設定処理では、ＲＴＳ
Ｐ交換部１０１からのタイムスタンプ情報Ｉts1が示す
タイムスタンプの初期値、あるいはＲＴＰ受信部１０７
ａにて受信された、第１のクリップに対応する最初のＲ
ＴＰパケットのタイムスタンプ情報Ｉtsが示す値に基づ
いて、カウンタの初期値情報Ｉivがカウンタ１０４に出
力され、カウンタ１０４の初期値が、該情報Ｉivが示す
値に設定される。上記カウンタ１０５ａでは、クロック
回路１０４からのクロック信号Ｓckに基づいて計時動作
が行われており、上記カウンタの初期値設定が行われた
時点からの経過時間に応じたカウンタ値を示すカウンタ
出力Ｃoutが出力される。Here, in the initial value setting process, RTS
The initial value of the time stamp indicated by the time stamp information Its1 from the P exchange unit 101, or the RTP receiving unit 107.
The first R corresponding to the first clip received at a.
Based on the value indicated by the time stamp information Its of the TP packet, the initial value information Iiv of the counter is output to the counter 104, and the initial value of the counter 104 is set to the value indicated by the information Iiv. The counter 105a performs a time counting operation based on the clock signal Sck from the clock circuit 104, and outputs a counter output Cout indicating a counter value according to the elapsed time from the time when the initial value of the counter is set. Is output.

【００７６】そして、上記ＡＶ同期制御部１０３ａで
は、上記カウンタ値が、受信された各ＲＴＰパケットの
タイムスタンプの値に対応する値となったとき、各ＲＴ
Ｐパケットに対して表示指示信号Ｓdisが表示部１０９
に出力される。Then, in the AV synchronization control unit 103a, when the counter value becomes a value corresponding to the time stamp value of each received RTP packet, each RT
The display instruction signal Sdis for the P packet is displayed on the display unit 109.
Is output to.

【００７７】例えば、第１のクリップに対応する、受信
された最初のRTPパケットのタイムスタンプ値が35000で
あるとする。また、ネットワークなどの伝送路を介して
データを受信する受信端末１００ａでは、一般に1秒〜5
秒分程度のデータを受信バッファに蓄えてから、表示が
開始される。ここで、このバッファリング時間を3秒と
仮定すると、RTP受信部１０７ａより最初のRTPパケット
のタイムスタンプの値を通知されたＡＶ同期制御部１０
３ａは、 35000から3000を引いた値である32000をカウ
ンタにカウンタ初期値としてセットする。AV同期制御部
１０３ａはカウンタを監視し、カウンタ出力の値が3500
0以上になった時、表示を開始するように表示部１０９
に表示指示信号Ｓdisを出力する。For example, assume that the time stamp value of the first received RTP packet corresponding to the first clip is 35000. In addition, in the receiving terminal 100a that receives data via a transmission line such as a network, it is generally 1 second to 5 seconds.
Data is stored for about a second in the receive buffer and then the display starts. Assuming that the buffering time is 3 seconds, the AV synchronization control unit 10 notified of the time stamp value of the first RTP packet from the RTP receiving unit 107a.
3a sets 32000, which is a value obtained by subtracting 3000 from 35000, to the counter as the counter initial value. The AV synchronization control unit 103a monitors the counter, and the value of the counter output is 3500.
When the number becomes 0 or more, the display unit 109 starts displaying.
The display instruction signal Sdis is output to.

【００７８】すると、表示部１０９からは、上記表示指
示信号Ｓdisに基づいて、各フレームに対する復号化処
理の開始を指示する復号指示信号Ｓdecが復号部１０８
に出力される。復号部１０８では、復号指示信号Ｓdec
に基づいて、受信バッファ１０６に格納されているＲＴ
Ｐパケットのうちの、上記表示指示信号Ｓdisにより要
求された時刻以降で最もその要求時刻に近いタイムスタ
ンプの値を持つＲＴＰパケットが検索され、検索された
ＲＴＰパケットに含まれるフレームデータを取り出して
復号化する処理が行われる。該復号部１０８にて復号化
されたデータＤｄは表示部１０９に出力され、表示部１
０９では、該データＤｄに基づいて画像表示が行われ
る。Then, from the display unit 109, the decoding instruction signal Sdec for instructing the start of the decoding process for each frame is issued based on the display instruction signal Sdis.
Is output to. In the decoding unit 108, the decoding instruction signal Sdec
RT stored in the receive buffer 106 based on
Of the P packets, the RTP packet having the time stamp value closest to the requested time after the time requested by the display instruction signal Sdis is searched, and the frame data included in the searched RTP packet is extracted and decoded. Processing is performed. The data Dd decrypted by the decryption unit 108 is output to the display unit 109, and the display unit 1
At 09, image display is performed based on the data Dd.

【００７９】なお、ＲＴＳＰ交換部１０１では、上記の
ようなデータの再生処理と並行して、上記第１のクリッ
プに対応するＲＴＳＰ応答Ｍｒが受信された後、第２及
び第３のクリップに対応するＲＴＳＰ応答が受信され、
上記第１のクリップに対応するＲＴＳＰ応答を受信した
場合と同様の処理が行われる。The RTSP exchanging unit 101 receives the RTSP response Mr corresponding to the first clip in parallel with the above-described data reproduction processing, and then responds to the second and third clips. RTSP response is received,
The same processing as when the RTSP response corresponding to the first clip is received is performed.

【００８０】また、ＲＴＰ受信部１０７ａでは、上記第
１のクリップに対応する最後のＲＴＰパケットが受信さ
れた後、第２のクリップに対する先頭のＲＴＰパケット
が受信され、該先頭のＲＴＰパケットのタイムスタンプ
情報ＩtsがＡＶ同期制御部１０３ａに通知されると、Ａ
Ｖ同期制御部１０３ａでは、先頭のＲＴＰパケットのタ
イムスタンプの値が、直前に受信された、第１のクリッ
プに対応する最後のＲＴＰパケットのタイムスタンプの
値に対して不連続であることが検知される。すると、Ａ
Ｖ同期制御部１０３ａでは、第２のクリップに対する先
頭のＲＴＰパケットのタイムスタンプ情報に対して、そ
の値を、第１のクリップに対応する最後のＲＴＰパケッ
トのタイムスタンプの値に対して連続な値となるよう書
き換えるタイムスタンプ書換え処理が施される。そし
て、第２のクリップに対する先頭のＲＴＰパケットに対
応する、タイムスタンプ書換え処理が施されたタイムス
タンプ情報ＩtsrがＲＴＰ受信部１０７ａに送り返され
る。The RTP receiving section 107a receives the last RTP packet corresponding to the first clip, and then receives the first RTP packet for the second clip. The time stamp of the first RTP packet is received. When the information Its is notified to the AV synchronization control unit 103a, A
The V synchronization control unit 103a detects that the time stamp value of the first RTP packet is discontinuous with the time stamp value of the last RTP packet corresponding to the first clip received immediately before. To be done. Then A
The V synchronization control unit 103a sets the value of the time stamp information of the first RTP packet for the second clip to a value continuous with the value of the time stamp of the last RTP packet corresponding to the first clip. A time stamp rewriting process is performed to rewrite the time stamp. Then, the time stamp information Ittsr, which has been subjected to the time stamp rewriting process, corresponding to the leading RTP packet for the second clip is sent back to the RTP receiving unit 107a.

【００８１】ＲＴＰ受信部１０７ａでは、第２のクリッ
プに対する先頭のＲＴＰパケットは、そのタイムスタン
プの値が、第１のクリップに対応する最後のＲＴＰパケ
ットのタイムスタンプの値に対して連続な値に置き換え
られて受信バッファ１０６に出力される。第２のクリッ
プに対応する、先頭のＲＴＰパケットに続くＲＴＰパケ
ットに対しては、そのタイムスタンプの値が、その直前
のＲＴＰパケットにタイムスタンプの値と連続した値と
なるよう書き換えられて、受信バッファ１０６に格納さ
れる。このようなＲＴＰパケットのタイムスタンプの値
を書き換える処理は、第３のクリップに対応するＲＴＰ
パケットに対しても、第２のクリップに対応するＲＴＰ
パケットと同様に行われる。In the RTP receiving unit 107a, the time stamp value of the first RTP packet for the second clip is a continuous value with respect to the time stamp value of the last RTP packet corresponding to the first clip. It is replaced and output to the reception buffer 106. For the RTP packet that follows the first RTP packet corresponding to the second clip, the time stamp value is rewritten so that it is a value that is continuous with the time stamp value in the immediately preceding RTP packet and received. It is stored in the buffer 106. Such a process of rewriting the time stamp value of the RTP packet is performed by the RTP corresponding to the third clip.
Also for packets, RTP corresponding to the second clip
It is done like a packet.

【００８２】以下、ＡＶ同期制御部１０３ａにおける、
上記タイムスタンプの値を書き換える処理を具体的に説
明する。第〔Ｎ〕番目のクリップにおけるオーディオの
最後のRTPパケットに含まれるオーディオフレームの継
続時間（フレーム周期）を調べ、この値をD_A(N,L)とす
る。このRTPパケットに対する、受信端末１００ａでＡ
Ｖ同期制御に使用されているタイムスタンプの値をT_A
(N,L)とする。Hereinafter, in the AV synchronization control section 103a,
The process of rewriting the time stamp value will be specifically described. The duration (frame period) of the audio frame included in the last RTP packet of the audio in the [N] th clip is checked, and this value is set to D_A (N, L). A for the RTP packet at the receiving terminal 100a
The time stamp value used for V sync control is T_A
(N, L).

【００８３】また、第〔Ｎ＋１〕番目のクリップにおけ
るオーディオに関するRTP-Infoフィールド情報から得ら
れるタイムスタンプの初期値をO_A(N+1)とし、ビデオの
それをO_V(N+1)とする。また、第〔Ｎ＋１〕番目のクリ
ップにおける、オーディオの第ｐ番目のRTPパケットの
タイムスタンプを、R_A(N+1,p)とし、第〔Ｎ＋１〕番目
のクリップにおける、ビデオの第q番目のRTPパケットの
タイムスタンプをR_V(N+1, q)とする。さらに、受信端
末でAV同期制御に用いる、これらのパケットのタイムス
タンプの値を、オーディオ、ビデオそれぞれについて、
T_A(N+1,p)、T_V(N+1,q)と定義する。ここで、N,p,qは
１以上の整数とする。The initial value of the time stamp obtained from the RTP-Info field information about the audio in the [N + 1] th clip is O_A (N + 1), and that of the video is O_V (N + 1). Also, the time stamp of the p-th RTP packet of audio in the [N + 1] -th clip is R_A (N + 1, p), and the q-th RTP of the video in the [N + 1] -th clip is set. Let the packet timestamp be R_V (N + 1, q). Furthermore, the time stamp values of these packets used for AV synchronization control at the receiving terminal are set for audio and video respectively.
It is defined as T_A (N + 1, p) and T_V (N + 1, q). Here, N, p, and q are integers of 1 or more.

【００８４】受信端末にてAV同期制御に用いる、オーデ
ィオに関するタイムスタンプの値T_A(N+1, p)は次のよ
うに求める。 T_A(N+1, p) = T_A(N,L) + D_A(N,L) + R_A(N+1,p) - O
_A(N+1) 例えば、図２(a)及び(b)を例に挙げる。ここで、N=1（第１のクリップ）、p=j（第２のクリップ
の第１番目のRTPパケット）とすると、図２(a)に示すよ
うに、 T_A(1,L) = 44900 D_A(1,L) = 300 R_A(2,j) = 85100 O_A(2) = 85100 であるから、第２のクリップにおける、第１番目のオー
ディオRTPパケットＡＰ(j)に対する、AV同期制御に用い
る値T_A(2,j)は、図２(b)に示すように、 T_A(2,j) = 44900 + 300 + 85100 - 85100 = 45200 と求められる。The value T_A (N + 1, p) of the audio time stamp used for the AV synchronization control in the receiving terminal is obtained as follows. T_A (N + 1, p) = T_A (N, L) + D_A (N, L) + R_A (N + 1, p)-O
_A (N + 1) For example, FIGS. 2A and 2B are taken as an example. Here, if N = 1 (first clip) and p = j (first RTP packet of second clip), as shown in FIG. 2A, T_A (1, L) = 44900 D_A (1, L) = 300 R_A (2, j) = 85100 O_A (2) = 85100, so it is used for AV synchronization control for the first audio RTP packet AP (j) in the second clip. The value T_A (2, j) is calculated as T_A (2, j) = 44900 + 300 + 85100-85100 = 45200 as shown in FIG. 2 (b).

【００８５】この数値は、結果的に第１のクリップにお
ける最後のオーディオRTPパケットと連続した値とな
る。つまり、クリップが切り替わり、受信されたRTPパ
ケットのタイムスタンプの値が、直前に受信されたRTP
パケットのタイムスタンプの値に対して不連続な値とな
る場合であっても、このタイムスタンプの書き換え処理
により、受信されたRTPパケットのタイムスタンプの値
は、直前に受信されたRTPパケットのタイムスタンプの
値に対して連続な値となるよう修正される。したがっ
て、AV同期制御に用いる受信端末でのタイムスタンプの
値は、クリップ間で連続した値に保たれる。As a result, this numerical value becomes a continuous value with the last audio RTP packet in the first clip. That is, the clip changes, and the value of the time stamp of the received RTP packet is the RTP received immediately before.
Even if the time stamp value of the packet is discontinuous, the time stamp value of the received RTP packet is the time stamp of the last received RTP packet due to this time stamp rewriting process. It is modified so that the stamp values are continuous. Therefore, the time stamp value at the receiving terminal used for AV synchronization control is maintained at a continuous value between clips.

【００８６】また、受信端末にてAV同期制御に用いる、
ビデオに関するタイムスタンプの値T_V(N+1,q)は次のよ
うに求められる。 T_V(N+1,q) = T_A(N,L) + D_A(N,L) + R_V(N+1,q) + O_
V(N+1) - O_A(N+1) 上記オーディオに関するタイムスタンプの修正処理と同
様に、図２(a)及び(b)を例に挙げる。Also, used for AV synchronization control at the receiving terminal,
The time stamp value T_V (N + 1, q) for the video is obtained as follows. T_V (N + 1, q) = T_A (N, L) + D_A (N, L) + R_V (N + 1, q) + O_
V (N + 1) -O_A (N + 1) FIGS. 2A and 2B are taken as an example in the same manner as the time stamp correction process for the audio.

【００８７】ここで、N=1（第１のクリップ）、q=n（第
２のクリップの第１番目のRTPパケット）とすると、図
２(a)に示すように、 T_A(1,L) = 44900 D_A(1,L) = 300 R_V(2,n) = 85200 O_A(2) = 85100 O_V(2) = 85200 であるから、第２のクリップにおける、第１番目のビデ
オRTPパケットＶＰ(n)に対するAV同期制御に用いる値T_
V(2,n)は、図２(b)に示すように、 T_V(2,n) = 44900 + 300 + 85200 + 85200 - 85100 = 4
5300 と求められる。Here, assuming N = 1 (first clip) and q = n (first RTP packet of second clip), as shown in FIG. 2 (a), T_A (1, L ) = 44900 D_A (1, L) = 300 R_V (2, n) = 85200 O_A (2) = 85100 O_V (2) = 85200, so the first video RTP packet VP (in the second clip is value T_ used for AV synchronization control for n)
V (2, n) is T_V (2, n) = 44900 + 300 + 85200 + 85200-85100 = 4 as shown in Fig. 2 (b).
It is requested to be 5300.

【００８８】この数値はT_A(2,j)と同じ時間軸上にあ
り、AV共通のクロックでAV同期制御が可能となる。な
お、第〔Ｎ〕番目のクリップにおけるオーディオの最後
のRTPパケットに含まれるオーディオフレームの継続時
間D_A(N,L)は、第〔Ｎ〕番目のクリップにおける最後の
RTPパケットのペイロードヘッダ部、あるいはペイロー
ドデータ（言い換えるとオーディオデータ自体）を解析
することによって求めることができる。This value is on the same time axis as T_A (2, j), and the AV synchronization control can be performed with the AV common clock. Note that the duration D_A (N, L) of the audio frame included in the last RTP packet of audio in the [N] th clip is the last time in the [N] th clip.
It can be obtained by analyzing the payload header part of the RTP packet or the payload data (in other words, the audio data itself).

【００８９】ペイロードヘッダから求める方法として
は、AMR Narrow Band（draft-ietf-avt-rtp-amr-08.tx
t）に示されるものがあり、ペイロードデータから求め
る方法としては、MPEG-4 AAC/LATM（RC3016）に示され
るものがある。As a method for obtaining from the payload header, AMR Narrow Band (draft-ietf-avt-rtp-amr-08.tx
t), and as a method of obtaining from payload data, there is a method shown in MPEG-4 AAC / LATM (RC3016).

【００９０】このように本実施の形態１のデータ再生装
置１００ａでは、第２のクリップに対する先頭のＲＴＰ
パケットのタイムスタンプの値を、第１のクリップに対
応する最後のＲＴＰパケットのタイムスタンプの値に対
して連続な値となるよう書き換えるタイムスタンプ書換
え処理を行うので、連続して受信された第１及び第２の
クリップ間で、ＲＴＰパケットのタイムスタンプの値が
不連続な値となっていても、画像や音声を途切れなく再
生することができる。As described above, in the data reproducing apparatus 100a according to the first embodiment, the head RTP for the second clip is set.
Since the time stamp rewriting processing is performed in which the time stamp value of the packet is rewritten so as to be a continuous value with respect to the time stamp value of the last RTP packet corresponding to the first clip, the first received consecutively Also, even if the time stamp value of the RTP packet is discontinuous between the second clip and the second clip, the image and sound can be reproduced without interruption.

【００９１】（実施の形態２）図３は本発明の実施の形
態２によるデータ再生装置を説明するためのブロック図
である。図中、図１と同一符号は実施の形態１における
ものと同一のものを示す。この実施の形態２のデータ再
生装置１００ｂは、サーバ１０に対して、図８に示すシ
ーン記述ＳＤにより指定される３つのクリップに対応す
るオーディオビデオデータを要求し、サーバ１０からＲ
ＴＰパケットに格納して送信された第１〜第３のクリッ
プのオーディオビデオデータを受信して再生する場合、
第１のクリップと第２のクリップの間、及び第２のクリ
ップと第３のクリップの間で、オーディオビデオデータ
の再生が途切れないよう、クロックカウンタ値を修正す
るものである。(Second Embodiment) FIG. 3 is a block diagram for explaining a data reproducing apparatus according to a second embodiment of the present invention. In the figure, the same reference numerals as those in FIG. 1 denote the same parts as those in the first embodiment. The data reproducing apparatus 100b according to the second embodiment requests the server 10 for audio / video data corresponding to three clips specified by the scene description SD shown in FIG.
When receiving and reproducing the audio video data of the first to third clips stored in the TP packet and transmitted,
The clock counter value is corrected so that the reproduction of the audio video data is not interrupted between the first clip and the second clip and between the second clip and the third clip.

【００９２】この実施の形態２のデータ再生装置１００
ｂは、実施の形態１のデータ再生装置１００ａにおける
ＡＶ同期制御部１０３ａ，カウンタ１０５ａ，及びＲＴ
Ｐ受信部１０７ａに代えて、それぞれ機能が異なるＡＶ
同期制御部１０３ｂ，カウンタ１０５ｂ，及びＲＴＰ受
信部１０７ｂを備えたものである。その他の構成は、実
施の形態１のデータ再生装置１００ａと同一である。The data reproducing apparatus 100 according to the second embodiment
b is an AV synchronization control unit 103a, a counter 105a, and an RT in the data reproducing apparatus 100a according to the first embodiment.
Instead of the P reception unit 107a, AVs having different functions
The synchronization controller 103b, the counter 105b, and the RTP receiver 107b are provided. Other configurations are the same as those of the data reproducing apparatus 100a of the first embodiment.

【００９３】つまり、上記ＡＶ同期制御部１０３ｂは、
受信されたＲＴＰパケットに付与されているタイムスタ
ンプの値（再生処理タイミング）が、その直前の再生処
理タイミングに対して、フレーム周期より離れた不連続
な値（タイミング）となっている場合、上記ＲＴＰパケ
ットに格納されているデータの再生が、その直前のＲＴ
Ｐパケットに格納されているデータの再生タイミングか
らフレーム周期に相当する時間が経過したときに行われ
るよう、上記カウンタ１０５ｂの初期値を設定するもの
である。従って、この実施の形態２では、カウンタ１０
５ｂは、タイムスタンプの値が不連続であるＲＴＰパケ
ットを受信する度に、その初期設定値が更新される点が
上記実施の形態１のカウンタ１０５ａと異なっている。That is, the AV synchronization control section 103b is
When the value of the time stamp (reproduction processing timing) given to the received RTP packet is a discontinuous value (timing) separated from the frame period with respect to the immediately preceding reproduction processing timing, The data stored in the RTP packet is reproduced immediately before the RT.
The initial value of the counter 105b is set so as to be performed when the time corresponding to the frame period has elapsed from the reproduction timing of the data stored in the P packet. Therefore, in the second embodiment, the counter 10
5b is different from the counter 105a of the first embodiment in that the initial setting value is updated every time an RTP packet having a discontinuous time stamp value is received.

【００９４】また、上記ＲＴＰ受信部１０７ｂは、受信
したＲＴＰパケットを、そのタイムスタンプを書き換え
ずに受信バッファ１０６に出力する点が、上記実施の形
態１のＲＴＰ受信部１０７ａと異なっている。Further, the RTP receiving section 107b is different from the RTP receiving section 107a of the first embodiment in that the received RTP packet is output to the receiving buffer 106 without rewriting the time stamp.

【００９５】次に動作について説明する。この実施の形
態２のデータ再生装置（受信端末）１００ｂの動作は、
上記カウンタ１０５ｂの初期値の設定動作、及びＲＴＰ
受信部１０７ｂの動作が、実施の形態１のデータ再生装
置（受信端末）１００ａの動作と異なるが、ＲＴＰ受信
部１０７ｂの動作は、受信したＲＴＰパケットをそのま
ま受信バッファ１０６に出力するというものであるの
で、以下では、ＡＶ同期制御部１０３ｂにより上記カウ
ンタ１０５ｂの初期値を設定する処理についてのみ説明
する。Next, the operation will be described. The operation of the data reproducing apparatus (receiving terminal) 100b according to the second embodiment is
Setting operation of the initial value of the counter 105b, and RTP
The operation of the receiving unit 107b is different from the operation of the data reproducing apparatus (receiving terminal) 100a of the first embodiment, but the operation of the RTP receiving unit 107b is to output the received RTP packet as it is to the receiving buffer 106. Therefore, only the process of setting the initial value of the counter 105b by the AV synchronization control unit 103b will be described below.

【００９６】なお、図４(a)は、サーバ１０に保持され
ているファイルにおける、第１及び第２のクリップの各
フレームに付与されているタイムスタンプを示してお
り、また、図４(b)は、受信端末にて受信された第１及
び第２のクリップに対応するＲＴＰパケットのタイムス
タンプを示している。図４(b)では、第１のクリップに
対応する、最後尾部分のＲＴＰパケットのタイムスタン
プ、及び第２のクリップに対応する、先頭部分のＲＴＰ
パケットのタイムスタンプが示されている。Note that FIG. 4A shows the time stamps added to the respective frames of the first and second clips in the file held in the server 10, and FIG. ) Indicates the time stamps of the RTP packets corresponding to the first and second clips received by the receiving terminal. In FIG. 4 (b), the time stamp of the RTP packet of the tail part corresponding to the first clip and the RTP of the head part corresponding to the second clip.
The time stamp of the packet is shown.

【００９７】例えば、受信端末１００ｂにて、第１のク
リップ（35〜45s）のPLAY要求Ｍｄに対する応答Ｍｒを
受信したとする。応答メッセージ中のRTP-Infoフィール
ドには、ビデオ、オーディオに関するタイムスタンプ初
期値が35000であることが示されている。For example, it is assumed that the receiving terminal 100b receives the response Mr to the PLAY request Md of the first clip (35 to 45s). The RTP-Info field in the response message indicates that the time stamp initial value for video and audio is 35000.

【００９８】ＡＶ同期制御部１０３ｂでは、第１のクリ
ップの先頭のＲＴＰパケットが受信されたとき、カウン
タ出力Ｃoutが示すカウンタ値を「０」に初期化する処
理が行われ、また、カウンタ内部に保持される、クリッ
プ毎に変化する変数Ｃに、第１のクリップの先頭ＲＴＰ
パケットのタイムスタンプが示す値「35000」からプリ
バッファ時間「3000」を引いた値「32000」をセットす
る処理が行われる。そして、ＡＶ同期制御部１０３ｂで
はAV同期制御の際には、上記カウンタ１０５ｂの出力が
示すカウンタ値に上記変数Ｃを加えたカウンタ補正値
が、用いられる。When the head RTP packet of the first clip is received, the AV synchronization control unit 103b performs a process of initializing the counter value indicated by the counter output Cout to "0", and also the inside of the counter. The variable C that is held and changes for each clip is set to the start RTP of the first clip.
A process of setting a value "32000" obtained by subtracting the pre-buffer time "3000" from the value "35000" indicated by the time stamp of the packet is performed. Then, in the AV synchronization control unit 103b, the counter correction value obtained by adding the variable C to the counter value indicated by the output of the counter 105b is used in the AV synchronization control.

【００９９】例えば、上記カウンタ１０５ｂの出力が示
すカウンタ値が「3000」である時、上記カウンタ補正値
は、「35000 （= C + 3000）」となり、このタイミング
で、最初のオーディオのRTPパケットに格納されている
データの生成処理、つまり復号処理及び表示処理が行わ
れる。For example, when the counter value indicated by the output of the counter 105b is "3000", the counter correction value becomes "35000 (= C + 3000)", and at this timing, the first audio RTP packet is added. Generation processing of stored data, that is, decoding processing and display processing is performed.

【０１００】その後、受信端末１００ｂにて、第２のク
リップ（85〜100s）に対するPLAY要求が発行され、その
応答メッセージが受信されると、ＡＶ同期制御部１０３
ｂには、ＲＴＳＰ交換部１０１から、タイムスタンプ初
期値情報Ｉts1により、RTP-Infoフィールドに指定され
ているタイムスタンプ初期値として、オーディオＲＴＰ
パケットＡＰ(j)に対するタイムスタンプ初期値が「851
00」、ビデオＲＴＰパケットＶＰ(n)に対するタイムス
タンプ初期値が「85200」であることが通知される。After that, when the receiving terminal 100b issues a PLAY request for the second clip (85 to 100s) and receives the response message, the AV synchronization control section 103
In b, the audio RTP is set as the time stamp initial value specified in the RTP-Info field by the time stamp initial value information Its1 from the RTSP exchange unit 101.
The time stamp initial value for the packet AP (j) is "851".
00 ”, and it is notified that the time stamp initial value for the video RTP packet VP (n) is“ 85200 ”.

【０１０１】すると、ＡＶ同期制御部１０３ｂでは、こ
の値以上のタイムスタンプ値を持つRTPパケットが、Ｒ
ＴＰ受信部１０７ｂからのタイムスタンプ情報Ｉtsによ
り、オーディオ、ビデオ別個に監視される。Then, in the AV synchronization control unit 103b, the RTP packet having a time stamp value equal to or larger than this value is R
Audio and video are separately monitored by the time stamp information Its from the TP receiving unit 107b.

【０１０２】例えば、タイムスタンプ値が「85100」で
あるオーディオRTPパケットが受信されると、受信バッ
ファ１０６に格納されているＲＴＰパケットのうちで、
上記受信されたＲＴＰパケットのタイムスタンプ値が最
も小さいタイムスタンプ値となった時、言い換えると、
第１のクリップに対応するRTPパケットが全て受信バッ
ファから読み出され、その復号処理及び表示処理が完了
した時、ＡＶ同期制御部１０３ｂでは、上記変数Ｃの値
が更新される。このとき更新された変数Ｃ'の値は71900
となる。なお、変数Ｃの更新のタイミングはこれには限
定されない。For example, when an audio RTP packet whose time stamp value is “85100” is received, among the RTP packets stored in the reception buffer 106,
When the time stamp value of the received RTP packet becomes the smallest time stamp value, in other words,
When all the RTP packets corresponding to the first clip are read from the reception buffer and the decoding process and the display process are completed, the value of the variable C is updated in the AV synchronization control unit 103b. The value of variable C'updated at this time is 71900
Becomes The timing of updating the variable C is not limited to this.

【０１０３】簡単に説明すると、第１のクリップの最後
のオーディオRTPパケットＡＰ(i)のタイムスタンプ値
は、図４(b)に示すように「44900」である。また、この
パケットの継続時間は「300（= 44900-44600）」であ
る。従って、オーディオRTPパケットＡＰ(i)の次のパケ
ットのタイムスタンプが示す値（再生時刻）は、「4520
0（= 44900 + 300）」なるべきであるが、第２のクリッ
プの最初のRTPパケットＡＰ(j)のタイムスタンプの値は
「85100」である。Briefly, the time stamp value of the last audio RTP packet AP (i) of the first clip is "44900" as shown in FIG. 4 (b). The duration of this packet is "300 (= 44900-44600)". Therefore, the value (playback time) indicated by the time stamp of the packet next to the audio RTP packet AP (i) is "4520".
0 (= 44900 + 300) ”, but the value of the time stamp of the first RTP packet AP (j) of the second clip is“ 85100 ”.

【０１０４】そこで、上記変数「32000」Ｃは、下記の
式に従って更新されて、変数「71900」Ｃ’となる。Ｃ’＝Ｃ + (85100 - 45200) = 71900 このように変数の更新を行うことにより、カウンタ出力
が示すカウンタ値が「13200」、つまりオーディオＲＴ
ＰパケットＡＰ(i)の次のＲＴＰパケットＡＰ(i+1)の再
生時刻を示す値となったとき、上記カウンタ補正値が、
上記更新された変数Ｃ’とカウンタ出力が示す値「1320
0」とを加えた値「85100（=Ｃ’＋13200）」となるた
め、第２のクリップの最初のオーディオRTPパケットＡ
Ｐ(j)に対する再生処理（復号処理及び表示処理）が、
第１のクリップの最後のオーディオRTPパケットＡＰ(i)
に対する再生処理の後、フレーム周期に相当する期間が
経過したとき行われる。つまり、第２のクリップの最初
のオーディオRTPパケットＡＰ(j)に対する再生処理が、
第１のクリップの最後のオーディオRTPパケットＡＰ(i)
に対する再生処理に対して連続して行われる。Therefore, the variable "32000" C is updated according to the following formula to become the variable "71900" C '. C '= C + (85100-45200) = 71900 By updating the variables in this way, the counter value indicated by the counter output is "13200", that is, the audio RT.
When the value indicates the reproduction time of the RTP packet AP (i + 1) next to the P packet AP (i), the counter correction value becomes
The value "1320" indicated by the updated variable C'and the counter output
The value becomes "85100 (= C '+ 13200)" with "0" added, so the first audio RTP packet A of the second clip is
The playback process (decoding process and display process) for P (j) is
Last audio RTP packet AP (i) of the first clip
After the reproduction process for, the process is performed when a period corresponding to the frame period has elapsed. That is, the reproduction process for the first audio RTP packet AP (j) of the second clip is
Last audio RTP packet AP (i) of the first clip
Is continuously performed for the reproduction process.

【０１０５】このように実施の形態２のデータ再生装置
では、受信されたＲＴＰパケットに付与されているタイ
ムスタンプの値（再生処理タイミング）が、その直前の
再生処理タイミングに対して、フレーム周期より離れた
不連続な値（タイミング）となっている場合、上記ＲＴ
Ｐパケットに格納されているデータの再生が、その直前
のＲＴＰパケットに格納されているデータの再生タイミ
ングからフレーム周期に相当する時間が経過したときに
行われるよう、上記カウンタ１０５ｂの初期値を設定す
るようにしたので、連続して受信された第１及び第２の
クリップ間で、ＲＴＰパケットのタイムスタンプの値が
不連続な値となっていても、ＲＴＰパケットに付与され
ているタイムスタンプの修正なしに、画像や音声を途切
れなく再生することができる。As described above, in the data reproducing apparatus according to the second embodiment, the time stamp value (reproduction processing timing) given to the received RTP packet is more than the frame period with respect to the reproduction processing timing immediately before that. If the discontinuous values (timing) are far apart, the above RT
The initial value of the counter 105b is set so that the reproduction of the data stored in the P packet is performed when the time corresponding to the frame period has elapsed from the reproduction timing of the data stored in the RTP packet immediately before it. Therefore, even if the time stamp value of the RTP packet is a discontinuous value between the continuously received first and second clips, the time stamp of the RTP packet is Images and sounds can be played seamlessly without modification.

【０１０６】なお、上記実施の形態１では、受信端末に
て、第２のクリップに対する先頭のＲＴＰパケットのタ
イムスタンプの値を、第１のクリップに対応する最後の
ＲＴＰパケットのタイムスタンプの値に対して連続な値
となるよう書き換えるタイムスタンプ書換え処理を行う
ものを示したが、このようなタイムスタンプ書換え処理
は、サーバ側にてRTPパケットのヘッダ生成時に行うよ
うにしてもよく、以下、サーバ側にて上記タイムスタン
プの書き換え処理を行う場合について説明する。In the first embodiment, the receiving terminal sets the time stamp value of the first RTP packet for the second clip to the time stamp value of the last RTP packet corresponding to the first clip. In contrast, the time stamp rewriting process of rewriting so that it becomes a continuous value is shown, but such a time stamp rewriting process may be performed at the server side when the header of the RTP packet is generated. A case where the above-mentioned time stamp rewriting process is performed on the side will be described.

【０１０７】（実施の形態３）図５は本発明の実施の形
態３によるデータ送信装置を説明するためのブロック図
である。図中、図１と同一符号は実施の形態１における
ものと同一のものを示す。この実施の形態３のサーバ１
０ｃは、受信側から発行された、図８に示すシーン記述
ＳＤにより指定される３つのクリップに対応するオーデ
ィオビデオデータの要求を受け、この要求に応じて、第
１〜第３のクリップに対応するオーディオビデオデータ
をＲＴＰパケットに格納して送信する場合、第１のクリ
ップと第２のクリップの間、及び第２のクリップと第３
のクリップの間で、受信端末でのオーディオビデオデー
タの再生が途切れないよう、送信するＲＴＰパケットの
タイムスタンプの値を修正するものである。(Third Embodiment) FIG. 5 is a block diagram for explaining a data transmitting apparatus according to a third embodiment of the present invention. In the figure, the same reference numerals as those in FIG. 1 denote the same parts as those in the first embodiment. Server 1 of the third embodiment
0c receives a request for audio / video data corresponding to the three clips specified by the scene description SD shown in FIG. 8 issued from the receiving side, and responds to the first to third clips in response to this request. When storing the audio / video data to be transmitted in the RTP packet and transmitting the same, between the first clip and the second clip, and between the second clip and the third clip.
The value of the time stamp of the RTP packet to be transmitted is corrected so that the reproduction of the audio video data at the receiving terminal is not interrupted between the clips.

【０１０８】この実施の形態３のサーバ１０ｃは、上記
実施の形態１のサーバ１０におけるＲＴＰパケット生成
部１４に代えて、受信端末でのオーディオビデオデータ
の再生が途切れないよう、送信するＲＴＰパケットのタ
イムスタンプの値を修正するＲＴＰパケット生成部１４
ｃを備えたものである。その他の構成は、図１に示すサ
ーバ１０と同一である。The server 10c of the third embodiment replaces the RTP packet generation unit 14 of the server 10 of the first embodiment with the transmission of the RTP packet so that the reproduction of the audio video data at the receiving terminal is not interrupted. RTP packet generator 14 for correcting the value of the time stamp
with c. Other configurations are the same as those of the server 10 shown in FIG.

【０１０９】また、このサーバ１０ｃから送信されたデ
ータを受信して再生する受信端末１００におけるカウン
タ１０５は、実施の形態１のカウンタ１０５ａと同一の
ものであり、受信端末１００におけるＲＴＰ送信部１０
７は、実施の形態２のＲＴＰ受信部１０７と同一のもの
であり、さらに、この受信端末１００におけるＡＶ同期
制御部１０３は、受信されたＲＴＰパケットのタイムス
タンプの書き換え処理を行わない点のみ上記実施の形態
１のＡＶ同期制御部１０３ａと異なるものである。上記
受信端末１００におけるその他の構成は、実施の形態１
の受信端末１００ａと同一である。Further, the counter 105 in the receiving terminal 100 which receives and reproduces the data transmitted from the server 10c is the same as the counter 105a in the first embodiment, and the RTP transmitting section 10 in the receiving terminal 100 is the same.
7 is the same as the RTP receiving unit 107 of the second embodiment, and further, the AV synchronization control unit 103 in the receiving terminal 100 does not rewrite the time stamp of the received RTP packet. This is different from the AV synchronization control unit 103a of the first embodiment. Other configurations of the receiving terminal 100 are the same as those of the first embodiment.
Is the same as the receiving terminal 100a.

【０１１０】次に動作について説明する。この実施の形
態３のデータ送信装置（サーバ）１０ｃの動作は、送信
するＲＴＰパケットのタイムスタンプの書き換え処理を
行う点のみ、実施の形態１で説明したサーバ１０の動作
と異なるので、以下では、ＲＴＰパケット生成部１４ｃ
によるタイムスタンプの書き換え処理についてのみ説明
する。Next, the operation will be described. The operation of the data transmitting apparatus (server) 10c according to the third embodiment is different from the operation of the server 10 described in the first embodiment only in that the time stamp of the RTP packet to be transmitted is rewritten. RTP packet generator 14c
Only the rewriting process of the time stamp will be described.

【０１１１】第〔Ｎ〕番目のクリップにおけるオーディ
オの最後の送信RTPパケットに含まれるオーディオフレ
ームの継続時間（フレーム周期）を調べ、この値をD_A
(N,L)とする。上記第〔Ｎ〕番目のクリップにおける最
後の送信RTPパケットに付与されるタイムスタンプの値
をS_A(N,L)とする。The duration (frame period) of the audio frame included in the last transmitted RTP packet of the audio in the [N] th clip is checked, and this value is set to D_A.
(N, L). The value of the time stamp given to the last transmission RTP packet in the [N] th clip is S_A (N, L).

【０１１２】また、第〔Ｎ＋１〕番目のクリップにおけ
るオーディオに関するRTP-Infoフィールドに書き込まれ
るタイムスタンプの初期値をO_A(N+1)とし、ビデオのそ
れをO_V(N+1)とする。また、第〔Ｎ＋１〕番目のクリッ
プにおける、オーディオの第ｐ番目のフレームのタイム
スタンプを、F_A(N+1,p)とし、第〔Ｎ＋１〕番目のクリ
ップにおける、ビデオの第q番目のフレームのタイムス
タンプをF_V(N+1, q)とする。さらに、送信される、上
記フレームのタイムスタンプF_A(N+1,p)、F_V(N+1, q)
に対応するＲＴＰパケットのタイムスタンプの値を、そ
れぞれS_A(N+1,p)、S_V(N+1,q)と定義する。ここで、N,
p,qは１以上の整数とする。Also, the initial value of the time stamp written in the RTP-Info field for audio in the [N + 1] th clip is O_A (N + 1), and that of video is O_V (N + 1). In addition, the time stamp of the p-th frame of audio in the [N + 1] -th clip is F_A (N + 1, p), and the q-th frame of the video in the [N + 1] -th clip is Let the time stamp be F_V (N + 1, q). Furthermore, the time stamps F_A (N + 1, p) and F_V (N + 1, q) of the above frame to be transmitted.
The time stamp values of the RTP packet corresponding to are defined as S_A (N + 1, p) and S_V (N + 1, q), respectively. Where N,
p and q are integers of 1 or more.

【０１１３】送信されるオーディオＲＴＰパケットに関
するタイムスタンプの値S_A(N+1, p)は次のように求め
る。 S_A(N+1, p) = S_A(N,L) + D_A(N,L) + F_A(N+1,p) - O
_A(N+1) 例えば、図６(a)及び(b)を例に挙げる。ここで、N=1
（第１のクリップ）、p=j（第２のクリップの第１番目
のオーディオRTPパケット）とすると、図６(a)に示すよ
うに、 S_A(1,L) = 44900 D_A(1,L) = 300 F_A(2,j) = 85100 O_A(2) = 85100 であるから、第２のクリップにおける、第１番目のオー
ディオRTPパケットＡＰ(j)に対して付与されるタイムス
タンプの値S_A(2,j)は、図６(b)に示すように、 S_A(2,j) = 44900 + 300 + 85100 - 85100 = 45200 と求められる。The time stamp value S_A (N + 1, p) regarding the transmitted audio RTP packet is obtained as follows. S_A (N + 1, p) = S_A (N, L) + D_A (N, L) + F_A (N + 1, p)-O
_A (N + 1) For example, FIGS. 6A and 6B are taken as an example. Where N = 1
Assuming that (first clip) and p = j (first audio RTP packet of second clip), S_A (1, L) = 44900 D_A (1, L as shown in Fig. 6 (a). ) = 300 F_A (2, j) = 85100 O_A (2) = 85100, the time stamp value S_A (added to the first audio RTP packet AP (j) in the second clip. 2, j) is calculated as S_A (2, j) = 44900 + 300 + 85100-85100 = 45200 as shown in Fig. 6 (b).

【０１１４】この数値は、結果的に第１のクリップにお
ける最後のオーディオRTPパケットＡＰ(i)と連続した値
となる。つまり、クリップが切り替わり、送信されるRT
Pパケットのタイムスタンプの値が、直前に送信されるR
TPパケットのタイムスタンプの値に対して不連続な値と
なる場合であっても、このタイムスタンプの書き換え処
理により、送信されるRTPパケットのタイムスタンプの
値は、これより先に送信されるRTPパケットのタイムス
タンプの値に対して連続な値となるよう修正される。し
たがって、サーバから送信されるＲＴＰパケットのタイ
ムスタンプの値は、クリップ間で連続した値に保たれ
る。As a result, this numerical value becomes a continuous value with the last audio RTP packet AP (i) in the first clip. In other words, RTs that clips are switched and sent
The value of the time stamp of the P packet is the R sent immediately before.
Even if the time stamp value of the TP packet becomes discontinuous, the time stamp value of the RTP packet sent by this time stamp rewriting process is the same as that of the RTP packet sent earlier than this. It is modified to be a continuous value with respect to the value of the time stamp of the packet. Therefore, the time stamp value of the RTP packet transmitted from the server is kept at a continuous value between clips.

【０１１５】また、サーバにて、送信されるビデオＲＴ
Ｐパケットに付与されるタイムスタンプの値S_V(N+1,q)
は次のように求められる。 S_V(N+1,q) = S_A(N,L) + D_A(N,L) + F_V(N+1,q) + O_
V(N+1) - O_A(N+1) 上記オーディオに関するタイムスタンプの修正処理と同
様に、図６(a)及び(b)を例に挙げる。Also, the video RT transmitted by the server
Time stamp value S_V (N + 1, q) added to P packet
Is calculated as follows. S_V (N + 1, q) = S_A (N, L) + D_A (N, L) + F_V (N + 1, q) + O_
V (N + 1) -O_A (N + 1) FIGS. 6A and 6B are taken as an example in the same manner as the time stamp correction process for audio.

【０１１６】ここで、N=1（第１のクリップ）、q=n（第
２のクリップの第１番目のビデオRTPパケット）とする
と、図６(a)に示すように、 S_A(1,L) = 44900 D_A(1,L) = 300 F_V(2,n) = 85200 O_A(2) = 85100 O_V(2) = 85200 であるから、第２のクリップにおける、第１番目のビデ
オRTPパケットＶＰ(n)に付与されるタイムスタンプの値
S_V(2,n)は、図６(b)に示すように、 S_V(2,n) = 44900 + 300 + 85200 + 85200 - 85100 = 4
5300 と求められる。Here, assuming that N = 1 (first clip) and q = n (first video RTP packet of second clip), S_A (1, L) = 44900 D_A (1, L) = 300 F_V (2, n) = 85200 O_A (2) = 85100 O_V (2) = 85200, so the first video RTP packet VP in the second clip Timestamp value given to (n)
S_V (2, n) is S_V (2, n) = 44900 + 300 + 85200 + 85200-85100 = 4 as shown in Fig. 6 (b).
It is requested to be 5300.

【０１１７】この数値はS_A(2,j)と同じ時間軸上にあ
り、AV共通のクロックで、ＲＴＰパケットの生成処理が
可能となる。なお、第〔Ｎ〕番目のクリップにおけるオ
ーディオの最後のRTPパケットに対するオーディオフレ
ームの継続時間D_A(N,L)は、第〔Ｎ〕番目のクリップに
おける最後のフレームのタイムスタンプと、直前のフレ
ームのタイムスタンプとから求めることができる。This numerical value is on the same time axis as S_A (2, j), and the RTP packet generation process can be performed with the AV common clock. The audio frame duration D_A (N, L) for the last audio RTP packet in the [N] th clip is the time stamp of the last frame in the [N] th clip and the immediately preceding frame. It can be calculated from the time stamp.

【０１１８】このように本実施の形態３のデータ送信装
置（サーバ）１０ｃでは、第２のクリップに対する先頭
のＲＴＰパケットのタイムスタンプの値を、第１のクリ
ップに対応する最後のＲＴＰパケットのタイムスタンプ
の値に対して連続な値となるよう書き換えるタイムスタ
ンプ書換え処理を行うので、連続して送信される第１及
び第２のクリップ間で、フレームに付与されているタイ
ムスタンプの値が不連続な値となっていても、受信側で
は、画像や音声を途切れなく再生することができる。As described above, in the data transmitting apparatus (server) 10c of the third embodiment, the time stamp value of the first RTP packet for the second clip is set to the time of the last RTP packet corresponding to the first clip. Since the time stamp rewriting process is performed to rewrite the stamp value so that it becomes a continuous value, the time stamp value given to the frame is discontinuous between the first and second clips that are continuously transmitted. Even if the value is "0", the image and sound can be played back seamlessly on the receiving side.

【０１１９】なお、上記実施の形態１及び２では、サー
バに対して要求したデータを受信しつつ再生するデータ
再生装置として、インターネットなどのネットワークを
介してサーバに接続可能な受信端末を示したが、この受
信端末の具体的なものとしては、ＰＣ（パーソナルコン
ピュータ）や携帯電話などが挙げられる。In the above-mentioned first and second embodiments, the receiving terminal connectable to the server via the network such as the Internet is shown as the data reproducing apparatus for reproducing the data requested to the server. Specific examples of the receiving terminal include a PC (personal computer) and a mobile phone.

【０１２０】（実施の形態４）以下、本発明の実施の形
態４として、上記実施の形態１のデータ再生装置と同様
に、サーバに対して要求したデータを受信しつつ再生す
る携帯電話について説明する。図７は、この実施の形態
４の携帯電話を説明するための図である。(Embodiment 4) Hereinafter, as Embodiment 4 of the present invention, a mobile telephone which reproduces data requested from a server in the same manner as the data reproducing apparatus of Embodiment 1 will be described. To do. FIG. 7 is a diagram for explaining the mobile phone according to the fourth embodiment.

【０１２１】この実施の形態４の携帯電話３００は、種
々の信号処理を行う信号処理部３０２と、アンテナ３０
１で受信された無線信号Ｎを受信信号として信号処理部
３０２に出力するとともに、信号処理部３０２にて生成
された送信信号を無線信号Ｎとしてアンテナ３０１から
送信する無線通信部３０３とを有している。The mobile phone 300 according to the fourth embodiment includes a signal processing section 302 for performing various signal processing and an antenna 30.
The wireless communication unit 303 outputs the wireless signal N received in 1 as a received signal to the signal processing unit 302, and transmits the transmission signal generated by the signal processing unit 302 as the wireless signal N from the antenna 301. ing.

【０１２２】また、上記携帯電話３００は、画像表示を
行う液晶パネル（ＬＣＤ）３０６と、音声の入力を行う
ためのマイク３０８と、音声信号を再生するスピーカ３
０７と、上記信号処理部３０２にて処理された画像信号
を受け、上記液晶表示部（ＬＣＤ）３０６を、画像信号
に基づいて画像表示が行われるよう制御する表示制御部
３０４と、マイク３０８からの入力音声信号を信号処理
部３０２に出力するとともに、信号処理部３０２にて処
理された音声信号をスピーカ３０７に出力する音声入出
力部３０５とを有している。なお、ここでは説明の簡略
化のため、携帯電話のボタン操作部は図示していない。The mobile phone 300 has a liquid crystal panel (LCD) 306 for displaying an image, a microphone 308 for inputting voice, and a speaker 3 for reproducing a voice signal.
07, a display control unit 304 that receives the image signal processed by the signal processing unit 302, controls the liquid crystal display unit (LCD) 306 so that image display is performed based on the image signal, and a microphone 308. And an audio input / output unit 305 that outputs the audio signal processed by the signal processing unit 302 to the speaker 307. Note that the button operation unit of the mobile phone is not shown here for simplification of description.

【０１２３】ここで、上記信号処理部３０２は、上記実
施の形態１のデータ再生装置１００ａと同一のデータ再
生処理を行うものである。つまり、上記信号処理部３０
２は、実施の形態１の受信端末側における、ＲＴＳＰ交
換部１０１、ＳＭＩＬ解析部１０２、ＡＶ同期制御部１
０３ａ、クロック回路１０４、カウンタ１０５ａ、受信
バッファ１０６、ＲＴＰ受信部１０７ａ、及び復号部１
０８に相当する部分を有している。また、この実施の形
態４の携帯電話３００における表示制御部３０４及び液
晶パネル（ＬＣＤ）３０６は、上記実施の形態１の表示
部１０９に相当するものである。Here, the signal processing section 302 carries out the same data reproduction processing as that of the data reproduction apparatus 100a of the first embodiment. That is, the signal processing unit 30
2 is an RTSP exchange unit 101, a SMIL analysis unit 102, and an AV synchronization control unit 1 on the receiving terminal side of the first embodiment.
03a, clock circuit 104, counter 105a, reception buffer 106, RTP reception unit 107a, and decoding unit 1
It has a portion corresponding to 08. Further, the display control unit 304 and the liquid crystal panel (LCD) 306 in the mobile phone 300 according to the fourth embodiment correspond to the display unit 109 according to the first embodiment.

【０１２４】このような構成を有する携帯電話３００で
は、ユーザにより、特定のファイル（ニュース番組）の
ダイジェスト再生を行うための操作が行われると、該携
帯電話３００からネットワーク上のサーバに対して、ユ
ーザが指定した複数のクリップの要求が発行され、サー
バからはこれらのクリップのデータが順次送信される。
そして、該携帯電話３００では、上記実施の形態１のデ
ータ再生装置１００ａと同様にして、各クリップの再生
処理が途切れることなく行われる。In the mobile phone 300 having such a configuration, when the user performs an operation for reproducing a digest of a specific file (news program), the mobile phone 300 sends a message to a server on the network. A request for a plurality of clips designated by the user is issued, and the data of these clips is sequentially transmitted from the server.
Then, in the mobile phone 300, the reproduction process of each clip is performed without interruption in the same manner as the data reproduction device 100a of the first embodiment.

【０１２５】なお、上記実施の形態４では、携帯電話と
して、上記実施の形態１のデータ再生装置と同一のデー
タ再生処理を行うものを示したが、この携帯電話は、上
記実施の形態２のデータ再生装置１００ｂと同一のデー
タ再生処理を行うものであってもよい。In the fourth embodiment, the mobile phone which performs the same data reproducing process as the data reproducing device of the first embodiment has been shown. However, this mobile phone is the same as that of the second embodiment. The same data reproduction process as that of the data reproduction device 100b may be performed.

【０１２６】[0126]

【発明の効果】以上のように本発明（請求項１）に係る
データ再生装置によれば、少なくとも画像情報または音
声情報のいずれか一方を含むデータを要求し、該要求に
応じて送信されたデータを受信しつつ再生するデータ再
生装置であって、上記データを受信するデータ受信部
と、上記データに対して一定のデータ単位毎に付与され
ている、再生処理タイミングを指定する時刻情報に基づ
いて、上記データの再生処理を制御する制御信号を出力
する再生制御部と、上記データ受信部により受信された
データに対する再生処理を、上記制御信号に基づいて行
うデータ再生部とを備え、上記再生制御部は、上記デー
タ受信部が受信したデータに付与されている時刻情報が
示す再生処理タイミングが、その直前のデータの再生終
了タイミングに対して不連続であるとき、上記データに
付与されている時刻情報を、該時刻情報が示す再生処理
タイミングが上記再生終了タイミングと連続したタイミ
ングとなるよう、修正するものであることを特徴とする
ので、受信されたデータにタイムスタンプの不連続部分
が含まれていても、画像や音声を途切れなく再生するこ
とができる。As described above, according to the data reproducing apparatus of the present invention (Claim 1), the data requesting at least one of the image information and the audio information is transmitted, and the data is transmitted in response to the request. A data reproducing device for reproducing while receiving data, comprising: a data receiving unit for receiving the data; and time information assigned to the data for each fixed data unit, which specifies a reproduction processing timing. And a data reproduction unit that performs a reproduction process on the data received by the data reception unit based on the control signal, and a reproduction control unit that outputs a control signal that controls the reproduction process of the data. The control unit determines that the reproduction processing timing indicated by the time information added to the data received by the data receiving unit is relative to the reproduction end timing of the data immediately before that. When it is discontinuous, the time information given to the data is corrected so that the reproduction processing timing indicated by the time information becomes a timing continuous with the reproduction end timing. Even if the received data includes the discontinuous portion of the time stamp, the image and the sound can be reproduced without interruption.

【０１２７】本発明（請求項２）によれば、請求項１記
載のデータ再生装置において、上記データ受信部は、上
記受信したデータに付与されている時刻情報が示す再生
処理タイミングが、その直前のデータの再生終了タイミ
ングに対して不連続であるとき、上記受信したデータ
を、該データに付与されている時刻情報を、上記再生制
御部にて修正された時刻情報と置き換えて出力するもの
であることを特徴とするので、上記と同様、受信された
データにタイムスタンプの不連続部分が含まれていて
も、画像や音声を途切れなく再生することができる。According to the present invention (Claim 2), in the data reproducing apparatus according to Claim 1, the data receiving unit has a reproduction processing timing immediately before the reproduction processing timing indicated by the time information added to the received data. When the reproduction end timing of the data is discontinuous, the received data is output by replacing the time information added to the data with the time information corrected by the reproduction control unit. Therefore, even if the received data includes the discontinuous portion of the time stamp, the image and the sound can be reproduced without interruption, as in the above case.

【０１２８】本発明（請求項３）によれば、請求項１記
載のデータ再生装置において、上記データ受信部は、１
つのコンテンツに対応するデータに対する要求が、その
再生時間範囲を指定して選択的に行われたとき、上記１
つのコンテンツに対応するデータの、指定した再生時間
範囲に対応する複数の部分を、それぞれクリップデータ
として受信し、先のクリップデータに続いて受信したク
リップデータに付与されている、不連続な再生タイミン
グを示す時刻情報を、上記再生制御部にて修正された時
刻情報と置き換えて出力するものであることを特徴とす
るので、クリップ間でRTPパケットの表示時刻が連続と
なり、途切れのない再生が可能となる。According to the present invention (Claim 3), in the data reproducing apparatus according to Claim 1, the data receiving unit is
When the request for the data corresponding to one content is selectively made by designating the reproduction time range, the above 1
Discrete playback timings that are received as clip data for multiple parts of the data that correspond to one content and that correspond to the specified playback time range, and that are added to the clip data that is received after the previous clip data. Since the time information indicating is replaced with the time information corrected by the playback control unit and output, the display time of the RTP packet becomes continuous between clips, enabling uninterrupted playback. Becomes

【０１２９】本発明（請求項４）に係るデータ再生装置
によれば、少なくとも画像情報または音声情報のいずれ
か一方を含むデータを要求し、該要求に応じて送信され
たデータを受信しつつ再生するデータ再生装置であっ
て、上記データを受信するデータ受信部と、上記データ
に対して一定のデータ単位毎に付与されている、再生処
理タイミングを指定する時刻情報に基づいて、上記デー
タの再生処理を制御する制御信号を出力する再生制御部
と、上記データ受信部により受信されたデータに対する
再生処理を、上記制御信号に基づいて行うデータ再生部
とを備え、上記再生制御部は、上記受信されたデータに
対する再生処理の基準となる内部時刻を発生する時刻発
生部を有し、該受信されたデータに付与されている時刻
情報が示す再生処理タイミングが、その直前のデータの
再生終了タイミングに対して不連続であるとき、上記内
部時刻を、上記受信されたデータの再生処理タイミング
が、その直前のデータの再生終了タイミングに対して連
続したタイミングとなるよう、修正するものであること
を特徴とするので、受信されたデータにタイムスタンプ
の不連続部分が含まれていても、受信側では、受信され
たデータに対して処理を施すことなく、画像や音声を途
切れなく再生することができる。According to the data reproducing apparatus of the present invention (Claim 4), a request is made for data containing at least one of image information and audio information, and the data transmitted in response to the request is reproduced. A data reproducing apparatus for receiving the data, and reproducing the data on the basis of time information for specifying the reproduction processing timing, which is given to the data in units of a certain data unit. A reproduction control unit that outputs a control signal for controlling the processing; and a data reproduction unit that performs a reproduction process on the data received by the data reception unit based on the control signal, wherein the reproduction control unit is the reception unit. Reproduction processing indicated by the time information added to the received data, which has a time generation unit that generates an internal time that is a reference for the reproduction processing of the received data. When the imming is discontinuous with respect to the reproduction end timing of the immediately preceding data, the internal time is set to a timing at which the reproduction processing timing of the received data is continuous with the reproduction end timing of the immediately preceding data. Therefore, even if the received data contains a discontinuity in the time stamp, the receiving side does not have to process the received data. , Images and sounds can be played back seamlessly.

【０１３０】本発明（請求項５）によれば、請求項４記
載のデータ再生装置において、上記データ受信部は、１
つのコンテンツに対応するデータに対する要求が、その
再生時間範囲を指定して選択的に行われたとき、上記１
つのコンテンツに対応するデータの、指定した再生時間
範囲に対応する複数の部分を、それぞれクリップデータ
として受信して上記データ再生部に出力するものであ
り、上記再生制御部は、先のクリップデータに続いて受
信した、不連続な再生タイミングを示す時刻情報が付与
されているクリップデータの再生処理タイミングが、そ
の直前のクリップデータの再生終了タイミングに対して
連続したタイミングとなるよう、上記内部時刻を修正す
るものであることを特徴とするので、連続して受信され
るクリップ間で、タイムスタンプの値が不連続な値とな
っていても、受信側では、受信されたデータに対して処
理を施すことなく、クリップ間でRTPパケットの表示時
刻が連続となり、途切れのない再生が可能となる。According to the present invention (Claim 5), in the data reproducing apparatus according to Claim 4, the data receiving unit is
When the request for the data corresponding to one content is selectively made by designating the reproduction time range, the above 1
A plurality of parts of data corresponding to one content corresponding to a specified reproduction time range are respectively received as clip data and output to the data reproduction section. The internal time is set so that the reproduction processing timing of the clip data to which the time information indicating the discontinuous reproduction timing is subsequently received is continuous with the reproduction end timing of the immediately preceding clip data. Since it is a modification, even if the time stamp values are discontinuous between consecutively received clips, the receiving side can process the received data. Without performing, the display time of the RTP packet becomes continuous between clips, and it is possible to play back without interruption.

【０１３１】本発明（請求項６）に係るデータ送信装置
によれば、少なくとも画像情報または音声情報のいずれ
か一方を含むデータを送信するデータ送信装置であっ
て、上記データを記憶しているデータ記憶部と、上記デ
ータ記憶部に記憶されているデータを読み出すデータ読
出し部と、上記データ読出し部により読み出されたデー
タを送信するデータ送信部とを備え、上記データ送信部
は、上記データに一定のデータ単位毎に付与されている
時刻情報が示す再生処理タイミングが、その直前の再生
処理タイミングに対応するデータの再生終了タイミング
に対して不連続であるとき、上記データに付与されてい
る時刻情報を、該時刻情報が示す再生処理タイミング
が、上記再生終了タイミングに連続したタイミングとな
るよう修正して、上記データを送信するものであること
を特徴とするので、１つのファイルにおけるタイムスタ
ンプが不連続な部分のデータを、受信側にて途切れなく
再生されるよう送信することができる。According to the data transmitting apparatus of the present invention (Claim 6), the data transmitting apparatus transmits data including at least one of image information and audio information, and the data storing the data. A storage unit, a data reading unit that reads data stored in the data storage unit, and a data transmission unit that transmits the data read by the data reading unit, and the data transmission unit is configured to convert the data to the data. When the reproduction processing timing indicated by the time information given for each fixed data unit is discontinuous with respect to the reproduction end timing of the data corresponding to the immediately preceding reproduction processing timing, the time given to the above data The information is corrected so that the reproduction processing timing indicated by the time information is a timing continuous with the reproduction end timing, Since, characterized in that for transmitting over data, time stamp data in discontinuous portion in a single file, without interruption at the receiving side can be transmitted to be reproduced.

【０１３２】本発明（請求項７）によれば、請求項６記
載のデータ送信装置において、上記データ送信部は、上
記データ読出し部により読み出されたデータをパケット
に格納するとともに、該データにフレーム毎に付与され
ている、再生処理タイミングを示すフレーム時刻情報に
応じて、上記パケットにパケット時刻情報を付与して、
パケットデータを生成するパケット生成部と、該パケッ
トデータを送信するパケット送信部とを有するものであ
り、上記パケット生成部は、該パケット生成部における
データに付与されているフレーム時刻情報が示す再生処
理タイミングが、その直前のデータの再生終了タイミン
グに対して不連続であるとき、該データを格納したパケ
ットに対して付与する、該フレーム時刻情報に対応する
パケット時刻情報を、該パケット時刻情報が示す再生処
理タイミングが、上記再生終了タイミングと連続したタ
イミングとなるよう修正するものであることを特徴とす
るので、連続して送信されるクリップ間で、フレームに
付与されたタイムスタンプの値が不連続な値となってい
ても、受信側では、連続して受信されるクリップ間で、
途切れなく再生することができる。According to the present invention (Claim 7), in the data transmitting apparatus according to Claim 6, the data transmitting unit stores the data read by the data reading unit in a packet and stores the data in the packet. Packet time information is added to the packet according to the frame time information indicating the reproduction processing timing, which is added for each frame,
A packet generation unit that generates packet data and a packet transmission unit that transmits the packet data. The packet generation unit is a reproduction process indicated by frame time information added to the data in the packet generation unit. When the timing is discontinuous with respect to the reproduction end timing of the immediately preceding data, the packet time information indicates packet time information corresponding to the frame time information, which is given to the packet storing the data. Since the reproduction processing timing is corrected so as to be continuous with the reproduction end timing, the time stamp value given to the frame is discontinuous between clips that are continuously transmitted. Even if it is a value of
It can be played back without interruption.

【０１３３】本発明（請求項８）に係るデータ再生方法
によれば、少なくとも画像情報または音声情報のいずれ
か一方を含むデータを要求し、該要求に応じて送信され
たデータを受信しつつ再生するデータ再生方法であっ
て、上記データを受信するデータ受信ステップと、上記
データに対して一定のデータ単位毎に付与されている、
再生処理タイミングを指定する時刻情報に基づいて、上
記データ受信ステップにより受信されたデータに対する
再生処理を行うデータ再生ステップとを含み、上記デー
タ再生ステップは、上記データ受信ステップにて受信さ
れたデータに付与されている時刻情報が示す再生処理タ
イミングが、その直前のデータの再生終了タイミングに
対して不連続であるとき、上記データに付与されている
時刻情報を、該時刻情報が示す再生処理タイミングが、
上記再生終了タイミングと連続したタイミングとなるよ
う修正するものであることを特徴とするので、受信され
たデータにタイムスタンプの不連続部分が含まれていて
も、画像や音声を途切れなく再生することができる効果
がある。According to the data reproducing method of the present invention (claim 8), data containing at least one of image information and audio information is requested, and the data transmitted in response to the request is reproduced. And a data receiving step of receiving the data, wherein the data is added to the data in fixed data units.
A data reproducing step of performing a reproducing process on the data received by the data receiving step on the basis of time information designating a reproducing process timing, wherein the data reproducing step is performed on the data received in the data receiving step. When the reproduction processing timing indicated by the attached time information is discontinuous with respect to the reproduction end timing of the immediately preceding data, the reproduction processing timing indicated by the time information indicates the time information attached to the data. ,
Since it is corrected so that the timing is continuous with the above reproduction end timing, even if the received data includes a discontinuous portion of the time stamp, the image and sound can be reproduced without interruption There is an effect that can be.

【０１３４】本発明（請求項９）に係るデータ再生方法
によれば、少なくとも画像情報または音声情報のいずれ
か一方を含むデータを要求し、該要求に応じて送信され
たデータを受信しつつ再生するデータ再生方法であっ
て、上記データを受信するデータ受信ステップと、上記
データに対して一定のデータ単位毎に付与されている、
再生処理タイミングを指定する時刻情報に基づいて、上
記データ受信ステップにより受信されたデータに対する
再生処理を行うデータ再生ステップとを含み、上記デー
タ再生ステップは、該受信されたデータに付与されてい
る時刻情報が示す再生処理タイミングが、その直前のデ
ータの再生終了タイミングに対して不連続であるとき、
上記受信されたデータに対する再生処理の基準となる時
刻として発生される内部時刻を、上記受信されたデータ
の再生処理タイミングが、その直前のデータの再生終了
タイミングに対して連続したタイミングとなるよう、修
正するものであることを特徴とするので、受信されたデ
ータにタイムスタンプの不連続部分が含まれていても、
受信側では、受信されたデータに対して処理を施すこと
なく、画像や音声を途切れなく再生することができる効
果がある。According to the data reproducing method of the present invention (Claim 9), data containing at least one of image information and audio information is requested, and the data transmitted in response to the request is reproduced. And a data receiving step of receiving the data, wherein the data is added to the data in fixed data units.
A data reproducing step of performing a reproducing process on the data received by the data receiving step on the basis of time information designating a reproducing process timing, wherein the data reproducing step is the time given to the received data. When the reproduction processing timing indicated by the information is discontinuous with respect to the reproduction end timing of the immediately preceding data,
The internal time generated as the time that is the reference of the reproduction processing for the received data is such that the reproduction processing timing of the received data is continuous with the reproduction end timing of the immediately preceding data, Since it is a modification, even if the received data contains a discontinuity in the time stamp,
On the receiving side, there is an effect that images and sounds can be reproduced without interruption without performing processing on the received data.

【０１３５】本発明（請求項１０）に係るデータ送信方
法によれば、少なくとも画像情報または音声情報のいず
れか一方を含むデータを送信するデータ送信方法であっ
て、データ記憶部に記憶されているデータを読み出すデ
ータ読出しステップと、上記データ読出しステップによ
り読み出されたデータを送信するデータ送信ステップと
を含み、上記データ送信ステップは、上記データに一定
のデータ単位毎に付与されている時刻情報が示す再生処
理タイミングが、その直前の再生処理タイミングに対応
するデータの再生終了タイミングに対して不連続である
とき、上記データに付与されている時刻情報を、該時刻
情報が示す再生処理タイミングが、上記再生終了タイミ
ングに連続したタイミングとなるよう修正して、上記デ
ータを送信するものであることを特徴とするので、連続
して送信されるクリップ間で、フレームに付与されたタ
イムスタンプの値が不連続な値となっていても、受信側
では、連続して受信されるクリップ間で、途切れなく再
生することができる効果がある。According to the data transmission method of the present invention (Claim 10), the data transmission method transmits data including at least one of image information and audio information, which is stored in the data storage section. The method includes a data reading step of reading data and a data transmitting step of transmitting the data read by the data reading step, wherein the data transmitting step includes the time information given to the data in fixed data units. When the reproduction processing timing shown is discontinuous with respect to the reproduction end timing of the data corresponding to the reproduction processing timing immediately before that, the reproduction processing timing indicated by the time information indicates the time information given to the data. Modify the timing so that it is continuous with the playback end timing and send the above data. Therefore, even if the time stamp values given to the frames are discontinuous between the clips that are continuously transmitted, the clips that are continuously received on the receiving side are There is an effect that it can be played back without interruption.

[Brief description of drawings]

【図１】本発明の実施の形態１によるデータ再生装置を
説明するためのブロック図である。FIG. 1 is a block diagram for explaining a data reproducing device according to a first embodiment of the present invention.

【図２】上記実施の形態１のデータ再生装置におけるタ
イムスタンプの書き換え処理を説明するための図であ
る。FIG. 2 is a diagram for explaining a time stamp rewriting process in the data reproducing apparatus according to the first embodiment.

【図３】本発明の実施の形態２よるデータ再生装置を説
明するためのブロック図である。FIG. 3 is a block diagram for explaining a data reproducing device according to a second embodiment of the present invention.

【図４】上記実施の形態２のデータ再生装置におけるカ
ウンタ値の修正による同期制御を説明するための図であ
る。FIG. 4 is a diagram for explaining synchronization control by modifying a counter value in the data reproducing apparatus according to the second embodiment.

【図５】本発明の実施の形態３よるデータ送信装置を説
明するためのブロック図である。FIG. 5 is a block diagram for explaining a data transmission device according to a third embodiment of the present invention.

【図６】上記実施の形態３のデータ送信装置におけるタ
イムスタンプの書き換え処理を説明するための図であ
る。FIG. 6 is a diagram for explaining a time stamp rewriting process in the data transmitting apparatus according to the third embodiment.

【図７】本発明の実施の形態４によるデータ再生装置と
しての携帯電話を説明するための図である。FIG. 7 is a diagram for explaining a mobile phone as a data reproducing device according to a fourth embodiment of the present invention.

【図８】従来のダイジェスト再生に用いられるシーン記
述を説明するための図である。FIG. 8 is a diagram for describing a scene description used for conventional digest reproduction.

【図９】従来の受信端末にてダイジェスト再生を行う際
の、サーバと受信端末との間での通信手順を説明するた
めの図である。FIG. 9 is a diagram for explaining a communication procedure between a server and a receiving terminal when a conventional receiving terminal performs digest reproduction.

【図１０】従来のダイジェスト再生における問題点を説
明するための図である。FIG. 10 is a diagram for explaining problems in conventional digest reproduction.

[Explanation of symbols]

１０，１０ｃサーバ（データ送信装置）１１，１１ｃ，１０１ＲＴＳＰ交換部１２ＲＴＰ送信部１３ファイル読出し部１４，１４ｃＲＴＰパケット生成部１５データ記憶装置１００，１００ａ，１００ｂ受信端末（データ再生装
置）１０２ＳＭＩＬ解析部１０３ａ，１０３ｂＡＶ同期制御部１０４クロック回路１０５ａ，１０５ｂカウンタ１０６受信バッファ１０７ａ，１０７ｂＲＴＰ受信部１０８復号部１０９表示部３００携帯電話３０１アンテナ３０２信号処理部３０３無線通信部３０４表示制御部３０５音声入力出力部３０６液晶パネル（ＬＣＤ）３０７スピーカ３０８マイク10, 10c server (data transmission device) 11, 11c, 101 RTSP exchange unit 12 RTP transmission unit 13 file reading unit 14, 14c RTP packet generation unit 15 data storage device 100, 100a, 100b reception terminal (data reproduction device) 102 SMIL Analysis unit 103a, 103b AV synchronization control unit 104 Clock circuit 105a, 105b Counter 106 Reception buffer 107a, 107b RTP reception unit 108 Decoding unit 109 Display unit 300 Mobile phone 301 Antenna 302 Signal processing unit 303 Wireless communication unit 304 Display control unit 305 Voice Input / output unit 306 Liquid crystal panel (LCD) 307 Speaker 308 Microphone

───────────────────────────────────────────────────── フロントページの続きＦターム(参考） 5C053 FA23 FA30 GA11 GB21 JA07 JA22 LA15 5C064 BA01 BC18 BC20 BD03 BD08 5K028 EE03 EE07 KK32 SS05 SS15 ─────────────────────────────────────────────────── ─── Continued front page F-term (reference) 5C053 FA23 FA30 GA11 GB21 JA07 JA22 LA15 5C064 BA01 BC18 BC20 BD03 BD08 5K028 EE03 EE07 KK32 SS05 SS15

Claims

[Claims]

1. A data reproducing apparatus for requesting data containing at least one of image information and audio information, and reproducing the data transmitted in response to the request, wherein the data is received. A reception unit, a reproduction control unit that outputs a control signal for controlling the reproduction process of the data, based on time information that specifies the reproduction process timing, which is given to the data in units of certain data, And a data reproducing unit that performs a reproducing process on the data received by the data receiving unit based on the control signal, wherein the reproduction controlling unit is configured to detect the time information given to the data received by the data receiving unit. When the reproduction processing timing shown is discontinuous with respect to the reproduction end timing of the immediately preceding data, the time information given to the data is changed to Data reproducing apparatus reproducing process timing the time information indicates is characterized in that the to be the timing continuous with the reproduction end timing is corrected.

2. The data reproducing apparatus according to claim 1, wherein the data receiving unit sets the reproduction processing timing indicated by the time information added to the received data with respect to the reproduction ending timing of the immediately preceding data. When the data is discontinuous, the received data is output by replacing the time information added to the data with the time information corrected by the reproduction control unit and outputting the data. .

3. The data reproducing apparatus according to claim 1, wherein when the request for the data corresponding to one content is selectively made by designating a reproduction time range, the data receiving unit is provided with the above-mentioned one. Multiple parts of the data corresponding to one content corresponding to the specified playback time range,
The time information indicating the discontinuous playback timing, which is added to the clip data received after the previous clip data and received after the previous clip data, is replaced with the time information corrected by the playback control unit and output. A data reproducing apparatus characterized in that

4. A data reproducing apparatus for requesting data including at least one of image information and audio information, and reproducing while receiving the data transmitted in response to the request, wherein the data is received. A reception unit, a reproduction control unit that outputs a control signal for controlling the reproduction process of the data, based on time information that specifies the reproduction process timing, which is given to the data in units of certain data, And a data reproducing unit that performs a reproducing process on the data received by the data receiving unit based on the control signal, and the reproducing control unit generates an internal time which is a reference of the reproducing process on the received data. And the reproduction processing timing indicated by the time information added to the received data is set to the reproduction end timing of the immediately preceding data. When it is discontinuous with respect to the playback, the internal time is corrected so that the playback processing timing of the received data is continuous with the playback end timing of the immediately preceding data. A data reproducing device characterized by.

5. The data reproducing apparatus according to claim 4, wherein when the request for the data corresponding to one content is selectively made by designating a reproduction time range, the data receiving unit is provided with the above-mentioned one. Multiple parts of the data corresponding to one content corresponding to the specified playback time range,
Each of the clip data is received as clip data and output to the data reproduction section. The reproduction control section receives the clip data to which the time information indicating the discontinuous reproduction timing is added following the previous clip data. 2. The data reproducing apparatus is characterized in that the internal time is corrected so that the reproduction processing timing of is continuous with the reproduction end timing of the immediately preceding clip data.

6. A data transmission device for transmitting data including at least one of image information and audio information, the data storage unit storing the data, and the data stored in the data storage unit. And a data transmitting unit for transmitting the data read by the data reading unit. The data transmitting unit indicates the time information given to the data in fixed data units. When the reproduction processing timing is discontinuous with respect to the reproduction end timing of the data corresponding to the reproduction processing timing immediately before that, the reproduction processing timing indicated by the time information indicates the time information added to the data. The above-mentioned data is transmitted by modifying the reproduction end timing so that the timing is continuous. Data transmission device.

7. The data transmitting apparatus according to claim 6, wherein the data transmitting unit stores the data read by the data reading unit in a packet and reproduces the data added to each frame for each frame. A packet generation unit that adds packet time information to the packet according to frame time information indicating processing timing to generate packet data; and a packet transmission unit that transmits the packet data. When the reproduction processing timing indicated by the frame time information added to the data in the packet generation unit is discontinuous with respect to the reproduction end timing of the immediately preceding data, the generation unit determines that the packet storing the data is The packet time information corresponding to the frame time information added by Be reproduced process timing, data transmission apparatus, characterized in that it is intended to correct such that a timing at which the continuous and the reproduction end timing.

8. A data reproducing method for requesting data including at least one of image information and audio information, and reproducing while receiving the data transmitted in response to the request, the data receiving the data. A receiving step, and a data reproducing step of performing a reproducing process on the data received by the data receiving step based on time information designating a reproducing process timing, which is given to the data for each fixed data unit. In the data reproduction step, when the reproduction processing timing indicated by the time information given to the data received in the data reception step is discontinuous with respect to the reproduction end timing of the data immediately before, When the reproduction processing timing indicated by the time information indicates the reproduction end timing A data reproducing method characterized in that the data is corrected so that the timing is continuous with the timing.

9. A data reproducing method for requesting data including at least one of image information and audio information, and reproducing while receiving the data transmitted in response to the request, the data receiving the data. A receiving step, and a data reproducing step of performing a reproducing process on the data received by the data receiving step based on time information designating a reproducing process timing, which is given to the data for each fixed data unit. The data reproduction step includes: when the reproduction processing timing indicated by the time information added to the received data is discontinuous with respect to the reproduction end timing of the immediately preceding data. The internal time that is generated as the reference time for the playback process for the The data reproducing method is characterized in that the ming is corrected so as to be continuous timing with respect to the reproduction ending timing of the immediately preceding data.

10. A data transmission method for transmitting data containing at least one of image information and audio information, comprising a data reading step of reading data stored in a data storage section, and a data reading step of reading the data. In the data transmission step, the reproduction processing timing indicated by the time information given to the data for each fixed data unit corresponds to the reproduction processing timing immediately before the data processing step. When it is discontinuous with respect to the reproduction end timing of the data, the time information given to the data is corrected so that the reproduction processing timing indicated by the time information is a timing continuous with the reproduction end timing. A data transmission method, characterized in that the above data is transmitted.