JPH10164141A - Multimedia multiplexing system - Google Patents

Multimedia multiplexing system

Info

Publication number
JPH10164141A
JPH10164141A JP9327524A JP32752497A JPH10164141A JP H10164141 A JPH10164141 A JP H10164141A JP 9327524 A JP9327524 A JP 9327524A JP 32752497 A JP32752497 A JP 32752497A JP H10164141 A JPH10164141 A JP H10164141A
Authority
JP
Japan
Prior art keywords
information
media
data
multimedia data
identification information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP9327524A
Other languages
Japanese (ja)
Other versions
JP3019826B2 (en
Inventor
Kazuhiro Matsuzaki
一博 松崎
Atsumichi Murakami
篤道 村上
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP32752497A priority Critical patent/JP3019826B2/en
Publication of JPH10164141A publication Critical patent/JPH10164141A/en
Application granted granted Critical
Publication of JP3019826B2 publication Critical patent/JP3019826B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To multiplex the multimedia data which use plural media as their information sources by adding the generated information source identification information to the divided multimedia data and then multiplexing these data. SOLUTION: A multiplexer 100 divides the media data 301 of different sources via an information field generation part 103 to generate the information field data. A synchronous information addition part 105 adds the system clock reference to the information field data. At the same time, a time stamp is prepared by using a clock signal generated at a clock generation part 104. The packet number, the media ID and the link information are added to the information field data of each information source at a packet number/media ID/link information addition part 106. Then these field data are outputted in the order of added packet numbers. Furthermore, the call identification information and the ground identification information are added to the information field data at a call/ ground identification information addition part 107. Then these field data are outputted from the multiplexer 100 as a series of packet strings 302.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】この発明は、各種メディアの
データを多重化して伝送または記録するマルチメディア
多重方式に関するものである。
[0001] 1. Field of the Invention [0002] The present invention relates to a multimedia multiplexing system for multiplexing and transmitting or recording data of various media.

【0002】[0002]

【従来の技術】図6は、例えば安田浩編著「マルチメデ
ィアの国際標準」(丸善株式会社、pp.230-232、1991年
6月発行)で述べられているマルチメディア多重化方式
の一実施例を示すものである。多重化は、基本的にはビ
デオの1フレーム相当の時間長の単位で行われ、この時
間長に対応する各メディアのデータ列(データストリー
ム)をここではパケットと呼ぶ。オーディオデータやビ
デオデータは、他のメディアデータに比べて単位時間当
りのデータ量が大きいため、符号化を行って冗長度を取
り除いた後のデータ列に対してパケット化を行う。符号
化データ列中には、ビデオの1フレーム相当の時間毎に
ユニークワードが挿入されており、それを目印にしてパ
ケット化が行われる。
2. Description of the Related Art FIG. 6 is, for example, "International Standards for Multimedia" edited by Hiroshi Yasuda (Maruzen Co., pp. 230-232, 1991
FIG. 1 shows an embodiment of the multimedia multiplexing system described in J. Appl. The multiplexing is basically performed in units of time length equivalent to one frame of video, and a data stream (data stream) of each medium corresponding to this time length is referred to as a packet here. Since audio data and video data have a larger data amount per unit time than other media data, packetization is performed on a data sequence after encoding and removing redundancy. In the encoded data sequence, a unique word is inserted every time corresponding to one frame of video, and packetization is performed using this as a mark.

【0003】各パケットは、図7に示すようにヘッダと
情報フィールドとから構成される。情報フィールドには
多重化すべきデータ列が収納される。ヘッダは以下のよ
うな情報から構成される。 ・スタートコード:メディア種別を示し、多重化分離
(デマルチプレックス)するための境界を検出するため
のコード。 ・システムクロックリファレンス:各メディアの同期を
とるための時刻情報(タイムスタンプ)。 ・データ長:情報フィールド長を与える情報。
Each packet is composed of a header and an information field as shown in FIG. The information field stores a data string to be multiplexed. The header is composed of the following information. Start code: A code for indicating a media type and detecting a boundary for demultiplexing. System clock reference: time information (time stamp) for synchronizing each medium. Data length: information giving the information field length.

【0004】一方、多重化分離(デマルチプレクス)に
おいては、上記多重化により生成した一連のパケット列
から個々のパケットを抽出し、各パケットのメディア種
別を行った後、各メディア間で信号の同期をとった上で
メディア別にデータ列が再生される。パケット列102
からのパケットの抽出は、ヘッダを検出することにより
行われる。メディア種別には、スタートコードを利用す
る。
[0004] On the other hand, in demultiplexing (demultiplexing), individual packets are extracted from a series of packet sequences generated by the above multiplexing, and the media type of each packet is determined. After synchronization, the data stream is reproduced for each medium. Packet sequence 102
Is extracted by detecting a header. A start code is used for the media type.

【0005】図8にメディア間の同期を確保するための
一実施例を示す。図8において、200は多重化分離器
(デマルチプレクサ)、205はビデオ復号器、206
はオーディオ復号器、207は同期情報比較器、208
は遅延メモリである。各メディアの同期をとるために、
各メディアデータを遅延メモリ208にそれぞれ一時的
に格納し、同期情報比較器207からのタイミングパル
ス304が各遅延メモリ208に入力されると、各遅延
メモリ208からメディアデータ301が一斉に読み出
されるようになっている。同期情報比較器207では、
各メディアのパケットのタイムスタンプ303を比較
し、最も遅いタイムスタンプを有するメディア信号に同
期するようなタイミングパルス304を発生させる。
FIG. 8 shows an embodiment for securing synchronization between media. 8, reference numeral 200 denotes a demultiplexer (demultiplexer); 205, a video decoder;
Is an audio decoder, 207 is a synchronization information comparator, 208
Is a delay memory. To synchronize each media,
Each media data is temporarily stored in the delay memory 208, and when the timing pulse 304 from the synchronization information comparator 207 is input to each delay memory 208, the media data 301 is read from each delay memory 208 at once. It has become. In the synchronization information comparator 207,
The time stamp 303 of each media packet is compared and a timing pulse 304 is generated that is synchronized with the media signal having the latest time stamp.

【0006】CD−ROMのような蓄積媒体に情報が記
録されている場合には、ユーザの使用目的に応じて高速
再生・逆転再生・一部のメディア情報のみを選択しての
再生(例えば、ビデオのみ、オーディオのみの再生)等
の特殊再生機能が要求される。これらの機能は、上記多
重化された一連のパケット列に対してランダムアクセス
を行うことにより実現される。ランダムアクセスでは、
ヘッダ内のデータ長情報を読みとり次のヘッダにジャン
プする動作の繰り返しによって、目的のパケットまでア
クセスする。
When information is recorded on a storage medium such as a CD-ROM, high-speed reproduction, reverse reproduction, and reproduction by selecting only a part of media information according to the purpose of use of the user (for example, Special playback functions such as video only and audio only) are required. These functions are realized by performing random access to the multiplexed series of packets. With random access,
The target packet is accessed by repeating the operation of reading the data length information in the header and jumping to the next header.

【0007】[0007]

【発明が解決しようとする課題】従来のマルチメディア
多重化方式は以上のように構成されているので、多重化
データの中から複数のメディアを同時に再生する場合、
ヘッダを検出してメディアの種別を判定するといった処
理を順次繰り返さなければならず、高速な処理が必要で
あった。また、ビデオの1フレームに相当する時間間隔
でパケット化がなされているため、多重化・送信・受信
・多重化分離という一連の通信処理を行う場合、多重化
するメディアの数が多くなると遅延が無視できなくなる
等の問題点があった。
Since the conventional multimedia multiplexing system is configured as described above, when simultaneously reproducing a plurality of media from multiplexed data,
Processing such as detecting the header and determining the type of the medium must be sequentially repeated, and high-speed processing is required. In addition, since packetization is performed at a time interval corresponding to one frame of video, when performing a series of communication processing such as multiplexing, transmission, reception, and multiplexing / demultiplexing, the delay increases as the number of media to be multiplexed increases. There was a problem that it could not be ignored.

【0008】この発明は上記のような問題点を解消する
ためになされたもので、複数の異種類メディアを情報源
とするマルチメディアデータを多重できるとともに、複
数の同一種類メディアを情報源とするマルチメディアデ
ータをも多重できるマルチメディア多重方式を得ること
を目的とする。
SUMMARY OF THE INVENTION The present invention has been made to solve the above-described problems. Multimedia data using a plurality of different types of media as information sources can be multiplexed, and a plurality of same type media can be used as information sources. It is an object of the present invention to obtain a multimedia multiplexing method capable of multiplexing multimedia data.

【0009】[0009]

【課題を解決するための手段】請求項1のマルチメディ
ア多重方式は、複数の異種類メディア及び複数の同一種
類メディアが情報源であるマルチメディアデータを多重
するマルチメディア多重方式であって、以下の手段を備
えたものである。 (a)前記各情報源のマルチメディアデータをそれぞれ
所定単位で分割する分割手段; (b)前記分割手段により分割されたマルチメディアデ
ータの前記情報源を示す情報源識別情報を生成し、この
生成した情報源識別情報を前記分割されたマルチメディ
アデータに付加し、この情報源識別情報が付加された前
記分割マルチメディアデータを多重する生成手段。
A multimedia multiplexing system according to the present invention is a multimedia multiplexing system for multiplexing multimedia data in which a plurality of different types of media and a plurality of the same types of media are information sources. Means. (A) dividing means for dividing the multimedia data of each information source into predetermined units; (b) generating information source identification information indicating the information source of the multimedia data divided by the dividing means; Generating means for adding the divided information source identification information to the divided multimedia data and multiplexing the divided multimedia data to which the information source identification information has been added.

【0010】また、請求項2のマルチメディア多重方式
は、複数の異種類メディア及び複数の同一種類メディア
が情報源であるマルチメディアデータを多重するマルチ
メディア多重方式であって、以下の手段を備えたもので
ある。 (a)前記各情報源のマルチメディアデータをそれぞれ
所定単位で分割する分割手段; (b)前記分割手段により分割されたマルチメディアデ
ータの前記情報源を示す情報源識別情報と、前記分割手
段により分割されたマルチメディアデータ間の対応関係
を示すリンク情報と、を生成し、この生成した情報源識
別情報を前記分割されたマルチメディアデータに付加
し、この情報源識別情報が付加された前記分割マルチメ
ディアデータと前記生成したリンク情報とを多重する生
成手段。
A multimedia multiplexing system according to a second aspect of the present invention is a multimedia multiplexing system for multiplexing multimedia data in which a plurality of different types of media and a plurality of the same types of media are information sources. It is a thing. (A) dividing means for dividing the multimedia data of each information source into predetermined units; (b) information source identification information indicating the information source of the multimedia data divided by the dividing means; Link information indicating the correspondence relationship between the divided multimedia data, and adding the generated information source identification information to the divided multimedia data, and adding the information source identification information to the divided multimedia data. Generating means for multiplexing the multimedia data with the generated link information;

【0011】[0011]

【発明の実施の形態】BEST MODE FOR CARRYING OUT THE INVENTION

実施の形態1.以下、この発明の一実施の形態を図1を
もとに説明する。図1はこの発明の一実施の形態におけ
る多重化方式であり、各メディアのデータを情報源別、
メディア別及びメディアの属性別に等長に分割し、各種
識別情報を付加して、多重化する。
Embodiment 1 FIG. Hereinafter, an embodiment of the present invention will be described with reference to FIG. FIG. 1 shows a multiplexing method according to an embodiment of the present invention.
It is divided into equal lengths for each medium and for each media attribute, and added with various kinds of identification information and multiplexed.

【0012】各パケットは、呼識別情報1(ビット長:
1 ビット)、対地識別情報2(ビット長:b2 ビッ
ト)、パケット番号3(ビット長:b3 ビット)、メデ
ィアID4(ビット長:b4 ビット)、リンク情報5
(ビット長:b5 ビット)、システムクロックリファレ
ンス6(ビット長:b6 ビット)から成るヘッダと情報
フィールド(ビット長:b7 ビット)とから構成され
る。これらのパケット構成要素は、それぞれ固定のビッ
ト長をもつ。
Each packet has call identification information 1 (bit length:
b 1 bit), ground identification information 2 (bit length: b 2 bits), packet number 3 (bit length: b 3 bits), media ID 4 (bit length: b 4 bits), link information 5
(Bit length: b 5 bits), the system clock reference 6 (bit length: b 6 bits) header and information field consisting of (bit length: b 7 bits) from the constructed. Each of these packet components has a fixed bit length.

【0013】呼識別情報1と対地識別情報2は、伝送路
を介してパケットの送受信を行う際に利用される。呼識
別情報1は送信側を識別するための情報で、発呼番号が
用いられる。対地識別情報2は受信側を識別するための
情報で、着信呼番号が用いられる。
The call identification information 1 and the ground identification information 2 are used when transmitting and receiving a packet via a transmission line. The call identification information 1 is information for identifying the transmitting side, and a calling number is used. The ground identification information 2 is information for identifying a receiving side, and an incoming call number is used.

【0014】パケット番号3はパケット自身を特定する
もので、M(Mは2の冪乗で表され、 log2 M=b3
ある)の剰余(modulo M)でパケットの送信順に時系列
的に番号付けされる。
The packet number 3 specifies the packet itself, and is represented by a modulo M of M (M is represented by a power of 2 and log 2 M = b 3 ) in chronological order in the packet transmission order. Numbered.

【0015】メディアID4は、パケットで送られてく
る情報を識別するためのもので、メディアタイプ41
(ビット長:b41ビット)と同一メディア識別情報42
(ビット長:b42ビット)とから構成される。メディア
タイプ41は、表1に示すようにオーディオ(モノラ
ル、ステレオ)、静止画(低解像度、高解像度)、ビデ
オ(低解像度、高解像度)等の各メディアに対応して割
り当てられたメディア識別コードで表される。同一メデ
ィア識別情報42は、メディアタイプ41が同じである
が情報源が異なるパケットを識別するためのものであ
る。
The media ID 4 is for identifying information transmitted in a packet, and has a media type 41.
(Bit length: b 41 bits) Same media identification information 42
(Bit length: b 42 bits). The media type 41 is a media identification code assigned to each media such as audio (monaural, stereo), still image (low resolution, high resolution), and video (low resolution, high resolution) as shown in Table 1. It is represented by The same media identification information 42 is for identifying packets having the same media type 41 but different information sources.

【0016】[0016]

【表1】 [Table 1]

【0017】リンク情報5は、多重化パケット列の中で
現在のパケットと他のパケットとの対応を示すもので、
メディア内リンク情報51(ビット長:b51ビット)と
メディア間リンク情報52(b52ビット)とから構成さ
れる。
The link information 5 indicates the correspondence between the current packet and other packets in the multiplexed packet sequence.
It is composed of intra-media link information 51 (bit length: b 51 bits) and inter-media link information 52 (b 52 bits).

【0018】メディア内リンク情報51は、同一のメデ
ィアID4をもつパケット間の対応関係を示すもので、
過去パケット番号511(ビット長:b511 ビット)と
シーケンス番号512(ビット長:b512 ビット)とか
ら構成される。過去パケット番号511には、現在のパ
ケットと同一のメディアID4をもち、かつ時間的に先
行するパケットのパケット番号3が収納される。シーケ
ンス番号512は、同一のメディアID4を有するパケ
ット毎にN(Nは2の冪乗で表され、log2 N=b512
である)の剰余(modulo N)でパケットの送信順に時系
列的に割り当てられる。なお、b511 =b3である。
The intra-media link information 51 indicates the correspondence between packets having the same media ID 4.
It is composed of a past packet number 511 (bit length: b 511 bits) and a sequence number 512 (bit length: b 512 bits). The past packet number 511 stores the packet number 3 of the packet having the same media ID 4 as the current packet and preceding in time. The sequence number 512 is N (N is represented by a power of 2 and is log 2 N = b 512) for each packet having the same media ID 4.
Are assigned in chronological order in the packet transmission order with the remainder (modulo N). Note that b 511 = b 3 .

【0019】メディア間リンク情報52は、現在のパケ
ットと異なるメディアID4をもつパケット間での対応
関係を示すもので、他メディアリンク数521(ビット
長:b521 ビット)と、複数の他メディアパケット番号
522(ビット長:各b522ビット)で構成される。他
メディアリンク数521は、現在のパケットと時間的に
対応し、かつ異なるメディアID4をもつパケットの総
数Kを示す。他メディアパケット番号522は、現在の
パケットと時間的に対応し、かつ異なるメディアID4
をもつパケットのパケット番号3であり、前記他メディ
アリンク数521の後にK個の他メディアパケット番号
522が続く。メディア間リンク情報52中の残りのビ
ット(ビット長:b523ビット、b523 =b52−b521
−K*b5 22 )は、空きビット(stuffing bits)であ
る。
The inter-media link information 52 indicates the correspondence between the current packet and a packet having a media ID 4 different from the current packet, and includes the number 521 of other media links (bit length: b 521 bits) and a plurality of other media packets. It is composed of a number 522 (bit length: each b 522 bits). The number 521 of other media links indicates the total number K of packets that temporally correspond to the current packet and have a different media ID 4. The other media packet number 522 temporally corresponds to the current packet and has a different media ID 4
The number of other media links 521 is followed by K other media packet numbers 522. Remaining bits in the inter-media link information 52 (bit length: b 523 bits, b 523 = b 52 −b 521
−K * b 5 22 ) are stuffing bits.

【0020】図2は実施の形態1における多重化器(マ
ルチプレクサ)の構成を示すブロック図であり、図にお
いて、100は多重化器、101はビデオ符号器、10
2はオーディオ符号器、103は情報フィールド生成
部、104はクロック生成部、105は同期情報付加
部、106はパケット番号/メディアID/リンク情報
付加部、107は呼識別/対地識別情報付加部である。
FIG. 2 is a block diagram showing a configuration of a multiplexer (multiplexer) according to the first embodiment. In FIG. 2, reference numeral 100 denotes a multiplexer, 101 denotes a video encoder,
2 is an audio encoder, 103 is an information field generation unit, 104 is a clock generation unit, 105 is a synchronization information addition unit, 106 is a packet number / media ID / link information addition unit, and 107 is a call identification / ground identification information addition unit. is there.

【0021】なお、情報フィールド生成部103は、マ
ルチメディアデータを情報源別のデータに分割する分割
手段としての機能を有する。また、クロック生成部10
4、同期情報付加部105、パケット番号/メディアI
D/リンク情報付加部106、呼識別/対地識別情報付
加部107は、分割したデータに対する各種情報、例え
ばデータの情報源を示す情報源識別情報としてのメディ
アID4や、リンク情報5、システムクロックリファレ
ンス6等の各種情報を生成し、この各種情報と分割した
データとを多重する生成手段としての機能を有する。次
に動作について説明する。多重化器100では、まず情
報フィールド生成部103において、入力された情報源
が異なる各メディアデータ301を分割し、情報フィー
ルドデータを生成する。なお、ビデオデータとオーディ
オデータについては、それぞれビデオ符号器101、オ
ーディオ符号器102で符号化された後、多重化器10
0に入力される。次に同期情報付加部105で、情報フ
ィールドデータに対してシステムクロックリファレンス
6の付加を行う。システムクロックリファレンス6の付
加においては、クロック生成部104で生成したクロッ
ク信号を用いてタイムスタンプが作られる。システムク
ロックリファレンス6が付加された情報源別の情報フィ
ールドデータは、パケット番号/メディアID/リンク
情報付加部106でパケット番号3、メディアID4及
びリンク情報5が付加され、付加されたパケット番号順
に出力される。更に、呼識別/対地識別情報付加部10
7において呼識別情報と対地識別情報が付加され、一連
のパケット列302として多重化器100から出力され
る。
The information field generation unit 103 has a function as a division unit for dividing multimedia data into data for each information source. The clock generation unit 10
4. Synchronization information adding unit 105, packet number / media I
The D / link information addition unit 106 and the call identification / ground identification information addition unit 107 include various information for the divided data, for example, a media ID 4 as information source identification information indicating an information source of the data, link information 5, a system clock reference. 6 has a function as generating means for generating various information such as 6 and multiplexing the various information with the divided data. Next, the operation will be described. In the multiplexer 100, first, the information field generation unit 103 divides each piece of media data 301 having different input information sources to generate information field data. Note that the video data and the audio data are encoded by the video encoder 101 and the audio encoder 102, respectively,
Input to 0. Next, the synchronization information adding unit 105 adds the system clock reference 6 to the information field data. In adding the system clock reference 6, a time stamp is created using the clock signal generated by the clock generation unit 104. The information field data for each information source to which the system clock reference 6 is added is added with the packet number 3, the media ID 4, and the link information 5 by the packet number / media ID / link information adding unit 106, and is output in the order of the added packet number. Is done. Further, a call identification / ground identification information adding unit 10
At 7, the call identification information and the ground identification information are added and output from the multiplexer 100 as a series of packet strings 302.

【0022】図3は実施の形態1における多重化分離器
(デマルチプレクサ)の構成を示すブロック図であり、
図において、200は多重化分離器、201は呼識別/
対地識別情報分離部、202はパケット番号/メディア
ID/リンク情報分離部、203は同期情報分離部、2
04は情報フィールド合成部、205はビデオ復号器、
206はオーディオ復号器、207は同期情報比較器、
208は遅延メモリである。
FIG. 3 is a block diagram showing the configuration of the demultiplexer (demultiplexer) according to the first embodiment.
In the figure, 200 is a demultiplexer, 201 is a call identification /
Ground identification information separating section, 202 is a packet number / media ID / link information separating section, 203 is a synchronization information separating section, 2
04 is an information field synthesis unit, 205 is a video decoder,
206 is an audio decoder, 207 is a synchronization information comparator,
208 is a delay memory.

【0023】次に動作について説明する。多重化分離器
200では、まず呼識別/対地識別情報分離部201
で、一連のパケット列302中の各パケットから呼識別
情報1と対地識別情報2との分離処理を行う。次にパケ
ット番号/メディアID/リンク情報分離部202でパ
ケット番号3、メディアID4及びリンク情報5を分離
し、システムクロックリファレンス6と情報フィールド
とで構成されるデータが情報源別に出力される。更に同
期情報分離部203においてそれぞれシステムクロック
リファレンス6が分離され、情報フィールドデータが出
力される。情報源別の情報フィールドデータは、情報フ
ィールド合成部204でそれぞれ情報フィールドが合成
されて各メディアデータが生成される。情報源が異なる
各種メディアデータの中でビデオデータとオーディオデ
ータは、ビデオ復号器205、オーディオ復号器206
でそれぞれ復号される。メディア間の同期を確保するた
めに、従来の実施例と同様、前記同期情報分離部203
にて分離したメディア毎のタイムスタンプ303を同期
情報比較器207に入力して比較し、最も遅いタイムス
タンプを有するメディア信号に同期するよう遅延処理を
施す。以上のように、この実施例によればマルチメディ
アデータを属性(情報源、メディア、符号化方式、品質
など)別にパケットを単位として多重化し、各パケット
の属性等を示す情報あるいはパケット間の対応関係を示
す情報を多重したため、多重化データの中から一部分ま
たは複数のデータを抽出して再生することが容易にでき
る。例えば、一連のデータ列の中から特定ユーザからの
送信データを抽出したり、符号化したビデオデータの中
から特定のビデオデータを抽出し復号することが容易に
実現できる。また、蓄積媒体上に本方式を用いてマルチ
メディアデータを記録した場合には、高速再生・逆転再
生・一部のメディアのみを選択した再生等の特殊再生が
容易に実現できる。
Next, the operation will be described. In the demultiplexer 200, first, a call identification / ground identification information separation unit 201
Then, separation processing of call identification information 1 and ground identification information 2 is performed from each packet in the series of packet strings 302. Next, the packet number 3, media ID 4, and link information 5 are separated by the packet number / media ID / link information separation unit 202, and data composed of the system clock reference 6 and the information field is output for each information source. Further, the system clock reference 6 is separated in the synchronization information separation unit 203, and information field data is output. As for the information field data for each information source, the information fields are combined by the information field combining unit 204 to generate respective media data. Video data and audio data among various types of media data having different information sources are supplied to a video decoder 205 and an audio decoder 206.
Respectively. In order to ensure synchronization between media, the synchronization information separating unit 203 is used as in the conventional embodiment.
Then, the time stamp 303 for each medium separated by is input to the synchronization information comparator 207 and compared, and a delay process is performed so as to synchronize with the media signal having the latest time stamp. As described above, according to this embodiment, multimedia data is multiplexed in units of packets for each attribute (information source, media, coding method, quality, etc.), and information indicating the attributes of each packet or the correspondence between packets. Since the information indicating the relationship is multiplexed, a part or a plurality of data can be easily extracted and reproduced from the multiplexed data. For example, extraction of transmission data from a specific user from a series of data strings, or extraction and decoding of specific video data from encoded video data can be easily realized. Also, when multimedia data is recorded on a storage medium using this method, special reproduction such as high-speed reproduction, reverse reproduction, or reproduction in which only some media are selected can be easily realized.

【0024】実施の形態2.上記実施の形態1では、メ
ディア内リンク情報51を過去パケット番号511とシ
ーケンス番号512とで構成していたが、図4に示すよ
うに、現在のパケットと同一のメディアID4をもち、
かつ時間的に後続するパケットのパケット番号3が格納
される未来パケット番号510と、過去パケット番号5
11と、シーケンス番号512とで構成してもよく、こ
れにより、蓄積媒体に記録したマルチメディアデータへ
のアクセスがより容易になり、高速再生が可能となる。
Embodiment 2 FIG. In the first embodiment, the intra-media link information 51 is composed of the past packet number 511 and the sequence number 512. However, as shown in FIG. 4, it has the same media ID 4 as the current packet,
And a future packet number 510 in which the packet number 3 of the temporally succeeding packet is stored, and a past packet number 5
11 and a sequence number 512, which makes it easier to access the multimedia data recorded on the storage medium and enables high-speed reproduction.

【0025】実施の形態3.上記実施の形態1及び2で
は、システムクロックリファレンス6に書かれたタイム
スタンプを用いてメディア間の同期をとっていたが、図
5に示すようにシステムクロックリファレンス6の代わ
りに他メディアパケットとの時間差523を用いてメデ
ィア間の同期を確保しても良い。
Embodiment 3 In the first and second embodiments, the synchronization between the media is achieved by using the time stamp written in the system clock reference 6. However, as shown in FIG. The synchronization between the media may be ensured using the time difference 523.

【0026】実施の形態4.上記実施の形態1、2及び
3では、パケット毎に呼識別情報1と対地識別情報2を
付加していたが、本多重化方式を通信以外の分野にて使
用する場合には、呼識別情報1と対地識別情報2を省略
しても良い。また、用途によっては、その他の識別情報
の付加を省略しても良い。
Embodiment 4 In the first, second and third embodiments, the call identification information 1 and the ground identification information 2 are added for each packet. However, when the present multiplexing method is used in a field other than communication, the call identification information 1 is added. 1 and the ground identification information 2 may be omitted. Depending on the application, the addition of other identification information may be omitted.

【0027】実施の形態5.上記実施の形態1、2及び
3における空きビットに、ある種の識別情報を入れても
勿論良い。
Embodiment 5 FIG. Of course, some kind of identification information may be put in the empty bits in the first, second and third embodiments.

【0028】[0028]

【発明の効果】以上のように、請求項1の発明によれ
ば、複数の異種類メディア及び複数の同一種類メディア
が情報源であるマルチメディアデータをそれぞれ所定単
位で分割し、分割したマルチメディアデータの情報源を
示す情報源識別情報を生成し、この生成した情報源識別
情報を前記分割されたマルチメディアデータに付加し、
この情報源識別情報が付加された前記分割マルチメディ
アデータを多重するので、複数の異種類メディアを情報
源とするマルチメディアデータを多重できるとともに、
複数の同一種類メディアを情報源とするマルチメディア
データをも多重できるという効果がある。
As described above, according to the first aspect of the present invention, multimedia data of which information sources are a plurality of different types of media and a plurality of the same types of media are respectively divided into predetermined units, and the divided multimedia data is divided. Generating information source identification information indicating an information source of data, adding the generated information source identification information to the divided multimedia data,
Since the divided multimedia data to which the information source identification information is added is multiplexed, multimedia data having a plurality of different types of media as information sources can be multiplexed,
There is an effect that multimedia data using a plurality of media of the same type as information sources can be multiplexed.

【0029】また、請求項2の発明によれば、複数の異
種類メディア及び複数の同一種類メディアが情報源であ
るマルチメディアデータをそれぞれ所定単位で分割し、
分割したマルチメディアデータの情報源を示す情報源識
別情報と、分割したマルチメディアデータ間の対応関係
を示すリンク情報と、を生成し、この生成した情報源識
別情報を前記分割されたマルチメディアデータに付加
し、この情報源識別情報が付加された前記分割マルチメ
ディアデータと前記生成したリンク情報とを多重するの
で、複数の異種類メディアを情報源とするマルチメディ
アデータを多重できるとともに、複数の同一種類メディ
アを情報源とするマルチメディアデータをも多重できる
という効果がある。
According to the second aspect of the present invention, multimedia data whose information sources are a plurality of different types of media and a plurality of same types of media are divided into predetermined units, respectively.
Generating information source identification information indicating an information source of the divided multimedia data and link information indicating a correspondence relationship between the divided multimedia data, and using the generated information source identification information as the divided multimedia data Multiplexed with the divided multimedia data to which the information source identification information is added and the generated link information, so that multimedia data using a plurality of different types of media as information sources can be multiplexed, and a plurality of There is an effect that multimedia data using the same type of media as an information source can be multiplexed.

【図面の簡単な説明】[Brief description of the drawings]

【図1】 この発明の実施の形態1における多重化方式
の説明図である。
FIG. 1 is an explanatory diagram of a multiplexing method according to Embodiment 1 of the present invention.

【図2】 この発明の実施の形態1における多重化器の
構成を示すブロック図である。
FIG. 2 is a block diagram illustrating a configuration of a multiplexer according to Embodiment 1 of the present invention.

【図3】 この発明の実施の形態1における多重化分離
器の構成を示すブロック図である。
FIG. 3 is a block diagram showing a configuration of a demultiplexer according to Embodiment 1 of the present invention.

【図4】 この発明の実施の形態2における多重化方式
の説明図である。
FIG. 4 is an explanatory diagram of a multiplexing method according to a second embodiment of the present invention.

【図5】 この発明の実施の形態3における多重化方式
の説明図である。
FIG. 5 is an explanatory diagram of a multiplexing method according to a third embodiment of the present invention.

【図6】 従来のマルチメディア多重化方式の説明図で
ある。
FIG. 6 is an explanatory diagram of a conventional multimedia multiplexing method.

【図7】 従来のマルチメディア多重化方式におけるパ
ケット構造の説明図である。
FIG. 7 is an explanatory diagram of a packet structure in a conventional multimedia multiplexing method.

【図8】 メディア間の同期を確保するための装置構成
例である。
FIG. 8 is an example of a device configuration for ensuring synchronization between media.

【符号の説明】[Explanation of symbols]

1 呼識別情報、2 対地識別情報、3 パケット番
号、4 メディアID、5 リンク情報、6 システム
クロックリファレンス、41 メディアタイプ、42
同一メディア識別情報、51 メディア内リンク情報、
52 メディア間リンク情報、100 多重化器、10
1 ビデオ符号器、102 オーディオ符号器、103
情報フィールド生成部、104 クロック生成部、1
05 同期情報付加部、106 パケット番号/メディ
アID/リンク情報付加部、107呼識別/対地識別情
報付加部、200 多重化分離器、201 呼識別/対
地識別情報分離部、202 パケット番号/メディアI
D/リンク情報分離部、203 同期情報分離部、20
4 情報フィールド合成部、205 ビデオ復号器、2
06 オーディオ復号器、207 同期情報比較器、2
08 遅延メモリ、301 メディアデータ、302
パケット列、303 タイムスタンプ、304 タイミ
ングパルス、510 未来パケット番号、511 過去
パケット番号、512 シーケンス番号、521 他メ
ディアリンク数、522 他メディアパケット番号、5
23 時間差。
1 call identification information, 2 ground identification information, 3 packet number, 4 media ID, 5 link information, 6 system clock reference, 41 media type, 42
Same media identification information, 51 intra-media link information,
52 inter-media link information, 100 multiplexer, 10
1 video encoder, 102 audio encoder, 103
Information field generator, 104 clock generator, 1
05 Synchronization information addition unit, 106 packet number / media ID / link information addition unit, 107 call identification / ground identification information addition unit, 200 multiplex separator / demultiplexer, 201 call identification / ground identification information separation unit, 202 packet number / media I
D / link information separation unit, 203 synchronization information separation unit, 20
4 information field synthesis unit, 205 video decoder, 2
06 audio decoder, 207 synchronization information comparator, 2
08 delay memory, 301 media data, 302
Packet sequence, 303 time stamp, 304 timing pulse, 510 future packet number, 511 past packet number, 512 sequence number, 521 other media link number, 522 other media packet number, 5
23 hours difference.

Claims (2)

【特許請求の範囲】[Claims] 【請求項1】 以下の手段を備え、複数の異種類メディ
ア及び複数の同一種類メディアが情報源であるマルチメ
ディアデータを多重するマルチメディア多重方式。 (a)前記各情報源のマルチメディアデータをそれぞれ
所定単位で分割する分割手段; (b)前記分割手段により分割されたマルチメディアデ
ータの前記情報源を示す情報源識別情報を生成し、この
生成した情報源識別情報を前記分割されたマルチメディ
アデータに付加し、この情報源識別情報が付加された前
記分割マルチメディアデータを多重する生成手段。
1. A multimedia multiplexing system comprising the following means and multiplexing multimedia data whose information sources are a plurality of different types of media and a plurality of same types of media. (A) dividing means for dividing the multimedia data of each information source into predetermined units; (b) generating information source identification information indicating the information source of the multimedia data divided by the dividing means; Generating means for adding the divided information source identification information to the divided multimedia data and multiplexing the divided multimedia data to which the information source identification information has been added.
【請求項2】 以下の手段を備え、複数の異種類メディ
ア及び複数の同一種類メディアが情報源であるマルチメ
ディアデータを多重するマルチメディア多重方式。 (a)前記各情報源のマルチメディアデータをそれぞれ
所定単位で分割する分割手段; (b)前記分割手段により分割されたマルチメディアデ
ータの前記情報源を示す情報源識別情報と、前記分割手
段により分割されたマルチメディアデータ間の対応関係
を示すリンク情報と、を生成し、この生成した情報源識
別情報を前記分割されたマルチメディアデータに付加
し、この情報源識別情報が付加された前記分割マルチメ
ディアデータと前記生成したリンク情報とを多重する生
成手段。
2. A multimedia multiplexing system comprising the following means and multiplexing multimedia data in which a plurality of different types of media and a plurality of same types of media are information sources. (A) dividing means for dividing the multimedia data of each information source into predetermined units; (b) information source identification information indicating the information source of the multimedia data divided by the dividing means; Link information indicating the correspondence relationship between the divided multimedia data, and adding the generated information source identification information to the divided multimedia data, and adding the information source identification information to the divided multimedia data. Generating means for multiplexing the multimedia data with the generated link information;
JP32752497A 1997-11-28 1997-11-28 Multimedia multiplex system Expired - Lifetime JP3019826B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP32752497A JP3019826B2 (en) 1997-11-28 1997-11-28 Multimedia multiplex system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP32752497A JP3019826B2 (en) 1997-11-28 1997-11-28 Multimedia multiplex system

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP3185092A Division JP2814819B2 (en) 1992-02-19 1992-02-19 Multimedia multiplex system

Publications (2)

Publication Number Publication Date
JPH10164141A true JPH10164141A (en) 1998-06-19
JP3019826B2 JP3019826B2 (en) 2000-03-13

Family

ID=18200075

Family Applications (1)

Application Number Title Priority Date Filing Date
JP32752497A Expired - Lifetime JP3019826B2 (en) 1997-11-28 1997-11-28 Multimedia multiplex system

Country Status (1)

Country Link
JP (1) JP3019826B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007060524A (en) * 2005-08-26 2007-03-08 Mitsubishi Electric Corp Synchronous reproducing system and synchronous reproducing method of plural media

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101691896B (en) * 2009-06-25 2011-03-16 王宝根 Spring extension tube processing equipment with ultrasonic wave welding device
KR102070715B1 (en) 2019-10-24 2020-01-29 유한회사 싸카 Panel for ball game and ball for ball game

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007060524A (en) * 2005-08-26 2007-03-08 Mitsubishi Electric Corp Synchronous reproducing system and synchronous reproducing method of plural media

Also Published As

Publication number Publication date
JP3019826B2 (en) 2000-03-13

Similar Documents

Publication Publication Date Title
KR960033096A (en) Multimedia Information Processing System
JP3666625B2 (en) Data recording method and data recording apparatus
JP2002531911A (en) Apparatus and method for recording digital information together with trick-play information on an inclined track of a record carrier
EP1303989B1 (en) Method and device for generating a multiplexed mpeg signal
JP2814819B2 (en) Multimedia multiplex system
JP3019826B2 (en) Multimedia multiplex system
EA003213B1 (en) Embedding a first digital information signal into a second digital information signal for transmission via a transmission medium
JP3019827B2 (en) Multimedia multiplex system
JP3080092B2 (en) Multimedia multiplex system
JP3027816B2 (en) Multimedia multiplex system
JP3027815B2 (en) Multimedia multiplex system
JPH0950673A (en) Data coding device and method, data recording medium, and data decoding device and method
JPH10276407A (en) Video information providing management method and system therefor
JP3055320B2 (en) Video signal transmitting device and video signal receiving device
JP3177825B2 (en) Media coding device
JP4007575B2 (en) Image / audio bitstream splitting device
JP4306095B2 (en) Data transmission method, data transmission device, data reception method, and data reception device
JP2001155426A (en) Stream recorder and stream multiplexer
JP3248351B2 (en) Digital data recording / reproducing apparatus and digital data recording / reproducing method
JP2000152236A (en) Moving picture coder, multiplexing method, its system and recording and reproducing device
JP2605435B2 (en) PCM transmission device, PCM reception device, digital audio interface format data transmission device, and digital audio interface format data reception device
JPH07210989A (en) Signal recording and reproducing device
JP2000125271A (en) Video signal multiplexer, multiplexed video signal decoding device and video signal multiplex transmitter having them
KR20010017611A (en) Method for recoding digital data stream and method for transmitting presentation control information for digital data stream thereof
JPH05167995A (en) Transmission device for digital signal

Legal Events

Date Code Title Description
EXPY Cancellation because of completion of term
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130107

Year of fee payment: 13