JP2004523163A - Ｍｐｅｇ−２データにｍｐｅｇ−４データを同期化させて伝送する装置及びその方法 - Google Patents
Ｍｐｅｇ−２データにｍｐｅｇ−４データを同期化させて伝送する装置及びその方法 Download PDFInfo
- Publication number
- JP2004523163A JP2004523163A JP2002558743A JP2002558743A JP2004523163A JP 2004523163 A JP2004523163 A JP 2004523163A JP 2002558743 A JP2002558743 A JP 2002558743A JP 2002558743 A JP2002558743 A JP 2002558743A JP 2004523163 A JP2004523163 A JP 2004523163A
- Authority
- JP
- Japan
- Prior art keywords
- data
- mpeg
- information
- packet
- flexmux
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 41
- 238000000926 separation method Methods 0.000 claims abstract description 23
- 230000001360 synchronised effect Effects 0.000 claims abstract description 10
- 230000005540 biological transmission Effects 0.000 claims description 3
- 239000000284 extract Substances 0.000 claims description 3
- 238000003780 insertion Methods 0.000 claims description 2
- 230000037431 insertion Effects 0.000 claims description 2
- 239000000203 mixture Substances 0.000 claims description 2
- 238000006243 chemical reaction Methods 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 6
- 230000014509 gene expression Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000001131 transforming effect Effects 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234318—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
- H04N21/2353—Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23605—Creation or processing of packetized elementary streams [PES]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23608—Remultiplexing multiplex streams, e.g. involving modifying time stamps or remapping the packet identifiers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2362—Generation or processing of Service Information [SI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/8166—Monomedia components thereof involving executable data, e.g. software
- H04N21/8193—Monomedia components thereof involving executable data, e.g. software dedicated tools, e.g. video decoder software or IPMP tool
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Library & Information Science (AREA)
- Television Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Reduction Or Emphasis Of Bandwidth Of Signals (AREA)
- Mobile Radio Communication Systems (AREA)
- Synchronisation In Digital Transmission Systems (AREA)
Abstract
ＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させて伝送する装置及びその方法に関するものである。ＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する装置は、ＭＰＥＧ−４データの格納型であるＭｐ４データを入力して各ＭＰＥＧ−４オブジェクトデータを抽出し、オブジェクトデータと関連したメタ情報を解析して分離し、プログラム情報及び同期化情報を生成するオブジェクト分離及び情報生成手段と、オブジェクト分離及び情報生成手段から抽出されたＭＰＥＧ−４オブジェクトデータをＭＰＥＧ−２データと同期化するため、前記オブジェクト分離及び情報生成手段から生成されたプログラム情報及び同期化情報を用いて、ＭＰＥＧ−４オブジェクトデータをＭＰＥＧ−２形式のパケットに変換するパケット化手段と、前記パケット化手段でパケット化されたＭＰＥＧ−４データをＭＰＥＧ−２データと多重化するプログラム多重化手段とを含む。
Description
【技術分野】
【０００１】
本発明は、デジタル放送用マルチメディアデータであるＭＰＥＧ−２音響／画像データに付加データとして用いられることのできるＭＰＥＧ−４データを同期化させて伝送して、アプリケーション（application）で活用するようにする装置及びその方法と、それを実現させるプログラムを記録したコンピュータで読み出すことのできる記録媒体に関する。
【背景技術】
【０００２】
放送／通信／格納媒体用音響／画像データであるＭＰＥＧ−２データに対して、伝送速度６４Ｋｂｐｓ以下のデジタル音響／画像データであるＭＰＥＧ−４データを同期化させるということに対して、従来の技術においては、概念的な技術方法のみが扱われてきていた。しかし、現在までＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させるための具現方法とＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させて伝送するための全体システムは提案されていない。したがって、実質的に前記のようなＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させて伝送するサービスがなされていないという問題点がある。
【発明の開示】
【発明が解決しようとする課題】
【０００３】
本発明は、上述したような問題点に鑑みてなされたものであって、その目的とするところは、放送／通信／格納媒体用音響／画像データであるＭＰＥＧ−２データに対して、デジタル音響／画像データであるＭＰＥＧ−４データを同期化させて伝送する装置及びその方法と、前記方法を実現させるためのプログラムを記録したコンピュータで読み出すことのできる記録媒体を提供することである。
【課題を解決するための手段】
【０００４】
そこで、前記目的を達成するため、本発明は、ＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する装置において、ＭＰＥＧ−４データの格納型であるＭｐ４データを入力して各ＭＰＥＧ−４オブジェクトデータを抽出し、前記オブジェクトデータと関連したメタ情報を解析して分離し、プログラム情報及び同期化情報を生成するオブジェクト分離及び情報生成手段と、前記オブジェクト分離及び情報生成手段から抽出されたＭＰＥＧ−４オブジェクトデータをＭＰＥＧ−２データと同期化するため、前記オブジェクト分離及び情報生成手段から生成されたプログラム情報及び同期化情報を用いて、ＭＰＥＧ−４オブジェクトデータをＭＰＥＧ−２形式のパケットに変換するパケット化手段と、前記パケット化手段でパケット化されたＭＰＥＧ−４データをＭＰＥＧ−２データと多重化するプログラム多重化手段とを含むことを特徴とする。
【０００５】
一方、本発明は、ＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する方法において、ＭＰＥＧ−４データの格納型であるＭｐ４データを入力されて各ＭＰＥＧ−４オブジェクトデータを抽出し、それと関連したメタ情報を解析して分離する第１ステップと、前記第１ステップで抽出されたメタ情報を利用してＭＰＥＧ−４オブジェクトデータを第１パケット化する第２ステップと、前記第１ステップで抽出されたメタ情報と前記第２ステップのパケット化過程で生成された情報を用いて、同期化情報及びプログラム情報を生成する第３ステップと、前記第３ステップで生成された情報と前記第１ステップで分離されたメタ情報を用いて、前記第２ステップでパケット化されたＭＰＥＧ−４データを第２パケット化する第４ステップと、前記第４ステップでパケット化されたＭＰＥＧ−４データをＭＰＥＧ−２データと多重化する第５ステップとを含むことを特徴とする。
【０００６】
一方、本発明は、ＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させるため、大容量プロセッサを備えた同期化装置に、ＭＰＥＧ−４データの格納形形式であるＭｐ４データを入力されて、各ＭＰＥＧ−４オブジェクトデータを抽出し、それと関連したメタ情報を解析して分離する第１機能と、前記第１機能により抽出されたメタ情報を用いてＭＰＥＧ−４オブジェクトデータを第１パケット化する第２機能と、前記第１機能により抽出されたメタ情報と前記第２機能のパケット化過程で生成された情報とを用いて、同期化情報及びプログラム情報を生成する第３機能と、前記第３機能により生成された情報と前記第１機能により分離されたメタ情報とを用いて、前記第２機能によりパケット化されたＭＰＥＧ−４データを第２パケット化する第４機能と、前記第４機能によりパケット化されたＭＰＥＧ−４データをＭＰＥＧ−２データと多重化する第５機能とを提供する。
【発明を実施するための最良の形態】
【０００７】
以下、添付する図面を参照しながら本発明に係る好ましい一実施例を詳細に説明する。
【０００８】
図１は、本発明に係るＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させて伝送する装置の一実施例の構成図である。
【０００９】
図１に示すように、本発明に係るＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させて伝送する装置は、ＭＰＥＧ−４データの格納型であるｍｐ４データを入力されて各ＭＰＥＧ−４オブジェクトデータを抽出し、前記オブジェクトデータと関連したメタ情報を解析して分離し、プログラム情報及び同期化情報を生成するオブジェクト分離及び情報生成部１２、前記オブジェクト分離及び情報生成部１２から抽出されたＭＰＥＧ−４オブジェクトデータをＭＰＥＧ−２データと同期化するため、前記オブジェクト分離及び情報生成部１２から生成されたプログラム情報及び同期化情報を用いてＭＰＥＧ−４オブジェクトデータをＭＰＥＧ−２形式のパケットに変換するパケット化部１３及び前記パケット化部１３からパケット化されたＭＰＥＧ−４データをＭＰＥＧ−２音響／画像データと多重化するプログラム多重化部１４を含む。
【００１０】
前記オブジェクト分離及び情報生成部１２は、オブジェクト分離部１２１、同期化情報生成部１２２及びプログラム情報生成部１２３を含み、以下その詳細動作について述べる。
【００１１】
オブジェクト分離部１２１は、データベース１１からＭＰＥＧ−４の格納型であるｍｐ４ファイルを受信する。データベース１１は、メディアデータとメタ情報とから構成されたｍｐ４ファイルを格納する。オブジェクト分離部１２１は、受信されたｍｐ４ファイルからＭＰＥＧ−４オブジェクトデータを抽出し、それと関連したメタ情報であるメディアデータの種類、位置、特性、大きさなどを分析し、また抽出されたＭＰＥＧ−４オブジェクトデータのうち、ＭＰＥＧ−４ ＩＯＤ（Initial Object Descriptor、以下、ＩＯＤと記す）データはＰＳＩ（Program Specific Information、以下、ＰＳＩと記す）生成部１３４に出力し、抽出されたメタ情報のうちＣＴＳ（Composition Time Stamp、以下、ＣＴＳと記す）／ＤＴＳ（Decoding Time Stamp、以下、ＤＴＳと記す）情報は同期化情報生成部１２２に出力し、抽出されたメタ情報のうちＥＳ＿ＩＤ（Elementary Stream Identifier、以下、ＥＳ＿ＩＤと記す）情報はプログラム情報生成部１２３に出力し、その他のオブジェクトデータとメタ情報はＳＬ（Sync Layer、以下、ＳＬと記す）パケット化部１３１に出力する。
【００１２】
そして、同期化情報生成部１２２は、オブジェクト分離部１２１から入力されたメタ情報であるＣＴＳ／ＤＴＳを、ＭＰＥＧ−２時間値であるＰＴＳ（Presentation Time Stamp、以下、ＰＴＳと記す）／ＤＴＳ値に変換する。また、同期化情報生成部１２２は、変換されたＰＴＳ／ＤＴＳ時間値とＦｌｅｘＭｕｘ（Flexible Multiplex）パケット化部１３２から入力されたＦｌｅｘＭｕｘパケットの長さ情報を用いて、下記の［表１］のような形式の同期化情報を生成し、これをＰＥＳ（Packetized Elementary Stream、以下、ＰＥＳと記す）パケット化部１３６に出力する。
【００１３】
そして、プログラム情報生成部１２３は、オブジェクト分離部１２１から入力されたメタ情報であるＥＳ＿ＩＤとＦｌｅｘＭｕｘパケット化部１３２から入力されたＦｌｅｘＭｕｘチャネル（FlexMux Channel）とを互いに接続させて、下記の［表２］のような形式のプログラム情報を生成し、これをＰＳＩ生成部１３４に出力する。
【００１４】
次いで、パケット化部１３は、ＳＬパケット化部１３１、ＦｌｅｘＭｕｘパケット化部１３２、パケット化制御部１３３、ＰＳＩ生成部１３４、１４４９６セクション（Section）パケット化部１３５、ＰＥＳパケット化部１３６及びトランスポートストリーム（ＴＳ：Transport Stream）パケット化部１３７を含み、以下にその詳細動作について述べる。
【００１５】
前記ＳＬパケット化部１３１は、オブジェクト分離部１２１から入力されたＭＰＥＧ−４オブジェクトデータ及びメタ情報をＳＬパケットにパケット化してＦｌｅｘＭｕｘパケット化部１３２に出力する。ここで、ＳＬパケットは、ＭＰＥＧ−４の各オブジェクトデータ間の同期化のためにＭＰＥＧ−４システム規格で定義したものであって、ヘッダとペイロード（payload）から構成される。ヘッダは、ＭＰＥＧ−４オブジェクトデータを任意の時間に表現できるようにする時間情報、シーケンス情報を有し、ペイロードは、ＭＰＥＧ−４オブジェクトデータをアクセスユニット単位で有する。ＩＯＤは、ＯＤ（Object Descriptor、以下、ＯＤと記す）とＢＩＦＳ（Binary Format for Scene、以下、ＢＩＦＳと記す）を接続させるポインタの役割をするので、ＳＬパケット化することができない。
【００１６】
そして、ＦｌｅｘＭｕｘパケット化部１３２は、ＳＬパケット化部１３１から入力されたＳＬパケットをＦｌｅｘＭｕｘパケットにパケット化し、これを下記の図３のような形式でパケット化制御部１３３に出力し、ＦｌｅｘＭｕｘパケット化過程で生成されるＦｌｅｘＭｕｘパケットの長さ及びＦｌｅｘＭｕｘチャネル情報をプログラム情報生成部１２３と同期化情報生成部１２２に出力する。ここで、ＦｌｅｘＭｕｘパケットは、ＭＰＥＧ−４システム規格で定義するオプション多重化方式により、ＳＬパケット化された多数のストリームを同時に多重化する時、オーバーヘッドを低減するか、論理チャネルの不足を補充するために用いられる。ＦｌｅｘＭｕｘパケットはヘッダとペイロードから構成され、この時ペイロードは必ず完全なＳＬパケットを含まなければならない。ＦｌｅｘＭｕｘパケット化モードは２種類が存在し、その一つは、一つのＳＬパケットをＦｌｅｘＭｕｘペイロードに含むシンプルモード（Simple Mode）であり、残り一つは複数のＳＬパケットをＦｌｅｘＭｕｘペイロードに含む多重化コードモード（MuxCode Mode）である。
【００１７】
また、パケット化制御部１３３、ＦｌｅｘＭｕｘパケット化部１３２から入力されたＦｌｅｘＭｕｘパケットを分析して、ＭＰＥＧ−２データと、同期化が必要なＢＩＦＳ−アニメーション（ａｎｉｍａｔｉｏｎ）データおよび音響／画像データはＰＥＳパケット化部１３６に、同期化を必要としないＢＩＦＳ−命令（command）データ、ＯＤデータは１４４９６セクションパケット化部１３５に出力する。
【００１８】
また、ＰＳＩ生成部１３４は、プログラム情報生成部１２３から入力されたプログラム情報を用いてＭＰＥＧ−４と関連したディスクリプタ（descriptor）を構成し、構成されたディスクリプタとオブジェクト分離部１２１から入力されたＩＯＤデータを用いて、ＭＰＥＧ−２及びＭＰＥＧ−４データを全て収容できるＰＭＴ（Program Map Table、以下、ＰＭＴと記す）を生成して、トランスポートストリーム（ＴＳ）パケット化部１３７に出力する。また、ＰＭＴの位置情報を表すＰＡＴ（Program Association Table、以下、ＰＡＴと記す）を生成して、トランスポートストリーム（ＴＳ）パケット化部１３７に出力する。
【００１９】
そして、１４４９６セクションパケット化部１３５は、パケット化制御部１３３から入力されたＦｌｅｘＭｕｘデータを１４４９６セクションにパケット化し、これを再度トランスポートストリーム（ＴＳ）パケット化部１３７に出力する。
【００２０】
そして、ＰＥＳパケット化部１３６は、同期化情報生成部１２２から入力された同期化情報を用いて、パケット化制御部１３３から入力された同期化が必要なＦｌｅｘＭｕｘデータをＰＥＳパケットにパケット化して、これを再度トランスポートストリーム（ＴＳ）パケット化部１３７に出力する。
【００２１】
そして、トランスポートストリーム（ＴＳ）パケット化部１３７は、ＰＳＩ生成部１３４から入力されたＰＳＩ情報であるＰＡＴ、ＰＭＴパケットと１４４９６セクションパケット化部１３５から入力された１４４９６セクションパケット化されたＭＰＥＧ−４データ、及びＰＥＳパケット化部１３６から入力されたＰＥＳパケット化されたＭＰＥＧ−４データ、をトランスポートストリーム（ＴＳ）パケット化し、これを再度プログラム多重化部１４に出力する。
【００２２】
一方、プログラム多重化部１４は、トランスポートストリーム（ＴＳ）パケット化部１３７から入力されたＭＰＥＧ−４トランスポートストリーム（ＴＳ）パケットと外部から入力されたＭＰＥＧ−２音響／画像データを一つのトランスポートストリーム（ＴＳ）に多重化する役割をする。この場合、プログラム多重化部１４は、同期化初期値（Offset）を入力して、これを二つのトランスポートストリーム（ＴＳ）を一つのトランスポートストリーム（ＴＳ）に多重化するパラメータ値として用いる。
【００２３】
図２は、本発明に係るＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させて伝送する方法に関する一実施例の処理フローチャートである。
【００２４】
まず、データベースに格納されたＭｐ４ファイルが入力されると（ステップ２０１）、入力されたＭｐ４データはＭＰＥＧ−４オブジェクトデータに分離され（ステップ２１）、この過程で各オブジェクトデータの、ＩＯＤ（ステップ２０２）、ＥＳ＿ＩＤ（ステップ２０４）、ＣＴＳ／ＤＴＳ（ステップ２０３）などのようなメタ情報値も抽出される。抽出されたデータのうち、ＩＯＤデータはＰＳＩ生成に用いられ（ステップ２１３）、その他のオブジェクト分離過程において抽出されたメタ情報を用いて、ＯＤ、ＢＩＦＳ、音響／画像コンテンツデータを、ＳＬパケット化する（ステップ２０５）。
【００２５】
以後、ＳＬパケット化されたデータは、再度ＦｌｅｘＭｕｘパケット化される（ステップ２２）。このＦｌｅｘＭｕｘパケット化過程では、メタ情報であるＦｌｅｘＭｕｘパケット長さ２０８とＦｌｅｘＭｕｘチャネル情報２０９が生成される。
【００２６】
以後、オブジェクト分離過程で抽出されたＣＴＳ／ＤＴＳ値と、ＦｌｅｘＭｕｘパケット化過程で生成されたＦｌｅｘＭｕｘパケットの長さ情報は、同期化情報を生成するためのデータとして入力されて同期化情報が生成され（ステップ２０６）、オブジェクト分離過程で抽出されたＥＳ＿ＩＤ値とＦｌｅｘＭｕｘパケット化過程で生成されたＦｌｅｘＭｕｘチャネル値は、プログラム情報を生成するためのデータとして入力されてプログラム情報が生成される（ステップ２０７）。
【００２７】
また、ＦｌｅｘＭｕｘパケット化されたデータは、ＭＰＥＧ−２データと同期化が必要な場合（ステップ２１０）、同期化情報を用いてＰＥＳパケットにパケット化し（ステップ２１１）、同期化を必要としない場合（ステップ２１０）、１４４９６セクションにパケット化される（ステップ２１２）。
【００２８】
また、オブジェクト抽出過程で抽出されたＩＯＤは、プログラム情報（ステップ２０７）と共にＰＳＩを生成するための入力として用いられ、プログラム情報であるＰＡＴ、ＰＭＴが生成される（ステップ２１３）。
【００２９】
以後、ＰＥＳデータ、１４４９６セクションデータ、およびＰＳＩデータはトランスポートストリーム（ＴＳ）パケットにパケット化され（ステップ２１４）、同期化初期値（ｏｆｆｓｅｔ）の入力によりＭＰＥＧ−２音響／画像データと多重化されて、一つのトランスポートストリーム（ＴＳ）に出力される（ステップ２１５）。
【００３０】
図３は、本発明に係るＦｌｅｘＭｕｘパケット化部とパケット化制御部の接続データ形式でＦｌｅｘＭｕｘパケット化されたＭＰＥＧ−４データを表すための一実施例の構造図である。
【００３１】
ＭＰＥＧ−４データを構成するオブジェクトデータは、ＩＯＤ、ＯＤ、場面記述（Scene Description）及び音響／画像コンテンツからなっており、そのうち、ＩＯＤデータは、前記図１のようなオブジェクト分離部１２１から分離されてＰＳＩ生成部１３４に入力される。また、これを除外した残りのデータは、ＳＬパケット化及びＦｌｅｘＭｕｘパケット化されるが、ＦｌｅｘＭｕｘパケット化部１３２とパケット化制御部１３３との間で、接続規格で図３のようなＦｌｅｘＭｕｘデータ形式を用いる。
【００３２】
前記ＦｌｅｘＭｕｘデータ形式は、同期化情報形式と対応する形式であって、これを通してＭＰＥＧ−２データとＭＰＥＧ−４データの同期化具現が可能であり、ＦｌｅｘＭｕｘデータ形式のファイル名の拡張子は．”．ｍｐｅｇ”として定義される。
【００３３】
後述する［表１］は、本発明の好適な実施形態に従い、ＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させるため、ＭＰＥＧ−４データをＰＥＳパケット化することに用いられる同期化情報であり、その形式はＰＴＳ／ＤＴＳ時間値を表している。
【００３４】
前記情報は、図１の同期化情報生成部１２２を介して生成されるが、オブジェクト分離部１２１から入力されたメタ情報であるＣＴＳ／ＤＴＳを数式１と数式２を用いて変換したＰＴＳ／ＤＴＳ時間値と、ＦｌｅｘＭｕｘパケット化部１３２から入力されたＦｌｅｘＭｕｘパケットの長さ情報とを用いて構成する。
【００３５】
【表１】
【００３６】
前記表１の「Ｎ１」は、ＦｌｅｘＭｕｘデータに存在して時間値を有するＦｌｅｘＭｕｘパケットの数を示す。
【００３７】
また、前記［表１］において、″ＦｌｅｘＭｕｘ＿ｐａｃｋｅｔ＿ｌｅｎｇｔｈ″は８ビットに割り当てられ、″Ｎｏ． ｏｆ ｂｉｔｓ″は、同期化情報を表すために図３のＦｌｅｘＭｕｘビット列を構成している各ＦｌｅｘＭｕｘパケットに対する長さ値を示す。実際ＦｌｅｘＭｕｘパケットヘッダを含むＦｌｅｘＭｕｘパケット一つの総長さは２５５バイト以上になり得るが、これはアプリケーションで調整することにより具現可能である。
【００３８】
″ＰＴＳ＿ＤＴＳ＿ｆｌａｇｓ″は、ＰＴＳ、ＤＴＳ情報の存在有無を示し、２ビットに割り当てられる。″０ｘ１０″はＰＴＳ情報が同期化情報ファイルに存在することを意味し、″０ｘ１１″は、ＰＴＳとＤＴＳ情報が同期化情報ファイルに存在することを意味する。また、″０ｘ００″は、ＰＴＳとＤＴＳ情報の全てが同期化情報ファイルに存在しないということを意味し、″０ｘ０１″は用いられない。
【００３９】
６ビットに割り当てられた″ｒｅｓｅｒｖｅｄ″は″１１．１１１１″値を有する。そして、１ビットに割り当てられた″ｍａｒｋｅｒ＿ｂｉｔ″は″１″値を有する。そして、″ＰＴＳ［３２．．３０］″、″ＰＴＳ［２９．．１５］″及び″ＰＴＳ［１４．．０」″は、ＭＰＥＧ−４ ＣＴＳ情報を、数式１を用いて変形した値である。
【００４０】
また、″ＤＴＳ［３２．．３０］″、″ＤＴＳ［２９．．１５］″及び″ＤＴＳ［１４．．０」″は、ＭＰＥＧ−４ ＤＴＳ情報を数式２を用いて変形した値である。
【００４１】
そして、８ビットに割り当てられたｒｅｓｅｒｖｅｄは１１１１．１１１１値を有し、ＰＴＳ、ＤＴＳを拡張するための追加分として用いられる。
【００４２】
【数１】
【００４３】
【数２】
【００４４】
前記数式１と数式２において、ＯＣＲＲｅｓｏｌｕｔｉｏｎ（Object Clock Reference Resolution）は、″９０／ＯＣＲＲｅｓｏｌｕｔｉｏｎ″が、４５ｋＨｚ、３０ｋＨｚ、２２．５ｋＨｚなどとなるような整数値である。すなわち、ＭＰＥＧ−４をＭＰＥＧ−２に同期化させるためには、基本的にＭＰＥＧ−４の時間参照値であるＯＣＲがＭＰＥＧ−２ ＰＣＲ（Program Clock Reference）に連動して動作できるようにすべきであるので、″９０／ＯＣＲＲｅｓｏｌｕｔｉｏｎ″は、ＭＰＥＧ−２とＭＰＥＧ−４の互いに異なる時間参照値を補償するための値である。
【００４５】
前記図１のＰＥＳパケット化部１３６では、構成された同期化情報形式を用いることにより、ＰＥＳパケット化において時間値の入力をより容易にすることができる。すなわち、同期化情報は、ＦｌｅｘＭｕｘデータのメタデータと見なすことができるので、ＰＥＳパケット化の時間値の入力のため、入力ＦｌｅｘＭｕｘデータを別に分析する過程が省略される。ここで、同期化情報形式のファイル拡張子としては、”．ｍｐｅｇ４ｈｉｎｔ”を割り当てた。
【００４６】
後述する［表２」は、本発明に係るＭＰＥＧ−２プログラム構成情報にＭＰＥＧ−４データを表するため、ＭＰＥＧ−４ ＥＳ＿ＩＤとＦｌｅｘＭｕｘチャネルとを互いに接続させるプログラム情報を表す形式を示す。
【００４７】
表２で表現した形式は、図１に示すように、プログラム情報生成部１２３を介して生成されるが、オブジェクト分離部１２１から入力されたメタ情報であるＭＰＥＧ−４オブジェクトデータに対するＥＳ＿ＩＤと、ＦｌｅｘＭｕｘパケット化部１３２から入力されたＦｌｅｘＭｕｘチャネルとを互いに接続させて構成する。ＰＳＩ生成部１３４では、構成されたプログラム情報形式を用いることにより、プログラム構成情報の一つであるＰＭＴを生成する時、ＭＰＥＧ−４データのために必要なＦＭＣ（ＦｌｅｘＭｕｘＣｈａｎｎｅｌ）＿ディスクリプタ（Ｄｅｓｃｒｉｐｔｏｒ）構成をさらに容易にすることができる。すなわち、プログラム情報生成部１２３ではプログラム情報を生成することにより、ＰＳＩ生成部１３４でＰＭＴ生成の際、別のユーザ入力、または別のＦｌｅｘＭｕｘデータの分析なしに自動にＭＰＥＧ−４オブジェクトデータに対するＥＳ＿ＩＤ及びＦｌｅｘＭｕｘチャネルを割り当てることができるようにする。ここで、プログラム情報形式の拡張子字は．”．ｆｍｃ”で割り当てた。
【００４８】
【表２】
【００４９】
前記表２においてＮ２は、定義されるべきＦｌｅｘＭｕｘチャネルの数を示す。
【００５０】
１６ビットに割り当てられたＥＳ＿ＩＤ（１６ｂｉｔｓ）は、プログラム情報を表すため、ＭＰＥＧ−４オブジェクトデータを認識するための値（ＩＤ）を示す。
【００５１】
８ビットに割り当てられたＦｌｅｘＭｕｘチャネルは、前記図３のＦｌｅｘＭｕｘビット列を構成している各ＦｌｅｘＭｕｘパケットに用いられるＦｌｅｘＭｕｘチャネル（FlexMux Channel）の数を示す。この場合、ＦｌｅｘＭｕｘパケットヘッダに存在する最初８ビットのインデックス（index）値がＦｌｅｘＭｕｘチャネルの値となる。
【００５２】
本発明で提案する多重化方式は次の通りである。ＭＰＥＧ−４データはＳＬ／ＦｌｅｘＭｕｘパケット化される場合、自ら時間情報を有する同期（Synchronous）データであるので、ＭＰＥＧ−４データであるｍｐ４ファイル形式で格納されている場合、最初の時間参照値であるＯＣＲ（Object Clock Reference）が０と設定される。しかし、ＭＰＥＧ−２データの時間参照値はこれに比べて絶対的な値であるため、ＭＰＥＧ−４データをＭＰＥＧ−２データと多重化する場合には、ＰＥＳパケット化されたＭＰＥＧ−４データのＰＴＳ／ＤＴＳ時間値に同期化のための多重化初期値を入力し、この値をＭＰＥＧ−４時間値であるＰＴＳ／ＤＴＳ値に再度足して補正しなければＭＰＥＧ−２データに対して同期化は具現できない。すなわち、絶対的な時間値を有するＭＰＥＧ−２データと相対的な時間値を有するＭＰＥＧ−４データとの同期化のため、多重化初期値をＭＰＥＧ−４データの挿入地点として用いて２種類のデータを同期化し、これを式で表すと次の数式３及び数式４の通りである。
【００５３】
【数３】
【００５４】
【数４】
【００５５】
前記数式１と数式２を数式３と数式４に各々代入して表すと、次の数式５及び数式６のように表すことができる。
【００５６】
【数５】
【００５７】
【数６】
【００５８】
参考に数式６において、等号の左側項はＭＰＥＧ−２システム規格のＤＴＳ（ｔ）を表し、右側項はＭＰＥＧ−４システム規格のＤＴＳ（ｔ）を表す。
【００５９】
図４は、本発明に係るＭＰＥＧ−４データをＰＥＳ（Packetized Elementary Stream）パケットにパケット化して同期化するための時間値の入力に対する一実施例説明図である。
【００６０】
図４では、ＭＰＥＧ−２ ＰＣＲとＭＰＥＧ−４ ＯＣＲが互いに同じ９０ｋＨｚの解像度を有すると仮定して、上記の数式１ないし数式６を適用した。
【００６１】
前記のような過程により、ＭＰＥＧ−２データとこれに関連したＭＰＥＧ−４データの同期化が可能であり、これによりユーザ端末ではユーザが希望する時間に付加情報であるＭＰＥＧ−４データを出力できる。
【００６２】
上述したように本発明の方法は、プログラムで具現され、コンピュータで読み出すことのできる形態に記録媒体（ＣＤ−ＲＯＭ、ＲＡＭ、ＲＯＭ、フロッピー(登録商標)ディスク、ハードディスク、光磁気ディスク等）に格納することができる。
【００６３】
前記のような本発明は、デジタル放送で付加情報として用いられるＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する具体的な具現方法を提案することにより、対話型機能を有するＭＰＥＧ−４データのリアルタイム伝送及び任意の時間にユーザのランダムアクセスを可能にし、前記２種類データの活用性を高めることができる効果がある。
【００６４】
なお、本発明は、上記の実施例として開示した範囲に限定されるものではない。本発明に係る技術的思想から逸脱しない範囲内で多くの改良、変更が可能であり、それらも本発明の技術的範囲に属する。
【図面の簡単な説明】
【００６５】
【図１】本発明に係るＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させて伝送する装置の一実施例の構成図である。
【図２】本発明に係るＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させて伝送する方法に関する一実施例の処理フローチャートである。
【図３】本発明に係るＦｌｅｘＭｕｘパケット化部とパケット化制御部の接続データ形式でＦｌｅｘＭｕｘパケット化されたＭＰＥＧ−４データを表す一実施例の構造図である。
【図４】本発明に係るＭＰＥＧ−４データをＰＥＳ（Packetized Elementary Stream）パケットにパケット化して同期化するための時間値の入力に対する一実施例の説明図である。
【０００１】
本発明は、デジタル放送用マルチメディアデータであるＭＰＥＧ−２音響／画像データに付加データとして用いられることのできるＭＰＥＧ−４データを同期化させて伝送して、アプリケーション（application）で活用するようにする装置及びその方法と、それを実現させるプログラムを記録したコンピュータで読み出すことのできる記録媒体に関する。
【背景技術】
【０００２】
放送／通信／格納媒体用音響／画像データであるＭＰＥＧ−２データに対して、伝送速度６４Ｋｂｐｓ以下のデジタル音響／画像データであるＭＰＥＧ−４データを同期化させるということに対して、従来の技術においては、概念的な技術方法のみが扱われてきていた。しかし、現在までＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させるための具現方法とＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させて伝送するための全体システムは提案されていない。したがって、実質的に前記のようなＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させて伝送するサービスがなされていないという問題点がある。
【発明の開示】
【発明が解決しようとする課題】
【０００３】
本発明は、上述したような問題点に鑑みてなされたものであって、その目的とするところは、放送／通信／格納媒体用音響／画像データであるＭＰＥＧ−２データに対して、デジタル音響／画像データであるＭＰＥＧ−４データを同期化させて伝送する装置及びその方法と、前記方法を実現させるためのプログラムを記録したコンピュータで読み出すことのできる記録媒体を提供することである。
【課題を解決するための手段】
【０００４】
そこで、前記目的を達成するため、本発明は、ＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する装置において、ＭＰＥＧ−４データの格納型であるＭｐ４データを入力して各ＭＰＥＧ−４オブジェクトデータを抽出し、前記オブジェクトデータと関連したメタ情報を解析して分離し、プログラム情報及び同期化情報を生成するオブジェクト分離及び情報生成手段と、前記オブジェクト分離及び情報生成手段から抽出されたＭＰＥＧ−４オブジェクトデータをＭＰＥＧ−２データと同期化するため、前記オブジェクト分離及び情報生成手段から生成されたプログラム情報及び同期化情報を用いて、ＭＰＥＧ−４オブジェクトデータをＭＰＥＧ−２形式のパケットに変換するパケット化手段と、前記パケット化手段でパケット化されたＭＰＥＧ−４データをＭＰＥＧ−２データと多重化するプログラム多重化手段とを含むことを特徴とする。
【０００５】
一方、本発明は、ＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する方法において、ＭＰＥＧ−４データの格納型であるＭｐ４データを入力されて各ＭＰＥＧ−４オブジェクトデータを抽出し、それと関連したメタ情報を解析して分離する第１ステップと、前記第１ステップで抽出されたメタ情報を利用してＭＰＥＧ−４オブジェクトデータを第１パケット化する第２ステップと、前記第１ステップで抽出されたメタ情報と前記第２ステップのパケット化過程で生成された情報を用いて、同期化情報及びプログラム情報を生成する第３ステップと、前記第３ステップで生成された情報と前記第１ステップで分離されたメタ情報を用いて、前記第２ステップでパケット化されたＭＰＥＧ−４データを第２パケット化する第４ステップと、前記第４ステップでパケット化されたＭＰＥＧ−４データをＭＰＥＧ−２データと多重化する第５ステップとを含むことを特徴とする。
【０００６】
一方、本発明は、ＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させるため、大容量プロセッサを備えた同期化装置に、ＭＰＥＧ−４データの格納形形式であるＭｐ４データを入力されて、各ＭＰＥＧ−４オブジェクトデータを抽出し、それと関連したメタ情報を解析して分離する第１機能と、前記第１機能により抽出されたメタ情報を用いてＭＰＥＧ−４オブジェクトデータを第１パケット化する第２機能と、前記第１機能により抽出されたメタ情報と前記第２機能のパケット化過程で生成された情報とを用いて、同期化情報及びプログラム情報を生成する第３機能と、前記第３機能により生成された情報と前記第１機能により分離されたメタ情報とを用いて、前記第２機能によりパケット化されたＭＰＥＧ−４データを第２パケット化する第４機能と、前記第４機能によりパケット化されたＭＰＥＧ−４データをＭＰＥＧ−２データと多重化する第５機能とを提供する。
【発明を実施するための最良の形態】
【０００７】
以下、添付する図面を参照しながら本発明に係る好ましい一実施例を詳細に説明する。
【０００８】
図１は、本発明に係るＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させて伝送する装置の一実施例の構成図である。
【０００９】
図１に示すように、本発明に係るＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させて伝送する装置は、ＭＰＥＧ−４データの格納型であるｍｐ４データを入力されて各ＭＰＥＧ−４オブジェクトデータを抽出し、前記オブジェクトデータと関連したメタ情報を解析して分離し、プログラム情報及び同期化情報を生成するオブジェクト分離及び情報生成部１２、前記オブジェクト分離及び情報生成部１２から抽出されたＭＰＥＧ−４オブジェクトデータをＭＰＥＧ−２データと同期化するため、前記オブジェクト分離及び情報生成部１２から生成されたプログラム情報及び同期化情報を用いてＭＰＥＧ−４オブジェクトデータをＭＰＥＧ−２形式のパケットに変換するパケット化部１３及び前記パケット化部１３からパケット化されたＭＰＥＧ−４データをＭＰＥＧ−２音響／画像データと多重化するプログラム多重化部１４を含む。
【００１０】
前記オブジェクト分離及び情報生成部１２は、オブジェクト分離部１２１、同期化情報生成部１２２及びプログラム情報生成部１２３を含み、以下その詳細動作について述べる。
【００１１】
オブジェクト分離部１２１は、データベース１１からＭＰＥＧ−４の格納型であるｍｐ４ファイルを受信する。データベース１１は、メディアデータとメタ情報とから構成されたｍｐ４ファイルを格納する。オブジェクト分離部１２１は、受信されたｍｐ４ファイルからＭＰＥＧ−４オブジェクトデータを抽出し、それと関連したメタ情報であるメディアデータの種類、位置、特性、大きさなどを分析し、また抽出されたＭＰＥＧ−４オブジェクトデータのうち、ＭＰＥＧ−４ ＩＯＤ（Initial Object Descriptor、以下、ＩＯＤと記す）データはＰＳＩ（Program Specific Information、以下、ＰＳＩと記す）生成部１３４に出力し、抽出されたメタ情報のうちＣＴＳ（Composition Time Stamp、以下、ＣＴＳと記す）／ＤＴＳ（Decoding Time Stamp、以下、ＤＴＳと記す）情報は同期化情報生成部１２２に出力し、抽出されたメタ情報のうちＥＳ＿ＩＤ（Elementary Stream Identifier、以下、ＥＳ＿ＩＤと記す）情報はプログラム情報生成部１２３に出力し、その他のオブジェクトデータとメタ情報はＳＬ（Sync Layer、以下、ＳＬと記す）パケット化部１３１に出力する。
【００１２】
そして、同期化情報生成部１２２は、オブジェクト分離部１２１から入力されたメタ情報であるＣＴＳ／ＤＴＳを、ＭＰＥＧ−２時間値であるＰＴＳ（Presentation Time Stamp、以下、ＰＴＳと記す）／ＤＴＳ値に変換する。また、同期化情報生成部１２２は、変換されたＰＴＳ／ＤＴＳ時間値とＦｌｅｘＭｕｘ（Flexible Multiplex）パケット化部１３２から入力されたＦｌｅｘＭｕｘパケットの長さ情報を用いて、下記の［表１］のような形式の同期化情報を生成し、これをＰＥＳ（Packetized Elementary Stream、以下、ＰＥＳと記す）パケット化部１３６に出力する。
【００１３】
そして、プログラム情報生成部１２３は、オブジェクト分離部１２１から入力されたメタ情報であるＥＳ＿ＩＤとＦｌｅｘＭｕｘパケット化部１３２から入力されたＦｌｅｘＭｕｘチャネル（FlexMux Channel）とを互いに接続させて、下記の［表２］のような形式のプログラム情報を生成し、これをＰＳＩ生成部１３４に出力する。
【００１４】
次いで、パケット化部１３は、ＳＬパケット化部１３１、ＦｌｅｘＭｕｘパケット化部１３２、パケット化制御部１３３、ＰＳＩ生成部１３４、１４４９６セクション（Section）パケット化部１３５、ＰＥＳパケット化部１３６及びトランスポートストリーム（ＴＳ：Transport Stream）パケット化部１３７を含み、以下にその詳細動作について述べる。
【００１５】
前記ＳＬパケット化部１３１は、オブジェクト分離部１２１から入力されたＭＰＥＧ−４オブジェクトデータ及びメタ情報をＳＬパケットにパケット化してＦｌｅｘＭｕｘパケット化部１３２に出力する。ここで、ＳＬパケットは、ＭＰＥＧ−４の各オブジェクトデータ間の同期化のためにＭＰＥＧ−４システム規格で定義したものであって、ヘッダとペイロード（payload）から構成される。ヘッダは、ＭＰＥＧ−４オブジェクトデータを任意の時間に表現できるようにする時間情報、シーケンス情報を有し、ペイロードは、ＭＰＥＧ−４オブジェクトデータをアクセスユニット単位で有する。ＩＯＤは、ＯＤ（Object Descriptor、以下、ＯＤと記す）とＢＩＦＳ（Binary Format for Scene、以下、ＢＩＦＳと記す）を接続させるポインタの役割をするので、ＳＬパケット化することができない。
【００１６】
そして、ＦｌｅｘＭｕｘパケット化部１３２は、ＳＬパケット化部１３１から入力されたＳＬパケットをＦｌｅｘＭｕｘパケットにパケット化し、これを下記の図３のような形式でパケット化制御部１３３に出力し、ＦｌｅｘＭｕｘパケット化過程で生成されるＦｌｅｘＭｕｘパケットの長さ及びＦｌｅｘＭｕｘチャネル情報をプログラム情報生成部１２３と同期化情報生成部１２２に出力する。ここで、ＦｌｅｘＭｕｘパケットは、ＭＰＥＧ−４システム規格で定義するオプション多重化方式により、ＳＬパケット化された多数のストリームを同時に多重化する時、オーバーヘッドを低減するか、論理チャネルの不足を補充するために用いられる。ＦｌｅｘＭｕｘパケットはヘッダとペイロードから構成され、この時ペイロードは必ず完全なＳＬパケットを含まなければならない。ＦｌｅｘＭｕｘパケット化モードは２種類が存在し、その一つは、一つのＳＬパケットをＦｌｅｘＭｕｘペイロードに含むシンプルモード（Simple Mode）であり、残り一つは複数のＳＬパケットをＦｌｅｘＭｕｘペイロードに含む多重化コードモード（MuxCode Mode）である。
【００１７】
また、パケット化制御部１３３、ＦｌｅｘＭｕｘパケット化部１３２から入力されたＦｌｅｘＭｕｘパケットを分析して、ＭＰＥＧ−２データと、同期化が必要なＢＩＦＳ−アニメーション（ａｎｉｍａｔｉｏｎ）データおよび音響／画像データはＰＥＳパケット化部１３６に、同期化を必要としないＢＩＦＳ−命令（command）データ、ＯＤデータは１４４９６セクションパケット化部１３５に出力する。
【００１８】
また、ＰＳＩ生成部１３４は、プログラム情報生成部１２３から入力されたプログラム情報を用いてＭＰＥＧ−４と関連したディスクリプタ（descriptor）を構成し、構成されたディスクリプタとオブジェクト分離部１２１から入力されたＩＯＤデータを用いて、ＭＰＥＧ−２及びＭＰＥＧ−４データを全て収容できるＰＭＴ（Program Map Table、以下、ＰＭＴと記す）を生成して、トランスポートストリーム（ＴＳ）パケット化部１３７に出力する。また、ＰＭＴの位置情報を表すＰＡＴ（Program Association Table、以下、ＰＡＴと記す）を生成して、トランスポートストリーム（ＴＳ）パケット化部１３７に出力する。
【００１９】
そして、１４４９６セクションパケット化部１３５は、パケット化制御部１３３から入力されたＦｌｅｘＭｕｘデータを１４４９６セクションにパケット化し、これを再度トランスポートストリーム（ＴＳ）パケット化部１３７に出力する。
【００２０】
そして、ＰＥＳパケット化部１３６は、同期化情報生成部１２２から入力された同期化情報を用いて、パケット化制御部１３３から入力された同期化が必要なＦｌｅｘＭｕｘデータをＰＥＳパケットにパケット化して、これを再度トランスポートストリーム（ＴＳ）パケット化部１３７に出力する。
【００２１】
そして、トランスポートストリーム（ＴＳ）パケット化部１３７は、ＰＳＩ生成部１３４から入力されたＰＳＩ情報であるＰＡＴ、ＰＭＴパケットと１４４９６セクションパケット化部１３５から入力された１４４９６セクションパケット化されたＭＰＥＧ−４データ、及びＰＥＳパケット化部１３６から入力されたＰＥＳパケット化されたＭＰＥＧ−４データ、をトランスポートストリーム（ＴＳ）パケット化し、これを再度プログラム多重化部１４に出力する。
【００２２】
一方、プログラム多重化部１４は、トランスポートストリーム（ＴＳ）パケット化部１３７から入力されたＭＰＥＧ−４トランスポートストリーム（ＴＳ）パケットと外部から入力されたＭＰＥＧ−２音響／画像データを一つのトランスポートストリーム（ＴＳ）に多重化する役割をする。この場合、プログラム多重化部１４は、同期化初期値（Offset）を入力して、これを二つのトランスポートストリーム（ＴＳ）を一つのトランスポートストリーム（ＴＳ）に多重化するパラメータ値として用いる。
【００２３】
図２は、本発明に係るＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させて伝送する方法に関する一実施例の処理フローチャートである。
【００２４】
まず、データベースに格納されたＭｐ４ファイルが入力されると（ステップ２０１）、入力されたＭｐ４データはＭＰＥＧ−４オブジェクトデータに分離され（ステップ２１）、この過程で各オブジェクトデータの、ＩＯＤ（ステップ２０２）、ＥＳ＿ＩＤ（ステップ２０４）、ＣＴＳ／ＤＴＳ（ステップ２０３）などのようなメタ情報値も抽出される。抽出されたデータのうち、ＩＯＤデータはＰＳＩ生成に用いられ（ステップ２１３）、その他のオブジェクト分離過程において抽出されたメタ情報を用いて、ＯＤ、ＢＩＦＳ、音響／画像コンテンツデータを、ＳＬパケット化する（ステップ２０５）。
【００２５】
以後、ＳＬパケット化されたデータは、再度ＦｌｅｘＭｕｘパケット化される（ステップ２２）。このＦｌｅｘＭｕｘパケット化過程では、メタ情報であるＦｌｅｘＭｕｘパケット長さ２０８とＦｌｅｘＭｕｘチャネル情報２０９が生成される。
【００２６】
以後、オブジェクト分離過程で抽出されたＣＴＳ／ＤＴＳ値と、ＦｌｅｘＭｕｘパケット化過程で生成されたＦｌｅｘＭｕｘパケットの長さ情報は、同期化情報を生成するためのデータとして入力されて同期化情報が生成され（ステップ２０６）、オブジェクト分離過程で抽出されたＥＳ＿ＩＤ値とＦｌｅｘＭｕｘパケット化過程で生成されたＦｌｅｘＭｕｘチャネル値は、プログラム情報を生成するためのデータとして入力されてプログラム情報が生成される（ステップ２０７）。
【００２７】
また、ＦｌｅｘＭｕｘパケット化されたデータは、ＭＰＥＧ−２データと同期化が必要な場合（ステップ２１０）、同期化情報を用いてＰＥＳパケットにパケット化し（ステップ２１１）、同期化を必要としない場合（ステップ２１０）、１４４９６セクションにパケット化される（ステップ２１２）。
【００２８】
また、オブジェクト抽出過程で抽出されたＩＯＤは、プログラム情報（ステップ２０７）と共にＰＳＩを生成するための入力として用いられ、プログラム情報であるＰＡＴ、ＰＭＴが生成される（ステップ２１３）。
【００２９】
以後、ＰＥＳデータ、１４４９６セクションデータ、およびＰＳＩデータはトランスポートストリーム（ＴＳ）パケットにパケット化され（ステップ２１４）、同期化初期値（ｏｆｆｓｅｔ）の入力によりＭＰＥＧ−２音響／画像データと多重化されて、一つのトランスポートストリーム（ＴＳ）に出力される（ステップ２１５）。
【００３０】
図３は、本発明に係るＦｌｅｘＭｕｘパケット化部とパケット化制御部の接続データ形式でＦｌｅｘＭｕｘパケット化されたＭＰＥＧ−４データを表すための一実施例の構造図である。
【００３１】
ＭＰＥＧ−４データを構成するオブジェクトデータは、ＩＯＤ、ＯＤ、場面記述（Scene Description）及び音響／画像コンテンツからなっており、そのうち、ＩＯＤデータは、前記図１のようなオブジェクト分離部１２１から分離されてＰＳＩ生成部１３４に入力される。また、これを除外した残りのデータは、ＳＬパケット化及びＦｌｅｘＭｕｘパケット化されるが、ＦｌｅｘＭｕｘパケット化部１３２とパケット化制御部１３３との間で、接続規格で図３のようなＦｌｅｘＭｕｘデータ形式を用いる。
【００３２】
前記ＦｌｅｘＭｕｘデータ形式は、同期化情報形式と対応する形式であって、これを通してＭＰＥＧ−２データとＭＰＥＧ−４データの同期化具現が可能であり、ＦｌｅｘＭｕｘデータ形式のファイル名の拡張子は．”．ｍｐｅｇ”として定義される。
【００３３】
後述する［表１］は、本発明の好適な実施形態に従い、ＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させるため、ＭＰＥＧ−４データをＰＥＳパケット化することに用いられる同期化情報であり、その形式はＰＴＳ／ＤＴＳ時間値を表している。
【００３４】
前記情報は、図１の同期化情報生成部１２２を介して生成されるが、オブジェクト分離部１２１から入力されたメタ情報であるＣＴＳ／ＤＴＳを数式１と数式２を用いて変換したＰＴＳ／ＤＴＳ時間値と、ＦｌｅｘＭｕｘパケット化部１３２から入力されたＦｌｅｘＭｕｘパケットの長さ情報とを用いて構成する。
【００３５】
【表１】
前記表１の「Ｎ１」は、ＦｌｅｘＭｕｘデータに存在して時間値を有するＦｌｅｘＭｕｘパケットの数を示す。
【００３７】
また、前記［表１］において、″ＦｌｅｘＭｕｘ＿ｐａｃｋｅｔ＿ｌｅｎｇｔｈ″は８ビットに割り当てられ、″Ｎｏ． ｏｆ ｂｉｔｓ″は、同期化情報を表すために図３のＦｌｅｘＭｕｘビット列を構成している各ＦｌｅｘＭｕｘパケットに対する長さ値を示す。実際ＦｌｅｘＭｕｘパケットヘッダを含むＦｌｅｘＭｕｘパケット一つの総長さは２５５バイト以上になり得るが、これはアプリケーションで調整することにより具現可能である。
【００３８】
″ＰＴＳ＿ＤＴＳ＿ｆｌａｇｓ″は、ＰＴＳ、ＤＴＳ情報の存在有無を示し、２ビットに割り当てられる。″０ｘ１０″はＰＴＳ情報が同期化情報ファイルに存在することを意味し、″０ｘ１１″は、ＰＴＳとＤＴＳ情報が同期化情報ファイルに存在することを意味する。また、″０ｘ００″は、ＰＴＳとＤＴＳ情報の全てが同期化情報ファイルに存在しないということを意味し、″０ｘ０１″は用いられない。
【００３９】
６ビットに割り当てられた″ｒｅｓｅｒｖｅｄ″は″１１．１１１１″値を有する。そして、１ビットに割り当てられた″ｍａｒｋｅｒ＿ｂｉｔ″は″１″値を有する。そして、″ＰＴＳ［３２．．３０］″、″ＰＴＳ［２９．．１５］″及び″ＰＴＳ［１４．．０」″は、ＭＰＥＧ−４ ＣＴＳ情報を、数式１を用いて変形した値である。
【００４０】
また、″ＤＴＳ［３２．．３０］″、″ＤＴＳ［２９．．１５］″及び″ＤＴＳ［１４．．０」″は、ＭＰＥＧ−４ ＤＴＳ情報を数式２を用いて変形した値である。
【００４１】
そして、８ビットに割り当てられたｒｅｓｅｒｖｅｄは１１１１．１１１１値を有し、ＰＴＳ、ＤＴＳを拡張するための追加分として用いられる。
【００４２】
【数１】
【数２】
前記数式１と数式２において、ＯＣＲＲｅｓｏｌｕｔｉｏｎ（Object Clock Reference Resolution）は、″９０／ＯＣＲＲｅｓｏｌｕｔｉｏｎ″が、４５ｋＨｚ、３０ｋＨｚ、２２．５ｋＨｚなどとなるような整数値である。すなわち、ＭＰＥＧ−４をＭＰＥＧ−２に同期化させるためには、基本的にＭＰＥＧ−４の時間参照値であるＯＣＲがＭＰＥＧ−２ ＰＣＲ（Program Clock Reference）に連動して動作できるようにすべきであるので、″９０／ＯＣＲＲｅｓｏｌｕｔｉｏｎ″は、ＭＰＥＧ−２とＭＰＥＧ−４の互いに異なる時間参照値を補償するための値である。
【００４５】
前記図１のＰＥＳパケット化部１３６では、構成された同期化情報形式を用いることにより、ＰＥＳパケット化において時間値の入力をより容易にすることができる。すなわち、同期化情報は、ＦｌｅｘＭｕｘデータのメタデータと見なすことができるので、ＰＥＳパケット化の時間値の入力のため、入力ＦｌｅｘＭｕｘデータを別に分析する過程が省略される。ここで、同期化情報形式のファイル拡張子としては、”．ｍｐｅｇ４ｈｉｎｔ”を割り当てた。
【００４６】
後述する［表２」は、本発明に係るＭＰＥＧ−２プログラム構成情報にＭＰＥＧ−４データを表するため、ＭＰＥＧ−４ ＥＳ＿ＩＤとＦｌｅｘＭｕｘチャネルとを互いに接続させるプログラム情報を表す形式を示す。
【００４７】
表２で表現した形式は、図１に示すように、プログラム情報生成部１２３を介して生成されるが、オブジェクト分離部１２１から入力されたメタ情報であるＭＰＥＧ−４オブジェクトデータに対するＥＳ＿ＩＤと、ＦｌｅｘＭｕｘパケット化部１３２から入力されたＦｌｅｘＭｕｘチャネルとを互いに接続させて構成する。ＰＳＩ生成部１３４では、構成されたプログラム情報形式を用いることにより、プログラム構成情報の一つであるＰＭＴを生成する時、ＭＰＥＧ−４データのために必要なＦＭＣ（ＦｌｅｘＭｕｘＣｈａｎｎｅｌ）＿ディスクリプタ（Ｄｅｓｃｒｉｐｔｏｒ）構成をさらに容易にすることができる。すなわち、プログラム情報生成部１２３ではプログラム情報を生成することにより、ＰＳＩ生成部１３４でＰＭＴ生成の際、別のユーザ入力、または別のＦｌｅｘＭｕｘデータの分析なしに自動にＭＰＥＧ−４オブジェクトデータに対するＥＳ＿ＩＤ及びＦｌｅｘＭｕｘチャネルを割り当てることができるようにする。ここで、プログラム情報形式の拡張子字は．”．ｆｍｃ”で割り当てた。
【００４８】
【表２】
前記表２においてＮ２は、定義されるべきＦｌｅｘＭｕｘチャネルの数を示す。
【００５０】
１６ビットに割り当てられたＥＳ＿ＩＤ（１６ｂｉｔｓ）は、プログラム情報を表すため、ＭＰＥＧ−４オブジェクトデータを認識するための値（ＩＤ）を示す。
【００５１】
８ビットに割り当てられたＦｌｅｘＭｕｘチャネルは、前記図３のＦｌｅｘＭｕｘビット列を構成している各ＦｌｅｘＭｕｘパケットに用いられるＦｌｅｘＭｕｘチャネル（FlexMux Channel）の数を示す。この場合、ＦｌｅｘＭｕｘパケットヘッダに存在する最初８ビットのインデックス（index）値がＦｌｅｘＭｕｘチャネルの値となる。
【００５２】
本発明で提案する多重化方式は次の通りである。ＭＰＥＧ−４データはＳＬ／ＦｌｅｘＭｕｘパケット化される場合、自ら時間情報を有する同期（Synchronous）データであるので、ＭＰＥＧ−４データであるｍｐ４ファイル形式で格納されている場合、最初の時間参照値であるＯＣＲ（Object Clock Reference）が０と設定される。しかし、ＭＰＥＧ−２データの時間参照値はこれに比べて絶対的な値であるため、ＭＰＥＧ−４データをＭＰＥＧ−２データと多重化する場合には、ＰＥＳパケット化されたＭＰＥＧ−４データのＰＴＳ／ＤＴＳ時間値に同期化のための多重化初期値を入力し、この値をＭＰＥＧ−４時間値であるＰＴＳ／ＤＴＳ値に再度足して補正しなければＭＰＥＧ−２データに対して同期化は具現できない。すなわち、絶対的な時間値を有するＭＰＥＧ−２データと相対的な時間値を有するＭＰＥＧ−４データとの同期化のため、多重化初期値をＭＰＥＧ−４データの挿入地点として用いて２種類のデータを同期化し、これを式で表すと次の数式３及び数式４の通りである。
【００５３】
【数３】
【数４】
前記数式１と数式２を数式３と数式４に各々代入して表すと、次の数式５及び数式６のように表すことができる。
【００５６】
【数５】
【数６】
参考に数式６において、等号の左側項はＭＰＥＧ−２システム規格のＤＴＳ（ｔ）を表し、右側項はＭＰＥＧ−４システム規格のＤＴＳ（ｔ）を表す。
【００５９】
図４は、本発明に係るＭＰＥＧ−４データをＰＥＳ（Packetized Elementary Stream）パケットにパケット化して同期化するための時間値の入力に対する一実施例説明図である。
【００６０】
図４では、ＭＰＥＧ−２ ＰＣＲとＭＰＥＧ−４ ＯＣＲが互いに同じ９０ｋＨｚの解像度を有すると仮定して、上記の数式１ないし数式６を適用した。
【００６１】
前記のような過程により、ＭＰＥＧ−２データとこれに関連したＭＰＥＧ−４データの同期化が可能であり、これによりユーザ端末ではユーザが希望する時間に付加情報であるＭＰＥＧ−４データを出力できる。
【００６２】
上述したように本発明の方法は、プログラムで具現され、コンピュータで読み出すことのできる形態に記録媒体（ＣＤ−ＲＯＭ、ＲＡＭ、ＲＯＭ、フロッピー(登録商標)ディスク、ハードディスク、光磁気ディスク等）に格納することができる。
【００６３】
前記のような本発明は、デジタル放送で付加情報として用いられるＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する具体的な具現方法を提案することにより、対話型機能を有するＭＰＥＧ−４データのリアルタイム伝送及び任意の時間にユーザのランダムアクセスを可能にし、前記２種類データの活用性を高めることができる効果がある。
【００６４】
なお、本発明は、上記の実施例として開示した範囲に限定されるものではない。本発明に係る技術的思想から逸脱しない範囲内で多くの改良、変更が可能であり、それらも本発明の技術的範囲に属する。
【図面の簡単な説明】
【００６５】
【図１】本発明に係るＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させて伝送する装置の一実施例の構成図である。
【図２】本発明に係るＭＰＥＧ−２データにＭＰＥＧ−４データを同期化させて伝送する方法に関する一実施例の処理フローチャートである。
【図３】本発明に係るＦｌｅｘＭｕｘパケット化部とパケット化制御部の接続データ形式でＦｌｅｘＭｕｘパケット化されたＭＰＥＧ−４データを表す一実施例の構造図である。
【図４】本発明に係るＭＰＥＧ−４データをＰＥＳ（Packetized Elementary Stream）パケットにパケット化して同期化するための時間値の入力に対する一実施例の説明図である。
Claims (13)
- ＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する装置において、
ＭＰＥＧ−４データの格納型であるＭｐ４データを入力して各ＭＰＥＧ−４オブジェクトデータを抽出し、前記オブジェクトデータと関連したメタ情報を解析して分離し、プログラム情報及び同期化情報を生成するオブジェクト分離及び情報生成手段と、
前記オブジェクト分離及び情報生成手段から抽出されたＭＰＥＧ−４オブジェクトデータをＭＰＥＧ−２データと同期化するため、前記オブジェクト分離及び情報生成手段から生成されたプログラム情報及び同期化情報を用いて、ＭＰＥＧ−４オブジェクトデータをＭＰＥＧ−２形式のパケットに変換するパケット化手段と、
前記パケット化手段でパケット化されたＭＰＥＧ−４データをＭＰＥＧ−２データと多重化するプログラム多重化手段と
を含むことを特徴とするＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する装置。 - 前記オブジェクト分離及び情報生成手段は、
ＭＰＥＧ−４データの格納型であるＭｐ４データを入力されて各ＭＰＥＧ−４オブジェクトデータを抽出し、それと関連したメタ情報を解析して分離するオブジェクト分離手段と、
前記オブジェクト分離手段から抽出されたメタ情報であるＣＴＳ（Composition Time Stamp）／ＤＴＳ（Decoding Time Stamp）情報と、前記パケット化手段から抽出されたＦｌｅｘＭｕｘパケットヘッダ情報であるＦｌｅｘＭｕｘパケットの長さ情報を用いて、同期化情報を生成する同期化情報生成手段と、
前記オブジェクト分離手段から抽出されたメタ情報であるＥＳ＿ＩＤ情報と、前記パケット化手段から抽出されたＦｌｅｘＭｕｘパケットヘッダ情報であるＦｌｅｘＭｕｘチャネル情報とを用いて、プログラム情報を生成するプログラム情報生成手段と
を含むことを特徴とする請求項１に記載のＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する装置。 - 前記パケット化手段は、
前記オブジェクト分離手段から抽出されたメタ情報を用いて、ＭＰＥＧ−４オブジェクトデータをＳＬ（Sync Layer）パケット化するＳＬパケット化手段と、
前記ＳＬパケット化手段からＳＬパケット化されたデータをＦｌｅｘＭｕｘパケット化するＦｌｅｘＭｕｘパケット化手段と、
前記ＦｌｅｘＭｕｘパケット化手段でＦｌｅｘＭｕｘパケット化されたＭＰＥＧ−４データをＰＥＳ（Packetized Elementary Stream）パケット化するか、あるいは１４４９６セクションにパケット化できるように制御するパケット化制御手段と、
前記パケット化制御手段により制御されたＭＰＥＧ−４データを前記同期化情報生成手段から生成された同期化情報を用いてＰＥＳパケット化するＰＥＳパケット化手段と、
前記パケット化制御手段により制御されたＭＰＥＧ−４データを１４４９６セクションパケット化する１４４９６セクションパケット化手段と、
前記オブジェクト分離手段から抽出されたメタ情報であるＩＯＤ（Initial Object Descriptor）情報と前記プログラム情報生成手段から生成されたプログラム情報を用いて、ＰＳＩ（Program Specific Information）を生成するＰＳＩ生成手段と、
前記ＰＥＳパケット化手段から生成されたＰＥＳパケット、前記１４４９６セクションパケット化手段から生成された１４４９６セクションパケット及び前記ＰＳＩ生成手段から生成されたＰＳＩをＭＰＥＧ−４トランスポートストリーム（ＴＳ：Time Stamp）にパケット化するトランスポートストリーム（ＴＳ）パケット化手段と
を含むことを特徴とする請求項１または２に記載のＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する装置。 - ＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する方法において、
ＭＰＥＧ−４データの格納型であるＭｐ４データを入力されて各ＭＰＥＧ−４オブジェクトデータを抽出し、それと関連したメタ情報を解析して分離する第１ステップと、
前記第１ステップで抽出されたメタ情報を利用してＭＰＥＧ−４オブジェクトデータを第１パケット化する第２ステップと、
前記第１ステップで抽出されたメタ情報と前記第２ステップのパケット化過程で生成された情報とを用いて、同期化情報及びプログラム情報を生成する第３ステップと、
前記第３ステップで生成された情報と前記第１ステップで分離されたメタ情報を用いて、前記第２ステップでパケット化されたＭＰＥＧ−４データを第２パケット化する第４ステップと、
前記第４ステップでパケット化されたＭＰＥＧ−４データをＭＰＥＧ−２データと多重化する第５ステップと
を含むことを特徴とするＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する方法。 - 前記第２ステップは、
前記第１ステップで分離されたメタ情報を用いて、ＭＰＥＧ−４データをＳＬパケットにパケット化する第６ステップと、
前記第６ステップでＳＬパケット化されたデータをＦｌｅｘＭｕｘパケット化する第７ステップと
を含むことを特徴とする請求項４に記載のＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する方法。 - 前記第７ステップのＦｌｅｘＭｕｘパケットは、ＦｌｅｘＭｕｘヘッダとＳＬパケットデータユニット（ＰＤＵ）とを含むことを特徴とする請求項５に記載のＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する方法。
- 前記第３ステップは、
前記第１ステップで抽出されたメタ情報であるＣＴＳ／ＤＴＳ情報と前記第２ステップのパケット化過程で抽出されたＦｌｅｘＭｕｘパケットの長さ情報を用いて、同期化情報を生成する第８ステップと、
前記第１ステップで抽出されたメタ情報であるＥＳ＿ＩＤ情報と、前記第２ステップのパケット化過程で抽出されたＦｌｅｘＭｕｘチャネル情報とを用いて、プログラム情報を生成する第９ステップと
を含むことを特徴とする請求項４に記載のＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する方法。 - 前記第８ステップは、前記ＣＴＳ／ＤＴＳ情報をＰＴＳ（Program Time Stamp）／ＤＴＳ情報に変換することを特徴とする請求項７に記載のＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する方法。
- 前記第４ステップは、
前記第２ステップのパケット化過程で生成されたＦｌｅｘＭｕｘパケットを同期化する必要があるか否かに応じて制御する第１０ステップと、
前記第９ステップで生成されたプログラム情報と、前記第１ステップで抽出されたメタ情報であるＩＯＤ（Initial Object Descriptor）とを用いて、ＰＳＩを生成する第１１ステップと、
前記第１０ステップの制御により、前記第８ステップで生成された同期化情報を用いて前記第２ステップのパケット化過程で生成されたＦｌｅｘＭｕｘデータをＰＥＳパケット化する第１２ステップと、
前記第１０ステップの制御により、前記第２ステップのパケット化過程で生成されたＦｌｅｘＭｕｘデータを１４４９６セクションにパケット化する第１３ステップと、
前記生成されたＰＳＩ、ＰＥＳパケット及び１４４９６セクションパケットをトランスポートストリーム（ＴＳ）パケットにパケット化する第１４ステップと
を含むことを特徴とする請求項７に記載のＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する方法。 - 前記第１１ステップは、ＰＳＩ生成過程でプログラム構成情報の一つであるＰＭＴ（Program Map Table）を生成するため、ＭＰＥＧ−４データのためのＦｌｅｘＭｕｘチャネルディスクリプタ（FMC_Descriptor）構成に前記第３ステップで生成されたプログラム情報を入力することを特徴とする請求項９に記載のＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する方法。
- 前記第５ステップは、
外部インターフェスを介してＭＰＥＧ−２音響／画像データ及び同期化初期値を入力する第１５ステップと、
前記第４ステップのパケット化過程で生成されたトランスポートストリーム（ＴＳ）パケットと前記第１５ステップで入力された情報を一つのトランスポートストリーム（ＴＳ）に多重化する第１６ステップと
を含むことを特徴とする請求項７に記載のＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する方法。 - 前記第１６ステップは、絶対的な時間値を有するＭＰＥＧ−２データと相対的な時間値を有するＭＰＥＧ−４データとの同期化のため、多重化初期値をＭＰＥＧ−４データの挿入地点として用いて２種類データを同期化させることを特徴とする請求項１１に記載のＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させて伝送する方法。
- ＭＰＥＧ−４データをＭＰＥＧ−２データに同期化させるため、大容量プロセッサを備えた同期化装置に、
ＭＰＥＧ−４データの格納形形式であるＭｐ４データを入力されて、各ＭＰＥＧ−４オブジェクトデータを抽出し、それと関連したメタ情報を解析して分離する第１機能と、
前記第１機能により抽出されたメタ情報を用いてＭＰＥＧ−４オブジェクトデータを第１パケット化する第２機能と、
前記第１機能により抽出されたメタ情報と前記第２機能のパケット化過程で生成された情報とを用いて、同期化情報及びプログラム情報を生成する第３機能と、
前記第３機能により生成された情報と前記第１機能により分離されたメタ情報とを用いて、前記第２機能によりパケット化されたＭＰＥＧ−４データを第２パケット化する第４機能と、
前記第４機能によりパケット化されたＭＰＥＧ−４データをＭＰＥＧ−２データと多重化する第５機能と
を実現させるプログラムを記録したコンピュータで読み出すことのできる記録媒体。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR10-2001-0002055A KR100392384B1 (ko) | 2001-01-13 | 2001-01-13 | 엠펙-2 데이터에 엠펙-4 데이터를 동기화시켜 전송하는장치 및 그 방법 |
| PCT/KR2001/002234 WO2002058388A1 (en) | 2001-01-13 | 2001-12-21 | Apparatus and method for transmitting mpeg-4 data synchronized with mpeg-2 data |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004523163A true JP2004523163A (ja) | 2004-07-29 |
| JP3886906B2 JP3886906B2 (ja) | 2007-02-28 |
Family
ID=19704614
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002558743A Expired - Fee Related JP3886906B2 (ja) | 2001-01-13 | 2001-12-21 | Ｍｐｅｇ−２データにｍｐｅｇ−４データを同期化させて伝送する装置及びその方法 |
Country Status (7)
| Country | Link |
|---|---|
| US (1) | US7570692B2 (ja) |
| EP (1) | EP1358761B1 (ja) |
| JP (1) | JP3886906B2 (ja) |
| KR (1) | KR100392384B1 (ja) |
| AT (1) | ATE373388T1 (ja) |
| DE (1) | DE60130492T2 (ja) |
| WO (1) | WO2002058388A1 (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010510710A (ja) * | 2006-11-20 | 2010-04-02 | エスケーテレコム株式会社 | 放送コンテンツに関連した付加情報サービス提供システム、付加情報サービス提供サーバー及び付加情報サービス提供方法 |
| JP2013257569A (ja) * | 2006-10-16 | 2013-12-26 | Fraunhofer Ges Zur Foerderung Der Angewandten Forschung Ev | マルチチャネル・パラメータ変換のための装置および方法 |
| US9565509B2 (en) | 2006-10-16 | 2017-02-07 | Dolby International Ab | Enhanced coding and parameter representation of multichannel downmixed object coding |
Families Citing this family (40)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3821086B2 (ja) * | 2002-11-01 | 2006-09-13 | ソニー株式会社 | ストリーミングシステム及びストリーミング方法、クライアント端末及びデータ復号方法、並びにプログラム |
| JP4845335B2 (ja) * | 2003-05-21 | 2011-12-28 | キヤノン株式会社 | データストリーム送信装置及びデータストリーム受信装置 |
| KR100585933B1 (ko) * | 2003-08-20 | 2006-06-01 | 한국전자통신연구원 | 디지털 멀티미디어 방송 시스템 및 그 방법 |
| US7555009B2 (en) | 2003-11-14 | 2009-06-30 | Canon Kabushiki Kaisha | Data processing method and apparatus, and data distribution method and information processing apparatus |
| KR101029808B1 (ko) * | 2004-01-27 | 2011-04-20 | 엘지전자 주식회사 | 싱크 레이어 패킷의 패킷화 방법 |
| US7162533B2 (en) * | 2004-04-30 | 2007-01-09 | Microsoft Corporation | Session description message extensions |
| KR100619034B1 (ko) * | 2004-06-19 | 2006-08-31 | 삼성전자주식회사 | 디지털 멀티미디어 데이터 수신기에서 송수신 데이터 동기방법 및 장치 |
| KR100658222B1 (ko) * | 2004-08-09 | 2006-12-15 | 한국전자통신연구원 | 3차원 디지털 멀티미디어 방송 시스템 |
| US8010566B2 (en) * | 2004-10-13 | 2011-08-30 | Electronics And Telecommunications Research Institute | Extended multimedia file structure and multimedia file producting method and multimedia file executing method |
| KR100760260B1 (ko) * | 2005-02-04 | 2007-09-19 | 한국전자통신연구원 | 타이밍정보의 효율적 전송을 위한 전송스트림 생성 장치및 그 방법과, 그를 이용한 디엠비 전송 시스템 |
| GB2425011A (en) * | 2005-04-07 | 2006-10-11 | Ely Jay Malkin | Encoding video data using a transformation function |
| EP1884115A4 (en) * | 2005-05-26 | 2008-08-06 | Korea Electronics Telecomm | METHOD AND DEVICE FOR SYNCHRONIZING A DATA SERVICE WITH A VIDEO SERVICE FOR DIGITAL MULTIMEDIA RADIATION |
| US8184691B1 (en) * | 2005-08-01 | 2012-05-22 | Kevin Martin Henson | Managing telemetry bandwidth and security |
| US20070038781A1 (en) * | 2005-08-12 | 2007-02-15 | Ye-Sun Joung | Apparatus and method for converting contents |
| KR101199369B1 (ko) * | 2005-11-25 | 2012-11-09 | 엘지전자 주식회사 | 디지털 방송 시스템 및 처리 방법 |
| US8548151B1 (en) * | 2006-04-13 | 2013-10-01 | Sprint Communications Company L.P. | Method for migrating from an old communication switch to a new communication switch |
| US7913157B1 (en) * | 2006-04-18 | 2011-03-22 | Overcast Media Incorporated | Method and system for the authoring and playback of independent, synchronized media through the use of a relative virtual time code |
| KR100813976B1 (ko) * | 2006-05-19 | 2008-03-17 | 삼성전자주식회사 | 방송 콘텐츠의 출력 시간을 단축하기 위한 디지털 방송 수신 장치 및 방법, 그리고 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체 |
| US8009742B2 (en) * | 2006-09-12 | 2011-08-30 | Samsung Electronics Co., Ltd. | Method and system for retransmitting internet protocol packet for terrestrial digital multimedia broadcasting service |
| US9398346B2 (en) | 2007-05-04 | 2016-07-19 | Time Warner Cable Enterprises Llc | Methods and apparatus for predictive capacity allocation |
| KR101292893B1 (ko) * | 2007-05-08 | 2013-09-02 | 한국전자통신연구원 | 계층적 부호화 장치 및 방법, 계층적 복호화 장치 및 방법 |
| KR100841080B1 (ko) * | 2007-05-14 | 2008-06-24 | 한국과학기술원 | Ｍｐｅｇ-２ 전송 스트림을 이용하여 ｍｐｅｇ-４ 객체를송수신하는 장치 및 방법 |
| US9060208B2 (en) | 2008-01-30 | 2015-06-16 | Time Warner Cable Enterprises Llc | Methods and apparatus for predictive delivery of content over a network |
| JP5181840B2 (ja) * | 2008-05-30 | 2013-04-10 | ソニー株式会社 | 固体撮像装置、固体撮像装置の駆動方法、及び電子機器 |
| US8509315B1 (en) * | 2008-09-23 | 2013-08-13 | Viasat, Inc. | Maintaining synchronization of compressed data and associated metadata |
| US11076189B2 (en) | 2009-03-30 | 2021-07-27 | Time Warner Cable Enterprises Llc | Personal media channel apparatus and methods |
| US9215423B2 (en) | 2009-03-30 | 2015-12-15 | Time Warner Cable Enterprises Llc | Recommendation engine apparatus and methods |
| US8045582B1 (en) * | 2009-05-27 | 2011-10-25 | Lockheed Martin Corporation | Variable bandwidth communication system |
| US9027062B2 (en) * | 2009-10-20 | 2015-05-05 | Time Warner Cable Enterprises Llc | Gateway apparatus and methods for digital content delivery in a network |
| US8396055B2 (en) | 2009-10-20 | 2013-03-12 | Time Warner Cable Inc. | Methods and apparatus for enabling media functionality in a content-based network |
| US8997136B2 (en) | 2010-07-22 | 2015-03-31 | Time Warner Cable Enterprises Llc | Apparatus and methods for packetized content delivery over a bandwidth-efficient network |
| US9602414B2 (en) | 2011-02-09 | 2017-03-21 | Time Warner Cable Enterprises Llc | Apparatus and methods for controlled bandwidth reclamation |
| US9025941B2 (en) * | 2011-02-10 | 2015-05-05 | Panasonic intellectual property Management co., Ltd | Data creation device and playback device for video picture in video stream |
| US8978079B2 (en) | 2012-03-23 | 2015-03-10 | Time Warner Cable Enterprises Llc | Apparatus and methods for managing delivery of content in a network with limited bandwidth using pre-caching |
| US9467723B2 (en) | 2012-04-04 | 2016-10-11 | Time Warner Cable Enterprises Llc | Apparatus and methods for automated highlight reel creation in a content delivery network |
| KR101356890B1 (ko) * | 2012-06-22 | 2014-02-03 | 한국방송공사 | 다시점 비디오에 대한 이종 코덱에서의 비디오 시점간 부호화 및 복호화 방법 및 그 장치 |
| US20140082645A1 (en) | 2012-09-14 | 2014-03-20 | Peter Stern | Apparatus and methods for providing enhanced or interactive features |
| US10382512B2 (en) * | 2013-03-14 | 2019-08-13 | Microsoft Technology Licensing, Llc | Distributed fragment timestamp synchronization |
| EP3014896B1 (en) | 2013-06-24 | 2020-06-03 | Samsung Electronics Co., Ltd. | Method and apparatus for converting content in multimedia system |
| US10116676B2 (en) | 2015-02-13 | 2018-10-30 | Time Warner Cable Enterprises Llc | Apparatus and methods for data collection, analysis and service modification based on online activity |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0914636A4 (en) * | 1997-04-07 | 2008-07-30 | At & T Corp | SYSTEM AND METHOD FOR PROCESSING AUDIOVISUAL INFORMATION OBJECT-ORIENTED |
| US6535530B1 (en) * | 1997-07-23 | 2003-03-18 | Matsushita Electric Industrial Co., Ltd. | Apparatus and method for demultiplexing multiplexed data |
| GB2327709A (en) * | 1997-07-25 | 1999-02-03 | Ykk Europ Ltd | Snap fitted bottom stop for zip fastener |
| EP0966823B1 (en) * | 1997-10-17 | 2006-03-29 | Koninklijke Philips Electronics N.V. | Method of encapsulation of data into transport packets of constant size |
| KR100245842B1 (ko) | 1997-12-30 | 2000-03-02 | 김춘호 | 고선명 텔레비젼용 역다중화기 |
| KR100287868B1 (ko) * | 1998-06-17 | 2001-05-02 | 구자홍 | 디지털 저장 매체의 신호 기록재생장치 |
| JP2000209580A (ja) * | 1999-01-13 | 2000-07-28 | Canon Inc | 画像処理装置およびその方法 |
| KR200167767Y1 (ko) * | 1999-07-27 | 2000-02-15 | 김영수 | 2륜차용 원웨이 클러치의 일체형 피디 기어와 드럼 |
-
2001
- 2001-01-13 KR KR10-2001-0002055A patent/KR100392384B1/ko not_active IP Right Cessation
- 2001-12-21 DE DE2001630492 patent/DE60130492T2/de not_active Expired - Lifetime
- 2001-12-21 AT AT01273354T patent/ATE373388T1/de not_active IP Right Cessation
- 2001-12-21 WO PCT/KR2001/002234 patent/WO2002058388A1/en active IP Right Grant
- 2001-12-21 JP JP2002558743A patent/JP3886906B2/ja not_active Expired - Fee Related
- 2001-12-21 EP EP01273354A patent/EP1358761B1/en not_active Expired - Lifetime
- 2001-12-21 US US10/466,163 patent/US7570692B2/en not_active Expired - Fee Related
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013257569A (ja) * | 2006-10-16 | 2013-12-26 | Fraunhofer Ges Zur Foerderung Der Angewandten Forschung Ev | マルチチャネル・パラメータ変換のための装置および方法 |
| US9565509B2 (en) | 2006-10-16 | 2017-02-07 | Dolby International Ab | Enhanced coding and parameter representation of multichannel downmixed object coding |
| JP2010510710A (ja) * | 2006-11-20 | 2010-04-02 | エスケーテレコム株式会社 | 放送コンテンツに関連した付加情報サービス提供システム、付加情報サービス提供サーバー及び付加情報サービス提供方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20040057457A1 (en) | 2004-03-25 |
| US7570692B2 (en) | 2009-08-04 |
| EP1358761B1 (en) | 2007-09-12 |
| DE60130492D1 (de) | 2007-10-25 |
| WO2002058388A1 (en) | 2002-07-25 |
| KR100392384B1 (ko) | 2003-07-22 |
| EP1358761A4 (en) | 2004-05-26 |
| EP1358761A1 (en) | 2003-11-05 |
| JP3886906B2 (ja) | 2007-02-28 |
| ATE373388T1 (de) | 2007-09-15 |
| KR20020060908A (ko) | 2002-07-19 |
| DE60130492T2 (de) | 2008-06-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3886906B2 (ja) | Ｍｐｅｇ−２データにｍｐｅｇ−４データを同期化させて伝送する装置及びその方法 | |
| JP4668515B2 (ja) | マルチメディアコンテンツに同期化されたメタデータ伝送装置及び方法 | |
| KR101639358B1 (ko) | 실시간으로 전송되는 기준 영상과 별도로 전송되는 부가 영상 및 콘텐츠를 연동하여 3ｄ 서비스를 제공하기 위한 전송 장치 및 방법, 및 수신 장치 및 방법 | |
| JP4481444B2 (ja) | 画像符号化装置 | |
| KR100954290B1 (ko) | Ｄｍｂ 방송 시스템에서 고품질 미디어 데이터 처리 방법및 장치 | |
| JP4702402B2 (ja) | 信号送信装置、信号送信方法、信号受信装置及び信号受信方法 | |
| JP2013179664A (ja) | 放送データ送信方法およびその装置 | |
| JP2018182750A (ja) | 送信装置及び受信装置 | |
| JPWO2017208818A1 (ja) | 送信装置、送信方法、受信装置および受信方法 | |
| KR101200070B1 (ko) | 네트워크 시간표시정보를 삽입하거나 추출하기 위한 장치 및 방법 | |
| MX2009001858A (es) | Dispositivo de multiplexion/separacion de datos. | |
| KR20030062138A (ko) | 디지털 지상파 데이터 방송을 위한 데이터 부호화 장치 및그 방법 | |
| KR100308034B1 (ko) | 포맷변환장치 | |
| US7415014B2 (en) | Method and system for co-relating transport packets on different channels using a packet prioritization scheme | |
| EP1090491A1 (en) | Preprocessing method for adapting mpeg-4 data streams to the internet network | |
| CN101179738B (zh) | 一种传输流到中国移动多媒体广播复用协议的转换方法 | |
| KR100439339B1 (ko) | 데이터 방송 서버 제어 장치 및 그 방법 | |
| WO2017154646A1 (ja) | 送信装置、送信方法、受信装置および受信方法 | |
| KR101290346B1 (ko) | 콘텐츠 다중화/스트리밍 방법 및 시스템 | |
| KR0181081B1 (ko) | 시스템 복호화기의 이에스씨알 재생장치 | |
| JP2005203950A (ja) | データ伝送方法およびデータ伝送機 | |
| KR101808672B1 (ko) | 실시간으로 전송되는 기준 영상과 별도로 전송되는 부가 영상 및 콘텐츠를 연동하여 3ｄ 서비스를 제공하기 위한 전송 장치 및 방법, 및 수신 장치 및 방법 | |
| JP2002238048A (ja) | Ｍｐｅｇ２トランスポートストリーム伝送レート変換方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20041201 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20061024 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20061122 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101201 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111201 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121201 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131201 Year of fee payment: 7 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |