JP4818373B2 - SVC file data sharing method and file - Google Patents

SVC file data sharing method and file Download PDF

Info

Publication number
JP4818373B2
JP4818373B2 JP2008550234A JP2008550234A JP4818373B2 JP 4818373 B2 JP4818373 B2 JP 4818373B2 JP 2008550234 A JP2008550234 A JP 2008550234A JP 2008550234 A JP2008550234 A JP 2008550234A JP 4818373 B2 JP4818373 B2 JP 4818373B2
Authority
JP
Japan
Prior art keywords
scalable
track
identification information
base
base track
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2008550234A
Other languages
Japanese (ja)
Other versions
JP2009522984A (en
Inventor
ソン−ジュン ペ
ヨン−ジュ チョ
ジェ−ゴン キム
ジン−ウ ホン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Electronics and Telecommunications Research Institute ETRI
Original Assignee
Electronics and Telecommunications Research Institute ETRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020060125051A external-priority patent/KR20070108434A/en
Application filed by Electronics and Telecommunications Research Institute ETRI filed Critical Electronics and Telecommunications Research Institute ETRI
Publication of JP2009522984A publication Critical patent/JP2009522984A/en
Application granted granted Critical
Publication of JP4818373B2 publication Critical patent/JP4818373B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/34Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64723Monitoring of network processes or resources, e.g. monitoring of network load
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8451Structuring of content, e.g. decomposing content into time segments using Advanced Video Coding [AVC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/85406Content authoring involving a specific file format, e.g. MP4 format
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Description

本発明は、SVC(Scalable Video Coding:スケーラブルなビデオコーディング)ファイルのデータ共有方法及びそのファイルに係り、特にトラック別のメタデータの共有及びベーストラックリファレンスを利用したSVCファイルのデータ共有方法及びそのファイルに関する。   The present invention relates to a SVC (Scalable Video Coding) file data sharing method and a file thereof, and more particularly, to a SVC file data sharing method and a file sharing method using a base track reference. About.

図1は、スケーラブルビデオコーディング(Scalable Video Coding:SVC)の概念を示す図である。   FIG. 1 is a diagram illustrating the concept of scalable video coding (SVC).

図1に示すように、SVCは、複数個のビデオ階層を一つのビット列に符号化する。
SVCの階層は、一つの基本階層と、基本階層上に連続的に積める1以上の拡張階層とから構成される。
As shown in FIG. 1, SVC encodes a plurality of video layers into one bit string.
The SVC hierarchy is composed of one basic hierarchy and one or more extended hierarchies that are continuously stacked on the basic hierarchy.

各拡張階層は、下位階層情報をベースとしてそれぞれに与えられた最大のビット率、画面率及び解像度を表現できる。SVCでは、拡張階層を連続的に多く積むほど、多様なビット率、画面率、解像度のサポートが可能である。   Each extension layer can represent the maximum bit rate, screen rate, and resolution given to each extension layer based on the lower layer information. SVC can support various bit rates, screen rates, and resolutions as the number of extended layers is continuously increased.

このように、SVCは、異種のネットワーク環境で発生する帯域幅の多様性問題、受信端末器の性能と解像度の多様性問題、コンテンツ消費者の多様な趣向などにつきものの問題を解決できる符号化技術である。   As described above, the SVC is an encoding technology that can solve problems related to bandwidth diversity, receiver terminal performance and resolution diversity, content consumers' various preferences, and the like that occur in different network environments. It is.

図2は、マルチメディアファイルのファイルフォーマットを示す図である。   FIG. 2 is a diagram showing the file format of the multimedia file.

一般的に、ビデオコンテンツをファイルに保存しようとする場合、コンテンツの任意の位置への自由な接近を保証し、コンテンツの再加工を容易にするために、コンテンツの符号化情報以外にコンテンツに対する符号化方式、長さ、内容、任意接近情報などについてのメタデータを別途に保存する。   In general, when trying to save video content to a file, in order to ensure free access to any location of the content and to facilitate reprocessing of the content, in addition to the content encoding information, Separate metadata about the conversion method, length, content, optional access information, etc.

また、連続的に再生可能な一つのメディア単位としてトラックという単位を定義する。   A unit called a track is defined as one media unit that can be continuously played back.

図2に示すように、一般的に、マルチメディアファイルは、オーディオトラックとビデオトラックとを有する構造で保存される。   As shown in FIG. 2, a multimedia file is generally stored in a structure having an audio track and a video track.

ビデオコンテンツをSVC形態でコーディングする場合、マルチメディアファイルは、2以上のビデオトラックを有し、これは、SVCの特徴に起因する。   When coding video content in SVC form, the multimedia file has more than one video track, which is due to the characteristics of SVC.

図3は、SVCでコーディングされたコンテンツのスケーラブル階層を示す図である。   FIG. 3 is a diagram illustrating a scalable hierarchy of content coded by SVC.

SVCは、複数個のビデオ階層を一つのビット列に符号化することを特徴とする。   SVC is characterized in that a plurality of video layers are encoded into one bit string.

図3に示すように、スケーラブルベースビットストリームは、最高の画質を有する一つのビットストリームp1ないしpmであり、全体の符号化データ310を含む。   As shown in FIG. 3, the scalable base bitstream is one bitstream p 1 to pm having the highest image quality, and includes the entire encoded data 310.

スケーラブルベースビットストリームから、ネットワークのサポート帯域幅やユーザーの使用端末仕様によって自由にサブビットストリーム(0ないしaまたは0ないしbの伝送対象符号化データaまたは伝送対象符号化データb)を生成できる。   A sub-bitstream (0 to a or 0 to b transmission target encoded data a or transmission target encoded data b) can be freely generated from a scalable base bitstream according to the supported bandwidth of the network and user terminal specifications.

サブビットストリームa 320は、伝送対象符号化データaを含み、サブビットストリームb 330は、伝送対象符号化データbを含む。   The sub bitstream a 320 includes transmission target encoded data a, and the sub bitstream b 330 includes transmission target encoded data b.

スケーラブルベースビットストリーム、サブビットストリームa及びサブビットストリームbは、いずれも1以上のスケーラブル階層p1,p2,…,piで構成されている。   Each of the scalable base bit stream, the sub bit stream a, and the sub bit stream b is composed of one or more scalable layers p1, p2,.

スケーラブルベースビットストリームは、あらゆるスケーラブル階層p1ないしpmを有するビットストリームである。   The scalable base bitstream is a bitstream having any scalable hierarchy p1 to pm.

残りのサブビットストリームは、スケーラブル階層p1ないしpmのうち、特定のステップまでのスケーラブル階層(サブビットストリームaはp1ないしpi、または、サブビットストリームbはp1ないしp3)のみを有する。   The remaining sub bitstreams have only a scalable layer (p1 to pi for subbitstream a or p1 to p3 for subbitstream b) up to a specific step among scalable layers p1 to pm.

図4は、SVCでコーディングされたコンテンツを保存するSVCファイルのファイルフォーマットを示す図である。   FIG. 4 is a diagram illustrating a file format of an SVC file for storing content coded in SVC.

図4に示すように、スケーラブルベースビットストリーム及びサブビットストリームは、別途のトラック(一般的に、それぞれスケーラブルベーストラック、サブトラックと称する)に分けられて構成される。   As shown in FIG. 4, the scalable base bit stream and the sub bit stream are configured by being divided into separate tracks (generally referred to as a scalable base track and a sub track, respectively).

かかる場合、一つのファイル内に二つ以上のビデオトラックを有し、一つのファイル内に二つ以上のビデオトラックを有する場合、それぞれのトラック別にスケーラブル階層を表すメタデータを別途に置くことができる。   In this case, when two or more video tracks are included in one file and two or more video tracks are included in one file, metadata representing a scalable hierarchy can be separately placed for each track. .

従来、SVCでコーディングされたコンテンツをファイルに保存する場合、(1)トラックのメタデータの共通部分においてデータが反復されて重複され、(2)別のトラックに相関するトラックの関係を表示できなかった。   Conventionally, when SVC coded content is stored in a file, (1) the data is repeated and duplicated in the common part of the track metadata, and (2) the relationship of the track correlated with another track cannot be displayed. It was.

本発明によるSVCファイルのデータ共有方法及びそのファイルは、SVCでコーディングされたコンテンツをファイルに保存する場合において、スケーラブル階層別に共通するデータの反復を避けることによりストレージ容量の減少ができ、別のトラックに相関するトラックの関係を表示することによりSVCファイルに保存されたコンテンツの再加工時に便宜を提供することを目的とする。   The SVC file data sharing method and the file according to the present invention can reduce the storage capacity by avoiding the repetition of data common to each scalable hierarchy in the case where SVC coded content is stored in a file, so that another track can be reduced. It is an object of the present invention to provide convenience when reprocessing the content stored in the SVC file by displaying the relationship of the tracks correlated with each other.

本発明による各フレームに少なくとも1つのスケーラブル階層を備えるメディアデータを備えたSVCファイルのデータ共有方法は、前記メディアデータに含まれた少なくとも1つの前記スケーラブル階層に対するメタデータをそれぞれ保存している少なくとも1つのスケーラブル階層エントリをスケーラブルベーストラックに保存するステップと、前記スケーラブルベーストラックのベースとなった前記メディアデータに含まれた少なくとも1つの前記スケーラブル階層のうち一部をベースとして生成されたサブトラックに、前記スケーラブル階層の識別情報及び前記スケーラブルベーストラックの識別情報を保存するステップと、前記スケーラブル階層の識別情報及び前記スケーラブルベーストラックの識別情報に基づいて、前記スケーラブルベーストラックに保存された前記スケーラブル階層エントリを共有するステップとを有する。   According to the present invention, there is provided a data sharing method for an SVC file including media data having at least one scalable layer in each frame, wherein at least one metadata for at least one scalable layer included in the media data is stored. Storing a scalable hierarchy entry in a scalable base track, and subtracks generated based on a part of at least one of the scalable hierarchies included in the media data that is a base of the scalable base track, Storing the scalable hierarchy identification information and the scalable base track identification information; and based on the scalable hierarchy identification information and the scalable base track identification information, And a step of sharing the scalable layer entry stored in the table base track.

本発明による少なくとも1つのスケーラブル階層を含むスケーラブルベーストラックを備えたメディアデータを複数個備えるSVCファイルのデータ共有方法は、複数個の前記スケーラブルベーストラックのうちいずれか一つをベースとして生成された少なくとも1つのサブトラックに、複数個の前記スケーラブルベーストラックのうち、生成のベースとなった前記スケーラブルベーストラックの識別情報を保存するステップを有する。   According to the present invention, there is provided a data sharing method for an SVC file including a plurality of media data including a scalable base track including at least one scalable layer, and at least generated based on any one of the plurality of scalable base tracks. One sub-track has a step of storing identification information of the scalable base track that is a generation base among the plurality of scalable base tracks.

前記課題を解決するための本発明による各フレームに少なくとも1つのスケーラブル階層を備えるメディアデータを備えたSVCファイルは、少なくとも1つの前記スケーラブル階層に対するメタデータをそれぞれ保存している少なくとも1つのスケーラブル階層エントリを含むスケーラブルベーストラックと、前記スケーラブルベーストラックをベースとして生成され、前記スケーラブル階層エントリの代わりに、前記スケーラブル階層のうち、生成のベースとなったスケーラブル階層の識別情報及び前記スケーラブルベーストラックの識別情報を含む少なくとも1つのサブトラックとを有する。   An SVC file having media data having at least one scalable layer in each frame according to the present invention for solving the above-described problem is provided with at least one scalable layer entry storing metadata for at least one of the scalable layers, respectively. And a scalable base track that is generated on the basis of the scalable base track, and instead of the scalable layer entry, the identification information of the scalable layer and the identification information of the scalable base track that is the generation base of the scalable layer And at least one sub-track.

本発明による少なくとも1つのスケーラブル階層を備えるスケーラブルベーストラックを備えたメディアデータを複数個備えるSVCファイルは、複数個の前記スケーラブルベーストラックのうち、生成のベースとなった前記スケーラブルベーストラックの識別情報を保存している複数個の前記スケーラブルベーストラックのうちいずれか一つをベースとして生成された少なくとも1つのサブトラックを有する。   The SVC file including a plurality of media data including a scalable base track including at least one scalable layer according to the present invention includes identification information of the scalable base track that is a generation base among the plurality of scalable base tracks. At least one sub-track generated based on any one of the plurality of stored scalable base tracks.

本発明によれば、SVCでコーディングされたコンテンツをファイルに保存する場合において、(1)トラック別のメタデータを共有することによって、スケーラブル階層別に共通するデータの反復を避け、(2)ベーストラックリファレンスを置くことによって、意味上で別のトラックに相関するトラックの関係を表示できる。   According to the present invention, in the case of storing SVC coded content in a file, (1) by sharing metadata for each track, avoiding repetition of common data for each scalable hierarchy, and (2) base track By placing a reference, you can display the relationship of tracks that are semantically correlated to another track.

本発明によれば、SVCでコーディングされたコンテンツをファイルに保存する場合、階層別に共通するデータの反復を避けて保存容量の減少することにより、別のトラックに相関するトラックを表示することにより、保存されたコンテンツの再加工時に便宜を提供する。   According to the present invention, when storing SVC coded content in a file, by displaying a track correlated with another track by reducing the storage capacity by avoiding repetition of data common to each layer, Provide convenience when reprocessing stored content.

1.トラック別のメタデータの共有
図5は、SVCファイルのメタデータの各トラックに保存されたScalableLayerEntryを示す図である。
1. Sharing Metadata by Track FIG. 5 is a diagram showing a ScalableLayerEntry stored in each track of the metadata of the SVC file.

図5に示すように、スケーラブルベーストラックとそれに基づいて生成されたサブトラックとは、Layer1のScalableLayerEntryが重なりうる。   As shown in FIG. 5, the ScalableLayerEntry of Layer 1 can overlap the scalable base track and the subtrack generated based on the scalable base track.

SVCでコーディングされたコンテンツをファイルに保存する場合、各スケーラブル階層(Layer)に付加情報を含むメタデータをScalableLayerEntryという。   When storing SVC coded content in a file, metadata including additional information in each scalable layer (Layer) is referred to as ScalableLayerEntry.

SVCファイルでは、トラックのsgpd(Sample Group Description Box)でScalableLayerEntryを含む。   In the SVC file, a ScalableLayerEntry is included in the sgpd (Sample Group Description Box) of the track.

スケーラブルベーストラックをベースとして他のサブトラックを生成する場合、二つのトラック間のスケーラブル階層は、相当部分共通したスケーラブル階層が存在する。   When other sub-tracks are generated based on the scalable base track, the scalable hierarchy between the two tracks has a common scalable hierarchy.

共通するスケーラブル階層は、同じメタデータScalableLayerEntryを有し、メタデータの共通する部分に対してデータが重なる。   The common scalable hierarchy has the same metadata ScalableLayerEntry, and data overlaps a common part of the metadata.

図6Aは、本発明の望ましい一実施形態によるScalableLayerEntryを共有するSVCファイルを示す図である。   FIG. 6A is a diagram illustrating an SVC file sharing a ScalableLayerEntry according to an exemplary embodiment of the present invention.

本発明によれば、共通するスケーラブル階層に対する同じメタデータScalableLayerEntryを各トラック別に記録せず、スケーラブルベーストラックを指定するスケーラブルベーストラック識別情報ref_track ID、及びスケーラブル階層を指定するスケーラブル階層識別情報ref_layer IDを使用する。   According to the present invention, the same metadata ScalableLayerEntry for a common scalable layer is not recorded for each track, but scalable base track identification information ref_track ID for specifying a scalable base track and scalable layer identification information ref_layer ID for specifying a scalable layer are set. use.

図6Aは、本発明の望ましい一実施形態によって、各トラック間にScalableLayerEntryを共有するSVCファイルを示す図である。   FIG. 6A is a diagram illustrating an SVC file that shares a ScalableLayerEntry between tracks according to an exemplary embodiment of the present invention.

スケーラブルベーストラックでは、スケーラブル階層に対するメタデータを有するスケーラブル階層エントリを含む。   The scalable base track includes a scalable hierarchy entry that has metadata for the scalable hierarchy.

スケーラブルベーストラックをベースとして生成されたサブトラックでは、スケーラブル階層エントリの代わりに、スケーラブル階層のうち、生成のベースとなったスケーラブル階層の識別情報及びスケーラブルベーストラックの識別情報を有する。   The sub-track generated based on the scalable base track has the identification information of the scalable layer and the identification information of the scalable base track that is the generation base of the scalable layer, instead of the scalable layer entry.

図6Aにおいて、サブトラックは、スケーラブルベーストラックを指定するスケーラブルベーストラック識別情報ref_track ID=1、及びスケーラブル階層を指定するスケーラブル階層識別情報ref_layer ID=1を使用し、ScalableLayerEntryを重ねて保存しなかった。   In FIG. 6A, the sub-track uses the scalable base track identification information ref_track ID = 1 specifying the scalable base track and the scalable hierarchy identification information ref_layer ID = 1 specifying the scalable hierarchy, and does not store the scalable layer entry in an overlapping manner. .

スケーラブル階層のうち、生成のベースとなったスケーラブル階層の識別情報及び前記スケーラブルベーストラックの識別情報は、サブトラックのsgpdトラックで表す。
本発明のスケーラブルベーストラック識別情報ref_track ID及びスケーラブル階層識別情報ref_layer IDを使用して、スケーラブルベーストラックのScalableLayerEntry値を共有するためのシンタックスは、次の通りである。
Among the scalable hierarchies, the identification information of the scalable hierarchies used as the generation base and the identification information of the scalable base track are represented by sgpd tracks of the sub-tracks.
The syntax for sharing the ScalableLayerEntry value of the scalable base track using the scalable base track identification information ref_track ID and the scalable hierarchy identification information ref_layer ID of the present invention is as follows.

Figure 0004818373
Figure 0004818373

このように、本発明によれば、スケーラブルベーストラック識別情報ref_track ID及びスケーラブル階層識別情報ref_layer IDを置き、同じ階層を指定するあらゆるメタデータは、原本メタデータを参照することによって、原本メタデータの同じ内容を反復して保存しなくてもよい。   As described above, according to the present invention, the scalable base track identification information ref_track ID and the scalable hierarchy identification information ref_layer ID are placed, and any metadata designating the same hierarchy can be obtained by referring to the original metadata. The same contents need not be stored repeatedly.

図6Bは、本発明の望ましい一実施形態によって、SVCファイルのメタデータの各トラック間にScalableLayerEntryを共有する方法のフローチャートである。   FIG. 6B is a flowchart of a method for sharing a ScalableLayerEntry between tracks of metadata of an SVC file according to an exemplary embodiment of the present invention.

まず、SVCファイルのメディアデータに含まれたスケーラブル階層に対するメタデータを保存しているスケーラブル階層エントリScalableLayerEntryをスケーラブルベーストラックに保存する(S601)。   First, the scalable layer entry ScalableLayerEntry storing metadata for the scalable layer included in the media data of the SVC file is stored in the scalable base track (S601).

スケーラブルベーストラックに基づいて生成されたサブトラックに、生成のベースとなったスケーラブル階層の識別情報及びスケーラブルベーストラックの識別情報を保存する(S602)。   In the sub-track generated based on the scalable base track, the identification information of the scalable layer and the identification information of the scalable base track that are the generation base are stored (S602).

サブトラックに保存された生成のベースとなったスケーラブル階層の識別情報及びスケーラブルベーストラックの識別情報に基づいて、スケーラブルベーストラックとスケーラブル階層エントリを共有する(S603)。   The scalable base track and the scalable layer entry are shared based on the identification information of the scalable layer and the base information of the scalable base track that are the generation bases stored in the subtrack (S603).

生成のベースとなったスケーラブル階層の識別情報及びスケーラブルベーストラックの識別情報は、スケーラブルサブトラックのsgpdトラックで表す。   The identification information of the scalable layer and the identification information of the scalable base track that are the bases of generation are represented by the sgpd track of the scalable subtrack.

このように、本発明は、(1)トラック別のメタデータを共有することによって、スケーラブル階層別に共通するデータの反復を避けることができる。以下、本発明により意味上で互いに相関するトラック間の関連関係を表示する(2)ベーストラックリファレンスについて説明する。   As described above, according to the present invention, (1) by sharing metadata for each track, it is possible to avoid repetition of data common to each scalable hierarchy. Hereinafter, (2) the base track reference for displaying the relationship between tracks that are semantically correlated with each other according to the present invention will be described.

2.ベーストラックリファレンス
図7Aは、本発明の望ましい一実施形態によって、スケーラブルベーストラックの識別情報を有するSVCファイルを示す図である。
2. Base Track Reference FIG. 7A is a diagram illustrating an SVC file having scalable base track identification information according to an exemplary embodiment of the present invention.

本発明によれば、それぞれのサブトラックに自身が派生されたスケーラブルベーストラックがどのトラックであるかを表示できる。   According to the present invention, it is possible to display which scalable base track is derived from each subtrack.

このように互いに関連のあるトラック間の関連関係を表示可能にして、保存されたコンテンツの再加工時の便宜を提供できる。   In this way, it is possible to display the relationship between the tracks that are related to each other, and to provide convenience when re-processing the stored content.

図7Aに示すように、トラックを表すメタデータtrak 700中にトラックリファレンスtref 710という下位メタデータがある。   As shown in FIG. 7A, there is subordinate metadata called track reference tref 710 in metadata trak 700 representing a track.

トラックリファレンスtref 710のシンタックスは、次の通りである。   The syntax of the track reference tref 710 is as follows.

Figure 0004818373
Figure 0004818373

トラックリファレンスtref 710は、タイプを異ならせてトラックのID trak−IDを複数個有しうる。   The track reference tref 710 may have a plurality of track ID trak-IDs with different types.

トラックリファレンスtref 710にスケーラブルベーストラックのトラックIDをsbas 711と称されるタイプで保存して、それぞれのサブトラックに自身が派生されたスケーラブルベーストラックがどのトラックであるかを表示できる。
hint、cdsc及びscalも、本発明によるsbas 711と同様にトラックがどの役割を行うトラックであるかを表示すると共に、本トラックが使われるトラックをリファレンシングする。
The track ID of the scalable base track is stored in the track reference tref 710 as a type called sbas 711, and it is possible to display which track is the scalable base track from which the sub track is derived.
Hint, cdsc, and scal also display the role that the track plays like the sbas 711 according to the present invention, and also refer to the track in which the track is used.

このように、本発明によれば、同じ内容を有するトラックが一つのスケーラブルベーストラックとそれから派生された複数個のサブトラックとから構成されたとき、それぞれのサブトラックにスケーラブルベーストラックを探すことができる参照者sbas 711を用いてサブトラック間の関連関係を表示できる。   As described above, according to the present invention, when a track having the same content is composed of one scalable base track and a plurality of subtracks derived therefrom, the scalable base track can be searched for each subtrack. A possible reference sbas 711 can be used to display the relationship between the sub-tracks.

図7Bは、本発明の望ましい一実施形態によって、同じスケーラブルベーストラックを有するサブトラックを結合することにより管理する方法を示す図である。
コンテンツをファイルに保存する場合、二つ以上の内容を一つのファイルに保存することができる。
FIG. 7B is a diagram illustrating a method for managing by combining sub-tracks having the same scalable base track according to an exemplary embodiment of the present invention.
When storing content in a file, two or more contents can be stored in one file.

この場合、保存するコンテンツがSVCでコーディングされたコンテンツであれば、各内容ごとにスケーラブルベーストラック、及びスケーラブルベーストラックとは別途にそれぞれのスケーラブルベーストラックから派生された少なくとも1つのサブトラックを有することができる。   In this case, if the content to be stored is SVC coded content, each content has a scalable base track and at least one sub-track derived from each scalable base track separately from the scalable base track. Can do.

この場合、各サブトラックは、自身から派生されたスケーラブルベーストラックがどのものであるかを定める必要がある。   In this case, each sub-track needs to define what the scalable base track derived from itself is.

スケーラブルベーストラックのトラックIDをsbas 711タイプで保存して、それぞれのサブトラックに自身から派生されたスケーラブルベーストラックがどのトラックであるかを表示して、同じスケーラブルベーストラックを有するサブトラックを結合することにより管理できる。   The track ID of the scalable base track is stored in the sbas 711 type, the track indicating which scalable base track is derived from each sub track is displayed, and sub tracks having the same scalable base track are combined. Can be managed.

図7Bに示すように、サブトラックAとサブトラックBとは、スケーラブルベーストラックXに基づいて生成された。   As shown in FIG. 7B, the subtrack A and the subtrack B were generated based on the scalable base track X.

サブトラックAとサブトラックBとのトラックリファレンスtrefのsbasトラックには、スケーラブルベーストラックXのトラックIDを保存して、自身から派生されたスケーラブルベーストラックがどのトラックであるかを表示している(S701)。   The sbas track of the track reference tref of the subtrack A and the subtrack B stores the track ID of the scalable base track X and displays which track the scalable base track derived from itself is. S701).

サブトラックCとサブトラックDとは、スケーラブルベーストラックYに基づいて生成された。   The sub track C and the sub track D were generated based on the scalable base track Y.

サブトラックCとサブトラックDとのトラックリファレンスtrefのsbasトラックには、スケーラブルベーストラックYのトラックIDを保存して、自身から派生された スケーラブルベーストラックがどのトラックであるかを表示している(S702)。   The sbas track of the track reference tref of the subtrack C and the subtrack D stores the track ID of the scalable base track Y and displays which track the scalable base track derived from itself is ( S702).

本発明によれば、スケーラブルベーストラックの識別情報に基づいて、同じスケーラブルベーストラックに基づいて生成されたサブトラックを結合することにより管理できる。   According to the present invention, management can be performed by combining subtracks generated based on the same scalable base track based on the identification information of the scalable base track.

例えば、スケーラブルベーストラックYに基づいて生成されたあらゆるトラックを削除しようとする場合が発生しうる。   For example, there may occur a case where any track generated based on the scalable base track Y is to be deleted.

かかる場合、本発明によれば、トラックリファレンスtrefのsbasトラックを参照して、sbasトラックにスケーラブルベーストラックYのトラックIDを有しているあらゆるトラックを削除することによって、スケーラブルベーストラックYから生成されたあらゆるサブトラックを容易に管理できる。   In such a case, according to the present invention, the sbas track of the track reference tref is referred to and generated from the scalable base track Y by deleting any track having the track ID of the scalable base track Y in the sbas track. You can easily manage every subtrack.

このように、本発明では、サブトラックのスケーラブル階層を表すメタデータであるScalableLayerEntryを、スケーラブルベーストラックの識別情報ref_trackID及びスケーラブル階層の識別情報ref_layerIDのみを使用して共有することによって、重なるScalableLayerEntryに対する保存空間の浪費を防止する。   As described above, according to the present invention, the ScalableLayerEntry that is metadata representing the scalable hierarchy of the subtrack is stored for the overlapping ScalableLayerEntry by sharing only the scalable base track identification information ref_trackID and the scalable hierarchy identification information ref_layerID. Avoid wasting space.

また、サブトラックにsbasというベーストラックリファレンスを置くことによって、意味上で互いに関連のあるトラック間の関連関係を表示可能にして、保存されたコンテンツの再加工時に便宜を提供する。   Also, by placing a base track reference called sbas in the sub-track, it is possible to display the relationship between the tracks that are semantically related to each other, thereby providing convenience when reprocessing the stored content.

本発明は、また、コンピュータで読み取り可能な記録媒体にコンピュータで読み取り可能なコードとして具現することが可能である。コンピュータで読み取り可能な記録媒体は、コンピュータシステムにより読み取られるデータが保存されるあらゆる種類の記録装置を含む。   The present invention can also be embodied as computer-readable code on a computer-readable recording medium. Computer readable recording media include all types of recording devices that can store data that can be read by a computer system.

コンピュータで読み取り可能な記録媒体の例としては、ROM(Read Only Memory)、RAM(Random Access Memory)、CD−ROM、磁気テープ、フロッピー(登録商標)ディスク、光データ保存装置などがあり、また、搬送派(例えば、インターネットを通じた伝送)の形態で具現されるものも含む。また、コンピュータで読み取り可能な記録媒体は、ネットワークに連結されたコンピュータシステムに分散されて、分散方式でコンピュータで読み取り可能なコードが保存されて実行される。   Examples of computer-readable recording media include ROM (Read Only Memory), RAM (Random Access Memory), CD-ROM, magnetic tape, floppy (registered trademark) disk, optical data storage device, etc. Also included are those embodied in the form of a carrier (for example, transmission over the Internet). The computer-readable recording medium is distributed in a computer system connected to a network, and a computer-readable code is stored and executed in a distributed manner.

これまで、本発明について、その望ましい実施形態を中心に述べた。当業者は、本発明が、特許請求の範囲に定義された本発明の精神および範囲から逸脱しない範囲で形式や詳細を様々に変えることができることを理解されたい。したがって、開示された実施形態は、限定的な観点ではなく、説明的な観点で考慮されねばならない。本発明の範囲は、前述した説明ではなく、特許請求の範囲に表れており、それと同等な範囲内にあるあらゆる相違点は、本発明に含まれていると解釈されねばならない。   So far, the present invention has been described with a focus on preferred embodiments thereof. Those skilled in the art will appreciate that the invention can be varied in form and detail without departing from the spirit and scope of the invention as defined in the claims. Accordingly, the disclosed embodiments should be considered in an illustrative, not a limiting sense. The scope of the present invention is shown not in the above description but in the claims, and all differences within the equivalent scope should be construed as being included in the present invention.

SVCの概念を示す図である。It is a figure which shows the concept of SVC. マルチメディアファイルのファイルフォーマットを示す図である。It is a figure which shows the file format of a multimedia file. SVCでコーディングされたコンテンツのスケーラブル階層を示す図である。It is a figure which shows the scalable hierarchy of the content coded by SVC. SVCでコーディングされたコンテンツを保存するSVCファイルのファイルフォーマットを示す図である。It is a figure which shows the file format of the SVC file which preserve | saves the content coded by SVC. SVCファイルのメタデータの各トラックに保存されたScalableLayerEntryを示す図である。It is a figure which shows ScalableLayerEntry preserve | saved at each track | truck of the metadata of an SVC file. 本発明の望ましい一実施形態によって、各トラック間にScalableLayerEntryを共有するSVCファイルを示す図である。FIG. 6 is a diagram illustrating an SVC file sharing a ScalableLayerEntry between tracks according to an exemplary embodiment of the present invention. 本発明の望ましい一実施形態によって、SVCファイルのメタデータの各トラック間にScalableLayerEntryを共有する方法のフローチャートである。4 is a flowchart of a method for sharing a ScalableLayerEntry between tracks of metadata of an SVC file according to an exemplary embodiment of the present invention. 本発明の望ましい一実施形態によって、スケーラブルベーストラックの識別情報を有するSVCファイルを示す図である。FIG. 6 is a diagram illustrating an SVC file having scalable base track identification information according to an exemplary embodiment of the present invention. 本発明の望ましい一実施形態によって、同じスケーラブルベーストラックを有するサブトラックを結合することにより管理する方法を示す図である。FIG. 6 is a diagram illustrating a method for managing by combining sub-tracks having the same scalable base track according to an exemplary embodiment of the present invention.

Claims (4)

各フレームに少なくとも1つのスケーラブル階層を含むメディアデータを有するSVCファイルのデータ共有方法であって、
前記方法は、
前記メディアデータに含まれた少なくとも1つの前記スケーラブル階層に対するメタデータを保存している少なくとも1つのスケーラブル階層エントリをスケーラブルベーストラックに保存するステップと、
前記スケーラブルベーストラックのベースとなった前記メディアデータに含まれた前記スケーラブル階層のうち一部をベースとして生成されたサブトラックに、前記少なくとも1つのスケーラブル階層の識別情報及び前記スケーラブルベーストラックの識別情報を保存するステップと、
を含み、
前記スケーラブル階層の識別情報及び前記スケーラブルベーストラックの識別情報に基づいて、前記スケーラブルベーストラックに保存された前記スケーラブル階層エントリが共有され、
前記スケーラブル階層の識別情報及び前記スケーラブルベーストラックの識別情報は、スケーラブルサブトラックのsgpdトラックで表される、
ことを特徴とする方法。
A data sharing method for an SVC file having media data including at least one scalable layer in each frame ,
The method
Storing at least one scalable layer entry storing metadata for at least one of the scalable layers included in the media data in a scalable base track;
Identification information of the at least one scalable layer and identification information of the scalable base track are included in a subtrack generated based on a part of the scalable layer included in the media data serving as a base of the scalable base track. A step of saving
Including
Based on the identification information of the scalable layer and the identification information of the scalable base track, the scalable layer entry stored in the scalable base track is shared,
The identification information of the scalable layer and the identification information of the scalable base track are represented by a sgpd track of a scalable subtrack.
A method characterized by that.
少なくとも1つのスケーラブル階層を有するスケーラブルベーストラックを含む複数のメディアデータを有するSVCファイルのデータ共有方法であって、
前記方法は、
少なくとも1つの前記スケーラブルベーストラックをベースとして生成された少なくとも1つのサブトラックに、前記スケーラブルベーストラックのうち、サブトラックの生成のベースとなった前記スケーラブルベーストラックの識別情報を保存するステップと、
前記スケーラブルベーストラックの前記識別情報に基づいて、同じスケーラブルベーストラックに基づいて生成されたサブトラックを結合することにより管理するステップと
含み、
前記スケーラブルベーストラックの前記識別情報は、前記少なくとも1つのサブトラックのトラックリファレンス情報を含むトラックリファレンスタイプボックスのsbasトラックで表されることを特徴とするSVCファイルのデータ共有方法。
A method for sharing data of an SVC file having a plurality of media data including a scalable base track having at least one scalable hierarchy ,
The method
Storing at least one sub-track generated based on the at least one scalable base track with identification information of the scalable base track that is a base for generating the sub-track among the scalable base tracks ;
Managing by combining sub-tracks generated based on the same scalable base track based on the identification information of the scalable base track ; and
The SVC file data sharing method , wherein the identification information of the scalable base track is represented by an sbas track of a track reference type box including track reference information of the at least one sub-track .
コンピュータに読み込まれて実行される時に、請求項1記載の方法を前記コンピュータに実行させるためのコンピュータプログラムを格納したコンピュータ読み取り可能な記録媒体。 When loaded into and executed by a computer, the computer read-usable medium storing a computer program for executing the method according to the computer to claim 1. コンピュータに読み込まれて実行される時に、請求項2に記載の方法を前記コンピュータに実行させるためのコンピュータプログラムを格納したコンピュータ読み取り可能な記録媒体。A computer-readable recording medium storing a computer program for causing a computer to execute the method according to claim 2 when the computer reads and executes the computer program.
JP2008550234A 2006-01-09 2007-01-09 SVC file data sharing method and file Active JP4818373B2 (en)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US75727906P 2006-01-09 2006-01-09
US60/757,279 2006-01-09
KR10-2006-0125051 2006-12-08
KR1020060125051A KR20070108434A (en) 2006-01-09 2006-12-08 Proposals for improving data sharing in the svc(scalable video coding) file format
KR1020070002187A KR101320395B1 (en) 2006-01-09 2007-01-08 SVC File Data Sharing Method and SVC File thereof
KR10-2007-0002187 2007-01-08
PCT/KR2007/000166 WO2007081149A1 (en) 2006-01-09 2007-01-09 Svc file data sharing method and svc file thereof

Publications (2)

Publication Number Publication Date
JP2009522984A JP2009522984A (en) 2009-06-11
JP4818373B2 true JP4818373B2 (en) 2011-11-16

Family

ID=45327183

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008550234A Active JP4818373B2 (en) 2006-01-09 2007-01-09 SVC file data sharing method and file

Country Status (1)

Country Link
JP (1) JP4818373B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013534101A (en) * 2010-06-14 2013-08-29 トムソン ライセンシング Method and apparatus for encapsulating encoded multi-component video
EP2580920A1 (en) * 2010-06-14 2013-04-17 Thomson Licensing Method and apparatus for encapsulating coded multi-component video
US8930562B2 (en) * 2010-07-20 2015-01-06 Qualcomm Incorporated Arranging sub-track fragments for streaming video data
US9357199B2 (en) * 2013-01-04 2016-05-31 Qualcomm Incorporated Separate track storage of texture and depth views for multiview coding plus depth
GB2524531B (en) 2014-03-25 2018-02-07 Canon Kk Methods, devices, and computer programs for improving streaming of partitioned timed media data

Also Published As

Publication number Publication date
JP2009522984A (en) 2009-06-11

Similar Documents

Publication Publication Date Title
KR101320395B1 (en) SVC File Data Sharing Method and SVC File thereof
US8868465B2 (en) Method and system for publishing media content
KR100765745B1 (en) Method and apparatus for creating MPV file, and storing media therefor
KR20200051718A (en) Method, device, and computer program for generating timed media data
JP4818373B2 (en) SVC file data sharing method and file
KR20070108433A (en) Share of video data by using chunk descriptors in svc file format
JP2004287595A (en) Device and method for converting composite media contents and its program
KR20090041772A (en) Method and apparatus for manipulating media object in media player
KR101406332B1 (en) Recording-and-reproducing apparatus and recording-and-reproducing method
WO2010028597A1 (en) Method and system for processing electronic data
KR20040102078A (en) Information recording medium and manufacturing method thereof
KR101293332B1 (en) Video file creation device and video file creation method
JP2008015575A (en) Information processor
WO2001095150A1 (en) Method of using muldi-media information, system and program recording medium therefor
JPWO2020137854A1 (en) Information processing equipment and information processing method
JP5580328B2 (en) Content consumption method and apparatus using metadata
JP2008192224A (en) Data and file system information recording apparatus and recording method
WO2020255757A1 (en) File processing device, file processing method, and program
KR101295377B1 (en) Method for constructing of file format and apparatus and method for processing broadcast signal with file which has file format
US8838638B2 (en) Method and apparatus for generating and accessing metadata in media file format
WO2020255756A1 (en) File processing device, file processing method, and program
CN101395910A (en) Method and system for recording edits to media content
Otto A sound strategy for preservation: Adapting Audio Engineering Society technical metadata for use in multimedia repositories
US20080187281A1 (en) Editing apparatus and editing method
US20150088943A1 (en) Media-Aware File System and Method

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110419

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110719

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110809

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110830

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140909

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4818373

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250